没有合适的资源?快使用搜索试试~ 我知道了~
lifesum-challange:Lifesum面试挑战解决方案
共18个文件
py:12个
txt:3个
md:1个
需积分: 7 0 下载量 172 浏览量
2021-07-10
23:38:56
上传
评论
收藏 14KB ZIP 举报
温馨提示
实现了简单的 map reduce 算法来过滤来自 Lifesum API 的 json。 json 大约有 5 亿个条目,应该由 300 块数据解析。 在自定义信号量的帮助下,最大 5 个请求/秒的 API 限制得到遵守,该信号量不仅控制可以并行执行的操作数量,还基于时间范围 - 在这种情况下为 1 秒 [1] . 首先安装依赖: $ make deps 如果你想运行它的测试: $ make tests 运行它: $ make run CTRL+C 完成它并查看结果。 表现 算法瓶颈是网络,从JSON映射和减少300个条目大约需要2ms到5ms,但由于我们不允许对API做超过5个请求/秒,资源消耗成为瓶颈。 还有,从巴西来看,API上执行请求的时间是1s到2s,执行请求的时间很少少于1秒,所以算法感觉真的很慢,因为网络:( 如果每个请求需要一秒钟才能完成,我们将需要大约
资源推荐
资源详情
资源评论
收起资源包目录
lifesum-challange-master.zip (18个子文件)
lifesum-challange-master
under_the_hood.txt 914B
test_requirements.txt 12B
tests
test_semaphore.py 0B
test_data.py 31KB
test_dataset.py 1KB
test_processor.py 4KB
__init__.py 0B
test_requests_pool.py 2KB
challenge
semaphore.py 1KB
dataset.py 881B
__main__.py 4KB
processor.py 5KB
__init__.py 0B
requests_pool.py 1KB
requirements.txt 38B
.gitignore 6B
Makefile 239B
README.md 1KB
共 18 条
- 1
资源评论
吉莫吉鱼
- 粉丝: 15
- 资源: 4591
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功