没有合适的资源?快使用搜索试试~ 我知道了~
sprite2:Sprite2是一个分布式python执行环境,旨在用于基于分析的工作负载
共20个文件
py:9个
ipynb:4个
txt:2个
需积分: 5 0 下载量 106 浏览量
2021-05-16
19:42:17
上传
评论
收藏 674KB ZIP 举报
温馨提示
雪碧2 Sprite2是一个分布式python执行环境,旨在用于基于分析的工作负载。 它支持基于无服务器技术和dask的即席功能执行。 Sprite2的目的是提供一种方法,以尽可能少的操作开销帮助扩展批量工作负载。 许多解决方案(例如Spark,分布式dask等)都需要专用的计算机集群。 设置和支持专用集群的操作工作并非易事。 Sprite2没有此要求。 它使用AWS lambda扩展其计算需求。 用法示例 安装 AWS环境 当前,该库的使用在很大程度上取决于AWS。 Lambda是无服务器执行后端。 因此,运行所有spark2脚本(请参见下文)将假定您的AWS凭证以AWS标准方式在环境上可用。 请参阅: 。 aws configure --profile [name] Python 建议使用 。 运行此命令以安装依赖项:: pip install -r requirem
资源推荐
资源详情
资源评论
收起资源包目录
sprite2-master.zip (20个子文件)
sprite2-master
config
cloudformation.yaml 834B
sprite2
main.py 4KB
utils.py 476B
tests
test_aws.py 277B
__init__.py 0B
__init__.py 0B
aws.py 3KB
dask.py 2KB
requirements-aws.txt 71B
Dockerfile 949B
requirements.txt 75B
examples
2_dask.ipynb 983KB
4_task_reduction.ipynb 108KB
primes.py 799B
1_basic.ipynb 11KB
3_find_primes.ipynb 3KB
docker-compose.yml 942B
setup.py 406B
.gitignore 49B
README.md 3KB
共 20 条
- 1
资源评论
MorisatoGeimato
- 粉丝: 46
- 资源: 4664
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功