没有合适的资源?快使用搜索试试~ 我知道了~
rsds:用Rust编写的Dask Scheduler
共89个文件
rs:50个
py:19个
bin:4个
需积分: 9 0 下载量 115 浏览量
2021-05-07
16:10:01
上传
评论
收藏 194KB ZIP 举报
温馨提示
RSDS (Rust Dask调度程序) rsds是集中式服务器和调度程序的Rust实现。 它主要用作评估使用没有自动内存管理的语言编写的Dask服务器的性能提升以及对不同调度算法进行基准测试的实验。 免责声明 Dask / distributed具有非常复杂的功能集和协议,目前我们不支持大多数高级功能,例如仪表板或自定义通信协议(UCX)。 如果rsds可以运行您的用例,那么如果调度程序是管道的瓶颈,则可能会看到一些加速。 如果不是这样,它实际上可能比Dask慢,因为它使用了更简单的调度试探法。 YMMV。 如果您的管道无法由rsds运行,请随时向我们发送问题。 用法 要编译和使用rsds ,必须安装Rust工具链。 您可以使用进行安装。 构建rsds : $ RUSTFLAGS= " -C target-cpu=native " cargo build --release
资源推荐
资源详情
资源评论
收起资源包目录
rsds-master.zip (89个子文件)
rsds-master
Cargo.lock 72KB
.github
workflows
test.yml 2KB
release.yml 2KB
tests
test_worker.py 472B
data
pandas-update-graph-1.txt 944B
pandas-update-graph-2.bin 8KB
register-heartbeat-int.bin 61B
pandas-update-graph-1.bin 5KB
pandas-update-graph-2.txt 11KB
steal-response-state-none.bin 93B
conftest.py 5KB
test_advanced.py 3KB
test_basic.py 6KB
ci
make_release.py 1KB
requirements.txt 25B
resources
speedup-rsds-ws-1.png 29KB
speedup-rsds-ws-7.png 31KB
LICENSE 1KB
src
error.rs 745B
server
mod.rs 60B
task.rs 10KB
worker.rs 2KB
client.rs 758B
core.rs 25KB
bin
estee-scheduler.py 4KB
rsds-worker.rs 2KB
rsds-scheduler.rs 5KB
worker
mod.rs 37B
state.rs 779B
rpc.rs 11KB
reactor.rs 2KB
util.rs 1KB
test_util.rs 6KB
protocol
clientmsg.rs 4KB
mod.rs 1KB
protocol.rs 32KB
key.rs 4KB
workermsg.rs 7KB
generic.rs 6KB
scheduler
utils.rs 810B
level
mod.rs 51B
scheduler.rs 6KB
test_util.rs 1KB
mod.rs 988B
protocol.rs 2KB
task.rs 5KB
graph.rs 13KB
metrics.rs 4KB
workstealing
mod.rs 58B
scheduler.rs 17KB
random
mod.rs 52B
scheduler.rs 2KB
worker.rs 1KB
comm.rs 11KB
common
key_id_map.rs 3KB
mod.rs 314B
id_counter.rs 214B
cycle_wrapped.rs 726B
wrapped.rs 2KB
comm
mod.rs 156B
notifications.rs 5KB
rpc.rs 18KB
comm.rs 5KB
reactor.rs 17KB
trace.rs 6KB
lib.rs 305B
Cargo.toml 1KB
setup.cfg 32B
dask
message-gallery.ts 7KB
benches
protocol.rs 3KB
reactor.rs 3KB
scheduler.rs 3KB
.gitignore 43B
README.md 3KB
scripts
usecases.py 7KB
benchmark_run.py 2KB
reference.json 4KB
postprocessing
trace.py 14KB
charts.py 2KB
summary.py 885B
bokeh_timeline.py 8KB
monitor
report.py 8KB
src
trace_io.py 3KB
cluster.py 4KB
monitor.py 2KB
postprocess.py 3KB
benchmark.py 24KB
perftest.py 6KB
requirements.txt 380B
共 89 条
- 1
资源评论
dilikong
- 粉丝: 24
- 资源: 4597
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功