没有合适的资源?快使用搜索试试~ 我知道了~
aws-airflow-demo:帖子的项目文件
共33个文件
py:13个
xml:7个
json:5个
需积分: 9 2 下载量 47 浏览量
2021-05-24
00:15:26
上传
评论
收藏 284KB ZIP 举报
温馨提示
使用Apache Airflow在Amazon EMR上运行PySpark应用程序 概述 文章的项目文件, 。 请参阅帖子以获取有关使用项目文件的完整说明。 建筑学 以下是该帖子演示的最终高级架构。 该图以红色显示了DAG Run请求的大概路线。 该图包括一个可选的S3网关VPC端点,在本文中未详细介绍,但建议使用它以提高安全性。
资源推荐
资源详情
资源评论
收起资源包目录
aws-airflow-demo-main.zip (33个子文件)
aws-airflow-demo-main
iam_policy
airflow_emr_policy.json 1KB
dags
throw_exception.py 1KB
inject_bash_command.py 833B
get_env_vars.py 988B
clean_mwaa_db.py 3KB
multiple_steps.py 2KB
spark_pi_example.py 3KB
get_airflow_cfg.py 1013B
get_py_pkgs.py 828B
sns_example.py 1KB
bakery_sales.py 5KB
airflow_variables
dag_run_config.json 113B
admin_variables.json 408B
LICENSE 11KB
emr_steps
emr_steps.json 2KB
.idea
aws.xml 294B
codeStyles
codeStyleConfig.xml 149B
misc.xml 185B
vcs.xml 249B
modules.xml 284B
aws-airflow-demo.iml 526B
.gitignore 176B
inspectionProfiles
Project_Default.xml 2KB
profiles_settings.xml 228B
requirements.txt 161B
.gitignore 5KB
helper_scripts
clone_repo_upload_to_s3.py 2KB
dags_to_s3_from_github.py 2KB
trigger_dag.py 1KB
README.md 779B
job_flow_overrides
job_flow_overrides.json 2KB
diagram
Airflow_UI.png 180KB
Architecture.png 86KB
共 33 条
- 1
资源评论
曲奇小朋友
- 粉丝: 17
- 资源: 4575
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功