没有合适的资源?快使用搜索试试~ 我知道了~
sample_etl_structure
共24个文件
py:15个
yaml:4个
ini:1个
需积分: 5 0 下载量 174 浏览量
2021-05-18
00:06:19
上传
评论
收藏 12KB ZIP 举报
温馨提示
ETL项目结构样本 /配置 所有配置文件,例如数据库连接,服务器凭据,项目配置等。通常以yaml格式显示 / src 所有的代码,所有的管道 /工具 所有连接器,通知,转换,生成器等-所有此类人员。 /测试 所有ETL测试,单元测试,集成等 / dwh_version 数据库版本控制(在我的情况下使用Alembic进行dwh版本控制) 运行 接受参数并运行特定管道或执行特定需求的运行程序,例如: python run.py --script=load_sales --env=dev
资源推荐
资源详情
资源评论
收起资源包目录
sample_etl_structure-master.zip (24个子文件)
sample_etl_structure-master
alembic.ini 2KB
requirements.txt 288B
run.py 1KB
src
__init__.py 0B
do_on_fail.py 267B
second_etl_pipeline.py 267B
first_etl_pipeline.py 260B
utils
ftp_connector.py 90B
__init__.py 53B
logger.py 403B
postgres_connector.py 96B
README.md 597B
config
prod_config
__init__.py 0B
tables_to_load.yaml 428B
config.yaml 235B
__init__.py 2KB
your_new_config
__init__.py 0B
dev_config
__init__.py 0B
tables_to_load.yaml 428B
config.yaml 235B
db_version
env.py 2KB
script.py.mako 494B
versions
c4eb1c193679_create_dim_locations.py 544B
README 38B
共 24 条
- 1
资源评论
雯儿ccu
- 粉丝: 20
- 资源: 4587
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功