yelp-3nf：3NF使用Spark对S3上的Yelp数据进行规范化并将其加载到Redshift中-使用Apache Airf...
需积分: 10 52 浏览量
2021-02-04
15:40:31
上传
评论
收藏 1MB ZIP 举报
yelp-3nf-master.zip （51个子文件） 
yelp-3nf-master images 
copy_to_redshift.png 117KB main.png 20KB aws-redshift-connector.png 15KB redshift-connection.png 45KB 1200px-Apache_Spark_Logo.svg.png 63KB 1*eeiD15Xwc_2Ul2DA5u_-Gw.png 40KB aws-connection.png 49KB amazon-s3-logo.png 3KB airflow-stack-220x234-613461a0bb1df0b065a5b69146fbe061.png 8KB 1200px-Yelp_Logo.svg.png 99KB spark_jobs.png 103KB livy_http_connection.png 41KB data-model.png 436KB
dwh.cfg 352B delete_redshift_cluster.ipynb 7KB create_redshift_cluster.ipynb 11KB airflow plugins spark_plugin __init__.py 442B operators spark_operator.py 15KB __init__.py 0B redshift_plugin __init__.py 744B macros __init__.py 0B redshift_auth.py 566B operators __init__.py 0B s3_to_redshift_operator.py 18KB redshift_check_operator.py 5KB __init__.py 0B dags main.py 3KB __init__.py 0B configs table_definitions.yml 12KB check_definitions.yml 1KB subdags data_quality_checks.py 1023B copy_to_redshift.py 3KB __init__.py 0B spark_jobs.py 2KB scripts businesses.py 1KB photos.py 480B tips.py 555B checkins.py 678B business_attributes.py 5KB users.py 530B business_categories.py 3KB business_hours.py 2KB city_weather.py 6KB elite_years.py 704B friends.py 702B addresses.py 929B cities.py 2KB reviews.py 581B spark-jobs-playground.ipynb 112KB .gitignore 38B README.md 22KB
评论0
最新资源