没有合适的资源?快使用搜索试试~ 我知道了~
温馨提示
大数据项目 各种大数据代码的存储库,以学习大数据中的技术 地图缩小 Map Reduce是Hadoop数据处理框架,是用Java编写的,包含两个主要阶段-Map和Reduce阶段。 映射阶段读取输入数据作为输入拆分,并生成(K,V)键-值对作为输出。 Reduce阶段读取Map的输出并返回一个值。 可以将Reduce视为一个聚合函数,其中最终结果始终是标量。 Sqoop Sqoop是一种数据传输工具,可帮助我们将数据从RDBMS传输到Hadoop / HDFS,反之亦然。 它是一个基于命令的工具,具有用于连接到各种RDBMS系统的连接字符串。 Sqoop支持导入和导出。 导入是指我们将数据从RDBMS导入到Hadoop中,而导出将数据从Hadoop移到RDBMS中。 Sqoop导入命令具有各种选项,可用于不同的导入目标。 火花 Spark是一种快速的数据处理框架,可以有效替代Hadoo
资源推荐
资源详情
资源评论
收起资源包目录
big-data-projects:我在职业生涯中曾使用过的各种大数据代码的存储库 (119个子文件)
sdc.conf 1KB
wsthd.conf 888B
sdk.conf 740B
example.conf 545B
.gitignore 2KB
window_functions.hql 1KB
analytics_functions_agg.hql 1014B
analytics_function_rank.hql 977B
some_string_fns.hql 905B
joins.hql 750B
sorting_example.hql 718B
agg_functions.hql 542B
load_data.hql 446B
sqoop_export_preparation_2.hql 430B
case_example.hql 398B
create_customer.hql 356B
create_order_items.hql 276B
create_order_items_orc.hql 226B
aggregations.hql 220B
set_ops.hql 196B
create_db.hql 153B
row_level_transformation.hql 137B
BigramTester.java 3KB
WCTester.java 3KB
TextPair.java 2KB
BigramCounter.java 2KB
WCWithTool.java 1KB
WCWithCombiner.java 1KB
WordCount.java 1KB
BigramMapper.java 1KB
MinReducer.java 891B
WCMapper.java 680B
BigramReducer.java 648B
WCReducer.java 592B
README.md 3KB
README.md 376B
build.properties 21B
build.properties 21B
README 488B
README 479B
build.sbt 634B
build.sbt 628B
plugins.sbt 22B
plugins.sbt 22B
DailyRevenue.scala 2KB
SetOperationsExample.scala 2KB
AggregationExample5.scala 2KB
OuterJoinExample.scala 2KB
StringManipulationExamples.scala 2KB
DailyRevenueDF.scala 2KB
DataFrameExample2.scala 2KB
RankingByKeyExample.scala 2KB
Sample.scala 2KB
CrimeTypeByMonthDF.scala 1KB
RowLevelTransformationExample.scala 1KB
FilterExample.scala 1KB
AggregationExample6.scala 1KB
RowLevelTransformationFlatMapExample.scala 1KB
StreamingDeptCountKafka.scala 1KB
InactiveCustomersRDD.scala 1KB
CrimeTypeByMonthCoreAPI.scala 1KB
AggregationExample3.scala 1KB
GlobalRankingExample.scala 1KB
StreamingDeptCountFlume.scala 1KB
WordCount.scala 1KB
AggregationExample4.scala 1KB
AggregationExample2.scala 1KB
StreamingDepartmentCount.scala 1011B
SaveAsTextFileWithDelimiters.scala 992B
DataFrameExample.scala 991B
InnerJoinExample.scala 912B
SaveWithCompression.scala 805B
SaveAsTextFileExample.scala 733B
SaveInStandardFormats.scala 726B
SaveInStandardFormat2.scala 716B
AggregationExample1.scala 656B
StreamingWordCount.scala 655B
kafka_intro.sh 821B
sqoop_import.sh 814B
sqoop_import_query_switch.sh 809B
sqoop_import_all.sh 753B
sqoop_inc_import_using_built_in_support.sh 753B
sqoop_import_split-by.sh 732B
sqoop_import_with_num_mappers.sh 729B
sqoop_import_delimiters.sh 710B
sqoop_import_split_by_string.sh 710B
sqoop_export_preparation_1.sh 676B
spark_basic_commands.sh 628B
sqoop_import_delete_target_dir.sh 613B
sqoop_incremental_import_base.sh 607B
sqoop_import_boundary_query.sh 590B
sqoop_import_auto_rest_to_one_mapper.sh 581B
sqoop_import_inc_import_using_where.sh 558B
sqoop_export.sh 533B
sqoop_import_append.sh 519B
sqoop_import_diff_file_format.sh 517B
simple_hive_import.sh 492B
sqoop_import_compress_codec.sh 482B
sqoop_export_column_mapping.sh 476B
sqoop_eval.sh 476B
共 119 条
- 1
- 2
资源评论
居居是居居啦
- 粉丝: 23
- 资源: 4657
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功