没有合适的资源?快使用搜索试试~ 我知道了~
WordCountHadoopProject:Hadoop2.6.0分布式计算的word count map-reduce ma...
共45个文件
java:21个
_success:4个
part-r-00000:4个
需积分: 10 0 下载量 70 浏览量
2021-06-05
10:35:53
上传
评论
收藏 31KB ZIP 举报
温馨提示
WordCountHadoop项目 用于 Hadoop2.6.0 分布式计算的 Word count map-reduce maven java 项目。 这最初只是一个字数统计代码,但此项目中添加了更多内容。 它与文件一起添加以计算项目数组中出现的术语的相对频率。 这些正在通过三种不同的方式解决。 配对方法(最简单的映射器和化简器) 条纹方法 混合方法 ###上面有三个单独的 *.sh 文件来运行不同的算法。 设置 您的系统中应该有 java 1.7 或更高版本,maven 3.3 克隆项目 打包mvn package 然后生成的jar文件就可以在hadoop中使用了。 调用hadoop指定配置文件hadoop的输入和输出hdfs文件系统。 有关使用生成的 jar 文件运行 hadoop 的代码,请参阅上面的 *.sh 文件。 参考: :
资源推荐
资源详情
资源评论
收起资源包目录
WordCountHadoopProject-master.zip (45个子文件)
WordCountHadoopProject-master
pairs.sh 336B
hybrid.sh 339B
input
text.txt 108B
pom.xml 1KB
stripes.sh 342B
output
hybrid
_SUCCESS 0B
part-r-00001 44B
part-r-00000 872B
_SUCCESS 0B
pairs
_SUCCESS 0B
part-r-00001 60B
part-r-00000 1003B
part-r-00000 938B
stripes
_SUCCESS 0B
part-r-00000 879B
.settings
org.eclipse.m2e.core.prefs 86B
org.eclipse.jdt.core.prefs 652B
src
main
resources
relativefrequencyinput.txt 32B
relativefrequencyinput2.txt 29B
java
com
hadoop
relativefrequency
hybrid
RelativeFrequencyInMapperCombiner.java 2KB
WordPairKeyObject.java 3KB
RelativeFrequencyReducer.java 3KB
RelativeFrequencyTool.java 2KB
RelativeFrequencyPairPartitioner.java 411B
pairs
RelativeFrequencyMapper.java 1KB
RelativeFrequencyInMapperCombiner.java 2KB
WordPairKeyObject.java 3KB
RelativeFrequencyReducer.java 2KB
RelativeFrequencyReducerEr.java 2KB
RelativeFrequencyTool.java 2KB
RelativeFrequencyPairPartitioner.java 410B
stripes
RelativeFrequencyStripesPartitioner.java 404B
RelativeFrequencyMapper.java 1KB
RelativeFrequencyReducer.java 1KB
RelativeFrequencyTool.java 2KB
test
Test.java 349B
WordCountCSVMapper.java 642B
WordCount.java 2KB
WordCountMapper.java 718B
WordCountReducer.java 568B
.project 606B
hybrid.sh~ 339B
.classpath 8KB
.gitignore 67B
README.md 966B
共 45 条
- 1
资源评论
按剑四顾
- 粉丝: 28
- 资源: 4622
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
最新资源
- 峰会报告自动化生成基础教程
- 算法竞赛中的离散化 概念总结和基本操作全解
- 算法竞赛位运算(简单易懂)
- 常用一维二维 前缀和与差分算法模板总结
- SAR成像算法+后向投影(BP)算法+星载平台实测数据
- 横向循环焦点轮播图横向循环焦点轮播图横向循环焦点轮播图横向循环焦点轮播图横向循环焦点轮播图横向循环焦点轮播图横向循环焦点轮播图横向循环焦点轮播图横向循环焦点轮播图横向循环焦点轮播图横向循环焦点轮播图横
- 基于Java和HTML的留言墙、验证码、计算器基础项目设计源码
- 基于JAVA C/C++的嵌入式设备组网平台物联网框架设计源码
- 基于Java开发的高性能全文检索工具包jsearch设计源码
- 基于多语言技术的pt遨游助手手机版设计源码
资源上传下载、课程学习等过程中有任何疑问或建议,欢迎提出宝贵意见哦~我们会及时处理!
点击此处反馈
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功