没有合适的资源?快使用搜索试试~ 我知道了~
MyMapReduce:mapreduce的实现
共36个文件
class:14个
java:11个
txt:6个
需积分: 5 0 下载量 104 浏览量
2021-07-09
10:21:35
上传
评论
收藏 297KB ZIP 举报
温馨提示
SHAVADOOP 项目 Map Reduce在Java中的实现 一、简介 作为该项目的一部分,我实施了一个程序,该程序遵循 Google 科学论文的 Map Reduce 架构。 这个程序是用 Java 编写的,对给定的文档执行“字数统计”,并返回一个包含每个单词出现次数的文件。 在该程序的架构中,有一个 Master 负责指导 Map-Reduce 作业,而 Slaves 是远程机器,它们以分布式方式执行任务。 主机读取和剪切 - 根据给定的行数 - 输入文本,并将行以分布式方式发送给 Slaves,Slaves 将“拆分”数据并将它们以 Key (word) 的形式写入文件中 -值(单词出现的次数)。 这一步是地图。 在每个“拆分”结束时,Master 读取文件并构建一个字典,该字典将引用找到它们的单词和文件。 键(字)-值(文件地址) 当所有 Maps 完成后,对于字典中的每
资源推荐
资源详情
资源评论
收起资源包目录
MyMapReduce-master.zip (36个子文件)
MyMapReduce-master
Split_Mapping.jar 2KB
um4.txt 121B
src
map_shavadoop
Split_Mapping.java 2KB
shavadoop
Text_Spliter.java 844B
Split_Mapping.java 973B
Main.java 5KB
Reduce_Map.java 1KB
ExecOnMachine.java 4KB
local_shavadoop
Comparator.java 537B
Parallelize.java 5KB
Dictionnaires.java 1KB
Main.java 6KB
reduce_shavadoop
Reduce_Map.java 2KB
bin
map_shavadoop
Split_Mapping.class 4KB
shavadoop
Text_Spliter.class 2KB
Main.class 3KB
ExecOnMachine.class 3KB
ExecOnMachine$MyUserInfo.class 4KB
local_shavadoop
Parallelize.class 4KB
Parallelize$MyUserInfo.class 3KB
Parallelize2.class 293B
Main.class 7KB
ExecOnMachine.class 3KB
Dictionnaires.class 3KB
ValueComparator.class 1KB
ExecOnMachine$MyUserInfo.class 3KB
reduce_shavadoop
Reduce_Map.class 3KB
um3.txt 191B
input.txt 15KB
um1.txt 149B
Reduce_Map.jar 2KB
README.md 8KB
liste_pc 2KB
result.txt 0B
jsch-0.1.51.jar 256KB
um2.txt 156B
共 36 条
- 1
资源评论
Dr熊吉
- 粉丝: 30
- 资源: 4603
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
最新资源
- python-leetcode面试题解之第157题用Read4读取N个字符-题解.zip
- python-leetcode面试题解之第156题上下翻转二叉树-题解.zip
- python-leetcode面试题解之第155题最小栈-题解.zip
- python-leetcode面试题解之第153题寻找旋转排序数组中的最小值-题解.zip
- python-leetcode面试题解之第152题乘积最大子数组-题解.zip
- python-leetcode面试题解之第151题反转字符串中的单词-题解.zip
- python-leetcode面试题解之第150题逆波兰表达式求值-题解.zip
- python-leetcode面试题解之第149题直线上最多的点数-题解.zip
- python-leetcode面试题解之第148题排序链表-题解.zip
- python-leetcode面试题解之第147题对链表进行插入排序-题解.zip
资源上传下载、课程学习等过程中有任何疑问或建议,欢迎提出宝贵意见哦~我们会及时处理!
点击此处反馈
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功