没有合适的资源?快使用搜索试试~ 我知道了~
MyMapReduce
共72个文件
java:17个
txt:16个
0:13个
需积分: 5 0 下载量 122 浏览量
2021-03-22
12:03:10
上传
评论
收藏 298KB ZIP 举报
温馨提示
mapreduce-Chi-Che-Fang #环境:已安装Windows + Java SDK 8 #Applications:WordCount,Grep,URLCount(有关更多详细信息,请参阅MapReduce论文) 怎么跑? 切换到该项目的根目录(例如cd / mapreduce-Cih-Che-Fang),并确认路径中不包含“空白” 在Windows操作系统(安装了JDK并设置了JDK环境变量)上执行run_test.bat,并将所有文件输出到“ output_ [APP_NAME]”文件夹。 (例如,wordcount示例将结果输出到output_wordcount文件夹,grep示例将输出结果到output_grep文件夹) 在控制台上查看测试结果,它将告诉您输出是否等于Spark输出。 日志如下: C:\ Users \ user \ 532-project1
资源推荐
资源详情
资源评论
收起资源包目录
MyMapReduce-main.zip (72个子文件)
MyMapReduce-main
input_wordcount
doc5.txt 23B
doc4.txt 30B
doc1.txt 898B
doc3.txt 17B
doc2.txt 131B
user_config_urlcount 194B
input_grep
doc5.txt 23B
doc4.txt 30B
doc1.txt 898B
doc3.txt 17B
doc2.txt 81B
src
Master
Master.java 9KB
MasterListener.java 2KB
Utils
ReducerFunction.java 212B
Partition.java 425B
OutputComperator.java 2KB
UserConfig.java 2KB
MapperFunction.java 253B
Apps
GrepReducerFunction.java 918B
URLCountReducerFunction.java 896B
GrepMapperFunction.java 1KB
WordCountMapperFunction.java 1KB
WordCountReducerFunction.java 766B
User.java 777B
URLCountMapperFunction.java 1KB
Slave
Worker.java 918B
MapperWorker.java 8KB
ReducerWorker.java 6KB
user_config_wordcount 198B
bin
.gitignore 46B
.classpath 348B
output_wordcount
out.0 430B
out.1 472B
spark_out.0 430B
spark_out.1 472B
README.md 2KB
.project 370B
intermediate
tmp.1 456B
tmp.0 0B
input_urlcount
page1.txt 824B
page2.txt 79B
page4.txt 59B
page3.txt 79B
page5.txt 55B
output_grep
out.0 0B
out.1 358B
spark_out.0 0B
spark_out.1 358B
output_urlcount
out.0 154B
out.1 132B
spark_out.0 154B
spark_out.1 132B
sources.txt 1KB
run_test.bat 1KB
local_refresh.bat 112B
docs
output_wordcount
out.0 430B
out.1 472B
spark_out.0 430B
spark_out.1 472B
output_grep
out.0 0B
out.1 358B
spark_out.0 0B
spark_out.1 358B
Docuement.pdf 296KB
output_urlcount
out.0 154B
out.1 132B
spark_out.0 154B
spark_out.1 132B
SparkValidation
spark_urlcount.py 512B
spark_grep.py 559B
spark_wordcount.py 581B
user_config_grep 173B
共 72 条
- 1
资源评论
缪建明
- 粉丝: 41
- 资源: 4685
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功