(完整版)hadoop常见笔试题答案.docx
版权申诉
5星 · 超过95%的资源 11 浏览量
2022-07-13
14:06:44
上传
评论 1
收藏 105KB DOCX 举报 
Hadoop 测试题
一．填空题，1 分（41 空），2 分（42 空）共 125 分
1. (每空 1 分) datanode
2. (每空 1 分)HDFS 中的 block 默认保存
3. (每空 1 分) ResourceManager
负责 HDFS 数据存储。
份。
程序通常与 NameNode 在一个节点启动。
3
4. (每空 1 分)hadoop 运行的模式有： 单机模式 、 伪分布模式 、 完全分布式 。
5. (每空 1 分)Hadoop 集群搭建中常用的 4 个配置文件为： core-site.xml 、 hdfs-site.xml
、 mapred-site.xml 、 yarn-site.xml 。
6.
(每空 2 分)HDFS 将要存储的大文件进行 分割 ， 分割 后存放在既定的存储块
中，并通过预先设定的优化处理，模式对存储的数据进行预处理，从而解决了大文件储
存与计算的需求。
7. (每空 2 分)一个 HDFS 集群包括两大部分，即 namenode 与 datanode 。一般来说，一
个集群中会有一个 namenode 和多个 datanode 共同工作。
8. (每空 2 分) namenode 是集群的主服务器，主要是用于对HDFS 中所有的文件及内容
数据进行维护，并不断读取记录集群中 datanode 主机情况与工作状态，并通过读取与
写入镜像日志文件的方式进行存储。
9. (每空 2 分) datanode 在 HDFS 集群中担任任务具体执行角色，是集群的工作节点。文
件被分成若干个相同大小的数据块，分别存储在若干个 datanode 上， datanode 会定
期向集群内 namenode 发送自己的运行状态与存储内容，并根据 namnode 发送的指
令进行工作。
10. (每空 2 分) namenode 负责接受客户端发送过来的信息，然后将文件存储位置信息发
送给 client ，由 client 直接与 datanode 进行联系，从而进行部分文件的运算与操作。
11. (每空 1 分) block 是 HDFS 的基本存储单元，默认大小是 128M 。
12. (每空 1 分)HDFS 还可以对已经存储的 Block 进行多副本备份，将每个 Block 至少复制到
3 个相互独立的硬件上，这样可以快速恢复损坏的数据。
13. (每空 2 分)当客户端的读取操作发生错误的时候，客户端会向 namenode 报告错误，并
请求 namenode 排除错误的 datanode 后，重新根据距离排序，从而获得一个新的
的读取路径。如果所有的 datanode 都报告读取失败，那么整个任务就读取失败。
14. (每空 2 分)对于写出操作过程中出现的问题， FSDataOutputStream 并不会立即关闭。
客户端向 Namenode 报告错误信息，并直接向提供备份的 datanode 中写入数据。备份
datanode 被升级为首选 datanode ，并在其余 2 个 datanode 中备份复制数据。
NameNode 对错误的 DataNode 进行标记以便后续对其进行处理。
15. (每空 1 分)格式化 HDFS 系统的命令为：
16. (每空 1 分)启动 hdfs 的 shell 脚本为：
17. (每空 1 分)启动 yarn 的 shell 脚本为：
18. (每空 1 分)停止 hdfs 的 shell 脚本为：
hdfs namenode –format
。
start-dfs.sh
start-yarn.sh
stop-dfs.sh
。
。
。
19. (每空 1 分)hadoop 创建多级目录（如：/a/b/c）的命令为： hadoop fs –mkdir –p /a/b/c 。
20. (每空 1 分)hadoop 显示根目录命令为： hadoop fs –lsr
21. (每空 1 分)hadoop 包含的四大模块分别是： Hadoop common
。
、 HDFS
、
- 1
- 2
- 3
前往页