. -
Hadoop 部分
启动命令:
停止命令:
Hadoop 运行
增加集群的存储量/节点
如果只增加集群的存储量,建议增加 节点。
步骤:
、停掉集群包括 和 ,当然也可以不停掉,直接在 的配置文件
里添加新节点的 ,别忘了在 文件里也要添加新添加的 名。
、执行 启动集群
、以下选择一种
如果不手动作平衡,插入的数据将会放在新添加的节点上。以趋于平衡。
如果手动平衡,则 和调用 命令相似,也可加参数
(是平衡阈值,默认是 ,值越低各节点越平衡,但消耗时间也更长)。
在 使 用 时 , 如 果 在 里 面 没 有 配 置
! , 那 么 集 群 内 部 默 认 使 用 " 的 速 度 移 动 数 据 #
$ ,我 们可 以通 过在 里 面配 置 ! 来 加快
的速度。 最开始我们配置的是 ,然后结果是导致 % 运行变得不稳定,出现一些
意外的长 单元,某些 & 时间处理变长 #整个集群负载满满的情况下,外加 的
,在前天的中国 年会上听淘宝调整的为 ,需要调整后实验,看看情况如何。
另外再修改 ! 参数后,需要在 上运行
重启 生效。我们可以通过 停掉平衡任务。作完平衡后,启动
,正常。 果 & 设置的副本数不为 (默认),需要先运行命令 '(
)*+,;
进行设置一个文件的副本系数。如果默认为 则不必。如果执行完平衡以后才改变副本数,会将新
加入到新节点上的所有数据删除。 设置的副本系数只在文件系统写入时有效,并不
影响在新添加节点时,平衡时的副本数;
另外:由于还有 数据库,因此,在运行完平衡以后,将 下的"-./文件删除(防止
出错),启动 ,执行 0%&$"1表名 来进行 表恢复;
. . word.zl-