hadoop2.2+hbase0.96+hive0.12 安装文档

preview
需积分: 0 3 下载量 114 浏览量 更新于2014-08-13 收藏 987KB PDF 举报
从提供的文件信息中,我们可以总结出关于Hadoop、HBase和Hive集成安装的知识点,涉及环境配置、版本兼容性、文件权限、通信机制等多个方面。 Hadoop2.2的安装需要配置SSH无密码互通,安装JDK以及编写Shell脚本,并配置相关文档。这些步骤确保Hadoop集群能够正常运行并进行任务分配。 将HBase0.96整合到Hadoop2.2需要注意权限问题、包的整合以及临时目录的设置。建议将临时目录放在HBase的安装目录中,避免因权限或路径问题导致服务如hmaster或regionserver启动后迅速宕机。同时,整合HBase到Hadoop时需要保证两者的版本一致。 对于HBase与Hive的整合,需要关注客户端和服务器端的配置。在Hive中,默认的元数据库是Derby,但因其使用局限性(无法支持多客户端登录以及登录目录限制),在生产环境中通常会采用MySQL作为替代。安装Hive时,需要将mysql-connector-java-5.1.10-bin.jar以及hive-hbase-handler-0.13.0.jar这两个包放置到Hive安装目录下的lib文件夹中,以确保通信机制得以正常工作。 在Hive安装过程中,需要确认是否安装MySQL,答案是只需要在服务器端安装MySQL即可。同样,Hive也有客户端和服务器端之分。Hive的元数据库分为Derby和MySQL两种,可根据实际需求和环境进行选择。Hive与HBase整合的关键在于确保版本匹配以及正确的包安装。Hive的安装并不必须安装Hadoop,但是安装Hive通常会预先安装好Hadoop环境。进行Hive与HBase整合时,需要准备的工具有HBase的配置文件、Hive的配置文件以及MySQL数据库。 从内容中可以看出,本安装文档在整合Hadoop、HBase和Hive时提供了实践过程中的总结和注意事项,并提供了相关问题导读,这有助于用户在安装时减少错误和不必要的尝试。需要注意的是,由于是通过OCR扫描得到的文档内容,可能会存在识别错误或漏识别的情况,用户在阅读和实践时应保持警惕并结合实际情况进行适当的调整。 综合以上信息,用户在进行hadoop2.2+hbase0.96+hive0.12的集成安装时,应该详细检查各个组件的版本兼容性,确保系统权限设置正确,按照实践指南执行相关配置步骤,并正确设置和使用MySQL数据库作为元数据存储。这样能够保证系统在生产环境中的高可靠性,以及各组件间的顺利通信。