没有合适的资源?快使用搜索试试~ 我知道了~
《Hadoop开发者》第三期,hadoop学习资料!!!
资源推荐
资源详情
资源评论
<<Hadoop 开发者 >> 第三期
2010 年 6 月 20 日发布
欢迎投稿
出品
出品
出品
出品
Hadoop 技术论坛
总编辑
总编辑
总编辑
总编辑
易剑 ( 一剑 )
副总编辑
副总编辑
副总编辑
副总编辑
Barry(beyi) 代志远 ( 国宝 )
本期执行主编
本期执行主编
本期执行主编
本期执行主编
代志远 ( 国宝 )
编辑
编辑
编辑
编辑
皮冰峰 ( 若冰 ) 易剑 ( 一剑 ) Barry(beyi) 贺湘辉 ( 小米 ) Barry(beyi)
代志远 ( 国宝 ) 柏传杰 ( 飞鸿雪泥 ) 何忠育 (spork) 秘中凯 陈炬
排版
排版
排版
排版 /
/
/
/ 美工
美工
美工
美工 /
/
/
/ 封面设计
封面设计
封面设计
封面设计
代志远 ( 国宝 )
网址
网址
网址
网址
http://www.hadoopor.com
投稿信箱
投稿信箱
投稿信箱
投稿信箱
hadoopor@foxmail.com
刊首语
刊首语
刊首语
刊首语
新一期的 <<Hadoop 开发者 >> 与大家见面了。不知不 觉
Hadoop 开发者已经与大家携手走过半年多了,感谢各位长久以来 多
Hadoop 开发者的支持与鼓励。
Hadoop 是大家目前最热衷的技术话题之一,继 09 年评出国际十
大影响力的热门技术榜首的 MapReduce 编程,基于 MapReduce 实现
的 Hadoop 开源框架逐渐在被大家所接纳和使用,成为了目前市场中
最热门的技术之一。
应运而生的 Hadoop 开发者致力于提供给大家最好的 Hadoop 咨
询,让大家更方便的学习 Hadoop 的应用,但是由于人力有限,在每
期中所能提供的文章质量难以达到最佳。需要让 Hadoop 开发者办的
更好,就需要大家的努力和共同的提高,集思广益,需要 Hadoop 爱
好者共同的参与。
希望大家多多投稿,多提意见。
<<Hadoop 开发者 >> 编辑组
本期执行主编:国宝
2010-6-20
目录
目录
目录
目录
1 Hadoop 中的数据库访问 .............................................. 5
2 MapReduce 中多文件输出的使用 .............................. 13
3 Zookeeper 使用与分析 ............................................... 22
4 浅析一种分类数据模型 .............................................. 30
5 Sector 框架分析 ........................................................... 34
6 Run on Hadoop ........................................................... 49
Hadoop
Hadoop
Hadoop
Hadoop 中的数据库访问
中的数据库访问
中的数据库访问
中的数据库访问
作者 ( 飞鸿雪泥 ) E-mail:jaguar13@yahoo.cn
Hadoop 主要用来对非结构化或半结构化( HBase )数据进行存储
和分析,而结构化的数据则一般使用数据库来进行存储和访问。本文
的主要内容则是讲述如何将 Hadoop 与现有的数据库结合起来, 在
Hadoop 应用程序中访问数据库中的文件。
一
一
一
一 .
.
.
. DBInputFormat
DBInputFormat
DBInputFormat
DBInputFormat
DBInputFormat 是 Hadoop 从 0.19.0 开始支持的一种输入格式,包
含在包 org.apache.hadoop.mapred.lib.db 中,主要用来与现有的数据库系
统进行交互,包括 MySQL 、 PostgreSQL 、 Oracle 等几个数据库系统 。
DBInputFormat 在 Hadoop 应用程序中通过数据库供应商提供的 JDB C
接口来与数据库进行交互,并且可以使用标准的 SQL 来读取数据库中
的记录。在使用 DBInputFormat 之前,必须将要使用的 JDBC 驱动拷贝
到分布式系统各个节点的 $HADOOP_HOME/lib/ 目录下。
在 DBInputFormat 类中包含以下三个内置类:
1 . protected class DBRecordReader
DBRecordReader
DBRecordReader
DBRecordReader implements
RecordReader<LongWritable, T> :用来从一张数据库表中读取一条
条元组记录。
剩余53页未读,继续阅读
资源评论
manorn
- 粉丝: 2
- 资源: 89
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
最新资源
- 基于matlab实现电力系统仿真计算软件包,包括潮流计算,最优潮流计算等.rar
- 基于matlab实现电力系统各种故障波形仿真,单相接地故障,两相间短路,两相接地短路,三相短路等.rar
- 基于matlab实现电动汽车动力性,爬坡性,续驶里程等性能仿真.rar
- Python动态烟花代码.pdf
- 基于matlab实现串口发送接收数据 可配置端口,波特率等 发送可选择ASCII方式或HEX方式
- matlab基于BP神经网络手写字母识别(单一).zip代码9
- 基于matlab实现编写的串口调试工具,数据接收部分采用中断方式,保证了实时的数据显示
- 基于matlab实现39节点电力系统合闸角调控过程中的机组和负荷的灵敏度计算.rar
- HBase数据库性能调优
- 原生微信小程序源码 - -首字母排序选择
资源上传下载、课程学习等过程中有任何疑问或建议,欢迎提出宝贵意见哦~我们会及时处理!
点击此处反馈
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功