没有合适的资源?快使用搜索试试~ 我知道了~
2013中国大数据技术大会演讲实录
5星 · 超过95%的资源 需积分: 9 10 下载量 189 浏览量
2015-07-05
13:49:44
上传
评论
收藏 1.08MB PDF 举报
温馨提示
试读
38页
中国移动通信有限公司研究院业务支撑研究所所长孙少陵介绍会议 2013中国大数据技术大会演讲实录
资源推荐
资源详情
资源评论
尊敬的各位来宾,女士们、先生们大家好,欢迎参加2013中国大数据技术大会,我是中国
移动研究院的孙少陵,也是本次会议共同程序主席,受会议委托我向大家介绍一下本次会议。
随着IT技术和互联网的高速发展,世界范围内各行各业都在进行深刻的信息化变革,这使得几
乎每个行业都面临大数据问题,包括银行、金融等行业。随着互联网经济的深化和云计算带来
的成本下降,人们发现互联网公司颠覆传统行业的利器正是数据。但大数据的利用面临诸多的
挑战,首先在技术方面还有许多需要完善的地方,例如如何使大数据系统更具扩展性、效率更
高?如何更好地支持传统数据处理的标准,使其具有应用无缝迁移体验?其次,大数据在商业
模式构建中还需要探索,例如如何搭建数据交易平台,发挥数据综合利用的倍增效应?如何保
护数据隐私情况下时下数据变现?现在法律法规还处在摸索阶段,数据权属如何界定?数据开
放权限在哪?全世界都在探索。
大数据有三个特点:数据资源、平台工具和专业化的人才,大数据人才的匮乏目前成为大
数据广泛应用的短板。国内外的产业界和科技界政府部门都在积极布 局制定战略规划,中国计
算机协会于2012年10月正式成立了大数据专家委员会,探讨大数据核心问题,推动大数据学科
建设和发展,同时构建面向大数据产学 研用的技术交流技术合作技术共享平台。
中国大数据技术大会是目前最具影响力规模最大的大数据领域盛会。大会前身是hadoop技术
大会,从 2012年起大会改由中国计算机协会CCF主办,为了迎接大数据时代的到来,同时也为
了能够今后大会的发展方向,今年大会正式更名为中国大数据技术大会, 主题是应用驱动架构
与技术。大数据的内涵是资产的服务化、资产化。在应用技术快速增长背景下,为了降低成本
获得更好的效能,越来越趋向专业化的系统架构和 数据处理技术,逐渐摆脱了传统的通用技术
体系。如何解决通用和专业技术体系技术之间的取舍平衡?如何解决数据资产化和价值挖掘的
问题?这是大会讨论的主 题。
大数据架构与系统、大数据技术、大数据应用、大数据研究与发展、智能交通与大数据,传统
行业如何驾驭大数据论坛,就这些问题。本次大会 邀请到近百位学术界、行业界的专家做研
讨。覆盖了数据生产的整个生命周期。除了Hadoop2.0 系统、新型系统架构介绍外,还将探讨
流式计算、图式计算等等。本次会议参会超过1500人,大会通过很多形式为专家代表提供交流
互动技术分享的平台。我们 期望本次大会成为大数据技术与应用深度结合的新起点,成为产业
界、科技界与政府部门密切合作的平台。本次大会到场主要嘉宾有:中国工程院院士,大数据
专家 委员会主任李国杰、中科院计算所所长助理副总工程师程学旗、北京大学校长助理李晓明
等。今天参会还有来自政府学术界各企业的嘉宾,感谢大家对本次大会的关 注和支持,谢谢!
来自 <http://tech.163.com/13/1205/09/9FARB8SK00094OB0.html>
中国移动通信有限公司研究院业务支撑研究所所长 孙
少陵介绍会议
2013年12月10日
11:37
分区 2013中国大数据技术大会 的第 1 页
谢谢大家!各位同行欢迎你们参加第七届中国大数据技术大会,这个已经有六年经历的大
会见证了中国大数据的研发,同步于世界最前沿科技飞速发展。中国 大数据技术大会的前身是
Hadoop中国,第一届大会在2008年开始。开始应用于几个大数据生产部门,雅虎2008年宣布
他们拥有13000个节点世界 上最大的Hadoop集群,2006年Hadoop集群只有20个节点。这一
年Hadoop宣布了他们用910个节点,用了320秒排序了一个数据。 2008年也是Hive成为
Hadoop子项目的一年。与2008年相比我提到的几件大事相比,今天大数据处理已经有了飞速
的发展,我相信我们通过参加这 次大会可以学到这个领域最新的技术,和最有希望的发展方
向。讨论欢迎致辞的时候,组委会同事建议我说几句Hadoop和大数据的关系,我想借用美国
一个很 有影响的历史事件来谈谈这个关系。
150年前的美国正经受南北战争的考验,当时美国与经历过工业革命的欧洲相比还是非常落
后农业国家,刚刚上任林肯总统统帅北方的南方 军,与南方的邦联军在激烈的战斗中。同时他
也深刻的讨论到如何将美国建成一个现代化的工业大国,因为当时美国非常落后的,而高等教
育是一个重要的基础,可 是当时美国只有少部分的贵族式的私立大学,显然这样的大学不能满
足大众式的高等教育的。此时一个高等教育高效廉价的大学模式必须要出现,林垦于1862年
签署了美国非常著名一个法案叫做“赠地大学”的法案。这个法案将联邦政府在各州拥有的土
地捐赠给州政府为他们用于大学建设筹金。这些新建大学的结构非常简 单,但是不失大学追求
卓越的精神。从那时起大批贫民子弟可以免费,或者用低价州内学费来接受高等教育。在这种
简单的模式下经过多年的变革,美国出现世界一 流的著名大学,其中包括加州伯克利大学、俄
亥俄州立大学,麻省理工大学等。在大数据时代里有非常相似的发展过程,成熟先进数据库处
理系统已经不能够有效和 低成本的处理日益猛增的海量数据了。那么新型大数据处理模式由此
诞生了,Hadoop就是这个模型一个典型的代表。我们知道新型的大数据处理模式就是我们 大
会中讨论的模式,在质量和性能还有各种各样的缺陷。技术的变革是突飞猛进的,比如说我们
很快听到来自加州大学的演讲就是高性能大数据处理,我相信大数据 系统借鉴先进数据库技术
和高性能计算技术使这一技术不断完善。就像美国州立大学和私立大学共存一样,Hadoop和
商界数据库系统共存,并发挥他们独特不 可替代的作用。
最后我代表其他两位大会主席,许志伟和王建,向程序委员会主席孙少陵以及委员会成
员,对他们为大会各项工作努力表示衷心的感 谢。大会主任李国杰教授,程学旗教授他们委员
给这次大会强有力的支持,我们对他们表示特殊的感谢。查礼博士本身也是第一次Hadoop中
国的组织者之一, 他在幕后做了很多工作,最后感谢不远万里来到中国的美国和国外的嘉宾对
大会的支持,祝大会圆满成功,谢谢大家!
来自 <http://tech.163.com/13/1205/09/9FARMNEC00094OB0.html>
俄亥俄州立大学张晓东谈Hadoop与大数据的关系
2013年12月10日
11:38
分区 2013中国大数据技术大会 的第 2 页
各位来宾上午好!从计算所筹办这个Hadoop中国有两三年了,无论从计算机所还是计算机学
会角度我都应当讲几句话。我们要颁发关于大数据创新大赛 的奖项,报名有六百多个单位。我
们要发布中国大数据技术和产业的白皮书,这个由上百位专家一起努力的、大概工作了半年多
才做出来的成功。最后还要发布今年 一次对大数据技术发展趋势的报告,今天上午都要做这个
事情。我在大数据白皮书序言写了几句话,大数据虽然很红火但是也有争议,讲不清楚,感到
很迷茫,到底 这个大数据怎么发展下去?是不是一种炒作?这个跟我们某种意义讨论大数据的
定义有关系。很多人引用这么一个定义:大数据是用现在的数据不能够处理的那些软 件数据
级。这是具有悖论的定义。你现在即使不能处理,你等到技术好了处理,大数据是未来的事
情,实际上它是一个过程。
我在序言讲所谓大数据就是三件事:
第 一件事是用我们掌握的技术来处理并发展我们的数据产业。这里面强调的是数据产业,没有
大数据。特别强调提高我们数据意识,这里主要是企业界做这个事情。企 业界很务实,套用邓
小平先生一句话,不管大数据还是小数据,只要能挖掘出来价值的数据就是好数据。企业就是
这么干的,等到你把技术搞完了我再来做你赶不上 趟了。
第二件事就是讲大数据还面临许多问题。不管是系统结构、软件,还是应用方法等等,原来技
术解决不了,这对我们科技界来说是个挑战。
第三件事则是讨论最近几年出来的所谓新的技术,比如Hadoop、深度学习等等。
一般人把大数据讲得很窄,只讲第三件事,这是绝对不够的,应该从原来数据处理到未来的数
据处理的整个过程算进去。
中国是发展中国家,我们过去有很多欠债,哪怕使用关系数据库,我们也有很多东西没有做
好。我们企业智能方面也比国外落后。所以我们要用开放的态度真正把中国产业搞起来。我们
现在搞大数据、云计算好像只是停留在喊口号阶段,但这只是一个把手,本质就是实现中国技
术化。
建 国初期第一代领导人讲以工业为主导、以农业为基础,发展中国的现代化建设,当时中国是
农业国,以工业为指导就把工业建立成一个相对完备的体系。而现在,我 们国家四化要并行,
要以信息化带动工业化、城镇化和现代农业化,我们应该将信息化作为一个引领性的工作来
做。只要我们坚持做这件事情我们就不会失去信息化 的机会,谢谢大家。
来自 <http://tech.163.com/13/1205/09/9FARPA5K00094OB0.html>
中国工程院院士李国杰:大数据的三件事
2013年12月10日
11:40
分区 2013中国大数据技术大会 的第 3 页
尊敬的各位来宾欢迎参加我们一年一度大数据的盛会。刚才大会的主席包括我们大会的承
办方李院士对我们大会的主题,大会的定位做了详细的分析。大会由 中国计算机协会主
办,是我们计算机学会大数据专家委员会具体操作协办这个事情。我们除了邀请一线顶级
的专家来跟大家分享我们技术上认识和技术上进步之外。 这里面刚才李院士讲过我们大数
据会上有几个环节,一个我代表大数据委员会向社会发布关于2013年大数据白皮书和
2014年《大数据热点问题与发展趋 势》,我这个下面就是2013 第一届中国大数据技术创
新与创业大赛。第一部分是大数据白皮书。在大数据专家委组织下花了差不多半年时间,
有120名参与,有50名专家直接撰稿提供材 料,来自科研院所、企业和政府部门,涵盖计
算机系统、数据库以及大数据方方面面应用领域的高级专家。白皮书前后修改了十余次,
正式版本有八万字,一定程度 反映了大数据学术界和产业界的共识。我们组织白皮书意图
是什么?我们希望为业界梳理大数据应用现状和发展趋势,为政府制定推动大数据发展的
政策提供一些建 议。同时也希望能够探讨大数据研究当前面临的科学问题和挑战,供相关
领域研究人员提供参考,我们希望为业界、政府和我们从业具体科研人员提供帮助。
关于白皮书
白皮书分六个章节。第 一章节关于大数据发展背景。第二典型的业务先兆,互联网大数
据,通信大数据,网络空间安全大数据,城镇化大数据,金融大数据,健康医疗大数据和
生物信息和 制造大数据。我们把这个环节想重点写,由于篇幅有限我们白皮书里面这个环
节写的比较简要,我们希望在未来版本里面把大数据应用的环节做的更加深入和详实, 数
据的价值只有应用起来才能体现它的价值和前景。
第三部分大数据技术体系现状,我们把大数据整个技术的图跟数据采集、计算挖掘做了详
细的阐述和介绍。
第四章介绍大数据产业链和环境。
第五章介绍大数据人才培养人才资源,只有好的资源才能推动我们产业发展。
最 后一章对大数据发展趋势和建议专家委做一个简单的总结和思考。我们第六章建议和思
考基于我们2012年发布的热点问题和发展趋势以及我们现在看到发展情 况,我们今天发
布的这个可能在我们明年发布的白皮书里面做进一步的阐述。整个专家委第一次撰写这样
的白皮书,来回改了十余次,这样书中内容有一定偏颇和错 误,我们希望逐步的完善,也
希望我们业界、用户能够对白皮书提出一些改进的建议。稍候白皮书将在中国计算机学会
的官方网站正式发布,在会场我们印了一部分 纸质版由于数量有限,我们大会之后立即面
向社区免费公开。这是第一部分关于大数据发展白皮书。
下面我们重点讲一下2014年大数据发展趋势 预测。从去年中国计算机协会大数据专家委
员会成立之后保留节目,我们过程跟去年一样,持续了大概三个月左右,从开始一些调
研,大数据的趋势涉及到哪些领域 哪些话题做一个调研,然后做一些收集,形成一些侯选
的集,然后列成表格方便大家投票描述的表格,最后由专家委投票。目前结果是由120多
程学旗发布《大数据热点问题与发展趋势》
2013年12月10日
11:40
分区 2013中国大数据技术大会 的第 4 页
的集,然后列成表格方便大家投票描述的表格,最后由专家委投票。目前结果是由120多
位里面90个委员 投票,形成我们今天的报告。我们去年分两个环节,一个热点问题一个发
展趋势。今年发布了白皮书,热点问题我们融入了白皮书,这里面我们更多思考2014年
或者说近期大数据业界发展一些趋势的预测。这个预测我们首先十大发展趋势是我们经过
统计,经过大家投票。
统计出的十大发展趋势
第一个发展趋势我们总结叫做大数据从概念化走向价值化。票 选是第一位,总票选93票涉
及几个方面,大数据向更多领域进行扩张。我们知道从去年今年大数据变成一个非常热的
词。在每个应用领域里面大家都提大数据,比 如说我们是大数据金融、大数据安全、大数
据制造、大数据物流、几乎每个领域都提到大数据。大家每个人讲这个概念,我们大数据
专家委员会发现在一些领域里面 实实在在的落实了大数据的价值。所以今年整个我们讲这
些趋势用一个关键词来讲就是说务实。2013年中国大数据从2012年概念炒作到2013年走
入务实 可持续发展的阶段,正是由于这个情况我们十大发展趋势第一个趋势就是大数据从
概念走向了价值化。
第二发展趋势大数据处理架构多样化模式并存。hadoop 与大数据之间的关联和差异,反
映了我们大数据专家委大家的共识,大数据处理不是拿某一个东西,我们数据的管理也许
关系数据同样存在,肯定还同样存在,并不 是由一个架构处理解决所有大数据问题,实际
上由实际需求驱动的。我们在这个总票选71票,得票比较高是大数据处理多样化模式并
存。专家委的意见就是 hadoop的一些新的GPU的处理架构并存。大数据存储和管理未来
会推动存储与管理能力技术提升。和议题相关内存计算成为提高主要的处理之一。大数据
处 理架构的多样化模式并存。
第三发展趋势大数据安全与隐私越来越重要。这个问题基本不用我们解释,我们去年这个
议题已经非常重 要了,有了大数据之后一些碎片化看上去不涉及到那么安全那么隐私的问
题,随着大数据的融合,一是带来一些安全上的挑战,同时为安全提供了新的机会。这有
两 项投票结果,大数据安全33票,大数据个人保护和隐私立法得了20票。
第四趋势大数据分析与可视化成为热点。我们说今年有一 个关键词务实发展。务实发展分
析可视化,大数据专家委投票里面趋势越来越具体化。可视化成为很多专家讨论议题,有
了大数据以后大规模多角度多视角多手段的 数据可视化,整个贯穿了数据分析和数据展示
过程,还有实时处理分析和大数据的处理方法,三个相关结果票选是61票。我们前面的票
少一点,是因为我们点出中 间主要的选项。
第五发展趋势大数据产业成为战略性产业。第一专家委员认识首先大数据产业成为国家战
略性新兴产业是保障国家安全一个重要战略。大企业大数据和政府大数据是一些支柱型产
业,总得票71票。
第六发展趋势数据的商品化和数据共享的联盟化。这 是我提的词。数据共享联盟是我们去
年大家议论的议题,由于数据共享联盟生态环境去年有一些不足,大家还是希望数据共享
联盟能够逐步壮大,成为产业、科研和 学术一个环环相扣的支撑环节和产业发展的核心环
节。另外一个观点由于数据变成资源变成有价值的东西,数据私有化和独占问题是客观存
在的,在客观存在如何界 定数据传输,以及让数据有数据传输保护情况下数据商品化是未
分区 2013中国大数据技术大会 的第 5 页
剩余37页未读,继续阅读
资源评论
- yb030092015-10-05本资源个大数据的科普性介绍资料,适合想要了解大数据基本情况的人
wbillow
- 粉丝: 2
- 资源: 14
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功