。专家视点。
S一
: 编者按:当今世界正处在一个数据爆炸的时代,大数据浪潮正在席卷全球。这个看似熟悉,但蕴藏着巨 !
:大创新能量的概念给技术、商业和管理,乃至人类的生活方式都带来了巨大变化。此前,凭借云计算和物联
网,我们的软件企业刚体验了腾“云”驾“物”的逍遥,这会又要遨游在大数据的海洋,在这片海域中企业们:
如何把准舵驶入蓝海,是需要下足功夫,找准定位的。本期我们特别邀请华东师范大学终身教授、博士生导:
师、华东师大计算机应用研究所所长顾君忠老师,为读者们解读大数据概念,从技术角度分析大数据,分享:
专家的研究心得与体会。:
:
. . .. .. . . . . .. . . . . .. . .. .
:
大数据与大数据分析
顾君忠
(华东师范大学计算机应用研究所)
摘 要“大数据’l是目前的热门词汇,本文分析了大数据和大数据分析等基本概念和大
数据的特点。针对其引起的技术上的挑战进行了深入分析,突出讨论了在数据库技术上关
于NoSQL与S.QL的挑战,和在机器学习方面的挑战。最后从软件角度对如何实现大数据
的管理、处理和分析,以及相关的技术平台进行了分析和研究。
关键词 大数据 大数据分析 NoSQL机器学习Hadoop
顾君忠,男,1949年生。华东
师范大学终身教授。博士生
导师,华东师大计算机应用
研究所所长、华东师大多媒
1大数据和大数据分析
大数据是最近一两年来的热门词汇。街头巷尾大家都在谈大数据。那么:
体技术研究室主任、上海市
信息化专家委员会委员。目
前研究方向为情景感知计算
什么是大数据?为何现在讨论大数据?对大数据该如何处理?什么是大数据
分析?其产业前景如何?
什么是大数据?这是一个令人困惑的问题。按名字,假如仅仅就是“ 大”,那
么这不是新问题,因为数据的规模一直在膨胀,数据库技术的研究人员和数据库
与大数据分析,著书8本,发
表学术论文200余篇。曾多次
获得国家、地方科技进步、
教学成果等奖项。
系统的供应商一直在努力,数据库的存储能力也一直在扩大,所以,何必大惊小
怪?大数据成为新问题的原因是,这里,“岂是一个‘大’字了得!”
一
位美国大学的学者在其2012年文章1里说川:
‘'Amongallthedefinitionsofferedfor“bigdata,’’myfavoriteisthatitmeansdatathat’Stoobig,too
fast,ortoohardfo rexistingtoolstoprocess.’’
直译起来,就是说:“ 在关于大数据的所有定义中,我喜欢将之定义为那类‘ 太大’、‘太快’,或现存工具‘太难’处
理的数据。”
所以,大数据指的是,其规模、其涌现速度和其处理难点超出目前常规技术能管理、处理和分析的数据。