—·《中国大数据技术 / 应用 / 售前 交流圈 QQ 群: 322914180 》·—
大数据的前世今生:大数据特征与发展历程
大数据( big data )是这样的数据集合:数据量增长速度极快,用常规的
数据工具无法在一定的时间内进行采集、处理、存储和计算的数据集合。
大数据具有以下 五大特征( 4V+1O)的数据才称之为大数据 ,即:
数据量大( Volume)。第一个特征是数据量大,包括采集、存储和计算的
量都非常大。大数据的起始计量单位至少是 P(1000个 T)、E(100 万个 T)
或 Z(10 亿个 T)。
类型繁多( Variety )。 第二个特征是种类和来源多样化。包括结构化、半
结构化和非结构化数据,具体表现为网络日志、音频、视频、图片、地理位置
信息等等,多类型的数据对数据的处理能力提出了更高的要求。
价值密度低( Value )。 第三个特征是数据价值密度相对较低,或者说是浪
里淘沙却又弥足珍贵。随着互联网以及物联网的广泛应用,信息感知无处不
在,信息海量,但价值密度较低,如何结合业务逻辑并通过强大的机器算法来
挖掘数据价值,是大数据时代最需要解决的问题。
速度快时效高( Velocity )。 第四个特征数据增长速度快,处理速度也
快,时效性要求高。比如搜索引擎要求几分钟前的新闻能够被用户查询到,个
性化推荐算法尽可能要求实时完成推荐。这是大数据区别于传统数据挖掘的显
著特征。