浅谈大数据技术及应用.docx

浅谈大数据技术及应用全文共5页，当前为第1页。浅谈大数据技术及应用全文共5页，当前为第1页。 浅谈大数据技术及应用全文共5页，当前为第1页。 浅谈大数据技术及应用全文共5页，当前为第1页。 浅谈大数据技术及应用（黑体小二） 哈尔滨商业大学管理学院物流工程2015 王兴哲 摘要：大数据的概念由来已久，但在多数人眼中大数据就是数据大，甚至有时和云计算混为一谈。本文主要对大数据的定义进行重新的认识，并将其与云计算加以区别。而在大数据流行的今天，大数据究竟带来了什么有利的影响，或者说它将有什么样的前景。这些问题都将在文中一一列举 关键词：大数据 云计算 应用 浅谈大数据技术及应用 引言 大数据这一术语正是产生在全球数据爆炸增长的背景下,用来形容庞大的数据集合。与传统的数据集合相比,大数据通常包含大量的非结构化数据,且大数据需要更多的实时分析。此外,大数据还为挖掘隐藏的价值带来了新的机遇,同时给我们带来了新的挑战,政府机构最近也宣布了一项加快大数据进程的重大计划,各行各业也都在积极讨论大数据的吸引力。 大数据时代的到来，是全球知名咨询公司麦肯锡最早提出的，麦肯锡称："数据，已经渗透到当今每一个行业和业务职能领域，成为重要的生产因素。人们对于海量数据的挖掘和运用，预示着新一波生产率增长和消费者盈余浪潮的到来。"近几年大数据一词的持续升温也带来了大数据泡沫的疑虑，大数据代表了互联网的信息层(数据海洋)，是互联网智慧和意识产生的基础。包括物联网，传统互联网，移动互联网在源源不断的向互联网大数据层汇聚数据和接受数据。 大数据的定义 一般意义上,大数据是指无法在有限时间内用传统IT 技术和软硬件工具对其进行感知､获取､管理､处理和服务的数据集合。 大数据技术描述了新一代的技术和架构体系,通过高速采集､发现或分析,提取各种各样的大量数据的经济价值。大数据的特点可以总结为 4 个 V,即volume(体量浩大)､variety(模态繁多)､velocity(生成快速)和value(价值巨大但密度很低)。 大数据价值链可分为4个阶段:数据生成､数据采集､数据储存以及数据分析。数据分析是大数据价值链的最后也是最重要的阶段,是大数据价值的实现,是大数据应用的基础,其目的在于提取有用的值,提供论断建议或支浅谈大数据技术及应用全文共5页，当前为第2页。浅谈大数据技术及应用全文共5页，当前为第2页。持决策,通过对不同领域数据集的分析可能会产生不同级别的潜在价值。 浅谈大数据技术及应用全文共5页，当前为第2页。 浅谈大数据技术及应用全文共5页，当前为第2页。 3大数据的价值 大数据在投资者眼里是金光闪闪的两个字：资产。[3] 比如，Facebook上市时，评估机构评定的有效资产中大部分都是其社交网站上的数据。如果把大数据比作一种产业，那么这种产业实现盈利 关键，在于提高对数据的"加工能力"，通过"加工"实现数据的"增值"。Target 超市以20多种怀孕期间孕妇可能会购买的商品为基础，将所有用户的购买记录作为数据来源，通过构建模型分析购买者的行为相关性，能准确的推断出孕妇的具体临盆时间，这样Target的销售部门就可以有针对的在每个怀孕顾客的不同阶段寄送相应的产品优惠卷。 Target的例子印证了维克托·迈尔-舍恩伯格提过的一个很有指导意义的观点：通过找出一个关联物并监控它，就可以预测未来。Target通过监测购买者购买商品的时间和品种来准确预测顾客的孕期，这就是对数据的二次利用的典型案例。如果，我们通过采集驾驶员手机的GPS数据，就可以分析出当前哪些道路正在堵车，并可以及时发布道路交通提醒；通过采集汽车的GPS位置数据，就可以分析城市的哪些区域停车较多，这也代表该区域有着较为活跃的人群，这些分析数据适合卖给广告投放商。 不管大数据的核心价值是不是预测，但是基于大数据形成决策的模式已经为不少的企业带来了盈利和声誉。从大数据的价值链条来分析，存在三种模式： 1手握大数据，但是没有利用好；比较典型的是金融机构，电信行业，政府机构等。 2没有数据，但是知道如何帮助有数据的人利用它；比较典型的是IT咨询和服务企业。 3既有数据，又有大数据思维；比较典型的是Google，Amazon等。 未来在大数据领域最具有价值的是两种事物：1拥有大数据思维的人，这种人可以将大数据的潜在价值转化为实际利益；2还未有被大数据触及过的业务领域。这些是还未被挖掘的油井，金矿，是所谓的蓝海。 下面是大数据在当下的杰出表现：大数据帮助政府实现市场经济调控、公共卫生安全防范、灾难预警、社会舆论监督；大数据帮助城市预防犯罪，实现智慧交通，提升紧急应急能力；大数据帮助医疗机构建立患者的疾病风险跟踪机制，帮助医药企业提升药品的临床使用效果，帮助艾滋病研究机构为患者提供定制的药物；大数据帮助电商公司向用户