我眼中的大数据.doc

我眼中的大数据 "昨天我用手机浏览了一件衣服，今天手机为我推送了衣服的相关信息"这个不经意的 小插曲让我对大数据产生了浓厚的兴趣，在我们的生活中随处可见大数据这一名词，而 大数据又无时无刻不在影响着我们的生活，我不禁好奇究竟什么是大数据呢？ "大数据"的英文名Big Data1997年就已经出现在有关储存技术的论文里，2001年出现在计算机人工智能杂志的 文章标题中。直至最近几年，由于采集的数据急剧增长，常规储存和处理手段难以应付 ，大数据被大量用于表示庞大的数据。美国国家科学基金会（NSF）将大数据定义为：" 由科学仪器、传感设备、互联网交易、电子邮件、音频视频软件、网络点击流等多种数 据源生成的大规模、多元化、复杂、长期的分布式数据集。"著名咨询公司麦肯锡全球研 究所在《大数据：创新、竞争和生产力的下一个前沿》中提出，"大数据是指大小超出了传 统数据库软件工具的抓取、储存、管理和分析能力的数据群"总而言之，大数据是基于科 学技术的发展，通过技术手段对数据进行获取、储存，并综合运用自然科学和人文社会 科学的研究方法，对海量数据进行分析、应用而形成新概念。 大数据的特征： Volume海量：大数据的特征首先就体现为"数量大"。随着信息技术的高速发展，数据 开始爆发性增长。社交网络（微博、推特、脸书）、移动网络、各种智能终端等，都成 为数据的来源。淘宝网近4亿的会员每天产生的商品交易数据约20TB；脸书约10亿的用户 每天产生的日志数据超过300TB。 Velocity高速：与传统数据载体不同，大数据的交换和传播是通过互联网、云计算等 方式实现的，远比传统媒介的信息交换和传播速度快捷。大数据能实现对数据的实时分 析而非批量分析，数据输入、处理与丢弃立刻见效，几乎无延迟。 Variety多样：广泛的数据来源，决定了大数据形式的多样性。大数据大体可分为三 类：一是结构化数据，如财务系统数据、信息管理系统数据、医疗系统数据等，其特点 是数据间因果关系强；二是非结构化的数据，如视频、图片、音频等，其特点是数据间 没有因果关系；三是半结构化数据，如HTML文档、邮件、网页等，其特点是数据间的因 果关系弱。 Value价值：这也是大数据的核心特征。相比于传统的小数据，大数据最大的价值在 于通过从大量不相关的各种类型的数据中，挖掘出对未来趋势与模式预测分析有价值的 数据，并通过机器学习方法、人工智能方法或数据挖掘方法深度分析，发现新规律和新 知识，并运用于农业、金融、医疗等各个领域，从而最终达到改善社会治理、提高生产 效率、推进科学研究的效果。 大数据技术就在我们身边，渗透进我们每个人的日常生活之中，今天我们的衣食住行 各个方面都存在大数据的身影：它提供了全媒体数据，云计算分析，让我们的生活更便 利。大数据通过手机通讯、社交平台、购物聊天、出行导航等每一个生活瞬间中收集数 据，并通过大数据分析技术，了解我们需要什么，主动快速的提供我们需要的信息，方 便我们的生活。 大数据在交通中的应用 以高德地图为例：高德地图提供免费交通信息服务给用户，用户在使用服务的同时也 成为交通信息的贡献者，共享自己所在道路的通行情况，帮助高德获取交通路况信息。 大量的数据通过汇总分析，一方面让高德地图能够为我们提供所需的最优路线、通行时 间、规避拥堵等信息，另一方面高德地图也通过大量的数据获取出租车、物流车通行数 据、道路实时发生的交通事件数据，其中还包括了从交管部门合作获得的数据及高德地 图用户上报的数据等，这些数据又为高德地图改善服务，提供准确的信息打下了基础 大数据的购物广告中的应用 购物中的广告精准投放可以根据〝网络号〞用户的习惯、喜好和需求，有针对性的投 放用户感兴趣或有用的广告。借助cookies的跟踪和庞大的数据库系统的储存，记录下来 大量的姓名和信息，运用大数据技术搜集、分析网络用户的网上"踪迹"，精准地发现目 标消费者，预测消费者行为。在发广告的时候，不是针对每个人，而是针对预测的目标 客户进行精准营销。广告营销者可以借助于网络技术深入洞察消费者的兴趣和需求，把 营销信息制作成消费者"想要的信息"，借助现代化信息技术精确地传递给目标消费，主 动提供给目标所需的相关广告内容。 大数据的在健康医疗中的应用 小米手环、智能手机的各种运动健康APP等各类可穿戴设备的出现，使得运动情况、 血压、心率、体重，血糖，心电图（EKG）等数据能实时被获取，信息的获取和分析的速 度已经从原来的按"天"计算，发展到了按"小时"，按"秒"计算。大量的数据分析能够使 得疾病能在早期被监测到，从而使治疗更容易和有效。通过对特定个体或人群的健康管 理，快速有效地监测保健诈骗。基于大量的历史数据，预测和估计特定疾病或人群的某 些未来趋势。 大数据的未来 未来的大数据除了将更好的解