大数据技术在计算机网络信息管理中的应用.docx
需积分: 5 128 浏览量
2022-07-15
09:03:53
上传
评论
收藏 24KB DOCX 举报
大数据技术在计算机网络信息管理中的应用
【摘要】随着网络技术的不断发展，大数据技术也逐渐进入人们的视野，同样也使计
算机网络也迎来了更大的挑战和机遇。大数据技术简单来说就是对海量数据进行分析和处
理，其快速处理数据和低廉的应用成本，使得大数据技术广泛应用于计算机网络信息管理
中。如今大数据已经备受企业的宠爱，不仅能够为企业提供高效技术支持，还能推动企业
的发展，因此，保护计算机网络信息安全将迫在眉睫。本文通过介绍大数据技术及存在的
安全因素，对大数据技术在计算机网络信息管理中的应用方法和实际应用进行详细分析。
【关键词】大数据技术;计算机网络;信息管理;应用
近年来，随着网络技术的不断发展，人与人之间的沟通方式变得更加便捷，而背后所
承载的就是庞大的数据量，同时数据来源也越来越多，那么这就需要更大的数据存储空
间，大数据技术就应运而生。大数据技术的出现使得网络信息所产生的庞大数据的存储和
管理成为了现实，因此，全面探究大数据在计算机网络信息管理中应用有着重要意义。
一、大数据技术
（一）大数据的定义
大数据又称“巨量资料”，是指通过多渠道方式，以多元化形式搜集获取的庞大数据
组，来源包括社交网络、电子商户网站、顾客访问记录等。大数据具有大容量、多样化、
高速度以及高价值等特点，因此被广泛应用于社会生活的各个领域。大数据技术除了能够
存储海量信息外，还能够对存储的数据信息进行合理处理。在实际网络信息管理中，为了
改变传统的数据思维模式，就需要有更加先进的技术来支撑。而大数据技术所具有的独特
的信息处理特点，给网络信息管理提供了技术支持。目前，LSI 技术是常用的大数据技
术，该技术的信息存储量可达千万亿 TB，甚至是十万亿亿 TB 以上。
（二）大数据技术的核心关键
大数据技术主要由数据收集、数据存储、数据处理、数据挖掘等核心技术组成。在整
个大数据中，数据收集技术是核心环节，即对来源于不同渠道的结构化和非结构化数据进
行采集。一般情况下，采集方式主要有数据库采集、网络数据采集以及文件采集等。目
前，常见的数据库采集有 Sqoop、ETL 两种。网络数据采集是借用网络爬虫技术或网站公
开 API，从网页获取数据，并统一结构化为本地数据的一种数据采集方式。文件采集则是
基于 ELK 日志采集与增量采集等来对实时的文件进行采集和处理的一种方式。
评论0
最新资源