论文研究-基于Hadoop的城市交通碳排放数据挖掘研究.pdf


-
针对交通数据大吞吐量及时效性等特点,为了更高效地处理该类型数据,探索了一种基于云计算服务模式的、利用Hadoop技术架构可扩展的交通数据处理、发布、服务实现方法,并实现了原型系统。该方法的主要思想是利用Hadoop所提供的分布式文件处理能力对海量的交通数据进行并行处理,该过程效率较高,且运行可靠性强,与传统方法相比具有较为突出的优势。相关实验测试结果显示,该方法大大提高了该类型数据处理时效,取得了较为理想的实验效果,进一步论证了此方法对于处理该类数据的可靠性和有效性。

-
2019-07-22
385KB
论文研究-基于Hadoop的海量日志数据处理 .pdf
2019-08-16基于Hadoop的海量日志数据处理,王小森,,在处理海量数据的时候,传统的单机方法面临着数据存储和计算的瓶颈。本文提出了利用开源框架Hadoop处理海量数据方法,以弥补传统方
1.6MB
论文研究-基于Hadoop的FP-Growth关联规则并行改进算法.pdf
2019-07-22大数据环境下,传统的串行FP-Growth算法在处理海量数据时,占用内存过大、频繁项多,适用于大数据情况的PFP(parallel FP-Growth)算法存在数据量增大无法处理的缺陷。针对这些问题,
1018KB
论文研究-基于Hadoop的RDF数据存储及查询优化.pdf
2019-07-22随着资源描述框架(resource description framework,RDF)数据量的快速增长,利用分布式的方法来存储和管理大规模RDF数据成为当前的研究热点。为了实现对海量RDF数据的高效
329KB
论文研究-基于Hadoop的大规模数据交换的研究 .pdf
2019-08-15基于Hadoop的大规模数据交换的研究,佘影,吴斌,随着
395KB
论文研究-基于Hadoop的三维机房数据管理平台设计研究 .pdf
2019-08-21基于Hadoop的三维机房数据管理平台设计研究,熊仕勇,李沁翰,面向Web的三维机房管理系统旨在为用户构建一个虚拟的机房环境,用户在系统中直观地了解机房信息,管理机房环境,设置报警阈值等。
287KB
论文研究-基于Hadoop平台的数据分析方案的设计应用 .pdf
2019-08-21基于Hadoop平台的数据分析方案的设计应用,姜文,辛阳,面对互联网上的海量数据,单台主机已无法满足其存储和计算要求,分布式存储和分布式计算的应用成为必然的趋势。其中Hadoop是应用较
613KB
论文研究-基于Hadoop的分布式视频识别框架 .pdf
2019-08-16基于Hadoop的分布式视频识别框架,宋一凡,苏菲,随着视频识别需求的日益增长,构建一个高效可靠的大规模视频识别框架,以便于相关应用的开发变得尤为重要。现有分布式Hadoop分布式
509KB
论文研究-基于Hadoop和OSGI的工作流引擎 .pdf
2019-08-16基于Hadoop和OSGI的工作流引擎,张迪,,用于数据密集型计算的数据增长已经大大超出单一处理器的计算能力。在本文中,我们提出了一种基于Hadoop和OSGI的高性能和高可扩展性��
284KB
论文研究-基于hadoop构建局域网云计算平台的分析与设计 .pdf
2019-08-19基于hadoop构建局域网云计算平台的分析与设计,宋春雨,高占春,云计算提出以后,亚马逊,雅虎,微软,IBM等各大厂家都推出了自己的云计算平台。用户可以通过付费来使用这些平台以进行自己的研究
489KB
论文研究-基于Hadoop的多关键字排序方法研究.pdf
2019-09-11在单机环境下按多关键字对大数据排序需要较长的执行时间,为了提高按多关键字对大数据排序的效率,根据Hadoop的MapReduce模型,给出了两种基于Hadoop的多关键字排序方法。方法一在Reduce
614KB
论文研究-基于Hadoop的分布式空间索引设计与实现 .pdf
2019-08-18基于Hadoop的分布式空间索引设计与实现,白鹏伟,杨杨,随着测绘技术不断的发基于Hadoop的分布式空间索引设计与实现基于Hadoop的分布式空间索引设计与实现展,地理信息系统所拥有的地理数据��
643KB
论文研究-基于Hadoop及出租车历史轨迹的乘客推荐算法.pdf
2019-09-13针对智慧城市中乘客打车策略的推荐算法效率不高的问题,使用古典概率学统计历史轨迹中该时间该路段有空车的天数占数据集总天数比例,作为乘客等到空车概率;使用最小二乘法拟合时间与到达空车数曲线,预测乘客等到空
393KB
论文研究-基于Hadoop的地铁日志数据分析的设计与实现 .pdf
2019-08-18基于Hadoop的地铁日志数据分析的设计与实现,陈泰至,雷友珣,互联网的兴起使企业信息化成为必然趋势。随着对日志数据需求的扩大、日志样式的不断更新,传统单机数据处理方法在效率方面暴露出
1.24MB
论文研究-基于Hadoop平台的SVM_WNB分类算法的研究.pdf
2019-07-22SVM算法和朴素贝叶斯分类算法是对大量复杂数据分类中性能优秀的算法。然而它们的缺点使得分类效果受到了影响,而且传统的数据挖掘分类算法也无法满足对于海量数据的处理。针对这些问题,这里对传统的朴素贝叶斯算
919KB
论文研究-基于Hadoop的中医哮喘用药组合关联分析.pdf
2019-09-07针对传统平台运行Apriori算法来挖掘中医病案中用药组合规律时,存在着占用内存空间大、计算效率低和PB级数据无法处理等问题,提出基于Hadoop的中医哮喘用药组合关联分析方法。采用Mapreduce
1.82MB
论文研究-基于Hadoop平台的并行特征匹配算法研究.pdf
2019-07-22很多大企业采用Hadoop分布式文件系统来存储海量数据,而传统的病毒扫描主要针对单机系统环境。研究如何并行化病毒扫描中的核心特征匹配算法来处理分布式海量数据。在Hadoop平台下,基于MapReduc
428KB
论文研究-基于Hadoop的SVM并行化文本分类研究与实现 .pdf
2019-08-16基于Hadoop的SVM并行化文本分类研究与实现,吴泽伦,郑岩,支持向量机(SVM )已成为一种非常流行的分类工具,但支持向量机算法的主要缺点是当它处理的数据集规模很大时需要较大内存和训练��
652KB
论文研究-基于Hadoop分布式改进聚类协同过滤推荐算法研究.pdf
2019-09-11为了改善协同过滤推荐算法在大数据下的稀疏性和可扩展性问题,提出一种基于Hadoop平台的分布式改进聚类协同过滤推荐算法。在分布式平台下,离线对高维稀疏数据采用矩阵分解算法预处理,改善数据稀疏性后通过改
1.0MB
论文研究-基于Hadoop分布式计算平台的磁流体动力学模型仿真研究.pdf
2019-07-23针对磁流体动力学(MHD)仿真需要高计算能力的问题,设计了一种基于Hadoop分布式计算平台的MHD仿真器。将Spark和Hama两种分布式并行计算模型整合到Hadoop生态系统中,分别用于支持内存计
1.63MB
论文研究-基于Hadoop的服饰图像存储与检索关键技术研究.pdf
2019-07-22针对服饰图像都是小文件的特性,提出了一种HDFS和传统关系型数据库相结合的服饰图像及其特征数据的存储结构设计方法,实现了海量图像信息的快速存储和读取;改进了多特征点图像特征提取和匹配算法,并基于Map
586KB
论文研究-基于Hadoop的仿射传播大数据聚类分析方法.pdf
2019-09-07仿射传播聚类算法(AP)是一个新的聚类分析方法,已经被广泛应用于各种领域。APC算法不能用于大型数据的分析。为了克服这个限制,在Hadoop分布式框架的基础上提出一种改进的放射传播聚类分析方法(基于H
768KB
论文研究-基于Hadoop的智能电表平台设计与实现 .pdf
2019-08-15基于Hadoop的智能电表平台设计与实现,乐璐,李慧,当智能电表得到广泛应用时,电网部门每天都要收集和处理大量用户用电数据。传统的单服务器架构面临着海量数据存储和计算的考验,
1.35MB
第14章-基于Hadoop的数据仓库Hive.pdf
2021-02-24第14章-基于Hadoop的数据仓库Hive.pdf
589KB
论文研究-基于Hadoop的时态信息存储与时态关系演算问题研究.pdf
2019-07-22面对海量的非结构化时态信息,构建了在分布式环境下的数据存储模型,并在此基础上提出一种基本的时态数据处理方法。使用Hadoop平台下的分布式、非结构化数据库HBase对海量时态数据进行存储,构造以时态集
543KB
论文研究-基于开源Hadoop的矢量空间数据分布式处理研究.pdf
2019-09-07为实现大规模矢量数据的高性能处理,在开源项目Hadoop基础上,设计与开发了一个基于MapReduce的矢量数据分布式计算系统。根据矢量空间数据的特点,通过分析Key/Value数据模型及GeoJSO
541KB
论文研究-基于Hadoop Streaming的Last比对软件并行化的研究与实现.pdf
2019-09-12随着下一代测序技术的到来,单机版Last比对软件已经不能满足海量数据的处理需求。使用Hadoop Streaming技术将Last比对软件快速部署到云计算环境中,解决当前单机版Last比对软件处理大数
275.76MB
spark-1.6.0-bin-hadoop2.6.tgz
2018-07-13linux中搭建spark环境使用的spark-1.6.0-bin-hadoop2.6.tgz安装包
179.0MB
spark-assembly-1.6.1-hadoop2.6.0.jar
2018-06-11spark-assembly-1.6.1-hadoop2.6.0.jar,欢迎下载,,,,,,,,,,,,,,,,,,,,
56.63MB
flink-shaded-hadoop-3-uber-3.1.1.7.1.1.0-565-9.0.jar
2020-11-16Flink-1.11.2与Hadoop3集成JAR包,放到flink安装包的lib目录下,可以避免Caused by: org.apache.flink.core.fs.UnsupportedFile
443KB
论文研究-运行Hadoop的数据中心流量特性 .pdf
2019-08-15运行Hadoop的数据中心流量特性,杨贺,王洪波,随着越来越多的公司和机构开始使用Hadoop运行他们的业务,关于Hadoop的研究也越来越多的受到人们的关注。但是关于运行Hadoop的数据中心
-
博客
基于java的停车场管理系统
基于java的停车场管理系统
-
学院
电商PC前后端分离项目Spring Boot后台实战第一期
电商PC前后端分离项目Spring Boot后台实战第一期
-
学院
MySQL你该了解的那些事【服务端篇】
MySQL你该了解的那些事【服务端篇】
-
博客
Linux下脚本自动输入sudo密码的方法
Linux下脚本自动输入sudo密码的方法
-
博客
Java多线程学习八:线程池常用的阻塞队列
Java多线程学习八:线程池常用的阻塞队列
-
学院
SecureCRT 连接 GNS3/Linux 的安全精密工具
SecureCRT 连接 GNS3/Linux 的安全精密工具
-
学院
2021年 系统分析师 系列课
2021年 系统分析师 系列课
-
博客
SpringBoot2.0集成Quartz分布式集群配置
SpringBoot2.0集成Quartz分布式集群配置
-
学院
MySQL 高可用工具 DRBD 实战部署详解
MySQL 高可用工具 DRBD 实战部署详解
-
下载
低双折射均匀光纤布拉格光栅斯托克斯参量的研究
低双折射均匀光纤布拉格光栅斯托克斯参量的研究
-
博客
Django Mysql SET SESSION TRANSACTION ISOLATION LEVEL READ COMMITTED
Django Mysql SET SESSION TRANSACTION ISOLATION LEVEL READ COMMITTED
-
学院
PPT大神之路高清教程
PPT大神之路高清教程
-
下载
软件定义网络中的多域控制器的主动同步
软件定义网络中的多域控制器的主动同步
-
博客
CFA一级学习笔记--数量(一)--货币的时间价值
CFA一级学习笔记--数量(一)--货币的时间价值
-
博客
Typora使用技巧
Typora使用技巧
-
下载
网易考拉海购Dubbok框架优化详解
网易考拉海购Dubbok框架优化详解
-
学院
vue3从0到1-超详细
vue3从0到1-超详细
-
学院
Mysql数据库面试直通车
Mysql数据库面试直通车
-
博客
OpenCV-Python官方文档中文翻译19:Canny Edge Detection
OpenCV-Python官方文档中文翻译19:Canny Edge Detection
-
博客
复习static 关键字
复习static 关键字
-
学院
2021 年该学的 CSS 框架 Tailwind CSS 实战视频
2021 年该学的 CSS 框架 Tailwind CSS 实战视频
-
博客
springboot整合redis
springboot整合redis
-
学院
项目管理工具与方法
项目管理工具与方法
-
学院
【硬核】一线Python程序员实战经验分享(1)
【硬核】一线Python程序员实战经验分享(1)
-
下载
小程聊微服务-基于dubbo的mock测试系统
小程聊微服务-基于dubbo的mock测试系统
-
博客
基于java的陶瓷工厂进销存管理系统的设计与实现
基于java的陶瓷工厂进销存管理系统的设计与实现
-
学院
Samba 服务配置与管理
Samba 服务配置与管理
-
学院
Docker从入门到精通
Docker从入门到精通
-
下载
视频编解码的介绍 资源不错 做个记录
视频编解码的介绍 资源不错 做个记录
-
博客
基于java的网络招聘系统的设计与实现
基于java的网络招聘系统的设计与实现