基于云计算和Hadoop的网络舆情监控系统设计

针对我国大学生群体的舆情管理需求，文中设计了功能完备的舆情信息监控系统。该系统由数据采集、数据处理、话题发现、舆情分析四个模块组成。基于Hadoop技术设计了系统的数据采集和数据处理模块，架构了数据存储的Hdfs分布式文件管理体系，实现了舆情数据信息的高效存储；使用云计算中的MapReduce编程模型和语义分析算法实现了话题发现与舆情分析模块，从而完成对舆情数据信息的分析。经测试，该系统运行稳定、数据分析精准且便于部署，可以实现舆情监控管理的需求。