希嘉大数据平台是一款针对教育行业设计的整体解决方案,旨在帮助学校整合和利用各类数据资源,以提升教育质量和管理水平。该平台涵盖了广泛的数据来源,包括业务数据、机器日志、互联网数据以及各种专门系统的数据,如教务系统、学工系统、科研系统等。此外,它还涉及社交媒体数据、论文数据、专利数据等,构建了一个全面的数据生态系统。
希嘉大数据平台的核心组件包括:
1. 统一数据开放平台(Aeon):这是一个集数据管理和分析于一体的平台,支持对校园应用系统和大数据分析的需求。它为第三方应用提供开放接口,促进教育物联网生态链的建设。
2. 日志处理工具(Immortal):专门针对华为网络设备日志数据进行解析,帮助学校管理和分析网络活动。
3. 数据治理工具(Archon):用于数据的清洗、整理和标准化,确保数据的质量和一致性。
平台架构包括数据采集层、数据存储层、数据计算层、数据缓冲层以及数据调取(接口层)。采用的技术包括探针、爬虫、FTPSqoopFlumeKafkaETLELT等工具进行数据采集,HDFS作为分布式文件系统,Oracle/Mysql作为关系型数据库,Hive作为数据仓库,MongoDB作为非关系型数据库,Spark和Storm作为计算框架,ElasticSearch用于全文检索,Redis作为内存键值数据库,HBase作为列存数据库。
希嘉解决方案的亮点在于:
1. WiFi产品的运用,通过无线Wi-Fi日志和上网URL日志分析校园应用,如热力图、公共设施使用情况、无线打卡和学生管理等。
2. 通过SDN(Software Defined Networking)和OpenDaylight控制器平台,实现网络设备和安全设备的日志分析,提高网络安全和管理效率。
3. 提供行为分析和学生画像功能,深入了解学生的行为习惯、兴趣爱好,以支持个性化教学和人性化管理。
4. 社会热点事件分析功能帮助学校及时了解学生关注的社会动态,为制定相关政策提供依据。
5. 校内导航服务利用无线或蓝牙定位,结合大数据提供个性化信息服务。
希嘉大数据平台的价值在于,它能实现基础网络与应用平台的无缝结合,简化校园应用系统的集成,同时提供强大的数据分析能力,助力学校优化资源利用,提升教学质量,创建更加智慧和安全的校园环境。通过开放的接口,平台可以灵活地适应各种业务需求,促进教育行业的创新和发展。