非结构化海量网络数据处理技术研究

为实现网络化测试系统下非结构化海量网络数据的快速分析处理，在关键的算法和系统化集成处理方面提出解决方法。采用内存映射文件方式快速读取海量数据，并设计了时间矩阵算法，用以快速进行同步分析处理；应用分布式中间件方式实现海量数据的并发处理和数据分发，对飞行试验采集的网络数据进行了分析处理，使用这些算法的数据处理软件，可以使处理效率满足飞行试验海量网络数据处理的需求。这些都为新一代机载采集系统应用于飞行试验提供了技术保障。