网格环境下的异构数据集成与分布式查询 (2009年)

在介绍网格环境下异构数据集成与分布式查询的研究中，文章涉及了两个重要概念：OGSA-DAI（Open Grid Services Architecture Data Access and Integration）和OGSA-DQP（Open Grid Services Architecture Distributed Query Processing）。这两个中间件平台是英国e-Science项目的一部分，旨在解决网格计算环境中的数据访问和分布式查询问题。 OGSA-DAI是一个中间件平台，主要用于服务化访问多种数据库，并允许数据库通过网格服务的形式对外共享数据。OGSA-DAI的体系结构主要分为四个层次：数据层、业务逻辑层、表示层和客户端层。数据层包括各种数据资源，通过OGSA-DAI实现数据的暴露。业务逻辑层包含了OGSA-DAI的核心功能，分为引擎和活动两个部分。引擎负责检查和处理表示层传递的执行文档，并将文档分解为不同的活动。活动根据功能可以分为查询、表示转换和传输三类，分别负责与数据源交互、结果格式化以及数据输出处理。表示层为数据服务资源的暴露提供所需的功能，并封装Web服务接口。客户端层负责与数据服务和资源进行交互。 在文章中，作者通过两个例子详细阐述了OGSA-DAI的编程框架，分别是异构数据集成和多节点分布式数据查询。在实现异构数据访问与集成方面，OGSA-DAI项目通过构建在OGSA框架之上，使得多种数据库可以被服务化访问，并通过网格服务共享数据。尽管OGSA-DAI关注于数据访问的基础层次，但它为数据集成提供了基础，并与OGSA-DQP项目保持密切的合作关系。 OGSA-DQP则专注于分布式查询处理，它利用OGSA-DAI提供的数据集成基础，支持对异构数据源进行查询操作。OGSA-DQP利用了OGSA-DAI的业务逻辑层的活动和引擎，实现对数据的查询和处理，最终实现跨节点的数据查询与结果的整合。 文章中还提到了OGSA-DAI与WSRF（Web Services Resource Framework）和WSI（Web Services Interface）的兼容性，展现了其开放性和对现有标准的支持。OGSA-DAI支持两种实现，分别是与WSRF兼容的实现和与WSI兼容的实现。因此，客户端应用程序需要与相应的标准兼容，以实现与数据服务和资源的交互。 文章的研究和实现展示了网格环境下的异构数据集成与分布式查询的强大能力，为处理大规模、分布式的数据提供了有效的方法。同时，该研究强调了OGSA-DAI和OGSA-DQP在网格计算和大数据分析领域的重要性和应用前景。通过这些中间件平台，研究者和工程师能够更容易地构建复杂的数据集成系统和执行复杂的查询任务，从而实现更高效的计算和数据管理。