网格环境下基于OAI的数字图书馆互操作方法研究

发布时间：2020-09-27 21:14

　　解决Web上广域分布的、异构的数字图书馆互操作一直是数字图书馆开发中的关键问题。数字图书馆与网格都具有分布性、异构性、自治性等特征,因此,可以利用网格技术解决数字图书馆互操作问题,在网格环境下实现大规模数字资源的高度共享,为用户提供高质量的信息服务。本文主要对网格环境下基于OAI的数字图书馆互操作方法和关键技术进行研究。首先,现有网格环境下基于OAI的数字图书馆互操作方法在解决互操作问题中存在局限性,主要体现在:(1)元数据采集速度不高;(2)收集节点对收集来的元数据记录相似重复检测效率较低;(3)元数据存储问题导致检索速度不高。本文针对这些不足,提出了一种改进的基于网格、OAI-PMH、移动Agent的三层数字图书馆互操作框架,给出一种数字图书馆互操作新方法。其次,在本文提出的数字图书馆互操作框架基础上,重点研究了框架中间层利用移动Agent技术对元数据进行并行采集,包括HarvesterAgent和DPAgent的设计,以及HarvesterAgent、DPAgent和MasterAgent之间的通信,并设计了相应的实现算法,模拟实验表明在网格中引入移动Agent技术有效提高了元数据采集速度。最后,为了保证互操作方法中的元数据质量,在深入研究现有元数据记录相似重复检测算法的基础上,提出一种改进的元数据记录相似重复检测算法,并通过实验验证了改进算法的有效性。
【学位单位】：燕山大学
【学位级别】：硕士
【学位年份】：2009
【中图分类】：G250.76
【部分图文】：

体系结构图,体系结构,网格服务,软件模块组成

从而彻底的实现了网格服务的规范与现有标准的结合，当然这一切还要归功于 Web 服务，因为此时的 Web 服务已经成熟，并且形成了统一的、被广泛认可的标准，这些正是网格服务所需要的。GT4 提供 API 来构建有状态的 Web 服务，其目标是建立分布式异构计算环境[29]。所有知名的 GT3 协议都被重新设计为可以使用 WSRF，并且GT4 也在其中增添了一些新的 Web 服务组件。GT4 由几个软件模块组成，如图 2-1 所示[30]：

工作原理图

图2-3 OAI工作原理图Fig. 2-3 Principle chart of OAI workingOAI的理论框架及OAI的元数据互操作协议具有以下4个优点。(1)提出学术沟通及交流的新模式 OAI架构使数字化文件能更容易、广泛的传播。基于元数据采集的方式，可以从不同部门、不同数据厂商处收集数据提供信息，促使信息交流遍布各个角落；(2)实现简单 OAI元数据互操作框架的设计以“简单”为原则，在以TTP作为主要访问协议的网络应用环境上实现起来比较容易，可以在短时内架构起OAI服务器和收集器；(3)开放性任何组织和个人都可以使用OAI定义的架构，构建符合AI规范的数据提供和服务提供的服务器。(4)采用HTTP及XML开放性标准 OAI协议利用HTTP协议作为基本

示例,算法,服务器

协议提交到 LDAP 服务器，系统将它们转换成统一的 LDAP放到目录服务器中。采集调度集调度节点是安装有 Globus Toolkit 的节点，负责采集节点衡，并监控采集节点的状态变化，及时调整分配策略，保证最大吞吐量。它主要利用 GridFTP 进行采集程序传输和 GR任务调度处理、远程任务管理等工作。RRS 算法可以解决服务器间性能不一的情况，它用相应的权的处理性能并根据权值分配任务，达到负载均衡的能力，这个服务器各尽其能。WRRS 算法是按权值高低和轮询方式分务器[46]。假定四台服务器的处理能力为 3:1:1:1，则服务器分 3-2 所示[47]。

【共引文献】