基于oai和mets远程收集数据的方法和流程赵阳zhaoyang@

基于oai和mets远程收集数据的方法和流程赵阳zhaoyang@内容摘要：

d „ „ / r e c o r d h e a d e r „ „ / h e a d e r m e t a d a t a a b o u t 符 合 C A L I S 元 数 据 规 范 的 元 数 据 片 断 / m e t a d a t a C A L I S _ O B J : o b j I n f o „ „ / C A L I S _ O B J : o b j I n f o / a b o u t CALIS RECORD V1.0 用于维护元数据与 METS 一致的四项信息 模式一： OAIDP / METSDP+MQ联动 数据格式 (对象数据 ) 模式一： OAIDP / METSDP+MQ联动 实际收割测试   学位论文和特色库项目验收前，采用 模式一方式收割  学位论文 本地系统在部分参建馆完成升级、数据迁移和发布工作；  在厂商和参建馆配合下， CALIS技术中心和学位论文子项目组共同进行数据收割。  参加测试的学校 :  TPI:中国人民大学 ,中国农业大学  TRS:清华大学  北大方正 :北京大学  杭州麦达 :北京大学医学院 模式一： OAIDP / METSDP+MQ联动 实际收割测试  收割结果  实时自动收割：  本地系统和数据都存在问题  中心系统对本地系统的自动收割难以有效进行  手工收割 :  本地系统能顺利提交数据  但所上传的数据仍存在问题  本地系统存在的主要问题  系统 bugs  数据问题 模式一： OAIDP / METSDP+MQ联动 实际收割测试 (系统 bugs)  OAIDP本身的 bugs  比较容易发现。 但本地管理员仍缺乏有效易用的工具。  METSDP本身的 bug问题以及 MQ配置问题  难以由本地管理员自行发现。  OAIDP+METSDP+MQ联动问题  厂商技术人员和本地管理员都难以测试和发现。  其他问题  著录和导入工具不完备。  本地 DP所在机器软硬件系统的不稳定。  DP本身的稳定性和可靠性问题。  METS包传输丢包问题。 模式一： OAIDP / METSDP+MQ联动 实际收割测试 (数据问题 )  数据不符合 schema  导出的 OAI和 METS包文件，其数据不符合 schema  数据必备性问题  很多数据项缺乏，不符合子项目组的数据规范性要求  CALIS元数据 schema本身不支持必备性机制，而厂商本地系统也未能提供相应的必备性检测功能  数据内容不一致问题（尤其是 OAI记录和 METS记录之间的不一致）  OAI记录中的 about内容不合逻辑  如：有时间戳或类型而没有 calisoid；有 calisoid而没有时间戳。  元数据时间戳应该不小于数字对象时间戳；更新数字对象时应同时更新元数据时间戳，才能保证联动收割时对这条记录重收。  METS包中的时间戳应与 OAIabout中的时间戳一致等。  数据的语义问题  张冠李戴 模式一： OAIDP / METSDP+MQ联动 实际收割测试 (问题原因 )  本地系统的著录工具问题  单条入库的元数据和数字对象在必备性、一致性等方面存在问题。  本地系统的批量导入工具问题  批量入库的元数据和数字对象在必备性、一致性等方面存在问题；。