元数据技术论文数据査询引擎技术论文.doc

元数据技术论文数据査询引擎技术论文.doc元数据技术论文数据査询引擎技术论文基于元数据的数据查询引擎技术研究摘要:元数据技术是目前数据集成的主流技术,通过分析屮石化科研管理系统,对元数据标准CWM、元模型和相关技术的研究,定义系统的元数据标准,设计并建立了中石化科研管理系统元数据库,实现了基于元数据的数据整合。通过基于元数据的科研项目定制查询引擎技术研究,建立了可定制的通用数据访问模型,实现了通用的数据查询引擎。关键词:元数据;提取转换;查询引擎1引言在元数据标准CWM 元数据定义为关于数据的数据,是描述数据及其环境的数据。,确定本系统元数据库屮元数据的定义标准:(1) 基本属性:包括元数据项名称、名称缩写、唯一标识、含义、类型、精度、计量单位、是否主键、所属元数据项标识、可否用于检索。(2) 数据映射及提取定义:包括元数据来源于哪个数据库,来源于指定数据库的那个对象,对象可以是表、视图、存储过程等。:元数据字典建模和元数据。,按一定顺序排列,对其内容作详细说明的数据集,元数据字典中存放着元数据库中所有数据的定义,即对所有元数据库对象结构的描述(名称、标识、含义、类型、数据大小、格式、度量单位、精度以及允许取值范围等),它提供了对科研项目元数据库数据描述的集中管理手段。,元数据库中的数据并不是来源数据库数据的简单复制,是面向查询特定领域的按照业务元数据标准组织的,在确定这些实体及实体所包含的元素时,遵循了以下原则:编码屏蔽原则:由于该元数据库是面向查询的,因此在数据从来源数据库中提取转换到元数据库时,只保留编码代表的语义信息。元数据数据项为最终项原则:即元数据中的每一项数据都为最终结果,而不包括屮间数据。对于需要汇总的数据,需在元数据库中进行定义,汇总结果在数据提取转换过程中完成,查询时只是取得一个汇总结果数据。,科研项目元数据以数据库屮表的形式存放,对应元数据的逻辑划分,在数据库中建立了相应的数据表以存放元数据。确定了元数据的存储方式并建立相关表后,须将元数据从源头数据库屮提取到元数据库屮。在数据提取环节通过SQLServer的DTS工具组件完成了数据从源头库到元数据库的提取功能。建立了四个数据提取包即:项目数据提取包、奖励数据提取包、鉴定数据提取包、外事项目提取包,分别完成相关元数据的提取任务。,它的定义功能是建立在元数据库基础上的,同时可将查询的定制数据记录到数据库表中。查询定制器从一个查询最基本的构成要素考虑,