寒区旱区数据管理平台.doc

寒区旱区数据管理平台
张耀南 杨 海 韦五周 景通桥 张军强 寒区旱区特色数据库为开展西部高寒、干旱特殊环境下的高原大气、水土资源、脆弱生态等提供基础数据,特色数据的充分共享和有效利用能有效促进学科发展。
寒区旱区特色数源的元素称之为数据集。每个数据集包含多个物理数据资源表(关系表和磁盘文件),是特色数据库的基础数据层。也是二、三级数据库群和数据库应用系统建设的基础。所有不同层次的数据抽象及其相互的逻辑关系都建立在数据集群的属性上。
第二层是逻辑子库层,由抽象出的物理上实际相互独立的不同数据集,按数据来源构建。这里所谓的逻辑子库群是按研究课题、研究项目、定位观测站、定点观测、野外考察和交流等具体项目来划分的,为不同的项目、课题和观测站、点分别建立各自的专业子数据库。二级数据库群是在一级数据库群的基础上以不同的课题、台站以及项目为类型所抽象出来的。
第三层是逻辑类数据库群(逻辑数据库),是在第一、二逻辑抽象层的基础上的再一次的数据按学科归类抽象。一、二级数据库群的建设是以三级数据库群为目标的。一级数据库群中的数据集将包含多个三级数据库群的属性。总之,三级数据库群数据的不同分类标准是在建设一、二级数据库群时就要建好的,且后期也不会有较大的变动。如果数据分类的标准发生变化时,三级数据库群要做相应的变化。
数据的管理 按照数据的分类和层次抽象以及用户如何使用数据,可实现数据库及表设计。数据按原始数据、关系型数据、二进制(图形图像文件)、多媒体、文本数据、空间数据进行管理。
原始数据是指从科研第一线提交上来的第一手数据(包括数据、应用程序、说明文档等)。这类数据主要以磁盘目录文件的方式进行管理,将不同的科研数据详细分类,在磁盘上建立相应目录,运行磁盘目录遍历程序将磁盘文件路径读出,并写入相应数据库表中,建立逻辑数据库,为用户下载提供服务。
关系型数据入库前,需要人工作一些适当的修正(增加一些必要的属性字段,去掉不合理的字段),采用Oracle9i管理。为了提供不同的数据服务格式,需要对数据的操作和访问细化到每一个表字段上。
图形图像、多媒体、文本数据的管理。文本分为能够生成关系的简单文本数据和可用excel分析的图形文件,这类文件不是很大,易通过程序提取关系,生成表数据字段,可以在内存中生成文本文件和图像(用户只需要选择要生成图像的字段列)展示给用户; 二是那些难以生成关系的复杂文本数据和大图像,采用数据、应用程序和图像关联的方式以文本文件集和图形图像集的方式存储在相应磁盘目录中,按照原始数据和关系数据的管理方式管理。
空间数据的管理。空间数据主要是空间遥感数据、地理信息数据,采用两种方式管理。一种是以Arc/Info的Coverage,ArcView的Shape文件形式管理; 另一种是采用Oracle Spatial管理空间数据管理。

数据服务结构

服务分管理服务和用户服务。
管理服务主要将数字化的数据进行分析、校正并按照规范进行组织。将数据按照数据集、专业子库、分类数据库三级数据库体系结构进行管理,通过物理层面的数据集来形成逻辑层面的专业子库和分类数据库管理与服务系统。管理服务遵循权利与义务对等的原则积极开展数据共享与数据发布,遵循谁发布