基于数据仓库技术的数据分析系统的设计与实现.pdf

饭旦大学硕士学位论文基于数据仓库技术铸数据分析系统的设计与实现ㄒ笛软件学院姓软件工程陈晋武指导教师:朱扬勇究成日期:年院系:专业:名:学校代码学号;
作者怒名:隘导师签≤∑童善苎一醯胤竺兰:￡:叶型:呈:驾论文独创性声明论文使用授权声明本论文是我个人在导师指导下进行的研究工作及取得的研究成果。论文中除了特别加以标注和致谢的地方外,不包含其他人或其它机构己经发表或撰写过的研究成果。其他同志对本研究的启发和所做的贡献均已在论文中作了明确的声明本人完全了解复旦大学有关保略、使用学位论文的规定,即:学校有权保留送交论文的复印件,允许论文被查阅和借阅;学校可以公布论文的全部或部分内容,可以采用影印、缩印或其它复制手段保存论文。保密的论文在解密后遵守此并表示了谢意。作者签名规定。
摘要数据仓库是面向主题的、集成的、具有时间特征的、稳定的数据集合,用以支持经营管理中的决策制定过程。经过十几年的发展,数据仓库的研究重点逐渐转向系统应用。如何将数据仓库的各种技术集中在一个统一的框架下,并且与特定的业务领域相结合,构造出能满足各种用户需求的数据仓库系统,是目前迫切需要解决的问题之一。本文从数据仓库的定义人手,分别阐述了数据仓库的体系结构、建设方法、模型设计、系统设计方法等理论基础,通过对这些理论和方法的学****研究,为数据仓库系统的实现提供了建设依据。然后结合证券监管的领域知识和特别需求,设计并实现了一个基于数据仓库技术的中央数据分析系统。本文的主要工作成果如下:ü允莶挚馓逑到峁沟难把芯浚凑帐莶挚獾淖芟咝徒峁狗法,设计了一个基于数据仓库技术的中央数据分析系统,包括系统的功能模块设计、数据库设计、多维数据集设计以及数据流程处理设计杓撇⑹迪至耸菰ご碜酉低常ɡ醋愿鞯ノ坏母袷讲灰坏氖萁行了一致性集成,对系统涉及的度量值及其累计方法进行了总结和特殊处理,为实现中央数据分析系统提供了前提条件。岢隽硕攘恐档奈然母拍睿⒈嘀屏硕攘恐滴然脑ご沓绦颍通过将大量的度量值进行维度化预处理,解决了市场分析指标非常多所带来的对任意指标的模糊查询困难的问题,另外系统还可以对度量值进行多级分类查询分析,提高了数据分析的灵活性和用户的工作效率。迪至艘桓龌谑莶挚饧际醯闹醒胧莘治鱿低常疚亩哉飧鱿低的体系结构、数据模型设计以及数据仓库系统的管理都做了详细地介关键词:数据仓库,多维数据模型,总线型结构,度量值的维度化中图分类号:.等。绍。基于数据仓库技术的数据分析系统的设计与实现
泊鷖蒯,鱥觤缸,,,伽瑄埘鷗’嬲’、吧祄衄畁锄出锄锄锄恐曲琫甤肋锄畂肛弘曲琲瑃畍,∞瑃百腶琫噦辵畁也騞,蕇瑆瞖印嬲!辳仿镐,甒基于数据仓库技术的数据分析系统的设计与实现萫積瞖猘鮨縧士瑆驣甼:协也,甈齭】Ⅱ.玎琧
瞖—緀基于数据仓库技术的数据分析系统的设汁与实现緀:靍:.王
第一章引言。,人们不满足于利用传统的数据库对数据进行处理和管理了。二十世纪末,国内外掀起了一股建设数据仓库的热潮,数据仓库技术作为一种决策支持的手段为越来越多的企业所接受。各大数据库公司也纷纷推出自己的数据仓库产品,还有很多公司开发了相关的分析工具。这些工具给用户带来了很大的方便,也推动了数据仓库在各行业的应用。证券行业是我国比较新的一个行业,但由于证券行业交易数据量大的特点,各交易所都积累了庞大的客户和业务交易资料库。在我国当前的证券市场监管工作中,作为证券市场的监管部门,需要分析来自上海证券交易所、深圳证券交易所、上海期货交易所,大连商品交易所、郑州商品交易所和中国登记结算公司及证券市场监管部门内部上报来的证券期货市场数据,以及从大智慧、路透、国研宏观经济数据库提供的各种市场分析指标。它的特点具有数据来源单位多,各单位提供的数据格式不一致,市场分析指标多,对任意指标的对比分析以及多层次分类分析困难等特点,如何对这些数据进行处理,从而有效的支持监管部门的市场分析工作成为一个迫切解决的问题。为此,针对证券市场运行特点,结合监管部门分析工作实际需求,需要通过将各单位提供的数据进行一致性集成,建立数据仓库以及基于数据仓库建立一个设计科学合理、数据准确及时、查询方便快捷、操作简单灵活、易于管理维护的中央数据分析系统。基于数据仓库技术的数据分析系统可通过多角度、多层次的指标组合分析,准确反映证券市场的动态,,满足了证券监管部门的业务应用需求,从而提高证券监管部门对市场的监管能力和效率,它对我国的证券市场监管工作也具有很好的推动作用。本文从数据仓库的定义人手,分别阐述了数据仓库的体系结构、建设方法、模型设计、系统设计方法等理论基础,通过对这些理论和方法