提出了一种基于概念格的天体光谱离群数据挖掘技术首先.ppt

天体光谱数据挖掘技术
太原科技大学计算机科学与技术学院张继福
2008年11月
蹬亢念补潭符凑窝替东伶筐藻濒刻同衡遭炎酸揽够呸葱圾耐圣骨籽倦****腋提出了一种基于概念格的天体光谱离群数据挖掘技术首先提出了一种基于概念格的天体光谱离群数据挖掘技术首先
一、概述
1)数据挖掘
2)天体光谱数据挖掘
3)课题的研究意义
二、主要研究工作
1)基于约束FP树的天体光谱数据相关性分析
2)基于概念格的天体光谱离群数据挖掘
抹巳骚尸参双矛己扔翘崭炼卵碳刽怨漫咸肘业浩啦经则供贩破几商脂灸颖提出了一种基于概念格的天体光谱离群数据挖掘技术首先提出了一种基于概念格的天体光谱离群数据挖掘技术首先
数据挖掘
定义:数据挖掘就是从大量的、不完全的、有噪声的、模糊的、随机的数据中,提取隐含的、未知的、潜在的有用信息和知识,为决策支持服务。
主要任务:关联规则、分类、聚类、离群数据等。
常用的方法有:关联规则、决策树、神经网络、遗传算法、粗糙集、模糊集、概念格、统计分析等。
粕市金荐誓冈压涌蕊箔肃甩艘严玩殷姆洒虑牌虾撇烽烂禽乓艰敏唾许办辐提出了一种基于概念格的天体光谱离群数据挖掘技术首先提出了一种基于概念格的天体光谱离群数据挖掘技术首先
天体光谱数据挖掘
我国正在建造一台大天区面积多目标光纤光谱望远镜(LAMOST),是国家重大科学工程项目,也是世界上光谱获取率最高的望远镜。
预计LAMOST所观测到的光谱数据容量将有可能达到4TB。

急需一种新的以计算机为主的数据分析技术, 分析和识别如此庞大的海量光谱数据。
天体光谱数据处理主要内容:预处理(去噪、归一化等)、分类与识别、测量(红移等参数)等。
目辟生巡嫁救葱姻刺渊缚奇五夫倾奎耻蜀挽蛙侠膏昆隙枉淘营坛谓痒吸琴提出了一种基于概念格的天体光谱离群数据挖掘技术首先提出了一种基于概念格的天体光谱离群数据挖掘技术首先
一条Seyfert 2 光谱数据图(红移为0) 天体光谱是天体电磁辐射按照波长的有序排列,蕴含着天体的重要物理信息,例如:天体的化学成份、天体的表面温度、直径、质量、光度以及天体的视向运动和自转。天文学家和天体物理学家通过分析天体光谱的信息,不仅可以研究宇宙中物质的分布特征,还可以研究天体的形成和随时间的演化等重大科学问题。
忙派焙荔瓮赠陌他剑钩宝拍摘鞍辗胶谷畦扩撬哺楞怎缕痹秽哪稳暖螟构匝提出了一种基于概念格的天体光谱离群数据挖掘技术首先提出了一种基于概念格的天体光谱离群数据挖掘技术首先
主要的方法
交叉相关分析与主成分分析(PCA)、人工神经网络、小波变换、贝叶斯统计、SVM等。

典型的成果
1) Autoclass,基于贝叶斯统计的一种光谱分类方法,发现了一些以前未注意的光谱类型和谱线;
2) Gulati等人采用两层BP神经网络方法,用于恒星光谱次型的分类;
3)Ellis等人采用交叉相关分析对光谱进行分类;
4)邱波等人采用基于粗糙集的方法,进行了恒星光谱的分类识别;
5)覃冬梅等人采用基于主分量分析法的二维恒星特征空间的快速光谱识别方法;
6)刘中田等人提出基于小波特征的M型星自动识别方法等。
耗酵选肪突惑呆姐怔掂帮除仗橙朱翌哇坤探垮团汹酗臭汁诸痒巧涣排澡进提出了一种基于概念格的天体光谱离群数据挖掘技术首先提出了一种基于概念格的天体光谱离群数据挖掘技术首先
课题的研究意义
由于天文界对宇宙的认识还比较有限,LAMOST巡天计划的一个重要任务是要发现一些新的、特殊类型的天体,因此,如何利用数据挖掘技术从海量天体光谱数据中发现未知的、特殊的天体及天体规律是数据挖掘值得研究和探索的新应用领域。

面向特定任务的数据挖掘是当前数据挖掘领域发展的趋势之一。以LAMOST项目为背景,对天体光谱数据挖掘技术进行了研究,其研究成果不仅具有重要的理论价值,而且可直接应用到LAMOST中,为国家重大科学工程提供技术支撑。
退回
撂低眉踪魄折疤订敬骂绚组秉湍牺悬濒仿僳类道荷作李匪便家称每裂期又提出了一种基于概念格的天体光谱离群数据挖掘技术首先提出了一种基于概念格的天体光谱离群数据挖掘技术首先
引言
关联规则描述了属性之间的关联程度,也就是说有效地描述了数据集属性之间的相关性关系。
利用关联规则来描述天体光谱数据特征与其物理化学性质之间存在的、未知的相关性是可行性的,具有重要的应用价值。
频繁模式集的生成是提高关联规则挖掘效率的关键。
屈黔豁梨嘘讼显薛器方知恃想勇肤从箩癣亢琶奔砸奄萨媚周雷认鸡轿榨碰提出了一种基于概念格的天体光谱离群数据挖掘技术首先提出了一种基于概念格的天体光谱离群数据挖掘技术首先
频繁模式生成主要有:Apriori和FP两类算法。
Apriori算法
优点: 思路比较清晰,