数据挖掘软件发展分析.ppt

该【数据挖掘软件发展分析 】是由【小落意】上传分享，文档一共【37】页，该文档可以免费在线阅读，需要了解更多关于【数据挖掘软件发展分析 】的内容，可以使用淘豆网的站内搜索功能，选择自己适合的文档，以下文字是截取该文章内的部分文字，如需要获得完整电子版，请下载此文档到您的设备，方便您编辑和打印。数据挖掘软件发展分析
一、数据挖掘概念----定义
数据挖掘--从大量数据中寻找其规律的技术,是统计学、数据库技术和人工智能技术的综合。
数据挖掘与统计学
数据挖掘与人工智能
数据挖掘与数据库技术
数据挖掘与KDD
2
一、数据挖掘概念----原由
国民经济和社会的信息化
社会信息化后,社会的运转是软件的运转
社会信息化后,社会的历史是数据的历史
因此政府提出
“信息化”和“发展软件产业”
3
一、数据挖掘概念----原由
数据挖掘
数据库越来越大
有价值的知识
可怕的数据
4
一、数据挖掘概念----原由
数据爆炸,知识贫乏
苦恼:淹没在数据中;不能制定合适的决策!
数据
知识
决策
模式
趋势
事实
关系
模型
关联规则
序列
目标市场
资金分配
贸易选择
在哪儿做广告
销售的地理位置
金融
经济
政府
POS.
人口统计
生命周期
5
一、数据挖掘概念----发展
1989IJCAI会议:数据库中的知识发现讨论专题
KnowledgeDiscoveryinDatabases(-,1991)
1991-1994KDD讨论专题
AdvancesinKnowledgeDiscoveryandDataMining(,-Shapiro,,,2019)
2019-2019KDD国际会议(KDD’95-98)
JournalofDataMiningandKnowledgeDiscovery(2019)
2019ACMSIGKDD,SIGKDD’2019-2019会议,以及SIGKDDExplorations
数据挖掘方面更多的国际会议
PAKDD,PKDD,SIAM-DataMining,(IEEE)ICDM,DaWaK,SPIE-DM,etc.
6
一、数据挖掘概念----技术
技术分类
预言(Predication):用历史预测未来
描述(Description):了解数据中潜在的规律
数据挖掘技术
关联分析
序列模式
分类(预言)
聚集
异常检测
7
二、数据挖掘软件的发展
代
特征
数据挖掘算法
集成
分布计算模型
数据模型
第一代
作为一个独立的应用
支持一个或者多个算法
独立的系统
单个机器
向量数据
第二代
和数据库以及数据仓库集成
多个算法:能够挖掘一次不能放进内存的数据
数据管理系统,包括数据库和数据仓库
同质、局部区域的计算机群集
有些系统支持对象,文本和连续的媒体数据
第三代
和预言模型系统集成
多个算法
数据管理和预言模型系统
intranet/extranet网络计算
支持半结构化数据和web数据
第四代
和移动数据/各种计算设备的数据联合
多个算法
数据管理、预言模型、移动系统
移动和各种计算设备
普遍存在的计算模型
RobertGrossman,NationalCenterforDataMining
UniversityofIllinoisatChicago的观点
8
二、数据挖掘软件的发展
第一代数据挖掘软件
特点
支持一个或少数几个数据挖掘算法
挖掘向量数据(vector-valueddata)
数据一般一次性调进内存进行处理
典型的系统如SalfordSystems公司早期的CART系统(salford-systems)
缺陷
如果数据足够大,并且频繁的变化,这就需要利用数据库或者数据仓库技术进行管理,第一代系统显然不能满足需求。
9
二、数据挖掘软件的发展
数据挖掘软件发展的三个阶段
独立的数据挖掘软件
横向的数据挖掘工具集
纵向的数据挖掘解决方案
GregoryPiatetsky-Shapiro的观点
15