浅谈数据挖掘之孤立点分析及其应用

摘要:数据库技术、计算机技术、网络技术的发展产生了大量的数据,人们面临数据丰富,知识贫乏的局面,如何从大量数据中挖掘有用的信息成为当前面临的紧迫问题,数据挖掘技术应运而生。从数据挖掘的概念入手,对数据挖掘过程及孤立点分析技术进行了探讨,最后对数据挖掘进行了展望。

关键词:数据挖掘;孤立点分析;

中***分类号:TP311 文献标识码:A

0 引言

进入信息时代从来,随着计算机技术、数据库技术及互联网技术的发展,数据库中的数据量急剧增长,目前的数据库系统能够实现数据的录入、查询统计等功能,但无法根据数据进行预测未来发展趋势,不能发现数据之间存在的关联规则,缺乏挖掘数据中隐含的知识的手段,出现了“数据爆炸式增长,知识贫乏”的现象,同时这些技术在给人们的生产、生活带来方便的同时,也带来了不少的问题,如信息过量导致人们无法处理,信息的真实性难从确认,信息的安全性得不到保障,信息的形式不一致,难以处理等,面临大数据时代,迫切需要一种技术来准确、快速地获取有用的、隐含的信息,在这种形势下,数据挖掘应运而生。

1 数据挖掘(Data mining)

1.1 概念

数据挖掘技术融合了数据库(Database)、统计学(Statistic)、机器学习(Machine Learning)、模式识别(Pattern Recognition)、专家系统(Expert System)、人工智能(Artificial Intelligence )、数据可视化(Data Visualization)等多种学科,是一种交叉学科,是指从大量的、不完全的、有噪声的、模糊的、随机的数据中提取隐含在其中的人们事先不知道的、潜在的有用的信息和知识的过程。

1.2 过程

数据挖掘是一个迭代的人机交互过程,主要经过问题定义、数据整理、数据挖掘、结果解释评估四个过程。

1.问题定义

问题定义是指清晰定义挖掘目标以防盲目挖掘,在这个阶段要明确对数据挖掘的要求;寻找合适的算法为从后工作奠定基础。

2. 数据整理

作为数据挖掘的基础,数据整理是一个非常重要的阶段,直接影响数据挖掘的结果及挖掘质量。首先选取目标数据,明确对哪些数据挖掘,数据形式是什么样的,其次通过消除“脏”数据、填充丢失数据、滤除冗余数据、数据变换等方式对数据进行处理。

3.数据挖掘

数据挖掘是整个挖掘步骤中最重要的部分,挖掘的实现离不开算法,关联规则、聚类分析,孤立点分析,时间序列模式挖掘等都有各自的挖掘算法,所以在这个阶段需要根据数据的特点及挖掘任务选取或改进算法以适应现有工作的需要。

4.结果解释评估

数据挖掘阶段发现的知识,为分析其结果的可用性,需要对挖掘结果进行评估,剔除无关的模式,不能满足要求的模式要进行回退。

2 孤立点分析技术及应用

数据挖掘技术包括关联规则分析、聚类分析、序列模式分析、孤立点分析等技术,孤立点分析作为数据挖掘的一种技术,是指由于度量、执行错误或固有数据变异所导致的那些小模式数据,它能用于欺诈监测,在金融行业探测不寻常的信用卡使用或电信服务,在商业市场分析中用于确定极低或极高收人的客户的消费行为,在医疗分析中用于发现对多种***方式的不寻常的反应。

3 展望

数据挖掘技术作为人们获取知识的一种手段,能够帮助人们发现有用的信息及知识,相信在不久的将来数据挖掘技术会更加智能化,在展现形式上更加人性化,满足人们多方面的需要。

参考文献:

[1] 毛国君, 段立娟, 王实等. 数据挖掘原理与算法. 北京: 清华大学出版社, 2005.7.

[2] 李德仁,王树良,李德毅. 空间数据挖掘理论与应用. 北京:科学出版社,2006.

[3] 兰小机, 徐红伟等. 基于演化算法的空间数据聚类方法[J]. 计算机工程, 2008(22)

浅谈数据挖掘之孤立点分析及其应用

转载请注明出处学文网 » 浅谈数据挖掘之孤立点分析及其应用

学习

服饰皮革面料的运用与设计

阅读(20)

本文为您介绍服饰皮革面料的运用与设计,内容包括服装皮革面料有哪些,皮革面料的制版和排版。本文作者:涂红燕单位:中原工学院服装学院

学习

陈敏生:创业者的格局决定结局

阅读(20)

俗话说,“创业容易守业难”。在我们身边,每天都在发生很多的创业故事,但创业成功者却寥寥无几,要想成功就首先需要创业者具有敏锐的洞察力,其次还有坚持下去的毅力。东方泓运(北京)资产管理有限公司(以下简称“东方泓运”)董事长陈敏生则两者同时

学习

与新手教师谈如何做好二次备课

阅读(15)

本文为您介绍与新手教师谈如何做好二次备课,内容包括教师二次备课怎么写,中学教师怎样进行二次备课。摘要:二次备课在教师预设教案中具有重要的意义,但由于某些原因二次备课得不到新教师的高度重视。本文探讨了新教师应如何做好二次备课的

学习

挪威斯瓦尔巴末日种子库

阅读(34)

本文为您介绍挪威斯瓦尔巴末日种子库,内容包括挪威的斯瓦尔巴种子库,挪威的斯瓦尔巴全球种子库。北冰洋上的斯瓦尔巴群岛静静地躺在挪威大陆与北极的中间地带,距离北极点约1000公里,岛上人烟稀少,荒野上山峰壮丽、冰川高耸,随处可见警示北极

学习

柳青:我与父亲柳传志

阅读(20)

本文为您介绍柳青:我与父亲柳传志,内容包括柳传志父亲柳青,柳传志杨元庆柳青顺口溜。提起父亲柳传志,柳青说:“父亲对我影响最大的还是精神层面的东西,他培养了我的性格、意志和品质,让我受益终生。”

学习

“字库”芯片 Android手机的命门

阅读(306)

本文为您介绍“字库”芯片 Android手机的命门,内容包括高通字库芯片,手机字库芯片参数查询。提起“字库”,可能很多人会以为它仅是用于存放字体文件的芯片,但实际上“字库”的概念已涵盖了“装载有手机基本控制指令和字库信息”的内置存储

学习

孔子与老子

阅读(25)

本文为您介绍孔子与老子,内容包括孔子与老子全集,孔子与老子论道全文。孔子显然是实有其人,至于老子,则没有绝对确凿的证据证实此人曾经存在。而在迄今为止的两干多年中,这两位长袖善舞且互为周旋,这一周旋仍界定着中国人之人格,及中国社会之

学习

学高为师、身正为范:教师知能素养的基本要求

阅读(12)

本文为您介绍学高为师、身正为范:教师知能素养的基本要求,内容包括新时期教师要有新担当新作为,新时代教师责任和担当提升计划。摘要:学高为师、身正为范高度概括了成为一名教师的知能素养的基本内容和要求。“学高”和“身正”全面包含

学习

真正的自由

阅读(36)

本文为您介绍真正的自由,内容包括真正自由的人,真正的自由文案。――一定要抽红梅牌以上的香烟,穿白色的港式西服和喇叭裤;一定要娶班花一样漂亮的老婆,找波伏瓦一样生死不渝的情人;一定要在可恶的领导脸上吐口唾沫,然后转身去买别墅,在宽阔的

学习

OJT培训法推广实施

阅读(22)

本文为您介绍OJT培训法推广实施,内容包括ojt培训四步法怎么理解,ojt培训实施流程。摘要:OJT培训目标的明确化、培训内容的标准化、培训结果的可追溯、可监控决定了它会比传统的培训方法有更可控的学习效果,因而在组织中迅速推广传播。

学习

李约瑟难题究竟问什么?

阅读(23)

本文为您介绍李约瑟难题究竟问什么?,内容包括李约瑟难题的各种答案,李约瑟难题的提出时间。【关键词】李约瑟难题/问什么

学习

景观园林设计中空间艺术分析

阅读(29)

本文为您介绍景观园林设计中空间艺术分析,内容包括西蜀景观园林艺术风格,景观园林边角空间设计。摘要:空间作为景观园林中的重要景观节点类型之一,是景观园林中的支撑骨架,为整个园林和游人提供服务。本文通过查阅资料和参考园林案例的方

学习

“0”的意义

阅读(26)

本文为您介绍“0”的意义,内容包括0的哲学意义,0表达的意义。世界灵魂被人类的欢乐滋养着,也同样被人类的痛苦滋养着。

学习

品牌价值分析

阅读(27)

本文为您介绍品牌价值分析,内容包括品牌的价值和意义,领克品牌价值分析。摘要:随着经济发展和生活质量的提高,进入了全民健身时代,掀起的马拉松热潮标志着民众健身意识的觉醒,也创造出了新的经济平台。如今,马拉松不仅仅是一场体育竞技比赛,并

学习

建筑围护结构技术分析及其运用

阅读(45)

本文为您介绍建筑围护结构技术分析及其运用,内容包括建筑围护结构分析,建筑围护结构概念股。摘要:随着经济社会的不断进步,人们的生活水平不断提高,建筑行业的发展规模空前扩大,人们对建筑物的要求也越来越高。建筑围护结构技术受到建筑行业

学习

《获虎之夜》的社会悲剧性分析

阅读(223)

本文为您介绍《获虎之夜》的社会悲剧性分析,内容包括获虎之夜读后感500字,获虎之夜话剧赏析。摘要:田汉留日归国后创作的第一个剧本《获虎之夜》,一直被视为我国独幕话剧创作臻于成熟的一个标志。一些评论认为,《获虎之夜》是通过写婚姻

学习

混凝土氯离子渗透性能的实验分析

阅读(37)

本文为您介绍混凝土氯离子渗透性能的实验分析,内容包括混凝土抗氯离子渗透方法,混凝土氯离子渗透试件。摘要:混凝土结构钢筋锈蚀容易引起混凝土耐久性下降,其主要原因是因氯离子渗入混凝土中。氯离子的渗透性能是评价混凝土抗渗透性的一

学习

医院跑冒滴漏原因分析及解决方法

阅读(25)

本文为您介绍医院跑冒滴漏原因分析及解决方法,内容包括医院跑冒滴漏是什么意思,如何解决医院的跑冒滴漏现象。摘要:如今,由于管理上的疏漏,许多医院仍然大量存在跑冒滴漏的现象。本文在简单地分析了这种现象的原因后,从实现节约资源和精细化

学习

陇东婚丧唢呐音乐特征分析

阅读(36)

本文为您介绍陇东婚丧唢呐音乐特征分析,内容包括陇东白事唢呐抱灵牌,陇东白事唢呐全部。陇东婚丧唢呐是指陇东(以庆阳地区为主)一带流行于民间的以唢呐为主奏乐器的鼓吹乐。据考证,已有四百多年的历史,现在已成为民间嫁娶、丧葬等活动中主要

学习

复方苯乙哌啶中毒11例临床分析

阅读(23)

本文为您介绍复方苯乙哌啶中毒11例临床分析,内容包括复方苯乙哌啶中毒的解救药,复方苯乙哌啶片多少钱100片呢。doi:10.3969/j.issn.1007-614x.2010.15.025

学习

金融市场下短期理财产品分析

阅读(48)

本文为您介绍金融市场下短期理财产品分析,内容包括中短期金融理财比较,理财产品的市场机会分析。摘要:对比中国香港与中国内地的理财产品,不难发现中国香港的理财产品期限基数过高,如附带银行利率的持续低下、区位环境的变迁中塑造的差异