随着医学机构积累的数据越来越多,促进了医学信息包括中医药信息的数字
化;如何利用海量信息为防控疾病提供科学依据,总结优化各种诊治方案,已引起
业内专家的高度关注。于是数据挖掘技术在中医药研究被日益重视,它将有力促进
中医药的现代化进程。
1.1 数据挖掘概念、步骤 数据挖掘(Data mining,DM)即数据库中的知识发
现,是从大型数据库的海量数据中提取人们感兴趣的知识,这些知识是隐藏的、事
先未知的、潜在有用的信息,挖掘的知识表现为概念、规则、规律、模式等形式[
1]。数据挖掘的目的在于使用所发现的模式帮助解释当前的行为或预测未来的结
果[2]。挖掘步骤大致有:问题定义、数据提取、数据预处理、数据挖掘、知识
评估、结果应用这六步。
1.2.1 描述统计 数据总结的目的是对数据进行从低层次抽象、浓缩到高层
次,得出它的紧凑描述。最简单的数据总结方法是描述统计,它包括平均数、中位
数、分位数等,它常和统计图配合应用。
1.2.2 关联规则 关联规则从本质上讲是条件概率,即当 A 发生时、B 同时出
现的概率有多大?只要 B 离 50%较远就有意义。数据关联是数据库中存在的一类
重要的可被发现的知识。若两个或多个变量的取值之间存在某种规律性,就称为关
联。关联包括简单关联、时序关联、因果关联。关联分析的目的是找出数据库中隐
藏的关联网。有时我们并不知道数据库中数据的关联函数,即使知道也不确定。因
此关联分析生成的规则带有可信度。
1.2.3 分类和聚类 这是最常用的技术。分类方法主要有:回归、决策树、神经网
络。分类分析在数据挖掘中是一项重要任务。分类器的构造方法有统计方法、机器
学习方法、神经网络方法等。聚类是根据事物本身潜在的特性研究对象分类的方
法。通过聚类把一个数据集合中的个体按照相似性归成若干类别,使其“物以类
聚”,将数据库中的记录划分为一系列有意义的子集。聚类要解决的就是实现满足
这种要求的类的聚合。在进行聚类前,这些类别是潜在的,可分割的类的个数(聚
类数)也是未知的。聚类大致分为统计方法、机器学习方法、神经网络方法和面向
数据库的方法等。
1.2.4 偏差检测 数据库中的数据可能有一些异常记录,检测这些偏差很有意义。
偏差检测的基本方法是寻找观测结果与参照值之间有意义的差别。
评论0
最新资源