数据挖掘 - 主题


数据挖掘的理论基础

数据挖掘的理论基础包括以下概念 -

  • 数据缩减- 该理论的基本思想是减少数据表示,以准确性换取速度,以满足在大型数据库上查询时获得快速近似答案的需要。一些数据缩减技术如下 -

    • 奇异值分解

    • 小波

    • 回归

    • 对数线性模型

    • 直方图

    • 聚类

    • 采样

    • 索引树的构建

  • 数据压缩- 该理论的基本思想是通过按照以下方式编码来压缩给定的数据 -

    • 协会规则

    • 决策树

    • 集群

  • 模式发现- 该理论的基本思想是发现数据库中发生的模式。以下是对该理论做出贡献的领域 -

    • 机器学习

    • 神经网络

    • 协会矿业

    • 顺序模式匹配

    • 聚类

  • 概率论- 该理论基于统计理论。该理论背后的基本思想是发现随机变量的联合概率分布。

  • 概率论- 根据该理论,数据挖掘发现的有趣模式仅在可用于某些企业的决策过程中的范围内。

  • 微观经济视图- 根据该理论,数据库模式由存储在数据库中的数据和模式组成。因此,数据挖掘就是对数据库进行归纳的任务。

  • 归纳数据库- 除了面向数据库的技术之外,还有可用于数据分析的统计技术。这些技术也可以应用于科学数据以及经济和社会科学数据。

统计数据挖掘

一些统计数据挖掘技术如下 -

  • 回归- 回归方法用于从一个或多个预测变量(其中变量为数字)预测响应变量的值。下面列出了回归的形式 -

    • 线性

    • 多种的

    • 加权

    • 多项式

    • 非参数

    • 强壮的

  • 广义线性模型- 广义线性模型包括 -

    • 逻辑回归

    • 泊松回归

    该模型的泛化允许分类响应变量以类似于使用线性回归对数值响应变量进行建模的方式与一组预测变量相关。

  • 方差分析- 该技术分析 -

    • 由数字响应变量描述的两个或多个群体的实验数据。

    • 一个或多个分类变量(因素)。

  • 混合效应模型- 这些模型用于分析分组数据。这些模型描述响应变量与根据一个或多个因素分组的数据中的一些协变量之间的关系。

  • 因子分析- 因子分析用于预测分类响应变量。该方法假设自变量服从多元正态分布。

  • 时间序列分析- 以下是分析时间序列数据的方法 -

    • 自回归方法。

    • 单变量 ARIMA(自回归积分移动平均)建模。

    • 长记忆时间序列建模。

可视化数据挖掘

可视化数据挖掘使用数据和/或知识可视化技术从大数据集中发现隐含知识。可视化数据挖掘可以被视为以下学科的集成 -

  • 数据可视化

  • 数据挖掘

可视化数据挖掘与以下内容密切相关 -

  • 电脑图像

  • 多媒体系统

  • 人机交互

  • 模式识别

  • 高性能计算

一般来说,数据可视化和数据挖掘可以通过以下方式集成 -

  • 数据可视化- 数据库或数据仓库中的数据可以通过下面列出的几种可视化形式查看 -

    • 箱线图

    • 3-D 立方体

    • 数据分布图

    • 曲线

    • 表面

    • 链接图等

  • 数据挖掘结果可视化- 数据挖掘结果可视化是以可视化形式呈现数据挖掘结果。这些视觉形式可以是散点图、箱线图等。

  • 数据挖掘过程可视化- 数据挖掘过程可视化展示了数据挖掘的几个过程。它允许用户查看如何提取数据。它还允许用户查看数据是从哪个数据库或数据仓库进行清理、集成、预处理和挖掘的。

音频数据挖掘

音频数据挖掘利用音频信号来指示数据模式或数据挖掘结果的特征。通过将模式转化为声音和思考,我们可以通过聆听音调和曲调,而不是观看图片,来识别任何有趣的东西。

数据挖掘和协同过滤

今天的消费者在购物时会遇到各种各样的商品和服务。在实时客户交易期间,推荐系统通过提出产品推荐来帮助消费者。协同过滤方法通常用于向客户推荐产品。这些建议基于其他客户的意见。