当前位置: 首页 > article >正文

【数学建模】典型相关分析

典型相关分析(Canonical Correlation Analysis, CCA)是一种统计方法,用于寻找两个多变量数据集之间的线性关系。这种分析方法可以用来衡量两个数据集之间的相关性,并找出能够最好地解释这种相关性的变量组合。

典型相关分析的基本概念

  1. 定义:CCA旨在寻找两个多元数据集之间的线性组合,使得这两个组合之间的相关性最大化。
  2. 应用场景
    • 生物学:研究基因表达水平与临床指标之间的关系。
    • 心理学:探究不同心理测试结果与行为表现之间的联系。
    • 经济学:分析宏观经济指标与股票市场变动的相关性。

典型相关分析的步骤

  1. 数据准备:收集两个多元数据集 (X) 和 (Y),其中 (X) 包含 (p) 个变量,(Y) 包含 (q) 个变量。
  2. 标准化:通常会对数据进行标准化处理,以便消除量纲的影响。
  3. 计算典型相关系数:找到最优的线性组合 (u = a'X) 和 (v = b'Y),使得 (u) 和 (v) 之间的相关系数最大化。这一过程涉及求解特征值问题。
  4. 解释结果:分析得到的典型变量 (u) 和 (v),以及它们之间的相关系数,从而理解数据集中变量之间的关系。

典型相关分析的输出

  • 典型相关系数:表示两个线性组合之间的相关性。
  • 典型变量:由原始变量的线性组合构成的新变量。
  • 载荷:原始变量与典型变量之间的关系强度,类似于主成分分析中的载荷。

典型相关分析的应用实例

假设我们有两个数据集,一个是学生体测数据,包括身高、体重、肺活量、50米跑成绩、立定跳远距离和坐位体前屈长度;另一个是学生的其他特征数据,比如年龄、性别、班级等。我们可以使用典型相关分析来探索这两组数据之间的相关性。

典型相关分析的假设

  • 线性关系:CCA假设变量之间的关系是线性的。
  • 正态性:CCA假设数据集中的变量服从正态分布。
  • 无多重共线性:每个数据集中变量间应避免高度相关。

典型相关分析的局限性

  • 如果变量间的关系是非线性的,CCA可能无法捕捉到这种关系。
  • 如果数据集中的变量数量很多,可能会出现多重共线性问题,影响结果的可靠性。

实现典型相关分析

在实际应用中,可以使用各种统计软件包来执行典型相关分析,如R、Python的scikit-learn库等。例如,在Python中,可以使用sklearn.cross_decomposition.CCA来执行典型相关分析。

示例代码

以下是一个使用Python和scikit-learn进行典型相关分析的简单示例:

from sklearn.cross_decomposition import CCA
import numpy as np

# 创建示例数据
X = np.random.rand(100, 6)  # 100个样本,每个样本有6个特征
Y = np.random.rand(100, 4)  # 100个样本,每个样本有4个特征

# 创建CCA对象
cca = CCA(n_components=2)

# 对数据进行拟合
cca.fit(X, Y)

# 获取典型变量
X_c, Y_c = cca.transform(X, Y)

# 输出典型相关系数
print("Typical correlations:", cca.correlation_)

以上代码展示了如何使用scikit-learn库中的CCA类来执行典型相关分析,并输出典型相关系数。根据您上传的文件内容,下面是针对典型相关分析(Canonical Correlation Analysis, CCA)的详细解析:

典型相关分析概述

典型相关分析是一种多元统计方法,用于研究两组变量(每组变量中可能包含多个指标)之间的相关关系。这种方法可以揭示两组变量之间的内在联系。

解析每一部分内容

1. 典型相关分析定义
  • 定义:典型相关分析由Hotelling提出,其基本思想类似于主成分分析。
  • 过程:在每组变量中找出变量的线性组合,使得两组的线性组合之间具有最大的相关系数。然后选取和最初挑选的这对线性组合不相关的线性组合,使其配对,并选取相关系数最大的一对。这个过程会持续进行,直到两组变量之间的相关性被提取完毕。
  • 结果:被选出的线性组合配对称为典型变量,它们的相关系数称为典型相关系数,度量了这两组变量之间联系的强度。
2. 典型相关分析的关键步骤
  • 数据分布假设:两组数据服从联合正态分布。
  • 相关性检验:构造似然比统计量,检验两组变量的相关性。p值小于0.05(0.1)表示在95%(90%)的置信水平下拒绝原假设,即认为两组变量有关。
  • 确定典型相关变量的个数:直接看典型相关系数对应的p值。
  • 利用标准化后的典型相关变量分析问题
  • 进行典型载荷分析
  • 计算前r个典型变量对样本总方差的贡献
3. SPSS操作步骤
  • 导入数据:将数据导入SPSS。
  • 检验数据类型:确保所有变量都设置为标度类型。
  • 点击菜单功能:选择相应的菜单进行典型相关分析。
  • 将数据移动到对应的集合:将变量分配到两个集合中。
  • 导出分析结果:执行分析并导出结果。
  • 对结果进行分析
    • 查看p值:确定显著的典型相关系数个数。
    • 标准化典型相关系数:写出标准化后的典型变量。
    • 典型载荷分析:分析典型变量每个分量前面的系数代表的重要性。
    • 方差解释程度:分析前r个典型变量对样本总方差的贡献。

示例分析

假设我们要探究观众和业内人士对于一些电视节目的观点之间的关系。观众评分来自低学历(led)、高学历(hed)和网络(net)调查三种,形成第一组变量;而业内人士评分来自包括演员和导演在内的艺术家(arti)、发行(com)与业内各部门主管(man)三种,形成第二组变量。

SPSS结果分析
  • 典型相关性
    • 第一对典型相关系数为0.796,特征值1.725,威尔克统计0.350,F值2.048,分子自由度9.000,分母自由度34.223,显著性0.064。
    • 第二对典型相关系数为0.201,特征值0.042,威尔克统计0.955,F值0.176,分子自由度4.000,分母自由度30.000,显著性0.949。
    • 第三对典型相关系数为0.073,特征值0.005,威尔克统计0.995,F值0.085,分子自由度1.000,分母自由度16.000,显著性0.775。
  • 标准化典型相关系数
    • 第一组变量(观众评分):
      • 体重x1: 0.775
      • 腰围x2: -1.579
      • 脉搏x3: 0.059
    • 第二组变量(业内人士评分):
      • 引体向上次数y1: 0.349
      • 起坐次数y2: 1.054
      • 跳跃次数y3: -0.716
  • 典型载荷分析
    • 第一组变量(观众评分):
      • 体重x1: -0.621
      • 腰围x2: -0.925
      • 脉搏x3: 0.333
    • 已解释的方差比例
      • 第一对典型变量解释的方差比例为0.451。
      • 第二对典型变量解释的方差比例为0.247。
      • 第三对典型变量解释的方差比例为0.302。

结论

根据上述分析,我们可以得出以下结论:

  • 第一对典型相关系数接近显著水平(p=0.064),表明可能存在一定程度的相关性。
  • 从标准化典型相关系数来看,体重x1和起坐次数y2对第一对典型变量的贡献较大。
  • 从已解释的方差比例来看,第一对典型变量对样本总方差的贡献最大,其次是第二对,第三对的贡献较小。
  • 因此,我们可以关注第一对典型变量来进一步分析观众和业内人士的观点之间的关系。

课后作业

根据以上内容,课后作业要求利用典型相关分析完成一道题目,探究观众和业内人士对于一些电视节目的观点之间的关系,并写一篇小论文。同时,还需要阅读一篇关于葡萄酒评价的文章,以加深对典型相关分析的理解。

IBM SPSS Statistics 的临时使用期将在 6011 天内到期。

GET DATA

/TYPE=XLSX

/FILE='C:\Users\hc_lzp\Desktop\数学建模视频录制\第6讲.典型相关分析\代码和例题数据\health.xlsx'

/SHEET=name 'Sheet2'

/CELLRANGE=FULL

/READNAMES=ON

/DATATYPEMIN PERCENTAGE=95.0

/HIDDEN IGNORE=YES.

EXECUTE.

DATASET NAME 数据集1 WINDOW=FRONT.

STATS CANCORR SET1=体重x1 腰围x2 脉搏x3 SET2=引体向上次数y1 起坐次数y2 跳跃次数y3

/OPTIONS COMPUTECVARS=NO

/PRINT PAIRWISECORR=NO LOADINGS=YES VARPROP=YES COEFFICIENTS=YES.

Canonical Correlations

备注

已创建输出

17-JUL-2019 22:18:53

注释

输入

活动数据集

数据集1

过滤器

<无>

权重

<无>

拆分文件

<无>

语法

BEGIN PROGRAM '#

'.

资源

处理程序时间

00:00:00.02

耗用时间

00:00:00.07

[数据集1]

典型相关性设置

生理指标变量

体重x1 腰围x2 脉搏x3

训练指标变量

引体向上次数y1 起坐次数y2 跳跃次数y3

集中的数据集

评分语法

用于评分的相关性

3

典型相关系数

相关系数

特征值

威尔克统计

F

分子自由度

分母自由度

p值

1

.796

1.725

.350

2.048

9.000

34.223

.064

2

.201

.042

.955

.176

4.000

30.000

.949

3

.073

.005

.995

.085

1.000

16.000

.775

置信水平 90% 95 99

显著性水平 0.1 0.05 0.01

H0 for Wilks 检验是指当前行和后续行中的相关性均为零


 

集合1 标准化典型相关变量对应的线性组合系数

变量

1

2

3

体重x1

.775

-1.884

-.191

腰围x2

-1.579

1.181

.506

脉搏x3

.059

-.231

1.051

集合2 标准化典型相关变量对应的线性组合系数

变量

1

2

3

引体向上次数y1

.349

-.376

-1.297

起坐次数y2

1.054

.123

1.237

跳跃次数y3

-.716

1.062

-.419

集合1 非标准化典型相关变量对应的线性组合系数

变量

1

2

3

体重x1

.031

-.076

-.008

腰围x2

-.493

.369

.158

脉搏x3

.008

-.032

.146

集合2 非标准化典型相关变量对应的线性组合系数

变量

1

2

3

引体向上次数y1

.066

-.071

-.245

起坐次数y2

.017

.002

.020

跳跃次数y3

-.014

.021

-.008

1

集合1的典型相关变量 典型载荷

变量

1

2

3

体重x1

-.621

-.772

-.135

腰围x2

-.925

-.378

-.031

脉搏x3

.333

.041

.942

集合2 典型载荷

变量

1

2

3

引体向上次数y1

.728

.237

-.644

起坐次数y2

.818

.573

.054

跳跃次数y3

.162

.959

-.234

集合1 交叉载荷

变量

1

2

3

体重x1

-.494

-.155

-.010

腰围x2

-.736

-.076

-.002

脉搏x3

.265

.008

.068

集合2 交叉载荷

变量

1

2

3

引体向上次数y1

.579

.048

-.047

起坐次数y2

.651

.115

.004

跳跃次数y3

.129

.192

-.017

已解释的方差比例

典型变量

集合1 * 自身

集合1 * 集合 2

集合2 * 自身

集合2 * 集合 1

1

.451

.285

.408

.258

2

.247

.010

.434

.017

3

.302

.002

.157

.001

根据您提供的IBM SPSS Statistics输出结果,我们可以详细分析典型相关分析的各项输出:

典型相关性设置

  • 生理指标变量:包括体重x1、腰围x2、脉搏x3。
  • 训练指标变量:包括引体向上次数y1、起坐次数y2、跳跃次数y3。
  • 集中的数据集:未使用任何特定的数据集。
  • 评分语法:未使用评分语法。
  • 用于评分的相关性:共3个典型相关系数。

典型相关系数

  • 第一对典型相关系数:0.796,特征值1.725,威尔克统计0.350,F值2.048,分子自由度9.000,分母自由度34.223,显著性0.064。
  • 第二对典型相关系数:0.201,特征值0.042,威尔克统计0.955,F值0.176,分子自由度4.000,分母自由度30.000,显著性0.949。
  • 第三对典型相关系数:0.073,特征值0.005,威尔克统计0.995,F值0.085,分子自由度1.000,分母自由度16.000,显著性0.775。

置信水平和显著性水平

  • 置信水平:90%、95%、99%
  • 显著性水平:0.1、0.05、0.01
  • H0 for Wilks 检验:当前行和后续行中的相关性均为零。

标准化典型相关变量对应的线性组合系数

  • 集合 1(生理指标变量):
    • 体重x1: 0.775, -1.884, -0.191
    • 腰围x2: -1.579, 1.181, 0.506
    • 脉搏x3: 0.059, -0.231, 1.051
  • 集合 2(训练指标变量):
    • 引体向上次数y1: 0.349, -0.376, -1.297
    • 起坐次数y2: 1.054, 0.123, 1.237
    • 跳跃次数y3: -0.716, 1.062, -0.419

非标准化典型相关变量对应的线性组合系数

  • 集合 1(生理指标变量):
    • 体重x1: 0.031, -0.076, -0.008
    • 腰围x2: -0.493, 0.369, 0.158
    • 脉搏x3: 0.008, -0.032, 0.146
  • 集合 2(训练指标变量):
    • 引体向上次数y1: 0.066, -0.071, -0.245
    • 起坐次数y2: 0.017, 0.002, 0.020
    • 跳跃次数y3: -0.014, 0.021, -0.008

典型载荷

  • 集合 1(生理指标变量):
    • 体重x1: -0.621, -0.772, -0.135
    • 腰围x2: -0.925, -0.378, -0.031
    • 脉搏x3: 0.333, 0.041, 0.942
  • 集合 2(训练指标变量):
    • 引体向上次数y1: 0.728, 0.237, -0.644
    • 起坐次数y2: 0.818, 0.573, 0.054
    • 跳跃次数y3: 0.162, 0.959, -0.234

交叉载荷

  • 集合 1(生理指标变量):
    • 体重x1: -0.494, -0.155, -0.010
    • 腰围x2: -0.736, -0.076, -0.002
    • 脉搏x3: 0.265, 0.008, 0.068
  • 集合 2(训练指标变量):
    • 引体向上次数y1: 0.579, 0.048, -0.047
    • 起坐次数y2: 0.651, 0.115, 0.004
    • 跳跃次数y3: 0.129, 0.192, -0.017

已解释的方差比例

  • 第一对典型变量
    • 集合 1 * 自身: 0.451
    • 集合 1 * 集合 2: 0.285
    • 集合 2 * 自身: 0.408
    • 集合 2 * 集合 1: 0.258
  • 第二对典型变量
    • 集合 1 * 自身: 0.247
    • 集合 1 * 集合 2: 0.010
    • 集合 2 * 自身: 0.434
    • 集合 2 * 集合 1: 0.017
  • 第三对典型变量
    • 集合 1 * 自身: 0.302
    • 集合 1 * 集合 2: 0.002
    • 集合 2 * 自身: 0.157
    • 集合 2 * 集合 1: 0.001

结果分析

  • 第一对典型相关系数接近显著水平(p=0.064),这表明可能存在一定程度的相关性。
  • 第二对典型相关系数的p值较高(0.949),表明该对典型相关性不显著。
  • 第三对典型相关系数同样不显著(p=0.775)。
  • 标准化典型相关变量对应的线性组合系数显示了原始变量在典型变量中的权重。
  • 典型载荷反映了原始变量与典型变量之间的关系强度,可以用来理解哪些原始变量对典型变量贡献较大。
  • 已解释的方差比例表明第一对典型变量对样本总方差的解释能力最强,而其他典型变量的解释能力较弱。

结论

  • 第一对典型变量对观众和业内人士对于电视节目观点之间的关系解释能力较强,而其他典型变量的解释能力较弱。
  • 体重x1起坐次数y2对第一对典型变量的贡献较大。
  • 腰围x2对第一对典型变量的贡献最大。
  • 第一对典型变量解释的方差比例为0.451,表明这对典型变量对样本总方差的解释能力最强。

课后作业

  • 任务:探究观众和业内人士对于一些电视节目的观点之间的关系,并写一篇小论文。
  • 参考资料:阅读一篇关于葡萄酒评价的文章(2012年数学建模A题一等奖论文)作为参考。

以上是对典型相关分析及其应用的深度分析。


http://www.kler.cn/a/310353.html

相关文章:

  • 宗馥莉的接班挑战:内斗升级,竞品“偷家”
  • 《Django 5 By Example》阅读笔记:p76-p104
  • Elasticsearch 8.16:适用于生产的混合对话搜索和创新的向量数据量化,其性能优于乘积量化 (PQ)
  • Zotero 6.0 安装包及安装教程
  • 数据集标注txt文件读取小工具
  • linux c/c++最高效的计时方法
  • 【RabbitMQ 项目】服务端:数据管理模块之消息管理
  • 大语言模型超参数调优:开启 AI 潜能的钥匙
  • Linux下rpm方式部署mysql(国产化生产环境无联网服务器部署实操)
  • Android开发高频面试题之——Android篇
  • 为什么 ECB 模式不安全
  • ETL架构类型有哪些?怎么选择?
  • 力扣之1075.项目员工I
  • Java 垃圾收集器详解:CMS, G1, ZGC
  • 国产服务器CPU发展分析
  • 「数据科学」转换数据,数据存储空间和类型转换
  • spark学习笔记
  • 基于JAVA的居家办公OA系统
  • Java中的数据脱敏与隐私保护:实现GDPR与隐私安全的最佳实践
  • c#的委托、事件
  • Red Hat 和 Debian Linux 对比
  • 异常(Exception)
  • 24年蓝桥杯及攻防世界赛题-MISC-2
  • LeetCode41. 缺失的第一个正数(2024秋季每日一题 20)
  • OpenHarmony(鸿蒙南向开发)——标准系统方案之扬帆移植案例
  • Qt安卓开发连接手机调试(红米K60为例)