多元统计分析填空和简答(二)考试必备
2.试写出因子分析的数学模型（R 型与Q 型任写一种）.
（一）、R 型因子分析的数学模型就是把变量（指标）
分解为公因子和特殊因子的线性组合，即
???????++++=++++=++++=p
m pm p p p m m m m F a F a F a X F a F a F a X F a F a F a X εεε 2211222221212112121111 令T p X X X X ),,(21 =，T m F F F F ),,(21 =，
m P ij a A ?=)(T p ),,(21εεεε =
则ε+=AF X
且满足：
（1）p m ≤
（2）0),(=εF Cov
（3）???????
? ??=1111)( F D （4）????????
? ?
?=22221)(p D σσσε （二）、Q 型因子分析的数学模型就是把样本分解为公因子 和特殊因子的线性组合，即
???????++++=++++=++++=n
m nm n n n m m m m F a F a F a X F a F a F a X F a F a F a X εεε 2211)(22222121)2(11212111)1( 令T
n X X X X ),,()()2()1( =，T m F F F F ),,(21 =，
m n ij a A ?=)(T n ),,(21εεεε =
则ε+=AF X
且满足：
（1）n m ≤
（2）0),(=εF Cov
（3）???????
? ??=1111)( F D （4）???????
? ?
?=22221)(n D σσσε 3. 试写出多重多元回归的数学模型.
设有m 个自变量m x x x ,,21，对应p 个因变量p y y y ,,21 则多重多元回归的数学模型.
???????+++++=+++++=+++++=p
m mp p p p p m m m m x x x y F x x y x x x y εββββεββββεββββ 221102222211202211221111011 其中),0(~),,(21∑p T n N εεε
6．简述主成分分析的计算步骤。
第一步：对原始数据进行标准化处理；
第二步：计算样本相关系数矩阵；
第三步：用雅克比方法求相关系数矩阵R 的特征值
（p λλλ 21,）和相应的特征向量()
p i a a a a ip i i i 2,1,,,21==； 第四步：选择重要的主成分，并写出主成分表达式；
第五步：计算主成分得分；第六步：依据主成分得分的数据， 则可以进行进一步的统计分析
19．简述Fisher 判别基本思想。
费舍判别法是基于统计上的费舍准则，即判别的结果
应该使两组间区别最大，使每组内部离散性最小。在费舍准则意义下 ，确定线性判别函数：p p x c x c x c y +++= 2211，
其中p c c c 21,为待求的判别函数的系数。
判别函数的系数的确定原则是使两组间区别最大，
使每组内部离散性最小。有了判别函数后，
对于一个新的样品，将p 个指标的具体数值代入判别式
中求出y 值，然后与判别临界值进行比较，并判别其应属于哪一组。
多元统计分析期末复习
第一章： 多元统计分析研究的内容（5点） 1、简化数据结构（主成分分析） 2、分类与判别（聚类分析、判别分析） 3、变量间的相互关系（典型相关分析、多元回归分析） 4、多维数据的统计推断 5、多元统计分析的理论基础 第二三章： 二、多维随机变量的数字特征 1、随机向量的数字特征 随机向量X 均值向量： 随机向量X 与Y 的协方差矩阵： 当X=Y 时Cov （X ，Y ）=D （X ）；当Cov （X ，Y ）=0 ，称X ，Y 不相关。 随机向量X 与Y 的相关系数矩阵： )',...,,(),,,(2121P p EX EX EX EX μμμ='=Λ)')((),cov(EY Y EX X E Y X --=q p ij r Y X ?=)(),(ρ
2、均值向量协方差矩阵的性质 (1).设X ，Y 为随机向量，A ，B 为常数矩阵 E （AX ）=AE （X ）； E （AXB ）=AE （X ）B; D(AX)=AD(X)A ’; Cov(AX,BY)=ACov(X,Y)B ’; (2).若X ，Y 独立，则Cov(X,Y)＝０，反之不成立． (3).X 的协方差阵D(X)是对称非负定矩阵。例2.见黑板 三、多元正态分布的参数估计 2、多元正态分布的性质 (1).若 ,则E(X)= ,D(X)= . 特别地，当 为对角阵时， 相互独立。 (2).若 ，Ａ为sxp 阶常数矩阵，d 为s 阶向量， ＡＸ＋d ～ . 即正态分布的线性函数仍是正态分布． (3).多元正态分布的边缘分布是正态分布，反之不成立． (4).多元正态分布的不相关与独立等价． 例３．见黑板． 三、多元正态分布的参数估计 (1)“ 为来自p 元总体X 的（简单）样本”的理解---独立同截面． (2)多元分布样本的数字特征---常见多元统计量 样本均值向量 ＝ 样本离差阵Ｓ＝ 样本协方差阵Ｖ＝ S ;样本相关阵Ｒ (3) ,Ｖ分别是 和 的最大似然估计； (4)估计的性质 是 的无偏估计； ,Ｖ分别是 和 的有效和一致估计； ； Ｓ～ ， 与Ｓ相互独立； 第五章 聚类分析： 一、什么是聚类分析 ：聚类分析是根据“物以类聚”的道理，对样品或指标进行分类的一种多元统计分析方法。用于对事物类别不清楚，甚至事物总共可能有几类都不能确定的情况下进行事物分类的场合。聚类方法：系统聚类法（直观易懂）、动态聚类法（快）、有序聚类法（保序）...... Q-型聚类分析（样品）R-型聚类分析（变量） 变量按照测量它们的尺度不同，可以分为三类：间隔尺度、有序尺度、名义尺度。 二、常用数据的变换方法:中心化变换、标准化变换、极差正规化变换、对数变换（优缺点） 1、中心化变换（平移变换）：中心化变换是一种坐标轴平移处理方法，它是先求出每个变量的样本平均值，再从原始数据中减去该变量的均值，就得到中心化变换后的数据。不改变样本间的相互位置，也不改变变量间的相关性。 2、标准化变换：首先对每个变量进行中心化变换，然后用该变量的标准差进行标准化。 经过标准化变换处理后，每个变量即数据矩阵中每列数据的平均值为0，方差为1，且也不再具有量纲，同样也便于不同变量之间的比较。 3、极差正规化变换（规格化变换）：规格化变换是从数据矩阵的每一个变量中找出其最大值和最小值，这两者之差称为极差，然后从每个变量的每个原始数据中减去该变量中的最小值，再除以极差。经过规格化变换后，数据矩阵中每列即每个变量的最大数值为1，最小数值为0，其余数据取值均在0－1之间；且变换后的数据都不再具有量纲，便于不同的变),(~∑μP N X μ∑μ p X X X ,,,21Λ),(~∑μP N X ) ,('A A d A N s ∑+μ)()1(,, n X X ΛX )',,,(21p X X X Λ)')(()()(1X X X X i i n i --∑=n 1 X μ∑μX )1,(~∑n N X P μ),1(∑-n W p X X
多元统计分析与R语言建模考试试卷
.. .. 多元统计分析及R 语言建模考试试卷 一、简答题（共5小题，每小题6分，共30分） 1. 常用的多元统计分析方法有哪些？ （1）多元正态分布检验 （2）多元方差-协方差分析 （3）聚类分析 （4）判别分析 （5）主成分分析 ______________ 课程类别 必修[ ] 选修[ ] 考试方式 开卷[ ] 闭卷[ ]
（7）对应分析 （8）典型相关性分析 （ 9）定性数据建模分析 （10）路径分析（又称多重回归、联立方程） （11）结构方程模型 （12）联合分析 （13）多变量图表示法 （14）多维标度法 2. 简单相关分析、复相关分析和典型相关分析有何不同？并举例说明之。 简单相关分析：简单相关分析是研究现象之间是否存在某种依存关系，并对具体有依存关系的现象探讨其相关方向以及相关程度，是研究随机变量之间的相关关系的一种统计方法。例如，以X、Y分别记小学生的数学与语文成绩，感兴趣的是二者的关系如何，而不在于由X去预测Y。 复相关分析；研究一个变量 x0与另一组变量 (x1,x2,…，xn)之间的相关程度。例如,职业声望同时受到一系列因素（收入、文化、权力……）的影响，那么这一系列因素的总和与职业声望之间的关系，就是复相关。复相关系数R0.12…n的测定，可先求出 x0对一组变量x1，x2，…，xn的回归直线，再计算x0与用回归直线估计值悯之间的简单直线回归。复相关系数为R0.12…n的取值围为0≤R0.12…n≤1。复相关系数值愈大，变量间的关系愈密切。 典型相关分析就是利用综合变量对之间的相关关系来反映两组指标之间的整体相关性的多元统计分析方法。它的基本原理是：为了从总体上把握两组指标之间的相关关系，分别在两组变量中提取有代表性的两个综合变量U1和V1（分别为两个变量组中各变量的线性组合），利用这两个综合变量之间的相关关系来反映两组指标之间的整体相关性。
多元统计分析期末试题
一、填空题（20分） 1、若),2,1(),,(~)(n N X p 且相互独立，则样本均值向量X 服从的分布 为 2、变量的类型按尺度划分有_间隔尺度_、_有序尺度_、名义尺度_。 3、判别分析是判别样品 所属类型 的一种统计方法，常用的判别方法有__距离判别法_、Fisher 判别法、Bayes 判别法、逐步判别法。 4、Q 型聚类是指对_样品_进行聚类，R 型聚类是指对_指标(变量)_进行聚类。 5、设样品),2,1(,),,(' 21n i X X X X ip i i i ，总体),(~ p N X ，对样品进行分类常用的距离 2 ()ij d M )()(1j i j i x x x x ，兰氏距离()ij d L 6、因子分析中因子载荷系数ij a 的统计意义是_第i 个变量与第j 个公因子的相关系数。 7、一元回归的数学模型是： x y 10，多元回归的数学模型是： p p x x x y 22110。 8、对应分析是将 R 型因子分析和Q 型因子分析结合起来进行的统计分析方法。 9、典型相关分析是研究两组变量之间相关关系的一种多元统计方法。 二、计算题（60分） 1、设三维随机向量),(~3 N X ，其中 200031014，问1X 与2X 是否独立？),(21 X X 和3X 是否独立？为什么？ 解： 因为1),cov(21 X X ，所以1X 与2X 不独立。 把协差矩阵写成分块矩阵 22211211，),(21 X X 的协差矩阵为11 因为12321),),cov(( X X X ，而012 ，所以),(21 X X 和3X 是不相关的，而正态分布不相关与相互
多元统计分析试题及答案
华南农业大学期末试卷（A 卷） 2006学年第2学期 考试科目：多元统计分析 考试类型：（闭卷） 考试时间：120 分钟 学号 姓名 年级专业 题号 一 二 三 四 五 六 七 八 总分 得分 评阅人 一、填空题（5×6=30） 22121212121~(,),(,),(,),, 1X N X x x x x x x ρμμμμσρ ?? ∑==∑= ???+-1、设其中则Cov(,)=____. 10 31 2~(,),1,,10,()()_________i i i i X N i W X X μμμ=' ∑=--∑、设则=服从。 ()1 2 34 433,4 92,32 16___________________ X x x x R -?? ?'==-- ? ?-? ? =∑、设随机向量且协方差矩阵则它的相关矩阵 4、 __________， __________， ________________。 215,1, ,16(,),(,) 15[4()][4()]~___________i p p X i N X A N T X A X μμμμ-=∑∑'=--、设是来自多元正态总体和分别为正态总体的样本均值和样本离差矩阵,则。 (), 123设X=x x x 的相关系数矩阵通过因子分析分解为 211X h = 的共性方差111 X σ = 的方差21X g =1公因子f 对的贡献121330.93400.1280.9340.4170.83511 00.4170.8940.02700.8940.44730.8350.4470.1032013 R ? ? - ????? ? -?? ? ? ?=-=-+ ? ? ? ??? ? ? ????? ? ???
多元统计分析模拟试题教学提纲
多元统计分析模拟试 题
多元统计分析模拟试题（两套：每套含填空、判断各二十道） A卷 1)判别分析常用的判别方法有距离判别法、贝叶斯判别法、费歇判别法、逐 步判别法。 2)Q型聚类分析是对样品的分类，R型聚类分析是对变量_的分类。 3)主成分分析中可以利用协方差矩阵和相关矩阵求解主成分。 4)因子分析中对于因子载荷的求解最常用的方法是主成分法、主轴因子法、 极大似然法 5)聚类分析包括系统聚类法、模糊聚类分析、K-均值聚类分析 6)分组数据的Logistic回归存在异方差性，需要采用加权最小二乘估计 7)误差项的路径系数可由多元回归的决定系数算出，他们之间的关系为 = 8)最短距离法适用于条形的类，最长距离法适用于椭圆形的类。 9)主成分分析是利用降维的思想，在损失很少的信息前提下，把多个指标转 化为几个综合指标的多元统计方法。 10)在进行主成分分析时，我们认为所取的m（m 22121212121 ~(,),(,),(,),, 1X N X x x x x x x ρμμμμσρ ?? ∑==∑= ??? +-1、设其中则Cov(,)=____. 10 31 2~(,),1,,10,()()_________i i i i X N i W X X μμμ=' ∑=--∑L 、设则=服从。 ()1 2 34 433,4 92, 3216___________________ X x x x R -?? ?'==-- ? ?-? ? =∑、设随机向量且协方差矩阵则它的相关矩阵 4、 __________， __________， ________________。 215,1,,16(,),(,)15[4()][4()]~___________i p p X i N X A N T X A X μμμμ-=∑∑'=--L 、设是来自多元正态总体和分别为正态总体的样本均值和样本离差矩阵,则。 12332313116421(,,)~(,),(1,0,2),441, 2142X x x x N x x x x x μμ-?? ?'=∑=-∑=-- ? ?-?? -?? + ??? 、设其中试判断与是否独立？ (), 1 2 3设X=x x x 的相关系数矩阵通过因子分析分解为 211X h = 的共性方差111X σ= 的方差21X g = 1公因子f 对的贡献1213 30.93400.1280.9340.4170.8351100.4170.8940.02700.8940.44730.8350.4470.10320 13 R ? ? - ????? ? -?? ? ? ?=-=-+ ? ? ? ??? ? ? ????? ? ??? 一、填空题： 1、多元统计分析是运用数理统计方法来研究解决多指标问题的理论和方法. 2、回归参数显著性检验是检验解释变量对被解释变量的影响是否著. 3、聚类分析就是分析如何对样品（或变量）进行量化分类的问题。通常聚类分析分为 Q型聚类和 R型聚类。 4、相应分析的主要目的是寻求列联表行因素A 和列因素B 的基本分析特征和它们的最优联立表示。 5、因子分析把每个原始变量分解为两部分因素：一部分为公共因子，另一部分为特殊因子。 6、若 () (,), P x N αμα ∑=1,2,3….n且相互独立，则样本均值向量x服从的分布 为_x~N(μ，Σ/n)_。 二、简答 1、简述典型变量与典型相关系数的概念，并说明典型相关分析的基本思想。 在每组变量中找出变量的线性组合，使得两组的线性组合之间具有最大的相关系数。选取和最初挑选的这对线性组合不相关的线性组合，使其配对，并选取相关系数最大的一对，如此下去直到两组之间的相关性被提取完毕为止。被选出的线性组合配对称为典型变量，它们的相关系数称为典型相关系数。 2、简述相应分析的基本思想。 相应分析，是指对两个定性变量的多种水平进行分析。设有两组因素A和B，其中因素A包含r个水平，因素B包含c个水平。对这两组因素作随机抽样调查，得到一个rc的二维列联表，记为。要寻求列联表列因素A和行因素B的基本分析特征和最优列联表示。相应分析即是通过列联表的转换，使得因素A 和因素B 具有对等性，从而用相同的因子轴同时描述两个因素各个水平的情况。把两个因素的各个水平的状况同时反映到具有相同坐标轴的因子平面上，从而得到因素A 、B 的联系。 3、简述费希尔判别法的基本思想。 从k 个总体中抽取具有p 个指标的样品观测数据，借助方差分析的思想构造一个线性判别函数 系数： 确定的原则是使得总体之间区别最大，而使每个总体内部的离差最小。将新样品的p 个指标值代入线性判别函数式中求出 值，然后根据判别一定的规则，就可以判别新的样品属于哪个总体。 5、简述多元统计分析中协差阵检验的步骤 第一，提出待检验的假设 和H1； 第二，给出检验的统计量及其服从的分布； 第三，给定检验水平，查统计量的分布表，确定相应的临界值，从而得到否定域； 第四，根据样本观测值计算出统计量的值，看是否落入否定域中，以便对待判假设做出决策（拒绝或接受）。 协差阵的检验 检验0=ΣΣ 0p H =ΣI ： /2 /21exp 2np n e tr n λ???? =-?? ? ???? S S 00p H =≠ΣΣI ： /2 /2**1exp 2np n e tr n λ???? =-?? ? ???? S S 一、判断题 （ 对 ）112(,,,)p X X X X '=L 的协差阵一定是对称的半正定阵 （ 对 ）2标准化随机向量的协差阵与原变量的相关系数阵相同。 （ 对）3典型相关分析是识别并量化两组变量间的关系，将两组变量的相关关系 的研究转化为一组变量的线性组合与另一组变量的线性组合间的相关关系的研究。 （ 对 ）4多维标度法是以空间分布的形式在低维空间中再现研究对象间关系的数据分析方法。 （ 错）5),(~),,,(21∑'=μp p N X X X X Λ，,X S 分别是样本均值和样本离差阵，则, S X n 分别是,μ∑的无偏估计。 （ 对）6),(~),,,(21∑'=μp p N X X X X Λ，X 作为样本均值μ的估计，是 无偏的、有效的、一致的。 （ 错）7 因子载荷经正交旋转后，各变量的共性方差和各因子的贡献都发生了变化 （ 对）8因子载荷阵()ij A a =中的ij a 表示第i 个变量在第j 个公因子上的相对重要性。 （ 对 ）9 判别分析中，若两个总体的协差阵相等，则Fisher 判别与距离判别等 价。 （对）10距离判别法要求两总体分布的协差阵相等，Fisher 判别法对总体的分布无特定的要求。 二、填空题 1、多元统计中常用的统计量有：样本均值向量、样本协差阵、样本离差阵、样本相关系数矩阵． 2、设∑是总体1(,,)m X X X =L 的协方差阵，∑的特征根(1,,)i i m λ=L 与相应的单 位正交化特征向量 12(,,,)i i i im a a a α=L ，则第一主成分的表达式是 11111221m m y a X a X a X =+++L ，方差为 1λ。 3设∑是总体1234(,,,)X X X X X =的协方差阵，∑的特征根和标准正交特征向量分别 为：' 112.920(0.1485,0.5735,0.5577,0.5814)U λ==--- ' 221.024(0.9544,0.0984,0.2695,0.0824)U λ==- '330.049(0.2516,0.7733,0.5589,0.1624)U λ==-- 1．多元分析研究的是多个随机变量及其相互关系的统计总体。 2．多元统计中常用的统计量有：样本均值、样本方差、样本协方差和样本相关系数。 3．协方差和相关系数仅仅是变量间离散程度的一种度量，并不能刻画变量间可能存在的关联程度。 4．人们通过各种实践，发现变量之间的相互关系可以分成相关和不相关两种类型。 5．总离差平方和可以分解为回归离差平方和和剩余离差平方和两个部分，各自的自由度为p 和n-p-1，其中回归离差平方和在总离差平方和中所占比重越大，则线性回归效果越显著。7．偏相关系数是指多元回归分析中，当其他变量固定后，给定的两个变量之间的的相关系数。8．Spss中回归方程的建模方法有一元线形回归、多元线形回归、岭回归、多对多线形回归等。9．主成分分析是通过适当的变量替换，使新变量成为原变量的综合变量，并寻求相关性的一种方法。 10．主成分分析的基本思想是：设法将原来众多具有一定相关性（比如P个指标），重新组合成一组新的互相无关的综合指标来代替原来的指标。 11．主成分的协方差矩阵为对角矩阵。 12．主成分表达式的系数向量是相关系数矩阵的特征向量。 13．原始变量协方差矩阵的特征根的统计含义是原始数据的相关系数。 14．原始数据经过标准化处理，转化为均值为0 ，方差为1 的标准值，且其协方差矩阵与相关系数矩阵相等。 15．样本主成分的总方差等于1 。 16．变量按相关程度为，在相关性很强程度下，主成分分析的效果较好。 17．在经济指标综合评价中，应用主成分分析法，则评价函数中的权数为方差贡献度。 19．因子分析是把每个原始变量分解为两部分因素，一部分是公共因子，另一部分为特殊因子。20．变量共同度是指因子载荷矩阵中第i行元素的平方和。 21．公共因子方差与特殊因子方差之和为 1 。22．聚类分析是建立一种分类方法，它将一批样哂或变量按照它们在性质上的亲疏程度进行科学的分类。 23．Q型聚类法是按样品进行聚类，R型聚类法是按变量进行聚类。 24．R型聚类统计量通常采用具有代表性的变量。 25．在聚类分析中需要对原始数据进行无量纲化处理，以消除不同量纲或数量级的影响，达到数据间可同度量的目的。常用的无量纲化方法有以下几种：中心化变换、规格化变换、标准化变换、对数变换。 26．六种Q型聚类方法分别为最短距离法、最长距离法、中间距离法、重心法、类平均法、可变类平均法 28．判别分析是要解决在研究对象已分成若干类的情况下，确定新的观测数据属于已知类别中哪一类的多元统计方法。 29．用判别分析方法处理问题时，通常以判别函数作为衡量新样本点与各已知组别接近程度的指标。 30．进行判别分析时，通常指定一种判别规则，用来判定新样本的归属，常见的判别准则有Fisher准则、贝叶斯准则。 33．Fisher判别法就是要找一个由p个变量组成的线性判别函数，使得各自组内点的离差尽可能接近，而不同组间点的尽可能疏远。 能够进行分类和组 合；能够研究指标之间的依存关系；进行预测；进 量的影响显著性大小，从大到小逐个引入回归方程， 同时，在逐个自变量选入回归方程的过程中，如果 发现先前被引入的自变量在其后由于某些自变量的 引入而失去其重要性时，可以从回归方程中随时予 以剔除。引入一个变量或剔除一个变量，为逐步回 归的一步，每步都要进行显著性检验，以便保证每 次引入变量前回归方程中只包括显著性变量，这个 过程反复进行，直到既无不显著变量从回归方程中 i j1 X1 ,X2…… X p的一切线性 组合中方差最大的，F2是与F1不相关的X1 ,X2……Xp 一切线性组合中方差最大。F p是与F1 ,……F P-1不相关 在经济统计研究中，除了经济效益的综合评价研究 外，对不同地区经济发展水平的评价研究，不同地 区经济发展竞争力的评价研究，人民生活水平、生 活质量的评价研究，等等都可以用主成分分析方法 进行研究；另外，主成分分析除了用于系统评估研 究领域外，还可以与回归分析结合，进行主成分回 归分析，以及利用主成分分析进行挑选变量，选择 阵内部结构的研究，找出存在于所有变量（或样品） 中具有共性的因素，并综合为少数几个新变量，把 原始变量表示成少数几个综合变量的线性组合，以 再现原始变量与综合变量之间的相关关系。其中， 这里的少数几个综合变量一般是不可观测指标，通 亲疏程度进行分类的多元统计分析方法。聚类分析 时，用来描述样品或变量的亲疏程度通常有两个途 径，一是把每个样品或变量看成是多维空间上的一 个点，在多维坐标中，定义点与点，类和类之间的 距离，用点与点间距离来描述样品或变量之间的亲 疏程度；另一个是计算样品或变量的相似系数，用 先将n个样品自成一类，然后每次将具有最小距 离的两个类合并，合并后再重新计算类与类之间的 距离，再并类，这个过程一直持续到所有的样品都 归为一类为止。这种聚类方法称为系统聚类法。根 据并类过程所做的样品并类过程图称为聚类谱系 区别：判别分析与聚类分析不同。判别分析是 在已知研究对象分成若干类型（或组别）并已取得 各种类型的一批已知样品的观测数据，在此基础上 根据某些准则建立判别式，然后对未知类型的样品 进行判别分类。聚类分析，并对于一批合定样品要 划分的类型事先不知道，正需要聚类分析来综合确 定类型的。 联系：判别分析与聚类分析往往联合使用，往 往是专职能部门类分析，再进行判别新样品属于哪 单变量描述的计量，对判别分析所要求的前提能定 进行统计检验；（2）推导判别系数组出标准化或未 标准化的典则判别函数系数，并进行安著性检验； （3）建立Fisher判别模型，根据Bayes规则和 Fisher规则进行判别组合；4）进行样本回判分析， 对判别系数的结果进行分析；（5）输出结果，根据 Fisher判别：又称典则判别，该方法的基本思 想是投影，即将原来在R维空间的自变量组合投影 到维度较低的D维空间上去，然后在D维空间再进 行分类。其优势在于对分布和方差没有什么限制， 应用范围广泛。 Bayes判别：就是利用经验信息，基本思想是认 为所有D个类别都是空间中互斥的子城，每个观测 都是空间中的一点。其优点在于进行多类别判别， ，根据样品到类之间的“距 离”大小判别，样品到那个类的“距离”最小，判 p个指标 的线性判别函数，把待判样品代入线性判别函数， 公式计算样品到每个 总体（类）的概率，比较概率的大小，样品到那个 总体（类）的概率最大，就判样品属于哪个总体（类）。 将每个 原始变量分解成两部分因素，一部分是由所有变量 共同具有的少数几个公共因子组成的，另一部分是 联系：（ 成分分析的逆问题。（2）二者都是以‘降维’为目的， 都是从协方差矩阵或相关系数矩阵出发。 区别：（1）主成分分析模型是原始变量的线性组 合，是将原始变量加以综合、归纳，仅仅是变量变 换；而因子分析是将原始变量加以分解，描述原始 变量协方差矩阵结构的模型；只有当提取的公因子 个数等于原始变量个数时，因子分析才对应变量变 换。（2）主成分分析，中每个主成分对应的系数是 唯一确定的；因子分析中每个因子的相应系数即因 子载荷不是唯一的。（3 ）因子分析中因子载荷的不 唯一性有利于对公因子进行有效解释；而主成分分 （2）因子提取 （3）因子旋转 概念（思想） 重新组合成一组新的互相无关的几个综合指标来 代替原来指标。同时根据实际需要从中可取几个较 少的综合指标尽可能多地反映原来的指标的信息 几何意义： 主成分分析的过程也就是坐标旋转的过程，各主 成分表达式就是新坐标系与原坐标系的转换关系， 新坐标系中各坐标轴的方向就是原始数据方差最 一些能够度量样品或指标之间相似程度的统计量， 然后利用统计量将样品或指标进行归类。把相似的 样品或指标归为一类，把不相似的归为其他类。直 到把所有的样品（或指标）聚合完毕. 首先在 组合之间具有最大的相关系数。然后选取和最初挑 选的这对线性组合不相关的线性组合，使其配对， 并选取相关系数最大的一对，如此继续下去，直到 两组变量之间的相关性被提取完毕为此。被选出的 线性组合配对称为典型变量，它们的相关系数称为 典型相关系数。典型相关系数度量了这两组变量之 的统计方法 （2）取每组变量的线性组合，使他们的线性组合 的相关系数达到最大 （3）然后在每组中再取第二对典型相关变量，使 其与第一对不相关 （4）反复取，直到两组变量的相关性提取完为止 * X(α) (α＝1,…,n).检 验 （1）H0: μX＝μ0 (μ0为已知向量),H1: μ≠μ0 （2）取检验统计量 （3）按传统的检验方法,对给定的显著水平α,查临 界值表得λα: （4）由样本值计算X及T20值,若T 20 ＞λα,则否 （2）求典型相关系数及典型变量 2 别抽取n1和n2个样品，每个样品测量p个指标， 计算X到G1、G2总体的距离。X∈G1 D (X1 , G1) ﹤D (X1 , G2)；X∈G2 D (X1 , G1) D (X1 , G2)；待定 D (X1 , G1)= D (X1 , G2)。 （2）多个总体的距离判别法：○1∑（1）=（2……=∑(k)= ∑时当W ji(X)﹥0 对一切j≠I；待判若有一个 W ji=0。当∑（1），∑（2……∑(k)互不相等时：X∈G i， 若有一个W ji=0 0=μ0 H1：μ≠μ0 (2) 检验统计量=n(X--μ0)/∑-1(X--μ0)～X2(P)(在H0 成立时)（3）对给定的检验水平a，查X2分布表使 P〔T02﹥λa〕=a可确定临界值λx再用样本值计算 T02,若T02﹥λa则否定H0，否则相容 《多元统计分析》课程试卷答案 A 卷 2009年秋季学期 开课学院：理 考试方式：√闭卷、开卷、一纸开卷、其它 考试时间：120 分钟 班级 姓名 学号 散卷作废。 一、（15分）设()∑????? ??=,~3321μN x x x X ，其中????? ??-=132μ，??? ? ? ??=∑221231111， 1．求32123x x x +-的分布； 2. 求二维向量???? ??=21a a a ，使3x 与??? ? ??'-213x x a x 相互独立。 解：1.32123x x x +-()CX x x x ???? ? ? ??-=321123，则()C C C N CX '∑,~μ。（2分） 其中：μC ()13132123=????? ??--=，()9123221231111123=??? ? ? ??-????? ??-='∑C C 。（4分） 所以32123x x x +-()9,13~N （1分） 2. ????? ?????? ??'-213 3x x a x x =AX x x x a a ????? ? ?????? ??--3212 1110 ，则()A A A N AX '∑,~2μ。（1分） 其中： 订 线 装 μA ???? ??++-=???? ? ??-???? ??--=132113********* a a a a ，（1分） ??? ? ??+--+++--+--='???? ??--???? ? ?????? ??--='∑242232222211002212311111100 2121222121212121 a a a a a a a a a a a a a a A A （2分） 要使3x 与???? ??'-213x x a x 相互独立，必须02221=+--a a ，即2221=+a a 。 因为2221=+a a 时24223212122 21 +--++a a a a a a 0>。所以使3x 与??? ? ??'-213x x a x 相互独立，只要 ???? ??=21a a a 中的21,a a 满足2221=+a a 。 （4分） 二、（14分）设一个容量为n=3的随机样本取自二维正态总体，其数据矩阵为 ??? ? ? ??=3861096X ，给定显著性水平05.0=α， 1. 求均值向量μ和协方差矩阵∑的无偏估计 2. 试检验,38:H 0???? ??=μ .38:H 1??? ? ??≠μ （已知F 分布的上α分位数为19)2,2(F ,5.199)1,2(F ,51.18)2,1(F 0.050.050.05===） 解：1、??? ? ??==∑=68X n 1X n 1i i （3分） ???? ??--='--=∑=9334)X X ()X X (1-n 1S i n 1i i （3分） 2、,38:H 0???? ??=μ .38:H 1??? ? ??≠μ…（1分） 二名词解释 1、多元统计分析：多元统计分析是运用数理统计的方法来研究多变量（多指标）问题的理论和方法，是一元统计学的推广 2、聚类分析:是根据“物以类聚”的道理，对样品或指标进行分类的一种多元统计分析方法。将个体或对象分类，使得同一类中的对象之间的相似性比与其他类的对象的相似性更强。使类内对象的同质性最大化和类间对象的异质性最大化 3、随机变量：是指变量的值无法预先确定仅以一定的可能性(概率)取值的量。它是由于随机而获得的非确定值，是概率中的一个基本概念。即每个分量都是随机变量的向量为随机向量。类似地，所有元素都是随机变量的矩阵称为随机矩阵。 4、统计量：多元统计研究的是多指标问题,为了了解总体的特征,通过对总体抽样得到代表总体的样本,但因为信息是分散在每个样本上的,就需要对样本进行加工,把样本的信息浓缩到不包含未知量的样本函数中,这个函数称为统计量 三、计算题 解： 答： 答： 题型三解答题 1、简述多元统计分析中协差阵检验的步骤 答： 第一，提出待检验的假设和H1； 第二，给出检验的统计量及其服从的分布； 第三，给定检验水平，查统计量的分布表，确定相应的临界值，从而得到否定域； 第四，根据样本观测值计算出统计量的值，看是否落入否定域中，以便对待判假设做出决策（拒绝或接受）。 2、简述一下聚类分析的思想 答：聚类分析的基本思想，是根据一批样品的多个观测指标，具体地找出一些能够度量样品或指标之间相似程度的统计量，然后利用统计量将样品或指标进行归类。把相似的样品或指标归为一类，把不相似的归为其他类。直到把所有的样品（或指标）聚合完毕. 3、多元统计分析的内容和方法 答：1、简化数据结构,将具有错综复杂关系的多个变量综合成数量较少且互不相关的变量，使研究问题得到简化但损失的信息又不太多。（1）主成分分析（2）因子分析（3）对应分析等 第一章： 多元统计分析研究的容（5点） 1、简化数据结构（主成分分析） 2、分类与判别（聚类分析、判别分析） 3、变量间的相互关系（典型相关分析、多元回归分析） 4、多维数据的统计推断 5、多元统计分析的理论基础 第二三章： 二、多维随机变量的数字特征 1、随机向量的数字特征 随机向量X均值向量： 随机向量X与Y的协方差矩阵： 当X=Y时Cov（X，Y）=D（X）；当Cov（X，Y）=0 ，称X，Y不相关。 随机向量X与Y的相关系数矩阵： 2、均值向量协方差矩阵的性质 (1).设X，Y为随机向量，A，B 为常数矩阵 E（AX）=AE（X）； E（AXB）=AE（X）B; D(AX)=AD(X)A’; )' ,..., , ( ) , , , ( 2 1 2 1P p EX EX EX EXμ μ μ = ' = )' )( ( ) , cov(EY Y EX X E Y X- - = q p ij r Y X ? =) ( ) , (ρ Cov(AX,BY)=ACov(X,Y)B ’; (2).若X ，Y 独立，则Cov(X,Y)＝０，反之不成立． (3).X 的协方差阵D(X)是对称非负定矩阵。例2.见黑板 三、多元正态分布的参数估计 2、多元正态分布的性质 (1).若 ,则E(X)= ,D(X)= . 特别地，当 为对角阵时， 相互独立。 (2).若 ，Ａ为sxp 阶常数矩阵，d 为s 阶向量， ＡＸ＋d ～ . 即正态分布的线性函数仍是正态分布． (3).多元正态分布的边缘分布是正态分布，反之不成立． (4).多元正态分布的不相关与独立等价． 例３．见黑板． 三、多元正态分布的参数估计 (1)“ 为来自p 元总体X 的（简单）样本”的理解---独立同截面． (2)多元分布样本的数字特征---常见多元统计量 样本均值向量 ＝ 样本离差阵Ｓ＝ 样本协方差阵Ｖ＝ S ;样本相关阵Ｒ (3) ,Ｖ分别是 和 的最大似然估计； (4)估计的性质 是 的无偏估计； ,Ｖ分别是 和 的有效和一致估计； ； Ｓ～ ， 与Ｓ相互独立； 第五章 聚类分析： 一、什么是聚类分析 ：聚类分析是根据“物以类聚”的道理，对样品或指标进行分类的一种多元统计分析方法。用于对事物类别不清楚，甚至事物总共可能有几类都不能确定的情况下进行事物分类的场合。聚类方法：系统聚类法（直观易懂）、动态聚类法（快）、有序聚类法（保序）...... Q-型聚类分析（样品）R-型聚类分析（变量） 变量按照测量它们的尺度不同，可以分为三类：间隔尺度、有序尺度、名义尺度。 二、常用数据的变换方法:中心化变换、标准化变换、极差正规化变换、对数变换（优缺点） 1、中心化变换（平移变换）：中心化变换是一种坐标轴平移处理方法，它是先求出每个变量的样本平均值，再从原始数据中减去该变量的均值，就得到中心化变换后的数据。不改变样本间的相互位置，也不改变变量间的相关性。 2、标准化变换：首先对每个变量进行中心化变换，然后用该变量的标准差进行标准化。 经过标准化变换处理后，每个变量即数据矩阵中每列数据的平均值为0，方差为1，且也不再具有量纲，同样也便于不同变量之间的比较。 3、极差正规化变换（规格化变换）：规格化变换是从数据矩阵的每一个变量中找出其最大值和最小值，这两者之差称为极差，然后从每个变量的每个原始数据中减去该变量中的最小值，再除以极差。经过规格化变换后，数据矩阵中每列即每个变量的最大数值为1，最小数值为0，其余数据取值均在0－1之间；且变换后的数据都不再具有量纲，便于不同的变量之间的比较。 4、对数变换：对数变换是将各个原始数据取对数，将原始数据的对数值作为变换后的新值。它将具有指数特征的数据结构变换为线性数据结构。 三、样品间相近性的度量 研究样品或变量的亲疏程度的数量指标有两种：距离，它是将每一个样品看作p 维空),(~∑μP N X μ∑μp X X X ,,,21 ),(~∑μP N X ),('A A d A N s ∑+μ)()1(,,n X X X )',,,(21p X X X )')(()()(1X X X X i i n i --∑=n 1X μ ∑μX )1,(~∑n N X P μ),1(∑-n W p X X 1、简述多元统计分析中协差阵检验的步骤 第一，提出待检验的假设H0和H1； 第二，给出检验的统计量及其服从的分布； 第三，给定检验水平，查统计量的分布表，确定相应的临界值，从而得到否定域； 第四，根据样本观测值计算出统计量的值，看是否落入否定域中，以便对待判假设做出决策（拒绝或接受）。 协差阵的检验 检验0=ΣΣ 0p H =ΣI ： /2/21exp 2np n e tr n λ????=-?? ?????S S 00p H =≠ΣΣI ： /2/2**1exp 2np n e tr n λ????=-?? ????? S S 检验12k ===ΣΣΣ012k H ===ΣΣΣ： 统计量/2/2/2/211i i k k n n pn np k i i i i n n λ===∏∏S S 2. 针对一个总体均值向量的检验而言，在协差阵已知和未知的两种情形下，如何分别构造的统计量？ 3. 作多元线性回归分析时，自变量与因变量之间的影响关系一定是线性形式的吗？多元线性回归分析中的线性关系是指什么变量之间存在线性关系？ 答：作多元线性回归分析时，自变量与因变量之间的影响关系不一定是线性形式。当自变量与因变量是非线性关系时可以通过某种变量代换，将其变为线性关系，然后再做回归分析。 多元线性回归分析的线性关系指的是随机变量间的关系，因变量y 与回归系数βi 间存在线性关系。 多元线性回归的条件是： （1）各自变量间不存在多重共线性； （2）各自变量与残差独立； （3）各残差间相互独立并服从正态分布； （4）Y 与每一自变量X 有线性关系。 4.回归分析的基本思想与步骤 基本思想： 多元统计分析 题型一定义、名词解释 题型二计算（协方差阵、模糊矩阵） 题型三解答题 一、定义 二名词解释 1、多元统计分析：多元统计分析是运用数理统计的方法来研究多变量（多指标）问题的理论和方法，是一元统计学的推广 2、聚类分析:是根据“物以类聚”的道理，对样品或指标进行分类的一种多元统计分析方法。将个体或对象分类，使得同一类中的对象之间的相似性比与其他类的对象的相似性更强。使类内对象的同质性最大化和类间对象的异质性最大化 3、随机变量：是指变量的值无法预先确定仅以一定的可能性(概率)取值的量。它是由于随机而获得的非确定值，是概率中的一个基本概念。即每个分量都是随机变量的向量为随机向量。类似地，所有元素都是随机变量的矩阵称为随机矩阵。 4、统计量：多元统计研究的是多指标问题,为了了解总体的特征,通过对总体抽样得到代表总体的样本,但因为信息是分散在每个样本上的,就需要对样本进行加工,把样本的信息浓缩到不包含未知量的样本函数中,这个函数称为统计量 三、计算题 解： 答： 答： 题型三解答题 1、简述多元统计分析中协差阵检验的步骤 答： 第一，提出待检验的假设和H1； 第二，给出检验的统计量及其服从的分布； 第三，给定检验水平，查统计量的分布表，确定相应的临界值，从而得到否定域； 第四，根据样本观测值计算出统计量的值，看是否落入否定域中，以便对待判假设做出决策（拒绝或接受）。 2、简述一下聚类分析的思想 答：聚类分析的基本思想，是根据一批样品的多个观测指标，具体地找出一些能够度量样品或指标之间相似程度的统计量，然后利用统计量将样品或指标进行归类。把相似的样品或指标归为一类，把不相似的归为其他类。直到把所有的样品（或指标）聚合完毕. 3、多元统计分析的内容和方法 答：1、简化数据结构,将具有错综复杂关系的多个变量综合成数量较少且互不相关的变量，使研究问题得到简化但损失的信息又不太多。（1）主成分分析（2）因子分析（3）对应分析等 2、分类与判别,对所考察的变量按相似程度进行分类。（1）聚类分析：根据分析样本的各研究变量，将性质相似的样本归为一类的方法。（2）判别分析：判别样本应属何种类型的统计方法。 多元统计分析模拟试题（两套：每套含填空、判断各二十道） A卷 1)判别分析常用的判别方法有距离判别法、贝叶斯判别法、费歇判别法、逐步 判别法。 2)Q型聚类分析是对样品的分类，R型聚类分析是对变量_的分类。 3)主成分分析中可以利用协方差矩阵和相关矩阵求解主成分。 4)因子分析中对于因子载荷的求解最常用的方法是主成分法、主轴因子法、极 大似然法 5)聚类分析包括系统聚类法、模糊聚类分析、K-均值聚类分析 6)分组数据的Logistic回归存在异方差性，需要采用加权最小二乘估计 7)误差项的路径系数可由多元回归的决定系数算出，他们之间的关系为 P e= 1?R2 8)最短距离法适用于条形的类，最长距离法适用于椭圆形的类。 9)主成分分析是利用降维的思想，在损失很少的信息前提下，把多个指标转化 为几个综合指标的多元统计方法。 10)在进行主成分分析时，我们认为所取的m（m 、判断题 （对）1X （兀公2丄，X p）的协差阵一定是对称的半正定阵 （对）2标准化随机向量的协差阵与原变量的相关系数阵相同。 （对）3典型相关分析是识别并量化两组变量间的关系，将两组变量的相关关系的研究转化为一组变量的线性组合与另一组变量的线性组合间的相关关系的研究。 （对）4多维标度法是以空间分布的形式在低维空间中再现研究对象间关系的数据分析方法。（错）5X （X-X2，,X p） ~ N p（ , ），X,S分别是样本均值和样本离 S 差阵，则X,—分别是，的无偏估计。 n （对）6X （X「X2， ,X p） ~ N p（ , ），X作为样本均值的估计，是无偏的、有效的、一致的。 （错）7因子载荷经正交旋转后，各变量的共性方差和各因子的贡献都发生了变化 （对）8因子载荷阵A （a j）中的a ij表示第i个变量在第j个公因子上的相对重要性。 （对）9判别分析中，若两个总体的协差阵相等，则Fisher判别与距离判别等价。（对）10距离判别法要求两总体分布的协差阵相等，Fisher判别法对总体的分布无特 定的要求。 二、填空题 1、多元统计中常用的统计量有：样本均值向量、样本协差阵、样本离差阵、样本相关系数矩阵. 2、设是总体X （X」,X m）的协方差阵，的特征根i（i 1,L ,m）与相应的单 位正交化特征向量i （盼无丄,a m），则第一主成分的表达式是 y1 Q1X1 812X2 L QmX m 方差为1。 3设是总体X （X1,X2,X3, X4）的协方差阵，的特征根和标准正交特征向量分别为： 1 2.920 U；(0.1485, 0.5735, 0.5577, 0.5814) 2 1.024 U2(0.9544, 0.0984,0.2695,0.0824) 3 0.049 U3(0.2516,0.7733, 0.5589, 0.1624) 0.007U4 （ 0.0612,0.2519,0.5513, 0.7930），则其第二个主成分的表达式是 4多元统计分析期末试题及答案
应用多元统计分析试题及答案
多元统计分析模拟考题及答案
多元统计分析填空和简答(一).doc
秋季多元统计分析考试答案
多元统计分析期末考试考点整理
多元统计分析期末复习试题
多元统计分析简答题..
多元统计分析期末考试考点整理共5页
多元统计分析模拟试题
多元统计分析模拟考题及答案