商务与经济统计——假设检验

1. 基础概念及其定义

1.1 原假设(H_0)和备择假设(H_\alpha)的建立

  • 将研究中的假设作为备择假设
    例如,认为一种新型教学方法优于目前的方法,则备择假设为新方法更好,原假设为新方法不比老方法好。在这种情形下,若拒绝原假设则为研究中的假设提供了统计上的支持。
  • 将受到挑战的假说作为原假设
    我们从有关总体参数值的说法是真实的开始,然后,我们利用假设检验对这种假定提出怀疑,并确定是否有统计证据支持得出假定不正确的结论。在这种情形下,首先确立原假设是有益的,原假设表述了对总体参数值的信念或者假定,在备择假设中认为这种信念或者假说不正确。例如,瓶装饮料的标签上注明,每瓶为67.6盎司,我们认为瓶装饮料的标签是正确的,及灌装重量的均值至少为67.6盎司,除非有其他理由,我们通常假设标签上的标注是正确的,但可以对制造商的说法提出质疑。因此,我们从假设标签是正确的开始,设定原假设 H_0\mu \geqslant 76.6,备择假设 H_\alpha\mu < 76.6。如果抽样结果使得我们得到拒绝 H_0 的结论,则推断 H_\alpha: \mu < 67.6 为真。
  • 等号部分(\geqslant, \leqslant, =)总是出现在原假设中

1.2 显著性检验

  • 第一类错误:当 H_0 为真时我们却拒绝了 H_0
  • 第二类错误:当 H_0 为假时我们却接受了 H_0
测试 H_0是真的 H_\alpha是真的
接受H_0 结论正确 第二类错误
拒绝H_0 第一类错误 结论正确
  • 显著性水平
    当做为一个等式的原假设为真时,犯第一类错误的概率称为检验的显著性水平,用 \alpha 表示,一般取 0.05 或者 0.01。如果发生第一类错误的成本很高,则应当选取较小的值作为显著性水平;如果发生第一类错误的成本不高,则可以适当选取较大的值作为显著性水平。
  • 应用建议
    不论何时,只要未对发生第二类错误的概率加以确定或控制,我们就不能做出接受 H_0 的结论,在这种情形下,只能得出两种可能的结论:不能拒绝 H_0 或拒绝 H_0
  • p
    p 值是一个概率值,它度量样本所提供的证据对原假设的支持程度,也是用来衡量检验统计量与根据样本计算得出的检验统计量值存在明显差异的程度。p 值越小说明反对原假设的证据越多。

一般将只控制第一类错误的假设检验称为显著性检验。如果 p\leqslant \alpha,则我们做出结论“拒绝 H_0”,并称结果是显著的。

2. 总体均值的检验

2.1 \sigma 已知的情形

- 下侧检验 上侧检验 双侧检验
假设 H_0: \mu \geqslant \mu_0\\H_{\alpha}: \mu < \mu_0 H_0: \mu \leqslant \mu_0\\H_{\alpha}: \mu > \mu_0 H_0: \mu = \mu_0\\H_{\alpha}: \mu \neq \mu_0
检验统计量 z = \frac{\bar{x}- \mu_0}{\sigma /\sqrt{n}} z = \frac{\bar{x}- \mu_0}{\sigma /\sqrt{n}} z = \frac{\bar{x}- \mu_0}{\sigma /\sqrt{n}}
拒绝法则:p 值法 如果 p\leqslant \alpha,则拒绝 H_0 如果 p\leqslant \alpha,则拒绝 H_0 如果 p\leqslant \alpha,则拒绝 H_0
拒绝法则:临界值法 如果 z\leqslant -z_{\alpha},则拒绝 H_0 如果 z\geqslant z_{\alpha},则拒绝 H_0 如果 z\leqslant -z_{\alpha / 2}或者z\geqslant z_{\alpha / 2},则拒绝 H_0

其中,z_{\alpha} 为标准正态概率分布下侧的面积为 \alpha 时对应的 z 值,n 为样本容量,绝大多数应用中,样本容量大于等于30时就行;当总体服从正态分布时,适用于任何样本容量;如果总体不是正态分布但至少大致上是对称的,则样本容量需要大于等于15。

法二 \quad 用置信区间的方法进行如下形式的假设检验方法
H_0: \mu = \mu_0\\H_{\alpha}: \mu \neq \mu_0

  1. 从总体中抽取一个简单随机样本,并利用样本均值 \bar{x} 建立总体均值 \mu 的置信区间。
    \bar{x} \pm z_{\alpha /2}\frac{\sigma }{\sqrt{n}}
  2. 如果置信区间包含假设值 \mu_0,则不能拒绝 H_0,否则,拒绝 H_0
  3. 如果是单侧检验,则需要建立的是单侧的置信区间。如果是下侧检验,则建立置信区间 (-\infty, \bar{x} + z_{\alpha /2}\frac{\sigma }{\sqrt{n}}),如果是上侧检验,则建立置信区间 (\bar{x} - z_{\alpha /2}\frac{\sigma }{\sqrt{n}}), +\infty)

2.2 \sigma 未知的情形

- 下侧检验 上侧检验 双侧检验
假设 H_0: \mu \geqslant \mu_0\\H_{\alpha}: \mu < \mu_0 H_0: \mu \leqslant \mu_0\\H_{\alpha}: \mu > \mu_0 H_0: \mu = \mu_0\\H_{\alpha}: \mu \neq \mu_0
检验统计量 t = \frac{\bar{x}- \mu_0}{s /\sqrt{n}} t = \frac{\bar{x}- \mu_0}{s /\sqrt{n}} t = \frac{\bar{x}- \mu_0}{s /\sqrt{n}}
拒绝法则:p 值法 如果 p\leqslant \alpha,则拒绝 H_0 如果 p\leqslant \alpha,则拒绝 H_0 如果 p\leqslant \alpha,则拒绝 H_0
拒绝法则:临界值法 如果 t\leqslant -t_{\alpha},则拒绝 H_0 如果 t\geqslant t_{\alpha},则拒绝 H_0 如果 t\leqslant -t_{\alpha / 2}或者t\geqslant t_{\alpha / 2},则拒绝 H_0

其中,t_{\alpha} 为自由度 n-1t 分布下侧的面积为 \alpha 时对应的 t 值,n 为样本容量,绝大多数应用中,样本容量大于等于30时就行;当总体服从正态分布时,适用于任何样本容量;如果总体不是正态分布但至少大致上是对称的,则样本容量需要大于等于15;如果总体不服从正态分布且数据高度偏斜或者含有异常点,则样本容量需要大于等于50。

3. 总体比率的检验

- 下侧检验 上侧检验 双侧检验
假设 H_0: p \geqslant p_0\\H_{\alpha}: p < p_0 H_0: p \leqslant p_0\\H_{\alpha}: p > p_0 H_0: p = p_0\\H_{\alpha}: p \neq p_0
检验统计量 z = \frac{\bar{p} - p_0}{\sqrt{\frac{p_0(1-p_0)}{n}}} z = \frac{\bar{p} - p_0}{\sqrt{\frac{p_0(1-p_0)}{n}}} z = \frac{\bar{p} - p_0}{\sqrt{\frac{p_0(1-p_0)}{n}}}
拒绝法则:p 值法 如果 p\leqslant \alpha,则拒绝 H_0 如果 p\leqslant \alpha,则拒绝 H_0 如果 p\leqslant \alpha,则拒绝 H_0
拒绝法则:临界值法 如果 z\leqslant -z_{\alpha},则拒绝 H_0 如果 z\geqslant z_{\alpha},则拒绝 H_0 如果 z\leqslant -z_{\alpha / 2}或者z\geqslant z_{\alpha / 2},则拒绝 H_0

其中,z_{\alpha} 为标准正态概率分布下侧的面积为 \alpha 时对应的 z 值,n 为样本容量,需要 np \geqslant 5, n(1-p) \geqslant 5

4. 考虑第二类错误

4.1 计算第二类错误的概率

H_0 为假时,做出拒绝 H_0 的正确结论的概率称做检验的功效。对于给定的 \mu 值,功效为 1- \beta,即做出拒绝原假设正确结论的概率等于 1 减去发生第二类错误的概率。x 轴为 \muy 轴为当 H_0 为假时做出拒绝 H_0 正确结论的概率的曲线为功效曲线。

计算步骤:

  1. 确立原假设和备择假设。
  2. 在显著性水平 \alpha 下,根据临界值方法确定临界值并建立检验的拒绝规则。
  3. 利用 2 中所得的拒绝规则,求解与检验统计量的临界值相对应的样本均值的取值。
  4. 利用 3 中的结果,得到接受 H_0 时所对应的样本均值的值,这些值构成了检验的接受域。
  5. 对于满足备择假设的 \mu 值,利用 \bar{x} 的抽样分布和步骤 4 中的接受域,计算样本均值落在接受域的概率。这一概率即为在选定的 \mu 值处发生第二类错误的概率。

4.2 总体均值单侧假设检验中的样本容量

n = \frac{(z_{\alpha }+z_{\beta })^2 \sigma ^2}{(\mu_0 - \mu_{\alpha })^2}
其中,z_{\alpha} 为标准正态分布的上侧面积为 \alpha 时对应的 z 值,z_{\beta} 为标准正态分布的上侧面积为 \beta 时对应的 z 值,\sigma 为总体标准差,\mu_0 为原假设中样本均值的值,\mu_{\alpha} 为第二类错误中所采用的总体均值的值。注意:双侧检验中,需要用 z_{\alpha /2} 代替 z_{\alpha}

5. 两总体均值之差的假设检验

5.1 \sigma_1\sigma_2 已知的情形

D_0 表示 \mu_1\mu_2 之间假设的差,假设检验的 3 种形式如下:
H_0: \mu_1 - \mu_2 \geqslant D_0 \\ H_{\alpha }: \mu_1 - \mu_2 < D_0 \tag{1}
H_0: \mu_1 - \mu_2 \leqslant D_0 \\ H_{\alpha }: \mu_1 - \mu_2 > D_0 \tag{2}
H_0: \mu_1 - \mu_2 = D_0 \\ H_{\alpha }: \mu_1 - \mu_2 \neq D_0 \tag{3}
其检验统计量为
z = \frac{(\bar{x_1} - \bar{x_2}) - D_0}{\sqrt{\frac{\sigma_1^2}{n_1} + \frac{\sigma_2^2}{n_2}}}
应用建议:随机样本量需要满足 n_1 \geqslant 30, n_2 \geqslant 30。如果其中之一或两者的样本容量小于 30,总体的分布需要近似服从正态分布。

5.2 \sigma_1\sigma_2 未知的情形

\sigma_1\sigma_1 未知时,我们用样本标准差 s_1s_2 来估计 \sigma_1\sigma_2
其检验统计量为
t = \frac{(\bar{x_1} - \bar{x_2}) - D_0}{\sqrt{\frac{s_1^2}{n_1} + \frac{s_2^2}{n_2}}}
其中,t 统计量的自由度采用如下计算公式
df = \frac{\left ( \frac{s_1^2}{n_1}+ \frac{s_2^2}{n_2}\right )^2}{\frac{1}{n_1 - 1}\left ( \frac{s_1^2}{n_1} \right )^2 + \frac{1}{n_2 - 1}\left ( \frac{s_2^2}{n_2} \right )^2}
应用建议:如果两个总体的样本容量 n_1n_2 相等或接近相等,使得总样本容量 n_1 + n_2 至少为 20 时,即使总体不是正态分布,我们也能期望得到非常好的结果。如果总体分布高度偏斜或含有异常点,则需要较大的样本容量。只有当总体分布近似服从正态分布时才可以使用较小的样本容量。

5.3 匹配样本

分析匹配样本时,我们仅考虑数据的差值。运用 t 分布进行假设检验和区间估计。
假设检验的检验统计量为
t = \frac{\bar{d} - \mu_d}{s_d / \sqrt{n}}
其中,\bar{d} 为两样本之差的均值,s_d 为样本标准差,t 分布的自由度为 n-1

6. 两总体比例之差的假设检验

假设检验的 3 种形式如下:
H_0: p_1 - p_2 \geqslant 0 \\ H_{\alpha }: p_1 - p_2 < 0 \tag{1}
H_0: p_1 - p_2 \leqslant 0 \\ H_{\alpha }: p_1 - p_2 > 0 \tag{2}
H_0: p_1 - p_2 = 0 \\ H_{\alpha }: p_1 - p_2 \neq 0 \tag{3}
p_1 = p_2 = p 时,\bar{p_1} - \bar{p_2} 的标准误差为
\sigma_{\bar{p_1} - \bar{p_2}} = \sqrt{\frac{p_1(1-p_1)}{n_1} + \frac{p_2(1-p_2)}{n_2}} = \sqrt{p(1-p)(\frac{1}{n_1} + \frac{1}{n_2})}
p 的合并估计量
\bar{p} = \frac{n_1\bar{p_1} + n_2\bar{p_2}}{n_1 + n_2}

p_1 - p_2 的检验统计量为
z = \frac{\bar{p_1} - \bar{p_2}}{\sqrt{\bar{p}(1-\bar{p})(\frac{1}{n_1} + \frac{1}{n_2})}}
该检验统计量适用于 n_1p_1, n_1(1-p_1), n_2p_2, n_2(1-p_2)全都大于或者等于 5 的大样本情况。

7. 一个总体方差的假设检验

\sigma_0 表示总体方差的假设值

- 下侧检验 上侧检验 双侧检验
假设 H_0: \sigma^2 \geqslant \sigma_0^2 \\ H_\alpha :\sigma^2 < \sigma_0^2 H_0: \sigma^2 \leqslant \sigma_0^2 \\ H_\alpha :\sigma^2 > \sigma_0^2 H_0: \sigma^2 = \sigma_0^2 \\ H_\alpha :\sigma^2 \neq \sigma_0^2
检验统计量 \chi^2 = \frac{(n-1)s^2}{\sigma_0^2} \chi^2 = \frac{(n-1)s^2}{\sigma_0^2} \chi^2 = \frac{(n-1)s^2}{\sigma_0^2}
拒绝法则:p值法 如果 p\leqslant \alpha,则拒绝 H_0 如果 p\leqslant \alpha,则拒绝 H_0 如果 p\leqslant \alpha,则拒绝 H_0
拒绝法则:临界值法 如果 \chi^2\leqslant \chi^2_{1-\alpha},则拒绝 H_0 如果 \chi^2\geqslant \chi^2_{\alpha},则拒绝 H_0 如果 \chi^2\leqslant \chi^2_{1-\alpha}或者\chi^2\geqslant \chi^2_{\alpha/2},则拒绝 H_0

其中,\chi^2_{\alpha} 表示 \chi^2 分布右侧的面积或概率为 \alpha 时对应的 \chi^2 值,\chi^2 分布的自由度为n-1n 为样本容量,总体的分布为正态分布。

8. 两个总体方差的假设检验

- 上侧检验 双侧检验
假设 H_0: \sigma_1^2 \leqslant \sigma_2^2 \\ H_\alpha :\sigma_1^2 > \sigma_2^2 H_0: \sigma_1^2 = \sigma_2^2 \\ H_\alpha :\sigma_1^2 \neq \sigma_2^2
检验统计量 F = \frac{s_1^2}{s_2^2} F = \frac{s_1^2}{s_2^2}
拒绝法则:p值法 如果 p\leqslant \alpha,则拒绝 H_0 如果 p\leqslant \alpha,则拒绝 H_0
拒绝法则:临界值法 如果 F\geqslant F_{\alpha},则拒绝 H_0 如果 F\geqslant F_{\alpha/2},则拒绝 H_0

其中,总体 1 拥有较大的方差。检验统计量服从分子自由度为 n_1-1 和分布自由度为 n_2-1F 分布,F_\alpha 表示 F 分布的上侧面积或者概率为 \alpha 时的值。只有当两个总体至少近似正态分布的假定是合理的情况下才能使用 F 分布。

9. 三个或多个总体比率相等性的假设检验

针对分类型数据。

9.1 三个或多个总体比率相等性的 \chi^2 检验的一般步骤

对于 k \geqslant 3 个总体,总体比率相等性的 \chi^2 检验的步骤如下:

  1. 建立原假设与备择假设:
    H_0:p_1 = p_2 = \cdots =p_k \\ H_\alpha: 所有总体比率不全相等
  2. 从每一个总体中选择一个随机样本,并记录两行(每一个总体服从二项分布) k 列的表中的观察频数 f_{ij}
  3. 假设原假设为真,计算期望频数 e_{ij}
  4. 如果每一个单元格的期望频数 e_{ij} 都大于等于 5,计算检验统计量:
    \chi^2 =\sum_{i}\sum_{j}\frac{(f_{ij} - e_{ij})^2}{e_{ij}}
  5. 拒绝法则:
    p值法:如果 p\leqslant \alpha,则拒绝 H_0
    临界值法:如果 \chi^2\geqslant \chi^2_{\alpha},则拒绝 H_0
    其中, \chi^2 分布的自由度为 k-1\alpha 为检验的显著性水平;期望频数 e_{ij} 的计算方法如下
    e_{ij} = \frac{第i行的合计数 \times 第j列的合计数}{总样本容量}
    注:总体比率相等性的 \chi^2 检验永远是一个上侧检验。

9.2 k 个总体比率的 Marascuilo 成对比较方法

  1. 计算每一对总体的样本比率之差的绝对值:|\bar{p_i} - \bar{p_j}|
  2. 计算每一对比较值相对应的临界值:
    CV_{ij} = \sqrt{\chi_{\alpha }^2}\sqrt{\frac{\bar{p_i}(1-\bar{p_i})}{n_i}+\frac{\bar{p_j}(1-\bar{p_j})}{n_j}}
    其中,\chi^2_{\alpha} 为显著性水平为 \alpha 且自由度为 k-1\chi^2 值;\bar{p_i}\bar{p_j} 为总体 ij 的样本比率;n_in_j 为总体 ij 的样本容量。
  3. 如果任何成对样本比率之差的绝对值 |\bar{p_i} - \bar{p_j}| 超过其相对应的临界值 CV_{ij},则在显著性水平 \alpha 下,成对之差是显著的,于是得出相应的两个总体比率不同。

9.3 总体服从多项分布时的总体比率相等性检验

\chi^2 计算的期望频数 e_{ij} 以及检验统计量 \chi^2 与总体为二项分布时没有区别,唯一不同的是原假设,原假设为对于所有总体回答变量的多项分布是相同的。 k 个总体中每一个都有 r 种回答,检验统计量 \chi^2 的自由度为 (r-1)(k-1)

10. 独立性检验

两个分类变量独立性的 \chi^2 检验的一般步骤:

  1. 建立原假设与备择假设
    H_0: 两个分类变量独立 \\ H_\alpha: 两个分类变量不独立
  2. 从总体中选择一个随机样本,收集样本中每个个体对两个变量的数据。记录 r 行和 c 列的表中的观察频数 f_{ij}
  3. 假定原假设为真,计算期望频数 e_{ij}
  4. 如果期望频数 e_{ij} 都大于等于 5,计算检验统计量:
    \chi^2 =\sum_{i}\sum_{j}\frac{(f_{ij} - e_{ij})^2}{e_{ij}}
  5. 拒绝法则:
    p值法:如果 p\leqslant \alpha,则拒绝 H_0
    临界值法:如果 \chi^2\geqslant \chi^2_{\alpha},则拒绝 H_0
    其中, \chi^2 分布的自由度为 (r-1)(c-1)\alpha 为检验的显著性水平;期望频数 e_{ij} 的计算方法如下
    e_{ij} = \frac{第i行的合计数 \times 第j列的合计数}{总样本容量}
    注: \chi^2 检验也是一个单侧检验,H_0 的拒绝域在自由度为 (r-1)(c-1)\chi^2 分布的上侧。

11. 拟合优度检验

11.1 多项概率分布

多项概率分布的拟合优度检验的一般步骤:

  1. 建立原假设和备择假设:
    H_0: 总体服从k类中每类都有指定的概率的多项概率分布 \\ H_\alpha: 总体不服从k类中每类都有指定的概率的多项概率分布
  2. 选择一个随机样本,并记录每一类别的观察频数 f_i
  3. 假定原假设为真,由此确定每一类别的期望频数 e_ie_i 等于样本容量与各类概率的乘积。
  4. 如果每一类的期望频数都大于等于 5,计算检验统计量的数值
    \chi^2 =\sum_{i=1}^{k}\frac{(f_{i} - e_{i})^2}{e_{i}}
  5. 拒绝法则:
    p值法:如果 p\leqslant \alpha,则拒绝 H_0
    临界值法:如果 \chi^2\geqslant \chi^2_{\alpha},则拒绝 H_0
    其中, \chi^2 分布的自由度为 k-1\alpha 为检验的显著性水平.
    注: 拟合优度检验总是单侧检验,H_0 的拒绝域位于 \chi^2 分布的上侧。

11.2 正态分布

正态分布的拟合优度检验的一般步骤:

  1. 建立原假设和备择假设:
    H_0: 总体服从正态概率分布 \\ H_\alpha: 总体不服从正态概率分布
  2. 抽取一个随机样本,并且
         a. 计算样本均值和样本标准差
         b. 定义 k 个取值区间使得每个区间中的期望频数至少为 5,使用等概率区间是很好的方法。
         c. 记录每个确定好的区间的数据值的观察频数 f_i
  3. 对于步骤 2)\,\,b 中确定的每个区间,计算发生次数的期望频数 e_i,即样本容量与正态随机变量落入每个区间的概率的乘积。
  4. 计算检验统计量的数值
    \chi^2 =\sum_{i=1}^{k}\frac{(f_{i} - e_{i})^2}{e_{i}}
  5. 拒绝法则:
    p值法:如果 p\leqslant \alpha,则拒绝 H_0
    临界值法:如果 \chi^2\geqslant \chi^2_{\alpha},则拒绝 H_0
    其中,\alpha 为检验的显著性水平; \chi^2 分布的自由度为 k-p - 1p 是有样本估计的分布参数的个数,在步骤 2)\,\,a 中,利用样本估计了均值和标准差,因此 p=2,自由度为 k-p-1 = k-3

12. 符号检验

符号检验是假设检验中一种多用途的非参数方法,其利用 p=0.50 的二项分布作为抽样分布。它对总体分布没有假定的要求。

12.1 总体中位数假设检验

一般地,当总体非对称时,对于总体中心位置的度量,中位数优于平均数。因此,总体中位数的非参数符号检验通常是较合适的统计检验。
假设检验的步骤如下:

  1. 将每一个样本观测值与总体中位数的假设值进行比较,如果观测值大于假设值,用 + 号表示;如果观测值小于假设值,用 - 号表示;如果观测值恰好等于假设值,则将它从样本中剔除。
  2. 建立原假设和备择假设:
    H_0: 中位数 = 假设值 \\ H_\alpha: 中位数 \neq 假设值
    加号和减号的分配适合应用二项分布,令 p 表示加号的概率,如果总体中位数等于假设值,则 p=0.50 。因此,原假设和备择假设可以转化为关于二项概率 p 的假设:
    H_0: p=0.50 \\ H_\alpha: p \neq 0.50
  3. 计算 p-值
    如果样本容量 N 小于等于 20,可以利用二项分布概率表进行计算,记加号个数为 N^{+},我们计算加号大于等于 N^+ 的概率,即 p = P(N^+) + P(N^++1) + \cdots + P(N),由于是双侧检验,所以结果以 2p 与显著性水平进行比较得出结论。

若假设检验是上侧检验,则原假设和备择假设可以表示为:
H_0: 中位数 \leqslant 假设值 \\ H_\alpha: 中位数 > 假设值
相应的 p-值等于样本中加号个数大于等于 N^+ 的二项概率。如果是下侧检验,则 p-值等于样本中加号个数小于等于 N^+ 的二项概率。

当样本容量超过 20 时,加号个数的抽样分布能近似为一个正态分布。对于这个近似,正态分布的均值和标准差为:
\mu = 0.50n
\sigma = \sqrt{0.25n}
若是下侧检验,相应的 p-值为
p-值 = P(x \leqslant (N^++0.5)) \quad 0.5 为连续性校正因子

12.2 匹配样本的假设检验

对于匹配样本试验设计,与使用 t 分布对两个总体的均值之差进行推断的方法不同(其要求数量型数据,且确定二者之差服从正态分布),符号检验既能分析分类型数据,也能分析数量型数据,并且对二者之差的分布没有假定。

在市场调查中要求 n 个潜在的消费者比较两个品牌的产品是匹配样本的典型设计,我们不需要得到每个消费者对品牌偏好的数值测定,只要求每个消费者陈述对品牌的偏好,转换成加号和减号来表示。令 p 表示消费者总体中某种偏好所占的比例,然后利用上节所讲的符号检验即可。

匹配样本的符号检验也可以使用数量型数据,此时,正的差值记为加号,负的差值记为减号,差值为 0 将从样本中剔除。

13. 威尔科克森符号秩检验

威尔科克森符号秩检验(Wilcoxon signed-rank test)是分析匹配样本试验数据的非参数方法。检验使用数量型数据,但不要求假定配对观测值之差服从正态分布,只需要假定配对观测值之差具有对称分布(如果二者之差的总体分布是偏斜分布,则推荐使用 12 节介绍的匹配样本的符号检验),关注点是确定两个总体的中位数是否有差异。

用一个例子来说明具体方法:
某个制造企业正在尝试确定两种生产方法在完成任务时间上是存在差异,适用匹配样本设计,随机选择11个工人的2次完成任务时间,1次适用方法A,一次适用方法B。工人首次适用的方法是随机挑选的。数据如下表所示。这些数据是否表明两种方法在完成任务的时间上存在显著差异呢?
[图片上传失败...(image-7f9409-1570673857923)]

我们用威尔科克森符号秩检验对两种方法完成时间的中位数之差进行检验,假设如下:
H_0: 方法A的中位数 - 方法B的中位数 = 0 \\ H_\alpha: 方法A的中位数 - 方法B的中位数 \neq 0
计算符号秩:剔除差异为0的工人8;其中秩为差的绝对值的排序结果,如果有相同的绝对差,则取平均秩(如工人3和工人5)
[图片上传失败...(image-eae2c9-1570673857923)]
T^+ 表示正的符号秩之和,将它作为检验的统计量。如果两个总体中位数相等,并且匹配数据对的个数为大于等于10时, T^+ 的抽样分布近似于如下的正态分布:
均值:
\mu_{T^+} = \frac{n(n+1)}{4}
标准差:
\sigma_{T^+} = \sqrt{\frac{n(n+1)(2n+1)}{24}}
于是,我们得到例子中的 T^+ 的抽样分布为 \mu_{T^+} = 27.5\sigma_{T^+} = 9.8107 的正态分布。由于检验统计量 T^+ = 49.5 在抽样分布的上侧,我们计算上侧的概率 P(T^+ \geqslant 49.5) = P(z \geqslant 2.19) = 0.0143(由于正的符号秩之和是离散型的,而正态分布是连续型的,需要考虑连续性校正因子,不过这里正好取值为49.5,所以保持不变)。所以 p-值为 0.0286。由于 T^+ 在抽样分布的上侧,我们得到方法 A 导致较长的时间。

威尔科克森符号秩检验同样也适用于上侧或者下侧检验。

一个总体中位数的威尔科克森符号秩检验基于假定总体分布对称。由于这个假定,总体中位数等于总体均值,所以,威尔科克森符号秩检验也可以用于对一个总体均值的检验。

14. 曼-惠特尼-威尔科克森检验

5 节介绍了利用两个独立样本进行两个总体均值之差的假设检验方法,其中一个样本来自总体 1,另一个来自总体 2。参数检验要求数量型数据,且假定总体都服从正态分布。当总体标准差 \sigma_1\sigma_2 未知时,用样本标准差 s_1s_2 作为 \sigma_1\sigma_2 的估计量,并且利用 t 分布对两个总体均值之差进行推断。
本节介绍的非参数方法曼-惠特尼-威尔科克森检验 (Mann-Whitney-Wilcoxon test, MWW) 既可以用于顺序型数据,也可以用于数量型数据,而且不需要假定总体服从正态分布。

主要步骤如下:

  1. 建立原假设和备择假设:
    H_0: 两个总体相同 \\ H_\alpha: 两个总体不相同
  2. 对两个样本混合后的数据由低到高进行排序,得到对应的秩(如果两个数据相同,则取平均秩)。
  3. 求每个样本的秩和。取样本 1 的秩和为检验统计量 W
    当两个样本容量都大于等于 7 时,W 的抽样分布可以用正态分布近似:
    均值:
    \mu_W = n_1(n_1 + n_2 +1)/2
    标准差:
    \sigma_W = \sqrt{n_1n_2(n_1 + n_2 + 1)/12}
  4. 根据 W 计算对应的 p-值,得出结论。

MWW 检验的一些应用使其适合于假定两个总体具有相同的形态,即使总体不同,也仅仅是分布位置上的移动。如果两个总体具有相同的形态,假设检验可以根据两个总体中位数之差来陈述。其双侧检验的假设形式如下:
H_0: 中位数_1 - 中位数_2 = 0 \\ H_\alpha: 中位数_1 - 中位数_2 \neq 0

15. 克鲁斯卡尔-沃利斯检验

当我们使用数量型数据并假定总体服从标准差相等的正态分布时,以每个总体的独立随机样本为依据,我们用 F 分布来检验各总体之间的差异(方差分析)。

非参数的克鲁斯卡尔-沃利斯检验 ( Kruskal-Wallis test ) 的依据是来自 k 个总体的 k 个独立随机样本的分析。这个方法既可以使用顺序型数据也可以使用数量型数据,并且不需要假定总体服从正态分布。
主要步骤如下:

  1. 建立原假设和备择假设:
    H_0: 所有总体是相同的 \\ H_\alpha: 并非所有总体都是相同的
  2. 对混合后的样本数据由低到高进行排序,得到对应的秩(如果两个数据相同,则取平均秩)。
  3. 求每个样本的秩和。
  4. 计算检验统计量:
    H = \left [ \frac{12}{n_T(n_T+1)}\sum_{i=1}^{k}\frac{R_i^2}{n_i} \right ] - 3(n_T+1)
    其中,k 代表总体的个数;n_i 代表样本 i 中观测值的个数;n_T = \sum_{i=1}^{k}n_i,代表所有样本的观测值总数;R_i 为样本 i 的秩和。
  5. 拒绝法则说明
    在各个总体相同的原假设下,当 k 个总体的每个样本的容量都大于等于 5 时,H 的抽样分布可以近似服从自由度为 k-1\chi^2 分布。克鲁斯卡尔-沃利斯检验是一个上侧检验。

克鲁斯卡尔-沃利斯检验的一些应用使其适合于假定多个总体具有相同的形态,即使总体不同,也仅仅是分布位置上的移动。如果假定k 个总体具有相同的形态,假设检验可以根据中位数来陈述。其假设形式如下:
H_0: 中位数_1 = 中位数_2 = \cdots = 总位数_k \\ H_\alpha: 并非所有的中位数都相等

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 202,802评论 5 476
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,109评论 2 379
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 149,683评论 0 335
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,458评论 1 273
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,452评论 5 364
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,505评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,901评论 3 395
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,550评论 0 256
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,763评论 1 296
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,556评论 2 319
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,629评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,330评论 4 318
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,898评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,897评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,140评论 1 259
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 42,807评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,339评论 2 342

推荐阅读更多精彩内容