t检验评估方法等效性的潜在问题

kslam

使用t检验评估方法等效性的潜在问题可以通过以下实施例来说明。

在表1所示的示例中，大多数分析师将得出结论，这两组结果几乎“相同”，因为数据的精密度非常高 (标准差:0.08165/0.05164)。但t检验断定，在显著性水平为 0.05 时，均值之间存在差异。见附图。

在表2所示的示例中, 大多数分析师将得出结论，这两组结果几乎“不相同”，因为数据的精密度非常低(标准差5.4123/6.8646)。但t检验断定没有足够的证据断定，在显著性水平为 0.05 时，均值之间存在差异。见附图。

从这两个例子可以看出，t检验有利于大的变异性和小的样本量。


补充内容 (2019-3-6 14:33):
参考: USP<1010> 分析方法的比较

feignte

t检验关注的是两组样本有没有显著性差异。
但作为化学分析方法对比时，不应该太关注这些的。
小样本的对比和较大样本的对比，可能出现不同的结论。特别两种方法的精密度都很高的时候，样本量适当，有时会得出有显著差异这种结论，但这种差异是完全可以接受的。
另一边，"不能拒绝二者相等"也不是一个强的结论。
检验方法的对比，还是回归到准确度和精密度这两个点上比较合适。

kslam

feignte 发表于 2019-2-16 10:59
t检验关注的是两组样本有没有显著性差异。
但作为化学分析方法对比时，不应该太关注这些的。
小样本的对 ...

相反的，作化学分析方法对比时如方法转移, 更加关注统计分析。否则，会失去其意义。


参阅 : 显著性检验与等效性检验的区别与联系

kslam