作者saltlake (SaltLake)
看板Statistics
标题[问题] 对样本库随机分组和全用之差
时间Sun Aug 30 20:41:00 2020
倘拟比较两个新检验方法的性能是否优於标准者，而这三种检验方法
都是从人体取出的某些样本(血液或尿液或者医学影像等)做量测後给
出判定结果，例如有反应或无反应。
既有资料库已经有 N 个患者的样本供测试，那麽以下两种实验设计
有何不同?
1. 使用标准方法对所有的样本做测试，新的两个方法也对所有样本做
测试，然後比较这两个方法的敏感性和特异性。
2. 使用标准方法对所有的样本做测试。对於那两个新方法，随机把样
本分配给两个方法之一，让两个方法都有 N/2 个测试样本。然後比
较这两个方法的敏感性和特异性。
--
※ 发信站: 批踢踢实业坊(ptt.cc), 来自: 114.24.104.17 (台湾)
※ 文章网址: https://webptt.com/cn.aspx?n=bbs/Statistics/M.1598791262.A.FC7.html
1F：→ yhliu: 其实有些不懂, 关於检测之技术层面的东西. 08/31 06:22
2F：→ yhliu: (1) 3种检测方法想必都不能百分百正确判定吧? 08/31 06:26
3F：→ yhliu: 欲知一检测方法之敏感性与特异性, 必先有一些已知, 百分 08/31 06:28
4F：→ yhliu: 百确定属阳性或阴性的样本, 供测试之用. 08/31 06:30
这边把问题描述更清楚，有两种新方法和一个公认的标准方法(金标准)。
5F：→ yhliu: (2) 每份样本可供多少次测试? 如所说,法1 是每份样本做3种 08/31 06:33
6F：→ yhliu: 测试, 法2 则仅做2种测试. 08/31 06:34
7F：→ yhliu: 就统计上来说, 欲比较两种新法与旧法之差异时, 法2 样本数 08/31 06:36
8F：→ yhliu: 只有法1 之半, 统计误差较大, 表现於估计的就是标准误较大, 08/31 06:38
9F：→ yhliu: 表现於假说检定的就是检定力较低. 08/31 06:39
10F：→ yhliu: 若两种新法相互比较, 法1是全样本, 配对资料, 检定比较两法 08/31 06:41
11F：→ yhliu: 用 McNemar test; 法2 是两个半样本比较, 检定比较两法时用 08/31 06:43
12F：→ yhliu: 两独立样本之比例差异检定. 08/31 06:44
标准方法之所以对所有的样本都测试，是为了提供「标准答案」以供那两种新法
比对。比方说样本一，新测试法一测出说有病，新测法二说没病，而标准法说有病，
这时以标准法测的结果为准，我们才能判断就样本一来说，新测法一正确，而新测法
二错误。
把所有样本随机平均分配给新测法一和二，这样这两个方法才有相同的样本数。
※ 编辑: saltlake (114.24.104.17 台湾), 08/31/2020 07:56:37
13F：→ yhliu: 更迷惑了! 除非 "标准方法" 能提供百分之百正确判定, 否则 09/01 07:18
14F：→ yhliu: 如何能做为比较哪种检测方法较好之依据? 更别说你一开始说 09/01 07:20
15F：→ yhliu: 拟比较两新法是否优於标准者. 既当标准法为百分百正确, 新 09/01 07:22
16F：→ yhliu: 法如何可能 "较优"? 除非检测结果完全一致而又较快较省成本 09/01 07:24
17F：→ yhliu: 若标准法非百分百正确, 则任一新法判定与标准不符, 也不能 09/01 07:25
18F：→ yhliu: 说它就是错的; 反过来说判定相符也只是不能做为比较错误率 09/01 07:27
19F：→ yhliu: 之依据, 却不能说这结果就是对的. 09/01 07:28
说的也是，抱歉。
再修正，目标应该是比较那两个新方法何者为优。
※ 编辑: saltlake (114.24.79.213 台湾), 09/01/2020 07:30:41
20F：→ yhliu: 所以如你所举之例, 标准法+, 新法1也是+, 新法2是-, 除非我 09/01 07:31
21F：→ yhliu: 们能确定标准法是百分百正确, 否则如何能说新法1对而2错? 09/01 07:32
22F：→ yhliu: 抛开时间、花费不论, 只谈正确或错误率, 则却评估一检测法 09/01 07:35
23F：→ yhliu: 表现, 或欲比较两法, 都必须有百分百已确定 + - 的样本, 09/01 07:37
24F：→ yhliu: 否则只如水中捞月. 比如一份测验题两人答, 做为评卷者如不 09/01 07:38
25F：→ yhliu: 能知晓正确答案, 如何给答卷者评分? 如何比较两答卷者优劣? 09/01 07:40
为了简化问题，这边的标准法的正确性是当代科技水准能达到的准确度，所以认定
为必定可靠。
统计上所谓的敏感性和特异性也是定义在有一个绝对可靠的金标准之下，如果没有
这种金标准，根本不能算敏感性和特异性。
※ 编辑: saltlake (114.24.79.213 台湾), 09/01/2020 13:29:56