作者saltlake (SaltLake)
看板Statistics
标题[问题] 两种实验方式的比较
时间Fri Aug 3 23:01:50 2018
假设我们要证实某个检验方式甲的性能比检验方式乙的要好，
请问下列两种设计在验证能力上有甚麽差异?
1. 找300个样本，以随机的方式平均分配给实验组(用甲测)和
控制组(用乙测)。分配和检验的过程都保持盲性，之後的数据
分析也保持盲性。
检测的指标有3个: 子项、丑项、寅项。
各单项检测指标的差值(甲的减去乙的)之虚无假说是无差异，
对立假说是有差异(差值可能是正值或负值)。
然後我们计算假设虚无假说为真的情况下，各检测指标差值，
以及它们的 P-值。
P-值超过(小於)临界值表示有统计显着性而可拒绝虚无假说。
各单项差值假如是正值，表示这方面甲比乙好，反之则较不好。
2. 找300个样本，实验组是对它们用甲检测，控制组适用乙检测。
至於试验指标和甲说测试则和前一种设计完全相同。
--
※ 发信站: 批踢踢实业坊(ptt.cc), 来自: 220.136.58.19
※ 文章网址: https://webptt.com/cn.aspx?n=bbs/Statistics/M.1533308512.A.751.html
1F：→ Altair: 第二种设计没做随机分配? 08/04 18:18
2F：→ Altair: 你的目的是进行多因子实验设计? 08/04 18:21
厄，如果先考虑每个检测只测一个指标的情况呢?
3F：→ andrew43: 看不明白第二种方法实际是什麽 08/04 19:41
因为做了甲测试之後再做乙测试(或先乙後甲)，结果之间不会有交互影响，
反正具体检测试对某个样本本体取下测试体，然後用测试体进行甲或乙测试
。所以想说用第 2 种设计必较省事，而且样本数倍增。
至於随机分配，假设各个样本之间本就存有随机差异可以吗? 比方说就算各个
样本是工厂生产线出来的罐头，理论上每个都一模一样，实际上还是有些不同
，所以才有良率的问题。或者当样本是病人，我们对事对个病人抽点血或取点
尿，然後对每个病人的血或尿用甲(或乙)检验方法测3个指标，这样病人的样本
之间本来就有差异。
※ 编辑: saltlake (220.136.58.19), 08/04/2018 20:28:26
※ 编辑: saltlake (220.136.58.19), 08/04/2018 20:43:59
拿西瓜当例子。传统上有用手拍西瓜并听声音来测试西瓜好坏，假设这是乙测
试法。然後我们有用超因波扫描器扫描西瓜接受通过西瓜的超音波讯号判别好
坏的另一种测试法(甲测试法)。
样本数大统计检定力高，可是要确认甲乙测事法的正确性必须把西瓜剖开，这种
破坏性测试有成本，不希望做太多样本。
上述第2种设计可以有300样本，是第1种设计的2倍。但是不知道这第2种设计有否
统计上的问题；倘有，甚麽问题。
※ 编辑: saltlake (220.136.58.19), 08/04/2018 21:20:59
4F：→ andrew43: 你可以先确认同一个样本先做甲检测再做乙检测（或相反） 08/04 21:52
5F：→ andrew43: 会不会对结果有任何影响。 08/04 21:52
6F：→ andrew43: 如果没有影响的话，那实验方法二就是模型多考虑受测单位 08/04 21:53
7F：→ andrew43: 为一项随机因子。 08/04 21:53
8F：→ andrew43: 此二种设计的结果分别类似於独立t检验和配对t检验 08/04 21:54
9F：→ recorriendo: 就是between-subjects vs. within-subjects design 08/06 11:40
10F：→ recorriendo: 随便查基本实验设计的书就有了 08/06 11:40
11F：→ recorriendo: 注意within-sibjects design不代表不用随机化 08/06 11:42
12F：→ recorriendo: 要排除order effect最严谨的方法就是随机化干预顺序 08/06 11:42