作者gsuper (绿色苏打心)
看板Statistics
标题[问题] 演算法与统计的结合
时间Tue Jul 14 00:05:51 2009
请问一下
如果在做 data mining 的时候
用电脑的演算法进行筛选
其中含有 10 种 threshold , 各有其统计模型
这样假设每次 alpha 取 0.01
反之正确率为 0.99^10 = 0.90
请问这种正确率下降的情况该如何克服?
我问实验室的学长
他们的回答是
" 我们要的是结果 , 所以中间的统计模型比较不重要 , 基本上就是采取 greedy 的想法
有人建出统计模型我们就用 你的想法比较偏检定 可是我们在意的是筛选....
考虑正确率应该是在软体做出来以後的 program training阶段 "
看起来 0.99^10 这种考虑正确率的想法并不适合 Data mining
请问我的想法可以如何改正呢?
--
--
※ 发信站: 批踢踢实业坊(ptt.cc)
◆ From: 140.113.177.170
※ 编辑: gsuper 来自: 140.113.177.170 (07/14 00:07)
※ 编辑: gsuper 来自: 140.113.177.170 (07/14 00:09)
1F：推 lin15:alpha取0.001 07/14 08:29
2F：推 jwjeng:0.995^10鰮0.95 0.999^10鰮0.99 看你最後想要多少? 07/14 09:44
3F：推 smallpudding:如果有多个模型...DM常用的方法（之一）是投票法 07/16 01:00
4F：→ smallpudding:好像不太会去用这种想法去想...@@ 07/16 01:05
5F：→ gsuper:後来发现可以用 FDR 来补救 07/29 16:10