作者gsuper (綠色蘇打心)
看板Statistics
標題[問題] 演算法與統計的結合
時間Tue Jul 14 00:05:51 2009
請問一下
如果在做 data mining 的時候
用電腦的演算法進行篩選
其中含有 10 種 threshold , 各有其統計模型
這樣假設每次 alpha 取 0.01
反之正確率為 0.99^10 = 0.90
請問這種正確率下降的情況該如何克服?
我問實驗室的學長
他們的回答是
" 我們要的是結果 , 所以中間的統計模型比較不重要 , 基本上就是採取 greedy 的想法
有人建出統計模型我們就用 你的想法比較偏檢定 可是我們在意的是篩選....
考慮正確率應該是在軟體做出來以後的 program training階段 "
看起來 0.99^10 這種考慮正確率的想法並不適合 Data mining
請問我的想法可以如何改正呢?
--
--
※ 發信站: 批踢踢實業坊(ptt.cc)
◆ From: 140.113.177.170
※ 編輯: gsuper 來自: 140.113.177.170 (07/14 00:07)
※ 編輯: gsuper 來自: 140.113.177.170 (07/14 00:09)
1F：推 lin15:alpha取0.001 07/14 08:29
2F：推 jwjeng:0.995^10鰮0.95 0.999^10鰮0.99 看你最後想要多少? 07/14 09:44
3F：推 smallpudding:如果有多個模型...DM常用的方法（之一）是投票法 07/16 01:00
4F：→ smallpudding:好像不太會去用這種想法去想...@@ 07/16 01:05
5F：→ gsuper:後來發現可以用 FDR 來補救 07/29 16:10