Statistics 板


LINE

大家好,第一次在貴版發言,不符規定再請告知><" 最近學到 glm,想要請教有關解讀 glm 中 deviance 以及 degree of freedom 的問題。 =============以下正文開始=========== 例如說我有一個 model 叫 glm.1,其方程式為 logit(y)~x summary report: Null deviance 為 45.33 on 17 degrees of freedom Residual deviance 為 12.06 on 16 degrees of freedom 比較以下兩個 test (皆以 R 程式碼呈現): 1. 想要檢定此 model 好不好 -- Deviance Goodness-of-fit test 直接代入 glm.1 的 Residual deviance & df (12.06 & 16): > 1 - pchisq(glm.1$deviance, glm.1$df.residual) [1] 0.7398392 因為不能拒絕 h0(這個 model 是好的),所以結論是 There's no evidence that the model is inadequent. 2. 想要比較這個 model,是否比 null model 好(更顯著) -- Drop-in-deviance test 代入兩者 deviance & df 的差: > 1 - pchsq(glm.1$null.deviance-glm.1$deviance, df=1) [1] 8.021055e-09 此時拒絕 h0(兩個 model 沒差),代表加入 x 變數的確比 null model 更有解釋力。 想要問的問題是: 兩個不同的 test 卻以用同樣的方式檢定,其各自的意義要怎麼解讀才正確? ==========以下是我自己的想法========== 我自己的想法是,1-pchisq(mean,df) 的意思是用來檢查, 在給定 mean=12.06 & df=16 的情況下,該樣本服從卡方分配的機率。 所以第一個 test 做出來結果代表 deviance 這個檢定量服從卡方分配的機率很大, 又因為 glm 中假設 deviance 在大樣本情況下會服從卡方分配, 所以認為這個 model 是 ok 的。 延續以上的想法到第二個test,把兩個 model 的 deviance & df 的差代入 變成討論當 mean=33.27(45.33-12.06), df=1(17-16)時, 這樣的樣本會服從卡方分配的機率。 那為什麼算出來機率很小,代表意義卻是 glm.1 的 x 很顯著呢??? 到這裡就卡住了......好像說不通.... 會不會是我一開始的想法就有問題了呢? 已經卡關幾天了,自己一直想不通,上來po文懇請指點、互相討論! 感謝耐心看完,謝謝大家~ --



※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 223.140.122.96
※ 文章網址: https://webptt.com/m.aspx?n=bbs/Statistics/M.1450761462.A.146.html
1F:→ andrew43: 你把deviance想像成殘差,越大就是模型越不準。 12/22 20:23
2F:→ andrew43: 所以x可以讓deviance明顯變小,即所謂顯著. 12/22 20:24
3F:→ andrew43: 另外也注意一下該p-value所對應的H0是什麼。 12/22 20:26
謝謝andrew大!!經提點我有發現到drop-in-deviance test的H0是:兩個model沒差 所以當p-value很小時表示拒絕H0 (也就是加入x變數的確是有解釋力的) 只是我不了解的點是,為什麼在數學上,drop-in-deviance跟goodness-of-fit兩種檢定 會是用同樣的算法,總覺得應該不是巧合...(看來我還需要再多啃一點書 哈哈) ※ 編輯: locka (114.136.215.224), 12/24/2015 00:20:07
4F:→ andrew43: 可以參考維基百科 Likelihood-ratio test 條目。 12/24 01:56
5F:→ andrew43: 至於怎麼證明它服從卡方分配,就有請高手指點了。 12/24 01:58
6F:→ celestialgod: 維基 Distribution: Wilks's theorem 可以看看 12/24 02:05
7F:→ celestialgod: 根據該理論,likelihood ratio會漸進卡方 12/24 02:05
8F:→ celestialgod: 原PO要注意一下 是"漸進"卡方分配 12/24 02:06
9F:→ celestialgod: A大說 服從卡方分配這個詞用的比較不恰當一點XD 12/24 02:07
10F:→ andrew43: 多謝指點。 12/24 03:02
11F:→ locka: 謝謝c大的補充!我有去找來看了,了解是用asymptotically的方 12/24 12:43
12F:→ locka: 式去逼近卡方分配。不過我主要不解的是drop in deviance te 12/24 12:43
13F:→ locka: st的部分,拿deciance的差去test卡方分配的目的是什麼呢? 12/24 12:43
14F:→ celestialgod: 目的是用來比較兩模型的配適程度是否有差異 12/24 13:29
15F:→ celestialgod: 一般你model的deviance除上null model的deviance 12/24 13:30
16F:→ celestialgod: 應該不是差...這點要修正一下XD 12/24 13:31
17F:→ celestialgod: 不過相同假設的兩個模型之deviance也可以這樣來作 12/24 13:31
18F:→ celestialgod: 檢定 12/24 13:31







like.gif 您可能會有興趣的文章
icon.png[問題/行為] 貓晚上進房間會不會有憋尿問題
icon.pngRe: [閒聊] 選了錯誤的女孩成為魔法少女 XDDDDDDDDDD
icon.png[正妹] 瑞典 一張
icon.png[心得] EMS高領長版毛衣.墨小樓MC1002
icon.png[分享] 丹龍隔熱紙GE55+33+22
icon.png[問題] 清洗洗衣機
icon.png[尋物] 窗台下的空間
icon.png[閒聊] 双極の女神1 木魔爵
icon.png[售車] 新竹 1997 march 1297cc 白色 四門
icon.png[討論] 能從照片感受到攝影者心情嗎
icon.png[狂賀] 賀賀賀賀 賀!島村卯月!總選舉NO.1
icon.png[難過] 羨慕白皮膚的女生
icon.png閱讀文章
icon.png[黑特]
icon.png[問題] SBK S1安裝於安全帽位置
icon.png[分享] 舊woo100絕版開箱!!
icon.pngRe: [無言] 關於小包衛生紙
icon.png[開箱] E5-2683V3 RX480Strix 快睿C1 簡單測試
icon.png[心得] 蒼の海賊龍 地獄 執行者16PT
icon.png[售車] 1999年Virage iO 1.8EXi
icon.png[心得] 挑戰33 LV10 獅子座pt solo
icon.png[閒聊] 手把手教你不被桶之新手主購教學
icon.png[分享] Civic Type R 量產版官方照無預警流出
icon.png[售車] Golf 4 2.0 銀色 自排
icon.png[出售] Graco提籃汽座(有底座)2000元誠可議
icon.png[問題] 請問補牙材質掉了還能再補嗎?(台中半年內
icon.png[問題] 44th 單曲 生寫竟然都給重複的啊啊!
icon.png[心得] 華南紅卡/icash 核卡
icon.png[問題] 拔牙矯正這樣正常嗎
icon.png[贈送] 老莫高業 初業 102年版
icon.png[情報] 三大行動支付 本季掀戰火
icon.png[寶寶] 博客來Amos水蠟筆5/1特價五折
icon.pngRe: [心得] 新鮮人一些面試分享
icon.png[心得] 蒼の海賊龍 地獄 麒麟25PT
icon.pngRe: [閒聊] (君の名は。雷慎入) 君名二創漫畫翻譯
icon.pngRe: [閒聊] OGN中場影片:失蹤人口局 (英文字幕)
icon.png[問題] 台灣大哥大4G訊號差
icon.png[出售] [全國]全新千尋侘草LED燈, 水草

請輸入看板名稱,例如:e-shopping站內搜尋

TOP