R_Language 板


LINE

1. < Q1-N*(Q3-Q1) or > Q3+N*(Q3-Q1) <= 出於常態分配特性exclude outlier 其中N看你對Outlier的容忍度, 容忍小=>N小, 容忍大=>N大 但你會發現用這去exclude outlier似乎並不是所有點都能適當的被移除掉 有其當資料分配是偏態分布情況下, 這是因為前面說過這是假設資料是在常態分布下的移除ourlier, 對鐘型分布(對稱分布內高外低)也許會比較好,但其他就會非常差, 2. 為了改善 1. 的缺點,有些人會採取下面作法 分配右半部right sigma = (P95-P50)/( qnorm(0.95) -qnorm(0.5) ) (當點數少時,0.95會改成0.85 or 0.75) > median - N*right sigma => outlier 分配左半部sigma = (P50-P05)/( qnorm(0.50) -qnorm(0.05) ) (當點數少時,0.05會改成0.15 or 0.25) < median - N*right sigma => outlier 各位發現了嗎,上述做法其實是將分配假設是鐘型分布, 以鐘的兩端以常態方式推估sigma,再利用計算outlier 此法可能比1.好一些,但仍無法適用非鐘型分布(ex:雙峰 or Uniform...etc) 對一些偏態很嚴重的鐘型分布也無法很好的套用 3. 在國外這是可以專章討論的一個好論文,他們第一步會先將資料分配類型先求出, 再依據各分配的特性予以合理的exclude outlier方法, 不會用一個方法公式去套用所有情況,這是最合理效果最好但也是最麻煩的, 那有人會說用甚麼方去求出分配,之後再用甚麼方法根據各分配exclude outlier 這太多資料了.....,各家有各家的法寶,就不贅述了 你會在R發現一些package跟Outlier相關的, 但請切記,他們多半都是Base on是某種分配去exclude outlier的 Outlier這是一個好問題,我其實很想知道其他高手對此的見解來討論看看 板上其實很注重在Coding,但應用就很少談了,也許這是個好話題 ※ 引述《sky84911 (Chun)》之銘言: : 請問一下該怎麼用R找出離群值, : 我可以產生出box plot,可是無法確認離群值是哪一點 : 謝謝 --



※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 59.126.109.235
※ 文章網址: https://webptt.com/m.aspx?n=bbs/R_Language/M.1451745300.A.A33.html







like.gif 您可能會有興趣的文章
icon.png[問題/行為] 貓晚上進房間會不會有憋尿問題
icon.pngRe: [閒聊] 選了錯誤的女孩成為魔法少女 XDDDDDDDDDD
icon.png[正妹] 瑞典 一張
icon.png[心得] EMS高領長版毛衣.墨小樓MC1002
icon.png[分享] 丹龍隔熱紙GE55+33+22
icon.png[問題] 清洗洗衣機
icon.png[尋物] 窗台下的空間
icon.png[閒聊] 双極の女神1 木魔爵
icon.png[售車] 新竹 1997 march 1297cc 白色 四門
icon.png[討論] 能從照片感受到攝影者心情嗎
icon.png[狂賀] 賀賀賀賀 賀!島村卯月!總選舉NO.1
icon.png[難過] 羨慕白皮膚的女生
icon.png閱讀文章
icon.png[黑特]
icon.png[問題] SBK S1安裝於安全帽位置
icon.png[分享] 舊woo100絕版開箱!!
icon.pngRe: [無言] 關於小包衛生紙
icon.png[開箱] E5-2683V3 RX480Strix 快睿C1 簡單測試
icon.png[心得] 蒼の海賊龍 地獄 執行者16PT
icon.png[售車] 1999年Virage iO 1.8EXi
icon.png[心得] 挑戰33 LV10 獅子座pt solo
icon.png[閒聊] 手把手教你不被桶之新手主購教學
icon.png[分享] Civic Type R 量產版官方照無預警流出
icon.png[售車] Golf 4 2.0 銀色 自排
icon.png[出售] Graco提籃汽座(有底座)2000元誠可議
icon.png[問題] 請問補牙材質掉了還能再補嗎?(台中半年內
icon.png[問題] 44th 單曲 生寫竟然都給重複的啊啊!
icon.png[心得] 華南紅卡/icash 核卡
icon.png[問題] 拔牙矯正這樣正常嗎
icon.png[贈送] 老莫高業 初業 102年版
icon.png[情報] 三大行動支付 本季掀戰火
icon.png[寶寶] 博客來Amos水蠟筆5/1特價五折
icon.pngRe: [心得] 新鮮人一些面試分享
icon.png[心得] 蒼の海賊龍 地獄 麒麟25PT
icon.pngRe: [閒聊] (君の名は。雷慎入) 君名二創漫畫翻譯
icon.pngRe: [閒聊] OGN中場影片:失蹤人口局 (英文字幕)
icon.png[問題] 台灣大哥大4G訊號差
icon.png[出售] [全國]全新千尋侘草LED燈, 水草

請輸入看板名稱,例如:BuyTogether站內搜尋

TOP