Statistics 板


LINE

※ 引述《danny789 (这其中一定有什麽误会)》之铭言: : : 不知道是否有其他比较强(多)的证据或文献可以证明 resample size 设越大越好? : : 以下引用 chin(2001)的 PLS-Graph User's Guide 内容片段 : : (已有 MIS 领域不错的 Journal paper 引用) : : The default Bootstrap options are 100 resamples with each sample consisting of the same number of : : cases as your original sample set. The bootstrap procedure samples with replacement from your : : original sample set. It continues to sample until it reaches the number of cases you specify (or the : : default). This procedure is repeated until it reaches the number of bootstrap resamples you specify (or : : the default of 100). In general, resamples of 200 tend to provide reasonable standard error estimates. : : 以下是快速找到的几篇 MIS papers : : Resample = 100 : : Henry, R.M., McCray, G.E., Purvis, R.L. Roberts, T.L. (2007) "Exploiting Organizational Knowledge in Developing IS Project Cost and Schedule Estimates: An Empirical Study", Information & Management, Vol. 44 No.6, pp.598-612. : : Resample = 500 : : Ko, D., Kirsch, J.L., King, W.R. (2005) "Antecedents of knowledge transfer from consultants to clients in enterprise system implementations", MIS Quarterly, Vol. 29 No.1, pp.59-85. : : Resample = 100 & 500 : : Goodhue, D., Lewis, W., and Thompson, R., (2007) "Statistical Power in Analyzing Interaction Effects: Questioning the Advantage of PLS With Product Indicators", Information Systems Research, Vol. 18 No.2, pp.211-227. : : 也许 Goodhue et al.(2007) 这篇是答案, 但我找不到 pdf 档可以看(汗) : : → bmka:这个问题没那麽复杂吧,先把bootstrap方法原理弄懂 05/12 23:01 : : → bmka:resample 数目当然越大越好,至於要多大,那要看data distribut 05/12 23:03 : : → bmka:跑久一点不会吃亏的 05/12 23:04 : 对於我来说 PLS 只是一个工具而已 : 我只要知道如何使用及了解它的假设及限制, 而能产出 outcome 并解读就可以了 : 如同您会操作电脑, 但您知道半导体是如何制造的吗? 毕竟电脑只是一个工具而已 : 也许您只是站在纯数学的观点来看, 认为 resample 设越大越好 : 但这样反而太过操弄统计这个工具了, 这样统计的结果真的就是事实的结果吗? : 如果您可以提供文献证明 resample 设越大越好, 那我也可以修正我原来的看法. : 若如您所言, 对於 resample 设越大越好, 我一个合理的怀疑 : 那麽这许多作研究的学者应该会有人提到这点, 但是并没有 ... : 至少我看过的 papers 没人提到此点 : 而且我相信这些学者的电脑应该不会太差, resample 设100万也不是问题才对 : 所以我认为这并不是电脑执行速度的问题 : 我後来还是找到了 Goodhue et al.(2007) 这篇 pdf 档 (ISR 在 MIS 排前五大期刊) : 也许底下的片段可以解答您的问题, 所以我的建议还是设 500 比较恰当 : 因为这是大多数学者所使用的数值 : It might be suggested that we should use bootstrapping : with 500 resamples (rather than 100). Five hundred : resamples is the usual recommendation when : using bootstrapping to estimate a parameter using a : single sample (Chin 1998). However, we draw 500 : samples (500 researchers) from the same population : for each cell in our analysis, and use bootstrapping : with 100 resamples on each of those. This amounts to : 50,000 resamples for each cell, and hence we expect : that moving from 50,000 to 250,000 resamples in each : cell would not affect the outcome. bootstrapping的目的本就是 Estimate parameters that we don't know how to estimate analytically (Howell, 2002, http://tinyurl.com/q6v3c2) . 以下取自Stata的guidelines(http://www.stata.com/support/faqs/stat/reps.html), 懒得翻了,仅标重点。 这段告诉我们一点: 数字设多大不一定,但越大必然会获得越精确的CI估计。 只是我们需不需要这麽精确的数字而已。 我想其实danny789板友也是想表达这个意思,只是在回文时我太注重500这个数字了, 因为我觉得能越精确当然越好啊。:P 所以bmka板友前几篇推文给的建议非常实用,设个500次、1000次跑看看, 再跟2000次比较一下有没有太大的差异,如果没有,就放心报告吧。 How large should the bootstrapped samples be relative to the total number of cases in the dataset? In terms of the number of replications, there is no fixed answer such as “250” or “1,000”to the question. The right answer is that you should choose an infinite number of replications because, at a formal level, that is what the bootstrap requires. The key to the usefulness of the bootstrap is that it converges in terms of numbers of replications reasonably quickly, and so running a finite number of replications is good enough—assuming the number of replications chosen is large enough. The above statement contains the key to choosing the right number of replications. Here is the recipe: 1. Choose a large but tolerable number of replications. Obtain the bootstrap estimates. 2. Change the random-number seed. Obtain the bootstrap estimates again, using the same number of replications. 3. Do the results change meaningfully? If so, the first number you chose was too small. Try a larger number. If results are similar enough, you probably have a large enough number. To be sure, you should probably perform step 2 a few more times, but I seldom do. Whether results change meaningfully is a matter of judgment and has to be interpreted given the problem at hand. How accurately do you need the standard errors, confidence intervals, etc.? Often, a few digits of precision is good enough because, even if you had the standard error calculated perfectly, you have to ask yourself how much you believe your model in terms of all the other assumptions that went into it. For instance, in a Becker earnings model of the return to schooling, you might tell me that return is 6% with a standard error of 1, and I might believe you. If you told me the return is 6.10394884% and the standard error is .9899394, you have more precision but have not provided any additional useful information. -- ◤◢ 玄妙系列作第二部《黄泉路》 全家、福客多、OK便利商店热卖中 ▊▋▌▍▎ ▇▆◣▅▇▇▅▆▇█▋ ▇▆▇▍▄▇ ▇▅▂▄▆▇▏ ▇ . . ▏ ‧ ═▉ ▎ 发生过命案的三重宾馆857号房 ▏ ‧ … ═ ▉ ▏ 凭空传来的诡异歌声 ▏ ▎ . ‥ ‥ . ═ ˙▊ ▉ ‧ 归来的恶灵即将带走他们的性命.◢▉ . . ◣ ﹎ ▄ ‧ ▊ ▉▇◣ ▄▅ http://kuso.cc/4ltv ﹒ ▎▊ ▆ ﹊ --



※ 发信站: 批踢踢实业坊(ptt.cc)
◆ From: 114.45.174.165
1F:推 bmka:有时候用bootstrap是因为asymptotic variance 太复杂了(不是 05/16 03:19
2F:→ bmka:导不出来). Also, moment estimators (asymptotic variance 05/16 03:20
3F:→ bmka:estimator is one of those) are less robust when outliers 05/16 03:20
4F:→ bmka:present. 05/16 03:20
5F:推 danny789:您说设个n次跑看看没有太大的差异,老实说这样并没有符合 05/22 17:32
6F:→ danny789:科学精神,也许这次分析OK但下次分析不同的资料却不OK 05/22 17:33
7F:→ danny789:虽然你有列出文献(我不知道这算不算有力的证明),但太过偏 05/22 17:34
8F:→ danny789:於数学上的论证,老实说我对於设n>50来分析并不反对 05/22 17:37
9F:→ danny789: 更正 n>500 05/22 17:38
10F:→ danny789:但是仍然没有研究实证这样作是有意义的,所以目前我对於 05/22 17:39
11F:→ danny789:n>500还是有所保留 05/22 17:40
12F:→ bmka:请问你到底有没有去读那些有关bootstrap method 的reference? 05/25 09:20
13F:→ bmka:不然, 至少看看wikipedia上面的解说吧 05/25 09:27
14F:→ bmka:chenyutn大已经解释得这麽清楚了,怎麽你还这麽纠结 XD 05/25 09:32
15F:→ bmka:还是要再说一次,computing time往往是研究里最不花钱的 05/25 09:33
16F:→ bmka:能跑就尽量跑多次一点,让估计值稳定(以统计术语讲就是收敛啦) 05/25 09:36
17F:→ bmka:又,resampling 数目要大的理由正是要避免你上述不OK的情形 05/25 09:39
18F:→ danny789:To B大,请问你到底有没有看我写的内容?你们提出的都是数 05/27 08:02
19F:→ danny789:学上的讨论,而这些是必须经过"实证"研究来证实是对的,而 05/27 08:03
20F:→ danny789:不是参考一篇数学推理就认为可以这麽作,何况所提供的文献 05/27 08:06
21F:→ danny789:真的很薄弱."实证"研究就是用来考验这些"理论"与"事实"的 05/27 08:08
22F:→ danny789:差异,研究的进步是一点一滴慢慢前进的,不是自己在实验室 05/27 08:10
23F:→ danny789:得到结果(或数学上的研究结果),就认为外面的实务环境也是 05/27 08:11
24F:→ danny789:同样结果. 05/27 08:12
25F:→ danny789:我至少有提出MIS前五大期刊的文献来证明我的看法,我希望 05/27 08:15
26F:→ danny789:你也可以提出有力的"实证"期刊文献来证明我是错的,我也会 05/27 08:17
27F:→ danny789:乐於接受. 05/27 08:18
28F:推 bmka:不晓得你是不是误解了bootstrap...Boostrap是做approximation 05/27 10:49
29F:→ bmka:的工具, "理论上", 只要 resampling 数目逼近於无穷大, 05/27 10:50
30F:→ bmka:那麽 bootstrap approximation 就会逼近真实的值 05/27 10:50
31F:→ bmka:(asymptotically consistent). 但是, 当resampling 数目是 05/27 10:50
32F:→ bmka:finite 时 (eg 500),asymptotic consistency 未必成立 05/27 10:51
33F:→ bmka:这也是为什麽大部分有关bootstrap repetition number的研究 05/27 10:52
34F:→ bmka:都是关注於到底 bootstrap resampling 至少要多大才够大 05/27 10:52
35F:→ bmka:而我所提的检验的方法(比较500, 1000, 2000的结果) 05/27 10:53
36F:→ bmka:只是检查收敛的经验法则, 其实还有更严谨的方法可以去估计 05/27 10:54
37F:→ bmka:resampling number(请爱用google大神) 05/27 10:54
38F:→ bmka:Bootstrap 最早是由Efron提出的,在统计界已经被用到烂了, 05/27 10:54
39F:→ bmka:也有很多系统性的研究, 如果你有兴趣应该去看看这些文章 05/27 10:55
40F:→ bmka:(随便google就一堆). 我注意到你引用的都是最近这几年的paper 05/27 10:56
41F:→ bmka:不知你的领域是否在这几年才突然"发现"这个方法 05/27 10:56
42F:→ sneak: 能跑就尽量跑多次一点, https://noxiv.com 11/09 15:00
43F:→ sneak: 不晓得你是不是误解了b https://daxiv.com 01/02 14:54







like.gif 您可能会有兴趣的文章
icon.png[问题/行为] 猫晚上进房间会不会有憋尿问题
icon.pngRe: [闲聊] 选了错误的女孩成为魔法少女 XDDDDDDDDDD
icon.png[正妹] 瑞典 一张
icon.png[心得] EMS高领长版毛衣.墨小楼MC1002
icon.png[分享] 丹龙隔热纸GE55+33+22
icon.png[问题] 清洗洗衣机
icon.png[寻物] 窗台下的空间
icon.png[闲聊] 双极の女神1 木魔爵
icon.png[售车] 新竹 1997 march 1297cc 白色 四门
icon.png[讨论] 能从照片感受到摄影者心情吗
icon.png[狂贺] 贺贺贺贺 贺!岛村卯月!总选举NO.1
icon.png[难过] 羡慕白皮肤的女生
icon.png阅读文章
icon.png[黑特]
icon.png[问题] SBK S1安装於安全帽位置
icon.png[分享] 旧woo100绝版开箱!!
icon.pngRe: [无言] 关於小包卫生纸
icon.png[开箱] E5-2683V3 RX480Strix 快睿C1 简单测试
icon.png[心得] 苍の海贼龙 地狱 执行者16PT
icon.png[售车] 1999年Virage iO 1.8EXi
icon.png[心得] 挑战33 LV10 狮子座pt solo
icon.png[闲聊] 手把手教你不被桶之新手主购教学
icon.png[分享] Civic Type R 量产版官方照无预警流出
icon.png[售车] Golf 4 2.0 银色 自排
icon.png[出售] Graco提篮汽座(有底座)2000元诚可议
icon.png[问题] 请问补牙材质掉了还能再补吗?(台中半年内
icon.png[问题] 44th 单曲 生写竟然都给重复的啊啊!
icon.png[心得] 华南红卡/icash 核卡
icon.png[问题] 拔牙矫正这样正常吗
icon.png[赠送] 老莫高业 初业 102年版
icon.png[情报] 三大行动支付 本季掀战火
icon.png[宝宝] 博客来Amos水蜡笔5/1特价五折
icon.pngRe: [心得] 新鲜人一些面试分享
icon.png[心得] 苍の海贼龙 地狱 麒麟25PT
icon.pngRe: [闲聊] (君の名は。雷慎入) 君名二创漫画翻译
icon.pngRe: [闲聊] OGN中场影片:失踪人口局 (英文字幕)
icon.png[问题] 台湾大哥大4G讯号差
icon.png[出售] [全国]全新千寻侘草LED灯, 水草

请输入看板名称,例如:e-shopping 或 站内搜寻

TOP