作者wallrose (墙玫瑰)
看板Python
标题[问题] 如何在jupyter中跑大型专案?
时间Tue Feb 20 03:59:44 2018
想请问
我有很多个dataset
每一个dataset要建一个模型(tensorflow)
於是 每一个dataset 写一个ipynb档
这样能够看清楚 每一个dataset的建模情况
然後一个个手动启动 => 执行完再关掉 => 再开下一个档
因为之前只是demo 所以量不大 这样做没问题
现在要跑正式的实验 资料量非常大
我希望能够一次设计好流程 让电脑自己慢慢跑
并且 每个档案跑完之後 打开档案时能留下结果
(ipynb 或 html皆可, 但html佳)
有办法写个main档 就依序执行完所有档案吗？
平常我会用 %run 指令执行一些ipynb
但这样似乎 没办法在个别档案中留下结果
补充：
由於gpu记忆体只有6g
一定要依序执行，并且执行完要shutdown释放记忆体
才有办法跑下一个档案
以上基於jupyter notebook发问
如果真的不行.....也欢迎推荐其他IDE
谢谢
--
※ 发信站: 批踢踢实业坊(ptt.cc), 来自: 140.120.242.1
※ 文章网址: https://webptt.com/cn.aspx?n=bbs/Python/M.1519070387.A.AFC.html
1F：推 WunoW: 帮推一下，正好也在想类似问题 02/20 10:31
2F：推 groovy2016: 可以写class包成module ? 02/20 11:50
4F：推 vi000246: 我有google到这指令 --stdout 你研究看看能不能输出结果 02/20 13:20
5F：推 leoloveivy: 如果你只是觉得程式码很长你用滚很久import进来啊 02/21 20:54
6F：推 kimutaka: 推一个, 也想知道有没有好方法 02/22 04:51
7F：推 sma1033: 我觉得Jupyter其实本身设计就不是很方便做大型系统的开发 02/22 15:38
8F：→ sma1033: 他的价值应赅是让使用者可以方便的测试、除错与教学 02/22 15:39
10F：→ goldflower: 看起来是你要的? 不过我没跑过 02/22 22:52