作者asd3456722 (sofia)
看板Python
标题[问题]
时间Fri Jul 15 15:47:36 2016
由於小弟在处理一份相当大的data
但是在用pandas读取时就出现memory error
想请问高手怎麽解决
感恩～～～
--
※ 发信站: 批踢踢实业坊(ptt.cc), 来自: 111.80.62.90
※ 文章网址: https://webptt.com/cn.aspx?n=bbs/Python/M.1468568858.A.B4D.html
※ 编辑: asd3456722 (111.80.62.90), 07/15/2016 15:48:14
1F：→ kenduest: 资料多大？系统记忆体多少？虚拟记忆体有多少？ 07/15 15:54
2F：→ kenduest: 可不可以批次分量处理？ 07/15 15:54
3F：→ asd3456722: data 1.1G csv.file 07/15 16:11
5F：→ gozule: 试着用iterator分批处理 07/15 17:38
6F：→ kevinkung: 应该是你处理的方式有 我试过用pandas处理过大量的资 07/17 00:21
7F：→ kevinkung: 料 没发生memory error 07/17 00:21
8F：→ kevinkung: 处理资料的方式有问题 07/17 00:22