java 板


LINE

好吧,把我們公司的商業機密教妳,不過這只適合一次性的exporting 這個寫出大量資料到xls的我們公司的產品(商業智慧軟體)也會碰到 客戶數十tb的dwh做出來的報表動輒上百萬筆資料,在網頁上還可以一頁一頁 顯示,但是要直接一次dump到binary format的excel記憶體一下就被吃完了, 怎麼辦呢? 好,第一步,請先開啟excel新建一個xls檔,把他做成妳要輸出的格式。 第二步,檔案-另存新檔-請存成xml格式。 用notepad或textpad打開這個檔案妳會發現 這是一個標準的xml檔案,標頭長的像這樣: <?xml version="1.0"?> <?mso-application progid="Excel.Sheet"?> <Workbook xmlns="urn:schemas-microsoft-com:office:spreadsheet" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:x="urn:schemas-microsoft-com:office:excel" xmlns:ss="urn:schemas-microsoft-com:office:spreadsheet" .. 原來excel檔裡面的每一個cell就成了xml裡面的一個element。 再來,把這個xml檔的副檔名改成.xls。再用excel開啟 -- 顯示的跟原來的binary 的excel一樣耶~看出trick了嗎? 只要把標頭和格式的xml elements 先寫出去,然後每從TXT檔讀近一筆資料就加上 xml tag寫到file system裡,就不會有outofmemory的issue了。 ※ 引述《kojinvhfsk (野砲蕃薯)》之銘言: : 最近增加了一項需求,需要將Txt檔同樣輸出至Xls檔 : 但這Txt檔算是蠻大的(都是n個欄位*n萬筆資料) : 於是,就造成了記憶體不足的情況(問題1) : 問題1: 當我新增資料至Xls檔時,新增了一堆Cell至Sheet時,這些Cell都是存在記憶體 : 直到最後workbook.write()時,才一次寫入至檔案,只能這樣子使用嗎? : 無法自己控制哪些Cell要先寫入檔案,而不放在記憶體裡嗎? : 問題2: 透過JDBC將Xls當做資料庫來使用,同樣要建立Table(也就是Sheet), : 並設定其欄位型態,為何設定為varchar的欄位,在用Excel開啟Xls檔後, : 他的欄位資料都會多加個「'」呢?(ex.男,就會變成'男) : 問題3: 當我用JDBC將n欄*n萬筆資料,全部輸出至Xls檔後,但接下來, : 我在別的功能裡,需要再新增Sheet到這個Xls檔, : 但…卻在createWorkbook的時候出現記憶體不足!!! : 我想請問的是,Java Excel開啟一個Xls檔後,是將其內的所有資料(Sheet、Cell) : 全都放到記憶體嗎…?有可能是這樣子嗎? : 以上…還煩請有經驗的前輩們指點一二…頭痛啊…頭痛… --



※ 發信站: 批踢踢實業坊(ptt.cc)
◆ From: 98.204.128.203
1F:推 TonyQ:我只想到csv...忘記還有XML XD 03/29 14:23
2F:推 kojinvhfsk:csv只能有1個Sheet…可惡啊… 03/29 14:59
3F:推 howardwang:受教了! 03/29 19:31







like.gif 您可能會有興趣的文章
icon.png[問題/行為] 貓晚上進房間會不會有憋尿問題
icon.pngRe: [閒聊] 選了錯誤的女孩成為魔法少女 XDDDDDDDDDD
icon.png[正妹] 瑞典 一張
icon.png[心得] EMS高領長版毛衣.墨小樓MC1002
icon.png[分享] 丹龍隔熱紙GE55+33+22
icon.png[問題] 清洗洗衣機
icon.png[尋物] 窗台下的空間
icon.png[閒聊] 双極の女神1 木魔爵
icon.png[售車] 新竹 1997 march 1297cc 白色 四門
icon.png[討論] 能從照片感受到攝影者心情嗎
icon.png[狂賀] 賀賀賀賀 賀!島村卯月!總選舉NO.1
icon.png[難過] 羨慕白皮膚的女生
icon.png閱讀文章
icon.png[黑特]
icon.png[問題] SBK S1安裝於安全帽位置
icon.png[分享] 舊woo100絕版開箱!!
icon.pngRe: [無言] 關於小包衛生紙
icon.png[開箱] E5-2683V3 RX480Strix 快睿C1 簡單測試
icon.png[心得] 蒼の海賊龍 地獄 執行者16PT
icon.png[售車] 1999年Virage iO 1.8EXi
icon.png[心得] 挑戰33 LV10 獅子座pt solo
icon.png[閒聊] 手把手教你不被桶之新手主購教學
icon.png[分享] Civic Type R 量產版官方照無預警流出
icon.png[售車] Golf 4 2.0 銀色 自排
icon.png[出售] Graco提籃汽座(有底座)2000元誠可議
icon.png[問題] 請問補牙材質掉了還能再補嗎?(台中半年內
icon.png[問題] 44th 單曲 生寫竟然都給重複的啊啊!
icon.png[心得] 華南紅卡/icash 核卡
icon.png[問題] 拔牙矯正這樣正常嗎
icon.png[贈送] 老莫高業 初業 102年版
icon.png[情報] 三大行動支付 本季掀戰火
icon.png[寶寶] 博客來Amos水蠟筆5/1特價五折
icon.pngRe: [心得] 新鮮人一些面試分享
icon.png[心得] 蒼の海賊龍 地獄 麒麟25PT
icon.pngRe: [閒聊] (君の名は。雷慎入) 君名二創漫畫翻譯
icon.pngRe: [閒聊] OGN中場影片:失蹤人口局 (英文字幕)
icon.png[問題] 台灣大哥大4G訊號差
icon.png[出售] [全國]全新千尋侘草LED燈, 水草

請輸入看板名稱,例如:Soft_Job站內搜尋

TOP