作者mathlover (mathlover)
看板Python
標題[問題] 初學者 python資料處理
時間Thu Feb 1 22:15:38 2018
各位前輩大家好,小弟在工作上有很
多時間都在處理數據,平常都用excel
,頂多寫一些VB幫助重覆的大量數據
處理。
最近開始在摸python,但到目前為止
,感覺不出python處理資料的強項,
也許是我還太嫩,但google都說
python處理資料不錯!
我工作上都是算一些變異數、標差、p
值......,或是畫關係圖。
請問前輩們,python能做什麼excel做
不到的?
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 125.230.39.96
※ 文章網址: https://webptt.com/m.aspx?n=bbs/Python/M.1517494541.A.37F.html
1F:→ uranusjr: 不用錢這件事情 Excel 就做不到了02/01 22:17
請問您的意思是?excel也免費阿
※ 編輯: mathlover (125.230.39.96), 02/01/2018 22:19:49
2F:→ CodingMan: Excel 免費?02/01 22:45
3F:→ Kyosuke: 用 excel 沒付錢不代表免費吧 @@02/01 23:21
4F:推 rasaze: M$法務:你說什麼免費?再說一次?02/01 23:40
5F:推 maply0703: Excel用免費的小心被檢舉 XD02/01 23:40
公司有付錢=我免費啊......
6F:推 Luluemiko: excel有什麼是python做不到的02/02 00:08
畫box chart、各式直條圖、曲線圖?
7F:推 pups003: 是反串吧02/02 00:27
不是!我很認真學python,只是在想要怎麼應用在工作上!
8F:推 jacky7987: XDDDDDDDD02/02 00:50
9F:推 ms0202687: 你碰到的數據不夠大 百萬筆資料就有差了 excel會很當02/02 01:12
這到是真的!excel最多140幾萬筆資料
10F:→ ms0202687: 還有有些特殊的需求 excel是比較難做。寫程式處理更快02/02 01:13
11F:→ ms0202687: 一些02/02 01:13
感謝m大的回覆!能否請您舉個例子?
這樣我學python比較有方向
12F:→ rs6000: 沒有花錢買就是免費 XD02/02 06:55
※ 編輯: mathlover (125.230.39.96), 02/02/2018 07:54:20
※ 編輯: mathlover (125.230.39.96), 02/02/2018 07:55:35
13F:推 benbo: 畫圖用matplotlib就做得到了 自由度還比Excel大太多了 02/02 08:20
感謝回覆!
14F:→ benbo: 可以批量產圖再匯出成指定格式 唯一的缺點就是功能跟參數太02/02 08:22
15F:→ benbo: 多要找很麻煩XD02/02 08:22
感謝回覆!
16F:推 EGsux: excel的數據都假設只有x y 如果 dimension 更多就沒辦法用 02/02 08:26
17F:→ EGsux: excel 處理文字類 跟很多層if的資料整理也很煩 02/02 08:29
感謝回覆!通常有if的情況我會寫VB去跑
18F:推 Sunal: 畫圖還有seaborn plotly可以用 02/02 10:55
19F:→ Sunal: 公司付錢給你用是已經算在薪水裡面了02/02 10:55
20F:噓 kingofage111: 多去看看有哪些lib可以用吧…02/02 10:57
21F:→ kingofage111: 如果只要基本統計繪圖bokeh你可以看看02/02 10:57
22F:→ kingofage111: 按錯案到噓02/02 10:58
23F:推 kingofage111: 補推 02/02 11:06
感謝回覆!
24F:推 vi000246: 想要直線圖長條圖 可以搭配d3.js02/02 11:26
25F:→ vi000246: 由python餵資料 在瀏覽器顯示圖表 02/02 11:27
感謝回覆!
26F:→ dearlove: python可以做的應用比Excel多太多了吧02/02 11:42
27F:→ Blankfein: Excel光是十萬筆資料就開始龜速了02/02 15:56
28F:→ Kazimir: 那就用excel就好了02/02 19:01
29F:推 sean50301: 看來你是沒遇過excel打不開的資料02/02 19:19
我最多遇到一個excel檔有100M,打開就要30~40秒XD
30F:→ alpinkueh: 上次看到有人論證 excel vba 是圖靈完備02/02 20:17
31F:→ alpinkueh: 如果真是如此,Python 可以做到的,excel 都可以做到
02/02 20:18
32F:→ alpinkueh: 但問題是好不好做,要花多少時間寫,多少時間跑02/02 20:18
感謝回覆!請問圖靈完備是什麼意思?
33F:→ alpinkueh: 另一方面,這個問題要問你自己啊02/02 20:19
34F:→ alpinkueh: 如果你要做的東西,excel +vba 都很容易做到02/02 20:19
35F:→ alpinkueh: 那你的確不需要 python 02/02 20:22
※ 編輯: mathlover (223.141.100.250), 02/02/2018 20:26:36
36F:推 st1009: ex可以自己抓資料嗎?我不熟,python寫的好,可以自己抓 02/02 21:05
37F:→ st1009: 譬如你可以排程,以後工作他會自己定時輸入資料,自己算02/02 21:07
38F:→ st1009: 我不知道你數據來的形式,假設是有人e-mail給你,可以讓他 02/02 21:09
39F:→ st1009: 自己收信,然後自己算,你只要有時看看他有沒有故障 02/02 21:09
40F:推 st1009: 圖靈完備啊…理論上是不是可以用excel上ptt...02/02 21:13
這到是不行!但寫VB可以控制某時間跑某個程式!也可以抓網頁的資料,不過似乎只限ie
41F:→ alpinkueh: 其實我也沒仔細看那論證 02/02 21:22
42F:→ alpinkueh: 畢竟就算是圖靈完備,很多東西還是不適合用 excel 做 02/02 21:23
43F:→ alpinkueh: 圖靈完備的意思,一些講計算理論的是有02/02 21:24
44F:→ alpinkueh: 不然去看英文 wiki02/02 21:24
45F:→ alpinkueh: 你可以考慮的是,一方面學 python,,一方面思考如何把 02/02 21:25
46F:→ alpinkueh: python 用在你工作02/02 21:25
47F:→ alpinkueh: 看看是不是有用 excel 很難做的東西,可以用 python02/02 21:26
48F:→ alpinkueh: 做02/02 21:26
49F:→ alpinkueh: 我之前用 excel 做一些統計回歸分析,但 excel有些限 02/02 21:27
50F:→ alpinkueh: 制02/02 21:27
51F:→ alpinkueh: 譬如變數個數有上限02/02 21:27
52F:→ alpinkueh: 後來結合 excel 和 R 做02/02 21:28
53F:→ alpinkueh: Python 在爬網站資料強多了02/02 21:28
54F:→ alpinkueh: 所以需要什麼工具,要問你自己 02/02 21:28
太感謝a大的講解!
55F:→ vi000246: Excel要處理資料是方便很多 但邏輯複雜起來 02/02 21:30
56F:→ vi000246: 還是用python會比較好維護 02/02 21:31
57F:推 olycats: 我之前用excel vba抓網頁資料 效能很差要分很多次執行02/02 21:38
58F:→ olycats: 後來學了R再學了python 爬蟲方便多了 02/02 21:42
※ 編輯: mathlover (223.141.100.250), 02/02/2018 22:16:18
59F:推 bibo9901: excel 都能跑 alexnet了 02/03 00:04
61F:→ bibo9901: 而且權重一目瞭然 02/03 00:05
62F:推 extraymond: 有人推bokeh那就推plotly好了!還可以蓋UI 02/03 06:38