作者zp01 (zp01)
看板HsinTien
標題[心得] 新店板各年月文章分類統計
時間Sat May 21 19:23:03 2022
之前板上曾經有交易文是否刪除的討論
我看了討論內容後，就一直在思考，是否能取得一些統計數字，來客觀的看待這件事
只憑大家每個人各自的印象來討論這件事，總覺得不夠客觀
如果能取得資料，我就能用最簡單的excel 大概分析一下板上文章的各分類分佈情形
但我一直找不到哪邊可以匯出這板上的標題資料，也沒找到可用的資料匯出工具程式
所以一直沒做這事
這兩天疫情正在高峰，放假不敢出門，想起之前家裡小朋友在學校學了python
一直搞不清楚學生學這做什麼用，印象中只在網路上看過有學生講自己用python寫爬蟲，
我想既然這東西可以讓學生拿來爬網掃資料，也許我也做得到
反正今天閒著也是閒著，就找了個教學網站來學一下，由Visual Studio Code
安裝開始做起。我花了一點時間，了解這東西語法怎麼用。看完兩三個章節
我發現這東西不難，網路上能參考的網站很多，只是有的細節講不清楚
試改了兩三個範例程式後 我大概知道 變數如何宣告、 for loop、讀寫檔的寫法
就開始試著參考網路上的文章，寫了一個簡單的爬標題程式
掃出這個板上所有文章的 標題、作者、日期 再利用標題分類，用excel來分析
結果如圖
https://www.upload.ee/image/14159996/st_count.jpg
可以看出交易類文章和一般討論文章的消長
有興趣的人可以在這裡抓excel的統計
https://www.upload.ee/files/14160033/ptt_HT_20220521.7z.html
現有44234篇文章中，最大的幾類總數統計如下
[問題] 10353
[交易]+[徵求]+[贈送]+[買賣] 19880 (9885+4805+4664+526)
[閒聊] 2452
[新聞] 1074
[心得] 834
[食記] 667
[板務] 422
我稱這些[交易]+[徵求]+[贈送]+[買賣] 為「類交易」文不到一半，但也近了
以前的「類交易」文比例小很多，顯而易見是後來才變多的
依年月來看 2014以後 交易文逐漸取代其它文章 約在2015年到2016年交叉
在2016年以後，就再也不回頭了(中間在2016年11月是唯一的一個例外)
從開板始到現在曾發表文章的共10325人
今年2022年到現在5/21只有462人發表文章 共780篇
但扣掉交易類、贈送類的文只剩255篇，等於今年現存的的67%文內容在買賣、贈送
、介紹自己要交易的物品。
462人中 有162人在版上只有交易或贈送文 沒有一般討論文
還好今年有換板主的議題出現，否則只會更慘
有沒有人想知道其它的統計的？
今年到現在5.21 如果排除掉「類交易文」有發文章的人 共計136人
今年發非「類交易文」的前11名id是：
godofsex(32) samok(20) gjiiiiii(11) KSJ(7) Ccsteeker(7)
ufotime(7) rainnawind(6) dressingfr(5) hateOnas(4) Geiwoyujie(4) aner(4)
這是程式碼 只有大約六十行左右 第一次寫python 環境語法都不熟 所以有一半是註解
https://www.upload.ee/files/14161858/get_ptt_HsinTien.py.html
1F：推 dear133 : 大力推 05/21 19:40
2F：推 fireman66 : 就覺得版上充滿交易文就慢慢不想來了，很像蚊子館 05/21 22:16
這篇應該也會很快被交易文淹沒，最後沒多少人看到這些統計數字
※ 編輯: zp01 (36.231.68.116 臺灣), 05/21/2022 23:12:15
3F：→ ChizCake : 但也有人因為交易而持續看板,或潛水但有在看文 05/22 00:19
4F：→ ChizCake : 如果真的沒有特別想發表的事或想問的問題也不用硬寫 05/22 00:21
5F：→ ChizCake : 本人今年有3篇,其實您自己這兩年只有今天發兩篇耶 05/22 00:26
交易文太多 發了也沒多少人看 就不太想發了 以前還會發一些新店新聞
或在新聞內寫一些新店過去的文史 但後來發現很快就淹沒 就算了
我只是用數字證明交易文上昇 非交易文下降的現象
6F：推 venetoclax : 沒錯 交易文太多 紅勾勾都懶得進來 05/22 00:32
※ 編輯: zp01 (36.231.68.116 臺灣), 05/22/2022 01:12:14
※ 編輯: zp01 (36.231.68.116 臺灣), 05/22/2022 01:23:32
7F：→ ChizCake : 你以前發的新聞被淹沒不也表示大家並沒想看那些？ 05/22 03:51
8F：→ ChizCake : 地方板本來就包括服務在地人的功能,如果要維持高人 05/22 03:55
9F：→ ChizCake : 氣除非隨時發生大家都關切的事,上來找資訊才是日常 05/22 03:56
所以你的交易文篇幅比較多 大家都愛看你介紹你的東西 真棒
2013 表皮破了的沙發 是隨時發生大家都關切的事? 你的沙發真的是很不簡單呀
2013 [徵求] 有沒有近捷運/全新的兩房在出售或出租的 你買到了嗎？
10F：推 gjiiiiii : 驚 05/22 09:51
11F：推 KSJ : 推一個~ 05/22 10:02
※ 編輯: zp01 (36.231.68.116 臺灣), 05/22/2022 10:08:42
※ 編輯: zp01 (36.231.68.116 臺灣), 05/22/2022 10:14:24
※ 編輯: zp01 (36.231.68.116 臺灣), 05/22/2022 10:16:27
12F：→ gjiiiiii : 媽 我上榜了 ??? 05/22 10:17
※ 編輯: zp01 (36.231.68.116 臺灣), 05/22/2022 10:22:14
13F：噓 ChizCake : 不知道你在抓狂什麼,贈送本來就是給特定需要的人, 05/22 13:20
14F：→ ChizCake : 心得或新聞則是不特定大眾,還是你想主張連贈送都禁 05/22 13:21
15F：→ ChizCake : 止? 05/22 13:21
16F：噓 ChizCake : 既然板主已經定了新的規則,也經過投票,試辦一段時 05/22 13:23
17F：→ ChizCake : 間看成效不行嗎？ 05/22 13:23
18F：推 JPIGHEAD : 不知道你在噓什麼 原文不是只有數據分析嗎 05/22 14:08
19F：→ zp01 : 有些人的人格特質就是見不得真實數據 我不能怪他 05/22 14:20
20F：→ zp01 : 我在文中沒有提出任何主張 只拿出數字出來而已 05/22 14:25
21F：→ zp01 : 文中並沒有討論禁不禁任何東西 抓狂的人好像不是我 05/22 14:26
22F：→ zp01 : 我把數據放網上，人人可以使用 05/22 14:27
23F：→ zp01 : 如果要程式原始碼 我也可提供 讓大家都能利用 05/22 14:29
24F：→ zp01 : 知識和資料愈是公開透明 大家愈能了解這個世界 05/22 14:33
※ 編輯: zp01 (36.231.68.116 臺灣), 05/22/2022 15:23:32
25F：→ zp01 : 程式碼放上去了 只有六十行左右 環境和語法都不熟 05/22 15:24
26F：→ zp01 : 所以有一半是註解，真的程式碼只有30行左右 05/22 15:25