作者wargods8402 (維尼X維尼)
看板DataScience
標題[問題] Json轉yolo格式問題
時間Wed Jul 17 13:06:51 2019
作業系統:linux ubuntu16.04
問題類別:Dataset 轉換問題
使用工具:python
問題內容:目前在使用YoloV3做object detection。
在圖片資料庫的部分，格式要配合Yolo的格式，必須將目前拿到的非Yolo格式的圖片資料
庫格式做轉換。
那目前的困難是，手上拿到的標注格式是.json的檔案，要轉換成Yolo格式，目前找不到
可以直接轉換的工具。
希望有前輩能指點一下，哪邊有可以參考的現成轉換格式Code，或是有可以轉換的工具軟
體。
由於小弟入門的時間只有三個月，再麻煩前輩鞭小力一點…謝謝
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 163.21.76.158 (臺灣)
※ 文章網址: https://webptt.com/m.aspx?n=bbs/DataScience/M.1563340013.A.673.html
1F：推 sxy67230: 這個東西叫pascal VOC format，因為大家都不知道你的jso07/17 13:54
2F：→ sxy67230: n格式是長怎樣，要寫轉換器就要你自己寫，有tool 叫xmlj07/17 13:54
3F：→ sxy67230: son可以轉換，但是格式你要自己轉07/17 13:54
先謝謝S大，我的理解是這樣，pascal的data format應該是使用.xml做為標注檔的格式，
Yolo則是使用.txt格式。
這樣要轉換的話，是否要透由json轉xml再轉txt呢？
不知道S大能否提供一下轉換工具的相關資訊，我一直都只有看到網頁版的轉換工具，且
無法批次轉換，我一共有4千多筆要轉，可能會轉到往生…
我有找到對岸寫的COCO data轉Yolo data format相關code，測試過後是能轉換的，但是C
OCO data是把所有的標注資訊全部合在一個Json檔裡…
而我的資料是一筆一筆分開的，跟Pascal的放置方式是一樣的，只是一個是xml，一個是j
son
現在要解析資料不知道從何下手…
因為，不確定COCO data是否與我手上現有的format是否一樣…
小弟等等在補上標注檔的連結，麻煩S大指點了，謝謝
※ 編輯: wargods8402 (163.21.76.158 臺灣), 07/17/2019 14:46:44
連結如下：
https://reurl.cc/mmbn7
※ 編輯: wargods8402 (39.12.12.117 臺灣), 07/17/2019 15:10:14
※ 編輯: wargods8402 (39.12.12.117 臺灣), 07/17/2019 15:11:56
4F：推 sxy67230: 官方darknet就有voc_label的代碼了，但是你要看一下你 07/17 15:32
5F：→ sxy67230: 的json的box是轉換個的還是轉換前的，轉換後其實也不用p 07/17 15:32
6F：→ sxy67230: ascal parser了，直接喂進去對應資料，至於全部都在同一 07/17 15:32
7F：→ sxy67230: 份就要自己寫來解析。07/17 15:32
8F：推 sxy67230: 我看到你的資料確實是pascal的形式，代碼要自己轉換成07/17 15:34
9F：→ sxy67230: 成pascal。07/17 15:34
10F：推 sxy67230: 然後cata_id是已經轉換好的，所以可以mark掉class_id轉 07/17 15:37
11F：→ sxy67230: 換的代碼07/17 15:37
12F：推 sxy67230: 要不然也是可以直接修改Voc label改成吃json格式07/17 15:39
@@什麼…原來可以直接吃嗎……不好意思，我對python還沒有熟悉…
※ 編輯: wargods8402 (39.12.12.117 臺灣), 07/17/2019 15:47:23
13F：推 lukelove: 你要用哪種yolo實做來train也沒說清楚 要大家怎麼幫你呢 07/17 19:15
請問L大的Yolo實做是指什麼@@？
14F：推 sxy67230: Python原生就有內建json.load...，建議去k個一個禮拜的P07/17 19:28
15F：推 sxy67230: ython書，yolo的資料都是一樣的，就前面的轉換這種可以07/17 19:29
16F：→ sxy67230: 自己寫07/17 19:29
謝謝S大…Python真的佔很重的比例…感謝
目前在研究如何改voc_label.py
※ 編輯: wargods8402 (39.9.34.208 臺灣), 07/18/2019 00:01:44
17F：推 remia81: id x y b w 沒記錯應該是這樣，先去看每格的需求，再看07/18 06:58
18F：→ remia81: 資料有什麼轉換過去就好了07/18 06:58
目前正在摸索中…轉換公式目前確定是正確的，只是轉換Code要自己寫QQ
19F：推 kyushu: data analysis，data preprocessing, data augmentation07/18 08:47
20F：→ kyushu: 都是重要的一環，建議好好的理解一遍吧 07/18 08:47
是的，謝謝K大…資料分析真的很重要…我一直以為都有流通的open-source dataset...
就不用自己做資料分析了…沒想到QQ
※ 編輯: wargods8402 (39.12.194.56 臺灣), 07/18/2019 17:45:53