作者qazsd (天際線)
看板Soft_Job
標題[請益] 將影片內容提取出大意的技術
時間Thu Jul 7 13:40:55 2022
請教一下
有沒有哪門技術可以將影片內容提取出摘要
這似乎牽涉到影像辨識跟語音辨識等技術
深度學習及AI不知道是否有辦法達成？
因為常常看到YT上感興趣的影片但覺得從頭看到尾蠻花時間的
如果有這門技術(影片摘要)那就太好了
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 180.177.0.90 (臺灣)
※ 文章網址: https://webptt.com/m.aspx?n=bbs/Soft_Job/M.1657172459.A.F44.html
1F：推 FXW11314: GPT3或許可以吧 07/07 13:49
2F：→ DrTech: 這我以前做過，我們叫VCA，video content analysis。我們 07/07 13:52
3F：→ DrTech: 當時有賣雲端服務，或自己做。後來我自己有做直接從影片產 07/07 13:52
4F：→ DrTech: 生劇情摘要。我的做法是，分析聲音哪一段是劇情高潮，然後 07/07 13:52
5F：→ DrTech: 擷取聲音或字幕片段，成為精彩片段。最後再將精彩片段的語 07/07 13:52
6F：→ DrTech: 音或字幕，轉換成文字產生劇情大綱。 07/07 13:52
7F：→ DrTech: 應用上，可以透過文字搜到任意劇情片段。或產生精彩片段推 07/07 13:54
8F：→ DrTech: 薦。例如，當時我們可搜：某某明星的武打片，就直接給片段 07/07 13:54
9F：→ DrTech: 。這在中國的影音平台都有在做。 07/07 13:54
10F：→ DrTech: 這個在愛奇藝，以及我前公司，都是有上產品的功能。 07/07 13:55
11F：→ DrTech: 這技術最大的問題除了技術，重點是：非常耗費計算資源，所 07/07 14:00
12F：→ DrTech: 以大家都只做熱門院線片，而且真的是賠錢做居多。 07/07 14:00
13F：→ DrTech: 我也有寫過影評摘要的專利。直接輸入一個影片，與需要摘要 07/07 14:02
14F：→ DrTech: 的時間長度。產生：該長度的影片摘要。 07/07 14:02
15F：→ DrTech: 這樣就能，你搭飛機時，剩下30分鐘，可看完一部電影摘要。 07/07 14:07
16F：→ DrTech: 拉屎5分鐘，也可設定5分鐘看完一部電影摘要。 07/07 14:08
17F：推 mistel: google video summarization應該就有很多paper了 07/07 15:57
18F：推 neo5277: 推推 07/07 16:10
19F：推 labbat: Google Auto Summary for Business 07/07 19:09
20F：推 knme: 推 07/07 23:33
21F：推 viper9709: 二樓好猛 07/08 00:16
22F：→ eva19452002: 我想知道如果是默劇也能提取出摘要嗎？ 07/08 07:17
23F：→ eva19452002: 或是沒有配音的動物或旅遊影片，輸入關鍵字就會搜到 07/08 07:19
24F：→ eva19452002: 我想看的片段，比如說輸入獅子狩獵或是海邊沙灘就跳 07/08 07:20
25F：→ eva19452002: 該片段 07/08 07:20
26F：→ DrTech: 樓上說的動物辨識，與場景 scene辨識的功能都有，,動物辨 07/08 10:06
27F：→ DrTech: 識是最好做的因為open soure都有基本的語料，各家的差別在 07/08 10:06
28F：→ DrTech: 於後續願意投入多少資源持續維護。特殊自訂的場景辨識scen 07/08 10:06
29F：→ DrTech: e也能做，成本問題而已。 07/08 10:06
30F：→ DrTech: 默劇，可做到基礎的搜尋，可以對辨識到的object 打上標籤 07/08 10:11
31F：→ DrTech: 。搜尋object出現的時間點。但是要抽摘要片段，最大的問題 07/08 10:11
32F：→ DrTech: 是，如何定義與評價什麼是"好"。光是人來看，每個人的看法 07/08 10:11
33F：→ DrTech: 就不一樣了。院線片是因為有音效，劇情，結尾通常比較精彩 07/08 10:11
34F：→ DrTech: 等強特徵，所以效果比較好。 07/08 10:11
35F：→ lance70176: 2F 說的內容好酷... 07/08 13:31
36F：推 ntpuisbest: 感謝D大分享，謝謝 07/09 14:53
37F：→ qazsd: 感謝D大分享，讚！ 07/09 19:43
38F：推 stiiveo: 感謝科技博士分享！ 07/23 01:02