Re: [分享] openai_whisper / faster-whisper /webui

先感謝大大分享跟介紹! 最近使用fast-whisper-large-v2來翻譯日綜 有一些心得跟問題想請教 目前翻譯的效果還可以, 至少可以看懂7成內容了, 但感覺還有改善空間 遇到一些人名/地名/專有名詞會比較苦手 這部份我是利用Initial Prompt來改善 先把藝人名或節目介紹的地名先打上去, 翻譯會比較傾向用你提示的內容 不過好像有224個token限制的樣子 另外有時候會遇到一段翻譯一直重複同一個句子長達幾分鐘 感覺像是卡住或是落入loop 我有試著把VAD - Max Merge Size 從90改成180或更高 或是去Full頁面把Condition on previous text取消掉 可以減少這種重複句子的問題 最後有兩個想請教的地方 web-ui上有translate model和language欄位 這兩個欄位的用途是? for translate task用的嗎? 還是跟翻譯成中文有關? 另外我透過修改config的方式下載其他model來做transcrbie ex: zh-plus/faster-whisper-large-v2-japanese-5k-steps arc-r/faster-whisper-large-v2-mix-jp 不過效果怎麼比原本faster-whisper-large-v2還差 @@ 我以為這些model是為了加強日語辨識, 還是我還少做了什麼步驟嗎? 謝謝. ※ 引述《avans (阿緯)》之銘言： : whisper這是openai公開的語音辨識模型 : 非常強大相信不少人已經聽過或使用過了 : 沒聽過也沒關係這邊做個使用介紹 : 這裡主要要介紹的是 : whisper與faster-whisper : 還有whisper-webui(網頁版本) : openai/whisper : https://github.com/openai/whisper : guillaumekln/faster-whisper : https://github.com/guillaumekln/faster-whisper : aadnk/whisper-webui : https://huggingface.co/spaces/aadnk/whisper-webui -- ※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 210.71.217.243 (臺灣) ※ 文章網址: https://www.ptt.cc/bbs/AI_Art/M.1694048944.A.49C.html