Re: [情報]祖克柏推出AI口譯 閩南語無文字也可翻譯

https://huggingface.co/spaces/facebook/Hokkien_Translation 已經可以在上面網站玩台英語音對譯了，需要等幾秒鐘。 效果很不錯，台語語音可以拿來玩。 模型用兩種不同技術（unitY和s2ut）做的，成果略有差異。 台譯英：hk-en (hokkien to english) 英譯台：en-hk（english to hokkien） 想要讓ai講台語還要先練英文（ ------ 補一些資訊，期待神人大大講解： github頁面： https://github.com/facebookresearch/fairseq/tree/ust 影片中的工程師是台灣人，可參考本篇臉書貼文 https://tinyurl.com/23azb2uf 或長版介紹影片：（還有出現簡體字筆記，團隊應該包含各地來的） https://www.youtube.com/watch?v=6bca6M6uEz4 在展示即時台翻英的畫面有加註是後製成果： Translation are generated by Meta AI's open source model and integrated into the video for illustrative purposes. Not representative of a final product. Meta AI部落格冒出一篇中文文章： Meta 發佈第一個全新 AI 技術支援的非書寫語音翻譯系統 https://ai.facebook.com/blog/ai-translation-hokkien/ 我不懂深度學習，抓一些看熱鬧的東西： 1.跟元宇宙計畫有關 「我們相信口語溝通有助於打破隔閡，拉近人們之間的距離，無論身在何處，甚至在元宇 宙中也不例外。」 2.使用的是台灣的語料庫 「我們也根據名為 Taiwanese Across Taiwan 的閩南語語音語料庫，建立第一個閩南語與 英語雙向的語音翻譯基準資料集。」 3.使用華語做標注，但也使用台羅來評價成果 4.仍在開發中，目前每次只能翻譯一個完整句子 5.相關研究論文請點進去看 另一篇較親民的英文文章： AI translates Hokkien, an unwritten language, for the first time https://tinyurl.com/ytczzmbr 節錄渣翻： 1.主角 Meta 研究員 Peng-Jen Chen 在台灣長大，他爸是南部的退休技師，用華語講複雜 的事情常不太順，他單純的心願就是老爸可以跟任何人用他最熟悉的台語交流。 2.Meta想做一個可以即時翻譯的萬用語音翻譯器(Universal Speech Translator) 3.祖刻薄：「AI將會在我們的有生之年帶給我們用任何語言跟任何人交流的能力」 4.網路空間對於非書寫（或沒有書寫傳統、以口語使用為主）語言的使用者來說障礙重重 ，若讓這些人都能在網路上使用他們的語言，將使他們更舒適且有自信。 ---- 其他台語語音生成系統： 意傳科技的line聊天機器人： https://page.line.me/241byfcj 陽交大語音實驗室台語語音合成 http://tts001.iptcloud.net:8804/ //再補充，發布的模型用哪些資料訓練的？ 根據 Speech-to-speech translation for a real-world unwritten language，個案研究 的對象是Taiwanese Hokkien（台語）。 pdf網址： https://tinyurl.com/3bt4yk4w 雖然看不懂但抓一下關鍵字，訓練中用到有關閩南語或台語的資料： 1.有華語字幕的閩南語戲劇（跟台大拿的，應該都是台語？） 2.前面提到的Taiwanese across Taiwan語料庫，再找人將台語翻成英語。 3.MUST-C，英文TED影片轉成其他語言的語料庫。找人將英語翻成台羅+漢字。 4.SpeechOcean北京海天瑞聲的600小時台語以外的閩南語，算佔相對少數 可能是以下這幾個語音資料庫 https://www.speechocean.com/?m=index&c=index&a=searchset&keyword=%E9%97%BD 有誤或需補充請告知! ※ 引述《medama ( )》之銘言： : 之前因「元宇宙」遊戲人數不如預期而虧損的meta : https://i.imgur.com/gCXvLX7.png

: 今天祖克柏宣布將推出AI口譯系統 : 即使是沒有統一標準書寫系統的閩南語（HOKKIEN） : 雖然難以利用文字翻譯軟體， : 但透過AI技術，也能讓閩南語即時跟英語進行雙向口語對譯 : 展示影片： : https://reurl.cc/KQZbGM : 等AI技術更加精進後 : 想必之後在meta的「元宇宙」遊戲中 : 各國玩家可突破語言藩籬，彼此聊天 : 創造出一個嶄新的宇宙 -- ※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 1.170.86.176 (臺灣) ※ 文章網址: https://www.ptt.cc/bbs/C_Chat/M.1666210168.A.67E.html