翻譯影片，並保留同一個聲音
您的旁白，也能說日文、德文或韓文
字幕得讓觀眾自己閱讀，而一般的 AI 配音聽起來像另一個人。保留原聲的影片翻譯，會用另一種語言重新配音，同時保留說話者的聲音特色。翻譯後的音軌長度與原版相同，可直接套回畫面。我們用一部 9 分鐘的影片實測了 12 種語言，歡迎在下方試聽。
保留原聲的影片翻譯將於 10 月底在 Doitong 開放。
先聽聽看，再決定要不要試
一部 9 分鐘的英文影片，由我們團隊以旁白本人的聲音翻成 12 種語言。播放後，到「設定 → 音軌」即可切換語言。請留意每個版本是否都是同一位旁白。
- 原始語言
- 英文
- 翻譯語言數
- 12
- 影片長度
- 9:00
- 長度差異
- < 0.03 秒
適合誰使用
課程與解說影片
老師的聲音本身就是課程的一部分。翻譯時保留聲音，留下的是這個人，而不只是文字。
產品影片與廣告
用客戶已經熟悉的代言人，把產品示範帶進新市場。
紀錄片與故事影片
有旁白的影片，例如我們的龐貝測試，是最容易處理的情況：只有一個聲音、停頓清楚、語速穩定。
我們如何翻譯這部影片
上方龐貝影片所採用的流程，也是我們建議的做法。
從乾淨的人聲開始
我們的影片把旁白放在獨立音軌上。我們只翻譯人聲，再把原本的音樂與音效混回每種語言的底下，因此 13 個版本的配樂完全一樣。
長影片在停頓處切開
這部 9 分鐘的影片分成兩段處理，分別為 4:43 和 4:17，切在旁白換氣的地方。若在句子中間切開，翻譯後聽得出來。
一次處理一種語言
每種語言各自獨立處理一次。進行下一種之前，先聽過各語言的開頭。
檢查人名與冷僻詞彙
人名、古語和專業術語最容易出錯。在另一部測試影片中，某個角色的名字在其中一種語言裡變了樣，所以我們現在會逐一用聽的檢查每個名字。
把音軌放回去
每一段翻譯後的音軌，在所有語言中都比原版短不到 0.03 秒，新的旁白不必重新調整時間，就能對上畫面。
哪些會改變，哪些會保留
| 影片的組成 | 翻譯後 |
|---|---|
| 口說內容 | 翻譯成目標語言 |
| 聲音特色 | 保留：還是同一位旁白，而不是現成的音色 |
| 音樂與音效 | 保留：我們把原本的配樂混回每種語言底下 |
| 長度 | 與原版相同，差距不到 0.03 秒 |
| 畫面與嘴型 | 不變：這是音訊翻譯，不是對嘴 |
我們測試過的 12 種語言
從英文翻譯為：
以上是我們已測試並發布過的語言。工具開放時，完整語言清單將公布在此頁面。
使用前須知
- 畫面上的嘴型不會重新繪製。人臉說話的特寫鏡頭會看出對不上，旁白類影片則不會。
- 人名在翻譯中可能改變形式。發布前請逐一聽過每個名字。
- 乾淨的人聲翻譯效果最好。如果您的專案把人聲放在獨立音軌，請直接使用。
- 請只翻譯您擁有權利的影片與聲音。
關於保留原聲翻譯的常見問題
AI 可以翻譯影片並保留原本的聲音嗎？
可以。保留原聲的翻譯會用另一種語言重新配音，同時保留說話者的聲音特色。在我們的測試中，12 種語言的版本都聽得出是同一位旁白。
翻譯後的音訊長度會和影片一致嗎？
在我們的測試中是的：每一段在所有語言中都比原版短不到 0.03 秒，因此不需要重新調整時間。
背景音樂會不見嗎？
只要您保留它就不會。我們單獨翻譯旁白，再把原本的音樂與音效混回每種語言底下，所以所有版本的配樂都一樣。
這是對嘴（lip sync）嗎？
不是。翻譯的是聲音，畫面維持原樣。對於旁白、螢幕錄影和配音類影片，這樣就足夠了。
我什麼時候可以在 Doitong 使用？
保留原聲的影片翻譯將於 10 月底在 Doitong 開放。現在先建立免費帳號，上線當天就能在您的工具中使用。