HeyGen「Video Translate」橋本環奈が英語を喋る！「同じ人の声で多言語を話せる音声合成」1垢1回だけ無料で試せるAIツール動画あり

1: 名無しのメタバースさん 0000/00/00(※) 00:00:00.00 ID:metaversesoku

ワンクリックで勝手に別の国の言葉喋らせるこれ試してみたけどやべえな…かんなさんに英語話してもらいました（次に原版）。ぼくはそんな詳しくないけど、口周りも思ったより違和感ない。1垢で一回だけ無料トライアルできます。https://t.co/KF8u19LoFW pic.twitter.com/3KqXSxMSbH
— 林毅/一歩踏み込む中国🇨🇳の話。 (@LinYi_China) September 11, 2023

2: 名無しのメタバースさん 0000/00/00(※) 00:00:00.00 ID:metaversesoku

これが元。他人が入ってたらだめとか制約があり選んだ動画で、特に意図はないです…（デモ目的なので権利とかいわないでね）。 pic.twitter.com/Ay2n3j2p5Q
— 林毅/一歩踏み込む中国🇨🇳の話。 (@LinYi_China) September 11, 2023

※: 本日のおすすめサイト記事一覧 0000/00/00(※) ID:metaversesoku3: 名無しのメタバースさん 0000/00/00(※) 00:00:00.00 ID:metaversesoku

なおこのデモが成立していることからも分かる通りインプットに日本語は使えますが、アウトプットにはつかえません。アウトプットに中国語使って「こじるりさんもうこんなに中国語がお上手に！」とかやりたかったが。 pic.twitter.com/oBaofhN3CS
— 林毅/一歩踏み込む中国🇨🇳の話。 (@LinYi_China) September 11, 2023

全然違和感なさすぎて驚いてる🫢👍
— Maiko Travel Films 𓅪 (@LUnknownworld) September 11, 2023

イメージと違って低めの声も含めてそっくりすぎて、凄い時代だなと
— たぬきトレーナー (@tanukitore) September 12, 2023

手のジェスチャーもアメリカンっぽい！って思ったけどそこは元からそうだった。でも日本語で最初から見てたらそう思わなかったんだろうな https://t.co/vHxDTiSt5L
— ゆもり@iOSアプリ開発(Flutter勉強中) (@wabisabimori) September 13, 2023

4: 名無しのメタバースさん 0000/00/00(※) 00:00:00.00 ID:metaversesoku

これ口パクリップシンクもワンポチで揃えてくれるん？すごいね　→RT
— うみゆき@AI研究 (@umiyuki_ai) September 12, 2023

やべえなこれ… まあ技術的にできるとは思ってたけどもうそういうサービス出てきたんだな
— Torishima (@izutorishima) September 12, 2023

自分の声（できれば自分の耳に聞こえる自分の声）でAIに英語を話させて，それでスピーキングの練習をすれば上達が早いんじゃなかろうかと思ってる． https://t.co/zOdsWKHNq5
— Hiraku Morita / 森田啓 (@hiraku_mrt) September 12, 2023

技術的には確かに出来そうだし、需要もありそう。
見た感じの解説
①RVCでモデルトレーニング。
②日本語字幕&タイムスタンプ作成
③DeepL or ChatGPTで翻訳
④声の中心のピッチをざっと学習(男 or 女かとか)
⑤④に従って、ピッチを選び文字起こし&読み上げ。②と同じ時間合わせ(ここわからん)
⑥変換 https://t.co/euzQs2oieD
— Nero｜CryptoAI 代表｜Stability AI Japan CM (@neromeron1014) September 11, 2023

これ、自分が日本語で話してる動画撮って英語に変換したあとその音声完全コピーすれば結構良い練習になるのでは？ https://t.co/k1TwVt6DGg
— さこう (@sako_everykz) September 11, 2023

5: 名無しのメタバースさん 0000/00/00(※) 00:00:00.00 ID:metaversesoku

新時代がすぐそこに… https://t.co/S8xdxfbahL
— 東京藝術大学お嬢様部 (@Soldi79710444) September 11, 2023

橋本環奈こんなに英語ペラペラだったんだって思うレベルで凄いなこれ。 https://t.co/0Uubb9qb12
— zuk (@64chords) September 12, 2023

言語の壁がもう無い。
技術の進歩は凄い。
恐らくAIの動画生成でもこんな感じは当たり前にはなるだろう。

全然違和感無いし、最初ほんまに喋っとんかと思った。
ただただ凄い。 https://t.co/2tsz7wBrtZ
— TOMOHIRO (@TOMOHIRO_YOKO1) September 12, 2023

これは、海外の日本アニメ好きにはたまらないな！
キャライメージそのままに母国語で見れるんだから！ https://t.co/K7eC3ohMJz
— ฅ はこばん ฅ (@outdoorgarage) September 11, 2023

凄すぎ。おそらく声質（？）をDBに取り込んで、日本語を英語に翻訳、で出力はテキストではなく取り込んだ音声でやる感じなのでは？ https://t.co/DVSpaaH6DR
— Nakadate@INTERNOUS CEO/代表取締役 (@Konakadate) September 11, 2023