1: 名無しのメタバースさん 0000/00/00(※) 00:00:00.00 ID:metaversesoku
単一の画像と音声を入力すると、リップシンク動画生成のAudio2Video Diffusion♪
— forasteran (@forasteran) February 28, 2024
歌でも話し声でもOK！
言語も問わないｗ
公開はよ#EMO: Emote Portrait Alive - Generating Expressive Portrait Videos with Audio2Video Diffusion Model under Weak Conditions, Alibabahttps://t.co/CuJoRSlZR1 pic.twitter.com/zsaCV9Cq3Q
すげーなあ。割とイラストよりのキャラでも自然な口パク！これが一発出し？一枚絵作って喋るだけでアニメになるんか？とは言えやっぱ動き方はアニメとは違うね →RT
— うみゆき@AI研究 (@umiyuki_ai) February 28, 2024
※: 本日のおすすめサイト記事一覧 0000/00/00(※) ID:metaversesoku
3: 名無しのメタバースさん 0000/00/00(※) 00:00:00.00 ID:metaversesoku
この子いいｗ（そこじゃない🤭）
— forasteran (@forasteran) February 28, 2024
フォトリアでもアニメでもお面つけてても良さげにリップシンクできるの凄い！
はたしてソースは公開されるのだろうか…(ｺﾞｸﾘ)https://t.co/gVxTJjt0qw
これまた凄いのがきた！
— ルナ＠NIKKE ゲーム日常 (@luna3_game) February 28, 2024
けどサイトには「This project is intended solely for academic research and effect demonstration」って書いてあったので、ソース公開やサービス化はなさそうかな？
（しかし似たようなのが他から出てきそう https://t.co/3WBj6k4132
そういや自動リップシンクってなかったね。
— リク (@ricky0web) February 28, 2024
…なかったよね？
母音に合わせて表情差分を作ればいけるけど、それなりに大変だしな。 https://t.co/LcAVXbdXOT
アリババが静止画と音源をアップロードすると表情豊かに歌ったり話したりする面白AI出してきた。
— KAJI | 梶谷健人 / 新刊「生成AI時代を勝ち抜く事業・組織のつくり方」発売！ (@kajikent) February 28, 2024
アリババはダンス動画生成AIといい、エンタメ用途のAIにフォーカスして研究しまくってますね。 pic.twitter.com/jaFB1bcW9u
4: 名無しのメタバースさん 0000/00/00(※) 00:00:00.00 ID:metaversesoku
詳細は以下公式ページをご参照ください ↓https://t.co/o4VO85CMpY
— KAJI | 梶谷健人 / 新刊「生成AI時代を勝ち抜く事業・組織のつくり方」発売！ (@kajikent) February 28, 2024
見慣れたAIの美女画像も、声、リップシンク、瞬き、曲にそった頭の揺れなどあるだけで、臨場感が全然違いますね・・・
— テツメモ｜AI図解×検証｜Newsletter (@tetumemo) February 28, 2024
別で進撃の巨人のEDや、ゲーム『NieR:Automata Ver1.1a』のナレーションなど、エンタメでの用途拡大にワクワクしています pic.twitter.com/31nScv2VtX
AI美女感無い。これめっちゃ良いやん。 https://t.co/WzPOP8Ts1O
— 元木大介@生成AIとCursorConnect (@ai_syacho) February 28, 2024
生成口パク時代の到来。 https://t.co/l4P7tGOQb8
— ほりい なおき (@hor11) February 28, 2024
めちゃくちゃすごいこう言う時代まで来た#起業しろ https://t.co/shr2LGRuoa
— 木下慶彦(Max) / Skyland Ventures (@kinoshitay) February 28, 2024
5: 名無しのメタバースさん 0000/00/00(※) 00:00:00.00 ID:metaversesoku
【AIが感情豊かに動き、表情を変える】
— 木内翔大＠SHIFT AI代表「日本をAI先進国に」𝕏 (@shota7180) February 28, 2024
モナリザのクオリティが過去最高....
アリババが公開した「EMO」は、音声から直接、リアルな動きと表情を持つビデオを生成する技術
例えばモナリザのような静止画も、音声データに基づいて感情豊かに動き、表情を変えるビデオへと生まれ変わる！… pic.twitter.com/tRZVQiC8af
— 木内翔大＠SHIFT AI代表「日本をAI先進国に」𝕏 (@shota7180) February 28, 2024
詳細はこちら
— 木内翔大＠SHIFT AI代表「日本をAI先進国に」𝕏 (@shota7180) February 28, 2024
🔗- ソース元https://t.co/TkNelCeeJt
🔗- 動画https://t.co/yutBFnIrqr
【音声と写真から表情豊かに歌声を作れるAIが半端ない】
— チャエン | 重要AIニュースを毎日発信⚡️ (@masahirochaen) February 28, 2024
AlibabaがEMO（Emote Portrait Alive）という音声と写真から、超自然に喋る・歌うAIを作れる技術を発表
表情が自然すぎてヤバい
気づいたら、AIドラマ、AI歌手、AI映画が溢れてそう
中国はAIアニメも推進しているし、最近中華勢の勢いも凄い pic.twitter.com/KZAopbTVDx
Youtube有名人＋名曲のセットだけでバズりそう。（著作権的にはアウトだが）
— チャエン | 重要AIニュースを毎日発信⚡️ (@masahirochaen) February 28, 2024
○ソースhttps://t.co/y5tvBG9alf
アリババがEMO（Emote Portrait Alive）を発表
— まさまさ＠マーケ＆AI活用&中小企業診断士 (@masamasa88_88) February 28, 2024
ここまで来てしまった
①人の画像を1枚用意
②音声（話したり歌ったり）を用意
③自然な動きの動画を生成
サンプル：
・AIで生成した女性の画像
・女性インフルエンサーの音声https://t.co/Ua1JauvGym pic.twitter.com/PLKR8zKIT6
アリババのAI生成動画EMO
— 吉川真人🇨🇳深センスタートアップ起業🔥 (@mako_63) February 28, 2024
写真と任意の音声ファイルを提供することで、話したり歌ったりするAI動画やダイナミックなショート動画を生成できるAudio2Video拡散モデル。
最大約1分30秒の動画が生成可能で、表情や話し方、歌い方が非常に自然 pic.twitter.com/nY47UdoGXp
_________________________________________________________________________________
コメントする