AI 技術
- 技術-Technology

Talking Head Anime from a Single Image 3 - １枚の2Dキャラ立ち絵からVTuberになれるAI技術の新バージョン！上半身の動きにも対応！

投稿日 2022-06-06
更新日 2023-08-22
AI 技術技術-Technology
AI Google Pramook Khungurn Talking Head Anime from a Single Image 深層学習
0

この記事は約1分13秒で読めます

Google JapanのエンジニアPramook Khungurn氏による、１枚の2Dアニメキャラ立ち絵からVTuberになれる技術「Talking Head Anime from a Single Image」の第３弾アップデートの情報が2022年6月6日に公開されています。

Talking Head Anime from a Single Image 3

私は、1枚の画像からアニメキャラクターをアニメーション化するニューラルネットワークシステムの3回目の試作を行った。前作は頭部のみのアニメーションでしたが、今回は上半身もアニメーションさせることができます。具体的には、以下の3種類の動きを新たに追加しました。
新システムでは、人間の動きをアニメキャラに転写できる私の既存ツールを更新しました。機能を拡張したものは以下の通りです。

また、システムの小型化、高速化についても実験を行いました。画質の劣化を抑えながら、必要なメモリを大幅に削減し（サイズ18倍、RAM使用量3倍削減）、若干の高速化を実現することができました。

ある一定のクオリティであればLive2Dは不要になる時代が来てますよ！ちらほらとこのシステムを使っているVtuberの方々がおられましたが、更に簡単に品質向上できそうで素晴らしいですね。
~~技術解説やGithubへのリンクは公式解説ページをご確認ください。~~
色々ありページは削除されたようです。情報を得たい方は開発者へコンタクトを取ってみてください。