ぬっち氏によるOpenAIとBlenderとの連携アドオン「OpenAI Bridge」がGithub上で無料公開されています。OpenAIのAPIを利用して様々な事がBlender上で可能になっています。
Blender Add-on: OpenAI Bridge
主な機能
- イメージツール
OpenAI Image APIを使用した画像生成「DALL-E」 - オーディオ
OpenAI Audio APIを使用した音声を書き起こし「whisper-1」 - チャット
OpenAI Chat APIを使用したチャット
Blenderのオペレータ/プロパティに質問： 右クリックメニューからBlenderのオペレータやプロパティを尋ねる
対応機種：「gpt-3.5-turbo」、「gpt-4」、「gpt-4-32k」
今後実装予定の機能
- イメージツール
画像編集： OpenAI APIを使った画像編集 - コードツール
サンプルコードの生成： 右クリックメニューからBlenderの演算子/プロパティのサンプルコードを生成
コードを即座に実行： プロンプト/オーディオから即座にコードを実行 - 非同期実行の改善
非同期エクゼキューションのステータスを表示
Blender MartketでもOpenAI連携系アドオンが増えてきましたねよね
「OpenAI Bridge」はwisper-1に対応しているところも注目です
動作させるにはOpenAIのAPIキーが必要ですので事前に用意しておきましょう
試してみました
Blenderで～と入れること無くお猿さんを敷き詰めてとお願いしたらサクッとスクリプトを出してくれました
コピペせずにその場で実行出来るのは良いですねぇ
画像生成もお手軽です
最後にお試し的に音声からテキスト生成をしてみました
この辺は他のアドオンでは出来なかった事なので人によっては嬉しい機能かもしれませんね
ということでこの便利なアドオンはGithubにて無料公開中です！
是非チェックしてみてください！
リンク
OpenAIのAPI（whisper、GPT）を使って、画像生成・文字起こし・チャット＆質問できるBlenderアドオンを作ってみた。#b3d #blender
— ぬっち (@nutti__) March 29, 2023
チャット中に表示されたコードはそのまま実行＆コピペできる。APIへのリクエストは同期／非同期から選択可能。https://t.co/Tqsewvlhnx pic.twitter.com/VH3oqzNfOI
RSSリーダーで購読する
コメント