着ぐるみロボット「くるみちゃん」にChatGPTを繋いで音声対話できるようにしたというお話は以前にもしましたが、今回色々と会話してみたところを動画にしましたので、紹介します。

◆技術的な背景などは、以前のブログから↓↓

ヴイストンのYouTubeチャンネル

ヴイストンのYouTubeチャンネルにてChatGPTを搭載したロボットの使用感を動画にて紹介しています。単純なシナリオ対話とは異なり、ChatGPTならではの返答の面白さがあります。

技術的背景

ChatAPIの返答には数秒かかるため、ChatAPIにリクエストを送り、返答を待っている間に、くるみちゃんが身動き一つもしない場合、ちゃんと聞き取っているのかどうかがわからない。
そのため、その間は、くるみちゃんが考えているようなモーションを実行しています。

なお、これらの会話機能の実装(アプリの作成)は、VstoneMagicというツールを使用。
音声認識、音声合成、モーションに関しては、対応するブロックがあり、それを利用しています。
対話(チャット)機能は独自で実装しており、自由記述のブロックで呼び出しをおこなっている。