やること
先日作った「音声会話RAGチャットシステム」を
2024/7/13(土)~15(月) J-WAVE presents INSPIRE TOKYO(@代々木第一体育館)で試乗会を行う自動運転車に搭載していただきました。課題をメモしておきたいと思います。
試乗会の様子
館内でライブが行われている間こそ少なかったですが、ライブの前後は絶えず行列ができていました。同じルートで人力車の試乗会も行われていたので、お客さんの希望をできるだけ叶えられるように協力しました。「自動運転車 vs 人力車」「人力車 vs ベビーカー」のバトルも発生していました^^
![](https://vigne-cla.com/wp-content/uploads/2024/07/30-16_2r.jpg)
![](https://vigne-cla.com/wp-content/uploads/2024/07/30-16_2r.jpg)
車にこのようにボタンとマイクを設置しました。配線を行ってくださったエンジニアの方に感謝です。
![](https://vigne-cla.com/wp-content/uploads/2024/07/30-16_oimeev.jpg)
![](https://vigne-cla.com/wp-content/uploads/2024/07/30-16_oimeev.jpg)
![](https://vigne-cla.com/wp-content/uploads/2024/07/30-16_3rr.jpg)
![](https://vigne-cla.com/wp-content/uploads/2024/07/30-16_3rr.jpg)
まず、この会話システムがよく落ちる。1時間くらいで落ちるので再起動が必要でした。おそらくノートPCの性能のせいかなと思います。(あとWindowsアップデート)
次に、会話システムのレスポンスが遅かった要因がいくつかあります。
- 全体的にストリーミング対応ではない
- AIの回答をもらう無線LANが遅い
- 音声合成がノートPCのCPU依存
3が一番影響が大きかったです。GPU付きの小型デスクトップを置きましょう。1と2は優先度が低めです。
そして致命的なのが、500円くらいの激安マイクでは風の音しか拾わないことです。「ゴーーーーーーーッッ!!」という質問に対して「えーっと、ヤドカリドライブについて聞きたいんだね?」と珍妙に空気を読んだ回答が返ってきていました。マイクはちゃんとしたものを選びましょう。
おわりに
これらを改良して、さらに3Dアバターと合体させた音声会話システムを秋の展示会で置きましょう。ぜひ遊びに来てください。
ちゃっかりライブも楽しみました↓
![](https://vigne-cla.com/wp-content/uploads/2024/07/30-16_4.jpg)
![](https://vigne-cla.com/wp-content/uploads/2024/07/30-16_4.jpg)