play_arrow

※ 広告を×ボタンで閉じて再生ボタンを押した後、リンク先で再生可能です。

※ 動画が重い方は、リンク先の動画を再生後、右下の歯車から「360」を選択すると少し軽くなる可能性があります。

【コイカツ技術デモ】LLM+TTS+VRIK 【koikatsuTechDemo】

  • calendar_month
    2026-06-27
    19:08
  • remove_red_eye
    2070
    回視聴
  • favorite
    80
    いいね
add
お気に入り登録

作者コメント:

プラグイン制作テスト(バイブコーディング)1.勝手に話すコイカツキャラ+プレイヤーチャット LLM:gemma-4-12b-it-heretic & TTS:IrodoriTTS キャラが勝手に二人で会話する。よい時代になったものだ。(VoiceはIrodoriTTSのVoiceDesignでゼロから生成) 初回だけ生成に時間がかかる(5秒くらいだが) プレイヤーも会話に混ぜていただけるのがありがたい。バックグラウンドでLLMにプリフェッチしとくので、ボイス再生の余白が短くてよいと思いました。 あと服や、キャラ同士やプレイヤーとの距離、手がどこにあるかなど「キャラに状況を理解」させてみた。相性よいと思いました。 音声入力は当初からする予定だったがいかんせんラグはあるので、どうしようか検討中 参考)rinon-voice-lab2.VRIK制御 HMDと2つのコントローラを使ったボディー制御。基本はプレイヤー用だが、キャラを同列に扱うようにしつつ、副産物として頭などのIK適応や、自動的な重心適応、Locomotion(ルートが動くと足が動く)などを実装して、今後いろいろできればよいなと思いました。
この動画を見る