この 作品について
VoiceChat v2は
要点
この作品の要点
- 既存
チャット UIは テキスト ストリームに 閉じている。 - キャンバスと
チャットを 統合した マルチ モー ダル UI。 - マルチ
モー ダル AI OSの 研究 プロトタイプ として 公開。
課題と解決
困りごとと、解き方
困っていたこと
既存
チャット UIは テキスト ストリームに 閉じている やった
こと キャンバスと
チャットを 統合した マルチ モー ダル UI 困っていたこと
ビジュアルと
言語理解を 自然に 共存させる アーキテクチャが 未確立 やった
こと TypeScript
コントラクト + Vue ビューの プラグ イン 契約を 定義 困っていたこと
マルチAIを
切り替えながら 使う 体験が 分断されている やった
こと 5モデルを
統一 インターフェースで スイッチ可能に
成果
できあがったもの
成果
- マルチ
モー ダル AI OSの 研究 プロトタイプ として 公開 - プラグ
イン 拡張の 設計パターンを 確立
見どころ
- 5つの
AIモデルを シームレスに 切替 (OpenAI/ Gemini/ Claude/ Ollama/ ComfyUI) - 会話フロー内で
画像・ 地図・ ゲームが 動的に 具現化 - TypeScript
コントラ ク ト ベースの プラグ イン システム - LLM_OS.
md / WHITEPAPER. md の 体系 化 ドキュメント - ローカルLLM
(Ollama) + ローカル 画像 生成 (ComfyUI) 統合
作り方
どう作ったか
- 企画・
アーキテクチャ 設計 ・ AI連携・ プラグイン設計 - Vue 3・TypeScript・OpenAI API・Gemini API・Anthropic API・Ollama・ComfyUI・Google Maps API・EXA API
主要機能
- 5つの
AIモデルを シームレスに 切替 - キャンバスと
チャットを 統合した マルチ モー ダル UI - 会話フロー内で
画像・ 地図・ ゲームが 動的に 具現化 - TypeScript
コントラクト + Vue ビューの プラグ イン 契約を 定義 - TypeScript
コントラ ク ト ベースの プラグ イン システム - 5モデルを
統一 インターフェースで スイッチ可能に
技術的詳細
- フロント
エンド ・ 基盤 - Vue 3 / TypeScript / OpenAI API / Gemini API / Anthropic API
- AI・
連携・ データ - Ollama / ComfyUI / Google Maps API / EXA API
活用シーン
- 既存
チャット UIは テキスト ストリームに 閉じている - キャンバスと
チャットを 統合した マルチ モー ダル UI - ビジュアルと
言語理解を 自然に 共存させる アーキテクチャが 未 - TypeScript
コントラクト + Vue ビューの プラグ イン 契約を 定義 - マルチAIを
切り替えながら 使う 体験が 分断されている - 5モデルを
統一 インターフェースで スイッチ可能に
次の一歩


