メモリシステム
長期メモリと短期メモリを分離し、ユーザー文脈に応じたパーソナライズを実現。
研究ページの読み込み
しばらくお待ちください...
Research / Graduation Thesis
Web操作・IoT制御・知識検索・スケジュール管理を統合し, 曖昧な自然言語指示でも実行可能な形に変換して動く自律型システムを,設計から実装・評価まで一貫して開発しました。
英語版スライド: NCSP-Presentation-EN.pptx
プレゼンを見る「いつものようにやっておいて」のような曖昧指示を,WebとIoTをまたいで実行する仕組みを構築。
メモリ付きオーケストレータ+4専門エージェント(Browser / IoT / Life-Style / Scheduler)を統合。
Plan→Execute→Review の自己修正ループで,失敗時の再試行まで含めた堅牢な実行フローを設計。
MCPで機能を標準化し,クラウドLLMとエッジLLMを使い分ける階層推論を実装。
| 指標 | 結果 | アピールポイント |
|---|---|---|
| 統合スコア(10シナリオ) | 15点(メモリなし)→ 平均25.0点(メモリあり) | 約1.7倍改善(+67%) |
| 追加質問回数 | ベースライン合計2回 → メモリあり3ケース合計0回 | ユーザー負担を削減 |
| エッジ推論速度 | CPU 9.64 tok/s → GPU 24.76 tok/s | 約2.57倍の高速化 |
| パーソナライズ例 | 住所・アレルギー・嗜好を参照し,検索/提案/予定登録を自動実行 | 実利用に近い文脈理解を実証 |
LangGraph, MCP, Function Calling, RAG (LangChain + FAISS), 動的モデルルーティング。
Python, Flask, REST API, SSE, SQLite, Docker, 非同期ジョブキュー, Chrome CDP。
Jetson Orin Nano / Raspberry Pi 4 / Raspberry Pi Pico W と連携し,クラウドと役割分担。
曖昧要件の構造化,API設計,評価設計,性能改善,課題分析まで一気通貫で推進。
全体構成図: オーケストレータがメモリと4つの専門エージェントを連携し、E2Eでタスクを完了します。
長期メモリと短期メモリを分離し、ユーザー文脈に応じたパーソナライズを実現。
Jetson / Raspberry Pi を統合し、共通インターフェースで制御。
検索・閲覧・フォーム操作など、Web UIを自律実行。
自然言語の指示を、デバイス固有コマンドへ変換して実行。
RAGで根拠付きの生活支援回答を生成。
自然言語で予定追加・更新・ルーティン管理を実行。