AI Agent開発日記 2025/02/13

やりたいこと

Agent Builder を用いたデータストア参照型対話エージェントの作成において、
データストアのファイル数が増加することで回答率が低下する問題への対処を進める。

データストアにCSV形式のファイルを追加して、ファイル数が増加による回答率低下問題が発生するのかを調べる

• 試したこと
  • GCS にインポート済みの、1 ファイルあたり約 100KB の CSV ファイルをデータストアへ追加し、ファイル数の増加による回答率の低下が見られるかを検証する。
• 結果
  • 回答率
    • 400ファイル
      • 10回中9回回答された
    • 900ファイル
      • 10回中8回回答された
    • 2600ファイル
      • 10回中10回回答された
    • 3400ファイル
      • 10回中9回回答された
    • 4000ファイル
      • 10回中10回回答された
    • 4500ファイル
      • 10回中9回回答された
  • TXTファイルで問題が発生した以上の容量を追加しても問題は起きなかった、更にファイルを追加して調査する
    

使用した物件CSVファイルの形式

"answer","question"
"所在地: 東京都東大和市立野1, 間取り: 2LDK, 賃料: 3000円, 管理費: 0円, 敷金: 75000円, 礼金: 75000円","東京都東大和市の賃貸物件を教えてください。"
"所在地: 東京都立川市栄町2, 間取り: 2LDK, 賃料: 3200円, 管理費: 0円, 敷金: 80000円, 礼金: 80000円","東京都立川市で2LDKの物件はありますか？"