MENU
  • サービス
    • Struccle(ストラクル)
      • スクレイピングテンプレート
    • AI エージェント
  • 事例
  • 料金
  • ブログ
  • FAQ
  • サポート
    • クイックスタート
    • 操作ガイド
    • Struccle コミュニティ
  • 会社概要
    • About us
    • お問い合わせ
  • 資料
上場企業から個人まで、スクレイピングツールの決定版
Struccle
  • サービス
    • Struccle(ストラクル)
      • スクレイピングテンプレート
    • AI エージェント
  • 事例
  • 料金
  • ブログ
  • FAQ
  • サポート
    • クイックスタート
    • 操作ガイド
    • Struccle コミュニティ
  • 会社概要
    • About us
    • お問い合わせ
  • 資料
   12/31まで無料相談受付中
   無料で始める
Struccle
  • サービス
    • Struccle(ストラクル)
      • スクレイピングテンプレート
    • AI エージェント
  • 事例
  • 料金
  • ブログ
  • FAQ
  • サポート
    • クイックスタート
    • 操作ガイド
    • Struccle コミュニティ
  • 会社概要
    • About us
    • お問い合わせ
  • 資料
  1. ホーム
  2. AI_Agent
  3. AI Agent開発日記 2025/04/28

AI Agent開発日記 2025/04/28

2025 4/28
AI_Agent
2025年4月28日
目次

この記事について

本記事は、Agent Builder を使用したデータストア参照型対話エージェントの作成に関する調査記録です。

やりたいこと

Agent Builder を用いたデータストア参照型対話エージェントの作成において、
既存のデータストア機能だとデータ数増加により回答率の低下が発生する為、elastic + dataflow + bigqueryで作成した検索が可能なデータストアを実装したい。

前回の調査日記

あわせて読みたい
AI Agent開発日記 2025/04/27 この記事について 本記事は、Agent Builder を使用したデータストア参照型対話エージェントの作成に関する調査記録です。 やりたいこと Agent Builder を用いたデータス...

dataflowでデータ同期ジョブを動かした際にエラーが発生、原因を突き止めたい。

    • やりたいこと
      • DataflowでBigQueryからElasticsearchへのデータ同期ジョブを動かした所、下記のジョブの起動時に指定されたパラメーターのいずれかが無効であったというエラーが発生したため、原因を突き止めたい。
    • 試したこと
      • 今のところ、以下の対処を試してみましたが、原因は解決できていません。
        • ジョブ名、リージョン、テンプレートでBigQuery to Elasticsearchを選択、Target、必須パラメータのapikeyとindexを入力しジョブを実行
          • ジョブの起動時に指定されたパラメーターのいずれかが無効であったというエラーが発生
        • 下記のオプション パラメータを入力し、エラーが発生したらbqのログに書き込まれるようにする。
          • BigQuery source table
          • The dead-letter table name to output failed messages to BigQuery
          • 結果
            • 同様のエラーが発生、エラーログも指定したテーブルに書き込まれていなかった
        • 不要なパラメーターを設定してる可能性があるので最低限のパラメータで試す
          • 特に変わらず
        • オプションパラメーターの設定項目が40行ほどあり、bq→elasticの同期だとオプションパラメーターの何かしらを設定しないと行けない可能性がある,
    • 次やること
      • 記事や設定項目を調査し、問題を解決する。

    ジョブ実行時発生したエラー

    AI_Agent
    よかったらシェアしてね!
    • URLをコピーしました!
    • URLをコピーしました!
    カテゴリー
    人気記事
    • 【SUUMOスクレイピング】Struccleで物件データを全件収集
    • 【食べログスクレイピング】Struccleで飲食店データを全件収集し、法人リスト作成
    • 【ホットペッパービューティースクレイピング】Struccleでヘアサロンデータを全件収集
    • Struccle、DataStructor活用企業様の紹介
    • 【料金事例】営業コンサル企業が営業リスト収集のためSPEEDAから営業リスト収集
    新着記事
    • 【決定版】Chromeスクレイピング拡張機能比較!7選
    • 「カスタム収集」の基本的な使い方
    • 「カスタム収集」とは?
    目次
    目次