MENU
  • HOME
  • Struccle
  • 取引実績
  • お問い合わせ
  • 資料DL
  • 会社概要
  • FAQ
  • Struccle記事
  • BigQuery記事
データ流通、検索エンジン開発のプロフェッショナル
DataStructor
  • HOME
  • Struccle
  • 取引実績
  • お問い合わせ
  • 資料DL
  • 会社概要
  • FAQ
  • Struccle記事
  • BigQuery記事
DataStructor
  • HOME
  • Struccle
  • 取引実績
  • お問い合わせ
  • 資料DL
  • 会社概要
  • FAQ
  • Struccle記事
  • BigQuery記事
  1. ホーム
  2. Struccle
  3. Struccleでスクレイピング
  4. 2.データを自動収集する(Extractor)

2.データを自動収集する(Extractor)

2025 9/12
Struccleでスクレイピング
2025年9月11日2025年9月12日

入門ガイド

データを自動収集する(Extractor)

このガイドでは、Extractorの基本設定から最初のデータ抽出までを最短ステップでご案内します。まずは「クイックスタート」→「最初のスクレイピング」の順で進みましょう。

目次

基本操作

それでは一覧ページと詳細ページのページデータ(パーサー)を作成していきます。

① 一覧ページデータ作成(一覧パーサー作成)

NEW CHATを押して新しいExtractorを開く

↓

一覧ページのURL取ってきて、下記赤四角の箇所にURLを入れてSCRAPEを押す

↓

↓

HIGH SPEEDを選択

HIGH SPEED=URLだけなど最小限のデータを早く自動収集

↓

取得が完了したら下記のようになるので、MAKEを押す

↓

CHECKをクリックする

↓

赤四角箇所に一覧URLを入力して、CHECKを押すと取得データが確認できます。

↓

↓

ここでsource_url,url,nameが取得できていれば一覧パーサー完成です。
(項目名はサイトにより異なる可能性もあります。)

↓

最後に自分で分かるように下記の赤四角の箇所にデータの名前をつけておきましょう

② 詳細ページデータ作成(詳細パーサー作成)

NEW CHATを押して新しいExtractorを開く

↓

詳細ページのURL取ってきて、下記赤四角の箇所にURLを入れてSCRAPEを押す

↓

NORMALを選択

NORMAL=会社名・電話番号などより詳細なデータを自動収集

↓

抽出したデータを確認してMAKEを押す

↓

CHECKをクリックする

↓

赤四角箇所に詳細URLを入力して、CHECKを押すと取得データが確認できます。

↓

取得したいデータが取れていれば詳細パーサー作成完了です

↓

最後に自分で分かるように下記の赤四角の箇所にデータの名前をつけておきましょう

これで一覧パーサーと詳細パーサーが完成しました。


それでは次にSTEP.3の

3.URLを準備する

を学んでいきましょう!


人気記事

  • BigQueryの無料枠を活用しよう!制限と注意点、活用方法を解説
  • BigQueryでエラー解決!よくあるエラーと対処法
  • BigQueryのレベル別学習リソースまとめ!初心者から上級者まで役立つ情報源
  • 【SUUMOスクレイピング】Struccleで物件データを全件収集
  • BigQuery入門!無料データでSQLの基本文字列関数をマスター
Struccleでスクレイピング
よかったらシェアしてね!
  • URLをコピーしました!
  • URLをコピーしました!
目次
カテゴリー
  • AI_Agent (153)
    • Agent開発 (153)
  • BigQuery (100)
    • BigQueryTips (11)
    • BigQueryでデータ分析 (49)
    • BigQueryのFAQ (1)
    • BigQuery入門 (8)
    • BigQuery学習教材 (22)
    • BigQuery導入ガイド (3)
    • BigQuery最新情報 (3)
    • BigQuery活用事例 (4)
  • Struccle (198)
    • Struccleでスクレイピング (24)
      • suumoの物件データを収集&分析 (1)
      • アニマルジョブの電話番号、メールアドレスを全件収集 (1)
      • データ集計 (6)
      • ホットペッパービューティーのヘアサロンデータを収集&分析 (1)
      • 食べログの飲食店データを収集&分析 (1)
    • Struccleデータ料金事例 (173)
      • 商品分析 (15)
      • 営業リスト (119)
      • 競合分析&市場調査 (58)
      • 自動車 (11)
      • 自社活用 (7)
    • Struccle活用企業様の紹介 (1)
  • 当ブログのコーディング実行環境設定 (6)
目次