MENU
  • HOME
  • Struccle
  • 取引実績
  • お問い合わせ
  • 資料DL
  • 会社概要
  • FAQ
  • Struccle記事
  • BigQuery記事
データ流通、検索エンジン開発のプロフェッショナル
DataStructor
  • HOME
  • Struccle
  • 取引実績
  • お問い合わせ
  • 資料DL
  • 会社概要
  • FAQ
  • Struccle記事
  • BigQuery記事
DataStructor
  • HOME
  • Struccle
  • 取引実績
  • お問い合わせ
  • 資料DL
  • 会社概要
  • FAQ
  • Struccle記事
  • BigQuery記事
  1. ホーム
  2. Struccle
  3. Struccleでスクレイピング
  4. 0.Struccleの基本機能

0.Struccleの基本機能

2025 9/12
Struccle Struccleでスクレイピング
2025年9月11日2025年9月12日

入門ガイド

Struccle 機能紹介

このガイドでは、Struccleの基本機能を紹介します。各機能を理解すればあなたの取得したデータを取得できるようになります。

目次

機能紹介

Extractor

自動収集をするための準備はここで行います。

ここで作成する機能をパーサーと言います。

Extratorでできること

  • SCRAPE:
    この機能を利用すれば、自動でページの各項目を取得できるようにしてくれます。もし自動取得した項目を変更したい場合は’VIEW’で取得項目の修正や追加をすることができます。
  • CHECK:
    上記で取得した項目がどんな風に取得できるかを見ることができます。
    Urlの広告にページURLを入れてCHECKを押せば、そのURLのページのデータがどのように取得できているか確認できます。
  • VIEW:
    CHECKで項目を修正したい場合や、追加したい場合はここで取得したい箇所をクリックして項目名を入れれば項目を修正・追加することが可能です

Scheduler

Extractorで作成したページデータを使用して、どのURLを、いつ取得するか、が設定して取得を開始します。

Schedulerでできること

  • Add Schedule:
    ここで作成したExtractorのページデータを設定し、スクレイピングの準備をします
  • URL:
    次に取得したページのURLを設定します
  • Schedule:
    必要であれば週に1回、月に1回など指定した日付でデータ取得予約もできます

これらの設定を完了し、’ Start now ‘を押せばスクレイピングが開始されます。

Results

収集したデータの閲覧とダウンロードができます。

Resultsでできること

  • OPEN:
    ここでスクレイピングの出力結果を確認することができます
  • DL:
    CSVデータをダウンロードすることができ、WindowsとMacOSの両方とも対応しています。

Template

主要サイト向けテンプレートを用意。すぐに収集を開始できます。

現在準備中。




それでは次にSTEP.1の

1.Struccleの基本

を学んでいきましょう!


人気記事

  • BigQueryの無料枠を活用しよう!制限と注意点、活用方法を解説
  • BigQueryでエラー解決!よくあるエラーと対処法
  • BigQueryのレベル別学習リソースまとめ!初心者から上級者まで役立つ情報源
  • 【SUUMOスクレイピング】Struccleで物件データを全件収集
  • BigQuery入門!無料データでSQLの基本文字列関数をマスター
Struccle Struccleでスクレイピング
よかったらシェアしてね!
  • URLをコピーしました!
  • URLをコピーしました!
目次
カテゴリー
  • AI_Agent (153)
    • Agent開発 (153)
  • BigQuery (100)
    • BigQueryTips (11)
    • BigQueryでデータ分析 (49)
    • BigQueryのFAQ (1)
    • BigQuery入門 (8)
    • BigQuery学習教材 (22)
    • BigQuery導入ガイド (3)
    • BigQuery最新情報 (3)
    • BigQuery活用事例 (4)
  • Struccle (198)
    • Struccleでスクレイピング (24)
      • suumoの物件データを収集&分析 (1)
      • アニマルジョブの電話番号、メールアドレスを全件収集 (1)
      • データ集計 (6)
      • ホットペッパービューティーのヘアサロンデータを収集&分析 (1)
      • 食べログの飲食店データを収集&分析 (1)
    • Struccleデータ料金事例 (173)
      • 商品分析 (15)
      • 営業リスト (119)
      • 競合分析&市場調査 (58)
      • 自動車 (11)
      • 自社活用 (7)
    • Struccle活用企業様の紹介 (1)
  • 当ブログのコーディング実行環境設定 (6)
目次