よくあるご質問
機能について
クローリングはウェブサイト全体を「探索・ナビゲート」するプロセスですが、スクレイピングは特定のページからデータを「抽出・収集」するプロセスです。
この 2 つはしばしば一緒に使用されます。クローリングはウェブサイト上のページを検出するために使用され、その後、特定のページに対してスクレイピングが実行されます。
無料プランでは、50 万アイテムまで保存が可能です。それを超えると、使用量に応じて課金されます。
※ 1 アイテム=データ 1 行です。
IPプロキシサービスは、ITエンジニアが開発に使うIPローテーション(IPを変更)です。
Struccleはマーケターや営業などのビジネス職やITエンジニアもプログラミング要らずで使えるスクレイピングサービスです。
Web サイトで公開されているあらゆる種類のデータを収集できます。
レビューや評価などの定性データから数値などの定量データまで、さまざまな形式が含まれます。
ただし、対象サイトのデータ収集ポリシーに違反しないデータに限られます。
また、サイトログイン後のページのスクレイピングは禁止行為のため、対象外となります。
データを CSV ファイルとしてエクスポートすることが可能です。
※ json等のご相談も承っております。
Selenium を使うと、ブラウザの操作を自動化できます。これにより、JavaScript で動的に生成されるコンテンツや、ログインが必要なページなど、従来のスクレイピングツールでは取得が難しい情報も収集可能です。
具体的には、ウェブサイト上のボタンをクリックしたり、フォームにテキストを入力したり、ページをスクロールしたりといった一連の操作を、まるで人間が操作しているかのように自動で実行できます。
これはマーケティング戦略に活用できるレベルです。
競合他社と比較すると、無料サービスとしてはかなり大きな規模です。
IP ローテーションは、ウェブスクレイピングにおいて、リクエストごとに IP アドレスを自動的に変更する技術です。
同一 IP からの大量アクセスをボットと見なしてブロックするサイトの対策を回避するために用いられます。
複数のプロキシサーバーの IP アドレスを使い分けることで、サイト側からは異なるユーザーからのアクセスに見せかけ、大規模なスクレイピングを継続的に行えます。
サービスと利用について
はい。アカウントを作成してサービスをご利用ください。
いいえ、ソフトウェアのインストールは不要です。webブラウザ(chrome推奨)ベースのサービスとなります
請求書払いや、クレジットカード等柔軟に対応可能でございます。
法的懸念や安全性
当社のサービスは、対象ウェブサイトのサーバーに負荷をかけないように設計されており、通常のご利用においてはサーバーダウンを引き起こすことはありませんのでご安心ください。
ただし、短期間に過剰なリクエストを行うなどの不適切な使用は、サーバーに過負荷をかける可能性があります。
皆様にスムーズな体験と継続的なサービス提供を保証するため、プラットフォームを責任を持ってご利用いただくようお願いいたします。
当社は、インターネット上で公開されている情報のみを取得します。個人情報やアクセス制限がかかっている情報にはアクセスいたしませんのでご安心ください。
データ漏洩や不正アクセスとは、一般的に社内で管理されている機密情報の漏洩や、許可なく不正にデータにアクセスする行為を指します。
当社のサービスはこれらの行為とは根本的に異なるため、安心してご利用いただけます。
ありません。ただし、データ活用時には著作権等の問題が発生する場合もございますので、まずは弊社へご相談くださいませ。
Struccle の操作について
- 「パーサー」とは何ですか？
- 「モデル選択」を変更すると何が変わりますか？
- 「URL」には何の URL を入力すればよいですか？
- 「画像」にはどのようなファイルを添付すればよいですか？
- 「指示内容」 とは何ですか？
- 「取得開始」ボタンで何ができますか？
- 「IP確認」ボタンで何ができますか？
- 「操作記録」ボタンで何ができますか？
- 「サイト表示」ボタンで何ができますか？
- 「モデル作成」ボタンで何ができますか？
- 「確認」ボタンで何ができますか？
- 「詳細ページ」モードとは何ですか？
- 「一覧ページ」モードとは何ですか？
- 「ページネーション」とは何ですか？
- 「データ加工」とは何ですか？
- 「source_url」とは何ですか？
- 「pagination_url」とは何ですか？
- 「操作を選択」とは何ですか？
- 「データ保存」ボタンで何ができますか？
- 「スケジュールに登録」ボタンで何ができますか？
- 非表示されたパーサーを再度表示することはできますか？
- 「指示内容」で修正指示をして「取得開始」をしたのにデータ取得の画面が変わりません。
- モード選択の「新規列を追加」とは何ですか？
- モード選択の「列を修正」とは何ですか？