Webデータ収集

Webデータ収集向けレジデンシャルプロキシ

簡単な回答

公開Webデータを収集するチームは、レジデンシャルプロキシを使ってリクエストを実際の一般ユーザーのIPに分散させ、地域ごとのコンテンツを閲覧します。常に対象サイトの利用規約と適用法令の範囲内で行います。

代表的なワークフロー

研究や分析のために一般公開されているデータを収集する。
比較のために地域ごとの公開コンテンツにアクセスする。
合法的な収集を多数の独立したリクエストに分散させる。

責任を持って収集する

責任ある収集とは、該当する場合はrobots指示を尊重し、サイトの利用規約を守り、処理を許可されていない個人データを避け、リクエスト頻度を適切に保つことを意味します。SocksNodeで許可されている行為と禁止されている行為については、利用規約(Acceptable Use Policy)をご覧ください。

関連項目

よくある質問

SocksNodeでWebデータ収集は許可されていますか?

一般公開されているデータの収集は、対象サイトの利用規約と適用法令に準拠している場合に許可されます。禁止行為や不正利用は認められません。当社の利用規約(Acceptable Use Policy)をご覧ください。

大規模な収集ジョブにはどのセッションモードが適していますか?

ローテーションセッションは、各リクエストが独立している大量かつステートレスな収集に適しています。

関連する投稿

すべての投稿

はじめる。

アカウントを作成し、認証情報を生成して接続します。API はダッシュボードと同じものです。