メーターなしのボリューム
メディアや長いページは、GB単位でデータ収集の予算を立てるのが難しいです。無制限プランは30日間で1日あたり$52.50の固定費用で、クロールが5TBでも50TBでも同じです。
言語を超えた広がり
無制限プランは多くの国からIPを割り当てるため、現地言語バージョンのサイトにアクセスするのに役立ちます。固定の国の場合は、同じアカウントでGB単位の住宅用パックを追加します。
ステップバイステップで設定
- ステップ11日のボリュームと同時接続数を推定します。
- ステップ230日間の無制限プランから始めます。
- ステップ3500接続にジョブを分散させます。
- ステップ4ロボット規則とレート制限を尊重します。
- ステップ5ボリュームが安定したら60日または90日に移行します。
よくある質問
接続数はいくつですか？
プランごとに500同時接続、100 Mbps。
プランを混在できますか？
はい。多くのチームは広範なクロールに無制限プランを使用し、固定市場にはGB単位の住宅用プロキシを使用します。