Une adresse pour la collecte de données
Le volume prend plus d'adresses. Cela ne nécessite pas un autre type d’adresse.
La collecte de pages en quantité dépasse la limite des recherches acceptées par la destination par IP. Au-delà de la limite, un blocage ou un captcha arrive, et l'adresse n'est pas en faute.
Comment le dimensionner
Mesurez le nombre de pages par heure qu'une adresse délivre avec une réponse valide. Divisez le total dont vous avez besoin par ce nombre. Le résultat est la quantité, avec une réserve pour ceux qui tombent en panne pendant la journée.
Répartis sur différents blocs. Une centaine d'adresses dans un même bloc sont bloquées d'un seul coup.