NikolaiT/se-scraper

Safe per IP Google limits?

Open

#19 aperta il 22 apr 2019

Vedi su GitHub
 (3 commenti) (0 reazioni) (0 assegnatari)HTML (124 fork)batch import
good first issuequestion

Metriche repository

Star
 (523 star)
Metriche merge PR
 (Nessuna PR mergiata in 30 g)

Descrizione

Hi all, does anyone have up-to-date data for how many searches you can perform per IP per time period before getting blocked?

We have a limited scraping need, and spare server resources, so figured this would be a good solution, but would like to know how best to split the work.

I found old posts suggesting around 300 regular (not Google dorks) searches per 24 hours, but have no idea if this is still correct.

Any input greatly appreciated.

Guida contributor

Direzione di ricerca
Cerca informazioni aggiornate sui limiti di velocità di Google per IP e compila i risultati.
Tech stack
javascriptnodejs
Dominio
web devdevops
Tipo issue
Ricerca
DifficoltàQuanto dovrebbe essere impegnativa per un nuovo contributor.
1
Tempo stimatoTempo stimato per completare e verificare uno scope piccolo.
Meno di 1 ora
Stato attivitàQuanto è probabile che la issue sia ancora attiva e reviewable.
Attiva
ChiarezzaQuanto chiaramente la issue descrive problema, scope e risultato atteso.
Richiede indagine
Prerequisiti
Nessuno
Adatta ai principiantiQuanto la issue è adatta a contributor alla prima esperienza.
90