Il tuo indirizzo IP è esposto quando raschi Google Maps?

Cosa vede realmente Google

Ogni volta che il tuo browser carica una pagina, il tuo indirizzo IP Viaggia insieme alla richiesta. È così che Internet instrada una risposta verso di te. Aprire Google Maps per guardare un ristorante espone il tuo indirizzo IP esattamente come fare lo stesso con cento risultati di ricerca. La raschiatura non aggiunge un ulteriore livello di esposizione segreto. Il tuo indirizzo IP era già visibile.

Quindi la risposta onesta alla domanda del titolo è: sì, il tuo IP è visibile, ma non più di quanto lo sia durante la normale navigazione. La domanda interessante non è se Il tuo IP è visibile. È che aspetto ha il traffico. Una persona che clicca su Maps alla velocità umana non assomiglia per niente a uno script che invia migliaia di richieste al minuto dallo stesso indirizzo.

Questa distinzione è importante perché Google, come la maggior parte dei grandi servizi, monitora gli abusi automatizzati. Non ha bisogno di conoscere il tuo nome per notare che un singolo indirizzo IP ha richiesto lo stesso endpoint cinquecento volte in dieci secondi. È quell'impronta comportamentale, non l'indirizzo IP in sé, che fa scattare i sistemi di difesa.

Acquisizione tramite browser vs. scraping lato server

C'è una differenza sostanziale tra estrarre dati dal proprio browser e utilizzare uno scraper su un server a noleggio. Quando si utilizza un'estensione del browser, ci si limita a leggere i dati che Maps ha già inviato allo schermo. La connessione è quella standard del browser, con il normale indirizzo IP, i normali cookie e la normale sessione. Non accade nulla di particolare sulla rete.

Gli scraper lato server e gli strumenti basati su API sono diversi. Spesso instradano molti clienti attraverso indirizzi IP di data center condivisi, che sono più facili da identificare per un servizio, quindi si affidano a pool di proxy e indirizzi a rotazione per distribuire il carico. Questo meccanismo esiste proprio perché il traffico automatizzato grezzo si fa notare. L'acquisizione del traffico dal browser aggira gran parte di questo problema, apparendo per quello che è: una persona reale in una sessione reale.

Niente di tutto ciò rende invisibile la cattura del browser e non dovrebbe essere venduto in questo modo. Significa semplicemente che il profilo del traffico è più vicino all'utilizzo ordinario. Per una lettura più approfondita sull'origine dei blocchi, consultare la nostra guida su Come evitare i blocchi di scraping di Google Maps..

Perché le difese si attivano e quando

I CAPTCHA e la limitazione della frequenza delle richieste sono misure che Google adotta per difendere il proprio servizio dal sovraccarico automatizzato. Non si tratta di punizioni dirette personalmente a te. Un CAPTCHA è un punto di controllo che chiede, in sostanza, se sei un essere umano in questo momento. La limitazione della frequenza delle richieste è un rallentamento che si attiva quando una fonte richiede troppe richieste troppo velocemente. Entrambi sono comportamenti documentati di come i grandi servizi web gestiscono il traffico e il team di Chrome scrive di come le estensioni causano richieste di rete Innanzitutto.

Lo schema che li fa inciampare è prevedibile: un flusso di richieste identiche da un unico indirizzo, senza pause, senza ritmo umano. Lo schema che non li fa inciampare è quello che si produce naturalmente quando si scorre una ricerca, si lasciano caricare i risultati e si passa oltre. Questo è l'intero argomento a favore acquisizione del ritmo in base a come una persona utilizza effettivamente Maps invece di correre verso il traguardo.

Se ti imbatti in un CAPTCHA, di solito è un segnale per rallentare piuttosto che un segno che hai fatto qualcosa di illegale. Analizziamo i meccanismi in Spiegazione dei CAPTCHA e dei limiti di tariffazione, e la relativa questione della sicurezza dell'account in È possibile essere bannati per aver effettuato lo scraping di Google Maps..

Perché una singola ricerca non restituisce mai un'intera città

Prima o poi tutti notano che una ricerca su Google Maps sembra fermarsi a circa 120 risultati. Si tratta di un limite imposto dall'interfaccia pubblica, non di un difetto né di un ostacolo insormontabile. Google pagina i risultati in modo che nessuna singola ricerca restituisca immediatamente un'intera area metropolitana.

La soluzione pratica non ha nulla a che vedere con il tuo IP. Dividi un'area vasta in ricerche più piccole e realistiche: per quartiere, per categoria, per codice postale, quindi unisci i risultati ottenuti. Questo rispecchia il modo in cui una persona esplorerebbe effettivamente una città, un quartiere alla volta, e rientra pienamente nell'uso normale. Approfondiamo le motivazioni in dettaglio in Perché Google limita i risultati a 120..

Una buona estensione rende tutto più semplice. Con Vonsel puoi registrare una ricerca, riaprire la stessa estrazione in un secondo momento per aggiungere un altro quartiere e continuare a costruire un elenco unico e pulito attraverso numerose piccole query. Questo flusso di ripresa ed estensione, unito alla cronologia di tutto ciò che hai acquisito, fa la differenza tra un semplice dump di dati e un database da cui puoi effettivamente gestire un'area geografica.

GDPR, termini di servizio e buon senso

Due questioni separate si intrecciano qui. In primo luogo, è legale raccogliere i dati? In secondo luogo, cosa è consentito farne una volta raccolti? Le informazioni aziendali pubblicamente disponibili sono generalmente accessibili, ma il modo in cui le si archivia e le si utilizza è regolato da norme come la Definizione di dati personali secondo il GDPR quando un annuncio include un individuo, come ad esempio un proprietario nominato o un numero di cellulare personale.

Google stabilisce anche le aspettative per i propri prodotti e Termini di servizio della piattaforma Google Maps vale la pena leggerli se hai intenzione di sviluppare su Maps su larga scala. Questo post è a scopo informativo, non costituisce consulenza legale, quindi affronta la questione della conformità come farebbe un'azienda attenta: conosci la tua giurisdizione, rispetta le opzioni di esclusione e mantieni una base legale per le comunicazioni. La nostra panoramica su se sia legale estrarre dati da Google Maps e il prospettiva GDPR approfondisci.

L'aspetto rassicurante è che l'uso responsabile e il basso rischio tecnico tendono a coincidere. L'acquisizione, effettuata manualmente, di elenchi di attività commerciali pubbliche, archiviate per uno scopo legittimo, rispetta sia le misure di sicurezza di Google sia lo spirito della legge sulla privacy. L'estrazione sconsiderata e ad alto volume di dati, al contrario, mette a dura prova entrambi.

Come mantenere bassi i livelli di esposizione e di rischio