Google Haritalar'dan veri çekmeyi engelleyen unsurlardan kaçınındoğru yoldan, olmadan kuralları çiğnemek
120 sonuç sınırı, CAPTCHA'lar, hız sınırlamaları, yasaklar ve GDPR'ın sade bir dille açıklaması; ayrıca daha sakin, tarayıcı tabanlı bir yaklaşımın sizi nasıl kurallara uygun tuttuğu.
Yasal··7 dakikalık okuma süresi
Önemli noktalar
Blokların çoğu yasal duvar değil, başka yapılardır hız sınırları ve ürün sınırları: 120 sonuç sınırı, CAPTCHA'lar ve otomatikleştirilmiş gibi görünen trafiğe tepki veren IP kısıtlaması gibi önlemler
Bunlardan kaçınmanın güvenilir yolu şudur yavaşlayın ve ayrılın: Daha sıkı aramalar, insan hızına uygun işlem ve kendi tarayıcı oturumunuz içinde çalışan yakalama
Yasallık ve GDPR devreye giriyor Ne topladığınız ve onu nasıl kullandığınız, Herkese açık bir sayfaya bakma eylemiyle ilgili değil. İş verileri, kişisel verilere göre daha düşük risk taşır
Gerçek resim
Öncelikle neden engelleniyorsunuz
Google Haritalar'da bir sorunla karşılaşan çoğu kişi, yasal bir sınırı aştıklarını varsayar. Genellikle aşmamışlardır. Karşılaştıkları şey, çeşitli engellerin bir karışımıdır ürün limitleri (arayüzün aynı anda ne kadar gösterileceği) ve istismar karşıtı sistemler (İnsan dışı trafiği izleyen hız sınırlamaları, CAPTCHA'lar ve IP kısıtlamaları).
Bu iki şey sürekli karıştırılıyor. CAPTCHA bir mahkeme kararı değildir. Bir oturum çok fazla isteği çok hızlı bir şekilde gönderdiğinde veya bir dizüstü bilgisayar kullanan bir kişiden ziyade bir veri merkezine benzeyen bir adresten geldiğinde ortaya çıkan bir engelleyici mekanizmadır. Bu kılavuzun amacı, bu iki kavramı birbirinden ayırmaktır hukuki soru -den teknik soru, Çünkü cevaplar ve çözümler farklı.
Özetle: Robot gibi görünmekten ve elektrik süpürgesi gibi toplamaktan kaçınarak tıkanıklıklardan kurtulursunuz. Sakin ve hedefli veri toplama, agresif veri toplama yöntemlerinin tetiklediği savunma mekanizmalarını nadiren harekete geçirir. Bu makalenin geri kalanında her bir sınırlama ve aslında neyin yardımcı olduğu ayrıntılı olarak ele alınmaktadır.
İnsan hızında, kendi tarayıcınızda yakalayın
Vonsel uzantısı oturum açmış olduğunuz ortamda çalışır ve her işletmeyi Vonsel kontrol panelinize yönlendirir; burada eşleştirilmiş CRM ve yapay zeka e-posta araçları asıl işi yapar.
En yaygın hayal kırıklığı, tek bir Google Haritalar aramasının yaklaşık 120 sonuçta takılıp kalmasıdır. İnsanlar bunu bir engel olarak görüyor. Oysa öyle değil. Bu bir arayüzdeki tasarım seçimi: Her birinde yaklaşık 20 madde bulunan birkaç sayfa ve sonra bitiyor.
Bu sınırı zorla aşmaya çalışmak, tam olarak suistimal önleme sistemlerini tetikleyen davranıştır. Daha akıllıca olan, çalışmaktır ile Eğer "Chicago'daki restoranlar" araması limiti aşıyorsa, bu sorgunuzun çok geniş kapsamlı olduğunun bir işaretidir, cezalandırıldığınız anlamına gelmez. Aramayı mahalleye, mutfağa veya posta koduna göre daraltın; her daraltılmış arama limitin altında sonuç verirken, birlikte tüm şehri kapsarlar.
Bu konuyla ilgili ayrıntılı bir açıklama yazısı hazırladık, isterseniz inceleyebilirsiniz: Google'ın sonuçları neden 120 ile sınırladığı. Özetle, CAPTCHA daha kesin olmaya yönelik bir uyarıdır ve kesin aramalar, CAPTCHA'yı tetikleme olasılığı en düşük olan aramalardır.
120
Arama başına yaklaşık sonuçlar, yasaklama yerine ürün sınırlaması
1
İşlem, bir sunucu çiftliği değil, insan hızında, tarayıcı oturumu tarafından gerçekleştiriliyor
0
Ücretsiz Vonsel eklentisini kullanmaya başlamak için kredi kartı gereklidir
CAPTCHA'lar ve hız sınırlamaları
Savunma mekanizmalarını tetikleyen şey aslında nedir
CAPTCHA'lar ve geçici bloklar, kalıpları algılayan sistemlerdir. Bunlar belirli durumlara tepki verir hacim, hız ve öngörülebilirlik. Veri merkezlerinden dönen bir IP havuzundan dakikada yüzlerce özdeş isteği aralıksız gönderen bir komut dosyasını işaretlemek kolaydır. Ancak kendi tarayıcısında haritada gezinmekte olan bir kişi işaretlenemez.
Tarayıcı tabanlı veri yakalamanın sunucu tarafı veri kazımadan bu kadar farklı davranmasının temel nedeni budur. İstekler şuradan geldiğinde kendi oturum açmış Chrome oturumunuz, Doğal olarak kullandığınız hızda gezinirken, kötüye kullanım önleme katmanının itiraz edeceği çok daha az şey vardır. İşlevsel olarak, Google Haritalar'ı beklendiği şekilde kullanıyor ve sadece gördüğünüz şeylerin bir kopyasını saklıyorsunuz.
Geniş kapsamlı sorguları, alan veya kategoriye göre küçük aramalara ayırın. Her biri üst sınır içinde kalır ve normal internet gezintisi gibi görünür.
İnsani bir tempoda ilerleyin
Doğal kaydırma ve işlemler arasındaki makul boşluklar, otomatik isteklerin ani bir şekilde artmasından çok farklı bir izlenim bırakır.
Kapağı zorla açmaya çalışmayın
120 sonuç sınırını aşmak, otomatik arama sisteminin kötüye kullanımının en açık işaretidir. Bu, daha fazla veri değil, CAPTCHA'lara davetiye çıkarır.
Anonim IP çiftliklerinden kaçının
Veri merkezleri ve proxy havuzları, tam olarak hız kısıtlamasının aradığı şeylerdir. Kendi oturumunuz ise en az şüpheli kaynaktır.
Yasaklar ve şartlar
Gerçekten yasaklanabilir misiniz?
Yasak" kelimesinin içinde iki ayrı fikir gizlidir. Bunlardan biri şudur geçici teknik blok: Kendiliğinden temizlenen bir CAPTCHA döngüsü veya bekleme süresi. Diğeri ise bir hizmet şartları sorusu: Google'ın anlaşmaları kapsamında izin verdiği şeyler. Farklı bir muameleyi hak ediyorlar.
Google'ın haritalama ürünleri şu kurallara tabidir Google Haritalar Platformu Hizmet Şartları, Resmi API yolu kendi kullanım kurallarına ve fiyatlandırmasına sahiptir. Durumunuza uygun şartları okumak isteğe bağlı bir ödev değil, kullanım durumunuz için neyin uygun olduğuna karar vermenizi sağlayan bir yöntemdir. Bu makale eğitim amaçlıdır, yasal tavsiye niteliğinde değildir ve büyük ölçekte faaliyet gösteriyorsanız, pozisyonunuzu bir profesyonelle teyit etmelisiniz.
Açık olan şu ki, risk profili büyük ölçüde şunlardan etkileniyor davranış. Sessiz, düşük hacimli kamuya açık işletme listelerinin toplanması, kendi potansiyel müşteri listenizi oluşturmak için kullanılır ve spektrumun sakin ucunda yer alır. Tespit edilmekten kaçınmak için tasarlanmış yüksek hacimli otomatik veri çıkarma ise diğer ucunda yer alır. Bu konuda yardımcı ürünlerimiz, Google Haritalardan veri çekmek yasaklanmanıza neden olabilir mi Ve Google Haritalardan veri kazımak yasal mı, Ayrıntılara inmek.
Engellenmeyi önlemenin en güvenli yolu, engellenmeyi hak edecek şekilde davranmamaktır. Makul miktarda kamuya açık iş verisini, insani bir tempoda, savunabileceğiniz net bir amaç için toplayın. Davranış kötüye kullanım gibi görünmeyi bıraktığında çoğu "engelleme" sorunu ortadan kalkar.
Veri toplama işlemini tarayıcıya bırakın
Sunucu çiftliğinin sınırlarını zorlaması yerine, Vonsel uzantısı haritada zaten gördüğünüz verileri yakalar ve puanlama, rota belirleme ve yapay zeka etkileşimi için doğrudan kontrol panelinize aktarır.
Ücretsiz kurulum. Deneme sürümü yok ve kredi kartı gerekmiyor.
Veri koruma
GDPR'nin yeri nerede
Veri koruma, çoğu insanın atladığı ve işletmelerle iletişime geçmeye başladığınızda en çok önem kazanan kısımdır. Temel ayrım şudur iş verileri ile kişisel veriler arasındaki fark. Şirket adı, sokak adresi ve santral numarası işletme bilgileridir. Sahibinin kişisel adı veya kişisel e-posta adresi ise yine de işletme bilgisi olarak kalabilir kişisel veriler Kurallar gereği.
Altında Genel Veri Koruma Yönetmeliği, Verilerin kamuya açık olması, size bunları herhangi bir amaçla saklama ve kullanma hakkı otomatik olarak vermez. Mantıklı bir yaklaşım, yalnızca yasal kullanım dayanağınız olan verileri toplamak (B2B müşteri bulma çalışmalarında meşru menfaat yaygındır), verilerin doğruluğunu korumak, asla kullanmayacağınız alanları biriktirmemek ve silme taleplerini derhal yerine getirmektir.
Burası aynı zamanda son İş akışının önemi, iş akışının öneminden daha fazladır araç. Bu uzantı yalnızca veri toplama adımıdır. Vonsel kontrol panelinde şunlarla çalışıyorsunuz yapılandırılmış, bağlamlandırılmış veritabanı Dağınık bir elektronik tablo yerine, kayıtları güncel tutmayı, amaca göre bölümlendirmeyi ve istendiğinde bir kişiyi sorunsuz bir şekilde silmeyi çok daha kolay hale getiren bir sistem kullanılır. Tam uyumluluk açısı için okuyun Google Haritalardan veri çekme ve GDPR..
Yan yana
Aynı veriyi toplamanın iki yolu
Aşağıdaki tablo, tek başına ele alındığında kimin daha hızlı olduğuyla ilgili değil. Hangi yaklaşımın daha yüksek olasılıkla başarılı olacağıyla ilgili bloklara çarpmak ve hangisini korumak daha kolay savunulabilir..
Kaygı
Agresif sunucu kazıma
Tarayıcı tabanlı yakalama
Google için otomatikleştirilmiş görünüyor
Yüksek
Düşük
Kendi oturumunuz içinde çalışır
HAYIR
Evet
120 sonuç sınırına saygı duyar
Genellikle hayır
Evet
Anonim IP havuzlarını kullanır
Yaygın
HAYIR
Verileri güncel tutmak ve silmek kolay
Bağlı olmak
Evet
Kullanılabilir bir CRM ile sonuçlanır
HAYIR
Vonsel kontrol paneli
Desen tutarlı. Trafik ne kadar sakin olursa, o kadar az savunma mekanizmasını tetikler. Engellemelerden kaçınmanın tüm stratejisi de budur: en başından beri hedef olmayan türden bir trafik olun.
Takım açısı
Neden araçlar ve amaçlar farklı şeylerdir
Model hakkında açık olmakta fayda var, çünkü yukarıdaki engelleme önleme tavsiyelerinin çoğunu açıklıyor. Uzantı bir Chrome uzantısı genel anlamda, standart üzerine inşa edilmiş Chrome uzantı platformu, Tarayıcınızda çalışan ve zaten açık olan sayfada işlem yapan şey budur araç..
O son Vonsel kontrol paneli işte burada devreye giriyor. Burada yakalanan işletmeler haritalandırılmış bir CRM'ye dönüşüyor, Satışlar, Yorumlar ve E-posta Zekası her kaydı puanlandırıp zenginleştiriyor ve yapay zeka gerçek bağlama dayalı olarak her işletme için özel bir e-posta yazıyor. Daha önce kaydettiğiniz bir veriyi yeniden açabilir, daha fazlasını ekleyebilir, zaten kaydettiğiniz işletmelere yorumlar ekleyebilir ve tümünü ham bir veri yığını yerine katma değerli bir veritabanı olarak düzenli tutabilirsiniz. Veri toplama işleminin pratik adım adım anlatımını istiyorsanız, bizim Chrome uzantıları kılavuzu Adım adım açıklıyor.
Bu şekilde bakıldığında, engellemelerden kaçınmak bir kedi-fare oyunu olmaktan çıkıyor. Daha fazla IP adresi ve daha yüksek hızla Google'ın sınırlarını aşmaya çalışmıyorsunuz. Mütevazı bir şekilde veri topluyor ve çabanızı daha sonra bu verilerle ne yapacağınıza odaklıyorsunuz.
Daha hızlı giderek sınırları aşamazsınız. İstismarcı gibi görünmeyerek onlardan kaçınırsınız
Google Haritalar neden sadece yaklaşık 120 sonuç gösteriyor?
Google Haritalar, tek bir aramada yaklaşık 120 sonuçla (birkaç sayfada sayfa başına yaklaşık 20 sonuç) sınırlama getiriyor. Bu, arayüze entegre edilmiş bir ürün sınırlamasıdır, bir hata değildir. Pratik çözüm, bu sınırı aşmaya çalışmak değil, geniş bir sorguyu mahalle, kategori veya posta kodu gibi daha dar aramalara bölmektir; böylece her arama, sınırın çok altında sonuç döndürür.
Google Haritalar'dan veri çekerken CAPTCHA'ları ve engellemeleri tetikleyen nedir?
Engellemeler ve CAPTCHA'lar genellikle trafik otomatikleştirilmiş gibi göründüğünde ortaya çıkar: çok fazla ve çok hızlı istek, duraklama olmaması, tekrarlanan aynı desenler veya veri merkezi IP adresleri. Kendi oturumunuz içinde, doğal kaydırma ve makul aralıklarla insan hızında çalışan tarayıcı tabanlı yakalama, agresif sunucu tarafı veri toplama işleminden çok daha az bot gibi görünür.
Google Haritalar'dan işletme verisi toplamak GDPR kapsamında yasal mı?
İşletme adları, adresleri ve kamuya açık telefon numaraları işletme verileridir, ancak kişisel bir e-posta veya işletme sahibinin adı GDPR kapsamında yine de kişisel veri olarak kabul edilebilir. En güvenli yaklaşım, yalnızca yasal olarak kullanma hakkınız olan verileri toplamak, bunları doğru ve güncel tutmak, meşru menfaatinizi belgelemek ve silme taleplerine uymaktır. Kendi yükümlülüklerinizi her zaman resmi GDPR metniyle teyit edin.