Açık Kaynaklı Google Harita Veri KazıyıcılarıDürüst bir değerlendirme ve yapamadıkları şey
Ücretsiz GitHub depoları, kod yazmaya, proxy'leri yönetmeye ve ayrıştırıcıyı yamalamaya istekliyseniz, işletme listelerini çekebilir. İşte dürüst bir özet ve aynı verilere kodsuz erişim yolu.
Karşılaştırmak··7 dakikalık okuma süresi
Önemli noktalar
Açık kaynak veri kazıyıcılar Geliştiriciler için gerçekten güçlü araçlardır ve kodu indirmek hiçbir maliyet gerektirmez
Gerçek maliyet şudur zamanınız: Çalışma zamanları, bağımlılıklar, proxy'ler, hız sınırlamaları ve Google'ın düzenini değiştirdiğinde bozulan bir ayrıştırıcı
O Vonsel Chrome uzantısı Bu, sıfır kurulumla aynı verilere ulaşmanın yoludur ve arkasındaki eşleştirilmiş CRM, potansiyel müşterilerin gerçek anlamda satış hattına dönüştüğü yerdir
Başlangıç noktamız
Açık kaynaklı veri kazıyıcı"nın gerçekte ne anlama geldiği
GitHub'da "Google Maps scraper" araması yaparsanız, Go, Python ve Node dillerinde onlarca aktif proje bulacaksınız google-maps-scraper konusu Yalnızca yüzlerce depoyu listeliyor ve bunların en güçlüleri etkileyici mühendislik örnekleri. Okuması, kopyalaması ve çalıştırması ücretsiz.
Açık kaynak kod, kaynak kodunun herkese açık ve yeniden kullanım için lisanslı olması anlamına gelir; bu tanım gereği böyledir Açık Kaynak Girişimi. Bu, zahmetsiz olduğu anlamına gelmez. Birilerinin yine de onu kurması, çalıştırması ve çalışır durumda tutması gerekir. Ücretsiz kod ve ücretsiz sonuç aynı şey değildir.
Bu inceleme her iki tarafı da dürüstçe ele alıyor. Yazılım geliştiriyorsanız, açık kaynaklı bir veri çekme aracı tam size göre olabilir. Yerel işletmelere satış yapıyorsanız ve sadece verilere ihtiyacınız varsa, bakım gerektirmeyen daha hızlı bir yol da mevcut. Her ikisini de ele alıyoruz ve daha geniş kapsamlı değerlendirmemizi de okuyabilirsiniz Google Haritalardan veri çekmenin ne olduğu Arka plan bilgisi için.
Depo olmadan verilere mi ihtiyacınız var?
Vonsel eklentisi, Google Haritalar'dan doğrudan tarayıcınızdaki listeleri yakalar. Ücretsiz indirme. Deneme sürümü yok, kredi kartı gerekmiyor.
Sorgu başına sonuç sayısı, Google Haritalar'ın herhangi bir arama için döndürdüğü pratik maksimum sonuç sayısı
3
Veri kazıma işleminden sonra hala ihtiyaç duyacağınız ek araçlar: temizlik, CRM, iletişim
0
Vonsel eklentisini tarayıcınızda çalıştırmak için gereken kod satırları
Güçlü yönler
Açık kaynaklı veri kazıyıcıların iyi yaptığı şeyler
Hak edene hakkını verelim. Popüler Go tabanlı olanlar gibi iyi bakımı yapılmış depolar gosom/google-maps-scraper Toplu anahtar kelime çalıştırmalarını, eşzamanlılığı ve temiz CSV çıktısını yönetmek. Bir mühendis için bu sağlam bir temeldir.
Şeffaftırlar. Kodun tam olarak ne yaptığını okuyabilir, denetleyebilir ve değiştirebilirsiniz. Tedarikçi bağımlılığı veya araç için aylık fatura yoktur. Özel bir alan istiyorsanız, onu eklersiniz. Sonuçları kendi veritabanınıza aktarmak istiyorsanız, bağlantı kodunu yazarsınız.
Doğru yöntemi bildiğinizde yatay olarak da ölçeklenebilirler. Bir sunucuda çalıştırın, proxy rotasyonu ekleyin, cron işlerini zamanlayın ve uçtan uca sizin kontrolünüzde olan bir veri hattına sahip olun. Geliştiricisi ve gerçek bir altyapı bütçesi olan ekipler için bu kontrol çok değerlidir.
dürüst maliyetler
README dosyasında bahsedilmeyen beş şey
Kurulum başlı başına bir projedir
Bir çalışma ortamı kurarsınız, bağımlılık sürümlerini çözümlersiniz ve bir kütüphane güncellemesi sorun çıkardığında yığın izlerini okursunuz. Tek bir işletmeyi taramadan önce bir öğleden sonranızı bu işlem alır ve her makinede tekrarlanır.
Ayrıştırıcılar sessizce bozulur
Google işaretleme dilini sık sık değiştirir. Değişiklik olduğunda, veri çekme aracı çalışmaya devam eder ancak boş veya yanlış alanlar döndürür. Çıktı hatalı göründüğünde ancak o zaman fark edersiniz ve o zaman da seçicilerde hata ayıklamaya başlarsınız.
Hız sınırlamaları ve engellemeler
Tek bir IP adresinden çok hızlı çalışırsanız, captcha'lara veya hız kısıtlamalarına takılırsınız. Bunu çözmek için proxy'ler, gecikmeler ve yeniden deneme mantığı gerekir; bu da zaman içinde yazılması, ödenmesi ve bakımı gereken daha fazla kod anlamına gelir.
CSV dosyası bir iş akışı değildir
Sonuç olarak elinizde satırlardan oluşan bir dosya kalıyor. CRM yok, harita yok, inceleme analizi yok ve e-posta taslağı oluşturma yok. Veri kazıma işleminden sonraki her şey yine başka bir araçta manuel olarak yapılıyor.
Kurallara uymak sizin sorumluluğunuzda
Açık kaynak kodlu yazılımlar, tüm politika sorularını size bırakır. Platform kurallarını kendiniz okuyun, çünkü depo bunu yapmayacaktır; bu nedenle, büyük ölçekte herhangi bir şey çalıştırmadan önce şartları anlayın.
Soracak kimse yok
Kampanya başlamadan önce gece 11'de bir sorun çıktığında, destek yalnızca sorun takip sistemine ve bakımcının aktif olmasına bağlıdır. Topluluk yardımı cömerttir ancak asla garanti edilmez.
Yan yana
Açık kaynak kodlu depo ile Vonsel uzantısı arasındaki fark
Önemli olan
Açık kaynak kodlu veri çekme programı
Vonsel uzantısı
Aletin maliyeti
Ücretsiz kod
Ücretsiz indirme
Kurulum gereklidir
Çalışma zamanı, bağımlılıklar, yapılandırma
Chrome'da yükle, işlem tamam
Kodlama gerekli
Evet
HAYIR
Blokları ve limitleri yönetir
Sen inşa edersin
Tarayıcınızda çalışır
Çıktı
CSV veya JSON dosyası
CRM haritalaması, ayrıca CSV, XLSX, JSON
Geçmişte kaydedilmiş bir görüntüyü yeniden açın ve düzenleyin
HAYIR
Evet
Kaydedilen işletmelere yorum ekle
HAYIR
Evet
Web sitesi zenginleştirme (e-posta, telefon, sosyal medya)
Soru, açık kaynaklı veri çekme araçlarının çalışıp çalışmadığı değil. Birçoğu çok iyi çalışıyor. Soru şu: işi kim yapıyor? Siz ve terminaliniz mi, yoksa aynı listeleri yakalayıp doğrudan satabileceğiniz bir yere bırakan bir uzantı mı.
Terminali atla, verileri sakla
Google Haritalar'ı açın, arama yapın ve tek tıklamayla listeleri yakalayın. Ücretsiz indirme. Deneme sürümü yok, kredi kartı gerekmiyor.
İşte her açık kaynaklı veri çekme aracının bilerek dışarıda bıraktığı şey: Bir depo size bir dosya verir. Sonra asıl iş başlar: listedeki tekrarları kaldırmak, e-postaları bulmak, kiminle iletişime geçileceğine karar vermek, mesajı yazmak ve kimin yanıt verdiğini takip etmek. Anlaşmaların kazanıldığı veya kaybedildiği yer burasıdır ve ham CSV dosyasının sizi terk ettiği nokta da tam olarak burasıdır.
Vonsel uzantısı, veri yakalama katmanı, yani araçtır. Arkasındaki kontrol paneli ise amaçtır. Yakaladığınız her işletme, bir kontrol paneline kaydedilir eşleştirilmiş CRM İşaretleyiciler gerçek bir harita üzerinde yer aldığından, bir bölgeyi elektronik tabloda kaydırmak yerine görebilirsiniz. Geçmişte kaydettiğiniz bir veriyi yeniden açabilir ve ona daha fazla işletme ekleyebilir veya daha önce kaydettiğiniz listelere yorumlar ekleyebilirsiniz.
Bundan sonra, zeka katmanları düşünme işini üstlenir. İncelemeler Zeka Müşterilerin şikayet ettikleri konuları okuyarak, her işletmeye gerçek sorunlarını göz önünde bulundurarak yaklaşırsınız. E-posta Zekası Bu bağlamdan hareketle, her işletme için özel olarak hazırlanmış bir mesaj taslağı oluşturulur; genel bir toplu mesaj gönderilmez. Sonuç olarak katma değerli veritabanı, Bu, satın aldığınız veya kazıdığınız ve hâlâ doğru olduğunu umduğunuz ham bir veri seti değil.
Açık kaynaklı bir depo size bir dosyada satırlar sunar. Haritalandırılmış bir CRM, size üzerinde çalışabileceğiniz bir satış hattı sunar
Kim neyi kullanmalı
Size uygun aracı seçin
Aşağıdaki durumlarda açık kaynaklı bir veri çekme aracı seçin: Siz bir geliştiricisiniz, özel bir işlem hattının tam kontrolünü istiyorsunuz, kod çalıştırma ve proxy'leri yönetme konusunda rahatsınız ve halihazırda sadece veri akışına ihtiyaç duyan bir CRM ve iletişim altyapınız var.
Aşağıdaki durumlarda Vonsel uzantısını seçin: Hiçbir şey yazmadan veya çalıştırmadan aynı Google Haritalar verilerine sahip olmak ve bu verilerin üzerinde işlem yapabileceğiniz bir yere ulaşmasını istiyorsunuz. Yorumları yakalayın, zenginleştirin, analiz edin ve e-posta taslakları hazırlayın, hepsi tek bir yerde. Barındırılan araçlara doğrudan göz atmak için, bunu bizimkiyle karşılaştırın Vonsel ve Apify karşılaştırması arıza veya daha geniş Vonsel ve Google Maps veri çekme araçları karşılaştırması karşılaştırmak.
Her iki yol da işletme verilerine ulaşır. Ancak bunlardan sadece biri, sonradan ek bir araç yığını eklenmeden satışa da ulaşır.
Kurulum aşamasını atlamaya hazır mısınız?
Google Haritalar üzerinden elde ettiğiniz potansiyel müşteri verilerini, veri deposuna dokunmadan haritalı bir CRM sistemine aktarın. Ücretsiz indirme. Deneme sürümü yok, kredi kartı gerekmiyor. Daha fazla bilgi için keşfedin tam özellik seti veya daha fazlasına göz atın karşılaştırmalar..
Açık kaynaklı Google Haritalar veri çekme programları gerçekten ücretsiz mi?
Kod ücretsiz, ancak çalıştırmak zahmetsiz değil. Bir çalışma ortamı kurmanız, bağımlılıkları yönetmeniz, proxy'leri ve hız sınırlamalarını ele almanız ve Google düzenini her değiştirdiğinde ayrıştırıcıyı düzeltmeniz gerekiyor. Vonsel Chrome uzantısı ise kurulum yükü, deneme süresi ve kredi kartı gerektirmeyen ücretsiz bir indirme seçeneğidir.
En iyi açık kaynaklı Google Haritalar veri çekme programı hangisidir?
GitHub'daki popüler depolar Go, Python ve Node ekosistemlerini kapsıyor ve en güçlü olanlar toplu anahtar kelime aramalarını iyi bir şekilde ele alıyor. Doğru seçim, kullandığınız dile ve bakım konusunda rahatlığınıza bağlıdır. Eğer hiç kod çalıştırmak istemiyorsanız, aynı iş verilerine ulaşmanın daha basit bir yolu tarayıcı uzantısı kullanmaktır.
Açık kaynaklı bir veri çekme aracını kullanmak için kodlama becerisine ihtiyacım var mı?
Evet. Çoğu açık kaynaklı veri çekme aracı, bir dil çalışma ortamı kurabileceğinizi, yapılandırma dosyalarını düzenleyebileceğinizi ve bir şeyler bozulduğunda günlükleri okuyabileceğinizi varsayar. Kod yazmadan veya çalıştırmadan aynı Google Haritalar verilerine sahip olmak istiyorsanız, Vonsel uzantısı listeleri doğrudan tarayıcınızda yakalar ve haritalanmış bir CRM'ye gönderir.
Chrome Uzantısı Ekle