フォンセルはいかにして限界を回避するのか
120件の結果上限、レート制限、 それらを乗り越える方法
Googleマップは、自社の検索結果のほとんどを非表示にし、過度にアクセスを要求してくるツールをブロックします。ここでは、なぜそのような制限が存在するのか、そして無料の拡張機能Vonselがサーバーファームを使わずにどのようにこれらの制限を回避するのかを説明します。.
拡大
・
・
8分で読める
本当の問題は
Googleマップは意図的に制限を設けている
地元の探鉱者に一番の不満は何かと尋ねれば、皆同じことを言うだろう。Googleマップは数ページ表示しただけで、それ以上は何も表示されない。いくらスクロールしても、リストはそこで終わってしまう。レストランが2000軒もある都市でも、せいぜい120軒しか表示されないのだ。.
これは意図的なものです。消費者マップは、夕食の場所を選ぶ手助けをするために作られたもので、市場全体を提供するものではありません。公式でさえ Places API検索では、ページ分割された結果が少量ずつ返されます。, そして、インタラクティブマップは、単一のクエリで明らかにできる情報の上限を定めています。. そういった企業は確かに存在する。ただ、Googleがそれらをすべて一度に表示しないだけだ。.
つまり、制限の本質はデータの可用性にあるのではなく、単一のクエリの提示方法にあるのです。この違いは重要です。なぜなら、それを克服する方法を正確に教えてくれるからです。つまり、漠然とした質問を一つするのをやめて、より具体的な質問をいくつも投げかけるようにすれば良いのです。.
キャップを打ち破る
検索を分割し、キャプチャを結合する
検索結果の上限である120件を回避する方法は、トリックではなく、明確な手法です。「シカゴのレストラン」という検索ではすぐに上限に達してしまいますが、「リンカーンパークのレストラン」、「ウィッカーパークのレストラン」、「ハイドパークのレストラン」といった検索では、それぞれ専用のページが表示され、それらを合わせるとシカゴ市内のより広い範囲を網羅できます。.
同じロジックはカテゴリにも適用されます。「請負業者」は広すぎるため、「配管工」、「電気技師」、「HVAC会社」、「屋根職人」を個別のキャプチャとして管理します。それぞれが上限を更新します。上限が存在する理由についてさらに詳しく知りたい場合は、次の説明をご覧ください。 Googleが検索結果を120件に制限する理由 仕組みについて解説します。.
ほとんどのツールの難点は、それらの実行を結合することです。3 つの CSV ファイルをエクスポートすると、スプレッドシートの重複行を削除することになります。Vonsel はこれを異なる方法で処理します。すべてのキャプチャは 1 つのファイルに格納されます。 歴史, そのため、午後を通して10個の絞り込んだ検索を実行しても、それらは10個の散在したダウンロードではなく、1つの増え続けるリストとして表示されます。.
120件という上限は表示上の制限であり、データを制限するものではありません。あらゆる細かな検索結果を1か所に集約するツールを使えば、「Googleで120件しか表示されなかった」という状況が、「12回の検索で街全体を網羅できた」という状況に変わります。."
レート制限とブロック
攻撃的なスクレーパーが締め付けられる理由
もう一つの制限は、ツールがブロックされる原因となるものです。多くのサーバーサイドスクレイパーは、データセンターからGoogleのエンドポイントに何千もの自動リクエストを送信することで動作します。そのパターンは簡単に見分けられます。同じIPアドレス、異常な速度、ブラウザを使用しないこと。その結果、レート制限、CAPTCHA、一時的なアクセス禁止措置が取られます。.
Vonselは逆の道を辿る。Chrome拡張機能として内部で動作する。 あなたの ブラウザは、既に閲覧しているページを読み上げます。別のサーバーも、IPアドレスのファームも、マシントラフィックの急増もありません。Chrome独自の 拡張モデルは、通常のブラウジングセッション内のリクエストを処理します。, つまり、キャプチャは実際のページ上で人間のペースで行われるということです。.
これが、この拡張機能が無料かつ試用期間もクレジットカードも不要である理由です。ブラウザが検索時に既に行っていた処理を実行するため、高額なプロキシインフラストラクチャに料金を支払う必要はありません。2つのアーキテクチャのより詳細な比較については、以下を参照してください。 Chrome拡張機能とAPIスクレイピングの比較.。.
2つのアーキテクチャ
サーバースクレイパーとブラウザ拡張機能の比較
| 行動 | フォンセル拡張 | サーバースクレイパー |
| 走る場所 | Chromeタブ | リモートデータセンター |
| 交通パターン | 人間のペース、実際のページ | バースト要求、1つのIP |
| 120の上限を上回る | 絞り込み検索 + 履歴の統合 | ハンマーで端点を叩く |
| スロットリングのリスク | 低い | 高い |
| 過去のキャプチャを再度開いて編集する | はい | いいえ |
| 後でキャプチャしたビジネスにレビューを追加する | はい | いいえ |
| 設置費用 | 無料、カード不要 | 成果に応じて報酬が支払われます |
価格欄を見れば一目瞭然です。結果ごとに課金するツールは、高額なインフラストラクチャを運用する必要があります。自分のセッションを利用するブラウザ拡張機能はそうではないため、 Vonselツールセット全体 キャプチャ段階では無料のままです。.
ほとんどのスクレーパーができないことは
保存する価値のある写真の特徴
限界を超えることは、価値の半分に過ぎません。2,000社の企業データが入った生のCSVファイルは市場ではなく、単なる作業です。Vonselが一般的なスクレイパーと異なる点は、何が起こるかです。 後 キャプチャ作業は、ほとんどの場合、ワンショットのエクスポートツールでは不可能です。.
過去のスクレイピングを再度開き編集する
先週検索を実行したが、さらに追加したい場合は、履歴から検索履歴を開き、同じリストにキャプチャを続けてください。一般的なスクレイパーでは、拡張できない静的なファイルが生成されます。.
キャプチャしたビジネスにレビューを追加する
既にリストをお持ちですか?それらの企業にレビューを重ね合わせることで、市場の課題を把握できます。詳しくは以下をご覧ください。 取得したビジネスにレビューを追加する.。.
散在するファイルではなく、成長し続ける歴史。
すべてのキャプチャデータは一箇所に保存され、検索可能です。export-final-v3という名前のCSVファイルが詰まったフォルダは存在しません。担当地域全体が単一のビューで管理されます。.
ウェブサイトの充実化
Vonselは各ビジネスサイトをひっそりと訪問し、地図には表示されないメールアドレス、電話番号、ソーシャルメディアのプロフィール情報を収集することで、掲載情報を連絡可能な見込み客へと変える。.
この状況がどこに向かっているのか、より詳しく知りたい場合は、以下をお読みください。 Vonselが単なるスクレイパーではない理由. 簡単に言うと、この拡張機能が情報を収集し、ダッシュボードが収集した情報を販売可能な商品に変換するという仕組みです。.
手段と目的
キャプチャからマッピングされたCRMまで
ここで「制限」に関する議論全体を再構築する部分があります。上限やブロックを回避することは価値がありますが、それはデータが次にどこに行くかという理由からです。Vonselダッシュボード内では、キャプチャしたすべてのビジネスが マッピングされたCRM: 担当地域を確認し、エリアごとのリード状況を追跡し、実際の販売ルートを計画できます。.
その上にインテリジェンス層があります。レビュー分析によって顧客が何に不満を持っているかが明らかになり、データベースは名前と電話番号の羅列ではなくなり、提案の出発点となる文脈化された問題点のセットになります。そこから、Vonselは 各企業に合わせたAIメール, メールマージによる一斉送信ではありません。.
それが、スクレイピングされたリストと付加価値のあるデータベースの違いです。生のエクスポートとエンリッチされたエクスポートを比較したい場合は、次の記事をご覧ください。 Googleマップのデータと購入したリストの比較 それを説明している。そして、これをスケールアップする前に、読んでみる価値があるかどうか Googleマップのスクレイピングは合法です.。.
120件以上の結果を出すことが手段だ。. 販売に使えるマッピングされたCRMが最終目標です