スクレイピングとPlaces APIの比較 何 用語は実際に言う

同じデータへの2つの扉

Google マップからビジネスデータを取得することについて話すとき、人々は通常 2 つの方法から選択しています。1 つは公式 場所API, 1つ目は、キーと請求アカウントを指定して呼び出す、ドキュメント化されたウェブサービスです。もう1つはスクレイピングで、訪問者のブラウザが行うのと同じように、公開されている地図ページを読み取る方法です。.

両者が似ているように見えるのは、基となるデータが重複しているためです。違いは、運用している契約内容、コストモデル、そしてそれぞれが実際に達成できる上限額です。これら3つの要素を理解することで、一方が「許可されている」が他方は「許可されていない」といった漠然とした主張よりも、はるかに明確な選択が可能になります。.

この記事は教育的かつバランスの取れた内容です。法的助言ではありませんし、用語は変更される可能性があるため、リンク先の文書を真実の情報源として扱ってください。法的問題自体についてより詳しく知りたい場合は、概要をご覧ください。 Googleマップのデータをスクレイピングすることは合法です.。.

Places APIがあなたに求めるもの

Places API は、 Google マップ プラットフォーム利用規約. 簡単に言うと、構造化された信頼性の高いアクセスと引き換えに、一連のルールに同意するということです。新規ユーザーを驚かせるルールが2つあります。.

まず、データは一般的に、 Google マップとライブ環境で, 抽出して保存してスタンドアロンのデータベースを構築することはできません。第二に、キャッシュには制限があります。ほとんどのフィールドは、定義された短い期間を超えて保持することはできず、識別子には独自の処理ルールが適用されます。永続的なローカルビジネスデータベースを構築することが目的であれば、公式の条件は多くの人が想像するよりも厳しいものとなります。.

APIも従量課金制です。エンドポイントを呼び出すたびにリクエストごとに課金され、リクエスト量が増えるにつれて課金が継続されます。実際の製品機能を開発している開発者にとっては、この仕組みは多くの場合、メリットとなります。しかし、単に都市内の企業リストが必要な営業担当者にとっては、必要のない配管工事にお金を払っているように感じられるかもしれません。.

削ることで何が変わるのか、何が変わらないのか

ブラウザスクレイピングはAPI契約には一切影響を与えません。人間がマップを開いて検索したときに表示されるのと同じ公開リストを読み取ります。キーもリクエストごとの請求も、個別の請求アカウントもありません。代わりに、Googleの一般的なポリシーが適用されます。 利用規約, これは、それとは異なる、より広範な文書です。.

スクレイピングでは、実務上の障壁を取り除くことはできません。公開ページは人間向けに作られているため、自動化されたシステムによる大量アクセスは、あらゆるサイトが採用している防御策を誘発する可能性があります。: CAPTCHAとレート制限. 消防ホースのように振る舞うツールは、消防ホースのように扱われる。注意深く閲覧する人のように振る舞うツールは、めったに扱われない。.

データ自体は主にビジネス情報です。名前、住所、電話番号、カテゴリ、営業時間などです。これは個人データとは異なる機密レベルですが、レビューやレビューを書く人はその境界線に近いところにあります。GDPRが気になる場合は、当社のメモをご覧ください。 GoogleマップのスクレイピングとGDPR ビジネスデータと個人データがどこで乖離するのかを解き明かす。.

スクレイピングとPlaces APIの比較概要

純粋に経済的な観点から両者を比較すると、 Google Places APIのコストとスクレイピングの比較 数字をより詳細に分析する。.

120件の結果制限は両方に適用される

APIがブラウザ以上の情報を見ていると考える人にとって意外な点が一つあります。それは、公開されているマップインターフェースでは、実際に一致するビジネスの数に関わらず、1回の検索結果が約120件に制限されていることです。これは閲覧体験に関する製品設計上の決定であり、これらのページを閲覧するすべての人（個人またはツール）に適用されます。.

解決策は、より大きな検索範囲を設定することではなく、より絞り込んだクエリを実行することです。都市を地域に分割し、広範なカテゴリを具体的なカテゴリに分割し、いずれにせよ手動で行う検索を実行します。 Googleが検索結果を120件に制限する理由 仕組みと回避策について説明します。.

拡張機能は手段であり、ダッシュボードは目的である。

Vonselは意図的にブラウザ方式を採用している。 Chrome拡張機能 既にご覧になっている地図情報と同じものが表示されるため、プロビジョニングキーも、開設する請求アカウントも不要です。インストールは無料で、試用期間もクレジットカードも必要ありません。これがその方法です。.

最後はキャプチャ後に何が起こるかです。生のCSVの代わりに、企業は マッピングされたCRM 後から取得したビジネス情報にレビューを追加したり、以前に収集した情報を再度読み込んで充実させたり、ウェブサイトから連絡先情報を追加したりできます。セールス、レビュー、メールインテリジェンス機能により、掲載情報は付加価値の高いデータベースへと変換され、各ビジネスの実際の状況に合わせてAIがメールを作成します。.

つまり、用語の問題は「スクレイピングかAPIか」というよりも、「生データか利用可能なパイプラインか」という点に集約されます。ライブ製品機能が必要な場合は、公式APIが最適な選択肢です。今日すぐにアクションを起こせるリード情報が必要な場合は、ブラウザ経由の方法を慎重に行えば、費用をかけずに目的を達成できます。.