Google Search API

はい。Crawloraは対応する公開Google検索結果ページ向けのGoogle Searchエンドポイントを提供し、ドキュメント化されたAPIルート経由で正規化JSONを返します。

はい。各レスポンスにはオーガニック結果の順位、タイトル、URL、スニペットが含まれるため、時間経過でキーワード順位を記録し、SERPの変化を検知できます。定期的なスナップショットをSERPモニタリングのユースケースと組み合わせれば、Googleの順位トラッカーを構築できます。

カタログの例には、順位、タイトル、URL、説明、ドメイン、ページネーションメタデータを含むオーガニック結果、Googleが提供する場合の関連検索キーワードが含まれます。

対応しています。Google Searchエンドポイントはkeyword、country、language、limit、pageを受け付けます。

Crawloraは利用不能な上流レスポンスを検知し、壊れたHTMLを黙って返す代わりにドキュメント化されたエラーを返します。エラー処理、リトライ、上流の可用性変化への対応は、各自の統合側で行ってください。

いいえ。CrawloraはGoogleの公式Custom Search APIやProgrammable Search APIではありません。Crawloraは、対応する公開Google検索結果ページ向けの構造化Web公開データ抽出エンドポイントを提供します。Google公式の認可を受けた検索APIが必要なユースケースには、Google公式APIをご利用ください。

keyword、country、language、limit、pageを指定してCrawloraの/google/searchエンドポイントにPOSTリクエストを送るだけです。レスポンスはその結果ページのJSON版で、position・title・link・ドメイン・スニペットを含むオーガニック結果、関連検索キーワード、ページネーションメタデータが含まれます。自前のプロキシ、ブラウザ、パーサーは不要です。

はい。各オーガニック結果のpositionは、リクエスト時点でそのキーワード・国・言語・ページに対してGoogleが示す実際の順位です。関連度で並べ替えたリストではなく文字どおりのSERPであるため、順位トラッキングやシェア・オブ・ボイス分析に適しています。

リクエストは複数のプロキシ経由ブラウザレンダリングを並行して競わせ、最初に得られたクリーンな結果を返します。古いキャッシュへのフォールバックも備えています。クリーンな結果が得られない場合、Crawloraは確認ページを結果として偽装する代わりにドキュメント化されたエラーコードを返し、その呼び出しは成功として課金されません。

はい。Crawloraの/google/news、/google/videos、/google/suggestエンドポイントはq、country、langを受け付けるGETリクエストで、/google/jobsはPOSTリクエストです。これらはウェブ検索と同じAPIキーとクレジットプールを共有します。

リサーチやモニタリング目的で公開されている検索結果ページを収集することは、Googleの利用規約、レート制限、適用法を遵守する限り一般的に許容されます。検索結果自体は公開されています。データは責任を持って利用し、大規模なスクレイピングの前に基本的な法的留意点を確認してください。