WEBサイトのクロール・インデックスを効率的におこないたい方へ

クロール最適化代行

Googleのクロール効率を高めることで、早期インデックスが可能になります。
大規模サイトのクロール・インデックスを制御して重要なページを効率よく検索結果に表示させるための施策です。

基本内部対策代行

REASON

クロール最適化が必要な理由

検索エンジンによるクロールを最適
化する事は

SEO対策において重要な項目です。

Googlebotによるクロールを最適化することで
「ページの早期インデックス」と
「インデックス未登録URLのインデックス」を
おこなえます。

WHITE Linkのクロール最適化代行で出来ること WHITE Linkのクロール最適化の項目

URL discovery

01

URLの発見

検索エンジンに早期にサイト内の新しいページを発見してもらうためには、XMLサイトマップの送信と
URL検査によるインデックス登録リクエストをおこないます。

URLの発見

XMLサイトマップ

インデックスの促進

XMLサイトマップはWEBページの一覧を提供し、検索エンジンがWEBサイト全体を効率的にクロール・インデックスするための手助けをします。

インデックスの促進

新しいページの通知

XMLサイトマップを送信することで、検索エンジンに新しいページを素早く通知し、早期にインデックス化される可能性を高めます。

新しいページの通知

クロールの効率化

XMLサイトマップはWEBページの階層構造を示し、検索エンジンのクローラーが効率的にWEBサイトをクロールできるようにします。

クロールの効率化

URL検査

URL検査の「インデックス登録リクエスト」とはGoogleサーチコンソールの機能のひとつで、検索エンジンに対して新しいWEBページやインデックス未登録のぺージをインデックスに登録してもらうための手続きです。
これにより、検索エンジンがそのページを認識し、クローラーの巡回によるURLの発見を待たずにインデックスに登録して検索結果に表示させられます。
URLの新規追加や重要な変更があった場合、インデックス登録リクエストを送信することで早期に反映させられます。

URL検査

Crowl

02

クローラーの制御

Googlebotのクロールを制御することで、
不要なWEBぺージへのクロールを防ぎます。

クローラーの制御

robots.txtの設定

クロール制御

特定のWEBページやディレクトリを検索エンジンのクロール対象から除外できます。これにより、重複コンテンツや非公開ページのクロールを制御し、検索エンジンが効率的に重要なコンテンツをクロールできます。

クロール制御

リソースの節約

不要なWEBページやファイルをクロールしないよう指示できます。これにより、サーバーリソースの節約やトラフィックの削減が可能になります。

リソースの節約

404.410ページへの対応

404エラーページへの対応

404エラーはページが見つからないことを示すエラーです。適切な404エラーページを作成し、ユーザーにわかりやすいメッセージやナビゲーションを提供します。また、関連するコンテンツや類似ページへのリンクを表示することで、ユーザーがサイト内で目的の情報にたどり着けるようにします。

410エラーページへの対応

410エラーはページが恒久的に削除されたことを示すエラーです。適切な410エラーページを作成し、ユーザーにページが存在しないことを明示的に伝えます。また、関連するコンテンツや代替のリソースへのリンクを提供することで、ユーザーに有用な情報を提供します。

URL optimization

04

URLの最適化

URLの最適化をおこなうことで、
重複コンテンツを防ぎ
クロール効率を高めます。

URLの最適化

URL正規化

重複コンテンツの排除

重複コンテンツが意図的に作成されていると、検索エンジンはそれをスパムと判断する可能性があります。URLの正規化により、同じコンテンツが複数のURLで表示される問題を解決できます。

重複コンテンツの排除

URL評価を統一

クローラーはURLごとにWEBページを評価します。そのため、内容が同じページの場合でもURLが異なっている場合は別々のページと判断されページの評価が分散します。URLを統一することで、評価(PageRank)を1つのURLに集められます。

URL評価を統一

クロール効率の向上

URLがシンプルで一意になるため、クローラーがWEBサイト内を効率的にクロールできるようになります。クロール効率が高まることでより多くのページへクローラーが巡回するようになります。

クロール効率の向上

canonicalタグ

URLパラメータ

URLパラメータによって同じコンテンツが異なるURLで生成されると、検索エンジンから重複コンテンツとみなされることがあります。canonicalタグを設定することでク正規URLを指定し、重複コンテンツになるのを防ぎます。

URLパラメータ

PC・スマホでURLが異なる

PCサイトとスマホサイトで異なるURLを利用しているケースでは、コンテンツの内容が同じで異なるURLが存在するため重複ページの対象となります。これを防ぐためにcanonicalタグを利用しURLを正規化します。

PC・スマホでURLが異なる

301リダイレクト

URLの統一

301リダイレクトは、古いURLから新しいURLへのリダイレクトをおこないます。これにより、WEBサイト内のリンクが統一されます。URLの統一は、クローラーが重要なページに効果的に到達し、WEBサイト全体をより完全にクロールするために重要です。

評価の継承

301リダイレクトによりページの評価が継承され、クローラーがリダイレクト先のページを適切に評価できます。

クローラーに対して類似ページABCの中で正規ページを指定
類似ページの統合を行いユーザー、クローラーに対して正規ページを表示

クロール最適化を行うメリット

  • checkbox 検索結果でより上位に表示される可能性が高くなる
  • checkbox 重複コンテンツの発見、削除ができる
  • checkbox 新規コンテンツが早期インデックスされる
  • checkbox 404エラーページの減少になる
  • checkbox クロールバジェットの効率的な使用
  • checkbox WEBサイトの信頼性が向上する

ホワイトリンクのクロールの最適化について

URLの発見

サイトの調査

WEBサイトの構造やhtmlタグ、robots.txt、コンテンツの分析をおこないクロールの障害となる要因を特定します。Googleサーチコンソールや各種ツールを使って検証します。

01

クロール

改善書の提出

調査結果を基に、クロール効率を向上させるための推奨事項や修正点をリスト化し、提案書として提示します。プランによっては弊社で作業をおこなうことも可能です。

02

インデックス

改善結果の報告

実施された改善措置の後、Googleサーチコンソールのインデックスレポ―トから新たなクロールの効果や成果を分析・評価し、その結果を明確に報告します。

03

ADVANTAGE

ホワイトリンクのクロール最適化の強み

  • 3,000社以上の内部対策を行った実績

    ホワイトリンクでは、2012年の創業以来「3,000社」以上のSEO内部対策施策をおこなってきた実績があります。サービスサイト・コーポレートサイト・DB型のサイト・オウンドメディア・ECサイトなど、どのようなWEBサイトの種類でも対応可能です。

    3,000社以上の内部対策を行った実績
  • 自社メディアでの内部対策実績

    SEOやMEOの最新情報を扱うオウンドメディア「SEM Plus」の運用をおこない、さまざまな内部対策の効果検証を日々おこなっています。その結果、競合性の高いキーワードで上位表示され、PV数、CV数共に増加してします。自社メディアの運用で蓄積したノウハウと最新の施策を実施することが可能です。

    自社メディアでの内部対策実績
  • エンジニアが100名以上在籍

    ホワイトリンクの運営元であるオルグロー株式会社は、SEOの知見を持ったエンジニアが多く在籍しています。また、エンジニアの派遣事業もおこなっているためグループ全体で100名以上のエンジニアが在籍しています。フロントエンドからバックエンドまで実装可能です。

    エンジニアが100名以上在籍

FAQ

クロール最適化についてよくある質問

Q
クロール効率化は順位改善につながりますか?
A はい、クロールの効率化は検索エンジンによるページの評価に影響し、順位改善につながる可能性があります。重要なコンテンツやリンクを適切に評価できるため、検索結果の順位向上に寄与します。
Q
クロール効率化はどのようなWEBサイトでおこなうべきでしょうか?
A すべてのWEBサイトでクロール効率化は重要ですが、とくに大規模なサイト、動的なコンテンツを持つサイト、改訂や移行を行うサイトで重要です。
Q
クロール効率化の成果はどのように測定できますか?
A クロール効率化はWEBサイトのインデックス化を改善し、検索エンジンからの表示順位向上やトラフィック増加に寄与します。
Q
見積りをもらうことは可能でしょうか?
A Googleサーチコンソールの共有をいただき、現状を把握した上で見積りを提出させていただきます。
Q
クロール効率化の実施時期はいつが適切ですか?
A WEBサイトの新規作成、リニューアル、大幅なコンテンツの追加・変更などの際に実施することが効果的です。
Q
指示書の提出ではなく、実装まで依頼することはできますか?
A 実装費用が別途発生いたしますが、可能です。