【保存版】2021年9月あたりから発生した「検出-インデックス未登録」問題を3つのサイトから検証してみた

それは当然起こりました。

記事を公開するようになって2年程度,少しずつ記事の書き方がわかってきて,少しずつPVも増えてきて,やっとのことでグーグルアドセンスに合格して,さぁもっと良い記事を,もっと良いサイトを作っていきたい。

こんな想いでブログ記事を更新してきました。

 

記事を更新した後には,ちゃんとグーグルサーチコンソールから「インデックス登録をリクエスト」して,翌日見れば,インデックス登録が完了していました。(検索順位が伴わないことは別として)

 

この件はTwitterでも結構話題になっていて,個人ブロガーの方は非常に頭を悩ませている問題だと思います。

 

たろう
2021年9月あたりからサチコが登録してくれません!

 

私自身色々検索もして情報を入手しましたが,どうやら大手サイトや規模の大きいサイト,古くから運営されているドメインパワーが高いサイトはあまり影響がないようです。

 

しかし,個人ブロガーからすれば死活問題です。

 

検索順位が低いとか,クリックされないとか,そういったこと以前の問題のため,とにかくモチベーションが下がります。

インデックスされないことがわかってから執筆意欲が非常に低くなりました。

 

私のようなブロガーさんは多いのではないでしょうか。

 

まぁそんなことを言っていてもしょうがないので,とにかく情報や検証をする必要があると思い,本サイトを含めて運営している3つのサイトの公開記事について,更新日や内部リンクの数等を検証していきたいと思います。

 

※本記事は初心者に毛が生えた程度の私が検証した結果なので,月何万とか何十万とかpvを稼いでいる上級者の方はあまり参考にならないと思います

同じような境遇の方に少しでも参考になればと思います。

はなこ
多分この記事もインデックスされないんだろうなぁ

 

Googleにインデックスされるということ

 

検証の結果だけを先にいうと,

「●●をすれば絶対にインデックスされる」
「●●のせいでインデックスがされていない」

といった確信的なものを見つけることができませんでした。

 

ただ,各サイトの状況や傾向から,一定の方向性が見えてきましたので,ぜひ最後までご覧ください。

 

私はワードプレスを利用してホームページを更新しています。

これまでであれば記事を更新すると,特に何もしなくてもインデックスされていたかと思います。

 

クローラーと呼ばれる,検索エンジンがWEB上にあるページを発見するためのロボットが随時巡回し,検索結果に反映させます。

このクローラーが発見したページを検索エンジンに登録することを「インデックス」すると言い,少しでも早くクローラーに発見してもらい,登録してもらう。というのがSEOの対策に有効です。

 

たろう
グーグルサーチコンソールから「インデックス登録をリクエスト」すると,インデックスが早くなるということから,記事を書いたら,リクエストする。という習慣がついている方が多いと思います。

 

突如として行ったインデックスされない事象

そんなこんなで,自由気ままに記事更新をしていましたが,2021年9月あたりからでしょうか,

数日経ってもインデックスされない。

という事象が発生しました。

明日には登録されるかな?

程度のものでしたが,それ以降数日経っても全然インデックスされない。

そして,Twitterで調べてみると,多くの方がこの事象を呟いていました。

 

その後もインデックスされない。

やる気は下がる。

気にせず書くしかない。

でもやる気は下がる

 

この繰り返しでした。(今もです。)

 

ということで,現在のサイトがどうなっているのか,検証をしてみました。

 

本サイトを含めて3つのサイトを運営しています。

3つのサイトはこんな感じです。

 

・教育,就職,学習など,仕事と絡んだサイトです。

・もうすぐ100記事達成です。

・月のPVは2000程度,時期的なもので最高PVは1万程度です。

(開設時期は2018年4月です)

・趣味であるマンガを中心としたサイトです。

・記事自体は40記事程度です。

・月のPVは5000程度,こちらも最高PVは1万程度です。

(開設時期は2019年9月頃です)

・よく大手会社が参入しているキーワードはクリックされない。

とか情報を見るので,試しに開設したのがこのサイトです。

・とにかくPV,クリック数は壊滅的で,月のPVは200程度です。

・ほぼクリックもされていません。

(開設時期は2021年5月頃です)

 

今回はこの3つのサイトを検証していきます。

 

3つのサイトからインデックスについて検証

それでは,3つのサイトについて検証をしていきます。

それぞれのサイトの特徴が異なりますので,全て同一条件ではありませんが,おおよその参考にはなると思います。

 

本サイトの検証結果

サイト公開時期2018年4月
公開記事数96件

(2021年10月22日時点)

平均月間PV2,000PV
最高月間PV10,000PV
インデックス記事66件
「検出-インデックス未登録」記事30件

コメント

・インデックスされていない記事については,過去に本サイトから特化サイトを別に作り,記事を移しました。結局記事を本サイトに戻す作業をしましたが…

別サイトについては既に削除をしていますが,重複認定や,リダイレクト認定をされているのか,特定の記事がインデックスされていませんでした。

・2021年9月17日以降に公開した5件の記事についてはインデックスがされていません。

・新規記事といじくった記事以外はインデックスされています。

 

趣味サイトの検証結果

サイト公開時期2019年9月
公開記事数38件

(2021年10月22日時点)

平均月間PV5,000PV
最高月間PV10,000PV
インデックス記事33件
「検出-インデックス未登録」記事2件
「クロール済み – インデックス未登録」記事3件

こちらのサイトは更に各記事の詳細を見ていきます。

公開日状態閲覧数
2019/9/10検出-インデックス未登録
2019/9/11インデックス済
2019/9/23インデックス済
2019/9/30クロール済み – インデックス未登録
2019/10/12検出-インデックス未登録
2019/10/14インデックス済
2019/10/14インデックス済
2019/10/19インデックス済
2019/10/20クロール済み – インデックス未登録
2019/10/22インデックス済
2019/10/24インデックス済
2019/10/25インデックス済
2019/10/27インデックス済
2019/11/9インデックス済
2019/11/12インデックス済
2019/11/21インデックス済
2019/11/27インデックス済
2019/12/9クロール済み – インデックス未登録
2019/12/16インデックス済
2019/12/25インデックス済
2020/1/21インデックス済
2020/1/27インデックス済
2020/2/14インデックス済
2020/12/28インデックス済
2021/1/5インデックス済
2021/1/7インデックス済
2021/1/10インデックス済
2021/1/15インデックス済
2021/1/21インデックス済
2021/1/27インデックス済
2021/1/29インデックス済
2021/2/3インデックス済
2021/2/8インデックス済
2021/2/10インデックス済
2021/2/19インデックス済
2021/2/20インデックス済
2021/2/21インデックス済
2021/3/5インデックス済

コメント

・基本的にはインデックスされていますが,なぜか過去公開記事において「検出-インデックス未登録」「クロール済み – インデックス未登録」が発生しています。

これらの記事を確認すると,非常に低品質な記事や,量産型の記事がある一方,多少の閲覧があったものが「クロール済み – インデックス未登録」として,除外されているものがありました。

 

完全テストサイト(脱毛とか)

最後に,完全テストとして運営しているサイトです。

色々お試しで更新をしていることもあり,非常に低品質の更新内容です。

現在の更新記事は,割と共通部分が多く,それぞれの地域ごとの特徴や情報を掲載する記事が多いです。

 

たろう
これから様子を見ながらコンテンツを増やしたいのですが,インデックス問題で心が折れました。。。
サイト公開時期2021年5月
公開記事数45件

(2021年10月22日時点)

平均月間PV200PV
最高月間PV200PV
インデックス記事22件
「検出-インデックス未登録」記事23件

更に各記事の詳細を見ていきます。

公開日状態内部リンク
2021/5/30インデックス済7
2021/6/9インデックス済3
2021/6/11インデックス済24
2021/6/11インデックス済3
2021/6/11インデックス済0
2021/6/24検出-インデックス未登録2
2021/7/7インデックス済3
2021/7/7検出-インデックス未登録1
2021/7/9インデックス済4
2021/7/10検出-インデックス未登録4
2021/7/12インデックス済4
2021/7/13検出-インデックス未登録3
2021/7/17インデックス済9
2021/7/19インデックス済6
2021/7/20インデックス済1
2021/7/21インデックス済16
2021/8/20インデックス済1
2021/8/21検出-インデックス未登録0
2021/8/22検出-インデックス未登録4
2021/8/24インデックス済1
2021/8/29インデックス済1
2021/8/30検出-インデックス未登録0
2021/9/1検出-インデックス未登録0
2021/9/4検出-インデックス未登録0
2021/9/9検出-インデックス未登録3
2021/9/10インデックス済0
2021/9/11インデックス済0
2021/9/12インデックス済0
2021/9/12検出-インデックス未登録0
2021/9/13検出-インデックス未登録5
2021/9/14インデックス済1
2021/9/15検出-インデックス未登録1
2021/9/16検出-インデックス未登録0
2021/9/16検出-インデックス未登録0
2021/9/17インデックス済4
2021/9/17検出-インデックス未登録6
2021/9/18検出-インデックス未登録1
2021/9/19インデックス済1
2021/9/20検出-インデックス未登録4
2021/9/21検出-インデックス未登録3
2021/9/22検出-インデックス未登録0
2021/9/23インデックス済0
2021/9/24検出-インデックス未登録6
2021/9/25検出-インデックス未登録1
2021/9/26検出-インデックス未登録0

コメント

・調べている中では,内部リンクの差によってインデックス登録に差が出るとの議論もありました。多くの内部リンクを設定している記事は比較的インデックスされていますが,少ない内部リンクであれば,公開日の差があまりありませんでした。

 

「検出-インデックス未登録」とは何か

これまで3つのサイトを検証してきましたが,この「検出-インデックス未登録」の状態の謎は深まるばかりだと思います。

Search Consoleのヘルプページには,以下のように記載されています。

「検出 – インデックス未登録」: ページは Google により検出されましたが,まだクロールされていません。これは通常,Google が URL をクロールしようとしたものの,サイトへの過負荷が予想されたため、クロールの再スケジュールが必要となった場合です。そのため,レポート上で最終クロール日が空欄になっています。

出典:インデックス カバレッジ レポート – Search Console ヘルプ

これまで見ると,

まだクローラーが見切れてないから,もうちょっと待ってね。

ということを言っているのでしょうが,確実にそんなことありません笑

 

実際に過去の記事についてもインデックスされていたものが,未登録になっていますし,「クロール済みインデックス未登録」の方がまだ諦めがつきます。

 

クロール済であれば,見たけどしょぼいねこの記事。なんか他のサイトで見たことあるし。

このような判定だということである程度納得もいきます。

 

Googleのジョンミューラー氏の発言

色々と調べていくと,以下のような動画があることを発見しました。

「検出-インデックス未登録」に関してまとめた動画です。

 

これによると,グーグルが判断するインデックスから外される条件とは

①URLを含む重複コンテンツではないか

②内部リンクがあるか(孤立していないか)

③価値のないコンテンツではないか

このあたりが判定基準のようです。

 

ヘルプでの記載と違うんじゃない?

ちょっとこんな感じもしますが,どちらも正解で,一部でクローラーが来ていない状況と,価値のない記事は見てくれない。と判断しました。

 

YMYL領域はインデックスされないのか

他にも調べていくうちに,グーグルでアップデートのあったYMYL領域(Your Money Your Lifeの頭文字を取った言葉であり,人々のお金,健康,生活に大きな影響を与えるジャンルを指します。)が影響を受けているのではないか。

といった指摘もありました。

しかし,

私のサイトはあまりそこに関係していないジャンル(テストサイトは多少食い込みそうなジャンルですが,現在の記事はあまり関係なし)です。
たろう
可能性として,ゼロではないと思いますが,このジャンルだからということは否定できそうです

 

Googleにインデックスされない問題の検証結果

さて,長々と記事を書いてきましたが,これまでの検証結果から,以下のような現象が発生しており,多少の改善点はあるものの,抜本的な解決は現時点では難しいことがわかりました。

 

①問題の発生時期

他の方々が指摘されているように2021年9月頃から,明らかに影響が発生しています。

何らかの不具合なのかこれがスタンダードになるのかわかりませんが,今後何らかの発表があるかもしれません。

 

②開設時期やサイトパワーのようなものは影響がありそう

どうしても影響を受けているのが,開設が新しいサイト,サイトパワーの弱いサイトになっています。

せっかくこれからブログを書こうと思った方には非常にモチベーションが下がる話ですね。

 

③内部リンクが多い記事はインデックスされやすい

サイト内でしっかりと巡回できる記事はインデックスがされやすい傾向にあります。

しかし多少の内部リンクでは,その効果が発揮されないケースもあります。

 

④記事の質が悪いものはやっぱりダメ

検証結果からも,記事の質が悪いもの,コピー記事,外部サイトでも多く掲載されている重複記事については,インデックスされない可能性が高いです。

よく一次情報(自分が経験したもの)を記事にしろ。

と言われますが,全部が全部そういった記事にするのは難しいですよね。

 

⑤YMYL領域の影響は軽微かもしれない

今回の検証では,YMYL領域に限らず影響を受けていました。YMYL領域はさらに影響を受けている可能性があります。

 

⑥単純にグーグルが見てくれていないかもしれない

今回の検証で意外だったのが,

なんかよくわかんないな。

という印象を持ったことです。

公開時期の問題,内部リンクの問題,重複コンテンツの問題など,一定の仮説を立てることはできましたが,それでもよくわからない。そんな状況が発生していることは確かです。
たろう
そういった意味では,時間が解決してくれる可能性はあります。

 

これから私たちは何をすれば良いのか

最後にまとめとして,これから個人ブロガーがどうしていくべきかを書きます。

 

①ブログはきっぱりやめる。

 

②それでもブログを書き続ける。

 

①を選択することも1つの選択です。

ブログを書いている時間を趣味の時間やランニングでもした方が人生は豊かになるかもしれません。

 

たろう
しかし,私のように②を選択する方のために,繰り返しにはなりますが,今後注意する事項をまとめます。

 

【これだけはとにかく気を付けよう】

①重複コンテンツに気をつける

これはサイト内重複と外部サイトのコピーを含んでいます。

 

②内部リンクに気をつける

サイト内で孤立した記事は,それだけでもクローラー巡回に当たらない可能性があります。

ぐるぐると循環できるような関連記事を沢山書きましょう。

 

③ページ表示速度を考える

グーグル様は表示速度が遅いと怒ります。

このあたりも考慮しましょう。

 

④サチコからの「インデックス登録をリクエスト」を忘れない

なかなかインデックスされませんが,やっぱりリクエストは忘れないでください。

クリックするときは,登録されることを祈りましょう。

 

いかがでしょうか。

結局解決してねーじゃん。

と思われるかもしれませんが,少しでも役に立てば嬉しいです。

他にも良い方法がないか今後も模索していきます。

>教育のススメ

教育のススメ

多くの方の参考となるため,日々更新を続けていきたいと思います。分野が複数ありますが,興味があるものだけでも見てください!

CTR IMG