それは当然起こりました。
記事を公開するようになって2年程度、少しずつ記事の書き方がわかってきて、少しずつPVも増えてきて、やっとのことでグーグルアドセンスに合格して、さぁもっと良い記事を、もっと良いサイトを作っていきたい。
こんな想いでブログ記事を更新してきました。
記事を更新した後には、ちゃんとグーグルサーチコンソールから「インデックス登録をリクエスト」して、翌日見れば、インデックス登録が完了していました。(検索順位が伴わないことは別として)
この件はTwitterでも結構話題になっていて、個人ブロガーの方は非常に頭を悩ませている問題だと思います。
2021年9月あたりからサチコが登録してくれません!
私自身色々検索もして情報を入手しましたが、どうやら大手サイトや規模の大きいサイト、古くから運営されているドメインパワーが高いサイトはあまり影響がないようです。
しかし、個人ブロガーからすれば死活問題です。
検索順位が低いとか、クリックされないとか、そういったこと以前の問題のため、とにかくモチベーションが下がります。
インデックスされないことがわかってから執筆意欲が非常に低くなりました。
私のようなブロガーさんは多いのではないでしょうか。
※本記事は初心者に毛が生えた程度の私が検証した結果なので、月何万とか何十万とかpvを稼いでいる上級者の方はあまり参考にならないと思います
同じような境遇の方に少しでも参考になればと思います。
Googleにインデックスされるということ
検証の結果だけを先にいうと、
といった確信的なものを見つけることができませんでした。
ただ、各サイトの状況や傾向から、一定の方向性が見えてきましたので、ぜひ最後までご覧ください。
私はワードプレスを利用してホームページを更新しています。
これまでであれば記事を更新すると、特に何もしなくてもインデックスされていたかと思います。
グーグルサーチコンソールから「インデックス登録をリクエスト」すると、インデックスが早くなるということから、記事を書いたら、リクエストする。という習慣がついている方が多いと思います。
突如として行ったインデックスされない事象
そんなこんなで、自由気ままに記事更新をしていましたが、2021年9月あたりからでしょうか、
という事象が発生しました。
明日には登録されるかな?
程度のものでしたが、それ以降数日経っても全然インデックスされない。
そして、Twitterで調べてみると、多くの方がこの事象を呟いていました。
その後もインデックスされない。
やる気は下がる。
気にせず書くしかない。
でもやる気は下がる
この繰り返しでした。(今もです。)
ということで、現在のサイトがどうなっているのか、検証をしてみました。
本サイトを含めて3つのサイトを運営しています。
3つのサイトはこんな感じです。
・教育、就職、学習など、仕事と絡んだサイトです。
・もうすぐ100記事達成です。
・月のPVは2000程度、時期的なもので最高PVは1万程度です。
(開設時期は2018年4月です)
・趣味であるマンガを中心としたサイトです。
・記事自体は40記事程度です。
・月のPVは5000程度、こちらも最高PVは1万程度です。
(開設時期は2019年9月頃です)
・よく大手会社が参入しているキーワードはクリックされない。
とか情報を見るので、試しに開設したのがこのサイトです。
・とにかくPV、クリック数は壊滅的で、月のPVは200程度です。
・ほぼクリックもされていません。
(開設時期は2021年5月頃です)
今回はこの3つのサイトを検証していきます。
3つのサイトからインデックスについて検証
それでは、3つのサイトについて検証をしていきます。
それぞれのサイトの特徴が異なりますので、全て同一条件ではありませんが、おおよその参考にはなると思います。
本サイトの検証結果
サイト公開時期 | 2018年4月 |
公開記事数 | 96件
(2021年10月22日時点) |
平均月間PV | 2,000PV |
最高月間PV | 10,000PV |
インデックス記事 | 66件 |
「検出-インデックス未登録」記事 | 30件 |
コメント
・インデックスされていない記事については、過去に本サイトから特化サイトを別に作り、記事を移しました。結局記事を本サイトに戻す作業をしましたが…
別サイトについては既に削除をしていますが、重複認定や、リダイレクト認定をされているのか、特定の記事がインデックスされていませんでした。
・2021年9月17日以降に公開した5件の記事についてはインデックスがされていません。
・新規記事といじくった記事以外はインデックスされています。
趣味サイトの検証結果
サイト公開時期 | 2019年9月 |
公開記事数 | 38件
(2021年10月22日時点) |
平均月間PV | 5,000PV |
最高月間PV | 10,000PV |
インデックス記事 | 33件 |
「検出-インデックス未登録」記事 | 2件 |
「クロール済み – インデックス未登録」記事 | 3件 |
こちらのサイトは更に各記事の詳細を見ていきます。
公開日 | 状態 | 閲覧数 |
2019/9/10 | 検出-インデックス未登録 | 小 |
2019/9/11 | インデックス済 | 小 |
2019/9/23 | インデックス済 | 小 |
2019/9/30 | クロール済み – インデックス未登録 | 小 |
2019/10/12 | 検出-インデックス未登録 | 小 |
2019/10/14 | インデックス済 | 小 |
2019/10/14 | インデックス済 | 小 |
2019/10/19 | インデックス済 | 小 |
2019/10/20 | クロール済み – インデックス未登録 | 小 |
2019/10/22 | インデックス済 | 大 |
2019/10/24 | インデックス済 | 中 |
2019/10/25 | インデックス済 | 中 |
2019/10/27 | インデックス済 | 小 |
2019/11/9 | インデックス済 | 小 |
2019/11/12 | インデックス済 | 中 |
2019/11/21 | インデックス済 | 小 |
2019/11/27 | インデックス済 | 小 |
2019/12/9 | クロール済み – インデックス未登録 | 中 |
2019/12/16 | インデックス済 | 中 |
2019/12/25 | インデックス済 | 小 |
2020/1/21 | インデックス済 | 小 |
2020/1/27 | インデックス済 | 大 |
2020/2/14 | インデックス済 | 大 |
2020/12/28 | インデックス済 | 大 |
2021/1/5 | インデックス済 | 大 |
2021/1/7 | インデックス済 | 小 |
2021/1/10 | インデックス済 | 小 |
2021/1/15 | インデックス済 | 中 |
2021/1/21 | インデックス済 | 中 |
2021/1/27 | インデックス済 | 中 |
2021/1/29 | インデックス済 | 小 |
2021/2/3 | インデックス済 | 大 |
2021/2/8 | インデックス済 | 小 |
2021/2/10 | インデックス済 | 小 |
2021/2/19 | インデックス済 | 小 |
2021/2/20 | インデックス済 | 中 |
2021/2/21 | インデックス済 | 小 |
2021/3/5 | インデックス済 | 小 |
コメント
・基本的にはインデックスされていますが、なぜか過去公開記事において「検出-インデックス未登録」「クロール済み – インデックス未登録」が発生しています。
これらの記事を確認すると、非常に低品質な記事や、量産型の記事がある一方、多少の閲覧があったものが「クロール済み – インデックス未登録」として、除外されているものがありました。
完全テストサイト(脱毛とか)
最後に、完全テストとして運営しているサイトです。
色々お試しで更新をしていることもあり、非常に低品質の更新内容です。
現在の更新記事は、割と共通部分が多く、それぞれの地域ごとの特徴や情報を掲載する記事が多いです。
これから様子を見ながらコンテンツを増やしたいのですが、インデックス問題で心が折れました。。。
サイト公開時期 | 2021年5月 |
公開記事数 | 45件
(2021年10月22日時点) |
平均月間PV | 200PV |
最高月間PV | 200PV |
インデックス記事 | 22件 |
「検出-インデックス未登録」記事 | 23件 |
更に各記事の詳細を見ていきます。
公開日 | 状態 | 内部リンク |
2021/5/30 | インデックス済 | 7 |
2021/6/9 | インデックス済 | 3 |
2021/6/11 | インデックス済 | 24 |
2021/6/11 | インデックス済 | 3 |
2021/6/11 | インデックス済 | 0 |
2021/6/24 | 検出-インデックス未登録 | 2 |
2021/7/7 | インデックス済 | 3 |
2021/7/7 | 検出-インデックス未登録 | 1 |
2021/7/9 | インデックス済 | 4 |
2021/7/10 | 検出-インデックス未登録 | 4 |
2021/7/12 | インデックス済 | 4 |
2021/7/13 | 検出-インデックス未登録 | 3 |
2021/7/17 | インデックス済 | 9 |
2021/7/19 | インデックス済 | 6 |
2021/7/20 | インデックス済 | 1 |
2021/7/21 | インデックス済 | 16 |
2021/8/20 | インデックス済 | 1 |
2021/8/21 | 検出-インデックス未登録 | 0 |
2021/8/22 | 検出-インデックス未登録 | 4 |
2021/8/24 | インデックス済 | 1 |
2021/8/29 | インデックス済 | 1 |
2021/8/30 | 検出-インデックス未登録 | 0 |
2021/9/1 | 検出-インデックス未登録 | 0 |
2021/9/4 | 検出-インデックス未登録 | 0 |
2021/9/9 | 検出-インデックス未登録 | 3 |
2021/9/10 | インデックス済 | 0 |
2021/9/11 | インデックス済 | 0 |
2021/9/12 | インデックス済 | 0 |
2021/9/12 | 検出-インデックス未登録 | 0 |
2021/9/13 | 検出-インデックス未登録 | 5 |
2021/9/14 | インデックス済 | 1 |
2021/9/15 | 検出-インデックス未登録 | 1 |
2021/9/16 | 検出-インデックス未登録 | 0 |
2021/9/16 | 検出-インデックス未登録 | 0 |
2021/9/17 | インデックス済 | 4 |
2021/9/17 | 検出-インデックス未登録 | 6 |
2021/9/18 | 検出-インデックス未登録 | 1 |
2021/9/19 | インデックス済 | 1 |
2021/9/20 | 検出-インデックス未登録 | 4 |
2021/9/21 | 検出-インデックス未登録 | 3 |
2021/9/22 | 検出-インデックス未登録 | 0 |
2021/9/23 | インデックス済 | 0 |
2021/9/24 | 検出-インデックス未登録 | 6 |
2021/9/25 | 検出-インデックス未登録 | 1 |
2021/9/26 | 検出-インデックス未登録 | 0 |
コメント
・調べている中では、内部リンクの差によってインデックス登録に差が出るとの議論もありました。多くの内部リンクを設定している記事は比較的インデックスされていますが、少ない内部リンクであれば、公開日の差があまりありませんでした。
「検出-インデックス未登録」とは何か
これまで3つのサイトを検証してきましたが、この「検出-インデックス未登録」の状態の謎は深まるばかりだと思います。
Search Consoleのヘルプページには、以下のように記載されています。
「検出 – インデックス未登録」: ページは Google により検出されましたが、まだクロールされていません。これは通常、Google が URL をクロールしようとしたものの、サイトへの過負荷が予想されたため、クロールの再スケジュールが必要となった場合です。そのため、レポート上で最終クロール日が空欄になっています。
出典:インデックス カバレッジ レポート – Search Console ヘルプ
これまで見ると、
まだクローラーが見切れてないから、もうちょっと待ってね。
ということを言っているのでしょうが、確実にそんなことありません笑
実際に過去の記事についてもインデックスされていたものが、未登録になっていますし、「クロール済み – インデックス未登録」の方がまだ諦めがつきます。
クロール済であれば、見たけどしょぼいねこの記事。なんか他のサイトで見たことあるし。
このような判定だということである程度納得もいきます。
Googleのジョンミューラー氏の発言
色々と調べていくと、以下のような動画があることを発見しました。
「検出-インデックス未登録」に関してまとめた動画です。
これによると、グーグルが判断するインデックスから外される条件とは
①URLを含む重複コンテンツではないか
②内部リンクがあるか(孤立していないか)
③価値のないコンテンツではないか
このあたりが判定基準のようです。
ヘルプでの記載と違うんじゃない?
ちょっとこんな感じもしますが、どちらも正解で、一部でクローラーが来ていない状況と、価値のない記事は見てくれない。と判断しました。
YMYL領域はインデックスされないのか
他にも調べていくうちに、グーグルでアップデートのあったYMYL領域(Your Money Your Lifeの頭文字を取った言葉であり、人々のお金、健康、生活に大きな影響を与えるジャンルを指します。)が影響を受けているのではないか。
といった指摘もありました。
しかし、
可能性として、ゼロではないと思いますが、このジャンルだからということは否定できそうです
Googleにインデックスされない問題の検証結果
さて、長々と記事を書いてきましたが、これまでの検証結果から、以下のような現象が発生しており、多少の改善点はあるものの、抜本的な解決は現時点では難しいことがわかりました。
①問題の発生時期
他の方々が指摘されているように2021年9月頃から、明らかに影響が発生しています。
何らかの不具合なのかこれがスタンダードになるのかわかりませんが、今後何らかの発表があるかもしれません。
②開設時期やサイトパワーのようなものは影響がありそう
どうしても影響を受けているのが、開設が新しいサイト、サイトパワーの弱いサイトになっています。
せっかくこれからブログを書こうと思った方には非常にモチベーションが下がる話ですね。
③内部リンクが多い記事はインデックスされやすい
サイト内でしっかりと巡回できる記事はインデックスがされやすい傾向にあります。
しかし多少の内部リンクでは、その効果が発揮されないケースもあります。
④記事の質が悪いものはやっぱりダメ
検証結果からも、記事の質が悪いもの、コピー記事、外部サイトでも多く掲載されている重複記事については、インデックスされない可能性が高いです。
よく一次情報(自分が経験したもの)を記事にしろ。
と言われますが、全部が全部そういった記事にするのは難しいですよね。
⑤YMYL領域の影響は軽微かもしれない
今回の検証では、YMYL領域に限らず影響を受けていました。YMYL領域はさらに影響を受けている可能性があります。
⑥単純にグーグルが見てくれていないかもしれない
今回の検証で意外だったのが、
なんかよくわかんないな。
という印象を持ったことです。
そういった意味では、時間が解決してくれる可能性はあります。
これから私たちは何をすれば良いのか
最後にまとめとして、これから個人ブロガーがどうしていくべきかを書きます。
①を選択することも1つの選択です。
ブログを書いている時間を趣味の時間やランニングでもした方が人生は豊かになるかもしれません。
しかし、私のように②を選択する方のために、繰り返しにはなりますが、今後注意する事項をまとめます。
【これだけはとにかく気を付けよう】
①重複コンテンツに気をつける
これはサイト内重複と外部サイトのコピーを含んでいます。
②内部リンクに気をつける
サイト内で孤立した記事は、それだけでもクローラー巡回に当たらない可能性があります。
ぐるぐると循環できるような関連記事を沢山書きましょう。
③ページ表示速度を考える
グーグル様は表示速度が遅いと怒ります。
このあたりも考慮しましょう。
④サチコからの「インデックス登録をリクエスト」を忘れない
なかなかインデックスされませんが、やっぱりリクエストは忘れないでください。
クリックするときは、登録されることを祈りましょう。
いかがでしょうか。
結局解決はできていませんが、少しでも役に立てば嬉しいです。
他にも良い方法がないか今後も模索していきます。