記事数が多くなるとインデックスされない記事が出てくる?

ブログやサイトの更新ペースは人それぞれです。

が、毎日のように更新を行っている人の
ブログやサイトはどんどん肥大化していき、
やがて数千記事、あるいは数万記事単位の
大きなサイトへと成長していくことでしょう。

成長した際に中身もしっかりと伴っていれば
記事数も多いそのサイトは
サイトの評価も上がりますし
”とにかく書くことは有効”であると
言われていることが多いですね。

しかしながら、記事数が増えれば増えるほど
あることも起きる、と私自身は
感じています。

それは、何か…

登録されない記事が出てくる?

サイトの規模が大きくなると
検索エンジンに登録されない記事が
増えてくるように思います。
数百文字の記事だとか、そういった質の
問題ではなく、
数千文字クラスの記事でも、
クロール済みインデックス未登録、みたいな
ことになってしまうことが
増える、と言うことですね。

あくまでも感覚的なお話ではありますが、
私のとあるサイト(数千記事)は、
インデックスされない記事が出て来たり
インデックスされていないところに出てきたのに
実際はされていて、数日後にまたそこから
消えている、みたいなことも起きていました。

が、逆にさらに別のサイト(数百記事)に関しては
全ての記事が登録されており、
問題ない様子でしたし
カバレッジの更新も、記事数が少ない方が
早く、正確である印象を受けます。

このあたりの明確な答えは分かりません。
検索エンジンの評価基準に関しては
「良い」とされることは言われていますが
どれも確実な答えは出ない、というのが現実です。
考えれば考えるほど奥深く、
そして、自分が見つけた答えも
本当に正しいものなのかどうか分からない、
というのがSEOの怖いところであり、
難しいところでもあるのです。

記事数が多いとインデックスされない
ページが増える点について
個人的な経験を元に書いていきたいと思います。

されないページは増える

記事数が少なければ少ないほど、
検索順位とかは別とすれば、
ちゃんと一定の質などを保っている場合、
ちゃんとインデックスされる可能性が高いと思います。

逆に、数千記事、あるいは数万記事あるようなサイトだと
どうしても「インデックスされない」ページが
増えてきます。
全て登録されているページもあるのかもしれませんが、
別サイトでも「大規模サイトのすべてのページを
インデックスさせるのは難しい」というようなことが
書かれていましたし、サイトが大きくなればなるほど
サイト全体の評価が上がっても、
数千と存在する個別の記事の一部は
インデックスされないという現象が起きてしまう
可能性もある、ということですね。

サイトや内容などによっても異なりますが、
サイトの大規模化に伴い、個別記事に対する
基準(?)のようなものは厳しくなっている印象を
受けますね。

その原因は何かを考える

その原因は何か、私の経験上から
考えてみました。
実際の答えはサイトごとによっても
違うと思いますし、検索エンジン内部にしか
分からないことではありますが
書き記しておこうと思います。

・質の低いページ
質の低いページ…これはインデックスされない原因のひとつになります。
記事数が増えるにつれて、そういったページが
無意識のうちに増えてしまっている可能性はあります
ただ、他の数百記事の規模のサイトでは
インデックスされるような記事も除外されることがあるので
これが原因ではないような気もしますが…。

・重複扱いにされている?
記事数が増えれば増えるほど、「似たようなジャンルの記事」が
増えていくと思います。
例えば、このサイトのようにアルバイトや店長、仕事を一応
中心にしていると、どうしてもそういう内容の
記事は増えていくものです。
同じような記事、と判断されて除外されているような
こともあるのかもしれません。
(重複しているコンテンツには入っていなくても
何か影響がある可能性はあります)

・基準が厳しくなっている?
同じサイトの記事が大量に増えれば増えるほど
基準が厳しくなっているようにも思います。
500記事のブログAで投稿すれば
インデックスされるような記事も、
5000記事のブログBで投稿すると
クロールされても登録されない…と
そういうようなことがあるのかもしれません。
大規模サイトの場合は、注意した方が良いですね。

・処理しきれていない可能性?
サーチコンソールで確認し、
クロール済みインデックス未登録の部分に
入っているページを見ていても
実際にはインデックスされている!というものも
多い印象を受けます。
記事数が多いと、何らかの処理の過程で
未登録コーナーに入ってしまうのかもしれません。

このようなところでしょうか。
明確な理由までは不明ですし
こういったサイト評価の悩みは
明確に「こうです!」という答えがない、
というのも難しさであると思います。

色々と、模索していくしかない、ということになりますね。

まとめ

サイトが大型化した場合、
主要でない記事のいくつかが
除外されてしまうのはある程度
仕方のない事だと考えて
気にせずそのまま運営した方が良いかと思います。

実際に、文章量をさらに増やすなどして
未登録のものをクロール要請して登録すると
今度は別の記事がはじかれたりすることもあって
いたちごっこですし、
正直なところ、あまり原因らしい原因が
思い当たらない!というのも事実なのです。

大型サイトを管理する方は
”ある程度を目をつぶって”
やっていくことも大事になるのかもしれません

シェアする

  • このエントリーをはてなブックマークに追加

フォローする