5月のスパムドメイン調査結果

先月の記事の
「ビッグパンダ！！今月からクローラーのアルゴリスムが確実に変更されてる！！ 」
の続きというか先月の結果報告します。

しかし！！その前にお詫び申し上げます。パンダアップデートと騒いでいた私ですが、まだビッグパンダは日本語環境が整っていなく日本には実装されていないみたいです。ただのアルゴリスム変更みたいです。
「パンダ・アップデートはまだ日本語サイトには導入されていない」 from Ask Matt! on YouTube


5月のグーグルロボットのアルゴリズム変更に伴い、全くクローラーがこなくなってしまったドメインは723ドメイン中、67ドメインもありました。
普通インデックスされれば、1日最低でも一回はクローラーが来てたのですが、先月全くこなかったドメインは67もありました。今までは、そんなドメインは完全スパム判定されたドメインだと私は判断して切っていたのですが、今回のはそう判断が一概には出来ないのです。というのは

1. デイリーでアクセスが来ている
   これに関しては、スパム判定されると検索結果にのることは無いので、アクセスが増えるはすが無い。しかし、私は被リンクを1ファイルに最低でも50はかけているので、そこから来た可能があるので、まだスパムの判定の可能があります。
2. グーグルサイトコマンドで調べると表示される
   これに関しては、表示される＝スパム判定されていないと私は認識しています。スパム判定されると全く表示されないはずです。

上記2点からみて、完全にスパム判定をされたと判断できたドメインは（アクセス完全０でサイトコマンドで結果表示無し）67ドメイン中2個でした。

次にスパムが疑わしい、アクセスは来ているが、サイトコマンドで結果表示無し。つまり、アクセスも他のファイルの被リンクからきていると判断したドメインは22でした。


今までスパムドメインされるなんて、４つくらいしかなかったのに、先月で一気に増えてしまいました。
よくわからないのが、全くクローラーが来ていなかったのに、月末に1回だけクローラーが来たドメインもあるのです。ファイル更新をしていたドメインなのですが、全くクローラーがきていないのであれば、更新した事さえわからないので、恐らく、UAを偽装して、見に来ているみたいです。
今までこんな事なかったので、まだ一ヶ月ではなんともいえないので、今月も引き続き、クローラーが来ていないドメインを調査します。これだけクローリングの数が減ったのに、なぜか全体のクリック数やアクセス数は増えているんですよね.....更に意味わからん....

また今月末に報告します。その時はなんらかの答えが少しは見えていると思います。