検索結果に表示されないウェブページがある

クローラーは、サイト内のウェブページを広く巡回しますが、巡回されたウェブページは、さまざまな条件でのチェックが行われ、インデックスに登録されます。ウェブページによっては、チェックの結果インデックスには登録されず、検索結果に表示されないこともあります。また、内容が類似していると判定されたページは、インデックスに登録されないこともあります。

またサイトによっては、Yahoo!検索 サイトエクスプローラーのインデックス非表示機能を使って、サイト管理者自身が検索結果で非表示になるように設定しているウェブページもあります。

なお、サイト内のすべてのウェブページをくまなくクローラーが巡回するとは限りません。自分のサイト内をクローラーが効率的に巡回できるよう、robots.txtの設置やサイトマップの設置などをおすすめします。

動的に生成されるウェブページのインデックス

動的に生成されるウェブページでも、YSTのクローラーがウェブページを巡回・収集し、インデックスへの登録にふさわしいウェブページであると判断した場合には、インデックスに登録され、検索キーワードに応じて検索結果に表示されるようになります。

ただし、クローラーはウェブページを巡回する際、おもに静的なリンクをたどるため、動的に生成されるリンクは利用しないことをおすすめします。

検索結果に表示されなくなる

以前Yahoo!検索の検索結果に表示されていたウェブページが検索結果に表示されなくなった場合、以下の原因が考えられます。

クローラーがインデックス更新のためにウェブページを巡回した際、サイトが一時的に利用不可能だった。
→　インデックスが更新されると、再度検索結果に表示されるようになります。
検索キーワードとの関連性が低いと判断された。
→　検索結果の表示順序は、検索キーワードとの関連性が高い順となっています。検索したキーワードによっては、ウェブページが検索結果に表示されない場合があります。
サイトやウェブページが検索エンジンスパムに該当していると判断された。
→　検索エンジンスパムと判断されたサイトやウェブページは、随時インデックスから削除されます。
サイト管理者自身が、検索結果に表示されることを拒否した。