基本ですが。
robots.txtを入れる。
これは、検索エンジン(YahooとかGoogleとか)に登録させたくないファイルを記述するもので、
ロボットに読んで欲しくないファイルをまとめておくもの。
たとえばcssとかプログラムとかイメージとか。
これらをフォルダにまとめておいて、robots.txtで除外する。
こんな感じ。
User-agent: *
Disallow: /css/
Disallow/img/
*(すべて)のUser-agent(検索エンジン)に、/css/と/img/のインデックス化をDisallow(禁止)ってこと。
これを、トップディレクトリに配置。
つまり、http://ドメイン/robots.txtとなる。
…基本ですね。