439 名前:スペースNo.な-74[sage] 投稿日:2008/05/12(月) 11:31:00
ヤホーやググルに引っ掛からない、オススメの検索避けタグってありますか?
440 名前:スペースNo.な-74[sage] 投稿日:2008/05/12(月) 11:34:39
robots.txtでも置いとけ。WebArchiveにも有効っぽいから。
444 名前:スペースNo.な-74[sage] 投稿日:2008/05/12(月) 22:03:16
Htmlファイルのヘッダー領域に以下のメタタグ書いておけばページごとに検索エンジン登録されないページを指定出来る
<meta name="robots" content="noindex,nofollow">
447 名前:スペースNo.な-74[sage] 投稿日:2008/05/13(火) 01:09:01
メタタグよりはrobots.txtのほうが精度は高い
denyは既知のロボットに対しては最強だけど未知のロボットに対しては無力
451 名前:スペースNo.な-74[sage] 投稿日:2008/05/13(火) 01:29:35
とりあえずGoogleはmetaタグによる拒否は守る。
yahooなんかのGoogleエンジンから情報を得ているところも同様。
CG系の草の根クローラで、クローラのアドレス公開してないところや
対応の有無について記述がないところは対応してないと見て間違いなし。
そうゆうのはrobots.txtも見て見ぬ振りするエンジンは多い。
robots.txtは置く場所が決まってて、中の記述を普通のブラウザでも読めてしまうので
本当に秘密にしたいページを中に書いておくと見られちゃうよ。
ヤホーやググルに引っ掛からない、オススメの検索避けタグってありますか?
440 名前:スペースNo.な-74[sage] 投稿日:2008/05/12(月) 11:34:39
robots.txtでも置いとけ。WebArchiveにも有効っぽいから。
444 名前:スペースNo.な-74[sage] 投稿日:2008/05/12(月) 22:03:16
Htmlファイルのヘッダー領域に以下のメタタグ書いておけばページごとに検索エンジン登録されないページを指定出来る
<meta name="robots" content="noindex,nofollow">
447 名前:スペースNo.な-74[sage] 投稿日:2008/05/13(火) 01:09:01
メタタグよりはrobots.txtのほうが精度は高い
denyは既知のロボットに対しては最強だけど未知のロボットに対しては無力
451 名前:スペースNo.な-74[sage] 投稿日:2008/05/13(火) 01:29:35
とりあえずGoogleはmetaタグによる拒否は守る。
yahooなんかのGoogleエンジンから情報を得ているところも同様。
CG系の草の根クローラで、クローラのアドレス公開してないところや
対応の有無について記述がないところは対応してないと見て間違いなし。
そうゆうのはrobots.txtも見て見ぬ振りするエンジンは多い。
robots.txtは置く場所が決まってて、中の記述を普通のブラウザでも読めてしまうので
本当に秘密にしたいページを中に書いておくと見られちゃうよ。



