解決済
Ads By Google
Internet Archiveにクロールされない方法はありますか？
検索エンジンのクローラのようにメタタグで指示できますか？もしできなければ、どのような手段があるでしょうか？
2006-04-15 06:31の質問
この質問と回答を読んで役に立った場合は「役に立つ質問」に投票してください。投票が多い質問は、役に立つ質問一覧に掲載され、より多くの人に見てもらうことができます。
回答(1)
1.
2006-04-15 09:55:47
FAQにはrobots.txtを利用する方法がかかれているようです。
robots.txtに
メタタグであれば、恐らく
robots.txtに
User-Agent: ia_archiver Disallow: /とかけばサイト全体。
メタタグであれば、恐らく
<META NAME="ia_archiver" CONTENT="NOINDEX, NOFOLLOW">という感じで書いておけばいいと思いますが
自信度 : 自信なし 回答レベル : アドバイス
robots.txtも読む仕様だったんですね。
ありがとうございましたm(__)m
Ads By Google
コメント
まだコメントがありません
