Förstår liksom inte varför en sån disskusion måste till? Om man inte vill att ex. google ska indexera sidan så är det enkelt att åtgärda ...

http://www.google.se/intl/sv/remove.html