.htaccess запретить индексацию сайта
Кто знает как с помощью .htaccess запретить индексацию сайта поисковикам? Только не полностью закрыть сайт от индексации для всех, а только напрмер гуглу и яндексу? Мне где-то попадался такой код, но к сожалению он был с ошибками и толку соответственно от него не было.
http://stackoverflow.com/questions/3861238/how-to-block-search-engines-from-indexing-all-urls-beginning-with-origin-domainn
и ещё
Header set X-Robots-Tag "noindex, nofollow"
и ещё
Header set X-Robots-Tag "noindex, nofollow"