запрет для паука через htaccess

[di55]

Люди добрые помгите советом. Как в htaccess прописать файлы которые поисковый паук не должен просматривать? Т.е. поставить запрет для поисковика на определенные страницы

 

[B1rdEX]

Клоакинг? оО :-D

чем тебе robots.txt не угодил? Как раз то, что тебе нужно.

 

[Dimaker]

robots.txt банально проверяют при добавлениии сайта в каталоги, хочется с жулиничать

 

[zerdek]

ну можешь отдавать разный robots.txt поисковикам и каталогам.

 

[General Fizz]

robots.txt - абсолютно ненадежно

посылаем **х всех серферов с юзер-агентом, содержащим подстроки yandex и google

RewriteCond %{HTTP_USER_AGENT} ^.*google.* [NC]
RewriteCond %{HTTP_USER_AGENT} ^.*yandex.* [NC]
RewriteRule ^(.*)$ - [F]

 

[Vetaln]

Чтобы отсеять ботов

Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.

Вот еще

Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.

Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.

 

[Dimaker]

Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.

2 вариант

Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.

 

[Dimaker]

а как запретить определеный файл к индексированию через htaccess

 

[Vetaln]

Запрет на конкретный файл:
Можно поставить запрет на конкретный файл по его названию и расширению.
<Files config.inc.php>
order allow,deny
deny from all
</Files>

В данном примере стоит запрет на обращения к файлу config.inc.php.

 

[General Fizz]

Запрет на конкретный файл:
Можно поставить запрет на конкретный файл по его названию и расширению.
<Files config.inc.php>
order allow,deny
deny from all
</Files>

В данном примере стоит запрет на обращения к файлу config.inc.php.

Это запрет любого обращения к файлу, запрет индексирования делается через роботс.тхт или так:

<Files config.inc.php>
RewriteCond %{HTTP_USER_AGENT} ^.*google.* [NC]
RewriteCond %{HTTP_USER_AGENT} ^.*yandex.* [NC]
...
RewriteRule ^(.*)$ - [F]
</Files>