Блокировка поисковых роботов скриптом
Материал из 1GbWiki.
(Различия между версиями)
Версия 22:37, 29 марта 2008 (править) NovaCxarmulo (Обсуждение | вклад) (→См. также) ← К предыдущему изменению |
Версия 07:58, 15 мая 2008 (править) (отменить) 81.1.243.193 (Обсуждение) К следующему изменению → |
||
Строка 36: | Строка 36: | ||
[[Категория:Серверная нагрузка]] | [[Категория:Серверная нагрузка]] | ||
+ | [[Категория:Программирование]] |
Версия 07:58, 15 мая 2008
Если вы хотите закрыть доступ к какому либо скрипту для поискового робота, вам нужно в начало скрипта вписать следующий код:
<?php // Crawler definitions $userAgent = strtolower($_SERVER['HTTP_USER_AGENT']); if (substr_count($userAgent, 'crawler') > 0) $isCrawler = 1; else if (substr_count($userAgent, 'yandex') > 0) $isCrawler = 1; else if (substr_count($userAgent, 'webalta') > 0) $isCrawler = 1; else if (substr_count($userAgent, 'mail.ru') > 0) $isCrawler = 1; else if (substr_count($userAgent, 'googlebot') > 0) $isCrawler = 1; else if (substr_count($userAgent, 'aport') > 0) $isCrawler = 1; else if (substr_count($userAgent, 'rambler') > 0) $isCrawler = 1; else if (substr_count($userAgent, 'yahoo') > 0) $isCrawler = 1; else if (substr_count($userAgent, 'stackrambler') > 0) $isCrawler = 1; else if (substr_count($userAgent, 'search') > 0) $isCrawler = 1; else if (substr_count($userAgent, 'indexer') > 0) $isCrawler = 1; else if (substr_count($userAgent, 'cuill.com') > 0) $isCrawler = 1; if ($isCrawler) { header("HTTP/1.0 403 Hello, Crawler!"); exit; } ?>