Девушка похожа на Элли (-:Спамеры - предложение создателям

100% определение бота или робота-паука на вашем сайте

Только что в голову пришла мысль.

Если после взятия страницы тот же хост не полез за стилями и скриптами - это сто процентов бот или робот-паук.

(-:

Comments (8):

    • honeyman
    • 18.02.2009 00:05
    • Нижний Новгород / Нижегородская область
    Или у него хороший прокси-сервер.
    • поясните?
        • honeyman
        • 18.02.2009 00:22
        • Нижний Новгород / Нижегородская область
        А что тут непонятного? Прокси-серверам свойственно кэшировать информацию. И если прокси-сервер видит по свойствам уже однажды скачанного скрипта или css-ки, что оные не менялись и меняться не будут в ближайшую пятилетку (так админ указал, или вебмастер, допустим - а с другой стороны, зачем умному админу или вебмастеру нагруженного веб-сервера указывать, что CSS-ки меняются постоянно?) - то зачем ему веб-серверу слать даже HEAD-запрос на эти файлы?
        • а вон ты о чём.... 


          это понятно! (-:


          ну так я говорю именно о первой загрузке.

            • honeyman
            • 18.02.2009 00:35
            • Нижний Новгород / Нижегородская область
            Ммм, а как её отличить? Первое обращение с какого-то IP-шника? - так прокси-сервер мог иметь другой IP-шник до этого (или быть под NAT-ом)
            • по пирожкам. обычно юзверки их кушают (-;
  • а зачем они нужны и как выглядят? ни разу не встречала)))
    • это такие незаметные насекомые. безобидные и симпатишные (-:


      у меня живут несколько (-;