Re: robots detector [sorry for offtopic]
On Fri, 2 Nov 2001, Иван Лох wrote:
> > Может кто-нибудь знает-сталкивался с программами, которые по лог-файлу
> > апача могут определить робота, который скачивает данные с сайта?
> > В основном интересует защита от "самописных" роботов всяких супостатов,
>
> То есть если я сказал wget -rl1 http://...
> то я супостат от которого надо защищаться? По моему это противоречит не
> только здравому смыслу, но и фундаментальным принципам, заложенным в
> основу интернета. Бывает информация открытая и закрытая (то есть требующая
> авторизации для ее получения), все остальное -- нонсенс
Выкачивание динамических сайтов wget -r это тоже нонсенс. Который к тому
же еще и сервер заметно пригружает.
--
Victor Wagner vitus@ice.ru
Chief Technical Officer Office:7-(095)-748-53-88
Communiware.Net Home: 7-(095)-135-46-61
http://www.communiware.net http://www.ice.ru/~vitus
Reply to: