Мультик, дети, воспитанные на таких книжках и программы такие же пишут..

[dil]

82.80.168.14 - - [02/Aug/2005:22:56:39 +0400] "GET /mp3/d_07.WAV HTTP/1.0" 404 216 "Download Master" "-"
82.80.168.14 - - [02/Aug/2005:22:58:07 +0400] "GET /mp3/d_07.WAV HTTP/1.0" 404 216 "Download Master" "-"
82.80.168.14 - - [02/Aug/2005:22:58:08 +0400] "GET /mp3/d_07.WAV HTTP/1.0" 404 216 "Download Master" "-"
82.80.168.14 - - [02/Aug/2005:22:58:22 +0400] "GET /mp3/d_07.WAV HTTP/1.0" 404 216 "Download Master" "-"

Этим, блин, пейсателям не приходит в голову, что если на один кусок файла сказали 404, то и на любой другой скажут ровно то же самое..
В общем, товарищ из далёкого Израиля, со вчерашнего дня пытающийся выкачать файлы в 30 потоков, отправляется учиться хорошим манерам в ipfw add reject, а "Download Master" - в список вечноотвергаемых User-agent'ов.

Upd: тут из зала спрашивают, как фильтровать по агенту. Отвечаем:
RewriteEngine On
RewriteCond %{HTTP_USER_AGENT} ^Download\ Master
RewriteRule ^.* - [G]

вместо [G] можно подставить по вкусу [F], а также
RewriteRule ^.* http://lleo.aha.ru/na/ [R=301]

Comments

Re: так сказал мой сквид

[dil.livejournal.com]

С ресолвером всё нормально, пинг у меня тоже работает. Это сквид решил, что это не IP, а символическое имя. Вот и.
Если его отключить, то мозилла тоже туда нормально попадает. И lynx это тоже не понимает. И wget.
Короче, в качестве общего направления не подходит :)