Twiceler — наглый бот!

В логах его видно как

Mozilla/5.0 (Twiceler-0.9 http://www.cuill.com/twiceler/robot.html)

Приходил ко мне сначала с подсети 38.99.*, нагружает серв страшно.
роботс.тхт ему не указ, хоть на офф сайте пишуть, что все он понимает. Фих там, пришлось банить другими средствами.
Если кого достаёт эта зараза, добавляйте в хтакчес след строчки

Бан по айпи Twiceler

# Ban Twiceler bot by IP
order allow,deny
deny from 38.99
deny from 64.1.215
deny from 208.36.144
allow from all

Бан по юзер агенту Twiceler

# Ban Twiceler bot by user agent
RewriteEngine on
RewriteCond %{HTTP_USER_AGENT} ^.*Twiceler-0\.9.*$ [NC]
RewriteRule ^.* - [F]

з.ы. Покажите мне этих разработчиков, я им крепко пожму горло.

SEO - Written by pix on Среда, Ноябрь 21, 2007 5:49 - 6 Comments



Комментариев – 6


Bolton
Фев 21, 2008 6:21

Что это вообще за бот?

antyanesko
Мар 12, 2008 16:12

угу, мне тож интересно :)

fatjoe
Мар 24, 2008 21:55

Я даже не задумывался! спасибо за информацию!

Pal_Seich
Апр 3, 2008 17:33

Хахаха прикольный бот мне понравился.

Brem
Апр 6, 2008 11:50

с такими бота напряжение можно снимать.

ИНИС
Июл 21, 2008 19:52

То же сегодня заходил этот бот, вот и решил посмотреть в инете, что да кто это. У меня пока взял только одну главную страницу, но смущает, что robots.txt не взял, в отличие от других поисковиков - это смущает сильно. На сайте написано, что это какой-то стартап, но что-то стартап их слишком затягивается и отзывы на их паука не положительные.
В инете нашел письмо, что можно написать на адрес: costello [at] cuill.com и они уберут Ваш сайт из списков на индексацию. Может кому-то понадобится.

Оставьте свой комментарий

Comment

Разное - Ноя 26, 2008 8:55 - 2 Comments

Биокамин: тепло и уютно

More In Разное


Разное - Ноя 26, 2008 8:55 - 2 Comments

Биокамин: тепло и уютно

More In Разное


Разное - Ноя 26, 2008 8:55 - 2 Comments

Биокамин: тепло и уютно

More In Разное