Twiceler — наглый бот!
В логах его видно как
Mozilla/5.0 (Twiceler-0.9 http://www.cuill.com/twiceler/robot.html)
Приходил ко мне сначала с подсети 38.99.*, нагружает серв страшно.
роботс.тхт ему не указ, хоть на офф сайте пишуть, что все он понимает. Фих там, пришлось банить другими средствами.
Если кого достаёт эта зараза, добавляйте в хтакчес след строчки
Бан по айпи Twiceler
# Ban Twiceler bot by IP
order allow,deny
deny from 38.99
deny from 64.1.215
deny from 208.36.144
allow from all
Бан по юзер агенту Twiceler
# Ban Twiceler bot by user agent
RewriteEngine on
RewriteCond %{HTTP_USER_AGENT} ^.*Twiceler-0\.9.*$ [NC]
RewriteRule ^.* - [F]
з.ы. Покажите мне этих разработчиков, я им крепко пожму горло.
SEO - Written by pix on Среда, Ноябрь 21, 2007 5:49 - 6 Comments
Комментариев – 6
угу, мне тож интересно
Я даже не задумывался! спасибо за информацию!
Pal_Seich
Хахаха прикольный бот мне понравился.
Brem
с такими бота напряжение можно снимать.
ИНИС
То же сегодня заходил этот бот, вот и решил посмотреть в инете, что да кто это. У меня пока взял только одну главную страницу, но смущает, что robots.txt не взял, в отличие от других поисковиков - это смущает сильно. На сайте написано, что это какой-то стартап, но что-то стартап их слишком затягивается и отзывы на их паука не положительные.
В инете нашел письмо, что можно написать на адрес: costello [at] cuill.com и они уберут Ваш сайт из списков на индексацию. Может кому-то понадобится.
Оставьте свой комментарий
Разное - Ноя 26, 2008 8:55 - 2 Comments
Биокамин: тепло и уютно
More In Разное
- HDOS Databank
- Война 08.08.08. Искусство предательства
- Денежное..
- Заказная пиар акция AT&T совместно с iPhone или Блондинко пиарится?
- Рок фестиваль Старый Мельник 2007
Что это вообще за бот?