Ботсир
- BotSeer — веб-информационная система для изучения веб-роботов и тенденций в области роботов.
- Ботсир был создан Ян Суном, Айзеком Г. Советником, Цимин Чжуан и К. Ли Джайлсом.
- Ботсир работал с 2007 по 2010 год и предоставлял услуги по поиску robots.txt, анализу ошибок робота и анализу логов.
- Ботсир проиндексировал и проанализировал 2,2 миллиона robots.txt файлов и большой журнал веб-сервера.
- Ботсир помогал исследователям, веб-мастерам, разработчикам веб-сканеров и другим лицам в исследованиях и получении информации о веб-роботах.
- Ботсир установил honeypot для проверки этики, производительности и поведения веб-сканеров.
Полный текст статьи: