» » Автоматические запросы в яндексе

Автоматические запросы в яндексе

Чей антибот лучше? Обзор алгоритмов защиты поисковых систем Рунета от парсинга

В далеких 90-х, когда только появлялись первые поисковые системы, начали проявляться основные проблемы, среди которых была и чрезмерная нагрузка. Нагрузка создавалась как обычными пользователями, так и автоматическими средствами.
Вначале поисковые системы были практически беззащитны, но с ростом популярности и увеличением количества пользователей им пришлось учиться защищаться.

Мы провели небольшое исследование — как и при каких условиях популярные поисковые системы в Рунете ограничивают доступ к поиску. Результаты читайте ниже.

Основные способы защиты

Итак, прежде чем описывать способы защиты каждой поисковой системы в отдельности, хотелось бы отметить известные на данный момент способы защиты:

1. Ограничение на выполнение 1 запроса с одного IP адреса в одну единицу времени (по умолчанию).
2. Предложение ввода капчи при подозрительном трафике (превышение лимита запросов, некорректный формат запроса и т.п.).
3. Увеличение времени ответа сервера (задержка) при большом количестве последовательных (один за другим) запросов.
4. Сохранение файлов cookies для хранения ID пользователя, истории запросов и ввода капч, настроек и многого другого.
5. Полное блокирование на некоторый промежуток времени а-ля “Сервис недоступен”.
6. Еще 1 способ защиты Google, который был открыт нами опытным путем — учет группы IP адресов как 1 IP по каким-либо признакам.

CAPTCHA


не разу не видел, видать очень быстро сёрфишь =)


eresik, аналогичная ситуация с сайтаудитором.. иногда просто не показывает позиции для Яндекса. когда после проверки Аудитором заходишь в яндекс: капча - привычное дело уже для меня((


Не знаю связано ли, но у меня site-auditor теперь очень часто врёт по поводу страниц в индексе яндекса (пишет ноль)
Да, связано. Забыл написать что изменились тексты ответов на запросы. Теперь программы надо обновлять.


videomostru

28.07.2010, 16:00

Вот сейчас мучаюсь с ВинкоПлагином. На моем компе он еще со вчерашней ночи уходит при проверке HOST в Я Робот. Запустил через впн с другой тачки, плагин обновил - проверил 100 заявок и в бесконечный Я Робот. Сижу незнаю что делать 500 заявок висит не обработанных...


CAPTCHA чаще всего используется при необходимости предотвратить использование интернет-сервисов ботами, в частности, для предотвращения автоматических отправок сообщений, регистрации, скачивания файлов, массовых рассылок и т. п.

Как предотвратить появление капчи в поиске Яндекса, вот здесь есть возможные решения

Ошибка 1505 user profile

Данный вариант, в общем-то повторяет предыдущий, но, возможно, кому-то будет удобнее и понятнее. Для этого нам понадобится бесплатная антивирусная утилита AVZ, которую можно бесплатно скачать отсюда: 

После загрузки, распакуйте ее из архива, запустите, и в главном меню нажмите «Файл» — «Исследование системы». После этого нажмите кнопку «Пуск», какие-либо настройки изменять не нужно (единственное, нужно будет указать, куда сохранить отчет).

3. В протоколе исследования системы «avz_sysinfo.htm» необходимо найти раздел «Автозапуск», в котором найти и запомнить имя dll-файла, зарегистрированного в разделе системного реестра: HKEY_LOCAL_MACHINE, Software\Microsoft\Windows NT\CurrentVersion\Windows, AppInit_DLLs. Обычно, этот dll-файл находится в каталоге c именем Mozilla.

Удаление вируса «Яндекс Ой» с помощью утилиты AVZ - Автозапуск

Пользователям Mozilla Firefox повезло больше. У RDS для Firefox есть меню настроек, в котором при желании можно отключить отслеживание тех показателей сайтов, которые вызывают появление капчи. На скриншоте ниже я указал их красной стрелкой:

Настройки RDS bar чтобы не появлялась капча в поиске Яндекса

ВНИМАНИЕ. Во всех случаях Вы должны:

  • после всего проделанного проверьте компьютер на наличие вирусов,  запустите утилиты по чистке реестра;
  • измените пароли от почтового ящика, в Одноклассниках, ВКонтакте и т.п.;
  • Вы должны быть администратором на своём компьютере.

Переустановка системы — эта самая крайняя мера борьбы с вирусом! Наша задача — найти и обезвредить вирус! 

Главное! Не отправляйте никакие смс! Ищите вирусы! Удачи!

Как видите удаляется этот вирус просто, но в тоже время его наличие заставляет задуматься о степени защиты своего компьютера.

Наверх