Почему Scanurik и Glisa присылают лоты с задержкой 1–2 минуты: разбор архитектуры

Каждый, кто занимается перепродажей электроники, авто или недвижимости на Avito, сталкивался с ситуацией: бот присылает горячее объявление с ценой на 30% ниже рынка, вы открываете ссылку через 5 секунд, а продавец уже отвечает: «Извините, уже внесли задаток».

Почему так происходит? Дело в том, что бот прислал вам лот не через 5 секунд после публикации, а через 60–90 секунд. Разберем, как устроены классические парсеры вроде Scanurik и Glisa, и почему они физически не могут работать быстрее.

3 главные причины задержек у старых ботов#

1. Монолитные очереди задач (Task Queues)

Старые сервисы используют централизованную очередь. Когда 10 000 пользователей настраивают по 5 поисков, сервер циклически обходит их один за другим. Если в очереди возник затор или сайт Avito ответил с задержкой, весь поток смещается на 1–2 минуты.

2. Тяжелые браузерные движки (Headless Chrome / Puppeteer)

Ряд ботов для обхода защиты запускает полноценный headless-браузер на каждый запрос. Рендеринг JS-скриптов и картинок отнимает 3–7 секунд на один URL. В масштабе тысяч запросов это создает огромный лаг.

3. Блокировки датацентровых IP и капча

Avito постоянно совершенствует алгоритмы антифрода. Когда сервис использует дешевые серверные прокси, IP-адреса попадают под проверку капчи. Пока система пытается разгадать капчу через сторонний сервис, проходит от 20 до 40 секунд. За это время лот уже выкуплен.

Как Avigram решил проблему скорости#

В Avigram архитектура изначально проектировалась под нулевую задержку:

• Интервал опроса от 500 мс: микроворкеры распределены по десяткам дата-центров и опрашивают выдачу непрерывным потоком.
• Легковесные протоколы без рендеринга: данные извлекаются напрямую из структуры ответа без тяжелого браузерного стека.
• Пул резидентных и мобильных прокси с ротацией 99.9%: запросы неотличимы от действий обычных мобильных пользователей приложения Avito.
• Мгновенный вебхук в Telegram: уведомление формируется и пушится в мессенджер за 0.1 секунды после появления лота в API.

Замер скорости секундомером#

По данным независимых замеров исследования скорости мониторинга:

• Avigram: 0.5 – 1.8 секунды.
• Scanurik: 40 – 90 секунд.
• Glisa: 60 – 120 секунд.
• Ручной поиск: от 3 до 15 минут.

Убедитесь в разнице самостоятельно: запустите 24 часа бесплатного теста Avigram параллельно с вашим текущим ботом и сравните время прихода сообщений на одном и том же поисковом запросе.