Aim Market Parser

Puppeteer-парсер aim.market: параллельные браузеры, обход антибот-защиты и сбор цены, износа и выгоды по предметам.

01 / 01

О проекте

Стек: Node.jsPuppeteerpuppeteer-extrapuppeteer-extra-plugin-stealthJavaScript

Парсер торговой площадки aim.market. Проходит по заданным ценовым диапазонам и по каждому предмету собирает ссылку, название, цену, износ и выгоду.

Обход распараллелен: одновременно работает несколько изолированных браузеров, каждый прокручивает виртуализированную сетку карточек и подгружает позиции по мере скролла. Антибот-защита обходится stealth-плагином.

Итог сохраняется в JSON вместе с метаданными о прогоне - сколько позиций собрано и сколько времени занял парсинг.