Скрапинг на 360°: от простых HTTP-запросов до использования компьютерного зрения

За 40 минут вы разберётесь, как устроен современный веб-скрапинг. Начнём с основ: HTTP-запросы, прокси (datacenter, residential, mobile), автоматизация браузеров. Затем посмотрим, как работают CAPTCHA, что такое fingerprinting, как сайты вычисляют ботов и как это обходят.

Вы узнаете:

— какие бывают прокси и зачем они нужны;

— как устроены стелс-браузеры и “человекоподобные” генераторы трафика;

— что делают безопасники, чтобы защитить сайты;

— как устроены WAF- и антибот-системы.

Если вы хотите понять, как сегодня собирают данные с веба и как этому мешают, – приходите.