Полки для сноуборда - скейта - лонга

Для отчета на работе нужно собрать информацию о ценах конкурентов, использую парсер. Но почти сразу после старта парсера сайт меня блочит, видимо, из-за большого количества запросов с одного IP. Пробовал ограничивать скорость, но это сильно замедляет работу. Есть ли способ обойти эти блокировки и нормально собирать данные?

Привет, ситуация знакома всем, кто занимается парсингом. Сайты действительно часто банят IP, если видят слишком много запросов с одного адреса, особенно если это выглядит как автоматизация. Чтобы обойти такие блокировки, я советую купить прокси и не мучиться с данной проблемой. Можно настроить ротацию IP (например, менять адрес каждые пару минут или по запросу), чтобы сайт не заподозрил бота. Это сильно увеличивает объем данных, которые можно собрать, и ускоряет процесс, так как не нужно искусственно ограничивать скорость.