Парсер ложится на 3-4 - ой странице

[vlad13097]

Здравствуйте.
Парсер ложится на 3-4 - ой странице с ошибкой
Exception: 429 Client Error: Too Many Requests for url: https://www.cian.ru/cat.php?engine_version=2&p=4&with_neighbors=0&region=4959&deal_type=sale&offer_type=flat&room1=1
The collection of information from the pages with ending parse on 4 page...

[FedorSafonov]

Здравствуйте. Парсер ложится на 3-4 - ой странице с ошибкой Exception: 429 Client Error: Too Many Requests for url: https://www.cian.ru/cat.php?engine_version=2&p=4&with_neighbors=0&region=4959&deal_type=sale&offer_type=flat&room1=1 The collection of information from the pages with ending parse on 4 page...

Я для себя нашёл такое решение: загружать страницы по одной и после каждой страницы после 2-й ставить time.sleep(120), да будет намного дольше, но хоть всё загружается )

[p-o-e-t-i-q]

Здравствуйте. Парсер ложится на 3-4 - ой странице с ошибкой Exception: 429 Client Error: Too Many Requests for url: https://www.cian.ru/cat.php?engine_version=2&p=4&with_neighbors=0&region=4959&deal_type=sale&offer_type=flat&room1=1 The collection of information from the pages with ending parse on 4 page...

Используйте прокси.