Можно ли парсить сайт, пройдя защиты cloudflare и подобные, лишь один раз?

Я не спец ни в вебе, ни в питоне, но если дать нужное направление, могу вкурить в тему. Нужно просто решить нужную мне задачу по парсингу сайта. Так вот сама проблема: Когда через BeautifulSoup получаю страницу сайта, он мне возвращает html страницы дудос защиты. Через cloudscraper обошел это, но теперь каждая итерация программы занимает времени больше секунды, потому что каждый раз мне надо заглядывать в разные разделы сайта. Это очень долго. Так вот, можно ли как то приблизить процесс парсинга к реальному использованию? Ну то есть, как у людей происходит: один раз прошел защиту и сиди кайфуй, пока сеанс работы с сайтом не закончишь. Можно ли это как то реализовать с помощью Python?


Ответы (0 шт):