Обход cloudflare на сайте https://www.coingecko.com/
На данном сайте присутствует защиты cloudflare - https://www.coingecko.com/ Как мне обойти эту защиту, желательно без selenium. Меня пропускало, когда я отправлял запрос с куки __cf_bm, тогда было все нормально, я каждые примерно 30 мин, брал вручную из браузера этот куки, но спустя несколько часов парсинга, этот способ перестал работать, то есть при отправке этого куки меня не пропускал cloudflare. Пробовал использовать cfscrape, aiocfscrape, а также cloudscraper - ничего не помогает, хотя может я как-то неправильно отправляю запрос с помощью этих утилит, но это мало вероятно, так как все сделал по примерам из просторов Интернета.
Ответы (1 шт):
Автор решения: user2240578
→ Ссылка
- Попробуй там зарегистрироваться и посмотри с какого айпи придет письмо.
- Это будет реальный айпи-адрес сервера.
- Смотришь открыты ли 80 и 443 порты у этого айпи, смотришь сертификаты, если он самый, то идем далее.
- В
/etc/hostsвписываешьcoingecko.com <реальный ip сервера> - Парсишь сайт.