Как обойти защиту от ботов cloudflare?

Статус
Закрыто для дальнейших ответов.

ratata

Новичок
Пользователь
Дек 29, 2021
37
1
8
Пытаюсь зайти на сайт, но на сайте защита от ботов cloudflare
Вот изначальный код, на сайте выдает ошибку

Checking your browser before accessing somesite​

This process is automatic. Your browser will redirect to your requested content shortly.
Please allow up to 5 seconds…
Python:
from selenium import webdriver

browser = webdriver.Chrome(executable_path='/Users/ivanburylov/PycharmProjects/scraper/chromedriver')
url = 'https://somesite'
browser.get(url)
time.sleep(15)
browser.close()
browser.quit()



Нашел библиотеку undetected_chromedriver.v2 (https://github.com/ultrafunkamsterdam/undetected-chromedriver)

Установил и загрузил в папку chromedriver, но при запуске кода файл удаляет и пишет ошибку:
Python:
    shutil.rmtree(self.user_data_dir, ignore_errors=False)
AttributeError: 'Chrome' object has no attribute 'user_data_dir'

вот код:
Python:
import undetected_chromedriver.v2 as uc

driver = uc.Chrome(executable_path='/Users/ivanburylov/PycharmProjects/scraper/chromedriver')
url = 'https://somesite'
driver.get(url=url)
time.sleep(15)

driver.close()
driver.quit()

В чем ошибка? или может есть способ получше обойти защиту?
 

Vershitel_sudeb

Vershitel sudeb
Команда форума
Модератор
Мар 17, 2021
971
219
43
20
Москва
обход капчи так же не приветствуется, это защита, обход защиты априори плохо...
есть более полезные темы которые требуют внимания...
Конечно темы есть, но если сайту не нравится что кто-то хочет автоматизировать процесс сбора с него информации что, нам просто сказать "ладно, не будем"? Думаю большинству не интересны хотелки тех, чьи сайты они парсят. Вон гугл вообще на этом нейронку учит на сколько я знаю.
 
  • Мне нравится
Реакции: ratata

Vershitel_sudeb

Vershitel sudeb
Команда форума
Модератор
Мар 17, 2021
971
219
43
20
Москва
Подскажи, у нас уже на форуме были такие вопросы и их тоже закрывали для ответов? Не ты, а кто-то другой? Или это только ты считаешь что здесь нельзя помогать обходить защиту?

P.s.
Ну в общем я просмотрел все закрытые для ответов темы, только две закрыты по причине "чего-то плохого". Эта, и про накрутку подписчиков в YouTube. И если накрутка плоха по понятным причинам (сначала человек себе накрутит, а потом его видео будут другим попадаться, а у него вряд-ли что-то хорошее, если он накручивает. Да и забанят его скорее всего, ему же хуже), то в автоматическом просмотре сайтов ничего плохого нет. Может, условно, я хочу собрать список товаров с сайта магазина и выбрать по своему критерию, а у них защита от ботов. Что в этом плохого.

В общем я считаю что ты закрыл тему безосновательно, просто потому, что считаешь обход блокировок не темой для форума, хотя нигде на форуме это не запрещено, и подобных прецедентов не было. Вопреки тебе тему я открывать не буду, но предлагаю в следующий раз не закрывать тему для ответов просто потому, что тебе не нравится вопрос, а просто говорить человеку, что лучше этим не заниматься.
(Опять же, накрутка на YouTube запрещена в его же правилах, вряд-ли в правилах этого сайта есть запрет парсить его ботами)
 
Последнее редактирование:
  • Мне нравится
Реакции: ratata

regnor

Модератор
Команда форума
Модератор
Июл 7, 2020
2 650
472
83
здесь это не приветствуется
 

Vershitel_sudeb

Vershitel sudeb
Команда форума
Модератор
Мар 17, 2021
971
219
43
20
Москва
здесь это не приветствуется
Почему не приветствуется? Это считай капча, что плохого в ее обходе? Или это связано с деятельностью cloudflare?
 

regnor

Модератор
Команда форума
Модератор
Июл 7, 2020
2 650
472
83
Почему не приветствуется? Это считай капча, что плохого в ее обходе? Или это связано с деятельностью cloudflare?
обход капчи так же не приветствуется, это защита, обход защиты априори плохо...
есть более полезные темы которые требуют внимания...
вы можете помогать кому и где угодно обходить защиту, но не здесь
 

regnor

Модератор
Команда форума
Модератор
Июл 7, 2020
2 650
472
83
Конечно темы есть, но если сайту не нравится что кто-то хочет автоматизировать процесс сбора с него информации что, нам просто сказать "ладно, не будем"? Думаю большинству не интересны хотелки тех, чьи сайты они парсят. Вон гугл вообще на этом нейронку учит на сколько я знаю.
повторю,
вы можете помогать кому и где угодно обходить защиту, но не здесь
 

regnor

Модератор
Команда форума
Модератор
Июл 7, 2020
2 650
472
83
хорошо
 
  • Мне нравится
Реакции: Vershitel_sudeb
Статус
Закрыто для дальнейших ответов.

Форум IT Специалистов