Windows
Python 3.7
requests 2.23.0
beautifulsoup4 4.9.0
Сразу представлюсь, я новичок в программировании.
На сайте google.com результаты поиска находятся в элементах <div class="r"> (правой кнопкой мыши по ссылке -> Посмотреть код). Пытаюсь получить ссылки результатов поиска. Использую requests.get(), но та часть кода, которая меня интересует, отсутствует. Подскажите, каким образом можно получить результаты поиска?
Python 3.7
requests 2.23.0
beautifulsoup4 4.9.0
Сразу представлюсь, я новичок в программировании.
На сайте google.com результаты поиска находятся в элементах <div class="r"> (правой кнопкой мыши по ссылке -> Посмотреть код). Пытаюсь получить ссылки результатов поиска. Использую requests.get(), но та часть кода, которая меня интересует, отсутствует. Подскажите, каким образом можно получить результаты поиска?
Python:
import requests
from bs4 import BeautifulSoup
search_str = 'как работать с beautifulsoup'
res = requests.get('http://google.com/search?q=' + search_str)
res.raise_for_status()
print(res.url)
soup = BeautifulSoup(res.text, 'lxml')
linkElems = soup.select('.r')
print(linkElems)