import requests
from bs4 import BeautifulSoup
def Parser():
url ='http://incrussia.ru/news/' #url сайта
headers = {'User-Agent': 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_10_1) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/39.0.2171.95 Safari/537.36'}
response = requests.get(url, headers=headers)
soup = BeautifulSoup(response.text, 'lxml')
names = soup.find_all('div', class_='title') # заголовки
date = soup.find_all('div', class_='date') # даты
for i in range(0, len(names)):
print((names[i].text + ' : ' + date[i].text + ' - ' + names[i].get('href'))) # тут собираю всё вместе , часть после запятой это ссылка
Parser()