ПАРСИМ НОВОСТИ на PYTHON | Requests | BeautifulSoup | Хабр

В этом видео попробуем спарить новости с сайта habr, используя язык программирования python и библиотеки bs4 и requests.
Подписывайся на наш телеграм канал!
t.me/pythonhub001
И на телеграмм чат :)
t.me/pythonhub_chat
Полезные ссылки:
Ссылка на код:
gitlab.com/shcoder001/habr_pa...
Ссылка на requests:
pypi.org/project/requests/
Ссылка на bs4:
pypi.org/project/beautifulsoup4/
#python #parsing #парсинг #новости #bs4 #requests #пайтон

[@shcoder001]

Подписывайся на наш телеграм канал!
t.me/pythonhub001
И на телеграмм чат :)
t.me/pythonhub_chat

[@man_with-no_name]

Привет! можно ли спарсить сайт с фильмами, чтобы программа выдавала ссылку на полный фильм, которая спрятана в xhr файле раздела Network? По итогу открывается обычный mp4 файл через браузер с возможностью его скачать

[@user-cd9ib9hj8p]

самое полезное видео для начинающих, спасибо!

[@shcoder001]

[@Ze1myy]

Отличное видео! Продолжай в том-же духе.

[@shcoder001]

спасибо!

[@user-ro7id9xk3y]

Полезные видео! Могли бы записать видео по парсингу Авито, как обходить блокировки, как подменить ip и user:agent.

[@shcoder001]

спасибо! подумаю, над вашим предложением

[@MrBooomsik]

Добрый день, подскажи пожалуйста как с этого сайта спарсить вакансии

[@shcoder001]

возможно сниму об этом отдельное видео. Думаю, что стоит просто запарсить данные по ссылке career.habr.com/vacancies?type=all

[@user-wx9rr3gh5s]

Подскажите, как парсить новости по ключевым словам, что нужно добавить в ваш код???

[@shcoder001]

А где они прописаны?

[@user-wx9rr3gh5s]

Например мне нужно искать только новости в заголовке которого присутствует слово Москва

[@shcoder001]

@@user-wx9rr3gh5s
if 'москв' in title.lower():
print(title, link)
Я бы добавил что-то вроде такой проверки. Идею я донес, нужно доразвить.

[@karinapivtorak3147]

подскажите, пожалуйста, если в коде не указана а(или любая другая буква) , можно ли как-то по-другому найти?
title = article.a.span.text

[@shcoder001]

да, можно