Веб-скрейпинг на Python: запускаем парсинг сайтов за 1 час
Парсинг решает кучу практических задач — например, можно отслеживать скидки и сравнивать цены. Простое решение на Python.
7К открытий7К показов
Веб-скрейпинг — это метод автоматизированного извлечения данных с сайтов. С его помощью можно решать разные задачи. Например:
- отслеживать скидки на определённые товары в интернет-магазинах;
- сравнивать цены на разных сервисах;
- ловить низкие цены на авиабилеты.
Вариантов применения намного больше, надо только включить фантазию. Главное, не собирать информацию, защищённую законом, — например, персональные данные пользователей.
В этом видео парсинг на Python реализован с помощью библиотеки Beautiful Soup. Она позволяет собирать информацию с любых ресурсов, будь то социальная сеть, Википедия или интернет-магазин. Библиотека предоставляет методы для навигации, поиска и изменения синтаксического дерева.
01:22 В первой части курса вы изучите концепцию на примере скрейпинга базовой HTML-страницы.
24:48 Во второй части курса научитесь извлекать данные с реального сайта.
1:01:53 Напоследок узнаете, как сохранить собранные данные.
Посмотрите также подборку других инструментов для веб-скрейпинга. Там есть примеры онлайн-сервисов, а также библиотеки для Python, JavaScript и Java.
7К открытий7К показов
Сортировка задач по важности. Рассказываем, какие методы приоритезации помогают достигать цели проекта. Расставляем приоритеты с учетом ценности, рисков и сложности задачи ✔ Tproger
Собрали всё, что нужно DevOps-инженеру: CI/CD, Kubernetes, серверлесс, безопасность, мониторинг и альтернативы Docker — практично и по делу.
Рассказываем, как мы заставили GX подружиться с Impala.
Как запустить DeepSeek локально и использовать её для поиска по документации? Разбираем ключевые особенности модели, её преимущества перед ChatGPT, влияние на рынок и применение технологии RAG.