Современный скрапинг веб-сайтов с помощью Python. 2-е межд. издание

Автор: Райан Митчелл

Читать

Отложить

Прочитано

По подписке «Чуть-чуть»

Доступ к каталогу на 10 часов в месяц. Например, чтобы читать по полчаса в рабочие дни. Не включает некоторые новинки и бестселлеры, которые не доступны по подписке

При первом подключении подписки вы получите 14 дней бесплатного пробного периода. После его истечения будет списана стоимость подписки за 1 месяц — 299 рублей. Подписка продлевается автоматически каждый месяц, но может быть отменена в любой момент.

299 ₽ в месяц

Книги, аудиокниги, подкасты и журналы

Тематические подборки и персональные рекомендации

Собственные книги и подкасты, а также эксклюзивы, которые есть только у нас

3 монеты каждый месяц на приобретение новинок и бестселлеров

299 ₽ в месяц

Все варианты приобретения

О книге

Если программирование напоминает волшебство, то веб-скрапинг — это очень сильное колдунство. Написав простую автоматизированную программу, можно отправлять запросы на веб-серверы, запрашивать с них данные, а затем анализировать их и извлекать необходимую информацию. Новое расширенное издание книги знакомит не только с веб-скрапингом, но и поможет собрать любого вида данные в современном Интернете.
В части I основное внимание уделено механике веб-скрапинга: как с помощью Python запрашивать информацию с веб-сервера, производить базовую обработку серверного отклика и организовать автоматизированное взаимодействие с сайтами. В части II исследованы более специфичные инструменты и приложения, которые пригодятся при любом сценарии веб-скрапинга.
- Разбирайте сложные HTML-страницы.
- Разрабатывайте поисковые роботы с помощью фреймворка Scrapy.
- Изучайте методы хранения данных, полученных с помощью скрапинга.
- Считывайте и извлекайте данные из документов.
- Очищайте и нормализуйте плохо отформатированные данные.
- Читайте и пишите информацию на естественных языках.
- Освойте поиск по формам и логинам.
- Изучите скрапинг JavaScript и работу с API.
- Используйте и пишите программы для преобразования изображений в текст.
- Учитесь обходить скрапинговые ловушки и блокаторы ботов.
- Протестируйте собственный сайт с помощью скрапинга.