Современный скрапинг веб-сайтов с помощью Python (2021) Райан Митчелл, «Питер»

Если программирование напоминает волшебство, то веб-скрапинг - это очень сильное колдунство. Написав простую автоматизированную программу, можно отправлять запросы на веб-серверы, запрашивать с них данные, а затем анализировать их и извлекать необходимую информацию.

Новое расширенное издание книги знакомит не только с веб-скрапингом, но и поможет собрать любого вида данные в современном Интернете.

В части I основное внимание уделено механике веб-скрапинга: как с помощью Python запрашивать информацию с веб-сервера, производить базовую обработку серверного отклика и организовать автоматизированное взаимодействие с сайтами. В части II исследованы более специфичные инструменты и приложения, которые пригодятся при любом сценарии веб-скрапинга.

- Разбирайте сложные HTML-страницы.
- Разрабатывайте поисковые роботы с помощью фреймворка Scrapy.
- Изучайте методы хранения данных, полученных с помощью скрапинга.
- Считывайте и извлекайте данные из документов.
- Очищайте и нормализуйте плохо отформатированные данные.
- Читайте и пишите информацию на естественных языках.
- Освойте поиск по формам и логинам.
- Изучите скрапинг JavaScript и работу с API.
- Используйте и пишите программы для преобразования изображений в текст.
- Учитесь обходить скрапинговые ловушки и блокаторы ботов.
- Протестируйте собственный сайт с помощью скрапинга.

Уважаемый покупатель.

Производитель оставляет за собой право изменять характеристики, комплектацию, описание товара. Мы стараемся своевременно вносить изменения на страницах нашего магазина Белка.By.

Характеристики товара получены из открытых источников, в т.ч. из каталогов производителя и официальных сайтов. 100% точность и полнота описаний не гарантированы.

Если Вы нашли неточности в описании и характеристиках, то отправьте нам на e-mail errors@belka.by наименование товара и пункт, в котором содержится ошибка. Также вы можете указать в отзыве к этому товару о наличии неточностей в описании.

Данное предложение не является публичной офертой. Выбранный Вами товар может отсутствовать на складе, и/или быть зарезервированным, оплаченным другим покупателем и изменен в цене.

Если выбранный товар был зарезервирован, оплачен другим покупателем, или на складе хранения нет в наличии необходимого количества, то мы постараемся, при условии наличия товара у поставщиков/производителей, организовать поставку товаров белорусских производителей в течение 7-10 дней, российских 7-15 дней. Планируйте свои покупки заранее, учитывая эти сроки, особенно, если они приходятся период повышенного спроса, праздники и выходные дни.