Parsowanie za pomocą Pythona. Web scraping w akcji

Pcasowanie za pomocą Pythona. Web scraping w akcji Jeśli programowanie to magia, to web scraping to prawdziwa czarodziejska sztuka. Napisanie prostej automatyzowanej aplikacji pozwala na wysyłanie zapytań do serwerów internetowych, otrzymywanie odpowiedzi z danymi, a następnie analizowanie tych danych i... wydobywanie potrzebnych informacji. To zaktualizowane trzecie wydanie książki nie tylko zapozna cię z web scrapingiem, ale także stanie się wyczerpującym przewodnikiem po zbieraniu praktycznie wszelkiego rodzaju danych w nowoczesnym Internecie. W części I główny nacisk kładzie się na mechanikę web scrapingu: jak za pomocą Pythona wysyłać zapytania do serwerów, przetwarzać odpowiedzi i automatyzować interakcje z witrynami. W części II badane są bardziej konkretne narzędzia i aplikacje, które będą przydatne w każdym scenariuszu web scrapingu. Książka pokaże, jak: • analizować skomplikowane strony HTML; • projektować web skanery za pomocą frameworka Scrapy; • przechowywać dane uzyskane dzięki scrapingowi; • czytać i wydobywać dane z dokumentów; • oczyszczać i normalizować źle sformatowane dane; • czytać i zapisywać informacje w naturalnych językach; • wyszukiwać w formularzach i na stronach logowania; • wykonywać scraping kodu JavaScript i pracować z API; • pisać i używać programy do konwersji obrazów na tekst; • omijać pułapki przeciwdziałające scrapingowi i blokady botów; • testować swoje strony internetowe za pomocą scrapingu.