Aprenda técnicas de web scraping e web crawling para acessar dados ilimitados a partir de qualquer fonte na Web e em qualquer formato. Com este guia prático, você aprenderá como usar scripts Python e APIs da Web para coletar e processar dados de milhares ou até mesmo milhões de páginas web ao mesmo tempo.
Ideal para programadores, profissionais de segurança e administradores da Web familiarizados com Python, este livro não só ensina o funcionamento básico do web scraping, mas também se aprofunda em tópicos mais avançados, como a análise de dados brutos ou o uso de scrapers para teste web em frontend. Exemplos de código estão disponíveis para ajudá-lo a entender os conceitos na prática.
Aprenda como analisar páginas HTML complicadas.
Percorra várias páginas e diversos sites.
Obtenha uma visão geral das APIs e de como elas funcionam.
Aprenda vários métodos para o armazenamento dos dados coletados.
Baixe, leia e extraia dados de documentos.
Use ferramentas e técnicas para organizar dados mal-formatados.
Leia e escreva em idiomas naturais.
Rastreie formulários e logins.
Aprenda como fazer o scraping de JavaScript.
Conheça o processamento de imagens e o reconhecimento de texto.