Web-scraping - Riptutorial

web-scraping #webscraping

Table des matières À propos 1 Chapitre 1: Démarrer avec le web-scraping 2 Remarques 2 Examples 2 Scraping Web en Python (en utilisant BeautifulSoup) Crédits 2 4

À propos You can share this PDF with anyone you feel could benefit from it, downloaded the latest version from: web-scraping It is an unofficial and free web-scraping ebook created for educational purposes. All the content is extracted from Stack Overflow Documentation, which is written by many hardworking individuals at Stack Overflow. It is neither affiliated with Stack Overflow nor official web-scraping. The content is released under Creative Commons BY-SA, and the list of contributors to each chapter are provided in the credits section at the end of this book. Images may be copyright of their respective owners unless otherwise specified. All trademarks and registered trademarks are the property of their respective company owners. Use the content presented in this book at your own risk; it is not guaranteed to be correct nor accurate, please send your feedback and corrections to info@zzzprojects.com https://riptutorial.com/fr/home 1

Chapitre 1: Démarrer avec le web-scraping Remarques Cette section fournit une vue d'ensemble de ce qu'est le Web-scraping et pourquoi un développeur peut vouloir l'utiliser. Il devrait également mentionner tous les sujets importants dans le web-scraping et les relier aux sujets connexes. La documentation pour le raclage Web étant nouvelle, vous devrez peut-être créer des versions initiales de ces rubriques connexes. Examples Scraping Web en Python (en utilisant BeautifulSoup) Lors de l'exécution de tâches de science des données, il est courant de vouloir utiliser des données trouvées sur Internet. Vous pourrez généralement accéder à ces données via une interface de programmation d'application (API) ou dans d'autres formats. Cependant, il arrive que les données que vous souhaitez ne soient accessibles que dans le cadre d’une page Web. Dans de tels cas, une technique appelée web scraping apparaît. Pour appliquer cette technique pour obtenir des données à partir de pages Web, nous devons avoir des connaissances de base sur la structure des pages Web et les balises utilisées dans le développement de pages Web ( html , li , div etc.). Si vous êtes nouveau dans le développement Web, vous pouvez l’apprendre ici . Donc, pour commencer avec la mise au rebut sur le Web, nous utiliserons un site Web simple. Nous utiliserons le module de requests pour obtenir le contenu de la page Web OU le code source. import requests page aping-pages/simple.html") print (page.content) ## shows the source code Nous allons maintenant utiliser le module bs4 pour supprimer le contenu pour obtenir les données utiles. from bs4 import BeautifulSoup soup BeautifulSoup(page.content, 'html.parser') print(soup.prettify()) ##shows source in html format Vous pouvez trouver les balises requises en utilisant l'outil inspect element dans votre navigateur.Maintenant, vous voulez obtenir toutes les données stockées avec la li . soup.find all('li') # you can also find all the list items with class 'ABC' # soup.find all('p', class 'ABC') https://riptutorial.com/fr/home 2

# # # # OR all elements with class 'ABC' soup.find all(class "ABC") OR all the elements with class 'ABC' soup.find all(id "XYZ") Ensuite, vous pouvez obtenir le texte dans la balise en utilisant for i in range(len(soup.find all('li'))): print (soup.find all('li')[i].get text()) Le script entier est petit et assez simple. import requests from bs4 import BeautifulSoup page aping-pages/simple.html") #get the page soup BeautifulSoup(page.content, 'html.parser') # parse according to html soup.find all('li') #find required tags for i in range(len(soup.find all('li'))): print (soup.find all('li')[i].get text()) Lire Démarrer avec le web-scraping en ligne: demarrer-avec-le-web-scraping https://riptutorial.com/fr/home 3

Crédits S. No Chapitres Contributeurs 1 Démarrer avec le web-scraping Community, thepurpleowl https://riptutorial.com/fr/home 4

from: web-scraping It is an unofficial and free web-scraping ebook created for educational purposes. All the content is extracted from Stack Overflow Documentation, which is written by many hardworking individuals at Stack Overflow. It is neither affiliated with Stack Overflow nor official web-scraping.