Crawler le web avec 80legs

80legs-com
Lien

80legs est un service proposant de parcourir le web (i.e. crawler) en fonction de vos besoins. Il existe un pack gratuit, et différents packs payant, permettant de créer ses propres crawlers et robots d’extraction de données.
Le service propose aussi des robots déjà programmés par thématique (media sociaux, avis de consommateurs, immobilier, annuaires). Enfin, une API permet de créer à la volée des crawlers, et bien entendu, cette API permet de récupérer les données extraites par les robots.

Un service plutôt pratique si vous n’avez pas envie de maintenir vos propres serveurs pour ce type de taches.