Le rôle :

• Développer et maintenir des outils de scraping web robustes et performants en utilisant NodeJS et des bibliothèques de scraping populaires.

• Collecter et extraire des données précieuses à partir de divers sites web et sources en ligne.

• Nettoyer et structurer les données collectées pour les rendre utilisables et accessibles.

• Automatiser le processus de scraping pour garantir une collecte de données régulière et à jour.

• Intégrer les données collectées dans nos systèmes et bases de données existantes.

• Optimiser les performances des outils de scraping pour minimiser l'impact sur les sites web ciblés.

• Collaborer avec les équipes de data analysts et de data scientists pour exploiter les données collectées.

Les compétences :

• Solide maîtrise du langage de programmation NodeJS et des frameworks de développement web associés.

• Expérience pratique avec des bibliothèques de scraping populaires telles que Puppeteer, Cheerio ou Scrapy.

• Bonne compréhension des principes du scraping web et des techniques d'extraction de données.

• Capacité à écrire du code propre, efficace et maintenable.

• Aptitudes en résolution de problèmes et capacité à identifier et corriger les erreurs de scraping.

• Excellent sens du détail et souci de la qualité.

• Bonne communication écrite et orale.

Les missions :

• Développer des scripts de scraping pour collecter et structurer des données à partir de différentes sources web.

• Optimiser les performances et la fiabilité des processus de scraping en tenant compte des restrictions et des politiques des sites ciblés.

• Collaborer étroitement avec les équipes de données et les analystes pour fournir des ensembles de données précis et exploitables.