Pipeline de collecte d'offres et alimentation CRM

Automatisation — 2026

Conception d'un pipeline de production continue orienté exploitation commerciale. La collecte agrège plusieurs sources publiques d'offres d'emploi via API et lecture web, avec normalisation des annonces, dédoublonnage, filtres anti-bruit et règles d'exclusion métier. Les offres conservées sont enrichies avec des données société (identifiants, coordonnées, dirigeants, site) pour augmenter la valeur CRM. L'orchestration s'appuie sur tâches Rake, cron (Whenever) et scheduler daemon (Rufus) pour lisser les envois CRM par batches, gérer les reprises et éviter les pics de charge. La solution intègre aussi l'export XLSX/email, des logs structurés et des statistiques de run pour piloter le rendement des sources et la qualité des leads.

Fonctionnalités

• Collecte automatisée multi-sources d'offres d'emploi publiques via API et lecture web
• Consolidation et dédoublonnage des annonces avec filtres anti-bruit et blacklist métier
• Enrichissement des fiches entreprises pour fiabiliser la qualification commerciale
• Envoi CRM par lots planifiés avec scheduler daemon, reprise et lissage de débit
• Pilotage opérationnel par statistiques de run, logs et export XLSX/email par cible

Technologies : Ruby, ActiveRecord, SQLite, Rake, HTTParty, Nokogiri, Selenium, Whenever, Rufus Scheduler, Rollbar