Scraping / Data Engineer junior

Skillup est une startup qui propose un Logiciel Saas RH permettant aux entreprises de gérer leurs talents grâce à la formation, aux entretiens et à la GPEC.
La donnée est au cœur du produit et de la vision chez Skillup. Nous avons la conviction de l'importance des enjeux autour de la donnée et avons mis en œuvre des projets primés au Concours National d'Innovation.
Dès le début, nous avons construit un catalogue de formations normalisé et enrichi se basant sur l'extraction de multiples organismes partenaires sur une grande variété de domaines. Aujourd'hui, nous proposons à nos clients le meilleur catalogue de formation en France avec 50 000 programmes et 300 000 sessions mis à jour quotidiennement.
Cette donnée de formation nous sert aujourd'hui à constituer un référentiel de compétences vivant et qui répond aux métiers d'aujourd'hui et de demain. En quelques chiffres, nous avons extrait plus de 10 000 compétences couvrant un spectre large depuis nos programmes de formation.

Skillup est une startup qui propose un Logiciel Saas RH permettant aux entreprises de gérer leurs talents grâce à la formation, aux entretiens et à la GPEC.

La donnée est au cœur du produit et de la vision chez Skillup. Nous avons la conviction de l'importance des enjeux autour de la donnée et avons mis en œuvre des projets primés au Concours National d'Innovation.

Dès le début, nous avons construit un catalogue de formations normalisé et enrichi se basant sur l'extraction de multiples organismes partenaires sur une grande variété de domaines. Aujourd'hui, nous proposons à nos clients le meilleur catalogue de formation en France avec 50 000 programmes et 300 000 sessions mis à jour quotidiennement.

Cette donnée de formation nous sert aujourd'hui à constituer un référentiel de compétences vivant et qui répond aux métiers d'aujourd'hui et de demain. En quelques chiffres, nous avons extrait plus de 10 000 compétences couvrant un spectre large depuis nos programmes de formation.

Aujourd’hui la startup compte 30 collaborateurs, dont 12 dans l’équipe Tech / Data / Produit : 5 devs full stack, 3 data, 2 produits, 2 UX, l’objectif est de doubler les effectifs d’ici fin d’année.

Nous recherchons un Scraping / Data Engineer qui devra :

• Créer et maintenir les robots de scraping (Python, Scrapy, ML) pour notre catalogue de plus de 50 000 formations.
• Détecter et traiter les anomalies
• Effectuer les reporting
• Si tu le souhaites, tu pourras progressivement en compétences sur la stack data : ETL, Machine Learning

Environnement technique Data :

• 100 scrapers de sites Web qui tournent quotidiennement sur Scrapinghub en utilisant Scrapy.
• 1000 tâches ETL sont exécutées quotidiennement sur Airflow.
• 300 000 statistiques de formation (changements de titre, de prix et de contenu) enregistrées chaque semaine.
• 1000 nouvelles formations classées en NLP par semaine.
• Tableau de bord développé in-house (Flask & ReactJS).
• Stack: Python, ITL, Pandas, MongoDB, Dash, Scikit-learn, SpaCy, PyTorch

• Diplômé(e) d’une école d’ingénieur, tu aimes l’extraction de la donnée
• Tu recherches un stage de fin d’études en vue d’une embauche ou un poste de data engineer junior
• Tu as de bonnes bases sur Python
• Tu es à l’aise avec la manipulation des données