Full Remote - ingénieur informatique DataOps (IT) / Freelance (H/F)
- 75
Rôle : Ingénieur DataOps / Ingénieur MLOPS
Contrat : 12 mois avec extension
Début : ASAP
TJM : -téléphone masqué- EUR
Lieu de travail : Télétravail complet
Tâches
- Construire et orchestrer des pipelines de données pour lingestion, le stockage et le traitement de grands ensembles de données à laide dun fournisseur de cloud public.
- Traitement de grands ensembles de données à laide de Python ou de Scala sur Dataflow, Spark ou des plateformes similaires de traitement par lots ou par flux.
- Livraison continue dans un environnement de cloud public.
- Permettre aux data scientists et aux analystes de travailler avec des données dans leur environnement sandbox.
- La validation des données et du pipeline, car les données qualitatives et fiables sont importantes pour vous.
- Automatiser autant que possible en utilisant les meilleures pratiques CI/CD.
- La démocratisation des données, en travaillant avec IAM pour rendre les données facilement disponibles et accessibles pour les équipes.
- Rechercher et évaluer de nouveaux outils et méthodologies pour voir comment nous pourrions mieux travailler avec les données.
- Travailler en équipe avec des développeurs, des designers et des data scientists.
Compétences
- Méthodologies de livraison agiles et utilisation de linfrastructure de livraison DevOps.
- Expérience avec SQL et travail avec des bases de données, comme Athena, BigQuery ou Snowflake.
- Expérience des outils dinfrastructure en tant que code, par exemple CloudFormation, Azure ARM, Terraform.