Sign up with

Already have an account? Log in here

Need some help?
Talk to us at +91 7670800001

Data Engineer / DataOps GCP DBT at Collective

Paris, Ile-de-France, France -

Full Time

Start Date

Immediate

Expiry Date

25 Feb, 26

Salary

0.0

Posted On

27 Nov, 25

Experience

2 year(s) or above

Remote Job

Yes

Telecommute

Yes

Sponsor Visa

Skills

Data Processing, SQL, DBT, Airflow, Composer, Python, Git, Docker, GCP, BigQuery, Storage, Dataflow, Cloud Function, Data Governance, Data Quality, Agile

Industry

Software Development

Description

Contexte : Mission au sein du département Data, rattachée à l'équipe Ingénierie composée de 2 personnes dont les missions sont de développer des Data pipelines en y ajoutant une couche d’automatisation et d’orchestration avec un versioning complet de tous les composants ainsi qu’une pipeline de CI/CD. Le but est également de s’assurer que les best practices relatives aux pipelines ETL/ELT soient respectées. En plus de compétences techniques, il est attendu quelqu’un qui porte un fort intérêt pour les données, leur compréhension et qui soit capable de dialoguer avec les équipes métiers pour comprendre les enjeux, aidant au bon développement et à la maintenance des transformations. Missions : Faciliter l'évolutivité grâce à une architecture normalisée et à des principes de conception appropriés Développer les Data pipelines et traiter des enjeux d'automatisation / orchestration via les outils présentés ci-après Garantir la meilleure qualité de données possible grâce à un outil de contrôle dédié (Python, DBT ou tests MonteCarlo) Assurer la conformité avec les politiques de gouvernance et de sécurité des données Critères requis : Expert en data processing et traitement de la donnée Forte maitrise de SQL, DBT, Airflow et/ou Composer Maitrise de Python, Git, Docker Maîtrise des services GCP (BigQuery, Storage, Dataflow, Cloud Function, ...) Attention particulière aux détails et aux subtilités dans le traitement des données Vous savez travailler dans un environnement agile et international Vous êtes rigoureux, organisé, ouvert d'esprit Vous disposez de solides compétences en matière de communication (tech et métiers) et de coopération interdisciplinaire

Responsibilities

Develop data pipelines and ensure automation and orchestration with complete versioning. Maintain data quality and compliance with governance and security policies.