Senior Data Engineer (H/F) at Devoteam
Casablanca, Casablanca-Settat, Morocco -
Full Time


Start Date

Immediate

Expiry Date

29 Sep, 26

Salary

0.0

Posted On

01 Jul, 26

Experience

2 year(s) or above

Remote Job

Yes

Telecommute

Yes

Sponsor Visa

No

Skills

PySpark, Kafka, NiFi, Cassandra, Hive, Big Data Architecture, CI/CD, Git, Airflow, Data Modeling, Data Quality, NoSQL, Hadoop, Cloudera, Data Visualization, Data Science

Industry

Business Consulting and Services

Description
Company Description Chez Devoteam, nous sommes des « Digital Transformakers ». Le respect, la franchise et la passion animent chaque jour notre tribu. Ensemble, nous aidons nos clients à remporter la bataille du Digital : du conseil à la mise en œuvre de technologies innovantes, jusqu’à l’adoption des usages. Cloud, Cybersecurity, Data, DevOps, Fullstack Dev, Low Code, RPA n’ont plus aucun secret pour notre tribu ! Nos 10 000+ collaborateurs sont certifiés, formés et accompagnés au quotidien pour relever de nouveaux challenges innovants. Leader du Cloud, de la Cybersécurité et de la Data en EMEA, le Groupe Devoteam a réalisé en 2022 un chiffre d’affaires de 1,036 milliard d’euros et se donne pour ambition de le doubler dans les 5 années à venir. Devoteam Maroc, acteur de référence dans les expertises IT depuis plus de 30 ans (350+ consultants) accélère sa croissance en développant ses activités d’expertise en nearshore pour répondre aux besoins de nos clients français, européens et moyen orientaux. Es-tu prêt(e) à nous rejoindre et relever ensemble ce défi ? Job Description Dans le cadre du renforcement des équipes Data, nous recherchons des profils capables de concevoir, industrialiser et optimiser des plateformes de données (batch & temps réel) au sein d’environnements distribués basés sur Cloudera. Vos missions : Développement & Industrialisation Développer des pipelines de traitement de données massives en PySpark (modes Batch et Real-Time / Streaming). Mettre en place des flux temps réel via Kafka (topics, partitions, schémas, offsets) et assurer l'ingestion avec NiFi. Modéliser et optimiser les schémas NoSQL, notamment sur Cassandra (tables, clés, clustering, réplication) et Hive. Intégrer et transformer des données provenant de multiples sources (APIs, BDD, streams, fichiers). Qualité, Performance & Fiabilité Déployer des mécanismes de Data Quality (contrôles, monitoring, alerting). Optimiser les traitements Spark (partitioning, tuning, formats de données) spécifiquement pour des architectures distribuées. Assurer la supervision et la résolution des incidents dans un environnement de production. CI/CD & Gouvernance Industrialiser les développements via des chaînes CI/CD (tests automatisés, déploiements). Documenter les flux, modèles et bonnes pratiques. Collaborer ponctuellement avec les équipes métiers sur des sujets Dataviz et collaborer avec les Data Scientists (notamment sur des algorithmes de segmentation client). Contribuer à la gouvernance des données (catalogue, traçabilité, sécurité). Qualifications Expérience : ~4 ans d’expérience dans des environnements distribués et des architectures Big Data. Architecture : Forte appétence et expérience significative sur des infrastructures On-Premise. Spark / PySpark : Maîtrise impérative en traitement Batch et Streaming. NoSQL : Expérience confirmée sur Cassandra et/ou Hive Streaming & Ingestion : Très bonne maîtrise de Kafka et NiFi Nice-to-have / Bonus : Bonne compréhension de l'écosystème Hadoop/HDFS. La maîtrise de Cloudera est un plus mais reste facultative. Notions en Data Science (modèles de clustering/segmentation client) et outils de Dataviz. Outils & DevOps : Compétences en Git, CI/CD (GitLab CI…) et un outil d’orchestration (Airflow, Luigi, Prefect…). Additional Information Pourquoi nous rejoindre ? Rejoindre Devoteam, c’est : Évoluer sur des projets stratégiques autour de la donnée Bénéficier d’un accompagnement personnalisé pour le développement de vos compétences et certifications Travailler dans un environnement stimulant, collaboratif et bienveillant Contract type: Permanent contract
Responsibilities
Design, industrialize, and optimize batch and real-time data platforms within Cloudera-based distributed environments. Develop data pipelines using PySpark and Kafka while ensuring data quality, performance, and governance.
Loading...