Data engineer at Demo Datos

Barcelona, Catalonia, Spain -

Full Time

Start Date

Immediate

Expiry Date

10 Aug, 26

Salary

0.0

Posted On

12 May, 26

Experience

5 year(s) or above

Remote Job

Yes

Telecommute

Yes

Sponsor Visa

Skills

Azure, Databricks, Apache Spark, Python, PySpark, SQL, ETL/ELT Pipelines, Lakehouse Architecture, Medallion Architecture, Data Modeling, Data Anonymization, CI/CD, Delta Lake, Azure Data Factory, Azure Data Lake Storage, Data Governance

Industry

IT Services and IT Consulting

Description

Descripción del puesto / Funciones Buscamos un/a Data Engineer con experiencia en entornos cloud para el desarrollo, despliegue y mantenimiento de pipelines de datos (ETL/ELT) en Azure y Databricks. Formarás parte de un equipo de datos colaborativo, trabajando junto a arquitectos, analistas y científicos de datos en la construcción de soluciones robustas, escalables y orientadas a la calidad del dato. Funciones: Diseñar, desarrollar y mantener pipelines de datos (ETL/ELT) en entornos cloud. Trabajar con plataformas de datos basadas en Azure y Databricks. Diseñar y construir data marts anonimizados dentro de la plataforma corporativa de datos. Implementar procesos de ingesta, transformación y almacenamiento de datos. Optimizar jobs y clusters en Apache Spark. Gestionar workflows y jobs en Databricks. Trabajar con arquitecturas Lakehouse y medallion architecture. Diseñar modelos de datos eficientes y escalables. Implementar procesos de anonimización de datos garantizando calidad y cumplimiento. Asegurar la calidad, consistencia y fiabilidad del dato. Generar documentación técnica y evidencias de implementación. Colaborar con equipos de datos (arquitectos, analistas, data scientists). Resolver incidencias en entornos productivos y optimizar rendimiento. Aplicar buenas prácticas de desarrollo, versionado y CI/CD. Estudios Requisitos mínimos +4 años de experiencia como Data Engineer. Experiencia en Azure (Azure Data Lake Storage, Azure Data Factory). Experiencia en Databricks (Apache Spark, workflows, Delta Lake). Conocimiento de arquitectura medallion. Experiencia trabajando con arquitecturas Lakehouse. Fuertes habilidades de modelado de datos. Experiencia en anonimización de datos. Programación en Python (PySpark). Excelente nivel de SQL. Conocimiento de buenas prácticas de desarrollo, control de versiones y CI/CD. Experiencia en desarrollo, despliegue y mantenimiento de pipelines ETL/ELT. Experiencia resolviendo incidencias en entornos productivos. Requisitos valorables Conocimientos de Scala. Experiencia con otros cloud providers (AWS, GCP). Experiencia en integración de APIs de terceros. Conocimiento de data governance. Idiomas Buen nivel de inglés. Ubicación Híbrido. Barcelona. ¿Por qué nosotros? ¡Un día libre por tu cumpleaños para que lo celebres como quieras! Mejoras en permisos retribuidos para un mejor equilibrio personal y profesional. Acceso a seguro médico privado para tu tranquilidad. Días de vacaciones extra según tu antigüedad, porque valoramos tu descanso y bienestar. En Pasiona apostamos por la diversidad y la igualdad de oportunidades. Animamos a postularse a todas las personas, con independencia de su género, edad, discapacidad, orientación sexual, identidad de género, origen étnico, religión u otras circunstancias personales o sociales. Prioridad About us Pasiona Consulting es una consultora tecnológica, partner de Microsoft, dedicada al diseño, desarrollo e implementación de aplicaciones de software a medida para clientes de múltiples sectores.

Responsibilities

Design, develop, and maintain scalable ETL/ELT data pipelines within Azure and Databricks environments. Collaborate with data architects and scientists to build robust Lakehouse solutions and ensure data quality and anonymization.