Data Engineer Senior – Azure & Databricks at NEORIS

, , Spain -

Full Time

Start Date

Immediate

Expiry Date

09 Jan, 26

Salary

0.0

Posted On

12 Oct, 25

Experience

5 year(s) or above

Remote Job

Yes

Telecommute

Yes

Sponsor Visa

Skills

Data Engineering, Azure, Databricks, ETL, ELT, PySpark, Spark Structured Streaming, Kafka, Unit Testing, Integration Testing, Log Analytics, Azure Key Vault, Delta Tables, Agile Methodologies, DevOps, Python

Industry

IT Services and IT Consulting

Description

NEORIS, ahora parte de EPAM, es un acelerador digital que ayuda a las compañías a entrar en el futuro. Con más de 20 años de experiencia como socios digitales de algunas de las empresas más importantes del mundo, contamos con más de 4,000 profesionales en 11 países. Nuestra cultura multicultural y de startup fomenta la innovación, el aprendizaje continuo y la generación de soluciones de alto impacto para nuestros clientes. Estamos en búsqueda de: Data Engineer Senior – Azure & Databricks Buscamos un/a Data Engineer Senior con sólida experiencia en entornos cloud, especialmente en Azure y Databricks, para sumarse a un equipo técnico de alto nivel. Esta posición es ideal para profesionales apasionados por la ingeniería de datos, la automatización y el desarrollo de soluciones escalables en la nube. Principales responsabilidades: Diseñar, desarrollar y mantener pipelines de datos eficientes y escalables en Azure y Databricks. Implementar procesos ETL/ELT utilizando PySpark y Azure Data Factory. Desarrollar procesos de ingestión y procesamiento de datos en tiempo real mediante Spark Structured Streaming y Kafka. Automatizar pruebas unitarias e integraciones utilizando frameworks como pytest y unittest. Gestionar secretos de forma segura mediante Azure Key Vault y monitorear procesos con Log Analytics. Participar en el modelado de datos utilizando tablas Delta y otras estructuras optimizadas para analítica. Colaborar con equipos multidisciplinarios para garantizar la calidad y disponibilidad de los datos. Requerimientos: Excluyentes: Certificación vigente: Databricks Certified Data Engineer Associate. Mínimo 5 años de experiencia en proyectos de ingeniería de datos, incluyendo: Programación orientada a objetos. Desarrollo de procesos ETL. Modelado de datos. Al menos 3 años de experiencia en: Azure Data Factory. Azure Databricks. Desarrollo de procesos de carga con PySpark en Python. Automatización de pruebas unitarias e integración con pytest y unittest. Gestión de logs con Log Analytics. Gestión de secretos con Azure Key Vault. Modelado de datos con tablas Delta. Al menos 1 año de experiencia en: Procesamiento de datos en streaming con Spark Structured Streaming. Desarrollo de consumidores y publicadores de eventos en Kafka usando Python. Orquestación de procesos en Azure Databricks mediante Azure Data Factory. Deseables: Certificación DP-203: Azure Data Engineer Associate. Experiencia en entornos ágiles (Scrum, Kanban). Conocimientos en DevOps para Data (CI/CD, infraestructura como código). Inglés intermedio-avanzado. Ofrecemos: Contrato indefinido con salario competitivo Modalidad flexible y posibilidad de trabajo remoto. Plan de carrera personalizado y formación continua (certificaciones, inglés, etc.). Participación en proyectos estables con alto componente técnico. Flexibilidad horaria y enfoque en la conciliación. Beneficios sociales adaptados a tus necesidades Te invitamos a conocernos en www.neoris.com, Facebook, LinkedIn, Twitter o Instagram: @NEORIS. Mercedes Manzano #LI-MM4

Responsibilities

Design, develop, and maintain efficient and scalable data pipelines in Azure and Databricks. Collaborate with multidisciplinary teams to ensure data quality and availability.