Senior Data Engineer (AWS) - Inglês Fluente at Keyrus Portugal

São Paulo, São Paulo, Brazil -

Full Time

Start Date

Immediate

Expiry Date

08 May, 26

Salary

0.0

Posted On

07 Feb, 26

Experience

5 year(s) or above

Remote Job

Yes

Telecommute

Yes

Sponsor Visa

Skills

AWS, Data Engineering, ETL, ELT, Spark, PySpark, Airflow, Python, Scala, SQL, Git, CI/CD, PostgreSQL, MySQL, DynamoDB, MongoDB

Industry

Information Technology & Services

Description

A Keyrus acredita na diversidade e na inclusão. Encorajamos a todos a participarem em nosso processo de contratação, não importando o gênero, idade, raça, religião. Não permitimos nenhum tipo de discriminação. Isto é reforçado no processo de contratação e vivido dessa forma na empresa. Sabemos que grandes resultados só são alcançados com uma grande equipe, por isso procuramos pessoas talentosas e apaixonadas, com desejo de crescer profissionalmente e criar uma trajetória de carreira conosco. Papéis e Responsabilidades: Desenvolver, manter e otimizar pipelines de dados (ETL/ELT) escaláveis Projetar e evoluir arquiteturas de dados modernas (Lakehouse, Data Mesh, medalhão) Processar grandes volumes de dados com Spark/PySpark Garantir qualidade, governança e segurança dos dados Atuar com orquestração de pipelines via Airflow Trabalhar em conjunto com cientistas de dados, analistas e áreas de negócio Documentar soluções e compartilhar boas práticas Realizar troubleshooting, debugging e otimização de performance Qualificações Essenciais: Inglês Fluente, para interação com times e stakeholders globais) AWS: atuação com S3 (armazenamento e organização de dados), Glue (ETL), Redshift (DW), Athena (query serverless) e Kinesis (streaming) Databricks: uso avançado da plataforma, incluindo Delta Lake, versionamento de dados, otimização de jobs e arquitetura Lakehouse Experiência com ambientes de dados distribuídos e processamento em larga escala Apache Spark / PySpark: desenvolvimento de pipelines distribuídos e otimização de performance Python e/ou Scala: construção de pipelines, scripts de ingestão e transformação de dados SQL avançado: criação de queries complexas, tuning de performance e modelagem analítica Apache Airflow: criação, monitoramento e manutenção de DAGs para pipelines ETL/ELT Git/GitHub: versionamento de código e colaboração em times distribuídos CI/CD: práticas de integração e entrega contínua aplicadas a pipelines de dados Automação de deploy e boas práticas de engenharia de software aplicadas a dados Relacionais: PostgreSQL, MySQL NoSQL: DynamoDB, MongoDB Integração entre múltiplas fontes e formatos de dados Nossa missão é Auxiliar as empresas a extrair todo o potencial de Dados e Digital objetivando aumentar seu desempenho, ajudando na transformação, gerando novas alavancas de crescimento e competitividade. Vem fazer parte do Time Keyrus! Se você quiser saber mais sobre nós, convidamos você a visitar nosso site: http://www.keyrus.com/br/ Desejamos boa sorte! 😊🚀

Responsibilities

Develop, maintain, and optimize scalable data pipelines. Design and evolve modern data architectures while ensuring data quality, governance, and security.