Especialista de Engenharia de Dados II at Experian

São Paulo, São Paulo, Brazil -

Full Time

Start Date

Immediate

Expiry Date

24 Jun, 26

Salary

0.0

Posted On

26 Mar, 26

Experience

2 year(s) or above

Remote Job

Yes

Telecommute

Yes

Sponsor Visa

Skills

Spark, Python, Airflow, Aws Data Stack, Dynamodb, S3, Lambda, Emr, Msk, Glue, Athena, Lake Formation, Rds, Data Lake, Lakehouse, Data Engineering

Industry

Information Services

Description

Company Description A Serasa Experian é a primeira e a maior Datatech do Brasil. Líder em soluções de inteligência para análise de riscos e oportunidades, com foco nas jornadas de crédito, autenticação e prevenção à fraude. Com tecnologia de ponta, inovação e os melhores talentos, transforma a incerteza do risco na melhor decisão, ajudando pessoas a realizarem seus sonhos e empresas de todos os portes e segmentos a prosperarem. Temos 22.000 pessoas operando em 32 países e a cada dia estamos investindo em novas tecnologias, profissionais talentosos e inovação para ajudar todos os clientes a maximizarem cada oportunidade. Com sede corporativa em Dublin, Irlanda, a Experian está listada na Bolsa de Valores de Londres (EXPN) e compõe o índice FTSE 100. Job Description Já pensou em alavancar a plataforma de dados e MLOps do maior banco de dados da América Latina ao nível de empresas como Uber, Netflix e Airbnb? Se você é movido por inovação e gosta de atuar em parceria contínua com todas as áreas da empresa, venha fazer parte do nosso time! Você será responsável por: Desenvolvimento de plataforma de dados para consumo de diversas fontes, batch e real-time. Desenvolvimento APIs de acesso e consumo dos dados (data products). Facilidade de disseminação do conhecimento sobre as melhores práticas de uso de dados (data contracts, governança federada e engenharia de plataformas). Garantir que arquitetura comporte necessidades e requisitos técnicos do time de execução, trabalhando em conjunto com times de TI (Arquitetura, Segurança, Infraestrutura) e com áreas de negócio. Autonomia e iniciativa para atuação na resolução de problemas. Como será o seu dia a dia? Garantir as entregas da squad sobre os projetos pactuados com as áreas clientes. Interagir com unidades de negócio, terceiros, fornecedores e/ou prestadores a fim de garantir o melhor entendimento e implementação dos dados e arquitetura. Participar de discussões baseadas em dados dentro da equipe e entre áreas de negócios, apoiando decisões importantes. Fazer a interface com os times de tecnologia e produtos a fim de definir as melhores práticas quanto ao armazenamento e consumo dos dados, além de sugerir, testar e acompanhar a implementação de novas tecnologias. Hard skills Spark (Batch & Streaming) Proficiência em linguagens de programação (Python) Orquestração de pipelines de dados (Airflow); AWS Data Stack (DynamoDB , s3, Lambda, EMR, MSK, Glue, Athena, Lake Formation, RDS) Data lake/ Lakehouse (iceberg/delta) Arquitetura de dados Melhores práticas de engenharia de software Testes Automatizados Conhecimento em CI/CD Inglês para comunicação com times globais Soft Skills Vontade de aprender Trabalho em equipe / Perfil Colaborativo; Ter uma boa comunicação e relacionamento interpessoal; Qualifications Qualifications Data Engineering AWS Python Developer Additional Information Our uniqueness is that we celebrate yours. Experian's culture and people are important differentiators. We take our people agenda very seriously and focus on what matters; DEI, work/life balance, development, authenticity, collaboration, wellness, reward & recognition, volunteering... the list goes on. Experian's people first approach is award-winning; World's Best Workplaces™ 2024 (Fortune Top 25), Great Place To Work™ in 24 countries, and Glassdoor Best Places to Work 2024 to name a few. Check out Experian Life on social or our Careers Site to understand why. Experian is proud to be an Equal Opportunity and Affirmative Action employer. Innovation is an important part of Experian's DNA and practices, and our diverse workforce drives our success. Everyone can succeed at Experian and bring their whole self to work, irrespective of their gender, ethnicity, religion, colour, sexuality, physical ability or age. If you have a disability or special need that requires accommodation, please let us know at the earliest opportunity. Experian Careers - Creating a better tomorrow together Find out what its like to work for Experian by clicking here Employee Status: Regular Role Type: Home Department: Technology Schedule: Full Time

Responsibilities

The role involves developing a data platform for consumption from various batch and real-time sources, including the creation of APIs for data access and consumption (data products). Responsibilities also include ensuring architecture meets technical requirements by collaborating with IT and business areas, and guaranteeing squad deliveries on agreed projects.