Arquitecto de Datos at Zigi App
Guatemala City, Guatemala Department, Guatemala -
Full Time


Start Date

Immediate

Expiry Date

15 Jan, 26

Salary

0.0

Posted On

17 Oct, 25

Experience

5 year(s) or above

Remote Job

Yes

Telecommute

Yes

Sponsor Visa

No

Skills

Data Lake Development, Data Modeling, Machine Learning, Data Validation, Data Catalog Management, AWS, Databricks, PySpark, SQL, API Integration, MLOps, Kedro

Industry

technology;Information and Internet

Description
Como Arquitecto de Datos, debes de liderar el desarrollo del data lake, garantizando la implementación de estándares de desarrollo y el diseño eficiente de modelos de datos; así como mantener actualizada la arquitectura tecnológica, asegurando la accesibilidad y el cumplimiento de estándares de calidad y seguridad de la información Actividades principales: Diseñar modelos de datos y flujos de aprendizaje automático, basados en dominios de información previamente establecidos, con el objetivo de garantizar la disponibilidad, comprensión y accesibilidad oportuna de la información de acuerdo al perfil definido. Asegurar el cumplimiento de estándares y diseños en la creación del data lake, a través de la definición de reglas de validación en las herramientas de integración continua. Administrar y mantener el catálogo de datos, por medio de la herramienta principal de ingeniería y aprendizaje automático, con el fin de documentar y registrar los atributos, usos, historial de los datos y los permisos de los usuarios. Establecer estándares de desarrollo para el data lake, a través de documentación clara y precisa, con el fin de asegurar que los Ingenieros de Datos comprendan las metodologías para desarrollar una plataforma escalable. Evaluar la incorporación o exclusión de nuevos componentes en la arquitectura tecnológica, a través de pruebas, investigación constante, capacitación continua y exhaustiva, con el fin de garantizar que las nuevas herramientas se integren de manera efectiva, aporten valor, sean escalables y mantenibles. Si cumples con lo siguiente aplica: Configuración de clusters y desarrollo en Databricks bajo arquitectura Medallion. Manejo de PySpark (Python) y SQL avanzado. Integración mediante API’s, webhooks y eventos en buffer. Uso de entornos AWS (S3, DMS). Implementación de MLOps y gestión de proyectos con Kedro.
Responsibilities
As a Data Architect, you will lead the development of the data lake, ensuring the implementation of development standards and efficient data model design. You will also maintain the technological architecture, ensuring accessibility and compliance with quality and information security standards.
Loading...