BC Tecnología · Posted 6w ago
Data Engineer – AWS (Lakehouse)
Job relayed by Get on Board, its source: you apply there.
Consultancy. Consultancy or IT services firm: the work usually happens on assignment at a client.
- Location
- 🇨🇱 Chile
- Role
- Data engineering
- Source
- Get on Board
The posting
En este rol nos enfocamos en que puedas operar y evolucionar soluciones de datos end-to-end, asegurando que los datos fluyan con calidad, trazabilidad y observabilidad.
• Operar plataformas basadas en lakehouse , promoviendo una arquitectura ordenada para ingesta, transformación y consumo.
• Aplicar patrones de ingesta y consumo , implementando flujos que respondan a necesidades de negocio y a requerimientos técnicos (reprocesos, incrementalidad y rendimiento).
• Garantizar monitoreo y observabilidad de pipelines (métricas, alertas y diagnóstico), para reducir tiempos de indisponibilidad y facilitar la operación.
• Implementar gobernanza y calidad de datos , incorporando controles, estándares y criterios verificables para que los datasets sean confiables.
• Construir y mantener orquestación y automatización de procesos usando servicios cloud y herramientas de trabajo (ETL/ELT, workflows y tareas programadas).
• Desarrollar y acompañar el ciclo de vida del código: definiciones de infraestructura con Terraform , automatización, revisiones en equipo y documentación.
Además, trabajamos en un entorno colaborativo y ágil, donde nos importa la comunicación efectiva y la mejora continua.
Buscamos un perfil con experiencia práctica en componentes típicos de plataformas de datos en AWS, con capacidad para operar pipelines y llevarlos a una operación confiable y medible.
Requerimos :
• Conocimientos fundacionales en lakehouse , ingesta/consumo, observabilidad de pipelines y gobernanza/calidad de datos .
• Experiencia con AWS : Glue y Glue Catalog , Lambda , Step Functions , EventBridge , CloudWatch y S3 .
• Experiencia con analítica sobre datos: Redshift (incluyendo Redshift Serverless ) y Spectrum .
• Uso de Athena para consultas/consultabilidad según arquitectura.
• Conocimiento de orquestación con Airflow y/o prácticas similares con pods (cuando corresponda al diseño del pipeline).
• Gestión de trabajo y documentación con GitHub , Jira y Confluence .
• Automatización e integración de capa de datos y transformaciones mediante Terraform y dbt .
• Experiencia en optimización de costos y desempeño en servicios AWS asociados a procesamiento/consulta (por ejemplo, ajuste de patrones de uso de Athena/Redshift y particionamiento/organización en S3).
• Automatización avanzada de despliegues y ambientes con Terraform, incluyendo versionamiento de infraestructura y pipelines CI/CD.
• Madurez en gobernanza: linaje de datos, definición de estándares de nombres/campos y rutinas de validación.
• Participación en equipos ágiles, con habilidad para estimar, priorizar y reportar con claridad.