Data Engineer

• Construir procesos de extracción desde SAP ASE (Sybase) y SQL Server mediante ODBC, utilizando Openflow como patrón de conectores.
• Integrar APIs REST con autenticación, renovación de tokens, paginación, control de límites de peticiones y reintentos.
• Incorporar archivos y otras fuentes al almacén de datos, preservando el dato original y su marca de extracción.
• Permitir el reproceso de datos desde la capa de aterrizaje sin volver a consultar los sistemas fuente.
• Construir las capas Bronze, Silver y Gold con dimensiones conformadas, historización y hechos de negocio con métricas certificadas.
• Desarrollar modelos y transformaciones con dbt, incluyendo pruebas declarativas, materializaciones incrementales y documentación generada.
• Definir con el cliente catálogos maestros homologados para unificar identificadores y nombres entre sistemas.
• Diseñar con el ingeniero de IA modelos semánticos, consultas verificadas y un glosario de métricas para el consumo de los agentes.
• Garantizar la trazabilidad de cada cifra a su fuente, tabla y fecha de corte, y exponer la información mediante vistas de consumo.
• Implementar reglas de calidad y mecanismos de cuarentena para registros que no cumplan los criterios definidos.
• Orquestar la ventana nocturna de procesamiento, con monitoreo y bitácoras de ejecución.
• Conciliar la capa Gold contra los reportes vigentes del cliente y documentar las diferencias y sus causas.
• Controlar el consumo de créditos y configurar mecanismos de monitoreo de recursos en Snowflake.
• Colaborar en la evaluación de precisión y repetibilidad de las respuestas generadas por los agentes de IA.
• Implementar RBAC, row access policies y políticas de masking conforme a la matriz de accesos acordada con el cliente.
• Asegurar que los agentes consulten y respondan únicamente sobre información autorizada para cada rol.
• Documentar el linaje, la operación de los pipelines y los procedimientos de reproceso.
• Preparar la transferencia técnica y operativa al equipo del cliente.

Explore Senior Data Engineer – Snowflake at DaCodes.. Review requirements and application details.

Remote Data Engineer jobs in Peru

Senior Data Engineer – Snowflake

Senior Data Architect – Snowflake, Market Research

Academic Content Developer – Financial Data Engineering, Credit Systems

Data Engineer

Senior Data Engineer

Senior Data Engineer, GCP, Data Integration