Salario: 10.000.000 - 11.000.000 COP El profesional será responsable de diseñar, implementar y optimizar pipelines de datos escalables y eficientes dentro del ecosistema Azure y Databricks. Liderará la estructuración de datos bajo la arquitectura Medallón (capas Bronze, Silver y Gold), aplicando modelos Kimball o Data Vault. Su enfoque garantizará una transición fluida y segura desde sistemas transaccionales y de gestión de procesos (BPM) heredados hacia arquitecturas modernas en la nube, asegurando la calidad, integridad y cumplimiento normativo en entornos de alta exigencia como el sector financiero. 2. Responsabilidades Principales Diseño y Construcción de Pipelines: Desarrollar y orquestar flujos de datos automatizados (ETL/ELT) tanto en procesamiento por lotes (Batch) como en tiempo real, garantizando la escalabilidad y disponibilidad del dato. Implementación de Arquitectura Medallón: Organizar y asegurar la fluidez de las cargas de datos a través de las capas Bronze (crudo), Silver (limpio/enriquecido) y Gold (analítico/negocio) utilizando Databricks. Migración y Modelado Complejo: Diseñar estrategias para la extracción, transformación y migración de datos desde sistemas relacionales y estructuras altamente normalizadas hacia modelos optimizados (Kimball, Data Vault) sin impactar las operaciones en curso. Automatización y DataOps: Implementar y desplegar soluciones de datos mediante prácticas de Integración y Despliegue Continuo (CI/CD) utilizando herramientas de Infraestructura como Código (IaC). Calidad de Datos y Seguridad: Aplicar políticas estrictas de gobierno, linaje, enmascaramiento, trazabilidad y procesos de calidad del dato conforme a estándares internacionales y de la industria. Soporte Técnico y Documentación: Documentar de manera exhaustiva las arquitecturas de datos, diccionarios, diagramas de linaje y decisiones técnicas tomadas. Apoyar en la definición técnica y estimación de esfuerzos para iniciativas de preventa o nuevos requerimientos de negocio. Colaboración Interfuncional: Coordinar con arquitectos de datos, equipos de QA, desarrollo y unidades de negocio para asegurar la viabilidad técnica y la alineación de las soluciones con la estrategia de la organización. 3. Requisitos Obligatorios Formación Académica: Profesional graduado en Ingeniería de Sistemas, Computación, Informática o carreras afines. Experiencia Profesional Mínima: * Mínimo de 2 años de experiencia profesional verificable (contados a partir de la expedición del título profesional). Experiencia práctica demostrada en ingeniería de datos enfocada específicamente en el ecosistema Azure / Databricks. Experiencia Sectorial: Participación verificable en proyectos de datos para el Sector Financiero o bancario, comprendiendo su criticidad y dinámica operativa. Dominio de Modelado y Arquitectura: Conocimiento sólido en modelado dimensional (Kimball), Data Vault y metodologías de almacenamiento distribuido masivo y computación distribuida. Habilidades Técnicas Clave: Dominio avanzado de lenguajes de consulta SQL y bases de datos relacionales y no relacionales (NoSQL). Programación avanzada en Python y PySpark. Experiencia práctica en procesamiento en tiempo real (Spark Streaming, Kafka, etc.). Conocimiento y aplicación de patrones de carga avanzados: Full, Incremental y Change Data Capture (CDC). Prácticas DataOps: Experiencia en despliegue de soluciones en la nube utilizando Azure DevOps y herramientas de infraestructura como código como Terraform. Estándares y Marcos de Trabajo: Conocimiento general de metodologías ágiles (Scrum, Kanban) y familiaridad con estándares de seguridad de la información y cumplimiento de datos (tales como ISO 27001, PCI-DSS, OWASP, GDPR/RGPD). Competencias Profesionales: Buen nivel de inglés (hablado y escrito), autonomía profesional, orientación hacia la solución de problemas complejos y altas capacidades de comunicación asertiva.