Descripción del puesto – Desarrollador de Modernización ETL
Ubicación: En todo Estados Unidos, cualquier ubicación – Remoto

Solo titulares de visado independiente

Resumen del rol
Buscamos un desarrollador experimentado en Modernización ETL para unirse a nuestro equipo de Gestión de Datos que apoye las iniciativas de IA y Datos Empresariales de los clientes. El puesto implica modernizar pipelines ETL/ELT heredados, migrar cargas de trabajo de datos a gran escala y garantizar la preparación operativa en un entorno nativo en la nube. El desarrollador trabajará estrechamente con
equipos de negocio, aplicaciones y técnicos para ofrecer soluciones de datos de alta calidad, gobernadas y listas para producción.

Responsabilidades clave
Evaluación y planificación
Analizar trabajos ETL/ELT existentes, bases de datos y almacenes de datos para ver si están listos para la migración.
Documentar los requisitos y los artefactos de migración para su aprobación.
Diseño y Desarrollo
Rediseñar y rediseñar trabajos heredados de IBM DataStage en frameworks modernos (se prefiere Databricks Spark en AWS).
Desarrollar, probar y desplegar pipelines ETL usando Python, scripting Unix y herramientas nativas en la nube.
Implementar pipelines CI/CD para compilación, prueba y despliegue automatizados.
Pruebas y validación
Realizar comprobaciones de paridad, pruebas unitarias, pruebas funcionales, UAT y pruebas de rendimiento.
Asegurar la validación del esquema, la calidad de los datos, la regresión y la cobertura de pruebas de rendimiento.
Ejecución y Corte
Apoyar el corte migratorio, la puesta en funcionamiento y la estabilización post-migración (hipercuidado).
Coordinarse con los equipos de aplicación para la redistribución y la realización de pruebas.
Desactivación
Planifica y ejecuta la desmantelación de trabajos y artefactos heredados de DataStage.
Transferencia de conocimientos y formación
Proporcionar documentación de preparación operativa y realizar sesiones de KT con los ingenieros del cliente.
Proporcionar apoyo formativo para equipos de solicitud y de negocio.
Habilidades y experiencia requeridas

Habilidades técnicas
Amplia experiencia en desarrollo de IBM DataStage.
Experiencia en Databricks, Delta Lake, Unity Catalog, Photon
Dominio de PySpark, SQL, scripting de shell y Python.
Experiencia práctica con Databricks Spark (DBX) en AWS para verificación de empleos y desarrollo de pipelines.
Familiaridad con servicios de AWS como Glue, Lambda, Redshift.
Conocimiento de herramientas CI/CD (GitLab, ADO, JIRA) y frameworks de pruebas automatizadas.
Herramientas automatizadas de pruebas ETL, análisis PyTest y XML/JSON.

Conocimiento del dominio
Experiencia en migración y modernización ETL/ELT.
Comprensión de cargas de trabajo a gran escala de bases de datos/DWH y pipelines complejos.
Experiencia en soporte de hipercuidado y KT con equipos de solicitud.

Habilidades blandas
Sólidas habilidades de comunicación y colaboración para trabajar con equipos multifuncionales.
Capacidad para documentar requisitos, planes de prueba y artefactos de preparación operativa.
Mentalidad de resolución de problemas con enfoque en la calidad y la mejora continua.