Big Data - Cdc
🚀 ¡Sé parte de Stefanini!
En Stefanini somos más de 30.000 genios, conectados desde 41 países, haciendo lo que les apasiona y co-creando un futuro mejor.
📢 Buscamos un Ingeniero de Datos (Big Data) con experiencia en integración de datos y tecnologías de Captura de Datos por Cambios (CDC), para participar en la implementación y estabilización de una arquitectura de replicación de datos basada en Oracle, Apache Kafka y PostgreSQL.
🎯 ¿Qué harás?
- Implementar y configurar flujos de integración y replicación de datos mediante tecnologías CDC.
- Configurar y validar integraciones entre Oracle, Apache Kafka y PostgreSQL.
- Implementar conectores utilizando Kafka Connect, Debezium y JDBC Sink.
- Participar en la configuración de Apache Kafka (topics, particiones, offsets, replication factor y retención).
- Ejecutar pruebas de integración para operaciones INSERT, UPDATE y DELETE.
- Validar la integridad, consistencia y reconciliación de datos.
- Diagnosticar problemas de integración, conectividad y procesamiento.
- Participar en pruebas de rendimiento, recuperación y continuidad operativa.
- Coordinar con equipos de DBA, Infraestructura, Redes y Seguridad.
- Elaborar documentación técnica y realizar transferencia de conocimiento al equipo de soporte.
🔎 Requisitos
Conocimientos requeridos
- Apache Kafka (nivel intermedio).
- Experiencia práctica en al menos una herramienta CDC.
- SQL (nivel intermedio).
- Apache Spark (nivel intermedio).
- Linux (nivel intermedio).
- Oracle (consultas, transacciones y validación de datos).
- Experiencia en proyectos productivos de integración de datos.
Conocimientos deseables
- Debezium y Debezium Oracle Connector.
- Kafka Connect (workers, connectors y tasks).
- PostgreSQL.
- Oracle LogMiner y manejo de REDO / Archived REDO.
- Java / JVM.
- Alta disponibilidad (HA) y continuidad operativa.
- Monitoreo de lag, latencia, throughput y performance.
- Manejo de datos LOB (CLOB, BLOB y NCLOB).
- Automatización con Bash o Python.
- Redes y conectividad (DNS, puertos y NTP).
También valoramos experiencia con
- Oracle GoldenGate.
- IBM IIDR.
- Qlik Replicate.
- AWS DMS.
- Otras tecnologías CDC equivalentes.