Descripción
Resumen:
Este puesto implica liderar y modernizar la entrega de ingeniería de datos, centrándose en la migración de sistemas ETL y de programación, mientras se guía a un pequeño equipo en plataformas de datos sanitarios.
Aspectos destacados:
1. Liderar la modernización de la entrega de ingeniería de datos con énfasis en la migración.
2. Trabajar directamente con Databricks, PySpark y Apache Airflow.
3. Contribuir a plataformas de datos sanitarios y guiar a un pequeño equipo.
**Resumen del puesto**
--------------------
Este puesto implica liderar la entrega técnica diaria de trabajos de ingeniería de datos, especialmente la modernización de los sistemas existentes de ETL y programación. Este puesto se centra en trasladar las canalizaciones de datos de Informatica BDM a Databricks y migrar los programas de tareas de TIDAL a Airflow.
La persona desempeñará un rol práctico, guiará a un pequeño equipo y colaborará estrechamente con arquitectos, analistas y partes interesadas en plataformas de datos sanitarios.
**Responsabilidades laborales**
------------------------
* Liderar la migración de trabajos ETL existentes de Informatica BDM a Databricks mediante PySpark.
* Migrar la programación de tareas y sus dependencias de TIDAL a Apache Airflow.
* Diseñar, desarrollar y mantener canalizaciones de datos escalables en Databricks.
* Trabajar con datos sanitarios como reclamaciones, recetas, pacientes, proveedores o datos de ventas.
* Garantizar la precisión de los datos mediante controles de calidad y conciliaciones, especialmente durante la migración.
* Guiar y revisar el trabajo realizado por ingenieros de datos y asociados senior.
* Desglosar el trabajo en tareas, estimar esfuerzo y apoyar la entrega en sprints.
* Colaborar con arquitectos y analistas comerciales para transformar los requisitos en soluciones de datos funcionales.
* Apoyar las pruebas, corrección de errores y lanzamientos a producción.
* Mantener documentación técnica clara y manuales operativos.
**Formación académica**
-------------
Ingeniería en Electrónica / Ingeniería en Tecnologías de la Información
Maestría en Aplicaciones Informáticas**Experiencia laboral**
-------------------
* 6–8 años de experiencia en ingeniería de datos, con experiencia liderando pequeños equipos o flujos de trabajo.
* Amplia experiencia práctica con Databricks (PySpark), Informatica BDM, Informatica IICS / IDMC y Apache Airflow.
* Experiencia en migraciones:
BDM* + Databricks
TIDAL + Airflow
* Buenas habilidades en SQL y comprensión del procesamiento por lotes de datos.
* Experiencia trabajando con datos sanitarios o del sector de ciencias de la vida.
* Conocimientos de plataformas en la nube (AWS, Azure o GCP).
* Buenas habilidades de comunicación y documentación.
* Experiencia en proyectos de modernización de datos o migración de plataformas.
* Conocimiento de metodologías ágiles, Jira y Confluence.
* Experiencia trabajando en entornos regulados de datos.
**Competencias conductuales**
----------------------------
Sentido de propiedad
Trabajo en equipo y liderazgo
Adecuación cultural
Motivación para aprender y crecer**Competencias técnicas**
--------------------------
Resolución de problemas
Conocimientos en ciencias de la vida
Comunicación
Informatica
Databricks
Python**Habilidades**
----------