*data engineer*
*responsabilidades*:
- diseñar, implementar y mantener pipelines de datos eficientes para la extracción, transformación y carga (etl) de grandes volúmenes de datos, asegurando la calidad, integridad y disponibilidad de los mismos.
- optimizar los flujos de procesamiento de datos y colaborar estrechamente con arquitectos de datos y científicos de datos para proporcionar datos confiables, accesibles y útiles para el análisis y la toma de decisiones.
- automatizar y optimizar los procesos de integración de datos para garantizar escalabilidad y robustez en entornos cloud.
- realizar monitoreo, depuración y optimización de trabajos etl para asegurar un rendimiento continuo y confiable.
- aplicar mejores prácticas de gobernanza de datos, seguridad y validación de calidad para garantizar la precisión y consistencia de los datos en los diferentes sistemas.
*tecnologías y herramientas*:
- *frameworks etl*: apache airflow, luigi, dbt.
- *lenguajes de programación*: python, sql, scala.
- *bases de datos y almacenamiento*: mssql, redshift, snowflake, delta lake, azure.
- *plataformas cloud*: azure data factory, aws lambda, google cloud dataflow.
- *big data*: apache spark, hadoop, kafka (procesamiento en tiempo real).
- *metodologías*: ci/cd, tdd, pruebas de calidad de datos y monitoreo, validación automática de datos.
*experiência deseada*:
- experiência sólida en herramientas de orquestación, automatización de pipelines de datos y procesamiento en tiempo real en entornos cloud.
- conocimiento avanzado en la optimización de pipelines etl, asegurando flujos de datos eficientes y manteniendo la calidad de los datos.
- experiência práctica con plataformas cloud (azure, aws, gcp), tecnologías de big data (spark, hadoop, kafka) y procesamiento de datos en tiempo real.
- experiência en la integración de validaciones automáticas de calidad de datos y monitoreo en los pipelines de datos.
*requisitos*:
- título universitario en ciencias de la computación, ingeniería o un área relacionada, o experiência equivalente.
- experiência comprobada como ingeniero/a de datos, con un enfoque fuerte en la construcción de pipelines de datos escalables y optimizados en entornos cloud.
- capacidad para colaborar eficazmente con equipos multidisciplinarios, incluyendo ciencia de datos y arquitectura de datos, para comprender y satisfacer las necesidades de datos del negocio.
*por qué elegir zurich*
en zurich, nos gusta pensar con originalidad y desafiar el statu quo. Adoptamos un enfoque optimista centrándonos en los aspectos positivos y preguntándonos constantemente ¿qué puede salir bien?
Somos un empleador que ofrece igualdad de oportunidades y que sabe que cada colaborador es único ¡lo que hace que nuestro equipo sea el mejor!
Colabora con nosotros mientras exploramos constantemente nuevas formas de proteger a nuestros clientes y al planeta.