Desarrollador de datos con experiencia senior
buscamos un profesional apasionado por el mundo de los datos, con experiencia sólida en diseño, implementación y optimización de lagos de datos en entornos cloud, particularmente en microsoft azure. Este rol requiere un dominio avanzado de azure databricks como motor de procesamiento distribuido, así como un entendimiento profundo de arquitecturas de datos modernas, prácticas de ingeniería de datos y gobierno de la información.
requisitos:
* experiencia en plataformas cloud:
o azure databricks : desarrollo de pipelines de datos en pyspark y spark sql. Orquestación de notebooks y jobs programados. Optimización de performance con delta lake, particiones, z-ordering y cachés.
o azure data lake storage gen2 : ingesta, organización y estructuración de datos en capas bronze, silver y gold. Buenas prácticas para particionado, estructura de carpetas y naming conventions.
o azure data factory / synapse pipelines : orquestación de flujos etl/elt. Integración de pipelines con databricks mediante triggers o linked services.
* procesamiento y desarrollo:
o dominio de pyspark y procesamiento distribuido en databricks. Desarrollo de pipelines robustos y escalables para: ingesta batch y streaming (kafka, event hubs, etc.). Transformaciones complejas. Calidad de datos y validaciones automáticas.
o conocimientos en formatos eficientes de almacenamiento como parquet, delta lake y avro. Implementación de cdc (change data capture) en entornos de datos.
* devops & automatización:
o uso de git y repos integrados con databricks para versionado de código. Automatización de despliegues con databricks cli, databricks terraform provider o databricks asset bundles (dab).
o experiencia con ci/cd (github actions, azure devops) para pipelines de datos.
beneficios:
* opportunidades de crecimiento y desarrollo en una empresa líder en tecnología.
* un ambiente de trabajo dinámico y colaborativo.
* acceso a recursos y herramientas de última generación.
otros:
1. la selección final será realizada por un equipo de expertos en recruiters. Si no te quedan opciones disponibles y quieres que reciban tu currículum cuando tengas vacantes se ofrece cambiarlo fácilmente cada 3 meses desde