Acerca de la empresa - somos una empresa innovadora que busca personas apasionadas por la tecnología.
nos destacamos por ser diferentes a la consultoría tradicional. Aquí, creemos en contratarte para formar parte de nuestra familia. Valoramos la colaboración, el trabajo en equipo y el aprendizaje constante.
cada miembro es esencial para nosotros, no sólo un número en una lista. Somos un equipo unido y horizontal, y queremos que así siga siendo.
sí, somos exigentes, pero nuestros desafíos también lo son. Aquí te desarrollarás junto a auténticos expertos, en entornos innovadores y siempre a la vanguardia de la tecnología.
acerca del rol - buscamos un data engineer senior con experiencia sólida en el diseño, implementación y optimización de data lakes en entornos cloud, particularmente en microsoft azure.
este rol requiere un dominio avanzado de azure databricks como motor de procesamiento distribuido, así como un entendimiento profundo de arquitecturas de datos modernas, prácticas de ingeniería de datos y gobierno de la información.
* diseño e implementación de pipelines de datos: desarrollo de pipelines de datos en pyspark y spark sql.
* orquestación de notebooks y jobs programados: orquestación de notebooks y jobs programados.
* optimización de performance: optimización de performance con delta lake, particiones, z-ordering y cachés.
* gestión centralizada de metadatos y gobernanza: uso de unity catalog para gestión centralizada de metadatos y gobernanza.
* ingesta, organización y estructuración de datos: ingesta, organización y estructuración de datos en capas bronze, silver y gold.
* buenas prácticas para particionado, estructura de carpetas y naming conventions: buenas prácticas para particionado, estructura de carpetas y naming conventions.
* orquestación de flujos etl/elt: orquestación de flujos etl/elt.
* integración de pipelines con databricks: integración de pipelines con databricks mediante triggers o linked services.
* acceso seguro a secretos, credenciales y recursos: acceso seguro a secretos, credenciales y recursos del ecosistema.
* seguimiento y diagnóstico de procesos de datos: azure monitor / log analytics para seguimiento y diagnóstico de procesos de datos.
procesamiento y desarrollo:
* desarrollo de pipelines robustos y escalables: dominio de pyspark y procesamiento distribuido en databricks.
* transformaciones complejas: desarrollo de pipelines robustos y escalables para transformaciones complejas.
* calidad de datos y validaciones automáticas: calidad de datos y validaciones automáticas.
* conocimientos en formatos eficientes de almacenamiento: conocimientos en formatos eficientes de almacenamiento como parquet, delta lake y avro.
* implementación de cdc (change data capture): implementación de cdc (change data capture) en entornos de datos.
* uso de git y repos integrados con databricks: uso de git y repos integrados con databricks para versionado de código.
* experiencia con ci/cd: experiencia con ci/cd (github actions, azure devops) para pipelines de datos.
requisitos deseables:
* arquitecturas de tipo medallion: experiencia en arquitecturas de tipo medallion (bronze, silver, gold).
* data governance: conocimiento en data governance con microsoft purview.
* event-driven architectures: familiaridad con event-driven architectures en azure.
* modelado de datos: experiencia en modelado de datos para análisis (kimball, data vault).
* herramientas de bi: conocimientos básicos en herramientas de bi (power bi, tableau).
se valorará de forma especial:
* tecnología: apasionado/a de la tecnología. Completamente al día de las últimas tendencias de la industria.
* comunicación: buen comunicador, sabrá transmitir ilusión al entorno de trabajo.
* compromiso: comprometido. Capacidad de análisis y solución de problemas.
* adaptabilidad: capaz de adaptarse a la cultura de trabajo de una pyme.
* desarrollo profesional: interesado/a en desarrollar su carrera profesional en entornos altamente competitivos y con alto potencial de crecimiento.
perfil del candidato/a ideal:
* tecnología: eres un apasionado/a de la tecnología y estás siempre al día con las últimas tendencias de la industria.
* objetivos: estás acostumbrado/a a trabajar por objetivos y en entornos altamente exigentes.
* comunicación: tienes habilidades excepcionales de comunicación y sabes transmitir entusiasmo en el trabajo.
* compromiso: eres una persona comprometida, con fuertes habilidades de análisis y resolución de problemas.
* adaptabilidad: te adaptas fácilmente a la cultura de trabajo de una empresa donde no hay grandes jerarquías.
* desarrollo profesional: estás interesado/a en desarrollar tu carrera en un entorno altamente competitivo con un gran potencial de crecimiento.