Ids comercial es una empresa 100% mexicana dedicada a ti con más de 40 años de experiência con presenciaen méxico, costa rica y proyectos con eu y canadá.
nos especializamos en servicios de consultoría, desarrollo y capacitación en ti.más de * consultores trabajan con un gran número de proyectos dentro de los sectores financiero, comercial, manufacturero, telecomunicaciones, servicios, gobierno, entre otros.estamos acreditados en el nível 5 de cmmi (capability maturity model integration), modelo de calidad establecido por el software engineering institute (sei), certificados por parte de iso en la norma iso/iec *:*, así como cada año obtenemos un distintivo como empresa socialmente responsable (esr) entre otros.te invitamos a unirte a este gran equipo en ids con cultura happiness.
¡te estamos buscando!
big data engineer
*requisitos*:
- lic. /ing.
en sistemas, informática, o afín concluida
- experiência mínima de 6 años en desarrollo de big data
- nível de inglés avanzado
- disponibilidad para laborar un día a la semana en oficinas ubicadas cerca de parque toreo (cdmx).
experiência con:
- java y python para escribir canalizaciones de datos y capas de procesamiento de datos
- sql para la transformación de datos y la implementación de reglas comerciales.
- ingeniería de datos y desarrollo de canales de datos complejos.
- modelos ágiles
- airflow y github.
- redacción de trabajos de reducción de mapas.
- redacción de consultas complejas y altamente optimizadas en grandes conjuntos de datos.
- tecnologías de big data (hadoop, hive, kafka, presto, spark, hbase).
- tecnologías en la nube (deseable gcp)
- modelo relacional, almacenes de datos de memoria (deseable oracle, cassandra, druid)
- ajuste del rendimiento de sistemas que trabajan con grandes conjuntos de datos.
- servicio de datos rest api - consumo de datos
- almacenamiento distribuido de objetos en entornos de nube.
¿cuáles serán tus principales actividades?
- guiar a los equipos de ingeniería de datos.
- comprender los requisitos finales y analizar las soluciones de principio a fin.
- diseñar, desarrollar, implementar y ajustar sistemas y canalizaciones distribuidos a gran escala que procesen grandes volúmenes de datos; centrándose en la escalabilidad, la baja latencia y la tolerancia a fallos en cada sistema construido.
- proporcionar y respaldar la implementación y las operaciones de los canales de datos y soluciones analíticas.
- integrar colaborativamente con diferentes áreas para resolver desafíos de datos ejecutando reuniones multifuncionales efectivas, dando y recibiendo retroalimentación.