Y-636 Big Data Architect

DescriptionAmpliamos nuestro equipo de Data & AI!. Seleccionamos profesionales para trabajar en un equipo de arquitectura de datos en modalidad hibrida en Madrid para importante proyecto del sector financiero.Qué ofrecemos?Estupendo ambiente laboral, las personas que componen nuestros equipos lo hacen posible.Teletrabajo y horario flexible.Formación a medida y posibilidad de participar en gremios y grupos transversales de difusión de conocimientos de todo tipo.Plan de carrera personalizado, para que alcances las metas que te propongas.Estabilidad laboral.Beneficios sociales con nuestra plataforma de retribución flexible y diversas iniciativas de salud y bienestar con nuestro programa VASS Care.RequirementsAl menos 5 años de experiencia en proyectos de arquitectura Big Data.Gran comprensión de los principios de computación distribuida.Experiencia con la integración de datos, procedentes de diversas fuentes.Experiencia en el Diseño de soluciones, End2End, de flujos de datos, ya sea en Streaming o Batch. Gestión de los recursos (Memoria, CPUs) a asignar a los distintos Jobs.Establecimiento de buenas prácticas a la hora de programar ETLs y definición de su estructura para despliegues.Comprensión de la arquitectura y funcionamiento de HDFS.Comprensión de la arquitectura de un Clúster, on-premise, de Hadoop.Comprensión de la arquitectura Lambda y Kappa, junto con sus ventajas y desventajas.Lenguajes requeridos:Python: alto.Java / Scala: medio en POO.SQL: medio / alto.Herramientas de tratamiento y procesamiento de datos (experiencia requerida):Apache Spark con PythonApache KafkaBases de Datos y motores de búsqueda (tanto SQL como NoSQL):ElasticSearchHiveHBaseOracle y MySQLLocation (Hybrid)#J-18808-Ljbffr