Spark Data Engineer

Spark Data Engineer
Empresa:

Sdg Group


Detalles de la oferta

.Requisitos mínimos:Estar graduado en Ingeniería Informática o de Telecomunicaciones.Tener al menos 4 años de experiencia en un rol de Big Data Engineer, implementando y productivizando soluciones de captación, ingesta y transformación de datos con herramientas de procesamiento distribuido y/o procesamiento en streaming.Experiencia en arquitectura de datos (formato, estructura, particionado, modelado, capas y ciclo de vida) en ambientes Data Lake, Data Lakehouse, Kafka Topics & Partitioning, Schema Registry, etc.Además será importante que tengas experiencia en algunas de las siguientes herramientas:Lenguajes: Python, Java o Scala.Herramientas core del entorno de procesamiento en entornos Big Data, especialmente Apache Spark. Además es importante que tengas conocimientos sólidos de HDFS.Conocimiento de al menos una plataforma de datos con profundidad: Databricks, AWS EMR, AWS Glue, Elastic Search, GCP Dataflow & Dataproc, etc.Conocimiento en herramientas de orquestación como Apache Airflow, Azure Data Factory, Databricks workflows,...Conocimiento y experiencia en el uso de sistemas de control de versiones (VCS), esencialmente Git.Experiencia en la utilización de al menos una de las tres grandes nubes (AWS, Microsoft Azure o Google Cloud Platform), especialmente en lo relativo a los servicios orientados a procesamiento y disposición de datos.Requisitos valorables:Nos gusta estar al día en nuevas tecnologías, así que necesitamos personas que quieran estar en continua evolución y que tengan ganas de aprender nuevas tecnologías y probar nuevas herramientas.Para nosotrxs el trabajo en equipo es primordial, por lo que buscamos personas que impulsen ese buen ambiente y las sinergias entre compañerxs y diferentes equipos de trabajo.Qué conozcas lenguajes que están tomando relevancia ahora en el mundo data como Rust o Elixir es algo que valoraremos muy positivamente también.Cómo trabajamos en un entorno global, será un plus que puedas comunicarte en inglés.Conocimiento sobre DataOps, Observabilidad, patrones de diseño low-code/no-code,...Acerca del puesto:SDG Group es una firma de consultoría global focalizada exclusivamente en soluciones de data & analytics, cubriendo con ello toda la cadena de valor del dato, y proporcionando planes de carrera tanto de consultoría como de especialización para todos aquellos que quieran progresar en el mundo del dato. Además, a través de nuestra cultura Smart Work tendrás la posibilidad de definir el modelo de trabajo que más se adapte a ti y a tus necesidades personales, al mismo tiempo que puedas colaborar en iniciativas de gran impacto para clientes punteros en sus respectivas industrias.Como data engineer del área de Data Technologies, tu misión será formar parte de equipos multidisciplinares con el objetivo de ayudar a nuestros clientes a abordar iniciativas de datos en entornos de alta complejidad técnica


Fuente: Jobtome_Ppc

Requisitos

Spark Data Engineer
Empresa:

Sdg Group


F&B Service

Empresas: RMC AsiaThe RMC Asia team is in search of interns to join Accor's F&B service & bar operations internship Taking place in the enchanting emirate of...


Desde Rmc Asia - Madrid

Publicado a month ago

Arquitecto De Soluciones Cloud

.Arquitecto de Soluciones Cloud page is loaded Arquitecto de Soluciones Cloud Apply locations Madrid Cristalia, Spain time type Full time posted on Posted 29...


Desde Transamerica Corporation - Madrid

Publicado a month ago

Ios Developer

.Pulsar Tabulador para desplazarse para pasar el enlace del contenidoSeleccione la frecuencia (en días) para recibir una alerta: Crear alertaTSA es la compañ...


Desde Telefónica, S.A. - Madrid

Publicado a month ago

Senior System Engineer - Data Engineer Cms

.TUI Group is the world's number one integrated tourism business. Enablers is a global team within TUI technology responsible for the effective delivery of I...


Desde Tui Cruises Gmbh - Madrid

Publicado a month ago

Built at: 2024-06-27T04:02:42.904Z