DATA ENGINEER

duagon Iberia, a rapidly expanding Swiss technology company, is a leading supplier for communication, computing and control technology as well as project planning and development services for system critical applications in the rail, medical and critical automation market. The superior software and hardware IP creates innovative, highly reliable and safe products, enabling customers to shape and realize their technology roadmap. Moreover, customers benefit from a shorter time to market and lower total cost of ownership.For the railway sector, duagon Iberia develops and manufactures communication solutions for train networks, control, monitoring and information systems, both as standard products and as customized solutions. The extensive portfolio is complemented by engineering services and high-quality application software for rail signaling and train information systems. For the medical industry, the technology company develops and manufactures reliable, compact and long-term available COMs, carrier boards and systems including the required software adaptions. The core competencies include power-optimized designs, high-performance embedded computing platforms and highly compact modules for use in applications such as patient monitoring, ventilators and medical imaging.The ideal candidate will be familiar with the full software design life cycle. They should have experience in designing, coding, testing and consistently managing applications They should be comfortable coding in a number of languages and have an ability to test code in order to maintain high-quality code.Qué funciones desempeñarás:Integrar las herramientas y framework de Big Data necesarios.Buscar herramientas y frameworks adecuados para las futuras necesidades.Implementación de procesos ELT desde un Data Warehouse Oracle, y logs en XML y JSON a Datalake en HDFS, Hive y HBase.Supervisar el rendimiento y asesorar sobre los cambios de infraestructura necesarios.DevOps.Soporte a miembros del equipo.Requisitos:Experiencia con bases de datos SQL, como HBase, mongoDB, Elastic. Experiencia con la integración de datos de múltiples fuentes de datos. Oracle, MySQL, PostgreSQL.Experiencia con Spark, Dask en cluster.Experiencia en sistemas de mensajería: Kafka.Experiencia con Hortonworks/Cloudera/MapR.Experiencia en la construcción de sistemas de procesamiento de flujo: Spark-Streaming, Kafkaconnect, kSQL, nifi, Storm o flume. Manejo experto en herramientas de sistemas: docker, npm, nginx, asible, kubernetes.Competencia con Hadoop v3, MapReduce, HDFS, Hive, Impala. Marcos ETLComprensión de arquitectura Lambda y Kappa. Conocimientos amplios en Python. Nivel básico al menos de C, Java, Scala o R. Qué ofrecemos:Modalidad híbrida: 2 días de teletrabajo y 3 días de presencialidad.Flexibilidad horaria.Remuneración atractiva + salario flexible (tickets restaurante, cheque de ayuda a guardería...)Acceso a formación continua ITContrato indefinido. Te ofrecemos la posibilidad de trabajar en un ambiente laboral inmejorable, rodeado de personas con alta motivación y energía, y en una compañía que apuesta por el futuro de sus empleados. Ingenieros al servicio de la tecnología.Visítanos en www.duagon.com¡Te esperamos!