En global executive estamos en búsqueda de un :
data sr. Engineer
Únete a empresa europea líder en servicios digitales, que emplea aproximadamente 28.000 consultores y especialistas en 19 países. La empresa ofrece una amplia gama de soluciones y servicios digitales, que incluyen consultoría, integración de sistemas, desarrollo de aplicaciones y servicios gestionados, para respaldar los esfuerzos de transformación digital de empresas y entidades del sector público.
propósito del puesto
estamos en búsqueda de un data sr. Engineer con experiencia en el diseño y desarrollo de pipelines de datos, habilidades avanzadas en tecnologías de procesamiento distribuido y automatización de flujos de trabajo. Este rol será responsable de implementar procesos eficientes que integren múltiples tecnologías, optimizando pipelines existentes y asegurando la escalabilidad y eficiencia de los entornos de datos.
idioma : inglés avanzado (indispensable)
responsabilidades principales
* crear y gestionar pipelines de datos utilizando apache airflow.
* procesar y analizar grandes volúmenes de datos mediante apache spark.
* extraer y procesar datos utilizando aws emr.
* programar y optimizar aplicaciones en scala y java.
* configurar correctamente trabajos (jobs), asegurando :
o argumentos de línea de comandos adecuados.
o configuración precisa de tiempos y horarios de ejecución.
* diseñar y mantener pipelines en jenkins para aplicaciones.
* implementar y desplegar aplicaciones en eks (elastic kubernetes service).
* configurar y usar spinnaker para pipelines específicos.
* compilar archivos jar e integrarlos como imágenes docker utilizando gradle.
* automatizar procesos para garantizar la integración y colaboración de tecnologías en entornos de trabajo dinámicos.
requisitos :
requisitos técnicos :
* pipelines y automatización: experiencia en la creación y optimización de jenkins pipelines.
* procesamiento de datos:
o experiencia con apache spark para manejar grandes volúmenes de datos.
o dominio de apache airflow para la orquestación de pipelines.
* desarrollo en la nube:
o experiencia con aws emr para la extracción y procesamiento de datos.
o despliegues avanzados en eks.
* lenguajes de programación: conocimientos sólidos en scala y java.
* integración y despliegue:
o familiaridad con spinnaker para pipelines especializados.
o uso de gradle para la creación de imágenes docker.
requisitos generales:
* capacidad para analizar pipelines existentes y rediseñarlos para optimizar flujos de trabajo.
* experiencia colaborando con equipos multidisciplinarios en entornos dinámicos.
* habilidad para identificar áreas de mejora en procesos técnicos y proponer soluciones innovadoras.
* inglés avanzado para comunicación efectiva en entornos internacionales.
si buscas un desafío técnico que combine innovación, automatización y procesamiento avanzado de datos, ¡este puesto es para ti!
#j-18808-ljbffr