Treball Esp. Big Data Agile en Madrid

DESCRIPCIÓN Se requiere un data engineer para unirse al grupo de Ingeniería de Global Big Data, responsable de una plataforma que proporciona a los analistas información y KPIs relevantes para una mejor toma de decisiones de negocio. RESPONSABILIDADES Participará en el desarrollo y mantenimiento de procesos de extracción, transformación y carga (ETL) sobre datos provenientes de las distintas áreas de negocio. Entre las tareas que deberá desempeñar, se encuentran: Análisis y diseño de los procesos ETL en base a los requerimientos funcionales, teniendo en cuenta también los no funcionales como el rendimiento o la escalabilidad. Desarrollo y pruebas unitarias. Participación en revisiones de código. Automatización de procesos y soporte a IT en el despliegue y mantenimiento. REQUISITOS TÉCNICOS Ingeniero Informático o similar. Experiencia en Big Data, particularmente como data engineer. Experiencia con las tecnologías Spark, YARN, Hadoop, Hive. Experiencia con BB.DD. relacionales, particularmente MySQL. El lenguaje de programación es Scala y se valorarán conocimientos de programación funcional (en casos excepcionales, se valorará experiencia con PySpark). Experiencia con Linux y shell scripting, se valorarán conocimientos de Ansible Familiarizado con entornos cloud, particularmente Google Cloud Platform (en su defecto, se valorarán conocimientos de AWS o Azure). Familiarizado con el WoW de CDO (Agile, GitHub, JIRA/Redmine, Continuous Integration). EXPERIENCIA PROFESIONAL Mínimo 3 años de experiencia como desarrollador. Mínimo 1 año de experiencia trabajando en proyectos de Big Data