Treball Data Engineer Hadoop en Madrid

atSistemas ahora es !!!!!knowmad mood!!!!! Una compañía líder en transformación digital que combina el talento y tecnología con la misión de aportar valor a más de 500 clientes. A día de hoy, más de 2400 profesionales, una facturación de 129,2 millones de euros en 2022 y sedes en 7 países como España, Italia, Portugal, Reino Unido, Estado Unidos, Uruguay y Marruecos con casi 30 años de experiencia en el mercado tecnológico. Si eres un apasionado de los Datos y estás buscando nuevos retos profesionales ¡esto te puede interesar! Nuestra Comunidad Tecnológica experta en DATA & ANALYTICS no para de crecer y necesitamos incorporar un Senior Data Engineer con experiencia en GCP. Capacidades técnicas: Conocimiento extenso de SQL, con BigQuery Experiencia en Python, idealmente con Hadoop y GIT Muy valorable experiencia en alguna fuente de datos de marketing (AdServers, DSPs, Facebook, AdSearch...) GIT Experiencia en plataforma Google Cloud Conocimiento de Dataforms Inglés fluido ( mínimo B2) Funciones: Extracción de datos relacionados con la publicidad de diferentes proveedores como pueden ser Facebook, Linkedin, Google, Youtube, de sus respectivas APIs. Una vez obtenidos estos datos almacenados en una base de datos Hive en tablas parqueten Google Cloud Storage se transforma y modela éstos mediante PySpark ejecutando en un cluster de Dataproc. Carga de los datos en tablas de Big Query con un modelo en estrella para que PowerBI pueda mostrarlos en un dashboard. Toda la arquitectura está desplegada en Google Cloud.Encargado de guiar técnicamente en las tareas a un equipo de desarrolladores junior. Modalidad de trabajo híbrida: 3 días/ semana de teletrabajo y 2 días/semana presencial ( zona céntrica Madrid) knowmad mood es una compañía donde nos preocupamos por tu persona, tu felicidad, tu bienestar y tu salud. Apostamos por la formación y el desarrollo de carrera. Cultura human centric. Potenciamos engagement y la escucha activa con las personas. Nos preocupamos por la felicidad y el bienestar de las personas. Work mood: Vacaciones: Descansa para volver con más fuerza, 22 días de vacaciones + 2 días de libre disposición + 24 y 31 de diciembre. Our mood: Ofrecemos una nueva forma de trabajar más flexible Flex work: favorecemos una jornada diaria flexible para que tú decidas a tu ritmo cuándo empieza tu vida personal y cuando termina tu jornada laboral. Smart working: lo importante es que tú estés bien, tu desarrollo, y la orientación a resultados, no si vienes a la oficina. Por eso no hace falta ni que tengas la oficina cerca, mientras tengas una buena conexión, todo es posible. Beneficios y ventajas: destina parte de tu salario a determinados productos como tarjeta de transporte, tarjeta restaurante, cheques guardería, seguro médico o formación. Además disfruta en nuestra plataforma interna de todos los descuentos exclusivos para tu vida fuera de la compañía. knowmad mood nos encargamos de cuidar a nuestras personas y es un lugar fantástico en el que trabajar, convivir y desarrollarte. Nos gusta escucharte: encuesta de felicidad, línea directa CEO, evaluación 360º Cuidamos tu bienestar: a través de nuestro programa de bienestar integral centrado en: actividad física, nutrición saludable y equilibrio emocional. Y de tu vida: programa de conciliación 24 horas al día y 365 días del año para ti, tu pareja y tu familia: Consultas legales, asistente personal, plan dental, consulta veterinaria, gestor administrativa Hacemos equipo: compartimos momentos de diversión, porque sabemos lo importante que es dedicar espacios donde conectar y reírnos más allá de los proyectos y equipos con nuestras actividades de team building: videojuegos online, scape room, ajedrez, etc Nos gusta juntarnos: celebramos el verano y la navidad y nos reencontramos en nuestra Santa´s Summer Party y en nuestra Christmas Party. #joinus

Description: From Grupo Digital, we are looking for a Data Engineer Scala Spark for a stable project. Requirements: Experience supporting / overseeing mentoring and guiding junior developers, including providing guidance on best practice / technical solutions, peer reviews and documentation of testing Implement and management of scalable big data infrastructure using IaC such as Terraform AWS expertise in services such as EMR, EC2, Lambda, Step Functions, Glue Experience of Big Data Technologies - well rounded experience of Hadoop, Spark/Scala and NoSQL databases Practical experience designing and monitoring batch processes Proficiency in scripting languages such as Bash & Python Unix / Linux experience Worked with Code Repositories as GIT, Maven, ... DevOps Knowledge (Jenkins, Scripts, ...) Tools used for deploying software into environments, use of Jira. High level of Spanish and English. Nice to have skills: Analyst Skills: Being able to translate technical requirements to non-technical partners and to deliver clear solutions. Been able to create test cases scenario SQL advance knowledge: Been able to test changes and issues properly, replicating the code functionality into SQL Documentation: Experience of carrying out data and process analysis to create specifications documents Finance Knowledge: Have a experience working in Financial Services / Banking organisation with an understanding of Financial Services / Retail, Business and Corporate Banking Control-m solid experience: Been able to create jobs, modify parameters What do we offer you? Competitive salary based on experience Permanent contract or Freelance Contract Option 22 working days of vacation Flexible compensation plan: Medical insurance, childcare vouchers, transportation vouchers Training in Technology and Soft Skills Referral program: EUR500 for recommended candidates who join us Location: Madrid. Full remote. Salary to be negotiated based on experience. Grupo Digital We are a group of technology companies, currently made up of around 200 professionals in various areas: development, systems, automation engineering, consulting, and more. If you wish to start your career in web development and be part of a dynamic team, we look forward to receiving your application!

¿Qué buscamos? Más de 3 años de experiencia como ingeniero de datos o en un puesto similar Gran dominio del lenguaje de programación Scala y PySpark Amplia experiencia con tecnologías de big data, en particular Apache Spark y el ecosistema Hadoop Sólidos conocimientos de bases de datos SQL y NoSQL Experiencia en modelado de datos, procesos ETL y conceptos de almacenamiento de datos Experiencia con sistemas de control de versiones, preferiblemente GIT. Familiaridad con plataformas en la nube como AWS, Azure o GCP Conocimiento de las mejores prácticas de seguridad y privacidad de datos Descripción Porque trabajar en Sopra Steria, también es sentir Sopra Steria. Somos un reconocido líder europeo en consultoría, servicios digitales y desarrollo de software, con cerca de 56.000 empleados en casi 30 países y más de 4.000 en España. Nos enfocamos en las personas, en su formación y desarrollo profesional, lo que nos impulsa a crecer y mejorar constantemente. Tenemos pasión por lo digital y al igual que tú, buscamos la mejor de las aventuras. Queremos que tu día a día se convierta en la mejor de tus inspiraciones. Que aprendas, aportes, te diviertas, crezcas y que, sobre todo, disfrutes al máximo. Si quieres formar parte de un equipo "Great Place to Work", ¡Sigue leyendo! En Sopra nos gustaría incorporar a un par de Data Engineer con experiencia en Scala y PySpark para unirse a nuestro dinámico equipo. En este puesto, será responsable de diseñar, implementar y mantener canalizaciones de datos e infraestructuras robustas para apoyar los procesos de toma de decisiones basados en datos de nuestra organización. Desarrollar y optimizar los procesos ETL utilizando Scala y PySpark para manejar el procesamiento de datos a gran escala Colaborar con científicos y analistas de datos para comprender los requisitos de los datos y entregar conjuntos de datos de alta calidad Construir y mantener canalizaciones de datos escalables utilizando Apache Spark y otras tecnologías de big data Implementar controles de calidad de datos y sistemas de supervisión para garantizar la precisión y fiabilidad de los datos El horario es flexible de oficina y el trabajo se realiza de manera híbrida, siendo 1 o 2 días por semana en oficina y el resto en casa.. Ubicación: Las Tablas