Trabajo Data Engineer Hadoop

Senior Data Engineer (Databricks/Snowflake) Elegir Capgemini es elegir la posibilidad de dar forma a tu carrera profesional como desees. Recibirás el apoyo y la inspiración de una comunidad colaborativa de colegas de todo el mundo y podrás reinventar lo que es posible. Únete a nuestro equipo y ayuda a las principales organizaciones del mundo a descubrir el valor de la tecnología y a construir un mundo más sostenible e inclusivo. ¿Te apetece sumarte a nosotros y participar en proyectos multisectoriales en un equipo conformado por profesionales del dato como Data Scientists, Data Engineers o Data Analysts? Nuestro objetivo es ayudar a nuestros clientes en el camino hacia la innovación continua. ¿Qué harás en el proyecto? ¿Cuál será tu rol? Como Ingeniero de Datos de Azure, serás responsable de ampliar y optimizar las arquitecturas de datos y canalizaciones, así como de optimizar la recopilación y el flujo de datos en todos los equipos funcionales. Al mismo tiempo... Podrás desarrollar proyectos desde cero con la colaboración del equipo. Participarás en el diseño de arquitecturas y toma de decisiones en un entorno constructivo. Desarrollarás proyectos en Cloud. Construirás pipelines escalables con diferentes tecnologías. Para desenvolverte bien en la posición se requieren conocimientos en/de: Dominio de Azure Snowflake, Databricks o Spark. Experiencia en SQL y T-SQL Experiencia trabajando con lenguajes Python, Scala. Competente en la creación de pipelines para el procesamiento ETL/ELT en la nube o híbrido. Experiencia como Ingeniero de Datos participando en todo el ciclo: desde la preparación de datos hasta la gestión de datos, y desde llevar modelos a producción hasta pruebas unitarias. Habilidades comunicativas para interlocutar con arquitectos de datos y el resto del equipo, proactividad, responsabilidad, buena capacidad de gestión del tiempo, trabajo en equipo. Deseable: Conocimiento de la plataforma de datos Azure, incluyendo Azure Data Factory, Azure SQL, ADLS, etc. Familiaridad con herramientas de big data (Hadoop, Spark, etc.). Buen conocimiento técnico de Microsoft BI, será un plus Se valorará positivamente el poseer certificado de discapacidad, en el marco de nuestra política de inclusión y diversidad. Valoraremos todas las candidaturas. Contamos con una amplísima oferta formativa, presencial, online de Certificaciones, etc. Aunque no tengas el 100% de los conocimientos valorados ¡nos encantará conocerte! Nuestro compromiso con la inclusión e igualdad de oportunidades hace que tengamos un Plan de Igualdad y un Código Ético que garantizan el desarrollo profesional de la plantilla y la igualdad de oportunidades en su selección dentro de un entorno libre de discriminación por cuestión de etnia, nacionalidad, origen social, edad, orientación sexual, expresión de género, religión o cualquier otra circunstancia personal, física o social. ¿Qué te gustará de trabajar aquí? Tenemos un catálogo de medidas de Desarrollo y Conciliación muy completo, como son, por ejemplo: Un ambiente de trabajo único muy valorado por nuestros profesionales en las evaluaciones periódicas. Wellbeing HUB - Incluye políticas y acciones para la salud física (Wellhub) y mental. 24 días de vacaciones + 2 asuntos propios + 24 y 31 de diciembre + opción a comprar hasta 7 días de vacaciones al año. FlexAbroad: posibilidad de trabajar en remoto desde otro país durante 45 días. Plan de Compensación Flexible (seguro médico, transporte, formación, tarjeta restaurante o subvención de comida, guardería...) Formación continua, podrás disfrutar de Mylearning y de Capgemini University y de nuestros Campus Digitales y Comunidades profesionales. Tendrás acceso a plataformas como: Coursera, Udemy, Pluralsight, Harvard Manager Mentor, Education First para idiomas (inglés francés, alemán...) ¡entre otras! Participación en Acciones de Voluntariado y Acción Social con nuestros Grupos de Sostenibilidad, Inclusión e Igualdad. Acompañamiento en tus inicios con el programa de Buddies. Seguro de Vida y Accidentes ¿Por qué Capgemini? Capgemini es líder global en transformando los negocios de los clientes aprovechando todo el poder de la tecnología. Nos guía el propósito de lograr un futuro inclusivo y sostenible a través de la tecnología y de la energía de quienes la desarrollamos. Somos una compañía responsable y diversa, líder internacional en servicios de IT e Ingeniería con más de 360.000 profesionales en más de 50 países. Con una sólida herencia de 55 años y una amplia experiencia en la industria, los clientes confían en Capgemini para abordar la totalidad de sus necesidades comerciales, desde la estrategia y el diseño hasta las operaciones, impulsadas por el rápido y novedoso mundo de la nube, los datos, la IA, la conectividad, el software, las plataformas e ingeniería digitales. El Grupo reportó en 2022 ingresos globales de EUR22 mil millones. Reescribe tu futuro. ¡Únete al equipo!

atSistemas ahora es !!!!!knowmad mood!!!!! Una compañía líder en transformación digital que combina el talento y tecnología con la misión de aportar valor a más de 500 clientes. A día de hoy, más de 2400 profesionales, una facturación de 129,2 millones de euros en 2022 y sedes en 7 países como España, Italia, Portugal, Reino Unido, Estado Unidos, Uruguay y Marruecos con casi 30 años de experiencia en el mercado tecnológico. Si eres un apasionado de los Datos y estás buscando nuevos retos profesionales ¡esto te puede interesar! Nuestra Comunidad Tecnológica experta en DATA & ANALYTICS no para de crecer y necesitamos incorporar un Senior Data Engineer con experiencia en GCP. Capacidades técnicas: Conocimiento extenso de SQL, con BigQuery Experiencia en Python, idealmente con Hadoop y GIT Muy valorable experiencia en alguna fuente de datos de marketing (AdServers, DSPs, Facebook, AdSearch...) GIT Experiencia en plataforma Google Cloud Conocimiento de Dataforms Inglés fluido ( mínimo B2) Funciones: Extracción de datos relacionados con la publicidad de diferentes proveedores como pueden ser Facebook, Linkedin, Google, Youtube, de sus respectivas APIs. Una vez obtenidos estos datos almacenados en una base de datos Hive en tablas parqueten Google Cloud Storage se transforma y modela éstos mediante PySpark ejecutando en un cluster de Dataproc. Carga de los datos en tablas de Big Query con un modelo en estrella para que PowerBI pueda mostrarlos en un dashboard. Toda la arquitectura está desplegada en Google Cloud.Encargado de guiar técnicamente en las tareas a un equipo de desarrolladores junior. Modalidad de trabajo híbrida: 3 días/ semana de teletrabajo y 2 días/semana presencial ( zona céntrica Madrid) knowmad mood es una compañía donde nos preocupamos por tu persona, tu felicidad, tu bienestar y tu salud. Apostamos por la formación y el desarrollo de carrera. Cultura human centric. Potenciamos engagement y la escucha activa con las personas. Nos preocupamos por la felicidad y el bienestar de las personas. Work mood: Vacaciones: Descansa para volver con más fuerza, 22 días de vacaciones + 2 días de libre disposición + 24 y 31 de diciembre. Our mood: Ofrecemos una nueva forma de trabajar más flexible Flex work: favorecemos una jornada diaria flexible para que tú decidas a tu ritmo cuándo empieza tu vida personal y cuando termina tu jornada laboral. Smart working: lo importante es que tú estés bien, tu desarrollo, y la orientación a resultados, no si vienes a la oficina. Por eso no hace falta ni que tengas la oficina cerca, mientras tengas una buena conexión, todo es posible. Beneficios y ventajas: destina parte de tu salario a determinados productos como tarjeta de transporte, tarjeta restaurante, cheques guardería, seguro médico o formación. Además disfruta en nuestra plataforma interna de todos los descuentos exclusivos para tu vida fuera de la compañía. knowmad mood nos encargamos de cuidar a nuestras personas y es un lugar fantástico en el que trabajar, convivir y desarrollarte. Nos gusta escucharte: encuesta de felicidad, línea directa CEO, evaluación 360º Cuidamos tu bienestar: a través de nuestro programa de bienestar integral centrado en: actividad física, nutrición saludable y equilibrio emocional. Y de tu vida: programa de conciliación 24 horas al día y 365 días del año para ti, tu pareja y tu familia: Consultas legales, asistente personal, plan dental, consulta veterinaria, gestor administrativa Hacemos equipo: compartimos momentos de diversión, porque sabemos lo importante que es dedicar espacios donde conectar y reírnos más allá de los proyectos y equipos con nuestras actividades de team building: videojuegos online, scape room, ajedrez, etc Nos gusta juntarnos: celebramos el verano y la navidad y nos reencontramos en nuestra Santa´s Summer Party y en nuestra Christmas Party. #joinus

Requisitos mínimos Titulación universitaria en Ingeniería Informática, Telecomunicaciones, Estadística, Matemáticas o similar. 3 ó 4 años de experiencia como Data Engineer, Técnico/a de BI, o similar Experiencia en desarrollo de ETL (ODI, Pentaho o herramientas similares) Experiencia en Big Data: ecosistema Hadoop (HDFS, Hive, Sqoop), Apache Spark (PySpark), Kafka, Airflow.. Experiencia en herramientas de Business Intelligence: MicroStrategy, Power BI, Tableau. BBDD: SQL avanzado, optimización de consultas. Análisis de datos: Python y R. Descripción Porque trabajar en Sopra Steria, también es sentir Sopra Steria. Somos un reconocido líder europeo en consultoría, servicios digitales y desarrollo de software, con cerca de 56.000 empleados en casi 30 países y más de 4.000 en España. Nos enfocamos en las personas, en su formación y desarrollo profesional, lo que nos impulsa a crecer y mejorar constantemente. Tenemos pasión por lo digital y al igual que tú, buscamos la mejor de las aventuras. Queremos que tu día a día se convierta en la mejor de tus inspiraciones. Que aprendas, aportes, te diviertas, crezcas y que, sobre todo, disfrutes al máximo. Si quieres formar parte de un equipo "Great Place to Work", ¡Sigue leyendo! ¿QUÉ RETO TE PROPONEMOS? En Sopra Steria buscamos incorporar un/a Data Engineer para colaborar en proyecto de sector público. Participarás en la explotación, análisis e integración de datos tanto en entornos tradicionales (Data Warehouse) como en arquitecturas Big Data (Data Lake, Hadoop, Spark..), apoyando la toma de decisiones mediante el uso de herramientas analíticas y procesamiento distribuido. Te encargarás de: Ejecutar procesos de integración, transformación y validación de datos. Diseñar y mantener consultas SQL optimizadas. Desarrollar informes y dashboards en herramientas BI. Explotar datos en entornos Hadoop y lagos de datos mediante Spark o Hive. Automatizar flujos de datos y garantizar la calidad de la información. Documentar procesos y estructuras técnicas para explotación analítica. ¿QUÉ TENEMOS PARA TI? Contrato indefinido y jornada completa Modelo híbrido en Sevilla 23 días de vacaciones Formación continua: competencias técnicas, transversales y de idiomas. Contamos con acceso a certificaciones, formaciones de los principales Partners Tecnológicos, plataformas online y ¡mucho más! Seguro de vida y de accidentes Posibilidad de acogerte a nuestra retribución flexible (seguro médico, cheques guarderías, transporte, comida y formación) Acceso a Privilege Club, donde encontrarás descuentos interesantes en las principales marcas Onboarding personalizado y detallado. Te acompañamos en todo momento para que te sientas #soprano desde el primer momento. Oficina con espacios reservados al ocio. ¡Trabajo y diversión unido! Compañerismo y buen ambiente, el poder de la unión lo tenemos presente. Y lo más importante...Tienes la posibilidad de desarrollar tu carrera profesional con nosotros: Crearemos juntos un plan de carrera personalizado. Te formarás, marcaremos objetivos y llevaremos a cabo un seguimiento para asegurarnos de que lo conseguimos juntos. Escuchamos tus prioridades y luchamos por ellas. ¡Aquí tu voz importa! ¡Únete a nosotros y sé parte de algo más! The world is how we shape it Adquirimos el compromiso de respetar la diversidad, creando un ambiente de trabajo inclusivo y aplicando políticas que favorezcan la inclusión y promuevan el respeto social y cultural en cuestiones de género, edad, funcional, orientación sexual y religión con igualdad de oportunidades.

Description: From Grupo Digital, we are looking for a Data Engineer Scala Spark for a stable project. Requirements: Experience supporting / overseeing mentoring and guiding junior developers, including providing guidance on best practice / technical solutions, peer reviews and documentation of testing Implement and management of scalable big data infrastructure using IaC such as Terraform AWS expertise in services such as EMR, EC2, Lambda, Step Functions, Glue Experience of Big Data Technologies - well rounded experience of Hadoop, Spark/Scala and NoSQL databases Practical experience designing and monitoring batch processes Proficiency in scripting languages such as Bash & Python Unix / Linux experience Worked with Code Repositories as GIT, Maven, ... DevOps Knowledge (Jenkins, Scripts, ...) Tools used for deploying software into environments, use of Jira. High level of Spanish and English. Nice to have skills: Analyst Skills: Being able to translate technical requirements to non-technical partners and to deliver clear solutions. Been able to create test cases scenario SQL advance knowledge: Been able to test changes and issues properly, replicating the code functionality into SQL Documentation: Experience of carrying out data and process analysis to create specifications documents Finance Knowledge: Have a experience working in Financial Services / Banking organisation with an understanding of Financial Services / Retail, Business and Corporate Banking Control-m solid experience: Been able to create jobs, modify parameters What do we offer you? Competitive salary based on experience Permanent contract or Freelance Contract Option 22 working days of vacation Flexible compensation plan: Medical insurance, childcare vouchers, transportation vouchers Training in Technology and Soft Skills Referral program: EUR500 for recommended candidates who join us Location: Madrid. Full remote. Salary to be negotiated based on experience. Grupo Digital We are a group of technology companies, currently made up of around 200 professionals in various areas: development, systems, automation engineering, consulting, and more. If you wish to start your career in web development and be part of a dynamic team, we look forward to receiving your application!

¿Qué buscamos? Más de 3 años de experiencia como ingeniero de datos o en un puesto similar Gran dominio del lenguaje de programación Scala y PySpark Amplia experiencia con tecnologías de big data, en particular Apache Spark y el ecosistema Hadoop Sólidos conocimientos de bases de datos SQL y NoSQL Experiencia en modelado de datos, procesos ETL y conceptos de almacenamiento de datos Experiencia con sistemas de control de versiones, preferiblemente GIT. Familiaridad con plataformas en la nube como AWS, Azure o GCP Conocimiento de las mejores prácticas de seguridad y privacidad de datos Descripción Porque trabajar en Sopra Steria, también es sentir Sopra Steria. Somos un reconocido líder europeo en consultoría, servicios digitales y desarrollo de software, con cerca de 56.000 empleados en casi 30 países y más de 4.000 en España. Nos enfocamos en las personas, en su formación y desarrollo profesional, lo que nos impulsa a crecer y mejorar constantemente. Tenemos pasión por lo digital y al igual que tú, buscamos la mejor de las aventuras. Queremos que tu día a día se convierta en la mejor de tus inspiraciones. Que aprendas, aportes, te diviertas, crezcas y que, sobre todo, disfrutes al máximo. Si quieres formar parte de un equipo "Great Place to Work", ¡Sigue leyendo! En Sopra nos gustaría incorporar a un par de Data Engineer con experiencia en Scala y PySpark para unirse a nuestro dinámico equipo. En este puesto, será responsable de diseñar, implementar y mantener canalizaciones de datos e infraestructuras robustas para apoyar los procesos de toma de decisiones basados en datos de nuestra organización. Desarrollar y optimizar los procesos ETL utilizando Scala y PySpark para manejar el procesamiento de datos a gran escala Colaborar con científicos y analistas de datos para comprender los requisitos de los datos y entregar conjuntos de datos de alta calidad Construir y mantener canalizaciones de datos escalables utilizando Apache Spark y otras tecnologías de big data Implementar controles de calidad de datos y sistemas de supervisión para garantizar la precisión y fiabilidad de los datos El horario es flexible de oficina y el trabajo se realiza de manera híbrida, siendo 1 o 2 días por semana en oficina y el resto en casa.. Ubicación: Las Tablas