Big Data Engineer - Spark / Scala / ELK
Descripción de la oferta
Ubicación: Preferencia por ciudades con sede (flexible para candidatos deslocalizados si el perfil encaja)
Modalidad: A convenir
Tarifa: Acorde a experiencia y conocimientos del perfil
Nivel de inglés: B2
Descripción del puesto
- Buscamos un profesional para participar en la creación de un nuevo dashboard en Kibana, incluyendo tareas de preprocesamiento Big Data en el Data Lake (SCIB). Formará parte de un equipo de trabajo especializado en Market Risk, colaborando tanto en el desarrollo de procesos en tecnologías Big Data (Spark, Scala) como en tareas comunes del área.
- El rol implica trabajar con tecnologías del ecosistema ELK (Kibana, Elasticsearch, Logstash), procesamiento de datos en entornos distribuidos (Hadoop, Spark), y contribuir a la construcción de soluciones analíticas que ayuden a la gestión de riesgos del mercado.
Responsabilidades
- Desarrollo y mantenimiento de procesos de ingesta y transformación de datos en Spark (Scala).
- Diseño y construcción de dashboards en Kibana para la visualización de datos de Market Risk.
- Preprocesamiento y gestión de datos en el Data Lake (SCIB).
- Colaboración con el equipo para tareas comunes del área de Big Data.
- Aplicación de buenas prácticas de desarrollo y documentación de procesos.
Requisitos Obligatorios:
- Experiencia previa en proyectos tecnológicos, preferentemente de datos o analítica.
- Conocimiento técnico y experiencia en Scala y Apache Spark.
- Conocimiento de Hadoop.
- Manejo de sentencias SQL.
- Conocimiento básico de Shell scripting.
- Conocimiento básico de Kibana y del entorno ELK (Elasticsearch, Logstash, Kibana).
Requisitos Deseables (no obligatorios)
- Conocimiento técnico de Azure Databricks.
- Experiencia previa en sector bancario o en Riesgos de Mercado.
- Conocimiento de Airflow como gestor de workflows/pipelines.
Condiciones
- Ubicación: Preferencia por ciudades donde tengamos sedes; posibilidad de valorar perfiles deslocalizados.
- Tarifa: Se definirá según experiencia y conocimientos.
- Inglés: Nivel B2 requerido.

Ofrecemos servicios de outsourcing, que consisten en la externalización de funciones o tareas específicas a profesionales expertos, así como servicios de headhunting, que implica la búsqueda selectiva y directa de profesionales cualificados y altamente talentosos para ocupar puestos clave en las organizaciones.
Nuestro enfoque se basa en comprender las necesidades específicas de cada cliente y encontrar los perfiles profesionales más adecuados para cumplir con dichas necesidades.
Ofertas de trabajo similares a Big Data Engineer - Spark / Scala / ELK
-
Senior Data Engineer (Databricks/Snowflake)
Capgemini
Andalucía, Aragón, Asturias, País Vasco, Cantabria, Castilla y León, Castilla-La Mancha, Cataluña, Extremadura, Galicia, La Rioja, Madrid, Murcia, Navarra, Comunidad Valenciana, No peninsular
Senior Data Engineer (Databricks/Snowflake) Elegir Capgemini es elegir la posibilidad de dar forma a tu carrera profesional como desees. Recibirás el apoyo y la inspiración de una comunidad colaborativa de colegas de todo el mundo y podrás reinventar lo que es posible. Únete a nuestro equipo y ayuda a las principales organizaciones del mundo a descubrir el valor de la tecnología y a construir un mundo más sostenible e inclusivo. ¿Te apetece sumarte a nosotros y participar en proyectos multisectoriales en un equipo conformado por profesionales del dato como Data Scientists, Data Engineers o Data Analysts? Nuestro objetivo es ayudar a nuestros clientes en el camino hacia la innovación continua. ¿Qué harás en el proyecto? ¿Cuál será tu rol? Como Ingeniero de Datos de Azure, serás responsable de ampliar y optimizar las arquitecturas de datos y canalizaciones, así como de optimizar la recopilación y el flujo de datos en todos los equipos funcionales. Al mismo tiempo... Podrás desarrollar proyectos desde cero con la colaboración del equipo. Participarás en el diseño de arquitecturas y toma de decisiones en un entorno constructivo. Desarrollarás proyectos en Cloud. Construirás pipelines escalables con diferentes tecnologías. Para desenvolverte bien en la posición se requieren conocimientos en/de: Dominio de Azure Snowflake, Databricks o Spark. Experiencia en SQL y T-SQL Experiencia trabajando con lenguajes Python, Scala. Competente en la creación de pipelines para el procesamiento ETL/ELT en la nube o híbrido. Experiencia como Ingeniero de Datos participando en todo el ciclo: desde la preparación de datos hasta la gestión de datos, y desde llevar modelos a producción hasta pruebas unitarias. Habilidades comunicativas para interlocutar con arquitectos de datos y el resto del equipo, proactividad, responsabilidad, buena capacidad de gestión del tiempo, trabajo en equipo. Deseable: Conocimiento de la plataforma de datos Azure, incluyendo Azure Data Factory, Azure SQL, ADLS, etc. Familiaridad con herramientas de big data (Hadoop, Spark, etc.). Buen conocimiento técnico de Microsoft BI, será un plus Se valorará positivamente el poseer certificado de discapacidad, en el marco de nuestra política de inclusión y diversidad. Valoraremos todas las candidaturas. Contamos con una amplísima oferta formativa, presencial, online de Certificaciones, etc. Aunque no tengas el 100% de los conocimientos valorados ¡nos encantará conocerte! Nuestro compromiso con la inclusión e igualdad de oportunidades hace que tengamos un Plan de Igualdad y un Código Ético que garantizan el desarrollo profesional de la plantilla y la igualdad de oportunidades en su selección dentro de un entorno libre de discriminación por cuestión de etnia, nacionalidad, origen social, edad, orientación sexual, expresión de género, religión o cualquier otra circunstancia personal, física o social. ¿Qué te gustará de trabajar aquí? Tenemos un catálogo de medidas de Desarrollo y Conciliación muy completo, como son, por ejemplo: Un ambiente de trabajo único muy valorado por nuestros profesionales en las evaluaciones periódicas. Wellbeing HUB - Incluye políticas y acciones para la salud física (Wellhub) y mental. 24 días de vacaciones + 2 asuntos propios + 24 y 31 de diciembre + opción a comprar hasta 7 días de vacaciones al año. FlexAbroad: posibilidad de trabajar en remoto desde otro país durante 45 días. Plan de Compensación Flexible (seguro médico, transporte, formación, tarjeta restaurante o subvención de comida, guardería...) Formación continua, podrás disfrutar de Mylearning y de Capgemini University y de nuestros Campus Digitales y Comunidades profesionales. Tendrás acceso a plataformas como: Coursera, Udemy, Pluralsight, Harvard Manager Mentor, Education First para idiomas (inglés francés, alemán...) ¡entre otras! Participación en Acciones de Voluntariado y Acción Social con nuestros Grupos de Sostenibilidad, Inclusión e Igualdad. Acompañamiento en tus inicios con el programa de Buddies. Seguro de Vida y Accidentes ¿Por qué Capgemini? Capgemini es líder global en transformando los negocios de los clientes aprovechando todo el poder de la tecnología. Nos guía el propósito de lograr un futuro inclusivo y sostenible a través de la tecnología y de la energía de quienes la desarrollamos. Somos una compañía responsable y diversa, líder internacional en servicios de IT e Ingeniería con más de 360.000 profesionales en más de 50 países. Con una sólida herencia de 55 años y una amplia experiencia en la industria, los clientes confían en Capgemini para abordar la totalidad de sus necesidades comerciales, desde la estrategia y el diseño hasta las operaciones, impulsadas por el rápido y novedoso mundo de la nube, los datos, la IA, la conectividad, el software, las plataformas e ingeniería digitales. El Grupo reportó en 2022 ingresos globales de EUR22 mil millones. Reescribe tu futuro. ¡Únete al equipo!
-
Data Streaming Engineer (databricks)
M> Consulting
Andalucía, Aragón, Asturias, País Vasco, Cantabria, Castilla y León, Castilla-La Mancha, Cataluña, Extremadura, Galicia, La Rioja, Madrid, Murcia, Navarra, Comunidad Valenciana, No peninsular
En M> Consulting buscamos un Data Streaming Engineer con experiencia en: A minimum of 3 years of experience in data engineering or a similar role, with a strong focus on data streaming technologies is preferred. Relevant certifications in data engineering or cloud platforms are a plus. Knowledge of data governance, networking and security best practices is a plus. Databricks, Python, R Proficiency in programming languages such as Java, Scala, R or Python. Strong understanding of data streaming frameworks and tools, particularly Azure EventHub, Apache Kafka and Apache Spark. Experience with Azure and their data services. Familiarity with database technologies, both SQL and NoSQL. Excellent problem-solving skills and ability to work under pressure. Strong communication and collaboration skills to work effectively in a team environment. Inglés Alto Se trabajará en una modalidad remota 100% M> Consulting es una Consultora Tecnológica y de Negocio con un fuerte bagaje profesional y especialización en sectores como la Banca, las Telecomunicaciones o la Industria. Somos una empresa joven y comprometida con la innovación y los cambios, por lo que apostamos fuerte por los nuevos retos de la tecnología: Big Data, Cloud, Desarrollo Digital o Movilidad. Trabajamos con los clientes más importantes de estos sectores, ofreciendo proyectos acordes a tu formación, experiencia y motivaciones profesionales. Ofrecemos: Incorporación a la plantilla de M>. Formación y seguimiento personalizado para tu desarrollo profesional (mentor). Participación en proyectos de tecnologías destacables en el sector. Salario acorde a la experiencia aportada Responsable del Tratamiento: Management & Global Technologies S.L Finalidad: Participar en los procesos de selección de personal del responsable del tratamiento Legitimación: Aplicación a solicitud del candidato, de medidas precontractuales o la intención de concluir el contrato de trabajo (Art. 6.1.b Rgpd) Destinatarios: Empresas en las que prestará sus servicios Ejercicio de Derechos: Tiene derecho a acceder, rectificar y suprimir sus datos, así como otros derechos que podrá consultar en nuestra política de privacidad. Puede ejercer sus derechos a través de la dirección de email *texto oculto* Información Adicional: Puede consultar la información adicional sobre nuestra política de protección de datos en esta dirección web https://www.mgt-consulting.com/politica-de-privacidad
-
Data Engineer
Sopra Steria
Andalucía
Requisitos mínimos Titulación universitaria en Ingeniería Informática, Telecomunicaciones, Estadística, Matemáticas o similar. 3 ó 4 años de experiencia como Data Engineer, Técnico/a de BI, o similar Experiencia en desarrollo de ETL (ODI, Pentaho o herramientas similares) Experiencia en Big Data: ecosistema Hadoop (HDFS, Hive, Sqoop), Apache Spark (PySpark), Kafka, Airflow.. Experiencia en herramientas de Business Intelligence: MicroStrategy, Power BI, Tableau. BBDD: SQL avanzado, optimización de consultas. Análisis de datos: Python y R. Descripción Porque trabajar en Sopra Steria, también es sentir Sopra Steria. Somos un reconocido líder europeo en consultoría, servicios digitales y desarrollo de software, con cerca de 56.000 empleados en casi 30 países y más de 4.000 en España. Nos enfocamos en las personas, en su formación y desarrollo profesional, lo que nos impulsa a crecer y mejorar constantemente. Tenemos pasión por lo digital y al igual que tú, buscamos la mejor de las aventuras. Queremos que tu día a día se convierta en la mejor de tus inspiraciones. Que aprendas, aportes, te diviertas, crezcas y que, sobre todo, disfrutes al máximo. Si quieres formar parte de un equipo "Great Place to Work", ¡Sigue leyendo! ¿QUÉ RETO TE PROPONEMOS? En Sopra Steria buscamos incorporar un/a Data Engineer para colaborar en proyecto de sector público. Participarás en la explotación, análisis e integración de datos tanto en entornos tradicionales (Data Warehouse) como en arquitecturas Big Data (Data Lake, Hadoop, Spark..), apoyando la toma de decisiones mediante el uso de herramientas analíticas y procesamiento distribuido. Te encargarás de: Ejecutar procesos de integración, transformación y validación de datos. Diseñar y mantener consultas SQL optimizadas. Desarrollar informes y dashboards en herramientas BI. Explotar datos en entornos Hadoop y lagos de datos mediante Spark o Hive. Automatizar flujos de datos y garantizar la calidad de la información. Documentar procesos y estructuras técnicas para explotación analítica. ¿QUÉ TENEMOS PARA TI? Contrato indefinido y jornada completa Modelo híbrido en Sevilla 23 días de vacaciones Formación continua: competencias técnicas, transversales y de idiomas. Contamos con acceso a certificaciones, formaciones de los principales Partners Tecnológicos, plataformas online y ¡mucho más! Seguro de vida y de accidentes Posibilidad de acogerte a nuestra retribución flexible (seguro médico, cheques guarderías, transporte, comida y formación) Acceso a Privilege Club, donde encontrarás descuentos interesantes en las principales marcas Onboarding personalizado y detallado. Te acompañamos en todo momento para que te sientas #soprano desde el primer momento. Oficina con espacios reservados al ocio. ¡Trabajo y diversión unido! Compañerismo y buen ambiente, el poder de la unión lo tenemos presente. Y lo más importante...Tienes la posibilidad de desarrollar tu carrera profesional con nosotros: Crearemos juntos un plan de carrera personalizado. Te formarás, marcaremos objetivos y llevaremos a cabo un seguimiento para asegurarnos de que lo conseguimos juntos. Escuchamos tus prioridades y luchamos por ellas. ¡Aquí tu voz importa! ¡Únete a nosotros y sé parte de algo más! The world is how we shape it Adquirimos el compromiso de respetar la diversidad, creando un ambiente de trabajo inclusivo y aplicando políticas que favorezcan la inclusión y promuevan el respeto social y cultural en cuestiones de género, edad, funcional, orientación sexual y religión con igualdad de oportunidades.
-
Ingeniero/a Big Data Senior en remoto
Digital Talent Agency
Andalucía, Aragón, Asturias, País Vasco, Cantabria, Castilla y León, Castilla-La Mancha, Cataluña, Extremadura, Galicia, La Rioja, Madrid, Murcia, Navarra, Comunidad Valenciana, No peninsular
Buscamos un/a Ingeniero/a Big Data Senior con al menos 5 años de experiencia en desarrollo y ejecución de proyectos orientados a entornos distribuidos y procesamiento masivo de datos. El/la candidato/a ideal debe contar con fuertes capacidades analíticas, experiencia técnica sólida y capacidad para participar activamente en el diseño de arquitecturas funcionales. Requisitos Técnicos: Experiencia comprobada en: Diseño y análisis de arquitecturas funcionales Proyectos Big Data (análisis, ejecución y desarrollo distribuido) Procesamiento orientado a eventos Ingesta, ETL y procesamiento de datos Lenguajes y tecnologías: Python (PySpark) - obligatorio Apache Spark / SparkSQL Apache Airflow SQL avanzado: ¿Qué se ofrece? Contrato a largo plazo en un proyecto estable dentro del sector bancario. Modalidad de trabajo 100% remoto, con ubicación libre dentro de España. Horario fijo de lunes a viernes, de 08:00 a 17:00, con posibilidad de cierta flexibilidad. Retribución competitiva, ajustada a la experiencia y nivel técnico del candidato. Participación en proyectos tecnológicos de alto impacto, con grandes volúmenes de datos y retos complejos.
Resumen de la oferta
Big Data Engineer - Spark / Scala / ELK
- Madrid, España ; Córdoba, España; Granada, España; Sevilla, España; Jaén, España
-
Indefinido
-
Experiencia de 2 a 5 años
-
42.000 - 48.000
-
ingles ()

Crea tu CV en ticjob.es
Si aún no estas registrado como candidato, publica tu cv, encuentra las mejores ofertas del sector TIC y deja que las empresas te encuentren
Crea tu cuenta gratuita