Treball Programador Bigdata en Espanya

Estás son las últimas ofertas de trabajo de Programador Bigdata en Espanya encontradas.

 treballs

  • 06/11/2024

    Andalusia, Aragó, Astúries, País Vasco, Cantàbria, Castella i Lleó, Castella-La Manxa, Catalunya, Extremadura, Galícia, La Rioja, Madrid, Múrcia, Navarra, Comunitat Valenciana, No peninsular

    Spark/Scala Developer BDC is about to undertake a migration from its current location in hadoop to a new cloud infrastructure with AWS. Taking a lead role within the CCM BDC squad - delivering enhancements to existing service, dealing with any issues/bugs and migrating to a new cloud infrastructure. Delivering to time, budget and quality With oversight of solutions that deliver complex communications to service our customers. Leading and mentoring junior team members to further their technical prowess. Able to support production through 24*7 on call We value up-skilling the entire team. To this end, we are seeking candidates who will contribute to the continuous improvement of our team, both through teaching and through learning Experience and good understanding in AWS and CI/CD Pipeline Previous Hands on experience of working with Spark Scala programming language as a full-stack dev-ops (needs to be HANDS ON). Experience and knowledge on Control-M, Hadoop/Spark, Kafka, Charon streaming, Postman, Java , Hue - SQL querying. Devops deployment and development experience - Ability to demonstrate consistently successful deliveries to time and budget Ability to drive out technical solutions that will enhance digital communications landscape. Experience of mentoring / coaching other technicians. You can direct focus to what matters most. Ability to work independently and be self-motivated. Experience of working in an agile environment. Broad experience of agile software development practices (Unit testing, Test driven development or CI/CD Strong written and verbal communication skills in English - C1 Ofrecemos: Incorporación a la plantilla de M>. Formación y seguimiento personalizado para tu desarrollo profesional (mentor). Participación en proyectos de tecnologías destacables en el sector. Salario acorde a la experiencia aportada. Modalidad de trabajo: 1 día a la semana presencial en las oficinas del cliente. Responsable del Tratamiento: Management & Global Technologies S.L Finalidad: Participar en los procesos de selección de personal del responsable del tratamiento Legitimación: Aplicación a solicitud del candidato, de medidas precontractuales o la intención de concluir el contrato de trabajo (Art. 6.1.b Rgpd) Destinatarios: Empresas en las que prestará sus servicios Ejercicio de Derechos: Tiene derecho a acceder, rectificar y suprimir sus datos, así como otros derechos que podrá consultar en nuestra política de privacidad. Puede ejercer sus derechos a través de la dirección de email Información Adicional: Puede consultar la información adicional sobre nuestra política de protección de datos en esta dirección web https://www.mgt-consulting.com/politica-de-privacidad

  • 05/11/2024

    Andalusia, Aragó, Astúries, País Vasco, Cantàbria, Castella i Lleó, Castella-La Manxa, Catalunya, Extremadura, Galícia, La Rioja, Madrid, Múrcia, Navarra, Comunitat Valenciana, No peninsular

    Description: Desde Grupo Digital, estamos en búsqueda de un perfil Data Scientist con experiencia en Python y con inglés fluido para uno de nuestros clientes. Conocimientos imprescindibles (tecnología) Años de experiencia: Mínimo 2-3 años de experiencia demostrable en las tecnologías requeridas. Programación en Python Data modelling SQL Synapse Spark Data Vault 2.0 GIT, JIRA, confluence, Scrum Buenas habilidades de comunicación con las partes interesadas del negocio (sin experiencia en TI) en inglés (nivel avanzado) Análisis y aplicación de la lógica empresarial en coordinación con las partes interesadas. Capacidad para trabajar con un panorama de datos muy complejo. Conocimientos deseables (tecnología): C# MS Azure Talend ElasticSearch RabbitMQ Condiciones Laborales: Duración proyecto: Estable. Contrato indefinido. Ubicación: España. Imprescindible residir en territorio español. Modalidad: 100% remoto Banda salarial: Valorable en función de la experiencia aportada (hasta 36K) SOBRE NOSOTROS Grupo Digital Somos un grupo de empresas tecnológicas, formado actualmente por unos 200 profesionales, en distintas áreas: desarrollo, sistemas, ingeniería automática, consultoría... Si quieres impulsar tu carrera con un proyecto único de la mano de una multinacional de primerísimo nivel, no dudes en presentar tu candidatura. ¡Te esperamos!

  • 29/10/2024

    Madrid

    En M> Consulting buscamos un Desarrollador Java con al menos tres años de experiencia en Spring Boot, Microservicios, Kafka y arquitectura hexagonal para trabajar con uno de nuestros clientes en Madrid. Modalidad de trabajo: híbrida, un día a la semana presencial en las oficinas del cliente en Madrid (28045). Requisitos: Java Microservicios Spring Boot Kafka Kubernetes GIT, BitBucket Angular Programación orientada a dominios Arquitectura Hexagonal Comunicación asíncrona M> Consulting es una Consultora Tecnológica y de Negocio con un fuerte bagaje profesional y especialización en sectores como la Banca, las Telecomunicaciones o la Industria. Somos una empresa joven y comprometida con la innovación y los cambios, por lo que apostamos fuerte por los nuevos retos de la tecnología: Big Data, Cloud, Desarrollo Digital o Movilidad. Trabajamos con los clientes más importantes de estos sectores, ofreciendo proyectos acordes a tu formación, experiencia y motivaciones profesionales. Ofrecemos: Incorporación a la plantilla de M>. Formación y seguimiento personalizado para tu desarrollo profesional (mentor). Participación en proyectos de tecnologías destacables en el sector. Salario acorde a la experiencia aportada Responsable del Tratamiento: Management & Global Technologies S.L Finalidad: Participar en los procesos de selección de personal del responsable del tratamiento Legitimación: Aplicación a solicitud del candidato, de medidas precontractuales o la intención de concluir el contrato de trabajo (Art. 6.1.b Rgpd) Destinatarios: Empresas en las que prestará sus servicios Ejercicio de Derechos: Tiene derecho a acceder, rectificar y suprimir sus datos, así como otros derechos que podrá consultar en nuestra política de privacidad. Puede ejercer sus derechos a través de la dirección de email *texto oculto* Información Adicional: Puede consultar la información adicional sobre nuestra política de protección de datos en esta dirección web https://www.mgt-consulting.com/politica-de-privacidad

  • 25/10/2024

    Andalusia, Aragó, Astúries, País Vasco, Cantàbria, Castella i Lleó, Castella-La Manxa, Catalunya, Extremadura, Galícia, La Rioja, Madrid, Múrcia, Navarra, Comunitat Valenciana, No peninsular

    Buscamos un Arquitecto Talend API Services para unirse a nuestro equipo dinámico y en crecimiento. El candidato ideal será un profesional con una sólida trayectoria en proyectos de integración de datos, que combine habilidades técnicas avanzadas con una fuerte capacidad de liderazgo y gestión de equipos. Esta persona será responsable del diseño y desarrollo de arquitecturas efectivas usando Talend, enfocándose en la integración de datos mediante APIs y procesos por lotes (Batch). Requisitos Experiencia significativa en proyectos de integración de datos (Batch + API) con Talend. Sólida experiencia en el desarrollo y diseño de arquitecturas y proyectos con Talend. Experiencia en Integración Continua y comprensión del ciclo de vida del Software. Experiencia en diseño e implementación de arquitecturas de microservicios. Experiencia en SQL Server y manejo avanzado de bases de datos. Experiencia en ActiveMQ/Kafka para la integración de sistemas. Habilidades de liderazgo y gestión de equipos técnicos, con la capacidad de inspirar y guiar a los compañeros de equipo hacia el éxito. Habilidades Deseadas Deseables certificaciones en Talend (Developer + Administrator). Experiencia en el uso de herramientas y servicios de Azure para la implementación y gestión de soluciones en la nube. Qué ofrecemos Ubicación en Barcelona y alrededores. Proyecto híbrido: 4 días remoto + 1 día en la oficina del cliente (Hospitalet de Llobregat). Flexibilidad horaria para equilibrar tu vida laboral y personal. Oportunidades de formación continua y certificaciones oficiales para impulsar tu desarrollo profesional.

  • 22/10/2024

    Madrid

    Description: Desde Grupo Digital, buscamos un Desarrollador Java / MICROSERVICIOS para formar parte de nuestro equipo y colaborar con uno de nuestros clientes. Preferentemente con incorporación inmediata. Ofrecemos: Duración del proyecto: Indefinida (Larga duración) Modalidad de trabajo: Híbrido en MADRID 2/3 días de oficina Años experiencia: +3 Salario: Según experiencia Minimum requirements: Requisitos: Más de tres (3) años de experiencia en: Java, Spring, Microservicios, Angular, Oracle, servicios de integración en Java (REST, SOAP, MQ), GIT, BitBucket Programación orientada a dominios, Arquitectura Hexagonal, Kafka, Comunicación asíncrona. Grupo Digital Somos un grupo de empresas tecnológicas, formado actualmente por unos 400 profesionales, en distintas áreas: desarrollo, sistemas, ingeniería automática, consultoría... Si deseas iniciar tu carrera en el ámbito del desarrollo web y formar parte de un equipo dinámico, ¡esperamos tu candidatura!

  • 18/10/2024

    Galícia

    Description: Estamos buscando un/a Analista Programador para unirse a nuestro equipo. La persona que se incorpore trabajará en pequeños y grandes operadores en las áreas de los procesos de provisión. Su misión será colaborar con equipos de implantación de sistemas sobre modernas arquitecturas basadas en microservicios, exposición de APIs y entornos cloud. Rol: Analista Programador Funciones: Desarrollo en proyectos Diseños de complejidad media-baja Dar soporte técnico en la interlocución con cliente y soporte a compañeros en tareas de compejidad media. Minimum requirements: Experiencia mínima de cuatro (4) años como Analista Programador. Experiencia frameworks de desarrollo (Spring Boot, Spring MVC, Vert.X...) Experiencia desarrollo de software (Java) Experiencia aplicaciones basadas en colas y brokers (Kafka, MQ Queues, Rabbit MQ...) Experiencia API Management diseñando y desarrollando APIs (REST, OAuth, Swagger o similar) Experiencia entornos CD/CI (Jenkins, Docker, Kubernetes, Nexus...) Conocimiento sólido modelado en bases de datos relacionales y documentales (Oracle, PostgreSQL, NoSQL) Valorable: Conocimiento herramientas de integración (ESB, BPM, API Management...) Conocimiento plataformas cloud (AWS, Azure, OpenStack...) Competencias/Habilidades: Diseño técnico de soluciones. Recogida y especificación de requisitos. Al menos tres (3) años de experiencia trabajando en arquitecturas basadas en microservicios. Conocimiento en procesos de negocio Telco, en áreas BSS/OSS y en estándares y buenas prácticas del TMForum.

  • 17/10/2024

    Andalusia, Aragó, Astúries, País Vasco, Cantàbria, Castella i Lleó, Castella-La Manxa, Catalunya, Extremadura, Galícia, La Rioja, Madrid, Múrcia, Navarra, Comunitat Valenciana, No peninsular

    ¿Quieres formar parte de uno de nuestros proyectos y trabajar en un importante cliente del sector bancario? ¿y además realizar 100% teletrabajo? Seleccionamos✨ Big Data Engineer ✨ para un proyecto del sector bancario con posibilidad de realizar trabajo 100% remoto desde cualquier parte de España. Cada vez son menos las compañías que ofrecen puestos en remoto, en Zemsania hacemos lo posible por seguir teniendo esta oportunidad de trabajar desde cualquier parte de España, ya que lo que nos importa es tu talento, no donde estés ubicado, ¿QUÉ TE HARÁ TRIUNFAR EN ESTA POSICIÓN? Contar con al menos dos (2) años de experiencia como Desarrollador/a, con experiencia en Big Data. Experiencia con Apache Spark, Conocimientos y experiencia en Scala, Hive, Shell Scripting, Cloudera, Databricks, Nivel de inglés b2, ¿QUÉ ES LO QUE REALIZARÁS EN EL DÍA A DÍA? Mantenimiento de aplicaciones Big Data en Supra. Desarrollos correctivos y evolutivos en entorno Big Data. Desarrollo de pequeños evolutivos funcionales Evolución tecnológica del SW Resolución de incidencias ¿QUÉ PODEMOS OFRECERTE? Modalidad de trabajo 100% remoto (desde cualquier parte de España) Flexibilidad horaria favoreciendo la conciliación laboral. Contrato indefinido con Zemsania y posición estable. Rango salarial según experiencia aportada (28 - 30k) Horario intensivo en verano (julio y agosto) Grandes posibilidades de crecimiento profesional y estabilidad laboral. Oportunidades de formación en tecnologías punteras (Open Webinars), con todo tipo de cursos e itinerarios para formarte desde un nivel principiante hasta avanzado. Clases de inglés con diferentes niveles, adaptadas a ti, con profesores nativos (Learnlight). Certificaciones en las últimas tendencias (Scrum, ITIL, PMP...). Acceso a beneficios fiscales gracias a nuestro plan de Retribución Flexible (tickets restaurante, transporte, guardería y formación). Descuentos en multitud de productos y servicios (Universidad UNIR, Escape Rooms, Abono teatro, Cloud Edenred, Dogfy Diet, etc). Iniciativas corporativas de team building como torneos deportivos. Seguimiento personalizado en todo momento gracias al acompañamiento de nuestras figuras de People Partner y Business Manager. Trato cercano y feedback: vas a estar en constante comunicación con nosotros para saber cómo avanzas en la posición. ¡Si cumples con los requisitos y te apasiona el desarrollo, no dudes en aplicar para esta emocionante oportunidad en Zemsania! ¡Esperamos contar contigo en nuestro equipo!

  • 02/10/2024

    Madrid

    Desde Sandav estamos buscando un Programador/a Java con microservicios con springboot y Kafka, que tenga experiencia en Interlocución con el cliente y Metodología Scrum. Requisitos técnicos: Java, Microservicios, Spring Boot, Kafka, Kubernetes, GIT, BitBucket, Angular, Oracle, Servicios de integración en Java (REST, SOAP, MQ) Ofrecemos: Modelo híbrido, 2/3 días en las oficinas de Madrid Horario: Lunes - Jueves 9:00 - 18:00Viernes 8:00 - 15:00 Seguro médico Retribución económica abierta entre 33-38k (siempre abiertos a negociar y adaptarnos a vuestras expectativas) Proyecto ubicado en Madrid, con 2/3 días de teletrabajo. ¿Quieres trabajar en una empresa en la que sabemos cómo te llamas, nos preocupamos por tu bienestar y cuando necesitas algo te atendemos al momento? SANDAV es una empresa que basa la relación con sus empleados en la INTEGRIDAD, que en resumen quiere decir que CUMPLIMOS LO PROMETIDO. Para más información: sandavteam.com

  • 02/10/2024

    Andalusia, Aragó, Astúries, País Vasco, Cantàbria, Castella i Lleó, Castella-La Manxa, Catalunya, Extremadura, Galícia, La Rioja, Madrid, Múrcia, Navarra, Comunitat Valenciana, No peninsular

    Estamos buscando un Java Developer con un sólido conocimiento en programación orientada a objetos y principios SOLID. Serás responsable de desarrollar aplicaciones cloud-native, microservicios y soluciones de integración. Requisitos Obligatorios: Backend: Java, Programación OO, Principios SOLID, Testing Unitario, Testing de Integración. Integración: Apache Kafka. Deseable tener experiencia con Microsoft Azure. Descripción del Puesto: Desarrollo de aplicaciones Java, microservicios y soluciones de integración. Experiencia con: Integración de APIs REST, soluciones basadas en eventos (Apache Kafka); Docker, Kubernetes y AKS. Experiencia en bases de datos SQL. Requisitos Adicionales: Inglés: Nivel C1 o superior. Condiciones Laborales: Modalidad:100% Remoto ¡Si te apasiona el desarrollo backend y las integraciones, queremos conocerte!

  • 30/09/2024

    Catalunya

    Description: Desde Grupo Digital, buscamos un/a Desarrollador/a Java para incorporarción directa en plantilla de nuestro cliente Minimum requirements: 4 - 5 años de experiencia: Java 17, Spring Boot 3, Spring MVC, Spring Data, Spring Web, Spring Batch, Hibernate, Oracle DB. Maven, OpenShift, Docker, NewRelic, Apache Kafka, Apache Ignite, Elasticsearch, Hazelcast, Splunk, Atlassian JIRA/Confluence/Bitbucket, Jenkins, Artifactory & AWS S3. PL/SQL and Oracle, Hibernate avanzado Inglés alto. Condiciones Laborales: Valorable: Openshift, Jenkins, Sonar Modalidad de trabajo: Híbrido. Ubicación: Reus (Tarragona) Horario: 9 a 18h. Grupo Digital Somos un grupo de empresas tecnológicas, formado actualmente por unos 200 profesionales, en distintas áreas: desarrollo, sistemas, ingeniería automática, consultoría... Si deseas iniciar tu carrera en el ámbito del desarrollo web y formar parte de un equipo dinámico, ¡esperamos tu candidatura!

  • 26/09/2024

    Andalusia, Aragó, Astúries, País Vasco, Cantàbria, Castella i Lleó, Castella-La Manxa, Catalunya, Extremadura, Galícia, La Rioja, Madrid, Múrcia, Navarra, Comunitat Valenciana, No peninsular

    Ubicación: Remoto Experiencia requerida: 2 años Descripción del puesto En Zemsania, estamos en búsqueda de un Programador Spark y Scala con un mínimo de 2 años de experiencia en el desarrollo de aplicaciones y soluciones dentro del sector bancario. Requisitos Título en Informática, Ingeniería de Software o áreas relacionadas. Mínimo 2 años de experiencia en desarrollo utilizando SPARK y SCALA. Experiencia en el desarrollo de aplicaciones orientadas a datos y análisis de grandes volúmenes de información. Conocimiento en herramientas y tecnologías relacionadas como Hadoop, Kafka, y bases de datos SQL y NoSQL. Habilidad para trabajar en equipo y comunicarse efectivamente con diferentes áreas técnicas y de negocio. Capacidad de análisis y resolución de problemas en entornos complejos, bajo presión. ¿Qué ofrecemos? En Zemsania, valoramos a nuestro equipo y ofrecemos un entorno de trabajo desafiante y colaborativo. Algunas de las ventajas de formar parte de nuestra empresa incluyen: Oportunidades de desarrollo profesional y formación continua en tecnologías avanzadas. Acceso a proyectos innovadores en el sector bancario que impactan directamente en el futuro de las finanzas. Un ambiente laboral diverso e inclusivo, fomentando la innovación y creatividad. Paquete competitivo de compensación y beneficios.

  • 20/09/2024

    Andalusia, Aragó, Astúries, País Vasco, Cantàbria, Castella i Lleó, Castella-La Manxa, Catalunya, Extremadura, Galícia, La Rioja, Madrid, Múrcia, Navarra, Comunitat Valenciana, No peninsular

    Acerca del empleo Si te apasiona la tecnología y la innovación, y quieres desarrollarte profesionalmente en un proyecto estable y con proyección en el sector TIC, ¡tu sitio está en SIXTEMA! Seguimos buscando talento, por lo que queremos ampliar nuestra Área de desarrollo y estamos en proceso de selección de un perfil de programación web PHP con experiencia, para trabajar en importantes clientes del ámbito público y privado. En coordinación directa con el responsable de proyecto del área, llevarás a cabo las siguientes funciones: Escribir código limpio y modular con el que implementar funcionalidades específicas. Depurar y solucionar problemas en el código existente. Colaborar con el equipo de desarrollo para definir requisitos y especificaciones. Elaboración de documentación técnica. Estudios requeridos Como mínimo: FP superior en desarrollo web/multiplataforma. Requisitos necesarios Conocimientos avanzados de PHP y Python Conocimientos avanzados de HTML5, CSS3, JavaScript y jQuery Conocimientos de gestión de bases de datos relacionales: MySQL, PostgreSQL, etc. Conocimientos avanzados en el uso y administración de contenedores: Docker y Kubernetes Capacidad de trabajo en equipo Inicitiva Requisitos valorables Experiencia con frameworks MVC basados en PHP, como Laravel o CakePHP Experiencia con frameworks CSS: Bootstrap Experiencia en creación de servicios web (REST) Experiencia en frameworks de Python, como Django o Flask Experiencia en accesibilidad, usabilidad y estándares W3C Conocimientos en bases de datos NoSQL Adaptación a nuevas tecnologías y metodologías Conocimientos en el uso de Inteligencia Artificial (IA) en el desarrollo de aplicaciones Conocimientos de metodologías ágiles de desarrollo (Scrum, Kanban) Conocimiento de herramientas open source tipo: Apache Airflow, Apache Spark, Apache Kafka Te ofrecemos: Unirte a una empresa en crecimiento y con proyección. Participar en proyectos innovadores y con tecnologías en auge. Formar parte de un equipo de profesionales que desarrollan su trabajo con el foco puesto en la mejora continua y en la calidad. Estabilidad y desarrollo profesional. Medidas de conciliación mediante horario flexible, trabajo remoto, y jornada intensiva todos los viernes y los meses de julio y agosto. Retribución flexible: seguro médico. Buen ambiente de trabajo. 23 días de vacaciones, además del 24 y 31 de diciembre. Plan referido, asociado a una compensación si nos recomiendas a un/ amigo/a. Plan de formación, te ofrecemos formación continua, tanto en modalidades en directo como con plataformas de formación. Participación en actividades de equipo. Cultura inclusiva y diversidad: Cada persona tiene algo que aportar, te daremos voz para ello; toda idea es importante. Si te identificas, ¡únete al equipo! ¡Inscríbete en nuestra oferta! O envía tu CV a: rrhh@sixtema.es

  • 18/09/2024

    Madrid, Un altre

    Desde Sandav Consultores estamos en búsqueda de un Senior .NET Core Developer a partir de 3 - 5 años de experiencia, para cliente ubicado en Madrid (zona de Arganzuela) con modalidad híbrida de trabajo (un mes se trabajará 2 días de manera presencial y 3 días de teletrabajo a la semana) y otro mes 100% remoto. Y así sucesivamente meses alternos. Funciones: Analizar las necesidades y desarrollar/modificar componentes del soluciones existentes. En particular, será responsable de las siguientes tareas siendo las principales responsabilidades: Participación en ceremonias Scrum (diario, planificación de sprint, revisión de sprint...) Traducción de las necesidades del usuario y formalización en especificaciones técnicas. Diseño y desarrollo de funciones Pruebas unitarias Pruebas de ciberseguridad Tecnología de documentación Revisión del desempeño entregable Pruebas E2E Mantenimiento y pruebas de NRT Coordinación con otros equipos. Participación en las distintas actividades para superar la obsolescencia de aplicaciones. Se requiere: Aportar entre 3 - 5 años de experiencia. Inglés nivel B2. .NET Core C# SOAP / REST (WSDL, OpenAPI) Unit Tests / BDD CICD (Jenkins/GitFlow) App Monitoring / Profiling SQL Server / Profiling Authentication / Authorization (JWT,SAML) Entity Framework Refactoring Message Queue (IBM MQ / Kafka) Docker & Kubernetes is a plus. Se ofrece: Proyecto estable. Contrato indefinido. Modalidad de trabajo: híbrida de trabajo (un mes se trabajará 2 días de manera presencial y 3 días de teletrabajo a la semana) y otro mes 100% remoto. Y así sucesivamente meses alternos. Horario: Flexible. Se puede entrar de 07:30h a 08:30h. Si entras a las 07:30h, puedes salir a las 16:45h. Los viernes la jornada es de 08h a 15h y en los meses de Julio y Agosto el horario es de 08h a 15h. Salario: 35.000EUR - 37.000EUR / brutos anuales (en función de la experiencia aportada). Se valoran candidaturas por salarios superiores en función de la experiencia. Seguro médico opcional que incluye seguro dental y psicología y retribución flexible a nivel de tickets restaurante. Cursos de formación gratuita.

  • 17/09/2024

    Madrid, Un altre

    Desde Sandav Consultores estamos en búsqueda de un Data Engineer para cliente ubicado en Madrid (zona de Arganzuela) con modalidad híbrida de trabajo (un mes se trabajará 2 días de manera presencial y 3 días de teletrabajo a la semana) y otro mes 100% remoto. Y así sucesivamente meses alternos. Desarrollo de Modelado de Datos y Pipelines con Spark y Scala para ingesta y transformación. datos de diferentes fuentes (temas de Kafka, API, HDFS, bases de datos estructuradas, archivos) en Le siguen HDFS, IBM Cloud Storage (generalmente en formato parquet) o bases de datos SQL/NOSQL. Gestionar soluciones de almacenamiento de big data en la plataforma (HDFS, IBM Cloud Storage, estructurado y bases de datos no estructuradas) Transformación y Calidad de Datos: implementar transformación de datos y control de calidad. procesos para garantizar la coherencia y precisión de los datos. Utilizar lenguajes de programación como Scala y SQL. Y bibliotecas como Spark para operaciones de enriquecimiento y transformación de datos. Implementación de canales de CI/CD: configurar canales de CI/CD para automatizar la implementación, unidad pruebas y gestión del desarrollo. Migración de infraestructura: migrar la infraestructura de Hadoop existente a la infraestructura de nube en Kubernetes Engine, Object Storage (almacenamiento en la nube de IBM), Spark como servicio en Scala (para construir las canalizaciones de datos) y Airflow como servicio (para orquestar y programar los datos tuberías) Implementación de esquemas, consultas y vistas en bases de datos SQL/NOSQL como Oracle, Postgres o MongoDB Desarrollar y configurar la programación de canalizaciones de datos con una combinación de scripts de shell. y AirFlow como servicio Pruebas de validación: realizar pruebas unitarias y de validación para garantizar la precisión y la integridad. Documentación: redactar documentación técnica (especificaciones, documentos operativos) para asegurar la capitalización del conocimiento. Se ofrece: Proyecto estable. Contrato indefinido. Modalidad de trabajo: híbrida (un mes se trabajará 2 días de manera presencial y 3 días de teletrabajo a la semana) y otro mes 100% remoto. Y así sucesivamente meses alternos. Horario: Jornada completa de lunes-jueves (en principio de 09-18h) y viernes y verano intensiva Tienen flexibilidad total en cuanto a horario para entrar entre las 8-9h, 1 hora para comer y salir sobre las 17:30. Son 8,5 horas al día para acumular de cara a los días de jornadas intensivas. Salario: 39.000EUR - 41.000EUR / brutos anuales (en función de la experiencia aportada). Se valoran candidaturas por salarios superiores en función de la experiencia). Seguro médico opcional que incluye seguro dental y psicología y retribución flexible a nivel de tickets restaurante. Cursos de formación gratuita.

  • 05/09/2024

    Madrid, Un altre

    Desde Sandav Consultores estamos en búsqueda de un Data Engineer para cliente ubicado en Madrid (zona de Arganzuela) con modalidad híbrida de trabajo (un mes se trabajará 2 días de manera presencial y 3 días de teletrabajo a la semana) y otro mes 100% remoto. Y así sucesivamente meses alternos. Desarrollo de Modelado de Datos y Pipelines con Spark y Scala para ingesta y transformación. datos de diferentes fuentes (temas de Kafka, API, HDFS, bases de datos estructuradas, archivos) en Le siguen HDFS, IBM Cloud Storage (generalmente en formato parquet) o bases de datos SQL/NOSQL. Gestionar soluciones de almacenamiento de big data en la plataforma (HDFS, IBM Cloud Storage, estructurado y bases de datos no estructuradas) Transformación y Calidad de Datos: implementar transformación de datos y control de calidad. procesos para garantizar la coherencia y precisión de los datos. Utilizar lenguajes de programación como Scala y SQL. Y bibliotecas como Spark para operaciones de enriquecimiento y transformación de datos. Implementación de canales de CI/CD: configurar canales de CI/CD para automatizar la implementación, unidad pruebas y gestión del desarrollo. Migración de infraestructura: migrar la infraestructura de Hadoop existente a la infraestructura de nube en Kubernetes Engine, Object Storage (almacenamiento en la nube de IBM), Spark como servicio en Scala (para construir las canalizaciones de datos) y Airflow como servicio (para orquestar y programar los datos tuberías) Implementación de esquemas, consultas y vistas en bases de datos SQL/NoSQL como Oracle, Postgres o MongoDB Desarrollar y configurar la programación de canalizaciones de datos con una combinación de scripts de shell. y AirFlow como servicio Pruebas de validación: realizar pruebas unitarias y de validación para garantizar la precisión y la integridad. Documentación: redactar documentación técnica (especificaciones, documentos operativos) para asegurar la capitalización del conocimiento. Requisitos mínimos -Spark en Scala como lenguaje de desarrollo de canalización de datos heredado - Spark como servicio en Scala como plataforma de desarrollo de canales de datos - Experiencia en el diseño y desarrollo de procesos de streaming utilizando Spark Streaming, - Transmisión de estructura Spark y Apache Kafka - Gestión de soluciones heredadas de almacenamiento de big data (HDFS) - Gestión de soluciones de almacenamiento de big data (IBM Cloud Object Storage y formato parquet) - Implementación de esquemas, consultas y vistas de bases de datos SQL/NO SQL (MongoDB, Oracle, Postgres) - Shell scripting y Airflow como solución de programación de canalización de datos - Dremio como herramienta de virtualización de datos - Dataiku como herramienta de preparación de datos como bonificación - Inglés nivel alto (B2-C1). Requisitos deseados Se valora positivamente si se tiene Francés.

Cerca avançada