Treball Data Engineer Scala en Espanya

Estás son las últimas ofertas de trabajo de Data Engineer Scala en Espanya encontradas.

 treballs

  • 17/09/2024

    Madrid, Un altre

    Desde Sandav Consultores estamos en búsqueda de un Data Engineer para cliente ubicado en Madrid (zona de Arganzuela) con modalidad híbrida de trabajo (un mes se trabajará 2 días de manera presencial y 3 días de teletrabajo a la semana) y otro mes 100% remoto. Y así sucesivamente meses alternos. Desarrollo de Modelado de Datos y Pipelines con Spark y Scala para ingesta y transformación. datos de diferentes fuentes (temas de Kafka, API, HDFS, bases de datos estructuradas, archivos) en Le siguen HDFS, IBM Cloud Storage (generalmente en formato parquet) o bases de datos SQL/NOSQL. Gestionar soluciones de almacenamiento de big data en la plataforma (HDFS, IBM Cloud Storage, estructurado y bases de datos no estructuradas) Transformación y Calidad de Datos: implementar transformación de datos y control de calidad. procesos para garantizar la coherencia y precisión de los datos. Utilizar lenguajes de programación como Scala y SQL. Y bibliotecas como Spark para operaciones de enriquecimiento y transformación de datos. Implementación de canales de CI/CD: configurar canales de CI/CD para automatizar la implementación, unidad pruebas y gestión del desarrollo. Migración de infraestructura: migrar la infraestructura de Hadoop existente a la infraestructura de nube en Kubernetes Engine, Object Storage (almacenamiento en la nube de IBM), Spark como servicio en Scala (para construir las canalizaciones de datos) y Airflow como servicio (para orquestar y programar los datos tuberías) Implementación de esquemas, consultas y vistas en bases de datos SQL/NOSQL como Oracle, Postgres o MongoDB Desarrollar y configurar la programación de canalizaciones de datos con una combinación de scripts de shell. y AirFlow como servicio Pruebas de validación: realizar pruebas unitarias y de validación para garantizar la precisión y la integridad. Documentación: redactar documentación técnica (especificaciones, documentos operativos) para asegurar la capitalización del conocimiento. Se ofrece: Proyecto estable. Contrato indefinido. Modalidad de trabajo: híbrida (un mes se trabajará 2 días de manera presencial y 3 días de teletrabajo a la semana) y otro mes 100% remoto. Y así sucesivamente meses alternos. Horario: Jornada completa de lunes-jueves (en principio de 09-18h) y viernes y verano intensiva Tienen flexibilidad total en cuanto a horario para entrar entre las 8-9h, 1 hora para comer y salir sobre las 17:30. Son 8,5 horas al día para acumular de cara a los días de jornadas intensivas. Salario: 39.000EUR - 41.000EUR / brutos anuales (en función de la experiencia aportada). Se valoran candidaturas por salarios superiores en función de la experiencia). Seguro médico opcional que incluye seguro dental y psicología y retribución flexible a nivel de tickets restaurante. Cursos de formación gratuita.

  • 11/09/2024

    Andalusia, Aragó, Astúries, País Vasco, Cantàbria, Castella i Lleó, Castella-La Manxa, Catalunya, Extremadura, Galícia, La Rioja, Madrid, Múrcia, Navarra, Comunitat Valenciana, No peninsular

    Buscamos perfiles de Ingenieros Data Sr en diferentes vertientes / funciones: (Arquitecto, Big Data Senior...). Experiencia de 3 años y en adelante en mundo del dato. Se trata de conformar un nuevo equipo (desde cero), de unas 5 o 6 personas, y requerimos perfiles Senior que entre ellos puedan aportar esas diferentes capacidades o roles (siempre proviniendo de deriva técnica del Dato). Buscamos profesional del ecosistema, para o bien Liderar o colaborar como Técnico con procesos tipo ETL (Spark, Python o Scala... o afines en B.I.), o de Gobierno de Dato o Arquitectura del dato, para obtener un tratamiento de datos de capas operativas como SAP, Maximo u Oracle, así como todo el proceso de preparar los datos y entregar a los correspondientes Datawarehouse o Data Lake. (Proceso completo). Proyectos Internacionales, se requiere buen nivel de inglés asimilable a C1 o con capacidad de trabajar inclusive de manera prácticamente íntegra en el idioma y con equipos internacionales de hecho. Condiciones Base: Contrato indefinido. Contratación por Nosotros en prestación de servicios para empresa Cliente con proyectos / servicios a nivel internacional. Sector Logístico. Modalidad de Teletrabajo Total. Necesario residentes en España. Horarios habituales de oficina con posibilidades habituales de flexibilidad de horario de entrada y salida. Banda Salarial abierta 38.000-55.000EUR/ B. Anuales, o incluso en caso de justificarlo adecuadamente quizás hasta 60.000 B Anuales (Aproximadamente). Flexibles (siempre abiertos a negociar y adaptarnos a vuestras pretensiones). Perfil / Funciones - Cuestiones interesantes para el servicio: Experiencia de base de Ingeniería del dato como condición prácticamente indispensable: (Experiencia de tres (3) años y en adelante en mundo del dato). Experiencia en trabajo de procesos ETL (Spark, Python o Scala... o afines en B.I o similares). Muy de valorar experiencia con Azure, Azure Data Factory. Muy de valorar conocimientos de fuentes diferentes (Oracle, SAP...), y así como de tecnologías ETL como por ejemplo Powercenter o afines. Otros valorables que aportarían al equipo (Funciones que también podrían acometerse): En definitiva: tanto cuestiones de Gobierno del Dato, como cuestiones tipo DataOPs, CI/CD y automatizaciones a tal efecto, trabajo con fuentes de API´s de terceros, conocimiento de cuestiones de Data Analytics como por ejemplo cuestiones de conocimientos en Modelos Semánticos Etc... Para más información: sandavteam.com

  • 09/09/2024

    Madrid, Andalusia

    Porque trabajar en Sopra Steria, también es sentir Sopra Steria. Somos un reconocido líder europeo en consultoría, servicios digitales y desarrollo de software, con cerca de 56.000 empleados en casi 30 países y más de 4.000 en España. Nos enfocamos en las personas, en su formación y desarrollo profesional, lo que nos impulsa a crecer y mejorar constantemente. Tenemos pasión por lo digital y al igual que tú, buscamos la mejor de las aventuras. Queremos que tu día a día se convierta en la mejor de tus inspiraciones. Que aprendas, aportes, te diviertas, crezcas y que, sobre todo, disfrutes al máximo. Si quieres formar parte de un equipo "Great Place to Work", ¡Sigue leyendo! Requisitos ¿Qué reto proponemos? Queremos incorporar al equipo un/a Data Analyst con experiencia en proyectos con Spark y Scala y entornos Big Data, para trabajar en importante cliente ubicado en Madrid y/o Sevilla. La persona que se incorpore participará en diferentes equipos de data y se encargará del desarrollo y mantenimiento de nuevas plataformas Big Data dentro del cliente. Ofrecemos: Horario flexible: Entrada de 8 a 9:30 y salida a partir de las 17:00. Viernes de 8 a 15:00 (Jornada intensiva en verano) Modelo híbrido teletrabajo en oficinas de Madrid y/o Sevilla ¿Qué buscamos? Experiencia de al menos cuatro (4) años como data engineer/data analyst Conocimientos o experiencia en sector bancario o financiero Experiencia con Spark y Scala Experiencia previa con Apache Kafka Experiencia en manejo de soluciones Big Data Nivel de inglés mínimo C1 (no es necesaria certificación, pero si poder trabajar en dicho idioma de manera fluida). Valorable nivel intermedio/alto de Francés. Se ofrece ¿Qué ofrecemos? ¿Qué tenemos para ti? Contrato indefinido y jornada completa 23 días de vacaciones Formación continua: competencias técnicas, transversales y de idiomas. Contamos con acceso a certificaciones, formaciones de los principales Partners Tecnológicos, plataformas online y ¡mucho más! Seguro de vida y de accidentes Posibilidad de acogerte a nuestra retribución flexible (seguro médico, cheques guarderías, transporte, comida y formación) Acceso a Privilege Club, donde encontrarás descuentos interesantes en las principales marcas Onboarding personalizado y detallado. Te acompañamos en todo momento para que te sientas #soprano desde el primer momento. Oficina con espacios reservados al ocio. ¡Trabajo y diversión unido! Compañerismo y buen ambiente, el poder de la unión lo tenemos presente. Y lo más importante...Tienes la posibilidad de desarrollar tu carrera profesional con nosotros: Crearemos juntos un plan de carrera personalizado. Te formarás, marcaremos objetivos y llevaremos a cabo un seguimiento para asegurarnos de que lo conseguimos juntos. Escuchamos tus prioridades y luchamos por ellas. ¡Aquí tu voz importa! ¡Únete a nosotros y sé parte de algo más! The world is how we shape it

  • 05/09/2024

    Madrid, Un altre

    Desde Sandav Consultores estamos en búsqueda de un Data Engineer para cliente ubicado en Madrid (zona de Arganzuela) con modalidad híbrida de trabajo (un mes se trabajará 2 días de manera presencial y 3 días de teletrabajo a la semana) y otro mes 100% remoto. Y así sucesivamente meses alternos. Desarrollo de Modelado de Datos y Pipelines con Spark y Scala para ingesta y transformación. datos de diferentes fuentes (temas de Kafka, API, HDFS, bases de datos estructuradas, archivos) en Le siguen HDFS, IBM Cloud Storage (generalmente en formato parquet) o bases de datos SQL/NOSQL. Gestionar soluciones de almacenamiento de big data en la plataforma (HDFS, IBM Cloud Storage, estructurado y bases de datos no estructuradas) Transformación y Calidad de Datos: implementar transformación de datos y control de calidad. procesos para garantizar la coherencia y precisión de los datos. Utilizar lenguajes de programación como Scala y SQL. Y bibliotecas como Spark para operaciones de enriquecimiento y transformación de datos. Implementación de canales de CI/CD: configurar canales de CI/CD para automatizar la implementación, unidad pruebas y gestión del desarrollo. Migración de infraestructura: migrar la infraestructura de Hadoop existente a la infraestructura de nube en Kubernetes Engine, Object Storage (almacenamiento en la nube de IBM), Spark como servicio en Scala (para construir las canalizaciones de datos) y Airflow como servicio (para orquestar y programar los datos tuberías) Implementación de esquemas, consultas y vistas en bases de datos SQL/NoSQL como Oracle, Postgres o MongoDB Desarrollar y configurar la programación de canalizaciones de datos con una combinación de scripts de shell. y AirFlow como servicio Pruebas de validación: realizar pruebas unitarias y de validación para garantizar la precisión y la integridad. Documentación: redactar documentación técnica (especificaciones, documentos operativos) para asegurar la capitalización del conocimiento. Requisitos mínimos -Spark en Scala como lenguaje de desarrollo de canalización de datos heredado - Spark como servicio en Scala como plataforma de desarrollo de canales de datos - Experiencia en el diseño y desarrollo de procesos de streaming utilizando Spark Streaming, - Transmisión de estructura Spark y Apache Kafka - Gestión de soluciones heredadas de almacenamiento de big data (HDFS) - Gestión de soluciones de almacenamiento de big data (IBM Cloud Object Storage y formato parquet) - Implementación de esquemas, consultas y vistas de bases de datos SQL/NO SQL (MongoDB, Oracle, Postgres) - Shell scripting y Airflow como solución de programación de canalización de datos - Dremio como herramienta de virtualización de datos - Dataiku como herramienta de preparación de datos como bonificación - Inglés nivel alto (B2-C1). Requisitos deseados Se valora positivamente si se tiene Francés.

  • 04/09/2024

    Galícia

    Sobre el área de tecnología Te unirás al equipo de Seguridad & Privacidad, donde tendrás la oportunidad de trabajar en proyectos de investigación, desarrollo e innovación relacionados con la ciberseguridad. Estamos buscando un profesional con experiencia en el desarrollo de pipelines de datos escalables y distribuidos para entrenar algoritmos de Inteligencia Artificial, con el objetivo de abordar problemas del mundo real mediante el uso de tecnologías de análisis de datos y Big Data. Serás parte de varios proyectos de ciberseguridad, colaborando estrechamente con organizaciones líderes en este ámbito. Te integrarás en un equipo dinámico y experimentado, especializado en el análisis de datos, la arquitectura para el procesamiento de grandes volúmenes de información, y la creación de herramientas de visualización orientadas a la interpretación de datos en el contexto de la ciberseguridad. Tus responsabilidades En tu día a día, te encargarás de: Introducir y liderar la implementación de tecnologías Big Data para mejorar la eficiencia y el rendimiento de los sistemas de procesamiento de datos. Diseñar e implementar pipelines de procesamiento de datos que faciliten el entrenamiento de modelos de Machine Learning, tanto en flujos de datos en tiempo real como en procesos por lotes. Aplicar y adaptar tecnologías avanzadas de Machine Learning y análisis de comportamiento de usuarios y entidades (User and Entity Behaviour Analytics) al ámbito de la ciberseguridad. Tu labor será crucial para asegurar la calidad del producto y del proceso, así como para contribuir al crecimiento del área de Seguridad & Privacidad a través de iniciativas estratégicas. Lo que estamos buscando Más de 3 años de experiencia práctica en programación (preferiblemente Python) y en la creación de pipelines de procesamiento de datos batch y/o streaming (idealmente con Spark), así como en la implementación de herramientas Big Data. Pasión por las tecnologías emergentes y la resolución de problemas complejos, con ganas de proponer ideas innovadoras. Interés en el aprendizaje continuo y disposición a asumir nuevos desafíos. Excelentes habilidades de comunicación y capacidad para trabajar con equipos internos, externos, clientes y socios. Competencia en inglés, dado que trabajamos en un entorno internacional. Se valorará tener un Grado en Ingeniería en Telecomunicaciones, Informática o estudios afines. Será un plus si cuentas con: Conocimiento del stack ELK, Spark, Scala, Splunk u otras herramientas de análisis de datos. Formación en Técnicas Estadísticas, Big Data o campos relacionados. Qué te ofrecemos Salario: entre 28.000EUR y 30.000EUR FBA + un 10% variable basado en tus conocimientos, experiencia y actitud. 26 días de vacaciones al año Un viernes libre al mes para que disfrutes de un fin de semana largo. Flexibilidad para teletrabajar o trabajar en la oficina, según acuerdes con tu equipo. Un presupuesto anual para formación personal, destinado a mejorar tus habilidades técnicas y de liderazgo. Todo el equipo necesario para que puedas trabajar cómodamente desde donde elijas. Retribución flexible, con opciones como cheques restaurante, guardería, transporte y seguro médico. Un fuerte compromiso con la conciliación entre la vida laboral y personal. Acceso a un club de descuentos corporativos. Posibilidad de recibir clases de inglés si tu rol lo requiere.

  • 02/09/2024

    Madrid

    Porque trabajar en Sopra Steria, también es sentir Sopra Steria Somos un reconocido líder europeo en consultoría, servicios digitales y desarrollo de software, con cerca de 56.000 empleados en casi 30 países y más de 4.000 en España. Nos enfocamos en las personas, en su formación y desarrollo profesional, lo que nos impulsa a crecer y mejorar constantemente. Tenemos pasión por lo digital y al igual que tú, buscamos la mejor de las aventuras. Queremos que tu día a día se convierta en la mejor de tus inspiraciones. Que aprendas, aportes, te diviertas, crezcas y que, sobre todo, disfrutes al máximo. Si quieres formar parte de un equipo "Great Place to Work", ¡Sigue leyendo! ¿Qué reto proponemos? Nos gustaría incorporar a un par de personas con experiencia como Data Engineer y con experiencia en PySpark y SQL para colaborar en importante proyecto del sector seguros. ¿Qué buscamos? Al menos 2 - 3 años de experiencia como Data Engineer Muy valorable experiencia con Palantir Foundry Experiencia con Pyspark/Scala y/o Python Experiencia con SQL/MySQL Valorable conocimientos en Tableau, Denodo, PowerBI, Data bricks ¿Qué tenemos para ti? Contrato indefinido y jornada completa. 23 días de vacaciones. Formación continua: competencias técnicas, transversales y de idiomas. Contamos con acceso a certificaciones, formaciones de los principales Partners Tecnológicos, plataformas online y ¡mucho más! Seguro de vida y de accidentes Posibilidad de acogerte a nuestra retribución flexible (seguro médico, cheques guarderías, transporte, comida y formación) Acceso a Privilege Club, donde encontrarás descuentos interesantes en las principales marcas Onboarding personalizado y detallado. Te acompañamos en todo momento para que te sientas #soprano desde el primer momento. Oficina con espacios reservados al ocio. ¡Trabajo y diversión unido! Compañerismo y buen ambiente, el poder de la unión lo tenemos presente. Salario negociable en función de las expectativas y experiencia. Horario 09:00 a 18:00, jornada intensiva en verano Modalidad híbrida de teletrabajo en Madrid (40% - 60%) Y lo más importante...Tienes la posibilidad de desarrollar tu carrera profesional con nosotros: Crearemos juntos un plan de carrera personalizado. Te formarás, marcaremos objetivos y llevaremos a cabo un seguimiento para asegurarnos de que lo conseguimos juntos. Escuchamos tus prioridades y luchamos por ellas. ¡Aquí tu voz importa! ¡Únete a nosotros y sé parte de algo más! The world is how we shape it

  • 22/08/2024

    Madrid

    Buscamos perfil de Ingeniero Data (Experiencia de 3 años y en adelante en mundo del dato). Buscamos profesional del ecosistema, para o bien Liderar o bien colaborar como Técnico en un equipo en trabajo de procesos ETL (Spark, Python o Scala... o afines), para obtener datos de capas operativas como SAP, Maximo u Oracle, así como todo el proceso de preparar los datos y entregar a los correspondientes Datawarehouse o Data Lake. (Proceso completo). Proyectos Internacionales, se requiere buen nivel de inglés asimilable a C1 o con capacidad de trabajar inclusive de manera prácticamente íntegra en el idioma y con equipos internacionales de hecho. Condiciones Base: Contrato indefinido. Contratación por Nosotros en prestación de servicios para empresa Cliente con proyectos / servicios a nivel internacional Modalidad inicial: híbrido en Madrid, con buenas posibilidades de ampliar bastante hacia encaminarnos a un formato de teletrabajo bastante completo, pero interesante disponibilidad para formato híbrido. Horarios habituales de oficina con posibilidades habituales de flexibilidad de horario de entrada y salida. Banda Salarial abierta 38.000-50.000EUR B Anuales (Aproximadamente). Flexibles (siempre abiertos a negociar y adaptarnos a vuestras pretensiones). Perfil / Funciones: Buscamos perfil de Ingeniero Data (Experiencia de 3 años y en adelante en mundo del dato). Experiencia en trabajo de procesos ETL (Spark, Python o Scala... o afines). Muy de valorar experiencia con Azure, Azure Data Factory. Muy de valorar conocimientos de fuentes diferentes (Oracle, SAP...), y así como de tencologías ETL como por ejemplo Powercenter o afines. Otros valorables que aportarían al equipo (Funciones que también podrían acometerse): Cuestiones de Gobierno del Dato, cuestiones tipo DataOPs, CI/CD y automatizaciones a tal efecto, trabajo con fuentes de API´s de terceros, conocimiento de cuestiones de Data Analytics como por ejemplo cuestiones de conocimientos en Modelos Semánticos Etc... ¿Quieres trabajar en una empresa en la que sabemos cómo te llamas, nos preocupamos por tu bienestar y cuando necesitas algo te atendemos al momento? SANDAV es una empresa que basa la relación con sus empleados en la INTEGRIDAD, que en resumen quiere decir que CUMPLIMOS LO PROMETIDO. Para más información: sandavteam.com

Cerca avançada