Desarrollador / a PySpark Teletrabajo

Madrid

¿Qué buscamos? Más de 3 años de experiencia como ingeniero de datos o en un puesto similar Gran dominio del lenguaje de programación Scala y PySpark Amplia experiencia con tecnologías de big data, en particular Apache Spark y el ecosistema Hadoop Sólidos conocimientos de bases de datos SQL y NoSQL Experiencia en modelado de datos, procesos ETL y conceptos de almacenamiento de datos Experiencia con sistemas de control de versiones, preferiblemente GIT. Familiaridad con plataformas en la nube como AWS, Azure o GCP Conocimiento de las mejores prácticas de seguridad y privacidad de datos Descripción Porque trabajar en Sopra Steria, también es sentir Sopra Steria. Somos un reconocido líder europeo en consultoría, servicios digitales y desarrollo de software, con cerca de 56.000 empleados en casi 30 países y más de 4.000 en España. Nos enfocamos en las personas, en su formación y desarrollo profesional, lo que nos impulsa a crecer y mejorar constantemente. Tenemos pasión por lo digital y al igual que tú, buscamos la mejor de las aventuras. Queremos que tu día a día se convierta en la mejor de tus inspiraciones. Que aprendas, aportes, te diviertas, crezcas y que, sobre todo, disfrutes al máximo. Si quieres formar parte de un equipo "Great Place to Work", ¡Sigue leyendo! En Sopra nos gustaría incorporar a un par de Data Engineer con experiencia en Scala y PySpark para unirse a nuestro dinámico equipo. En este puesto, será responsable de diseñar, implementar y mantener canalizaciones de datos e infraestructuras robustas para apoyar los procesos de toma de decisiones basados en datos de nuestra organización. Desarrollar y optimizar los procesos ETL utilizando Scala y PySpark para manejar el procesamiento de datos a gran escala Colaborar con científicos y analistas de datos para comprender los requisitos de los datos y entregar conjuntos de datos de alta calidad Construir y mantener canalizaciones de datos escalables utilizando Apache Spark y otras tecnologías de big data Implementar controles de calidad de datos y sistemas de supervisión para garantizar la precisión y fiabilidad de los datos El horario es flexible de oficina y el trabajo se realiza de manera híbrida, siendo 1 o 2 días por semana en oficina y el resto en casa.. Ubicación: Las Tablas

Andalusia, Aragó, Astúries, País Vasco, Cantàbria, Castella i Lleó, Castella-La Manxa, Catalunya, Extremadura, Galícia, La Rioja, Madrid, Múrcia, Navarra, Comunitat Valenciana, No peninsular

EXPERTO/a KAFKA - Remoto En Zemsania estamos buscando un/a Experto/a en Kafka para unirse a nosotros en un emocionante proyecto internacional. Si tienes experiencia desarrollando soluciones escalables y de alto rendimiento, este podría ser el lugar perfecto para ti. ¿Quiénes somos? Zemsania es una empresa que se dedica a proporcionar soluciones tecnológicas avanzadas, y estamos en constante búsqueda de innovadores que deseen hacer la diferencia. Si te gusta trabajar en un ambiente dinámico y desafiante, ¡te estamos buscando! Lo que harás: Diseñar soluciones escalables y de alto rendimiento utilizando Kafka. Trabajar con Kafka Streams y Kafka Confluent, para tratar datos de forma efectiva en entornos de datos. Agregar, filtrar y cruzar información será parte de tu día a día. Implementar patrones y arquitecturas de diseño de microservicios, como arquitectura en capas y hexagonal. Colaborar con el equipo utilizando herramientas como Git, Jenkins, OpenShift, Kubernetes, Sonar, Fortify y Maven. Realizar consultas y manipulaciones de bases de datos utilizando SQL. Azure o AWS: ¡quieres estar cómodo/a en la nube! Participar activamente en reuniones y contribuir al desarrollo de proyectos de forma colaborativa. Buscamos a alguien que tenga: Más de 5 años de experiencia en desarrollo y al menos 3 años desarrollando específicamente con Kafka. Capacidad sólida para diseñar soluciones escalables y de alto rendimiento en Kafka. Conocimiento avanzado en Kafka Streams o, en su defecto, Kafka Confluent. Experiencia con lenguajes como Python, Scala y Java, y si sabes más ¡mejor! Conocimientos de SQL para consultar y manipular bases de datos sin problemas. Buena familiaridad con tecnologías en la nube (AWS, Azure. Un nivel de inglés entre B2 y C1. Importante, ya que trabajaremos en un proyecto internacional. ¿Qué ofrecemos? Trabajo 100% remoto desde cualquier lugar de España. Un ambiente laboral donde la innovación y la creatividad son el centro de todo. Oportunidades de formación y crecimiento profesional. Un equipo diverso y colaborativo donde cada voz cuenta. Un paquete competitivo de compensación y beneficios. ¿Listo para unirte a nosotros? Si tienes la pasión y experiencia necesaria para afrontar este reto, ¡queremos conocerte! En Zemsania, valoramos el talento y la dedicación, así que ven y forma parte de nuestro equipo. ¡Esperamos tu solicitud pronto! En Zemsania, creemos en la igualdad de oportunidades y en la diversidad como valores fundamentales para el éxito de nuestra organización. Por ello, garantizamos un proceso de selección basado en el mérito y sin discriminación por motivos de género, edad, discapacidad, orientación sexual, raza, religión o cualquier otra condición personal o social.

Madrid

Desde CMV Consultores te brindamos las mejores oportunidades, en importantes clientes. Desarrollar soluciones en Python robustas y mantenibles, aplicando buenas prácticas (clean code, pruebas unitarias, patrones de diseño) para construir APIs, Azure Functions y procesos de backend escalables. Diseñar, implementar y optimizar pipelines de datos utilizando Spark y Databricks, aplicando procesos ETL/ELT eficientes y asegurando la calidad, trazabilidad y gobierno del dato. Integrar y operar bases de datos relacionales, NoSQL y vectoriales (SQL Server, MongoDB, CosmosDB, Snowflake, Azure AI Search), optimizando consultas y diseñando modelos de datos adaptados a los casos de uso. Orquestar flujos de datos y procesos en Azure, utilizando servicios como Data Factory, Azure Functions, Data Lake, Key Vault y Log Analytics para construir arquitecturas modulares, seguras y monitorizadas. Desplegar y mantener entornos de integración y entrega continua (CI/CD) en Azure DevOps o GitHub Actions, creando pipelines YAML automatizados para pruebas, análisis estático, despliegues y versionado. Colaborar en entornos controlados por GIT, siguiendo metodologías como Git Flow o trunk-based development, integrando ramas y resolviendo conflictos de forma eficiente. Aplicar principios de observabilidad y gobierno del dato, incluyendo el uso de métricas, logs, auditoría, gestión de permisos (Entra ID), y definición de buenas prácticas de operación en la nube. Explorar e integrar tecnologías de IA generativa y ML en producción, incluyendo uso de APIs de OpenAI, modelos vectoriales, endpoints en Azure Machine Learning y servicios cognitivos como Document Intelligence. ¿Qué se ofrece? Teletrabajov3 días (2 días a la oficina zona Delicias) Contrato indefinido y salario competitivo según valía. Proyecto a largo plazo

Madrid

Description: From Grupo Digital, we are looking for a Data Engineer Scala Spark for a stable project. Requirements: Experience supporting / overseeing mentoring and guiding junior developers, including providing guidance on best practice / technical solutions, peer reviews and documentation of testing Implement and management of scalable big data infrastructure using IaC such as Terraform AWS expertise in services such as EMR, EC2, Lambda, Step Functions, Glue Experience of Big Data Technologies - well rounded experience of Hadoop, Spark/Scala and NoSQL databases Practical experience designing and monitoring batch processes Proficiency in scripting languages such as Bash & Python Unix / Linux experience Worked with Code Repositories as GIT, Maven, ... DevOps Knowledge (Jenkins, Scripts, ...) Tools used for deploying software into environments, use of Jira. High level of Spanish and English. Nice to have skills: Analyst Skills: Being able to translate technical requirements to non-technical partners and to deliver clear solutions. Been able to create test cases scenario SQL advance knowledge: Been able to test changes and issues properly, replicating the code functionality into SQL Documentation: Experience of carrying out data and process analysis to create specifications documents Finance Knowledge: Have a experience working in Financial Services / Banking organisation with an understanding of Financial Services / Retail, Business and Corporate Banking Control-m solid experience: Been able to create jobs, modify parameters What do we offer you? Competitive salary based on experience Permanent contract or Freelance Contract Option 22 working days of vacation Flexible compensation plan: Medical insurance, childcare vouchers, transportation vouchers Training in Technology and Soft Skills Referral program: EUR500 for recommended candidates who join us Location: Madrid. Full remote. Salary to be negotiated based on experience. Grupo Digital We are a group of technology companies, currently made up of around 200 professionals in various areas: development, systems, automation engineering, consulting, and more. If you wish to start your career in web development and be part of a dynamic team, we look forward to receiving your application!