Descripción de la oferta
Rol de Senior Data Engineer 90% Remoto-> Valencia Sobre el perfil: Buscamos un Senior Data Engineer con amplia experiencia en el diseño, construcción y optimización de plataformas de datos a gran escala. La persona seleccionada trabajará en entornos cloud modernos (AWS y Kubernetes), participando en el desarrollo end-to-end de pipelines de datos críticos para el negocio, garantizando soluciones escalables, fiables y de alto rendimiento en contextos financieros complejos. Funciones: Diseñar, desarrollar y mantener pipelines de datos end-to-end (batch y real time), desde la ingesta hasta la generación de reportes. Procesar grandes volúmenes de datos transaccionales utilizando PySpark y Scala . Diseñar y orquestar workflows complejos en Apache Airflow , gestionando dependencias, SLAs y manejo avanzado de errores. Implementar lógica de negocio avanzada mediante Spark SQL y UDFs en Scala . Desplegar y operar pipelines sobre AWS y Kubernetes , optimizando costes y rendimiento. Colaborar con equipos de datos, producto y negocio para definir modelos de datos eficientes y escalables. Implementar monitorización y observabilidad de pipelines mediante Grafana, Kibana y Elasticsearch . Participar activamente en procesos de CI/CD e infraestructura como código . Perfil buscado (H/M/D): Más de 6 años de experiencia como Data Engineer o roles similares. Dominio de Python (PySpark, Pandas) y Scala . Experiencia sólida con Apache Spark y optimización de pipelines distribuidos. Conocimientos avanzados en AWS : Glue, Lambda, Step Functions, Athena y S3. Experiencia en Kubernetes , incluyendo entornos ligeros como k3s . Uso de Apache Airflow para orquestación de datos. Conocimientos en SQL (Spark SQL, PostgreSQL). Experiencia con Terraform, Docker y ArgoCD . Experiencia en pipelines financieros o entornos de datos complejos. Nivel alto de ingles. Qué ofrecemos: Un entorno dinámico con proyectos innovadores. Modalidad de trabajo flexible y 90% remoto (2 días oficina al mes) Oportunidades de formación y certificaciones. Salario competitivo y beneficios adicionales. Equipamiento técnico necesario para el puesto. Siguientes pasos: Si estás interesado en esta oferta, haz click en "aplicar ahora" para enviar una copia actualizada de tu CV.