Descripción de la oferta
Rol de Senior Data Engineer90% Remoto-> ValenciaSobre el perfil:Buscamos un Senior Data Engineer con amplia experiencia en el diseño, construcción y optimización de plataformas de datos a gran escala. La persona seleccionada trabajará en entornos cloud modernos (AWS y Kubernetes), participando en el desarrollo end-to-end de pipelines de datos críticos para el negocio, garantizando soluciones escalables, fiables y de alto rendimiento en contextos financieros complejos.Funciones:Diseñar, desarrollar y mantener pipelines de datos end-to-end (batch y real time), desde la ingesta hasta la generación de reportes.Procesar grandes volúmenes de datos transaccionales utilizando PySpark y Scala.Diseñar y orquestar workflows complejos en Apache Airflow, gestionando dependencias, SLAs y manejo avanzado de errores.Implementar lógica de negocio avanzada mediante Spark SQL y UDFs en Scala.Desplegar y operar pipelines sobre AWS y Kubernetes, optimizando costes y rendimiento.Colaborar con equipos de datos, producto y negocio para definir modelos de datos eficientes y escalables.Implementar monitorización y observabilidad de pipelines mediante Grafana, Kibana y Elasticsearch.Participar activamente en procesos de CI/CD e infraestructura como código.Perfil buscado (H/M/D):Más de 6 años de experiencia como Data Engineer o roles similares.Dominio de Python (PySpark, Pandas) y Scala.Experiencia sólida con Apache Spark y optimización de pipelines distribuidos.Conocimientos avanzados en AWS: Glue, Lambda, Step Functions, Athena y S3.Experiencia en Kubernetes, incluyendo entornos ligeros como k3s.Uso de Apache Airflow para orquestación de datos.Conocimientos en SQL (Spark SQL, PostgreSQL).Experiencia con Terraform, Docker y ArgoCD.Experiencia en pipelines financieros o entornos de datos complejos.Nivel alto de ingles.Qué ofrecemos:Un entorno dinámico con proyectos innovadores.Modalidad de trabajo flexible y 90% remoto (2 días oficina al mes)Oportunidades de formación y certificaciones.Salario competitivo y beneficios adicionales.Equipamiento técnico necesario para el puesto.Siguientes pasos:Si estás interesado en esta oferta, haz click en "aplicar ahora" para enviar una copia actualizada de tu CV.
