Ingeniero líder en software de datos (Spark/Scala/Databricks)

EPAM SystemsMadrid, ES
Published on

About the Role

¿Eres una persona profesional de mente abierta y con fluidez en el lenguaje de programación Scala? Si eso te describe, esta podría ser la oportunidad perfecta para unirte a EPAM como Líder en Ingeniería de Datos. Estamos buscando a alguien que trabaje en equipo, con excelentes habilidades de comunicación y organización, maestría en ingeniería y un nivel de inglés B2+/C1 para comunicarse fluidamente con interlocutores angloparlantes, compartir ideas y razonamientos.

Como parte de este proyecto, nuestros equipos de Datos están trabajando en migrar los flujos de trabajo de los Productos de Datos desde Oracle a Databricks. En EPAM, entrarás a un ambiente de trabajo dinámico y ágil, ayudando a clientes del Fortune 1000 mientras te adhieres a las mejores prácticas de ingeniería. Si eres una persona experta en Scala con una pasión por transformar soluciones de datos, únete a nosotros en Madrid, Málaga o de manera remota a través de España para estar en la vanguardia de la innovación con EPAM.

Responsibilities

  • Desarrollar, monitorear y operar el flujo de datos más utilizado y crítico en el cliente - Datos de Órdenes de Venta (incl. información posterior a la orden, e.g., envío, devolución, pago).
  • Consultar con analistas, científicos de datos y gerentes de producto para construir y mejorar continuamente el KPI de "Fuente Única de Verdad" para la dirección del negocio, como la medición central de Contribución al Beneficio (PC II).
  • Redesarrollar antiguos flujos de trabajo heredados a nuevas versiones avanzadas y estándares que sean fáciles de mantener y escalables para demandas futuras.
  • Aprovechar y mejorar un conjunto de tecnologías basadas en la nube que incluye AWS, Databricks, Kubernetes, Spark, Airflow, Python y Scala.

About the Candidate

¿Qué buscamos?

  • Experiencia en Apache Spark junto con Spark Streaming.
  • Sólida experiencia práctica con Databricks y delta-lake.
  • Fluidez en el lenguaje de programación Scala.
  • Experiencia en SQL.
  • Buen conocimiento y experiencia práctica con CI/CD.
  • Amplia experiencia de trabajo con GitHub.
  • Fluidez trabajando con el entorno de AWS.
  • Capacidad para construir flujos de trabajo con Apache Airflow.

Te dará una ventaja

  • Presto.
  • Superset.
  • Starburst.
  • Oracle & Exasol.

Company Culture and Benefits

¿Qué ofrecemos?

  • Seguro médico privado.
  • Plan de Compra de Acciones para Empleadxs de EPAM.
  • Baja por enfermedad pagada al 100%.
  • Programa de Referenciados.
  • Certificación profesional.
  • Cursos de idiomas.