Desarrollador Senior En Spark - Madrid

Deloitte - Madrid

En Deloitte estamos comprometidos con generar un impacto en la sociedad, en nuestros clientes y en ti. Responsabilidades: Diseñar, desarrollar y optimizar procesos de procesamiento distribuido de datos con Apache Spark. Implementar y mantener pipelines de datos en AWS Glue y/o Amazon EMR. Colaborar con arquitectos y analistas de datos en la definición de soluciones escalables y de alto rendimiento. Analizar e interpretar los QueryPlan generados por Spark y utilizar SparkUI para detectar patrones, cuellos de botella y oportunidades de optimización. Asegurar la calidad del código, las pruebas y la documentación técnica. Identificar oportunidades de mejora en rendimiento y costes en entornos cloud.