Aderen People

Job details

Big Data Engineer

Freelance Full time

Apply now
Job Opening ID 1566
Project lenght in months Largo Plazo
Languages Ingles
Knowledge area
Skills Big Data
Rate - Eur 220-250
Job Description

BUSCAMOS:  Big Data Engineer

FUNCIONES – TAREAS & CONOCIMIENTOS:

Profesional con experiencia de al menos 5 años trabajando como Ingeniero de Software especializado en Big Data (Python/SQL/Spark) que hayan colaborado con Data Scientists y que posea conocimientos DevOps (automatización pruebas y despliegues) + Nociones de algoritmos ML para colaborar con los DS.

Funciones

- Gestionar, optimizar y supervisar la recuperación del dato, el almacenamiento y distribución.
- Diseñar, programar y elaborar una infraestructura (sistemas de procesamiento y almacenamiento) capaz de organizar grandes volúmenes de datos de forma eficiente.
- Identificar formas de mejorar confiabilidad, eficiencia y calidad del dato.
- Preparar datos para modelos predictivos y prescriptivos.
- Cubrir 'GAP' de escalabilidad en la productivización de la AA.



Conocimientos Técnicos

• Python (dominio del lenguaje, buenas prácticas, pruebas unitarias, pandas, expresiones regulares, etc.)
• SQL (dominio del lenguaje, modelización, procedimientos almacenados, modelos analíticos)
• Databricks/Spark (conocimiento avanzado de pyspark, notebooks)
• Ficheros CSV, JSON, Parquet (estrategias de particionamiento de ficheros grandes)
• Azure Data Lake, Azure Databricks, Azure Synapse SQL, Azure Data Factory (o servicios equivalentes en otras nubes públicas)
• Pruebas (test unitarios, test de carga, automatización, metodologías)
• APIs REST
• Docker (contenerización en Linux). Deseable nociones de Kubernetes
• DevOps (GIT, pipelines de build y de release, metodologías ágiles, repositorios de artefactos, etc.)

Idiomas
• Inglés (B2)
               

OFRECEMOS: 

·         Contrato en modalidad  Freelance Full time

·         Oferta económica:  230€/250€  jornada + IVA (según experiencia aportada)

·         Proyecto de larga Duración. Recurrencia en Proyectos

·         Lugar de trabajo:  Madrid  (SmartWorking 3 días en oficina y 2 en remoto)

 



Apply now