Senior Data Engineer (Big Data & Azure)

Empresa Partner de Spain AI

20/04/2021
A Negociar (+50k€)

Senior Data Engineer (Big Data & Azure)

¿Que haras?

Aplicar practicas actuales de arquitecturas de datos paraa desarrollar una sólida estructura de datos de datos.

Escribir flujos de datos y pipelines de datos utilizando Databricks, Delta Lake, PySpark, Azure Data Factory o posiblemente Synapse Analytics.

Contribuir a la entrega de revisiones de la calidad de los datos, incluyendo la limpieza de datos cuando sea necesario para garantizar la integridad y la calidad.

Comprender los modelos de datos, los modelos de almacenamiento de datos y la migración de datos para gestionar los datos dentro de la organización.

Resolver problemas de diseño e implementación con una complejidad moderada-alta.

Analizar las últimas tendencias del sector, como la computación en la nube y el procesamiento distribuido y comenzar a inferir los riesgos y beneficios de su uso en el negocio.

Trabajar en la adhesión a los procesos pertinentes de ingeniería de datos y modelado de datos, procedimientos y normas.

¿Qué buscamos?

Profesional con mínimo 3 años de experiencia como Data Engineer.

Experiencia en integración de datos (obtención, almacenamiento y migración): Capacidad para diseñar e implementar modelos y soluciones para gestionar los datos en la empresa (data-fabric estructurado y no estructurado, principios de archivado de datos, sourcing de datos, etc.).

Experiencia con el almacenamiento lógico de datos (Schema on-read): capacidad para diseñar esquemas complejos en estrella.

Procesamiento por lotes: capacidad para diseñar una forma eficiente de procesar grandes volúmenes de datos donde se recogen un grupo de transacciones durante un periodo de tiempo.

Calidad de los datos, elaboración de perfiles y limpieza: Capacidad de revisar (perfilar) un conjunto de datos para establecer su calidad con respecto a un conjunto definido de parámetros y destacar los datos en los que se requiere una acción correctiva (limpieza).

Sistemas de procesamiento en Streaming: Capacidad para descubrir, integrar e ingerir todos los datos disponibles de las máquinas que los producen, tan rápido como se producen, en cualquier formato y con cualquier calidad.

Sólidos conocimientos de Azure Synapse Analytics, Synapse Studio, T-SQL, Azure Functions, ADLS, Azure Data Factory (ADF), ADF metadata driven pipelines, Azure DevOps, Azure Synapse data warehouse (Distributed Big data), MS SQL Server, Python y PySpark.

Conocimientos de Azure DataBricks, Azure Delta Lake, Spark, Azure Functions, ADLS.

Conocimientos sobre conectividad Azure en general (Azure Key Vault, Azure Functions, integración de Azure con Active Directory).

Conocimiento de Power Automate/Apps, Power BI, Dataflows, MS SSAS y DAX es un plus.

¿Qué ofrecemos?

Jornada: 9h – 18:30h (Lunes a Jueves) – 9h a 15:30h (Viernes).

Paquete retributivo acorde a la experiencia y competencias aportadas (a partir de 50k€, abierto a negociación).

Teletrabajo en remoto con algunas reuniones puntuales en las oficinas (Madrid, Barcelona).

Integrarte en un gran equipo de profesionales.

Excelente ambiente de trabajo y opciones de desarrollo profesional, teletrabajo y estabilidad.

Plan de carrera y trainings personalizado.

¿Me puedes contar algo más?

El perfil ideal será una persona qeu tenga conocimientos de Data Engineer y Arquitecto de datos cloud sobre Azure.

Se busca un perfil senior (solo hay una posición abierta).

La empresa que contrata busca perfiles para trabajar conjuntamente con una empresa Big-4 (gran empresa consultora diferente de la empresa que te contratará).

Los proyectos serán desarrollados dentro del HUB de Innovacion (IA y Big Data) de esta empresa externa Big-4, con la que colabora la empresa que te contratará.

Dado que estas posiciones son para trabajar en colaboración con una Big-4, se plantea la posibilidad de incorporarse a la plantilla de la Big-4 en el tiempo (6 meses o 1 año).

Se necesita saber inglés ya que es un proyecto internacional, aunque no se plantean viajes al extranjero.

Actualmente la empresa busca personas que estén viviendo en España.

Inscribirse en la oferta

Si te gustaría trabajar en esta posición completa el formulario con el nombre de la oferta.

[OPCIONAL] Si te has enterado de esta posición a través de un contacto, indica el nombre de tu contacto entre paréntesis
[OPCIONAL] Si te has enterado de esta posición a través de un contacto, indica el e-mail de tu contacto entre paréntesis
Copia y pega tu url del perfil de linkedin
Click or drag a file to this area to upload.
Antes de compartirlos con la empresa es posible que te pidamos tener una breve conversación telefónica para conocerte.

¿CONOCES A ALGUIEN QUE LE PUEDA INTERESAR?

Spain AI está ayudando a esta empresa a cubrir la posición ofertada, por lo que si conoces algún candidato válido (que cumpla los criterios definidos y Spain AI proponga a la empresa) Spain AI te recompensará con 50€ en cheques amazon, y si finalmente el candidato es contratado, con 600€ adicionales. Para ello dile que lo indique cuando nos envíe su CV.  

X