Ingeniero de datos - Azure Databricks
En SQDM/Digitech estamos interesados en encontrar a nuestro próximo Ingeniero de Datos con conocimientos específicos en Azure Databricks.
¿Qué harás en este rol?
- Generación de datasets en Azure Databricks: Implementación de procesos completos desde la fuente hasta una vista final.
- Definir la arquitectura de datos y almacenamiento adecuado (Store Account vs. Databricks).
- Diseñar e implementar procesos ETL/ELT en Databricks, optimizando rendimiento y seguridad.
- Aplicar convenciones actuales de Python para el manejo y transformación de datos.
- Desarrollar pipelines de CI/CD en entornos DevOps/DataOps para automatización.
- Gestionar y monitorear flujos de datos en Azure Data Lake Storage y MLFlow.
- Implementar estrategias de procesamiento en batch y streaming con Databricks.
- Optimizar consultas en SQL para la construcción de vistas analíticas eficientes.
¿Qué buscamos de ti?
- Mínimo 3 años de experiencia en generación y gestión de datasets en Azure Databricks.
- Implementación de procesos de ingesta, transformación y modelado de datos.
- Conocimientos en estructuración de datos en Databricks vs. Store Account.
- Desarrollo de modelos analíticos y machine learning en entornos Databricks.
- Azure Databricks (experiencia en diseño y gestión de datasets).
- Python y Scala para transformación y modelado de datos.
- Generación de datasets: procesos completos desde la fuente hasta la vista final.
- Convenciones actuales en Python para manipulación de datos.
- SQL avanzado para consultas y optimización de bases de datos en Databricks.
- DevSecOps y DataOps para gestión segura y automatizada de datos.
Plus:
- Azure Data Factory
- Azure Synapse Analytics
- Azure Stream Analytics
- Azure Event Hubs
- Azure Data Lake Storage
Dentro del portafolio de convenios y beneficios de SQDM encontrarás:
- Contrato a término Indefinido
- Convenios comerciales
- Formación y desarrollo en habilidades técnicas y blandas
- Patrocinio de Certificaciones Técnicas
- Horario L-V 8 am a 6 pm
- Modelo Teletrabajo
¡Únete a nuestro equipo multicultural!
#LI-Onsite
Requisitos
Estudios
Universidad / Carrera Profesional
Habilidades
SQL
Azure Stream Analytics
Azure Event Hubs
Azure Synapse Analytics
Azure Datafactory
DataOps
DevSecOps
SQL Avanzado
Scala
Azure
Azure Databricks
Python
ELT
ETL
Arquitectura de datos
Datasets
Databricks
Azure Data Lake Storage
Store Account
Valorado
Experiencia profesional
3-4 años
Sobre SQDM s.a.s.
SQDM ofrece servicios de consultoría en mejora continua de Procesos de Negocio, BPM. Implementación de soluciones de integración de aplicaciones basadas en arquitecturas flexibles y en la implementación de soluciones de Gestión del relacionamiento con los clientes, CRM.