Responsabilidades
🤓 Como Sr. Data Engineer, la empresa espera que realices las siguientes tareas:
- SQL/ Databricks: Desarrollo de scripts, automatización y manipulación de datos.
- ADL: Diseño y desarrollo de procesos de ETL (Extract, Transform, Load) para la transformación de datos provenientes de diferentes fuentes y su carga en sistemas de almacenamiento y análisis.
- Manejo de logs incluidos en los desarrollos el ETL para facilitar monitoreo
- Metodología:Diseño y desarrollo de modelos de datos, incluyendo esquemas de bases de datos, estructuras de tablas, relaciones y jerarquías, con el propósito de facilitar el análisis y la consulta de datos.
- Conocimiento amplio en generación, manutención y consistencia sobre integridad referencial en estructuras de bases de datos.
- Entendimiento en la implementación de medidas de seguridad, políticas de acceso y gobernanza de datos para garantizar la protección y el cumplimiento de los datos almacenados en Azure.
- Resolución de problemas y optimización de rendimiento para garantizar la eficiencia de las soluciones de datos en Azure.
- Conocimiento con herramientas de versionado de código como DevOps
- Técnicas de normalización y desnormalización para optimizar el rendimiento y la eficiencia del modelo de datos.
Requisitos
✨ Eres la persona que buscan si…
- Carreras en Ingeniería en sistemas, matemática, informática y afines.
- Cuentas con experiencia en: Azure Databricks, Azure Data Factory, Azure Data Lake, Azure Databricks -Scala
- +4 años en Pyspark y SQL
- Conocimientos en DevOps
- Enfoque Kimball
- Performance en datos
- Inglés intermedio/avanzado
¿Estás buscando ofertas laborales?
En Talently publicamos las mejores ofertas del sector tech, suscríbete a nuestro boletín o crea tu perfil para estar al tanto de ellas.