Detalles Primarios

Tipo de Tiempo: Tiempo completo

Tipo de Trabajador: Empleado

El propósito de este rol es impulsar la entrega eficiente de artefactos de construcción y proporcionar liderazgo técnico en el diseño, desarrollo y despliegue de las plataformas de QBE.

• Liderar el diseño, desarrollo y optimización de tuberías de datos y flujos de trabajo dentro de Azure Databricks usando Python.
• Colaborar con el equipo de la plataforma para garantizar la adecuada alineación de recursos, protocolos de seguridad y escalabilidad para el entorno de Databricks.
• Arquitectar, implementar y mantener tuberías ETL optimizadas, asegurando que sean fiables, escalables y eficientes.
• Trabajar estrechamente con las partes interesadas para entender los requisitos del negocio y diseñar soluciones de datos que satisfagan sus necesidades.
• Proporcionar liderazgo técnico a ingenieros de datos junior, guiándolos en las mejores prácticas para el diseño de tuberías de datos, procesamiento de datos y optimización de Databricks.
• Coordinar con el equipo de la plataforma para garantizar la disponibilidad, fiabilidad y rendimiento de la infraestructura subyacente.
• Liderar los esfuerzos de solución de problemas relacionados con el procesamiento de datos y fallas en las tuberías, asegurando un tiempo de inactividad mínimo.
• Monitorear el rendimiento de las tuberías de datos e implementar estrategias de optimización para mejorar los tiempos de procesamiento, reducir costos y mejorar la eficiencia general de la plataforma.
• Colaborar con arquitectos de datos e ingenieros para desarrollar modelos de datos que se puedan integrar sin problemas con Databricks.
• Mantenerse al día con las mejores prácticas y tecnologías emergentes en ingeniería de datos, especialmente dentro del ecosistema de Azure.

Requisitos:

• 5+ años de experiencia en ingeniería de datos con un enfoque en la construcción y optimización de tuberías de datos.
• Fuerte experiencia con Azure Databricks y la capacidad de liderar y optimizar flujos de trabajo complejos en este entorno.
• Competencia en Python para procesamiento de datos, desarrollo de tuberías y automatización.
• Experiencia con Azure Data Lake, Azure SQL y otras soluciones de almacenamiento y procesamiento de datos dentro de Azure.
• Comprensión profunda de los procesos ETL, incluyendo diseño de tuberías, automatización y solución de problemas.
• Experiencia práctica con Databricks Delta Lake, Apache Spark y ajuste de rendimiento en Databricks.
• Familiaridad con la infraestructura en la nube (Azure), incluyendo redes, almacenamiento y consideraciones de seguridad.
• Capacidad para colaborar y comunicarse efectivamente con equipos multifuncionales, incluyendo equipos de plataforma, para asegurar la alineación y entrega exitosa.
• Fuertes habilidades de resolución de problemas y solución de problemas, particularmente relacionadas con el rendimiento de tuberías de datos y fallas.
• Habilidades de comunicación y liderazgo excepcionales, con la capacidad de mentorear y guiar a ingenieros junior.

Calificaciones Preferidas:

• Experiencia con prácticas DevOps y tuberías CI/CD para flujos de trabajo de ingeniería de datos.
• Familiaridad con Azure Synapse Analytics, Azure Data Factory y otros servicios de datos basados en Azure.
• Experiencia trabajando en un entorno ágil con familiaridad con herramientas de gestión de proyectos.

Habilidades:

Comunicación,Pensamiento Crítico,Atención al Cliente,Sistemas Financieros,colaboración intencionada,Gestión del rendimiento,Mejoras de Procesos,Sistema de Gestión de Bases de Datos Relacionales (RDBMS),Gestión de Riesgos,Desarrollo de Software,Metodologías del Ciclo de Vida del Desarrollo de Software (SDLC),Gestión de Stakeholders,Liderazgo Estratégico,G gestión de Equipos,Modelo Waterfall

Cómo Aplicar:

Para enviar su solicitud, haga clic en "Aplicar" y siga el proceso paso a paso.

Oportunidad de Empleo Igualitaria:

QBE es un empleador que ofrece igualdad de oportunidades y está obligado a cumplir con la legislación de igualdad de oportunidades laborales en cada jurisdicción en la que opera.

Por favor, consulte la descripción del trabajo.