¡Bienvenidos al primer meetup virtual del Databricks Ecuador User Group (DEUG)!

En esta sesión exploraremos cómo llevar el rigor de la ingeniería de software al desarrollo moderno de soluciones de datos en Databricks, superando los riesgos asociados al desarrollo guiado principalmente por interfaz gráfica (UI).

Nos adentraremos en Databricks Asset Bundles (DABs) como marco para aplicar Control de Versiones, automatización CI/CD e Infraestructura como Código (IaC), permitiendo estructurar, parametrizar y empaquetar de forma declarativa componentes como schemas, notebooks, jobs y pipelines.

Durante la sesión veremos:

• Cómo estructurar proyectos utilizando Databricks Asset Bundles (DABs).

• Control de versiones y mejores prácticas de ingeniería de software.

• Gestión de entornos aislados Dev / Staging / Prod mediante variables dinámicas.

• Estrategias para pruebas unitarias y de integración.

• Automatización del ciclo de entrega mediante CI/CD con GitHub Actions.

• Uso de IaC para estandarizar componentes de Databricks.

Cerraremos con una demostración técnica, donde analizaremos y desplegaremos un proyecto DABs directamente desde la CLI.

Speaker

Paúl David Cumba Armijos
Lead Data Engineer | Thoughtworks

Magíster en TI y Lead Data Engineer en Thoughtworks con más de 15 años de experiencia liderando soluciones de Big Data y arquitecturas modernas en la nube para empresas globales. Certificado como Databricks Data Engineer Associate y Azure Data Engineer Associate, especializado en la implementación de mejores prácticas de desarrollo, automatización CI/CD e ingeniería de software para ecosistemas de datos.

Agenda

5 min — Bienvenida y presentación del Databricks Ecuador User Group (DEUG)
35 min — Modern Data Engineering: Automatización y Rigor de Software con Databricks Asset Bundles (DABs)
15 min — Q&A
5 min — Próximos eventos DEUG y cierre