Juan Pablo Ospina

Vi que combinas Airflow con GCP y tenes las dos certs de Astronomer recientes. Justo armamos un equipo de data engineering para una fintech en USA con stack casi identico, Airflow sobre Cloud Composer y BigQuery. El reto siempre termina siendo el mismo, escalar DAGs sin perder observabilidad. Como lo estan manejando en Covalto, con Composer gestionado o levantaron su propio Airflow?

Tiene sentido mantener Composer para un set acotado, ahi la observabilidad es manejable. Justo una fintech en USA con stack parecido escalo de 20 a 200 DAGs en seis meses con un equipo de data engineers que armamos desde Colombia. El foco siempre estuvo en testing de DAGs y monitoreo, no en la infra. Como ven el roadmap de pipelines en Covalto los proximos meses, viene crecimiento o se mantiene acotado?

Bacano que esten abiertos a explorar. Ese enfoque de buscar lo mejor al mejor precio encaja bien con como trabajamos: ingenieros senior LatAm en stack como el tuyo, GCP y Airflow, sin atarse a una sola tecnologia. Te propongo una llamada breve de 15 min para entender el contexto de Covalto y compartir como lo hemos resuelto. Miercoles o jueves a las 9AM hora Sao Paulo, alguno te calza? Te lo agendo yo.