[chore] Migração gradual Prefect 0.15 → 3.0: validação de infra e ajuste de recursos

[folhesgabriel]

Conduzir uma migração gradual dos flows do Prefect 0.15 para o Prefect 3.0, mantendo um conjunto reduzido de flows operando em paralelo no novo ambiente para avaliar a estabilidade da infraestrutura antes de promover a migração completa.

Deixar todos os flows ativos dos datasets abaixo (~5 flows no total) com schedule ativo no Prefect 3.0 e desativado no Prefect 0.15, para avaliar a infra em produção sem duplicar execuções:

• br_me_caged
• br_camara (todos os flows ativos do dataset)
• br_me_comex_stat

Objetivos do piloto:

• Validar uso de CPU/memória dos pods no Kubernetes sob carga real.
• Monitorar falhas, retries e logs no Prefect 3.0.

2. Aumentar recursos no Kubernetes

Revisar e ajustar requests e limits (CPU/memória) dos workers/agents do Prefect 3.0 com base no comportamento observado no piloto. Avaliar também:

• Tamanho do node pool dedicado.
• Configuração de autoscaling.
• Limites de concorrência por work pool / queue