Unificação de DAGs de extração e carga e correção de inserção de dados vazios no banco
Merge request para
- Correção da falha de inserção de dados vazios no banco
- Mesclagem das dags
fetch_process_and_clean_proposals
eingest_proposals_proccesses
para criar a dag etl_proposals - Criar checagem de bucket do minio e tabela do postgres
- criação do pytest
Tabela
- Chave primária: proposal_id
Configuração
Deve-se criar a conexão amazon web services
com o nome de minio_conn_id
Edited by João Pedro Amoêdo