[fix] br_ms_cnes.profissional

[folhesgabriel]

• Verificar tabelas que foram atualizadas pro mês 10 no BQ mas o metadado por conta do erro no parâmetro historical_database da função udpate_django_metadata;

• Verificar o motivo de falhar a instação do pacote read_dbc durante a execução do flow;

• O pacote read_dbc foi removido do cran. Como o pacote era instalado durante a execução da run via módulo rpy2 - interface de acesso ao R em Python - a execução falha.

Tentativas de resolver:

1. Instalar pacotes (1) pysus ou (2) pyreaddbc para fazer a conversão;
   Ocorre problema de conflito de versões do python. A versão do repo é definida no pyproject.toml como python = ">=3.8,<3.11" mas 1 exige python = ">=3.11,4" e 2 python = ">=3.9,<4"

2. Instalar pacote devtools via interface rpy2 para instalar pacotes diretamente do github. Ocorrêm muitos conflitos de dependências e/ou outros pacotes necessários.

3. Usar função read_dbc módulo pysus da danicat pra converter.

• a função não permite especificar o encoding do arquivo no momento da leitura. Como dados do cnes tem vários caracteres non ascii - enconding default - o código quebra na leitura.

4. Usar a função decompress do pysus e os módulos simpledfr e dbfread

• erro de unpack 32 buffers no dbfread
• com simpledbf os valores são todos convertidos para NULO

5. Usar solução proposta do desafio_bd

6. Implementar ShellTasks do prefect para rodar comandos bash