diff --git a/models/br_bd_diretorios_mundo/br_bd_diretorios_mundo__pais.sql b/models/br_bd_diretorios_mundo/br_bd_diretorios_mundo__pais.sql index 0958a588..9a98cdf0 100644 --- a/models/br_bd_diretorios_mundo/br_bd_diretorios_mundo__pais.sql +++ b/models/br_bd_diretorios_mundo/br_bd_diretorios_mundo__pais.sql @@ -7,6 +7,8 @@ select safe_cast(sigla_pais_iso3 as string) sigla_pais_iso3, safe_cast(sigla_pais_iso2 as string) sigla_pais_iso2, safe_cast(sigla_pais_pnud as string) sigla_pais_pnud, + safe_cast(sigla_pais_coi as string) sigla_pais_coi, + safe_cast(sigla_pais_fifa as string) sigla_pais_fifa, safe_cast(nome as string) nome, safe_cast(nome_ingles as string) nome_ingles, safe_cast(nome_oficial_ingles as string) nome_oficial_ingles, diff --git a/models/br_bd_diretorios_mundo/code/download_sh4_ncm.ipynb b/models/br_bd_diretorios_mundo/code/download_sh4_ncm.ipynb new file mode 100644 index 00000000..b38fc299 --- /dev/null +++ b/models/br_bd_diretorios_mundo/code/download_sh4_ncm.ipynb @@ -0,0 +1,67 @@ +{ + "cells": [ + { + "cell_type": "code", + "execution_count": 5, + "metadata": {}, + "outputs": [], + "source": [ + "import pandas as pd\n", + "import requests\n", + "from io import BytesIO\n" + ] + }, + { + "cell_type": "code", + "execution_count": null, + "metadata": {}, + "outputs": [], + "source": [ + "urls = {\n", + " 'ncm' : 'https://balanca.economia.gov.br/balanca/bd/tabelas/NCM.csv',\n", + " 'sh4': 'https://balanca.economia.gov.br/balanca/bd/tabelas/NCM_SH.csv'\n", + " }\n", + "\n", + "for k in urls:\n", + " print(f'Baixando tabela {k}')\n", + " \n", + " response = requests.get(urls[k], verify=False)\n", + " if response.status_code == 200:\n", + " \n", + " data = BytesIO(response.content)\n", + " df = pd.read_csv(data, encoding='latin-1', sep=';', dtype = str)\n", + " df.to_csv(\n", + " f'{k}.csv',\n", + " index=False,\n", + " encoding = 'utf-8',\n", + " sep=',', \n", + " )\n", + " else:\n", + " print(f'Erro! O status da requisição foi {response.status_code}')\n", + "\n", + " " + ] + } + ], + "metadata": { + "kernelspec": { + "display_name": "bd_pipelines", + "language": "python", + "name": "python3" + }, + "language_info": { + "codemirror_mode": { + "name": "ipython", + "version": 3 + }, + "file_extension": ".py", + "mimetype": "text/x-python", + "name": "python", + "nbconvert_exporter": "python", + "pygments_lexer": "ipython3", + "version": "3.9.15" + } + }, + "nbformat": 4, + "nbformat_minor": 2 +} diff --git a/models/br_bd_diretorios_mundo/schema.yml b/models/br_bd_diretorios_mundo/schema.yml index 8df4b4e7..d48ace75 100644 --- a/models/br_bd_diretorios_mundo/schema.yml +++ b/models/br_bd_diretorios_mundo/schema.yml @@ -21,6 +21,10 @@ models: description: Sigla do País - ISO2 - name: sigla_pais_pnud description: Sigla do País - PNUD + - name: sigla_pais_coi + description: Sigla do País - COI + - name: sigla_pais_fifa + description: Sigla do País - FIFA - name: nome description: Nome do país em português - name: nome_ingles