Adicionar colunas sigla_pais_coi e sigla_pais_fifa

models/br_bd_diretorios_mundo/br_bd_diretorios_mundo__pais.sql

@@ -7,6 +7,8 @@ select
     safe_cast(sigla_pais_iso3 as string) sigla_pais_iso3,
     safe_cast(sigla_pais_iso2 as string) sigla_pais_iso2,
     safe_cast(sigla_pais_pnud as string) sigla_pais_pnud,
+    safe_cast(sigla_pais_coi as string) sigla_pais_coi,
+    safe_cast(sigla_pais_fifa as string) sigla_pais_fifa,
     safe_cast(nome as string) nome,
     safe_cast(nome_ingles as string) nome_ingles,
     safe_cast(nome_oficial_ingles as string) nome_oficial_ingles,

models/br_bd_diretorios_mundo/code/download_sh4_ncm.ipynb

@@ -0,0 +1,67 @@
+{
+ "cells": [
+  {
+   "cell_type": "code",
+   "execution_count": 5,
+   "metadata": {},
+   "outputs": [],
+   "source": [
+    "import pandas as pd\n",
+    "import requests\n",
+    "from io import BytesIO\n"
+   ]
+  },
+  {
+   "cell_type": "code",
+   "execution_count": null,
+   "metadata": {},
+   "outputs": [],
+   "source": [
+    "urls = {\n",
+    "    'ncm' : 'https://balanca.economia.gov.br/balanca/bd/tabelas/NCM.csv',\n",
+    "    'sh4': 'https://balanca.economia.gov.br/balanca/bd/tabelas/NCM_SH.csv'\n",
+    "    }\n",
+    "\n",
+    "for k in urls:\n",
+    "    print(f'Baixando tabela {k}')\n",
+    "    \n",
+    "    response = requests.get(urls[k], verify=False)\n",
+    "    if response.status_code == 200:\n",
+    "        \n",
+    "        data = BytesIO(response.content)\n",
+    "        df = pd.read_csv(data, encoding='latin-1', sep=';', dtype = str)\n",
+    "        df.to_csv(\n",
+    "            f'{k}.csv',\n",
+    "            index=False,\n",
+    "            encoding = 'utf-8',\n",
+    "            sep=',',   \n",
+    "        )\n",
+    "    else:\n",
+    "        print(f'Erro! O status da requisição foi {response.status_code}')\n",
+    "\n",
+    "    "
+   ]
+  }
+ ],
+ "metadata": {
+  "kernelspec": {
+   "display_name": "bd_pipelines",
+   "language": "python",
+   "name": "python3"
+  },
+  "language_info": {
+   "codemirror_mode": {
+    "name": "ipython",
+    "version": 3
+   },
+   "file_extension": ".py",
+   "mimetype": "text/x-python",
+   "name": "python",
+   "nbconvert_exporter": "python",
+   "pygments_lexer": "ipython3",
+   "version": "3.9.15"
+  }
+ },
+ "nbformat": 4,
+ "nbformat_minor": 2
+}

models/br_bd_diretorios_mundo/schema.yml

@@ -21,6 +21,10 @@ models:
         description: Sigla do País - ISO2
       - name: sigla_pais_pnud
         description: Sigla do País - PNUD
+      - name: sigla_pais_coi
+        description: Sigla do País - COI
+      - name: sigla_pais_fifa
+        description: Sigla do País - FIFA
       - name: nome
         description: Nome do país em português
       - name: nome_ingles