Merge pull request #1 from viniciusandrade01/feature/awstwo

Insert file to aws
viniciusandrade01 · Nov 21, 2023 · bab69b1 · bab69b1
2 parents b44b0aa + afc3b85
commit bab69b1
Show file tree

Hide file tree

Showing 50 changed files with 32 additions and 63 deletions.
diff --git a/Emenda_Parlamentar_20231116/Emendas.csv → Emenda_Parlamentar_20231121/Emendas.csv b/Emenda_Parlamentar_20231116/Emendas.csv → Emenda_Parlamentar_20231121/Emendas.csv
diff --git a/...ar_20231116/Evolucao_Empenhados_Anual.png → ...ar_20231121/Evolucao_Empenhados_Anual.png b/...ar_20231116/Evolucao_Empenhados_Anual.png → ...ar_20231121/Evolucao_Empenhados_Anual.png
diff --git a/...amentar_20231116/Setor_Destaque_Anual.png → ...amentar_20231121/Setor_Destaque_Anual.png b/...amentar_20231116/Setor_Destaque_Anual.png → ...amentar_20231121/Setor_Destaque_Anual.png
diff --git a/...0231116/Setores_Destacados_Anual_2014.png → ...0231121/Setores_Destacados_Anual_2014.png b/...0231116/Setores_Destacados_Anual_2014.png → ...0231121/Setores_Destacados_Anual_2014.png
diff --git a/...0231116/Setores_Destacados_Anual_2015.png → ...0231121/Setores_Destacados_Anual_2015.png b/...0231116/Setores_Destacados_Anual_2015.png → ...0231121/Setores_Destacados_Anual_2015.png
diff --git a/...0231116/Setores_Destacados_Anual_2016.png → ...0231121/Setores_Destacados_Anual_2016.png b/...0231116/Setores_Destacados_Anual_2016.png → ...0231121/Setores_Destacados_Anual_2016.png
diff --git a/...0231116/Setores_Destacados_Anual_2017.png → ...0231121/Setores_Destacados_Anual_2017.png b/...0231116/Setores_Destacados_Anual_2017.png → ...0231121/Setores_Destacados_Anual_2017.png
diff --git a/...0231116/Setores_Destacados_Anual_2018.png → ...0231121/Setores_Destacados_Anual_2018.png b/...0231116/Setores_Destacados_Anual_2018.png → ...0231121/Setores_Destacados_Anual_2018.png
diff --git a/...0231116/Setores_Destacados_Anual_2019.png → ...0231121/Setores_Destacados_Anual_2019.png b/...0231116/Setores_Destacados_Anual_2019.png → ...0231121/Setores_Destacados_Anual_2019.png
diff --git a/...0231116/Setores_Destacados_Anual_2020.png → ...0231121/Setores_Destacados_Anual_2020.png b/...0231116/Setores_Destacados_Anual_2020.png → ...0231121/Setores_Destacados_Anual_2020.png
diff --git a/...0231116/Setores_Destacados_Anual_2021.png → ...0231121/Setores_Destacados_Anual_2021.png b/...0231116/Setores_Destacados_Anual_2021.png → ...0231121/Setores_Destacados_Anual_2021.png
diff --git a/...0231116/Setores_Destacados_Anual_2022.png → ...0231121/Setores_Destacados_Anual_2022.png b/...0231116/Setores_Destacados_Anual_2022.png → ...0231121/Setores_Destacados_Anual_2022.png
diff --git a/...0231116/Setores_Destacados_Anual_2023.png → ...0231121/Setores_Destacados_Anual_2023.png b/...0231116/Setores_Destacados_Anual_2023.png → ...0231121/Setores_Destacados_Anual_2023.png
diff --git a/...or_Empenhado_e_Valor_Incristo_por_Ano.png → ...or_Empenhado_e_Valor_Incristo_por_Ano.png b/...or_Empenhado_e_Valor_Incristo_por_Ano.png → ...or_Empenhado_e_Valor_Incristo_por_Ano.png
diff --git a/...ção_dos_Setores_Destacados_Anual_2014.png → ...ção_dos_Setores_Destacados_Anual_2014.png b/...ção_dos_Setores_Destacados_Anual_2014.png → ...ção_dos_Setores_Destacados_Anual_2014.png
diff --git a/...ção_dos_Setores_Destacados_Anual_2015.png → ...ção_dos_Setores_Destacados_Anual_2015.png b/...ção_dos_Setores_Destacados_Anual_2015.png → ...ção_dos_Setores_Destacados_Anual_2015.png
diff --git a/...ção_dos_Setores_Destacados_Anual_2016.png → ...ção_dos_Setores_Destacados_Anual_2016.png b/...ção_dos_Setores_Destacados_Anual_2016.png → ...ção_dos_Setores_Destacados_Anual_2016.png
diff --git a/...ção_dos_Setores_Destacados_Anual_2017.png → ...ção_dos_Setores_Destacados_Anual_2017.png b/...ção_dos_Setores_Destacados_Anual_2017.png → ...ção_dos_Setores_Destacados_Anual_2017.png
diff --git a/...ção_dos_Setores_Destacados_Anual_2018.png → ...ção_dos_Setores_Destacados_Anual_2018.png b/...ção_dos_Setores_Destacados_Anual_2018.png → ...ção_dos_Setores_Destacados_Anual_2018.png
diff --git a/...ção_dos_Setores_Destacados_Anual_2019.png → ...ção_dos_Setores_Destacados_Anual_2019.png b/...ção_dos_Setores_Destacados_Anual_2019.png → ...ção_dos_Setores_Destacados_Anual_2019.png
diff --git a/...ção_dos_Setores_Destacados_Anual_2020.png → ...ção_dos_Setores_Destacados_Anual_2020.png b/...ção_dos_Setores_Destacados_Anual_2020.png → ...ção_dos_Setores_Destacados_Anual_2020.png
diff --git a/...ção_dos_Setores_Destacados_Anual_2021.png → ...ção_dos_Setores_Destacados_Anual_2021.png b/...ção_dos_Setores_Destacados_Anual_2021.png → ...ção_dos_Setores_Destacados_Anual_2021.png
diff --git a/...ção_dos_Setores_Destacados_Anual_2022.png → ...ção_dos_Setores_Destacados_Anual_2022.png b/...ção_dos_Setores_Destacados_Anual_2022.png → ...ção_dos_Setores_Destacados_Anual_2022.png
diff --git a/...ção_dos_Setores_Destacados_Anual_2023.png → ...ção_dos_Setores_Destacados_Anual_2023.png b/...ção_dos_Setores_Destacados_Anual_2023.png → ...ção_dos_Setores_Destacados_Anual_2023.png
diff --git a/...mentar_20231116/Tipos_Emendas_em_2014.png → ...mentar_20231121/Tipos_Emendas_em_2014.png b/...mentar_20231116/Tipos_Emendas_em_2014.png → ...mentar_20231121/Tipos_Emendas_em_2014.png
diff --git a/...mentar_20231116/Tipos_Emendas_em_2015.png → ...mentar_20231121/Tipos_Emendas_em_2015.png b/...mentar_20231116/Tipos_Emendas_em_2015.png → ...mentar_20231121/Tipos_Emendas_em_2015.png
diff --git a/...mentar_20231116/Tipos_Emendas_em_2016.png → ...mentar_20231121/Tipos_Emendas_em_2016.png b/...mentar_20231116/Tipos_Emendas_em_2016.png → ...mentar_20231121/Tipos_Emendas_em_2016.png
diff --git a/...mentar_20231116/Tipos_Emendas_em_2017.png → ...mentar_20231121/Tipos_Emendas_em_2017.png b/...mentar_20231116/Tipos_Emendas_em_2017.png → ...mentar_20231121/Tipos_Emendas_em_2017.png
diff --git a/...mentar_20231116/Tipos_Emendas_em_2018.png → ...mentar_20231121/Tipos_Emendas_em_2018.png b/...mentar_20231116/Tipos_Emendas_em_2018.png → ...mentar_20231121/Tipos_Emendas_em_2018.png
diff --git a/...mentar_20231116/Tipos_Emendas_em_2019.png → ...mentar_20231121/Tipos_Emendas_em_2019.png b/...mentar_20231116/Tipos_Emendas_em_2019.png → ...mentar_20231121/Tipos_Emendas_em_2019.png
diff --git a/...mentar_20231116/Tipos_Emendas_em_2020.png → ...mentar_20231121/Tipos_Emendas_em_2020.png b/...mentar_20231116/Tipos_Emendas_em_2020.png → ...mentar_20231121/Tipos_Emendas_em_2020.png
diff --git a/...mentar_20231116/Tipos_Emendas_em_2021.png → ...mentar_20231121/Tipos_Emendas_em_2021.png b/...mentar_20231116/Tipos_Emendas_em_2021.png → ...mentar_20231121/Tipos_Emendas_em_2021.png
diff --git a/...mentar_20231116/Tipos_Emendas_em_2022.png → ...mentar_20231121/Tipos_Emendas_em_2022.png b/...mentar_20231116/Tipos_Emendas_em_2022.png → ...mentar_20231121/Tipos_Emendas_em_2022.png
diff --git a/...mentar_20231116/Tipos_Emendas_em_2023.png → ...mentar_20231121/Tipos_Emendas_em_2023.png b/...mentar_20231116/Tipos_Emendas_em_2023.png → ...mentar_20231121/Tipos_Emendas_em_2023.png
diff --git a/...ntar_20231116/Top3_Autor_Emendas_2014.png → ...ntar_20231121/Top3_Autor_Emendas_2014.png b/...ntar_20231116/Top3_Autor_Emendas_2014.png → ...ntar_20231121/Top3_Autor_Emendas_2014.png
diff --git a/...ntar_20231116/Top3_Autor_Emendas_2015.png → ...ntar_20231121/Top3_Autor_Emendas_2015.png b/...ntar_20231116/Top3_Autor_Emendas_2015.png → ...ntar_20231121/Top3_Autor_Emendas_2015.png
diff --git a/...ntar_20231116/Top3_Autor_Emendas_2016.png → ...ntar_20231121/Top3_Autor_Emendas_2016.png b/...ntar_20231116/Top3_Autor_Emendas_2016.png → ...ntar_20231121/Top3_Autor_Emendas_2016.png
diff --git a/...ntar_20231116/Top3_Autor_Emendas_2017.png → ...ntar_20231121/Top3_Autor_Emendas_2017.png b/...ntar_20231116/Top3_Autor_Emendas_2017.png → ...ntar_20231121/Top3_Autor_Emendas_2017.png
diff --git a/...ntar_20231116/Top3_Autor_Emendas_2018.png → ...ntar_20231121/Top3_Autor_Emendas_2018.png b/...ntar_20231116/Top3_Autor_Emendas_2018.png → ...ntar_20231121/Top3_Autor_Emendas_2018.png
diff --git a/...ntar_20231116/Top3_Autor_Emendas_2019.png → ...ntar_20231121/Top3_Autor_Emendas_2019.png b/...ntar_20231116/Top3_Autor_Emendas_2019.png → ...ntar_20231121/Top3_Autor_Emendas_2019.png
diff --git a/...ntar_20231116/Top3_Autor_Emendas_2020.png → ...ntar_20231121/Top3_Autor_Emendas_2020.png b/...ntar_20231116/Top3_Autor_Emendas_2020.png → ...ntar_20231121/Top3_Autor_Emendas_2020.png
diff --git a/...ntar_20231116/Top3_Autor_Emendas_2021.png → ...ntar_20231121/Top3_Autor_Emendas_2021.png b/...ntar_20231116/Top3_Autor_Emendas_2021.png → ...ntar_20231121/Top3_Autor_Emendas_2021.png
diff --git a/...ntar_20231116/Top3_Autor_Emendas_2022.png → ...ntar_20231121/Top3_Autor_Emendas_2022.png b/...ntar_20231116/Top3_Autor_Emendas_2022.png → ...ntar_20231121/Top3_Autor_Emendas_2022.png
diff --git a/...ntar_20231116/Top3_Autor_Emendas_2023.png → ...ntar_20231121/Top3_Autor_Emendas_2023.png b/...ntar_20231116/Top3_Autor_Emendas_2023.png → ...ntar_20231121/Top3_Autor_Emendas_2023.png
diff --git a/Log_20231103.log b/Log_20231103.log
diff --git a/Log_20231121.log b/Log_20231121.log
diff --git a/teste.ipynb b/teste.ipynb
@@ -2,11 +2,12 @@
  "cells": [
   {
    "cell_type": "code",
-   "execution_count": 85,
+   "execution_count": 1,
    "metadata": {},
    "outputs": [],
    "source": [
     "# Importações\n",
+    "import boto3\n",
     "import pandas as pd\n",
     "import numpy as np\n",
     "import requests as rq\n",
@@ -15,12 +16,13 @@
     "import io\n",
     "import os\n",
     "import matplotlib.pyplot as plt\n",
-    "import seaborn as sns"
+    "import seaborn as sns\n",
+    "from utils.aws import AboutAWS"
    ]
   },
   {
    "cell_type": "code",
-   "execution_count": 86,
+   "execution_count": 2,
    "metadata": {},
    "outputs": [],
    "source": [
@@ -38,6 +40,8 @@
     "\n",
     "data = datetime.datetime.now().strftime(\"%Y-%m-%d %H:%M:%S\")\n",
     "\n",
+    "client = AboutAWS()\n",
+    "\n",
     "name_directory = f\"Emenda_Parlamentar_{data.split(' ')[0].replace('-','')}\"\n",
     "\n",
     "if not os.path.exists(name_directory):\n",
@@ -48,7 +52,7 @@
   },
   {
    "cell_type": "code",
-   "execution_count": 87,
+   "execution_count": 3,
    "metadata": {},
    "outputs": [],
    "source": [
@@ -59,7 +63,7 @@
   },
   {
    "cell_type": "code",
-   "execution_count": 88,
+   "execution_count": 4,
    "metadata": {},
    "outputs": [],
    "source": [
@@ -69,7 +73,7 @@
   },
   {
    "cell_type": "code",
-   "execution_count": 89,
+   "execution_count": 5,
    "metadata": {},
    "outputs": [],
    "source": [
@@ -86,7 +90,7 @@
   },
   {
    "cell_type": "code",
-   "execution_count": 90,
+   "execution_count": 6,
    "metadata": {},
    "outputs": [
     {
@@ -133,7 +137,7 @@
   },
   {
    "cell_type": "code",
-   "execution_count": 91,
+   "execution_count": 7,
    "metadata": {},
    "outputs": [
     {
@@ -267,7 +271,7 @@
   },
   {
    "cell_type": "code",
-   "execution_count": 92,
+   "execution_count": 8,
    "metadata": {},
    "outputs": [
     {
@@ -307,7 +311,7 @@
   },
   {
    "cell_type": "code",
-   "execution_count": 93,
+   "execution_count": 9,
    "metadata": {},
    "outputs": [
     {
@@ -438,7 +442,7 @@
   },
   {
    "cell_type": "code",
-   "execution_count": 94,
+   "execution_count": 10,
    "metadata": {},
    "outputs": [
     {
@@ -567,7 +571,7 @@
   },
   {
    "cell_type": "code",
-   "execution_count": 95,
+   "execution_count": 11,
    "metadata": {},
    "outputs": [
     {
@@ -704,7 +708,7 @@
   },
   {
    "cell_type": "code",
-   "execution_count": 96,
+   "execution_count": 12,
    "metadata": {},
    "outputs": [],
    "source": [
@@ -714,7 +718,7 @@
   },
   {
    "cell_type": "code",
-   "execution_count": 97,
+   "execution_count": 13,
    "metadata": {},
    "outputs": [
     {
@@ -751,6 +755,20 @@
     "plt.savefig(f\"{name_directory}/Soma_Valor_Empenhado_e_Valor_Incristo_por_Ano.png\")\n",
     "plt.show()"
    ]
+  },
+  {
+   "cell_type": "code",
+   "execution_count": 14,
+   "metadata": {},
+   "outputs": [],
+   "source": [
+    "# Inserindo arquivos Bucket S3\n",
+    "\n",
+    "s3 = client.createClient('s3')\n",
+    "for arquivos in os.listdir(name_directory):\n",
+    "    localfile = f\"{name_directory}/{arquivos}\"\n",
+    "    client.uploadFile(s3, localfile, 'engdadostest', localfile)"
+   ]
   }
  ],
  "metadata": {

diff --git a/utils/__pycache__/aws.cpython-311.pyc b/utils/__pycache__/aws.cpython-311.pyc
diff --git a/utils/__pycache__/logger_config.cpython-311.pyc b/utils/__pycache__/logger_config.cpython-311.pyc
diff --git a/utils/__pycache__/tools.cpython-311.pyc b/utils/__pycache__/tools.cpython-311.pyc