Skip to content
New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

Sign up for GitHub

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

[dbt]Adicionar ultimas atualizaçoes 2024 br_tse_eleicoes #641

Merged
merged 1 commit into from
Dec 17, 2024
Merged

[dbt]Adicionar ultimas atualizaçoes 2024 br_tse_eleicoes #641

Show file tree
Hide file tree
Changes from all commits
Commits
Show all changes
1 commit
Select commit
File filter

Filter by extension

Filter by extension
Conversations
Failed to load comments.
Loading
Jump to
Jump to file
Failed to load files.
Loading
Diff view
Diff view
12 changes: 4 additions & 8 deletions models/br_tse_eleicoes/br_tse_eleicoes__detalhes_votacao_secao.sql
View file
Open in desktop
Original file line number Diff line number Diff line change
@@ -1,16 +1,12 @@
{{
config(
schema='br_tse_eleicoes',
alias = 'detalhes_votacao_secao',
materialized='table',
schema="br_tse_eleicoes",
alias="detalhes_votacao_secao",
materialized="table",
partition_by={
"field": "ano",
"data_type": "int64",
"range": {
"start": 1994,
"end": 2024,
"interval": 2
}
"range": {"start": 1994, "end": 2024, "interval": 2},
},
cluster_by=["sigla_uf"],
)
Expand Down
15 changes: 6 additions & 9 deletions models/br_tse_eleicoes/br_tse_eleicoes__partidos.sql
View file
Open in desktop
Original file line number Diff line number Diff line change
@@ -1,25 +1,22 @@
{{
config(
schema='br_tse_eleicoes',
alias = 'partidos',
materialized='table',
schema="br_tse_eleicoes",
alias="partidos",
materialized="table",
partition_by={
"field": "ano",
"data_type": "int64",
"range": {
"start": 1990,
"end": 2024,
"interval": 2
}
"range": {"start": 1990, "end": 2024, "interval": 2},
},
cluster_by=["sigla_uf"],
)
}}

select
safe_cast(ano as int64) ano,
safe_cast(turno as int64) turno,
safe_cast(id_eleicao as string) id_eleicao,
safe_cast(tipo_eleicao as string) tipo_eleicao,
safe_cast(data_eleicao as string) data_eleicao,
safe_cast(sigla_uf as string) sigla_uf,
safe_cast(id_municipio as string) id_municipio,
safe_cast(id_municipio_tse as string) id_municipio_tse,
Expand Down
13 changes: 4 additions & 9 deletions models/br_tse_eleicoes/br_tse_eleicoes__perfil_eleitorado_secao.sql
View file
Open in desktop
Original file line number Diff line number Diff line change
@@ -1,21 +1,16 @@
{{
config(
schema='br_tse_eleicoes',
alias = 'perfil_eleitorado_secao',
materialized='table',
schema="br_tse_eleicoes",
alias="perfil_eleitorado_secao",
materialized="table",
partition_by={
"field": "ano",
"data_type": "int64",
"range": {
"start": 2008,
"end": 2024,
"interval": 2
}
"range": {"start": 2008, "end": 2024, "interval": 2},
},
cluster_by=["sigla_uf"],
)
}}

select
safe_cast(ano as int64) ano,
safe_cast(sigla_uf as string) sigla_uf,
Expand Down
15 changes: 6 additions & 9 deletions models/br_tse_eleicoes/br_tse_eleicoes__vagas.sql
View file
Open in desktop
Original file line number Diff line number Diff line change
@@ -1,24 +1,21 @@
{{
config(
schema='br_tse_eleicoes',
alias = 'vagas',
materialized='table',
schema="br_tse_eleicoes",
alias="vagas",
materialized="table",
partition_by={
"field": "ano",
"data_type": "int64",
"range": {
"start": 1994,
"end": 2024,
"interval": 2
}
"range": {"start": 1994, "end": 2024, "interval": 2},
},
cluster_by=["sigla_uf"],
)
}}

select
safe_cast(ano as int64) ano,
safe_cast(id_eleicao as string) id_eleicao,
safe_cast(tipo_eleicao as string) tipo_eleicao,
safe_cast(data_eleicao as date) data_eleicao,
safe_cast(sigla_uf as string) sigla_uf,
safe_cast(id_municipio as string) id_municipio,
safe_cast(id_municipio_tse as string) id_municipio_tse,
Expand Down
129 changes: 112 additions & 17 deletions models/br_tse_eleicoes/schema.yml
View file
Open in desktop
Original file line number Diff line number Diff line change
Expand Up @@ -525,12 +525,25 @@ models:
description: Número de comparecimentos
- name: data_eleicao
description: Data da eleição
tests:
- relationships:
to: ref('br_bd_diretorios_data_tempo__data')
field: data.data
- name: id_eleicao
description: ID Eleição
- name: id_municipio
description: ID Município - IBGE 7 Dígitos
tests:
- relationships:
to: ref('br_bd_diretorios_brasil__municipio')
field: id_municipio
- name: id_municipio_tse
description: ID Município - TSE
tests:
- custom_relationships:
to: ref('br_bd_diretorios_brasil__municipio')
field: id_municipio_tse
ignore_values: ['73709']
- name: proporcao_comparecimento
description: Proporção de comparecimento
- name: proporcao_votos_brancos
Expand All @@ -545,6 +558,11 @@ models:
description: Seção eleitoral
- name: sigla_uf
description: Sigla da unidade da federação
tests:
- custom_relationships:
to: ref('br_bd_diretorios_brasil__uf')
field: sigla
ignore_values: [ZZ]
- name: tipo_eleicao
description: Tipo da eleição
- name: turno
Expand Down Expand Up @@ -576,7 +594,7 @@ models:
- cargo
- numero
- not_null_proportion_multiple_columns:
at_least: 0.95
at_least: 0.03
columns:
- name: ano
description: Ano
Expand All @@ -596,8 +614,17 @@ models:
description: ID Eleição
- name: id_municipio
description: ID Município - IBGE 7 Dígitos
tests:
- relationships:
to: ref('br_bd_diretorios_brasil__municipio')
field: id_municipio
- name: id_municipio_tse
description: ID Município - TSE
tests:
- custom_relationships:
to: ref('br_bd_diretorios_brasil__municipio')
field: id_municipio_tse
ignore_values: ['73709']
- name: nome
description: Nome
- name: nome_coligacao
Expand All @@ -616,6 +643,11 @@ models:
description: Sigla da federação
- name: sigla_uf
description: Sigla da unidade da federação
tests:
- custom_relationships:
to: ref('br_bd_diretorios_brasil__uf')
field: sigla
ignore_values: [ZZ]
- name: situacao_legenda
description: Situação da legenda
- name: tipo_agremiacao
Expand All @@ -628,7 +660,7 @@ models:
description: Perfil eleitorado a nível de local de votação.
tests:
- not_null_proportion_multiple_columns:
at_least: 0.95
at_least: 0.60
columns:
- name: ano
description: Ano
Expand All @@ -646,8 +678,17 @@ models:
description: Endereço
- name: id_municipio
description: ID Município - IBGE 7 Dígitos
tests:
- relationships:
to: ref('br_bd_diretorios_brasil__municipio')
field: id_municipio
- name: id_municipio_tse
description: ID Município - TSE
tests:
- custom_relationships:
to: ref('br_bd_diretorios_brasil__municipio')
field: id_municipio_tse
ignore_values: ['73709']
- name: latitude
description: Latitude
- name: longitude
Expand All @@ -660,6 +701,11 @@ models:
description: Seção eleitoral
- name: sigla_uf
description: Sigla da unidade da federação
tests:
- custom_relationships:
to: ref('br_bd_diretorios_brasil__uf')
field: sigla
ignore_values: [ZZ]
- name: situacao
description: Situação
- name: situacao_localidade
Expand All @@ -686,14 +732,19 @@ models:
- dbt_utils.unique_combination_of_columns:
combination_of_columns:
- ano
- sigla_uf
- id_municipio_tse
- situacao_biometria
- zona
- estado_civil
- genero
- estado_civil
- grupo_idade
- instrucao
- eleitores
- eleitores_biometria
- eleitores_deficiencia
- not_null_proportion_multiple_columns:
at_least: 0.95
at_least: 0.75
columns:
- name: ano
description: Ano
Expand All @@ -715,31 +766,35 @@ models:
description: Grupo de idade
- name: id_municipio
description: ID Município - IBGE 7 Dígitos
tests:
- relationships:
to: ref('br_bd_diretorios_brasil__municipio')
field: id_municipio
- name: id_municipio_tse
description: ID Município - TSE
tests:
- custom_relationships:
to: ref('br_bd_diretorios_brasil__municipio')
field: id_municipio_tse
ignore_values: ['73709']
- name: instrucao
description: Instrução
- name: sigla_uf
description: Sigla da unidade da federação
tests:
- custom_relationships:
to: ref('br_bd_diretorios_brasil__uf')
field: sigla
ignore_values: [ZZ]
- name: situacao_biometria
description: Situação da biometria
- name: zona
description: Zona eleitoral
- name: br_tse_eleicoes__perfil_eleitorado_secao
description: Perfil eleitorado a nível de seção eleitoral.
tests:
- dbt_utils.unique_combination_of_columns:
combination_of_columns:
- ano
- id_municipio_tse
- zona
- secao
- estado_civil
- genero
- grupo_idade
- instrucao
- not_null_proportion_multiple_columns:
at_least: 0.95
at_least: 0.60
columns:
- name: ano
description: Ano
Expand All @@ -763,14 +818,28 @@ models:
description: Grudo de idade
- name: id_municipio
description: ID Município - IBGE 7 Dígitos
tests:
- relationships:
to: ref('br_bd_diretorios_brasil__municipio')
field: id_municipio
- name: id_municipio_tse
description: ID Município - TSE
tests:
- custom_relationships:
to: ref('br_bd_diretorios_brasil__municipio')
field: id_municipio_tse
ignore_values: ['73709']
- name: instrucao
description: Instrução
- name: secao
description: Seção eleitoral
- name: sigla_uf
description: Sigla da unidade da federação
tests:
- custom_relationships:
to: ref('br_bd_diretorios_brasil__uf')
field: sigla
ignore_values: [ZZ]
- name: situacao_biometria
description: Situação da biometria
- name: zona
Expand Down Expand Up @@ -1419,8 +1488,17 @@ models:
description: ID Eleição
- name: id_municipio
description: ID Município - IBGE 7 Dígitos
tests:
- relationships:
to: ref('br_bd_diretorios_brasil__municipio')
field: id_municipio
- name: id_municipio_tse
description: ID Município - TSE
tests:
- custom_relationships:
to: ref('br_bd_diretorios_brasil__municipio')
field: id_municipio_tse
ignore_values: ['73709']
- name: numero_candidato
description: Número do candidato
- name: numero_partido
Expand Down Expand Up @@ -1596,8 +1674,17 @@ models:
description: ID Eleição
- name: id_municipio
description: ID Município - IBGE 7 Dígitos
tests:
- relationships:
to: ref('br_bd_diretorios_brasil__municipio')
field: id_municipio
- name: id_municipio_tse
description: ID Município - TSE
tests:
- custom_relationships:
to: ref('br_bd_diretorios_brasil__municipio')
field: id_municipio_tse
ignore_values: ['73709']
- name: numero_partido
description: Número do partido
- name: secao
Expand Down Expand Up @@ -1628,11 +1715,13 @@ models:
combination_of_columns:
- ano
- id_eleicao
- tipo_eleicao
- data_eleicao
- sigla_uf
- id_municipio_tse
- cargo
- not_null_proportion_multiple_columns:
at_least: 0.95
at_least: 0.35
columns:
- name: ano
description: Ano
Expand All @@ -1655,11 +1744,17 @@ models:
- name: id_municipio_tse
description: ID Município - TSE
tests:
- relationships:
- custom_relationships:
to: ref('br_bd_diretorios_brasil__municipio')
field: id_municipio_tse
ignore_values: ['73709']
- name: sigla_uf
description: Sigla da unidade da federação
tests:
- custom_relationships:
to: ref('br_bd_diretorios_brasil__uf')
field: sigla
ignore_values: [ZZ]
- name: tipo_eleicao
description: Tipo da eleição
- name: vagas
Expand Down
Loading