Skip to content

Data processing tool for MITMA covid data

Notifications You must be signed in to change notification settings

IFCA-Advanced-Computing/mitma-covid

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

10 Commits
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 

Repository files navigation

mitma-covid

Herramienta para procesar los datos del Estudio de movilidad con Big Data elaborado por el Ministerio de Transportes (MITMA) para el estudio de las medidas contra el COVID-19.

Se pueden visualizar los datos en este mapa.

map

Para generar los datos desde cero usar:

python src/data.py

Esto descargará los datos desde la primera fecha del estudio (21 Febrero 2020) hasta día de hoy y los procesará. Si ya tiene los datos descargados y procesados de una vez anterior y solo quiere actualizarlos con los datos recientes, puede usar:

python src/data.py --update

Esto mirará cuál es el último día descargado y bajará/procesará todos los días posteriores.

Notas metodológicas:

El estudio tiene un nota metodológica con indicaciones generales, pero añadiremos aquí algunos detalles relevantes. Puede ser también útil consultar la nota metodológica del estudio anterior en el que se basa el estudio actual.

Los archivos de maestria1 tienen las siguientes columnas:

  • fecha: día considerado
  • origen / destino: códigos de los municipios para el estudio. Si el código viene sucedido por un _AM quieres decir que pertenece a una agrupación de municipios realizada por el MITMA para aumentar el tamaño de la muestra. Los municipios que componen estas agrupaciones son municipios que pertenecen siempre a la misma provincia. El mapeo de municipios del INE a agrupaciones del MITMA se puede realizar usando el archivo relaciones_municipio_mitma.csv. Los códigos se componen de 5 dígitos donde los dos primeros son el código de la provincia ({01-52}) y los tres siguientes el código del municipio. Con el archivo 20_cod_prov.xls (descargado del INE) se pueden obtener los nombres de las provincias a partir de los códigos.
  • periodo: periodo horario {0-23}
  • distancia: distancia de los viajes en rangos con límites 500m, 2km, 5km, 10km, 50km, 100km {'0005-002', '002-005', '005-010', '010-050', '050-100', '100+'}
  • viajes: numero de viajes realizados
  • viajes_km: numero de km realizados

Errores en los datos:

  • los datos originales no contienen el archivo correspondiente al domingo 12 de Julio para maestra1 y municipio. En los archivos originales se pone el link erróneo al fichero de maestra1 y distrito. Como apaño hemos duplicado a mano el archivo del 05 de Julio (domingo anterior) y reemplazado las fechas por el 12 de Julio (ver misc.py). También se puede elegir procesar el dataset obviando esa fecha.

Diferencias con el estudio de INE:

Las principales diferencias con los Estudios de movilidad a partir de la telefonía móvil del INE (que también hemos procesado con el paquete dacot) son:

  • este estudio tiene mayor sensibilidad. Se contabiliza cualquier movimiento de más de 500m mientras que en el del INE había que salir de tu area de movilidad.
  • este estudio agrega datos en municipios (o conjuntos de municipios cuando la muestra es baja) mientras que el estudio del INE agrega datos en areas de movilidad.
  • este estudio analiza datos del principal operador de telefonía del país (13 millones de líneas) frente al el INE que usa los 3 principales operadores. Sin embargo en este estudio el tamaño de la muestra es suficiente para hacer extrapolaciones fiables.
  • este estudio es más homogéneo en el tiempo. Tienes datos diarios desde Febrero 2020 hasta la actualidad. Mientras que el estudio del INE tiene datos diarios desde Febrero 2020 a Junio 2020 (em2) y salteados desde Junio 2020 hasta Diciembre 2020 (em3).

About

Data processing tool for MITMA covid data

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published