ruido_madrid.Rmd

---
title: "Análisis del ruido en Madrid"
output: 
    html_document: default
    html_notebook: default 
---

Este notebook presenta un análisis del índice de ruido $LA_{eq}^{(i)}$ en la ciudad de Madrid para los años 2015-2019, ambos incluidos, y el año 2020 hasta el mes de mayo. 

(1) En la primera parte se presentan una comparativa de las 31 estaciones presentes en la capital. Observaremos cómo el ruido es estacional en prácticamente todas ellas, las ordenaremos de acuerdo al ruido medio diario que registran y veremos, mediante un gráfico de violín, las desviaciones de todos los registros con respecto a la media diaria para cada una de las estaciones. 

(2) En la segunda parte, compararemos la evolución de la media mensual del índice $LA_{eq}$ para las distintas estaciones, permitiéndonos observar un claro descenso en el año 2020 debido a las medidas de aislamiento establecidas por la crisis de la pandemia COVID-19. Posteriormente, descenderemos a una escala diaria para analizar en detalle el efecto de las distintas etapas del aislamiento sobre el ruido registrado en las estaciones de Madrid. 


i El índice de ruido $LA_{eq}$ es el parámetro acústico aceptado internacionalmente como medida del nivel sonoro continuo equivalente. Este índice representa la contaminación acústica acumulada a lo largo de un periodo de tiempo en el lugar de medición. Puesto que el oído humano es más sensible a las medias frecuencias, se realiza una ponderación de frecuencias, dando menos importancia a las bajas y altas frecuencias frente a las medias, con el fin de establecer una medida del nivel de ruido que soporta el ser humano cercano a la estación de medición. 


Análisis realizado por [Claudia Gutiérrez](https://github.com/ClaudiaGEscribano) y [Diego Duque](https://github.com/ddzumajo)


Los datos han sido obtenido del [Portal de datos abiertos del Ayuntamiento de Madrid](https://datos.madrid.es/portal/site/egob/menuitem.c05c1f754a33a9fbe4b2e4b284f1a5a0/?vgnextoid=2ec892874870b410VgnVCM1000000b205a0aRCRD&vgnextchannel=374512b9ace9f310VgnVCM100000171f5a0aRCRD&vgnextfmt=default).

```{r}
library("dplyr")
library("ggplot2")
library("gridExtra")
library("reshape2")
library("magrittr")
library("lattice")
library("latticeExtra")
library("zoo")
library("viridis")
```

```{r}
Sys.setlocale("LC_TIME", "en_US.UTF-8")
```

```{r}
# Set the minimal set for the graphs
theme_set(theme_minimal() + theme(legend.position = "top"))
```


```{r}

# Load data
df <- read.csv(file = './data/datos_ruido_madrid.csv', header = FALSE, sep = ';', strip.white = TRUE)

# Rename columns
colnames(df) <- c("Station","Year","Month","Day","Period","LAeq","LAS01","LAS10","LAS50","LAS90","LAS99")

# Create column date
df$Date <- as.Date(with(df, paste(Year, Month, Day,sep="-")), "%Y-%m-%d")

# Create column with the name of the months
df$MonthName <- months(df$Date)

# Create column with day of week and month. 
df$DayMonthName <- with(df, paste(weekdays(df$Date), MonthName,sep="-"))

# Delete useless columns
df$LAS01 <- NULL
df$LAS10 <- NULL
df$LAS50 <- NULL
df$LAS90 <- NULL
df$LAS99 <- NULL


head(df)
```

```{r}

# Load stations file
dfs <- read.csv(file = './data/EstacionesMedidaControlAcustico.csv', header = TRUE, sep = ',', strip.white = TRUE, fileEncoding = "ISO-8859-1")

# Delete useless columns
dfs[ ,c('COD_VIA', 'VIA_CLASE','VIA_PAR','VIA_NOMBRE','Dirección','Longitud_gms','Latitud_gms','LATITUD_ED50','LONGITUD_ED50','Alt..m.','Fecha.alta','Coordenada_X_ETRS89','Coordenada_Y_ETRS89','LONGITUD_WGS84','LATITUD_WGS84','X.2','X.3')] <- list(NULL)

# Rename some columns
dfs <- dfs %>% 
  rename(
    Station=Nº,
    StationName = Nombre,
    Long = X, 
    Lat = X.1
    )

head(dfs)

```


```{r}

# Merge dataframes
df <- merge(df, dfs, by = "Station", all.x = TRUE)

# Sort output dataframe
df <- df[order(df$Date),]

head(df)

```

A continuación se muestran los registros del índice $LA_{eq}$ medidos por todas las estaciones a lo largo de los años para los distintos periodos. Se observa que durante las noches (N) el índice es inferior en todas la estaciones. Por otro lado, en algunas estaciones apenas hay distinción en el índice de ruido medido en los periodos D y E (mañana y tarde, respectivamente).

Además, se aprecia con claridad cómo el índice de ruido es estacional (se repite el mismo patrón de año en año), si bien se observan diferencias para el año 2020 debido a las medidas de confinamiento para paliar el efecto de la pandemia COVID-19.

Los picos observados seguramente sean debidos a errores en la medición del ruido. 

```{r, fig.width=5, fig.height=8}
ggplot(df[df$Period != "T", ], aes(x = Date, y = LAeq, group=Period)) +
  geom_line(aes(color=Period), alpha=0.8, lwd = 0.3)  +
  facet_wrap(~ StationName, ncol = 3, scales="free_x") +
  ylim(30,90) +
  labs(title = "Evolución del índice LAeq para los periodos día (D), tarde (E) y noche (N)", y = "LAeq") +
  scale_x_date(date_breaks = "years", date_labels = "%Y")
```

Realizamos la media del índice $LA_{eq}$ en el periodo T a lo largo de los años 2015-2019 (ambos incluidos) para cada una de las estaciones. De esta manera podemos ver cuáles son las estaciones que generalmente son más ruidosas.

```{r}
dfToPlot <-df %>% 
  filter(Year != 2020) %>%
  filter(Period == "T") %>%
  group_by(StationName) %>%
  summarise(mean_LAeq = mean(LAeq))

ggplot(dfToPlot,aes(y=reorder(StationName, mean_LAeq, mean),x=mean_LAeq, color=mean_LAeq)) +
  geom_point(cex=2.5) +
  scale_color_viridis(option = "D") +
  labs(y="Stations", x = "Mean LAeq") +
  theme(legend.position = "right")
```

```{r}
df %>%
  filter(Year != 2020) %>%
    filter(Period == "T") %>%
    group_by(Station) %>%
  ggplot(aes(x=reorder(StationName, LAeq, mean), y=LAeq)) +
  geom_violin(trim=FALSE) +
  geom_boxplot(width=0.2, outlier.shape=NA) +
  labs(color='Station', x='') +
  theme(axis.text.x = element_text(angle = 90))
```


Después de este análisis general nos centramos únicamente en el periodo T. Comenzaremos calculando la media mensual del índice $LA_{eq}$ para todos los años y estaciones. De esta manera nos permitirá analizar grosso modo las diferencias y similitudes entre los años 2014-2020 (ambos incluidos).


```{r}

# Compute the mean of the index by year, month, station and period
meanLAeqByMonthStationAndPeriod <- df %>% 
    group_by(Year,MonthName, StationName, Period) %>% 
    summarise(meanLAeqByMonth = mean(LAeq))

# Merge dataframes
df <- merge(df, meanLAeqByMonthStationAndPeriod, by = c("Year","MonthName", "StationName", "Period"), all.x = TRUE)

head(df)
```


```{r}

# Filter period
 dfPeriodT <- df %>% filter(Period == "T")

# Take only the unique data
dfMeanLAeqByMonth <- distinct(dfPeriodT, Year, MonthName, StationName, meanLAeqByMonth)

# Year as factor in order to facilitate the choice of colors in the plot
dfMeanLAeqByMonth$Year <- factor(dfMeanLAeqByMonth$Year)

```


De la gráfica siguiente se pueden extraer las siguientes conclusiones conclusiones:

1. La curva del ruido promediada mensualmente tiene una estructura similar año tras año para prácticamente todas las estaciones. 

2. Se puede aprecia un ligero descenso en el ruido durante el año 2019 en estaciones como Plaza de España, Manuel Becerra, Embajada. Podría pensarse que el efecto de Madrid Central llegara hasta dichas estaciones si tuviéramos más años (previos y posteriores a Madrid Central). 


3. El año 2020 comenzó de forma similar al resto de años. Sin embargo, a partir de abril, los niveles de ruido descendieron debido a las medidas de confinamiento. 


```{r, fig.width=12, fig.height=12}

ggplot(dfMeanLAeqByMonth, aes(x = ordered(MonthName,levels=month.name), y = meanLAeqByMonth, group=Year)) +
  geom_point(aes(color=Year), size=2)  +
  geom_line(aes(color=Year))  +
  facet_wrap(~ StationName, ncol = 3, scales="free") +
  labs(title = "Comparación del índice LAeq medido en las distintas estaciones a lo largo de los años",
       subtitle = "Se ha realizado la media mensual de los datos recopilados en cada una de las estaciones",
       y = "Monthly mean LAeq", x = 'Month') +
 theme(legend.position="top")
```

Una vez que hemos visto cómo el efecto de la cuarentena debido al coronavirus se refleja en los niveles de ruido, nos centramos únicamente en el periodo de tiempo durante el cual fueron aplicadas las medidas de confinamiento e hibernación de la economía. Para ello estudiaremos los niveles de ruido con un nivel de descripción semanal. 

Para ello crearemos obtendremos los promedios diarios de los índices de los años 2015-2019 teniendo en cuenta las siguientes premisas: 

1. Los promedios se tienen que realizar no por fecha sino por días (i.e. se promedian los días de la semana de un mismo mes). Así pues, tomaremos, por ejemplo, todos los lunes de un mismo mes de los distintos años para realizar el promedio y obtener un lunes "típico" del mes en cuestión. 

2. Construiremos un mes "típico" para compararlo con el mes correspondiente de 2020. 

3. El efecto de Madrid central observado en la gráfica anterior no va a ser tenido en cuenta ya que vamos a promediar sobre todos los años previos al de la crisis del coronavirus. 

```{r}
head(df)
```

Calculamos la media por día del mes para todos los años comprendidos entre 2015 y 2019 (ambos incluidos).

```{r}

 df_2015_2019<- df %>% filter(Year!=2020)

 meanLAeqByDayMonthStationAndPeriod_2015_2019 <- df_2015_2019 %>%
  group_by(DayMonthName, StationName, Period) %>% 
  summarise(meanLAeqByDayMonth_2015_2019 = mean(LAeq))

head(meanLAeqByDayMonthStationAndPeriod_2015_2019)
```

Creamos el dataframe para el año 2020 y añadimos el resultado de la media del índice LAeq promediada por tipo de día del mes. Cortamos el dataframe para quedarnos únicamente con los días comprendidos entre los meses marzo-mayo, ambos incluidos. Además, solo nos interesa el Periodo 'T'. 

```{r}

df2020 <- df %>% filter(Year==2020) %>% filter(Period=='T')

dfCovidEffect <- merge(df2020, meanLAeqByDayMonthStationAndPeriod_2015_2019, by= c("DayMonthName", "StationName", "Period"), x.ALL = True)

dfCovidEffect <- dfCovidEffect %>% filter(Month>2, Month<6) 

dfCovidEffect <- dfCovidEffect[, c('Date', 'StationName','LAeq', 'meanLAeqByDayMonth_2015_2019')]

colnames(dfCovidEffect) <- c("Date","StationName","LAeq_2020","LAeq_2015_2019")


head(dfCovidEffect)

```

```{r}

# Melt the dataframe in order to obtain anot
dfCovidEffectMelted <- reshape2::melt(dfCovidEffect, id.var=c('Date', 'StationName'))

head(dfCovidEffectMelted)
```

```{r}

# Renamce third column name
colnames(dfCovidEffectMelted)[3] <- "LAeq"

```

Como se aprecia en la gráfica siguiente, el efecto del confinamiento ha tenido como resultado un claro descenso de los niveles de ruido en todas las estaciones de Madrid. En verde está representada la región correspondiente al periodo de distanciamiento social (teletrabajo para la mayoría de los sectores, prohibición de salir de casa si no era a comprar), mientras que la roja, además del distanciamiento social, se hibernó la economía durante dos semanas. Esta última restricción hizo que la movilidad en Madrid se redujera drásticamente, provocando, a su vez, un descenso en los niveles de ruido registrados en todas las estaciones. 


```{r, fig.width=12, fig.height=12}

ggplot(dfCovidEffectMelted, aes(x = Date, y = value, col=LAeq)) +
  geom_point(color='black',size=1)  +
  geom_line()  +
  geom_rect(aes(xmin = as.Date("2020-03-16"), xmax = as.Date("2020-03-30"),ymin = -Inf, ymax = Inf),
                   fill = "green", alpha = 0.002) +
  geom_rect(aes(xmin = as.Date("2020-03-30"), xmax = as.Date("2020-04-13"),ymin = -Inf, ymax = Inf),
                   fill = "red", alpha = 0.002) +
  geom_rect(aes(xmin = as.Date("2020-04-13"), xmax = as.Date("2020-04-26"),ymin = -Inf, ymax = Inf),
                   fill = "green", alpha = 0.002) +
  facet_wrap(~ StationName, ncol = 3, scales="free") +
  labs(title = "Comparación del índice de ruido LAeq diario para 2020 y la media de los años 2015-2019",
       subtitle = "(La media de los años 2015-2019 ha sido calculada para obtener una semana 'tipo')", y = "LAeq") +
 theme(legend.position="top")
```