Clase 13

class: title-slide, center, middle
background-image: url(https://images.unsplash.com/photo-1485254767195-60704c46702e?ixid=MnwxMjA3fDB8MHxwaG90by1wYWdlfHx8fGVufDB8fHx8&ixlib=rb-1.2.1&auto=format&fit=crop&w=1051&q=80)
background-size: cover

# <span style=" font-weight: bold;    color: white !important;border-radius: 4px; padding-right: 4px; padding-left: 4px; background-color: #1d3557 !important;font-size: 60px;" >Reproducibilidad</span>

<br>
<h2><span style=" font-weight: bold;    color: white !important;border-radius: 4px; padding-right: 4px; padding-left: 4px; background-color: #264653 !important;" >Miriam Lerma</span></h2>

---

# Intro
- [Reproducibilidad](#repro)
- [Publicaciones reproducibles](#pub)
- [Manuscritos reproducibles](#MS)

## Ustedes
- Quieren crear proyectos reproducibles
- Mejorar su seguimiento de proyectos
- Mejorar el ciclo de trabajo en su laboratorio

## Responder en el chat 💬
- Han querido replicar análisis de algún articulo ya publicado  y se preguntaron como lo hicieron?
- Les ha pasado que a seguir los pasos de alguna tesis o articulo se dieron cuenta que no todos los métodos estaban descritos?

---

## Créditos & Recursos

Lecturas
- [<svg aria-hidden="true" role="img" viewBox="0 0 576 512" style="height:1em;width:1.12em;vertical-align:-0.125em;margin-left:auto;margin-right:auto;font-size:inherit;fill:#74c69d;overflow:visible;position:relative;"><path d="M542.22 32.05c-54.8 3.11-163.72 14.43-230.96 55.59-4.64 2.84-7.27 7.89-7.27 13.17v363.87c0 11.55 12.63 18.85 23.28 13.49 69.18-34.82 169.23-44.32 218.7-46.92 16.89-.89 30.02-14.43 30.02-30.66V62.75c.01-17.71-15.35-31.74-33.77-30.7zM264.73 87.64C197.5 46.48 88.58 35.17 33.78 32.05 15.36 31.01 0 45.04 0 62.75V400.6c0 16.24 13.13 29.78 30.02 30.66 49.49 2.6 149.59 12.11 218.77 46.95 10.62 5.35 23.21-1.94 23.21-13.46V100.63c0-5.29-2.62-10.14-7.27-12.99z"/></svg> The turing way](https://the-turing-way.netlify.app/welcome)<br>
- [<svg aria-hidden="true" role="img" viewBox="0 0 576 512" style="height:1em;width:1.12em;vertical-align:-0.125em;margin-left:auto;margin-right:auto;font-size:inherit;fill:#74c69d;overflow:visible;position:relative;"><path d="M542.22 32.05c-54.8 3.11-163.72 14.43-230.96 55.59-4.64 2.84-7.27 7.89-7.27 13.17v363.87c0 11.55 12.63 18.85 23.28 13.49 69.18-34.82 169.23-44.32 218.7-46.92 16.89-.89 30.02-14.43 30.02-30.66V62.75c.01-17.71-15.35-31.74-33.77-30.7zM264.73 87.64C197.5 46.48 88.58 35.17 33.78 32.05 15.36 31.01 0 45.04 0 62.75V400.6c0 16.24 13.13 29.78 30.02 30.66 49.49 2.6 149.59 12.11 218.77 46.95 10.62 5.35 23.21-1.94 23.21-13.46V100.63c0-5.29-2.62-10.14-7.27-12.99z"/></svg> Articulos reproducibles](https://frodriguezsanchez.net/publication/rodriguez-sanchez-ecosistemas-2016/)<br>

Videos en español
- Daniela Ballari
[<svg aria-hidden="true" role="img" viewBox="0 0 576 512" style="height:1em;width:1.12em;vertical-align:-0.125em;margin-left:auto;margin-right:auto;font-size:inherit;fill:#74c69d;overflow:visible;position:relative;"><path d="M549.655 124.083c-6.281-23.65-24.787-42.276-48.284-48.597C458.781 64 288 64 288 64S117.22 64 74.629 75.486c-23.497 6.322-42.003 24.947-48.284 48.597-11.412 42.867-11.412 132.305-11.412 132.305s0 89.438 11.412 132.305c6.281 23.65 24.787 41.5 48.284 47.821C117.22 448 288 448 288 448s170.78 0 213.371-11.486c23.497-6.321 42.003-24.171 48.284-47.821 11.412-42.867 11.412-132.305 11.412-132.305s0-89.438-11.412-132.305zm-317.51 213.508V175.185l142.739 81.205-142.739 81.201z"/></svg> ReproHack](https://www.youtube.com/watch?v=Hvrb2b7v93w&t=732s)<br>
- Francisco Rodríguez-Sánchez
[<svg aria-hidden="true" role="img" viewBox="0 0 576 512" style="height:1em;width:1.12em;vertical-align:-0.125em;margin-left:auto;margin-right:auto;font-size:inherit;fill:#74c69d;overflow:visible;position:relative;"><path d="M549.655 124.083c-6.281-23.65-24.787-42.276-48.284-48.597C458.781 64 288 64 288 64S117.22 64 74.629 75.486c-23.497 6.322-42.003 24.947-48.284 48.597-11.412 42.867-11.412 132.305-11.412 132.305s0 89.438 11.412 132.305c6.281 23.65 24.787 41.5 48.284 47.821C117.22 448 288 448 288 448s170.78 0 213.371-11.486c23.497-6.321 42.003-24.171 48.284-47.821 11.412-42.867 11.412-132.305 11.412-132.305s0-89.438-11.412-132.305zm-317.51 213.508V175.185l142.739 81.205-142.739 81.201z"/></svg> ReproHack](https://www.youtube.com/watch?v=TKhV3w467RI)<br>

En ingles  
- [<svg aria-hidden="true" role="img" viewBox="0 0 576 512" style="height:1em;width:1.12em;vertical-align:-0.125em;margin-left:auto;margin-right:auto;font-size:inherit;fill:#74c69d;overflow:visible;position:relative;"><path d="M549.655 124.083c-6.281-23.65-24.787-42.276-48.284-48.597C458.781 64 288 64 288 64S117.22 64 74.629 75.486c-23.497 6.322-42.003 24.947-48.284 48.597-11.412 42.867-11.412 132.305-11.412 132.305s0 89.438 11.412 132.305c6.281 23.65 24.787 41.5 48.284 47.821C117.22 448 288 448 288 448s170.78 0 213.371-11.486c23.497-6.321 42.003-24.171 48.284-47.821 11.412-42.867 11.412-132.305 11.412-132.305s0-89.438-11.412-132.305zm-317.51 213.508V175.185l142.739 81.205-142.739 81.201z"/></svg> RLadiesJohannesburg](https://www.youtube.com/watch?v=tSrf4n7DFYI)  
- [<svg aria-hidden="true" role="img" viewBox="0 0 576 512" style="height:1em;width:1.12em;vertical-align:-0.125em;margin-left:auto;margin-right:auto;font-size:inherit;fill:#74c69d;overflow:visible;position:relative;"><path d="M542.22 32.05c-54.8 3.11-163.72 14.43-230.96 55.59-4.64 2.84-7.27 7.89-7.27 13.17v363.87c0 11.55 12.63 18.85 23.28 13.49 69.18-34.82 169.23-44.32 218.7-46.92 16.89-.89 30.02-14.43 30.02-30.66V62.75c.01-17.71-15.35-31.74-33.77-30.7zM264.73 87.64C197.5 46.48 88.58 35.17 33.78 32.05 15.36 31.01 0 45.04 0 62.75V400.6c0 16.24 13.13 29.78 30.02 30.66 49.49 2.6 149.59 12.11 218.77 46.95 10.62 5.35 23.21-1.94 23.21-13.46V100.63c0-5.29-2.62-10.14-7.27-12.99z"/></svg> Matt Dray](https://www.rostrum.blog/2020/01/22/repro-three-things/)
- [<svg aria-hidden="true" role="img" viewBox="0 0 576 512" style="height:1em;width:1.12em;vertical-align:-0.125em;margin-left:auto;margin-right:auto;font-size:inherit;fill:#74c69d;overflow:visible;position:relative;"><path d="M542.22 32.05c-54.8 3.11-163.72 14.43-230.96 55.59-4.64 2.84-7.27 7.89-7.27 13.17v363.87c0 11.55 12.63 18.85 23.28 13.49 69.18-34.82 169.23-44.32 218.7-46.92 16.89-.89 30.02-14.43 30.02-30.66V62.75c.01-17.71-15.35-31.74-33.77-30.7zM264.73 87.64C197.5 46.48 88.58 35.17 33.78 32.05 15.36 31.01 0 45.04 0 62.75V400.6c0 16.24 13.13 29.78 30.02 30.66 49.49 2.6 149.59 12.11 218.77 46.95 10.62 5.35 23.21-1.94 23.21-13.46V100.63c0-5.29-2.62-10.14-7.27-12.99z"/></svg> Experimenting with reproducibility](https://academic.oup.com/gigascience/article/7/7/giy077/5046609)
- [<svg aria-hidden="true" role="img" viewBox="0 0 576 512" style="height:1em;width:1.12em;vertical-align:-0.125em;margin-left:auto;margin-right:auto;font-size:inherit;fill:#74c69d;overflow:visible;position:relative;"><path d="M542.22 32.05c-54.8 3.11-163.72 14.43-230.96 55.59-4.64 2.84-7.27 7.89-7.27 13.17v363.87c0 11.55 12.63 18.85 23.28 13.49 69.18-34.82 169.23-44.32 218.7-46.92 16.89-.89 30.02-14.43 30.02-30.66V62.75c.01-17.71-15.35-31.74-33.77-30.7zM264.73 87.64C197.5 46.48 88.58 35.17 33.78 32.05 15.36 31.01 0 45.04 0 62.75V400.6c0 16.24 13.13 29.78 30.02 30.66 49.49 2.6 149.59 12.11 218.77 46.95 10.62 5.35 23.21-1.94 23.21-13.46V100.63c0-5.29-2.62-10.14-7.27-12.99z"/></svg> r3 course](https://r-cubed.rostools.org/lecture-slides.html#collaboration-and-teamwork)

Imagenes
- Portada
[Unsplash by Joel Filip](https://unsplash.com/@joelfilip)  
- Imagenes de The turing test creadas por Scriberia para la comunidad The Turing Way y se usa bajo una licencia CC-BY.

---

# 1. Reproducibilidad

---
 
## 1.1. Reproducibilidad

**Reproducibilidad computacional** es que otra persona pueda ejecutar el código que hemos creado y tenga los mismos resultados

Esto incluye a:
- Científicos de otras instituciones
- Colaboradores
- Nosotros mismos

---

## 1.2. Reproducibilidad

La reproducibilidad tiene varias dimensiones, de acuerdo a 
- si usamos los mismos datos o datos diferentes,
- si usamos el mismo codigo o lo adaptamos.

- **Reproducible**: mismos datos deben dar el mismo resultado.
- **Replicable**: mismos análisis pero con diferentes datos dan resultados cualitativamente similares.
- **Robusto**: los mismos datos pero diferente análisis, dan resultados similares.
- **Generalizable**: diferentes datos y análisis para entender que los resultados no son dependientes de ese set de datos en particular y de ese análisis en particular.

Fuente: [The turing way](https://the-turing-way.netlify.app/_images/ReproducibleMatrix.jpg)

---

## 1.3. Reproducibilidad

Recordemos que: <br>
El método científico esta sustentado en dos pilares: **reproducibilidad** y refutabilidad <br>

La reproducibilidad implica que se pueda repetir el experimento, en cualquier lugar y persona para verificar que los resultados obtenidos sean verídicos.<br>

**Desafortunadamente**, por muchos años se ha perdido el acceso a datos y métodos<br>
**Afortunadamente**, estamos en una época de cambio de paradigmas<br>

---

## 1.4. Credibilidad

Al hacer nuestro trabajo reproducible.<br>
Podemos: 
- Evitar desastres al permitir detección de errores
- Escribir mas fluido
- Asegurar la continuidad
- Mejorar la credibilidad/transparencia

Por ejemplo, evitando casos como: [revistas retiran articulos sobre COVID debido a falta de integridad en los datos](https://www.sciencemag.org/news/2020/06/two-elite-medical-journals-retract-coronavirus-papers-over-data-integrity-questions)

---

## 1.5. Recomendaciones

Para crear un proyecto reproducible hay que: 
- Agregar comentarios y escribir código en forma ordenada. <br> Ver [programacion literaria, un concepto de 1984](http://www.literateprogramming.com/knuthweb.pdf)
- Usar código legible
- Usar directorios relativos
- Usar control de versiones <br>
Esto evita redundancias: no intentes lo mismo muchas veces

---

## 1.6. Supervisores

Como **supervisor** al tener proyectos reproducibles, se puede:
- Evaluar como se procesaron los datos
- Detectar errores
- Facilitar la escritura y edición
- Facilitar el ciclo de investigación

Tener un flujo de trabajo reproducible en un laboratorio ahorra tiempo para los investigadores, estudiantes y colaboradores. Aunque hay que invertir tiempo en generar proyectos reproducibles, a la larga esto mejora la productividad

---

## 1.7. Tesistas

Como **tesista** entrar a un laboratorio que tenga proyectos reproducibles, permite que:
- Inicien con análisis base
- Complementen, actualicen y mejoren el código
- No se pierdan en el universo de analisis y paquetes
- Tengan más confianza en los resultados

Trabajar en un laboratorio con flujos de trabajo reproducible, ahorra tiempo y permite invertir esfuerzos en mejorar el código

---
name: pub
class: title-slide, center, middle, inverse

# 2. Publicaciones reproducibles

---

## 2.1. Publicaciones

Por lo que la mayoría concluyó que existe una **crisis en la reproducibilidad**

- [<svg aria-hidden="true" role="img" viewBox="0 0 576 512" style="height:1em;width:1.12em;vertical-align:-0.125em;margin-left:auto;margin-right:auto;font-size:inherit;fill:red;overflow:visible;position:relative;"><path d="M549.655 124.083c-6.281-23.65-24.787-42.276-48.284-48.597C458.781 64 288 64 288 64S117.22 64 74.629 75.486c-23.497 6.322-42.003 24.947-48.284 48.597-11.412 42.867-11.412 132.305-11.412 132.305s0 89.438 11.412 132.305c6.281 23.65 24.787 41.5 48.284 47.821C117.22 448 288 448 288 448s170.78 0 213.371-11.486c23.497-6.321 42.003-24.171 48.284-47.821 11.412-42.867 11.412-132.305 11.412-132.305s0-89.438-11.412-132.305zm-317.51 213.508V175.185l142.739 81.205-142.739 81.201z"/></svg> Ted: crisis reproducibilidad](https://www.youtube.com/watch?v=FpCrY7x5nEE)
]

.pull-right[
<img src="https://www.nature.com/news/polopoly_fs/7.36716.1469695923!/image/reproducibility-graphic-online1.jpeg_gen/derivatives/landscape_630/reproducibility-graphic-online1.jpeg" height="300" style="display: block; margin: auto;" />
]
.right[Fuente: [nature](https://www.nature.com/news/1-500-scientists-lift-the-lid-on-reproducibility-1.19970)]

---

## 2.2. Disciplinas

**Afortunadamente** existen algunas iniciativas que apoyan y consultan para mejorar la reproducibilidad
- [<svg aria-hidden="true" role="img" viewBox="0 0 576 512" style="height:1em;width:1.12em;vertical-align:-0.125em;margin-left:auto;margin-right:auto;font-size:inherit;fill:red;overflow:visible;position:relative;"><path d="M542.22 32.05c-54.8 3.11-163.72 14.43-230.96 55.59-4.64 2.84-7.27 7.89-7.27 13.17v363.87c0 11.55 12.63 18.85 23.28 13.49 69.18-34.82 169.23-44.32 218.7-46.92 16.89-.89 30.02-14.43 30.02-30.66V62.75c.01-17.71-15.35-31.74-33.77-30.7zM264.73 87.64C197.5 46.48 88.58 35.17 33.78 32.05 15.36 31.01 0 45.04 0 62.75V400.6c0 16.24 13.13 29.78 30.02 30.66 49.49 2.6 149.59 12.11 218.77 46.95 10.62 5.35 23.21-1.94 23.21-13.46V100.63c0-5.29-2.62-10.14-7.27-12.99z"/></svg> ReproHack](https://reprohack.github.io/reprohack-hq/)<br>
- [<svg aria-hidden="true" role="img" viewBox="0 0 576 512" style="height:1em;width:1.12em;vertical-align:-0.125em;margin-left:auto;margin-right:auto;font-size:inherit;fill:red;overflow:visible;position:relative;"><path d="M542.22 32.05c-54.8 3.11-163.72 14.43-230.96 55.59-4.64 2.84-7.27 7.89-7.27 13.17v363.87c0 11.55 12.63 18.85 23.28 13.49 69.18-34.82 169.23-44.32 218.7-46.92 16.89-.89 30.02-14.43 30.02-30.66V62.75c.01-17.71-15.35-31.74-33.77-30.7zM264.73 87.64C197.5 46.48 88.58 35.17 33.78 32.05 15.36 31.01 0 45.04 0 62.75V400.6c0 16.24 13.13 29.78 30.02 30.66 49.49 2.6 149.59 12.11 218.77 46.95 10.62 5.35 23.21-1.94 23.21-13.46V100.63c0-5.29-2.62-10.14-7.27-12.99z"/></svg> rOpenScience](https://ropensci.org/)<br>
]

.pull-right[
<img src="https://www.nature.com/news/polopoly_fs/7.36717.1464174452!/image/reproducibility-graphic-online2.jpg_gen/derivatives/landscape_630/reproducibility-graphic-online2.jpg" height="400" style="display: block; margin: auto;" />

.center[Fuente: [nature](https://www.nature.com/news/1-500-scientists-lift-the-lid-on-reproducibility-1.19970)]
]

---

## 2.3. Código antigüo

.pull-left[
Curiosamente, la poca reproducibilidad no solo aplicaba para resultados de otros científicos si no también incluía **sus propios resultados**.

Falta de documentación y programas obsoletos mostraron que era muy difícil reproducir incluso sus propios resultados de hace **10 años**.
]
.pull-right[
- [Ten years reproducibility challenge](https://rescience.github.io/ten-years/)

Fuente: [nature](https://www.nature.com/articles/d41586-020-02462-7)
]

---

## 2.4. Reproducibilidad en ecología

Hay poca reproducibilidad en ecología ([Culina 2020](https://journals.plos.org/plosbiology/article?id=10.1371/journal.pbio.3000763))

- **73%** de los artículos publicados (entre 2015 y 2019, n = 346) no proveen código
- **5%** no todo el código
- **1%** no proveen datos
- **21%** casi reproducible (dentro de los cuales 26% no usa software libre, 56% no provee todos los datos, y 46% no reportan la version del software)

<img src="https://media.eurekalert.org/multimedia_prod/pub/web/238857_web.jpg" height="300" style="display: block; margin: auto;" />
.right[ Fuente: [@Culina](https://twitter.com/antica_c/status/1288382890636709888)]

---

## 2.5. Barreras

Miedo a:
- Robo de ideas
- No ser acreditado
- Errores que lleven a humillación
]

[<svg aria-hidden="true" role="img" viewBox="0 0 512 512" style="height:1em;width:1em;vertical-align:-0.125em;margin-left:auto;margin-right:auto;font-size:inherit;fill:#e63946;overflow:visible;position:relative;"><path d="M432,320H400a16,16,0,0,0-16,16V448H64V128H208a16,16,0,0,0,16-16V80a16,16,0,0,0-16-16H48A48,48,0,0,0,0,112V464a48,48,0,0,0,48,48H400a48,48,0,0,0,48-48V336A16,16,0,0,0,432,320ZM488,0h-128c-21.37,0-32.05,25.91-17,41l35.73,35.73L135,320.37a24,24,0,0,0,0,34L157.67,377a24,24,0,0,0,34,0L435.28,133.32,471,169c15,15,41,4.5,41-17V24A24,24,0,0,0,488,0Z"/></svg> Tenemos la tecnologia, depende de nosotros implementarlo ](https://blog.scielo.org/es/2017/09/27/tenemos-la-tecnologia-para-salvar-la-revision-por-pares-ahora-depende-de-nuestras-comunidades-en-implementarlo-publicado-originalmente-en-el-blog-lse-impact-of-social-sciences-en-septiembre/#.YH1h-j-xWUk)

---
name: MS
class: center, middle, inverse

# 3. Manuscritos reproducibles

---

## 3.1. Manuscritos reproducibles

Pero existe un gradiente...
<img src="https://raw.githubusercontent.com/Pakillo/writing-reproducible-manuscripts/master/images/Fig1.jpg" height="300" style="display: block; margin: auto;" />

---

## 3.2. Básica

Texto + Datos + Código

Almacenados y accesibles en **archivos permanentes**
- ✔️ Zenodo, dryad
- ❌ Github

---

## 3.3. Datos

- En formato abierto:<br>
✔️csv, txt  <br>
❌  excel<br>

- Identificador permanente (DOI)

- Código de depuración (limpieza)

- README (explicando: quien, como, cuando, donde se colectaron los datos).  
Evita: **variables no localizadas**

- Licencias<br>
Las más comunes son:<br>
**CCO** Creative Commons: no condiciones<br>
**CC-BY** Uso con atribución<br>
**MIT** para software<br>

Leer más: [Tierney & Ram 2020](https://arxiv.org/abs/2002.11626)

---

## 3.4. Código

- En formato abierto:<br>
✔️ Script en R o Rmd

- Identificador permanente (DOI)<br>

- Licencias (CCO, CC-BY)<br>

- README (incluir sessionInfo()). <br>
Evita problemas con actualización de **librerías**

[Leer más: Eglen et al 2016](https://doi.org/10.1038/nn.4550)

---

## 3.5. Ejercicios

En equipo 👯 
- **Replicar** análisis de otro equipo: [Equipo 1](https://github.com/xangeldaniel/prueba.git), [Equipo 2](https://github.com/denniselga/Prueba), [Equipo 3](https://github.com/lisshern/Repositorio1).  
- **Reproducir** análisis para obtener resultados de pingüinos de Papúa.  
- Subir nuevo repositorio a github, de preferencia incluyendo README.  
- Al final reflexionar que podrían incluir en sus futuras instrucciones para facilitar reproducibilidad.

.panelset[
.panel[.panel-name[Con git]
Si ya tienen **git** instalado. [Clonar repositorio.](https://miriamll.github.io/Curso_CIAD/GitGithubZenodo#34)
<img src="https://raw.githubusercontent.com/MiriamLL/Curso_CIAD/main/Figuras/Git03.png" height="200" style="display: block; margin: auto;" />
]

.panel[.panel-name[Sin git]
Si no tienen **git** instalado. Descargar zip.
<img src="https://raw.githubusercontent.com/MiriamLL/Curso_CIAD/main/Figuras/Git11.png" height="200" style="display: block; margin: auto;" />
]

---

**Fertile**
- Revisa continuamente que el articulo sea reproducible. 
Por ejemplo, si usas una ruta absoluta te va a sugerir que uses una ruta relativa

**Checkpoint**
- Permite regresar a algún punto de tu análisis

.pull.right[

Fuente de la imagen [The Turing way](https://the-turing-way.netlify.app/afterword/afterword.html)
]

---

# Contacto

Recapitulando

- [Reproducibilidad](#repro)
- [Publicaciones reproducibles](#pub)
- [Manuscritos reproducibles](#MS)

Para dudas, comentarios y sugerencias:  
- Escríbeme a miriamjlerma@gmail.com

.right[Este material esta accesible y se encuentra en <br>
mi [<svg aria-hidden="true" role="img" viewBox="0 0 512 512" style="height:1em;width:1em;vertical-align:-0.125em;margin-left:auto;margin-right:auto;font-size:inherit;fill:#74c69d;overflow:visible;position:relative;"><path d="M432,320H400a16,16,0,0,0-16,16V448H64V128H208a16,16,0,0,0,16-16V80a16,16,0,0,0-16-16H48A48,48,0,0,0,0,112V464a48,48,0,0,0,48,48H400a48,48,0,0,0,48-48V336A16,16,0,0,0,432,320ZM488,0h-128c-21.37,0-32.05,25.91-17,41l35.73,35.73L135,320.37a24,24,0,0,0,0,34L157.67,377a24,24,0,0,0,34,0L435.28,133.32,471,169c15,15,41,4.5,41-17V24A24,24,0,0,0,488,0Z"/></svg>github](https://github.com/MiriamLL/Curso_CIAD/)
y mi [<svg aria-hidden="true" role="img" viewBox="0 0 512 512" style="height:1em;width:1em;vertical-align:-0.125em;margin-left:auto;margin-right:auto;font-size:inherit;fill:#74c69d;overflow:visible;position:relative;"><path d="M432,320H400a16,16,0,0,0-16,16V448H64V128H208a16,16,0,0,0,16-16V80a16,16,0,0,0-16-16H48A48,48,0,0,0,0,112V464a48,48,0,0,0,48,48H400a48,48,0,0,0,48-48V336A16,16,0,0,0,432,320ZM488,0h-128c-21.37,0-32.05,25.91-17,41l35.73,35.73L135,320.37a24,24,0,0,0,0,34L157.67,377a24,24,0,0,0,34,0L435.28,133.32,471,169c15,15,41,4.5,41-17V24A24,24,0,0,0,488,0Z"/></svg>página](https://www.miriam-lerma.com)

<h3><svg aria-hidden="true" role="img" viewBox="0 0 576 512" style="height:1em;width:1.12em;vertical-align:-0.125em;margin-left:auto;margin-right:auto;font-size:inherit;fill:#74c69d;overflow:visible;position:relative;"><path d="M280.37 148.26L96 300.11V464a16 16 0 0 0 16 16l112.06-.29a16 16 0 0 0 15.92-16V368a16 16 0 0 1 16-16h64a16 16 0 0 1 16 16v95.64a16 16 0 0 0 16 16.05L464 480a16 16 0 0 0 16-16V300L295.67 148.26a12.19 12.19 0 0 0-15.3 0zM571.6 251.47L488 182.56V44.05a12 12 0 0 0-12-12h-56a12 12 0 0 0-12 12v72.61L318.47 43a48 48 0 0 0-61 0L4.34 251.47a12 12 0 0 0-1.6 16.9l25.5 31A12 12 0 0 0 45.15 301l235.22-193.74a12.19 12.19 0 0 1 15.3 0L530.9 301a12 12 0 0 0 16.9-1.6l25.5-31a12 12 0 0 0-1.7-16.93z"/></svg>[Volver ](https://www.miriam-lerma.com/teaching.html)
]]