SEDAR: Detección y recuperación automática de fallos transitorios en sistemas de cómputo de altas prestaciones

El manejo de fallos es una preocupación creciente en el contexto del HPC; en el futuro, se esperan mayores variedades y tasas de errores, intervalos de detección más largos y fallos silenciosos. Se proyecta que, en los próximos sistemas de exa-escala, los errores ocurran incluso varias veces al día...

Descripción completa

Guardado en:

Detalles Bibliográficos
Autor principal:	Montezanti, Diego Miguel
Otros Autores:	De Giusti, Armando Eduardo
Formato:	Tesis Tesis de doctorado
Lenguaje:	Español
Publicado:	2020
Materias:	Ciencias Informáticas Fallos transitorios Soft errors Detección Replicación de procesos Recuperación automática Corrupción silenciosa de datos Aplicaciones de HPC Clusters de multicores Inyección de fallos Checkpoint de nivel de sistema Checkpoint de capa de aplicación
Acceso en línea:	http://sedici.unlp.edu.ar/handle/10915/98816 https://doi.org/10.35537/10915/98816
Aporte de:	SEDICI (UNLP) de Universidad Nacional de La Plata

id	I19-R120-10915-98816
record_format	dspace
institution	Universidad Nacional de La Plata
institution_str	I-19
repository_str	R-120
collection	SEDICI (UNLP)
language	Español
topic	Ciencias Informáticas Fallos transitorios Soft errors Detección Replicación de procesos Recuperación automática Corrupción silenciosa de datos Aplicaciones de HPC Clusters de multicores Inyección de fallos Checkpoint de nivel de sistema Checkpoint de capa de aplicación
spellingShingle	Ciencias Informáticas Fallos transitorios Soft errors Detección Replicación de procesos Recuperación automática Corrupción silenciosa de datos Aplicaciones de HPC Clusters de multicores Inyección de fallos Checkpoint de nivel de sistema Checkpoint de capa de aplicación Montezanti, Diego Miguel SEDAR: Detección y recuperación automática de fallos transitorios en sistemas de cómputo de altas prestaciones
topic_facet	Ciencias Informáticas Fallos transitorios Soft errors Detección Replicación de procesos Recuperación automática Corrupción silenciosa de datos Aplicaciones de HPC Clusters de multicores Inyección de fallos Checkpoint de nivel de sistema Checkpoint de capa de aplicación
description	El manejo de fallos es una preocupación creciente en el contexto del HPC; en el futuro, se esperan mayores variedades y tasas de errores, intervalos de detección más largos y fallos silenciosos. Se proyecta que, en los próximos sistemas de exa-escala, los errores ocurran incluso varias veces al día y se propaguen en grandes aplicaciones paralelas, generando desde caídas de procesos hasta corrupciones de resultados debidas a fallos no detectados. En este trabajo se propone SEDAR, una metodología que mejora la fiabilidad, frente a los fallos transitorios, de un sistema que ejecuta aplicaciones paralelas de paso de mensajes. La solución diseñada, basada en replicación de procesos para la detección, combinada con diferentes niveles de checkpointing (checkpoints de nivel de sistema o de nivel de aplicación) para recuperar automáticamente, tiene el objetivo de ayudar a los usuarios de aplicaciones científicas a obtener ejecuciones confiables con resultados correctos. La detección se logra replicando internamente cada proceso de la aplicación en threads y monitorizando los contenidos de los mensajes entre los threads antes de enviar a otro proceso; además, los resultados finales se validan para prevenir la corrupción del cómputo local. Esta estrategia permite relanzar la ejecución desde el comienzo ni bien se produce la detección, sin esperar innecesariamente hasta la conclusión incorrecta. Para la recuperación, se utilizan checkpoints de nivel de sistema, pero debido a que no existe garantía de que un checkpoint particular no contenga errores silenciosos latentes, se requiere el almacenamiento y mantenimiento de múltiples checkpoints, y se implementa un mecanismo para reintentar recuperaciones sucesivas desde checkpoints previos si el mismo error se detecta nuevamente. La última opción es utilizar un único checkpoint de capa de aplicación, que puede ser verificado para asegurar su validez como punto de recuperación seguro. En consecuencia, SEDAR se estructura en tres niveles: (1) sólo detección y parada segura con notificación al usuario; (2) recuperación basada en una cadena de checkpoints de nivel de sistema; y (3) recuperación basada en un único checkpoint válido de capa de aplicación. Cada una de estas variantes brinda una cobertura particular, pero tiene limitaciones inherentes y costos propios de implementación; la posibilidad de elegir entre ellos provee flexibilidad para adaptar la relación costo-beneficio a las necesidades de un sistema particular. Se presenta una descripción completa de la metodología, su comportamiento en presencia de fallos y los overheads temporales de emplear cada una de las alternativas. Se describe un modelo que considera varios escenarios de fallos y sus efectos predecibles sobre una aplicación de prueba para realizar una verificación funcional. Además, se lleva a cabo una validación experimental sobre una implementación real de la herramienta SEDAR, utilizando diferentes benchmarks con patrones de comunicación disímiles. El comportamiento en presencia de fallos, inyectados controladamente en distintos momentos de la ejecución, permite evaluar el desempeño y caracterizar el overhead asociado a su utilización. Tomando en cuenta esto, también se establecen las condiciones bajo las cuales vale la pena comenzar con la protección y almacenar varios checkpoints para recuperar, en lugar de simplemente detectar, detener la ejecución y relanzar. Las posibilidades de configurar el modo de uso, adaptándolo a los requerimientos de cobertura y máximo overhead permitido de un sistema particular, muestran que SEDAR es una metodología eficaz y viable para la tolerancia a fallos transitorios en entornos de HPC.
author2	De Giusti, Armando Eduardo
author_facet	De Giusti, Armando Eduardo Montezanti, Diego Miguel
format	Tesis Tesis de doctorado
author	Montezanti, Diego Miguel
author_sort	Montezanti, Diego Miguel
title	SEDAR: Detección y recuperación automática de fallos transitorios en sistemas de cómputo de altas prestaciones
title_short	SEDAR: Detección y recuperación automática de fallos transitorios en sistemas de cómputo de altas prestaciones
title_full	SEDAR: Detección y recuperación automática de fallos transitorios en sistemas de cómputo de altas prestaciones
title_fullStr	SEDAR: Detección y recuperación automática de fallos transitorios en sistemas de cómputo de altas prestaciones
title_full_unstemmed	SEDAR: Detección y recuperación automática de fallos transitorios en sistemas de cómputo de altas prestaciones
title_sort	sedar: detección y recuperación automática de fallos transitorios en sistemas de cómputo de altas prestaciones
publishDate	2020
url	http://sedici.unlp.edu.ar/handle/10915/98816 https://doi.org/10.35537/10915/98816
work_keys_str_mv	AT montezantidiegomiguel sedardeteccionyrecuperacionautomaticadefallostransitoriosensistemasdecomputodealtasprestaciones
bdutipo_str	Repositorios
_version_	1764820492593659907

SEDAR: Detección y recuperación automática de fallos transitorios en sistemas de cómputo de altas prestaciones

Ejemplares similares