A workflow-inspired, modular and robust approach to experiments in distributed systems
Résumé
Experimentation in large-scale distributed systems research is very challenging due to the size and complexity of modern systems and applications spanning domains of high performance computing, P2P networks, cloud computing, etc. Some obstacles that each researcher must face are: the difficulty of properly structuring experiments due to their complexity, the inflexibility of existing methodologies and tools and the scalability problems resulting from the size of studied systems. In this paper, we propose a novel method of representing and executing experiments that solves these problems. To this end, we present an interdisciplinary approach to the control of large-scale experiments in distributed systems research that draws its foundations from workflow management and scientific workflows. This workflow-inspired approach distinguishes itself by its representation of experiments, modular architecture and robust error handling. We show how the aforementioned problems are solved by our approach in an exemplary performance study of an HTTP server.
Expériences dans la domaine de systèmes distribués à grande échelle sont très difficile à conduire à cause de la complexité et de la taille des systèmes et des applications modernes (le calcul de grande performance, les réseaux P2P, le cloud computing, etc.). Entre les problèmes qui empêchent la recherche sont: la difficulté du design d'expériences, l'inflexibilité des méthodologies et des outils existants, et l'ensemble de problèmes liés au passage à grande échelle. Dans cet article on propose la nouvelle méthode de structuration d'expériences qui résout ces problèmes. Notre approche interdisciplinaire de la gestion d'expériences dans la domaine de systèmes distribués à grande échelle utilise des idées et des méthodes efficaces de la gestion de workflows et des workflows scientifiques. La méthode se distingue par la représentation d'expériences en langage de workflows, l'architecture modulaire et la gestion d'erreurs robuste. On montre que les problèmes susmentionnés sont bien résolus grâce à notre approche en présentant l'étude de la performance d'un serveur HTTP.
| Origine | Fichiers produits par l'(les) auteur(s) |
|---|