WLADDIMIRO Daniel
Direction de recherche : Pierre SENS
Co-encadrement : Luciana Arantes
Adaptation dynamique dans les systèmes de traitement de flux
Les systèmes de traitement des flux (SPS) traitent dynamiquement les événements en entrée sur un ensemble d'opérateurs. Comme l'entrée n'est généralement pas un flux constant des travaux dans la littérature proposent de répliquer dynamiquement les opérateurs SPS, afin de réduire les goulots d'étranglement de traitement induit par de les fluctuations.
Nous présentons ici deux approches pour modifier dynamiquement le nombre de répliques d'un opérateur. Une première approche réactive repose sur de plusieurs métriques. Une seconde approche utilisant un modèle prédictif analyse la variation du taux d'entrée, le temps d'exécution des opérateurs, et les événements en file d'attente afin de définir dynamiquement le nombre de répliques nécessaire pour chaque opérateur. Nous proposons également une implémentation basée sur Storm de ces deux approches, qui ne nécessite pas de reconfiguration au redémarrage lorsque le nombre de répliques d'opérateurs change.
Soutenance : 08/01/2024
Membres du jury :
Fabrice HUET, Professeur des universités, Univ. Nice Sophia Antipolis, CNRS, I3S, UMR 7271 [Rapporteur]
Cédric TEDESCHI, Professeur des universités, Université Rennes 1, IRISA [Rapporteur]
Nicolás HIDALGO, Maîtres de conférences, Universidad Diego Portales
Sébastien MONNET, Professeur, Université Savoie Mont Blanc
Luciana A RANTES, Maîtres de conférences, Sorbonne Université, LIP6
Pierre SENS, Professeur, Sorbonne Université, LIP6
Publications 2021-2024
-
2024
- D. Wladdimiro : “Dynamic Adaptation in Stream Processing System”, soutenance de thèse, soutenance 08/01/2024, direction de recherche Sens, Pierre, co-encadrement : Luciana, Arantes (2024)
- D. Wladdimiro, L. Arantes, P. Sens, N. Hidalgo : “PA-SPS: A predictive adaptive approach for an elastic stream processing system”, Journal of Parallel and Distributed Computing, vol. 192, pp. 104940, (Elsevier) (2024)
-
2023
- D. Wladdimiro, L. Arantes, N. Hidalgo, P. Sens : “PRESPS: a PREdictive model to determine the number of replicas of the operators in Stream Processing Systems”, Compas 2023 - Conférence francophone d'informatique en Parallélisme, Architecture et Système, Annecy, France (2023)
-
2022
- D. Wladdimiro, L. Arantes, P. Sens, N. Hidalgo : “A predictive approach for dynamic replication of operators in distributed stream processing systems”, SBAC-PAD 2022 - IEEE 34th International Symposium on Computer Architecture and High Performance Computing, Bordeaux, France, pp. 120-129, (IEEE) (2022)
- D. Wladdimiro, L. Arantes, N. Hidalgo, P. Sens : “A predictive model for Stream Processing System that dynamically calibrates the number of operator replicas”, ComPAS 2022 - Conférence francophone d'informatique en Parallélisme, Architecture et Système, Amiens, France (2022)
-
2021
- D. Wladdimiro, L. Arantes, P. Sens, N. Hidalgo : “A Multi-Metric Adaptive Stream Processing System”, NCA 2021 - 20th IEEE International Symposium on Network Computing and Applications, Cambridge, Boston, United States (2021)