Testselektion für Performanzregressionsbenchmarks in CI-Prozessen

Reichelt, David Georg, Kühne, Stefan and Hasselbring, Wilhelm (2021) Testselektion für Performanzregressionsbenchmarks in CI-Prozessen. In INFORMATIK 202: Computer Science and Sustainability. vol. P-314, Gesellschaft für Informatik. pp. 1819-1824 . (doi:10.18420/informatik2021-160).

Record type: Conference or Workshop Item (Paper)

Abstract

Um Performanzregressionen zu finden, werden in Softwareprojekten Performanzregressionsbenchmarks (PRB) eingesetzt. Die Ausführung der PRBs ist zeitaufwändig und wird deshalb oft unregelmäßig, bspw. nach jedem Release, ausgeführt. Dadurch können Regressionen übersehen werden. Darüber hinaus ist die Ursachenanalyse für länger vergangene Regressionen schwer. Durch Quelltextänderungen verursachte Performanzänderungen können schneller gefunden werden, indem nur die PRBs ausgeführt werden, die geänderten Quelltext aufrufen. Wir stellen eine Erweiterung des Testwerkzeugs Peass vor, mit dem die Regressionstestselektion für PRBs möglich wird. Hierbei werden PRBs unterstützt, die mit dem Benchmarkingframework jmh4 implementiert sind. Wir evaluieren unsere Erweiterung anhand der PRBs des Anwendungsservers jetty5 und zeigen, dass Peass die Benchmarkausführungsdauer um 97,9% reduziert und alle von den PRBs abgedeckten Regressionen findet.

Text

X1-3 - Version of Record

Available under License Creative Commons Attribution Share Alike.

Download (168kB)

More information

Published date: 2021

Venue - Dates: Die 51. Jahrestagung der Gesellschaft fur Informatikin, INFORMATIK 2021 - 51st Annual Conference of the German Informatics Society, INFORMATIK 2021, , Berlin, Germany, 2021-09-27 - 2021-10-01

Alternative titles: Test selection for performance regression benchmarks in CI processes

Learn more about School of Electronics and Computer Science research