An experimental comparison of frameworks for end-to-end testing
| Thesis title: | Experimentální porovnání frameworků pro end-to-end testování |
|---|---|
| Author: | Síkora, Jan |
| Thesis type: | Bakalářská práce |
| Supervisor: | Buchalcevová, Alena |
| Opponents: | Doležel, Michal |
| Thesis language: | Česky |
| Abstract: | Bakalářská práce se zabývá experimentálním porovnáním frameworků Cypress a Playwright pro end-to-end testování webových aplikací z perspektivy začínajících testerů. Ačkoliv existuje řada technických srovnání těchto nástrojů, objektivní data o jejich přístupnosti pro začátečníky v odborné literatuře chybí. Hlavním cílem práce je na základě řízeného experimentu porovnat a vyhodnotit zkušenosti začínajících testerů s oběma frameworky a formulovat praktická doporučení pro volbu nástroje. Pro účely experimentu byla vyvinuta vlastní testovací webová aplikace a navržen křížový design AB/BA se smíšeným výzkumným přístupem. Experiment byl realizován na vzorku osmi studentů Fakulty informatiky a statistiky VŠE v Praze. Kvantitativní analýza prostřednictvím Wilcoxonova testu neprokázala statisticky významný rozdíl v počtu funkčních testů, avšak velikost účinku naznačuje velký praktický rozdíl ve prospěch Playwrightu, zejména u scénáře s iFramy. Kvalitativní analýza rozhovorů odhalila, že preference frameworku je primárně determinována znalostí JavaScriptu. U části participantů identifikovala paradox mezi subjektivní preferencí a objektivním výkonem. Práce poskytuje firmám a vzdělávacím institucím podklady pro informované rozhodování při výběru testovacího frameworku pro týmy začínajících testerů. |
| Keywords: | end-to-end testování; Playwright; testovací frameworky; webové aplikace; automatizované testování; Cypress |
| Thesis title: | An experimental comparison of frameworks for end-to-end testing |
|---|---|
| Author: | Síkora, Jan |
| Thesis type: | Bachelor thesis |
| Supervisor: | Buchalcevová, Alena |
| Opponents: | Doležel, Michal |
| Thesis language: | Česky |
| Abstract: | This bachelor's thesis presents an experimental comparison of the Cypress and Playwright frameworks for end-to-end testing of web applications from the perspective of junior testers. Although numerous technical comparisons of these tools exist, objective data on their accessibility for beginners remain scarce in the literature. The main objective of the thesis is to compare and evaluate the experiences of junior testers with both frameworks through a controlled experiment and to formulate practical recommendations for framework selection. A custom test web application was developed and a crossover AB/BA design with a mixed-methods research approach was employed. The experiment was conducted with a sample of eight students from the Faculty of Informatics and Statistics at the Prague University of Economics and Business. Quantitative analysis using the Wilcoxon signed-rank test did not reveal a statistically significant difference in the number of functional tests. However it indicates a large practical effect in favour of Playwright, particularly for iframe-related scenarios. Qualitative analysis of interviews revealed that framework preference is primarily determined by prior JavaScript knowledge and, in a subset of participants, identified a paradox between subjective preference and objective performance. The thesis provides organizations and educational institutions with evidence-based guidance for selecting an E2E testing framework for teams of junior testers. |
| Keywords: | automated testing; Cypress; end-to-end testing; web applications; testing frameworks; Playwright |
Information about study
| Study programme: | Aplikovaná informatika |
|---|---|
| Type of study programme: | Bakalářský studijní program |
| Assigned degree: | Bc. |
| Institutions assigning academic degree: | Vysoká škola ekonomická v Praze |
| Faculty: | Faculty of Informatics and Statistics |
| Department: | Department of Information Technologies |
Information on submission and defense
| Date of assignment: | 21. 10. 2025 |
|---|---|
| Date of submission: | 10. 5. 2026 |
| Date of defense: | 15. 6. 2026 |
| Identifier in the InSIS system: | https://insis.vse.cz/zp/94176/podrobnosti |