Automatic evaluation of the students' assessments

Necelých sedm set studentů nastupuje každým rokem na Vysokou školu ekonomickou v Praze (VŠE), aby se zde učili informatice. Každý z nich musí na úvod absolvovat dva navazující předměty týkající se programování -- Základy programování a Základy softwarového inženýrství. Oba kurzy žádají poměrně mnoho výstupů, ať již dílčího (domácí úkoly), nebo komplexnějšího rázu (semestrální práce), které musí vyučující řádně vyhodnocovat. Zejména hodnocení úvodních úkolů má pracný, ale rutinní charakter, což z nich dělá vynikající kandidáty na automatizaci. Cílem této práce je navrhnout nejvhodnější způsob, jak této automatizace dosáhnout. Jelikož problém s velkokapacitními kurzy trápí univerzity po celém světě, existuje již řada řešení, jak automatizovat vyhodnocování úkolů v programování. První dvě kapitoly této práce se shrnují snahu nalézt ty nejzajímavější z nich a představit je českému publiku. Protože nalezené systémy dosahují vysoké míry sofistikovanosti, nicméně nepodporují testy implementace využívané na VŠE, věnuje se zbytek práce místo tvorby vlastního systému tvorbě frameworku, který by umožnil tento nedostatek překonat. Zmiňovaný framework nazvaný Duckapter zjednodušuje práci s reflexí v jazyce Java a je volně dostupný jako knihovna na stránkách projekt http://code.google.com/p/duckapter. Pomocí něj mohou vyučující snáze zahrnovat testy implementace do (jednotkových) testů chování, které jsou běžnou součástí systémů pro vyhodnocování studentských úloh.