Usability-Studie der Dekanatssoftware CalRobi für den Modellstudiengang Medizin der RWTH Aachen

Seitz, Stefan Martin; Spitzer, Klaus

doi:30493

Usability-Studie der Dekanatssoftware CalRobi für den Modellstudiengang Medizin der RWTH Aachen = Usability study of a curricular planning system called CalRobi for the reformed curriculum of the Medical School, RWTH Aachen University

Seitz, Stefan Martin

2011

Verantwortlichkeitsangabevorgelegt von Stefan Martin Seitz

ImpressumAachen : Publikationsserver der RWTH Aachen University 2011

Umfang182 S. : Ill., graph. Darst.

Aachen, Techn. Hochsch., Diss., 2011

Genehmigende Fakultät
Fak10

Hauptberichter/Gutachter
Spitzer, Klaus (Thesis advisor)

Tag der mündlichen Prüfung/Habilitation
2011-02-14

Online
URN: urn:nbn:de:hbz:82-opus-35724
URL: https://publications.rwth-aachen.de/record/63035/files/3572.pdf

Einrichtungen

Lehrstuhl für Medizinische Informatik (526500-2)

Inhaltliche Beschreibung (Schlagwörter)
Benutzerfreundlichkeit (Genormte SW) ; Software (Genormte SW) ; Evaluation (Genormte SW) ; Medizin (frei) ; Usability-Test (frei) ; Heuristische Evaluation (frei) ; IsoMetrics (frei) ; usability test (frei) ; heuristic evaluation (frei)

Thematische Einordnung (Klassifikation)
DDC: 610

Kurzfassung
Die Software CalRobi ist ein Programm zur Erstellung von Stundenplänen. Sie wurde explizit für die individuellen Bedürfnisse des Aachener Modellstudiengangs Medizin entwickelt. Die Umstellung von Regelstudiengang zu Modellstudiengang in Aachen hat das Problem mit sich gebracht, dass die einzelnen Veranstaltungen nicht mehr regelmäßig wöchentlich, sondern in den jeweiligen Systemblöcken gehäuft stattfinden. Dieser Umstand hat dazu geführt, dass die Jahrgangskoordinatoren bei der Stundenplanerstellung nicht auf die etablierten Systeme der RWTH Aachen zurückgreifen können. Dieses Problem soll durch CalRobi gelöst werden, das in einer Prototypversion vorliegt. CalRobi mag vielleicht nicht als ein typisches Programm der medizinischen Informatik angesehen werden, jedoch können die in dieser Studie durchgeführten Evaluationsmethoden sehr gut auf Software aus dem medizininformatischen Bereich angewendet werden. Zur Testung der Gebrauchstauglichkeit wird eine Usability-Studie von CalRobi durchgeführt. Sie setzt sich zusammen aus einem formativen und einem summativen Teil. Die formative Evaluation wird anhand einer Heuristischen Evaluation und einem Usability-Test durchgeführt. Zur summativen Evaluation wird der IsoMetricss-Fragebogen zur vergleichenden Untersuchung von CalRobi mit Microsoft Word® eingesetzt. Durch die formative Evaluation wurden insgesamt 110 Usability-Probleme in CalRobi entdeckt. Davon wurden in etwa die Hälfte der Probleme durch die Heuristische Evaluation und die andere Hälfte durch den Usability-Test gefunden. Zu den schwerwiegendsten Usability-Problemen (Severity Rating 3 und 4) werden Lösungen in einem Gruppengespräch mit Probanden, Software-Entwicklern und einem Usability-Experten erarbeitet. Als Ergebnis der summativen Evaluation schneidet CalRobi in den einzelnen Kategorien der Gebrauchstauglichkeit tendenziell besser als das bisher benutzte Programm, Microsoft Word® ab. Um CalRobi für den Nutzer besser bedienbar zu machen, wird empfohlen die Lösungen der Usability-Probleme aus der formativen Evaluation in die Software CalRobi zu implementieren. Es hat sich bestätigt, dass die Heuristische Evaluation und der Usability-Test zwei Evaluationsmethoden sind, die gut einander ergänzend durchgeführt werden können. Es wurden nur wenige, 10 von 110, Usability-Probleme durch beide Methoden zugleich entdeckt. Die übrigen 90 Probleme wurden nur in einer der beiden Methoden gefunden. Der „Discount Usability Test“ wird als ein Vorgehen für die formative Usability-Evaluation vorgestellt. Bei diesem fallen nur geringe finanzielle und personelle Kosten an.

The CalRobi is an application program curricular planning esp. for the generation of syllabi. It was developed according to special requirements induced by the reformed medical curriculum of the Aachen Medical School. The implementation of the reformed curriculum led to the problem that due to the new interdisciplinary structure of the curriculum the available programs for curricular management could not be used anymore by the administrative staff. This problem was addressed by the implementation of the CalRobi software, which is now available to the user as a prototype. CalRobi might not be considered a typical application of clinical information processing. Nonetheless, the evaluation methods used in this study can generally be adopted to various software evaluation tasks in the domain of Medical Informatics. Software usability was assessed by a systematic study consisting of a formative and a summative part. For formative evaluation a heuristic evaluation and a usability test were conducted. For summative evaluation the IsoMetricss-questionnaire was used to compare CalRobi to Microsoft Word®. Overall the formative evaluation detected 110 usability problems in CalRobi. About half were found by the heuristic evaluation and the other half by the usability test. Solutions were defined for the most severe usability problems (severity rating 3 and 4). This was achieved in a group meeting with test users, software developers and a usability expert attendant. The result of the summative evaluation showed that CalRobi performed slightly better with respect to the usability items compared to Microsoft Word® used by the administrative staff for the planning process so far. In order to improve the usability of CalRobi, it was advised to implement the solutions for the usability problems found in the formative evaluation. The heuristic evaluation and the usability test were found to complement each other well. Just 10 of 110 usability problems were detected by both methods. The other 90 problems were discoverd by only one of the two methods. The thesis proposes and discusses the „Discount Usability Test“ as an approach for formative usability evaluation. It can be used were only few financial and personnel resources are available.

Fulltext:
PDF