Evaluationsstudien Evaluationsstudien zeichnen sich dadurch aus, daß ein konkretes System wiederholt mit unterschiedlichen Benutzergruppen, in unterschiedlichen Situationen und mit verschiedenen Methoden getestet wird. Das Ziel besteht darin, das System oder die Anwendung so zu "tunen", daß es dem Optimum immer näher kommt und gegenüber anderen Alternativen einen deutlichen Vorteil aufweist. Viele der Evaluationsstudien sind groß angelegte Projekte und ziehen sich über lange Zeiträume hin. Bei der Evaluation von Anwendungs-Systemen lassen sich zwei Vorgehensweisen unterscheiden: summative Evaluation und formative Evaluation. Wird ein System erst nach seiner Fertigstellung in Benutzertests evaluiert, dann spricht man von summativer Evaluation. Die Nachteile dieser Vorgehensweise liegen auf der Hand: Zeigen sich bei der abschließenden Evaluation Probleme, dann kann das System nicht mehr geändert werden, die Erkenntnisse können erst in folgende Systemversionen einfließen. Ein weiterer Nachteil besteht darin, daß immer nur das ganze System als Einheit getestet werden kann. Die Ursache eines Problems läßt sich dann oft nicht eindeutig ausmachen oder auf eine bestimmte Komponente zurückführen. Das Vorgehen bei der formativen Evaluation ist grundsätzlich anders. Obwohl es wesentlich aufwendiger ist, aber auch sinnvoller. Schon während des Designs werden fortlaufend einzelne Systemkomponenten separat oder auch in Kombination evaluiert. Meist liegt zu diesem Zeitpunkt noch kein fertig ausgereiftes System vor und es werden Prototypen verwandt. In der Hypertextliteratur dokumentierte Evaluationsstudien und Evaluationsprojekte, die das Lernen und/oder die Informationssuche mit Hypertexten thematisieren: Anwendung Einsatzbereich Quelle Drexel Disk Informationssystem (Studierende Drexel-Univ.) Hewett, 1989 Glasgow Online öffentl. Informationssystem (Touristen) Baird et al., 1988 Baird & Percival, 1989 Hardman, 1989 GOVA Museumssystem Plaisant, 1991 Hitch Hikers Guide Lernumgebung Allison & Hammond, 1989 HyperTies Hypertext-System Marchionini & Shneiderman, 1988 Intermedia Hypertext-System (Lernkontext) Beeman et al., 1987 Cunningham et al., 1993 Utting & Yankelovich,1989 Yankelovich et al., 1985 Yankelovich et al., 1988 MEM Lernumgebung (Gedächtnis- Psychologie) Glowalla et al., 1993 Glowalla et al., 1992 Perseus Informationssystem/ Lernumgebung (antikes Griechenland) Bannon, 1991 Marchionini, 1990 Marchionini & Crane, 1994 Mylonas & Heath, 1992 StrathTutor Lernumgebung Mayes et al., 1990 SuperBook Informationssystem (wissensch. Artikel) Landauer et al., 1993 UBTUG Scout Informationssystem (Bibliotheksführer) Bertha & Schwarz, 1991

Hypertext- "Grundlagenforschung" Hier werden "experimentelle" Hypertexte verwandt, deren Eigenschaften systematisch variiert werden können. Einen großen Anteil nehmen Untersuchungen ein, in denen Hypertext zur Informationssuche eingesetzt wird. Informationssuche mit Hypertext: In Untersuchungen, die die Nützlichkeit des Hypertext-Konzeptes für die Informationssuche zum Thema haben, werden den Vpn üblicherweise eine Reihe von Suchfragen gestellt, die sie anhand des Textes beantworten sollen. Variiert werden die Linkstruktur oder die Benutzereigenschaften. Typische abhängige Variablen sind die Zeit zur Beantwortung der Fragen, die Anzahl der Fehler bzw. der korrekt beantworteten Fragen und die Navigationsstrategie oder -güte. Studien zur Informationssuche (Zusammenfassungen): Edwards & Hardman (1989) Jones (1989) McKnight, Dillon & Richardson (1990) Mohageg (1992) Wright & Lickorich (1990) Lernen mit Hypertext: In Studien, die sich mit dem Lernen mit Hypertexten befassen, werden die Vpn aufgefordert, den Text zu lernen oder auch nur zu lesen bzw. zu verstehen. Manipuliert werden auch hier meistens die Linkstruktur oder Benutzereigenschaften wie z.B. das Vorwissen oder der Lernstil. Abhängige Variablen sind, anders als bei Studien zur Informationssuche, primär der Wissensumfang, die Wissensstruktur sowie Navigationsstrategien. Studien zum Lernen mit Hypertext (Zusammenfassungen): Blum-Weigeldt (1996) Gerdes (1997) Gordon, Gustavel, Moore & Hankey (1988) Jonassen (1993) Samarapungavan & Beishuizen (1992) Stanton & Stammers (1990) Verreck & Lkoundi (1990)