Bildungsportale in der Wissenschaft: Qualität oder Qual?
Qualitätskriterien und Empirische Befunde zur Nutzung des Deutschen Bildungsservers
Konzepte
Empirische Befunde
Weitere Arbeitsschritte
Dr. Elke Brenstein, Dr. Olaf KosAbteilung für Pädagogik und Informatik
Humboldt Universität zu Berlin
11.02.03 Osnabrück, IuK 2003 2
Wie können wir mehr Menschen mit mehr Informationen versorgen, schnell und in verschiedenen Formen?
Forscher haben hundert Jahre an dem Problem gearbeitet. Und die wunderbare Nachricht ist, dass sie es tatsachlich gelöst haben – bravo!
Nur ist dabei ein neues Problem entstanden: Jetzt wissen die Menschen nicht, was sie mit all den Informationen anfangen sollen....
Neil Postman, 1996
Ein altes Problem...Ein altes Problem...
11.02.03 Osnabrück, IuK 2003 3
ÜbersichtÜbersicht
• Qualitätskriterien• Der Deutsche Bildungsserver• Fragestellungen und
Evaluationskonzept • Logfile Analysen
– Unterschiede zwischen Gesamtnutzern & Nutzern aus Hochschule und Forschung
• Ausblick
11.02.03 Osnabrück, IuK 2003 4
QualitätskriterienQualitätskriterien1. Der erste Eindruck1. Der erste Eindruck
• Schnelle Ladezeiten
• Ansprechendes, grafisches Design– Farbgebung– Grafische Elemente– Seitenaufbau http://www.vu-bb.de/ http://www.math-net.de/ http://www.medien-bildung.net/
11.02.03 Osnabrück, IuK 2003 5
QualitätskriterienQualitätskriterien2. Inhalte2. Inhalte
• Aktualität und Seriosität– Automatische Linküberprüfung– Redaktionelle Pflege
• Übersichtliche Gliederung und Navigation– Tiefennavigation, Sitemap
• Transparenz der Angebote http://www.bildungsportal-sachsen.de/
http://www.zum.de
11.02.03 Osnabrück, IuK 2003 6
QualitätskriterienQualitätskriterien3. Funktionsfähigkeit3. Funktionsfähigkeit
• Einwandfreie Funktion des Auftritts mit verschiedenen Browsern
• Barrierefreiheit• Suchfunktion
– Einfache Suche, Expertensuche, Volltextsuche
• Zusatzfunktionen– Druckversion– Seite als Email verschicken
– Newsletter Abonnement
11.02.03 Osnabrück, IuK 2003 7
Der Deutsche BildungsserverDer Deutsche Bildungsserver
11.02.03 Osnabrück, IuK 2003 8
Entwicklung 1997-2002Entwicklung 1997-2002
DBS: Monatliche Seitenabrufe 1997 - 2002
0
200000
400000
600000
800000
1000000
Jan97
Jul97
Jan98
Jul98
Jan99
Jul99
Jan00
Jul00
Jan01
Jul01
Jan02
Jul02
Jan03
Zugriffe pro Monat Gleitender Durchschnitt der letzten 12 Monate
11.02.03 Osnabrück, IuK 2003 9
FragestellungenFragestellungen
• Wer sind die Nutzer des DBS?Wer sind die Nutzer des DBS?Demografische Merkmale, Nutzergruppen
• Welche Informationen suchen die Nutzer? • Wie bewerten Nutzer das Angebot?
Inhalt, Design, Gebrauchstauglichkeit, Funktionalität
• Wie wird der DBS genutzt?– Nutzungshäufigkeiten, – Domänen & Organisationen– Browser und Betriebssysteme, – Referrer– Am häufigsten besuchte Seiten
11.02.03 Osnabrück, IuK 2003 10
EvaluationskonzeptEvaluationskonzept
Logfile Analysen
Nutzer
Marktanalyse
Nicht-Nutzer
Archivdaten
Email-Anfragen
Allg. Online Befragung
Befragungen
Usability Testing
Untersuchungen
Fokusgruppen-Interviews
Experteninterviews
OB Schule
OB Hochschule
OB Weiterbildung
OB Berufliche BildungNavigationsstudien
Feedback
On
lin
e
Pan
el
11.02.03 Osnabrück, IuK 2003 11
EvaluationskonzeptEvaluationskonzept
Logfile Analysen
Nutzer
Marktanalyse
Nicht-Nutzer
Archivdaten
Email-Anfragen
Allg. Online Befragung
Befragungen
Usability Testing
Untersuchungen
Fokusgruppen-Interviews
Experteninterviews
OB Schule
OB Hochschule
OB Weiterbildung
OB Berufliche BildungNavigationsstudien
Feedback
On
lin
e
Pan
el
11.02.03 Osnabrück, IuK 2003 12
2
13
15
34
35
39
41
62
67
93
119
0 20 40 60 80 100 120 140
Auszubildende(r)
Ausbilder(in)
Lernende(r) in der Weiter- und Erwachsenenbildung
Eltern
Hochschullehrer(in)
Schüler(in)
Student(in)
Lehrende(r) in der Weiter- und Erwachsenenbildung
Bildungsadministrator(in) oder -manager(in)
Wissenschaftler(in)
Lehrer(in)
OB
Wer sind die Nutzer des Wer sind die Nutzer des DBS?DBS?Nutzergruppen
11.02.03 Osnabrück, IuK 2003 13
BewertungBewertung Spontaner Eindruck
0%
5%
10%
15%
gefällt mir sehr gut gefällt mir überhaupt nichtErstnutzer
Mehrfachnutzer
• Überwiegend positive Bewertung
• kaum Unterschiede zwischen Erst- und Mehrfachnutzern
OB
11.02.03 Osnabrück, IuK 2003 14
Wie wichtig sind folgende Eigen-schaften einer Website?
0% 20% 40% 60% 80% 100%
Layout & Design
Inhalt
Benutzerführung
Aktualität
Ladezeiten
sehr wichtig
wichtig
unentschieden
unwichtig
völlig unwichtig
OB
11.02.03 Osnabrück, IuK 2003 15
Wie beurteilen Sie den DBS?
0% 20% 40% 60% 80% 100%
Layout & Design
Inhalt
Benutzerführung
Aktualität
Ladezeiten
sehr gut
gut
OK
schlecht
sehr schlecht
weiß nicht
OB
11.02.03 Osnabrück, IuK 2003 16
Was finden Sie gut/weniger gut?
• Positive Anmerkungen:Inhaltliche Fülle
Aktualität und Qualität der Inhalte
Struktur der Website
• Kritikpunkte:Usability u.a. Aspekte der Suche
Design/Layout
UB
11.02.03 Osnabrück, IuK 2003 17
Logfile AnalysenLogfile Analysen
• Tools– Analog http://www.analog.cx – Report Magic
• Datenbasis: – Webserver Logs von Okt. 01 bis Sept. 02
• Stichproben:– Alle DBS Nutzer– Nutzer aus Hochschule und Forschung
11.02.03 Osnabrück, IuK 2003 18
NutzungsanteileNutzungsanteileHochschule & ForschungHochschule & Forschung
Anteil der Nutzer aus Universitäten und
Forschungsinstituten
94%6%
Anfragen unterschiedlicher
Seiten
83%17%
Anzahl verschiedener Hosts
96%4%
11.02.03 Osnabrück, IuK 2003 19
Wöchentliche NutzungWöchentliche Nutzung
Gesamt
Unis & Institute
11.02.03 Osnabrück, IuK 2003 20LF
DBS Gesamt
82%
15%2% 1%
Hochschule & Forschungsinstitute
51%48%
1%
MSIE
Netscape
Netscape (compatible)
Opera
- IE Explorer: MSIE 5: 75 % MSIE 6: 25 %
- Netscape: Netscape 4.x: 90%
BrowserverteilungBrowserverteilung
11.02.03 Osnabrück, IuK 2003 21LF
Hochschule & Forschungsinstitute
2% 4%5%
89%
Windows
Unix
Macintosh
unbekanntesBetriebsystem
DBS Gesamt
9%
1%
2%
88%
BetriebssystemeBetriebssysteme
11.02.03 Osnabrück, IuK 2003 22
OrganisationenOrganisationenDBS NutzerDBS Nutzer
t-dialin.net
aol.com
pppool.de
belwue.de
t-online.de
t-ipconnect.de
mediaways.net
arcor-ip.netmcbone.net
uunet.de
11.02.03 Osnabrück, IuK 2003 23
Unis & Unis & ForschungForschung
0 5000 10000 15000 20000 25000 30000 35000
uni-bielefeld.de
uni-muenster.de
uni-oldenburg.de
dipf.de
uni-dortmund.de
uni-hamburg.de
fu-berlin.de
uni-mainz.de
uni-leipzig.de
uni-bremen.de
uni-frankfurt.de
gwdg.de
uni-essen.de
uni-regensburg.de
tu-darmstadt.de
uni-koeln.de
ruhr-uni-bochum.de
uni-giessen.de
uni-jena.de
uni-hannover.de
11.02.03 Osnabrück, IuK 2003 24
ReferrerReferrerDBS GesamtDBS Gesamt
SUCHMASCHINEN59%
Landesbildungs-server
2%
schule.de6%
Schulweb5%
Jobbörsen12%
Unis, Institute14%
Studieren im Netz2%
11.02.03 Osnabrück, IuK 2003 25
Jobbörsen4%
Unis, Institute2%
Schulweb3%
LBS2%
schule.de6%
SUCHMASCHINEN83%
ReferrerReferrerHochschule & ForschungHochschule & Forschung
11.02.03 Osnabrück, IuK 2003 26
Schule
Weiterbildung
Sonstiges
Hochschule
Jobs / Bewerben
Übergreifende Informationen
Deutscher Bildungsserver
PISA
0%
5%
10%
15%
20%
25%
30%
35%
40%
Hochschule & Forschung Gesamt
Suchworte die zum DBS Suchworte die zum DBS führen (Top 30)führen (Top 30)
11.02.03 Osnabrück, IuK 2003 27
0,0% 0,5% 1,0% 1,5% 2,0% 2,5%
Termine
Jobbörse
Bereich Schule
ZeitungsdokumentationBildungswesen
ZDF Katalog fürUnterricht und
Volltextsuche
bonsai
Deutsch alsFremdsprache
dgfe
Uni
Gesamt
VerzeichnisseVerzeichnisse
11.02.03 Osnabrück, IuK 2003 28
• PISA: Zusammenfassung zentraler Befundehttp://www.mpib-berlin.mpg.de/pisa/ergebnisse.pdf
• Lernen für das Leben. Erste Ergebnisse der internationalen Schulleistungsstudie PISA 2000 http://www.pisa.oecd.org/Docs/Download/PISA2001(deutsch).pdf
• PISA – E http://www.mpib-berlin.mpg.de/pisa/PISA_E_Zusammenfassung2.pdf
• Lehrerstellen in Baden-Württemberg http://www.kultusministerium.baden-wuerttemberg.de/nuetzl/stellen/Stellen.pdf
• Klieme, Eckhard; Steinert, Brigitte: PISA 2000 : Sicherung von Mindeststandards, Chancengleichheit und verständnisorientiertes Lernen sind unerfüllte Ziele des deutschen Bildungssystems. http://www.dipf.de/publikationen/volltexte/publikationsverzeichnis/pisa_klieme_steinert_200112.pdf
AnfragenAnfragenHochschule & ForschungHochschule & Forschung
11.02.03 Osnabrück, IuK 2003 29
AusblickAusblick
• Welche Navigationsmuster (Pfade und Verweilzeiten) lassen sich identifizieren?
Suchen <-> Browsen, typische Pfade in einzelnen Inhaltsgebieten
• Repräsentative Befragungen relevanter Nutzergruppen zu Inhalten und Darstellung der Inhalte
• Befragungen von potentiellen Nutzern
11.02.03 Osnabrück, IuK 2003 30
Vielen Dank!Kontakt:
Homepage: www.educat.hu-berlin.de
E-mail: [email protected]
11.02.03 Osnabrück, IuK 2003 31
Beispiel 2Beispiel 2
11.02.03 Osnabrück, IuK 2003 32
zurückzurück