Expertenbasierte Evaluation

Wann ist diese Methode geeignet?

Expertengutachten zu usability-relevanten Fragestellungen sind ein zeit- und kosteneffizientes Mittel, um Know-how zur Optimierung von Interfaces aus einer neutralen Quelle zu gewinnen.

Dazu erörtern und erarbeiten wir für Sie individuelle Optimierungsvorschläge und Lösungsansätze, die von Ihnen, Ihrer Agentur oder von uns umgesetzt werden können. Wir liefern einen Blick von „außen“, d.h. eine dritte Sichtweise neben den Entwicklern und Projektmitarbeitern.

Mögliche Fragestellungen:

• Ist Ihre Website konform mit gängigen Usability-Heuristiken und kann sie effizient, effektiv und zufriedenstellend von den Nutzern bedient werden?
• Wo liegen aus Usability-Sicht Probleme, Schwachstellen und Stärken, die sich sowohl auf Ihre Besucher als auch auf die Zielsetzung Ihrer (geplanten) Website auswirken können?
• Sind die vorhandenen Interaktionsprozesse auf Ihrer Website nachvollziehbar und deren Elemente intuitiv bedienbar?
• Welche bestehenden Lösungen und Interaktionsprinzipien können zur Optimierung der Website heran gezogen werden?
• Kann Ihr Webangebot seine zugedachte Zielsetzung erreichen, z. B. in Hinblick auf Shop-Bestellungen, Kundenbindung, Vertrieb, Imagepflege?
• Welche Usability-Argumente sprechen für oder gegen einen bestimmten Entwurf, der gerade im Produktentwicklungsteam diskutiert wird?
• Mit welcher Dringlichkeit mit welchem Aufwand können bzw. sollten die gefundenen Usability-Schwächen und -Probleme behoben werden?

Und viele andere mehr…

In welcher Projektphase einsetzbar?

• Konzeption / Entwicklung
  Bereits in der frühen Entwicklungs- bzw. Konzeptionsphase lassen sich Usability-Probleme durch Experten identifizieren. Hierzu sind lediglich erste Scribbles (handgefertigte Skizzen) bzw. Wireframes (schematische Darstellungen) einer Website) nötig.
• Umsetzung
  Bei einer begrenzten Zeitplanung und einem knappen Budget liefert eine Expertenbasierte Evaluation eine umfassende Bewertung (inkl. direkter Handlungsempfehlungen) eines Internetangebotes und gibt somit wichtige Hinweise darauf, was es vor dem (Re-)Launch Ihrer Website zu beheben gilt (Qualitätskontrolle bzw. Freigabetest).
• Betrieb
  Im Betrieb Ihrer Website bietet eine Expertenbasierte Evaluation ebenfalls die Möglichkeit einer expertenbasierten Qualitätskontrolle (d.h. wurde alles so umgesetzt, wie es geplant war). Zudem besteht die Möglichkeit der Identifizierung von Schwachstellen bzw. Problembereichen als Anstoß für einen geplanten Re-Design-Prozess bzw. als Vorlauf für einen umfangreichen Usability-Test im Labor.

Wie läuft diese Methode ab?

Für ein Expertengutachten bieten sich verschiedene Methoden an, die sich auch in Kombination einsetzen lassen, v. a.:

• Heuristische Evaluation
  Usability-Experten begutachten das Produkt im Hinblick auf Konformität mit gängigen Usability-Regeln:
  • DIN EN ISO 9241 "Ergonomie der Mensch-System-Interaktion" (inbesondere die Teile 11-17, 110 und 151)
  • DIN EN ISO 13407 "Benutzer-orientierte Gestaltung interaktiver Systeme"
  • Bildschirmarbeitsverordnung (BildschArbV) und europäische Bildschirmrichtlinie EWG 90/270
  • DATech Prüfhandbuch "Leitfaden-Usability"
  • Usability-Heuristiken nach Nielsen & Molich
  • ...
• Cognitive Walkthrough
  Mehrere Experten spielen typische Nutzeraufgaben in der vorgegebenen, korrekten Weise durch (Szenario). Sie beurteilen, ob der Nutzer später in der Lage sein wird, die Handlungsschritte und die Verfügbarkeit des jeweils nächsten Handlungsschritts zu erkennen. Zudem wird geprüft, ob der Nutzer die richtigen Aktionen ausführen kann und den Fortschritt seiner Handlung erkennt.

Wir verfügen zudem über verschiedene individuelle Checklisten, welche die Erfordernisse verschiedener Plattformen (Websites, Terminals, mobile Applikationen) und verschiedener Branchen (Tourismus, General-Interest-Sites, etc.) berücksichtigen.

In der Regel beruht die von uns durchgeführte Evaluation aus einer Kombination der beiden oben genannten Methoden. Im Fokus stehen dabei sowohl die Nutzerführung, Bedienung, Gestaltung und Funktionalität als auch die Positionierung, Verständlichkeit und Wirkung des Contents (Text, Struktur, Grafik etc.).

Drei Usability-Experten begutachten auf Basis der neuesten Erkenntnisse der Usability-Forschung und fundierter Erfahrungen mit nutzerbasierten Tests - zuerst getrennt voneinander - das zu untersuchende Internetangebot. Dabei versetzen sich die Experten in typische Nutzungssituationen der Website hinein und begutachten alle Funktionen und zentralen Seiten, die für eine Analyse der genannten Untersuchungsobjekte von Interesse sind.

Anhand unserer bewährten Usability-Checklisten werden zusätzlich Optimierungspotentiale identifiziert, herausgearbeitet und konkrete Empfehlungen zur Verbesserung der Anwendung unterbreitet.

Die Checklisten umfassen dabei:

• das Interface-/ Screen-Design,
• die Gestaltung der Navigation / Nutzerführung,
• das Interaktionsdesign und
• die Informations-/ Site-Architektur (inkl. Wording)
• die Content-Usability / das Text-Design.

Die Ergebnisse werden im Anschluss diskutiert und zusammengefasst (interner Workshop). Die identifizierten Probleme und Schwächen werden nach leichten, mittelschweren und schweren Problemen klassifiziert.

Somit kann eine erschöpfende Liste von Usability-Problemen erarbeitet werden, die nicht auf der subjektiven Meinung eines Einzelnen basiert. Die Zusammensetzung des Expertenteams erfolgt dabei auf Basis der spezifischen Branchenkenntnisse unserer Mitarbeiter.

Das Ergebnis der Evaluation sind verbal formulierte Expertenurteile, die bzgl. der Schwere der Usability-Probleme kategorisiert sind. Zudem entwickeln unsere Experten konkrete und individuell auf Ihr Angebot zugeschnittene Gestaltungsempfehlungen zur Behebung der aufgedeckten Usability-Probleme. Zentrale Empfehlungen werden dabei nicht nur verbal beschrieben – es erfolgt zusätzlich eine Visualisierung unserer Empfehlungen in Form von Wireframes / Funktionslayouts.

Stärken der Methode:

• Die Bewertung erfolgt auf Basis von Checklisten aber auch auf Basis des langjährigen Know-hows und der Branchenerfahrung von Usability-Experten.
• Die Evaluation durch Experten stellt eine zeiteffiziente und kostengünstige Möglichkeit zur Bewertung einer Website dar.
• Die Lieferung der Ergebnisse und direkter Handlungsempfehlungen erfolgt zeitnah.
• Es wird kein interaktiver bzw. klickbarer Prototyp vorausgesetzt.
• Die Bewertung der Website erfolgt auf Basis anerkannter Usability- und Gestaltungsrichtlinien.

Wie groß sollte die Stichprobe sein?

Expertenbasierte Evaluationen werden ohne Testpersonen durchgeführt und basieren ausschließlich auf dem Urteil dreier Usability-Experten mit langjähriger Erfahrung in Ihrer Branche.

Wie lange dauert die Durchführung?

Der Aufwand für Expertengutachten richtet sich ausschließlich nach dem Umfang der zu begutachtenden Website. Kurze Gutachten zu weniger komplexen Websites oder Webapplikationen können ab ca. 3 bis 5 Tagen geliefert werden.

Welchen Input müssen Sie leisten?

Optimalerweise kommen Sie bereits mit konkreten Fragestellungen und/ oder Seitenbereichen auf uns zu, die wir dann während der Evaluation thematisieren bzw. gezielt unter die Lupe nehmen. Gerne können wir solche Fragestellungen aber auch in einem Workshop (vor Ort oder am Telefon) mit Ihnen gemeinsam erarbeiten.

Je nachdem, in welcher Phase Sie Ihre Website bzw. ihre Entwürfe von uns evaluiert haben möchten, benötigen wir von Ihnen entweder die URL bzw. einen Online-Zugang zu Ihrer Website / Ihrem Prototypen oder aber die ersten Screens bzw. Wireframes in Form gängiger Dateiformate (JPEG, TIFF, PDF, PPT, HMTL,..).

Was erhalten Sie von uns?

Sie erhalten einen interpretativen Ergebnisband mit folgenden Inhalten:

• Management Summary
• Verbal formulierte Expertenurteile in Bezug auf die identifizierten Problembereiche, die bzgl. der Schwere der Usability-Probleme kategorisiert sind.
• Konkrete und individuell auf Ihr Angebot zugeschnittene Gestaltungsempfehlungen zur Behebung der aufgedeckten Usability- und Gestaltungsprobleme - verbal beschrieben und visuell-funktional umgesetzt (z. B. in Form von optimierten Wireframes oder klickbaren Prototypen).

Haben Sie noch weitere Fragen? Dann sprechen Sie uns an! Wir beraten Sie gern.