In diesem Kapitel werden die Ergebnisse der Evaluation der Augmented Reality Konstruktionsumgebung für Möbelsysteme auf Basis von WebXR kritisch beleuchtet. Ziel der Evaluation war es, eine gute User Experience der Anwendung zu validieren.

Die Evaluation wurde mithilfe des UEQ-Fragebogens durchgeführt. Hierbei muss zunächst die Skala von -3 bis +3 betrachtet werden. In der Praxis wird diese Skala oft nicht vollständig ausgeschöpft. Realistischer ist die Verwendung einer Skala von -2 bis +2 @ueq-tool. Innerhalb dieser Skala werden Werte zwischen -0,8 und 0,8 als neutral angesehen, während Werte > 0,8 eine positive und Werte < -0,8 eine negative Bewertung darstellen.

Die Dimension der Attraktivität, welche den Gesamteindruck der Anwendung widerspiegelt, erreichte einen Durchschnittswert von 1,38. Im Vergleich zu den Benchmark-Daten des UEQ liegt dieser Wert über dem Durchschnitt und kann somit in den oberen 25% der Benchmark-Daten eingeordnet werden. Diese Bewertung zeigt eine grundsätzlich positive Wahrnehmung der Anwendung und dessen Nutzung. Die pragmatische Qualität der Anwendung, die Aspekte wie die Nützlichkeit und Effizienz der Anwendung bewertet, erzielte einen Durchschnittswert von 1,62. Dieser liegt deutlich über dem neutralen Wert von 0,8 und lässt darauf schließen, dass die Usability der Anwendung als positiv bewerten lässt. Die hedonische Qualität, welche die User Experience der Anwendung misst, erhielt einen Durchschnittswert von 1,33. Auch dieser Wert liegt deutlich im positiven Bereich liegt jedoch unter der Bewertung der Usability. Dieser Wert stellt zwar eine positive Bewertung dar, jedoch scheinen Probleme in Bezug auf die User Experience zu existieren.

In @appendix-responseConfidence werden die Konfidenzintervalle für die verschiedene Skalen bei einem Signifikanzniveau von $p=0.05$ basierend auf einer Stichprobengröße von $N=21$ dargestellt. Die Dimension "Effizienz" weißt die geringste Standardabweichung von 0.520 auf. Die Dimensionen "Attraktivität" und "Steuerbarkeit" weisen eine moderate Streuung auf. Die Dimensionen "Durchschaubarkeit", "Stimulation" und "Originalität" weisen die größte Streuung auf. Hierbei ist insbesondere die Dimension "Originalität" hervorzuheben, die die größte Streuung aufweist. Die Gründe für die teilweise hohe Streuung können sowohl in der unterschiedlichen Wahrnehmung der Anwendung als auch in der Stichprobengröße liegen.

Durch die Einbeziehung der Streuung können die zuvor gesehenen Unterschiede in der Bewertung der Usability und User Experience besser begründet werden. Die Dimensionen "Stimulation" und "Originalität" der User Experience weisen die größte Streuung auf und die niedrigsten Bewertungen mit 1.37 bei der Stimulation und 1.29 bei der Originalität. Daraus lässt sich eine gewisse Diskrepanz zwischen Usability und User Experience ableiten. Jedoch sind alle Werte im Vergleich mit den Benchmark Daten positiv zu bewerten und liegen deutlich über dem neutralen Wert von 0,8.

Die Ergebnisse der Evaluation zeigen, dass die Anwendung positiv bewertet wurde. Diese Ergebnisse werden durch die Studie von <NAME> unterstützt. Der Fokus lag hierbei auf dem gesamten Shop-System, jedoch wurde auch die AR-Anwendung bewertet. Es wurden technische Probleme sowie Usability-Schwierigkeiten festgestellt. Dennoch wurde die Anwendung im Kontext der Entscheidungsunterstützung als hilfreich bewertet. Das kritische Feedback hinsichtlich der Anwendung deckt sich mit den Anmerkungen aus der Evaluation. Hierbei wurden technische Probleme wie die Stabilität des Trackings und die Registrierung der Eingaben hervorgehoben, welche die Usability und User Experience negativ beeinflussen.