Skip to main content

LUP Student Papers

LUND UNIVERSITY LIBRARIES

Evaluating Virtual Reality as a Medium for Usability Testing on Inflight Entertainment Applications

Andersson, Rasmus LU and Voigt, Fredrik LU (2023) MAMM01 20231
Ergonomics and Aerosol Technology
Certec - Rehabilitation Engineering and Design
Abstract
This thesis aims to evaluate the feasibility of using virtual reality as a medium for usability testing. Usability testing has long been an important part of any iterative development process. Most usability testing is, however, done in a lab setting, outside the product's natural environment. Virtual Reality (VR) on the other hand can engross a user in any environment.

This thesis was done in an iterative manner, splitting it into two iterations both with a development phase and a testing phase. The first iteration's development phase involved creating the VR application which was going to simulate an aeroplane environment for the participant. The application created a one-to-one mapping between a physical screen that the users tapped... (More)
This thesis aims to evaluate the feasibility of using virtual reality as a medium for usability testing. Usability testing has long been an important part of any iterative development process. Most usability testing is, however, done in a lab setting, outside the product's natural environment. Virtual Reality (VR) on the other hand can engross a user in any environment.

This thesis was done in an iterative manner, splitting it into two iterations both with a development phase and a testing phase. The first iteration's development phase involved creating the VR application which was going to simulate an aeroplane environment for the participant. The application created a one-to-one mapping between a physical screen that the users tapped on and its streamed counterpart which they saw in VR. The testing phase then continued by writing a full test plan and conducting a usability test on an In-Fligt Entertainment (IFE) map application. The second iteration took the results and feedback from the first and improved on the most lacking parts, namely the mapping between the virtual and real-life screens. It contained the same steps as the first iteration but improved only on existing aspects rather than creating anything new.

The final VR application put forth after the second iteration showed that VR can be used as a medium for usability testing. Using VR does increase costs and workload for the test researchers but the negative aspects are outweighed by the benefits. The participants' answers show that VR makes the tests more interesting and more realistic. For some users, the fact that the moderator is hidden also makes them more confident and want to explore the application further. (Less)
Abstract (Swedish)
Syftet med denna rapport är att utvärdera möjligheten att använda Virtuell Verklighet (VR) som ett medium för användbarhetstestning. Användbarhetstestning är en viktig del av alla iterativa utvecklingsprocesser. Vanligtvis utförs testerna i en laboratoriemiljö utanför produkternas naturliga miljö. Genom att använda VR kan dock användare uppleva testmiljön på ett mer realistiskt sätt.

Studien genomfördes på ett iterativt sätt och delades upp i två iterationer, var och en med en utvecklingsfas och en testfas. Under den första utvecklingsfasen skapades en VR-applikation som simulerade en flygplansmiljö för deltagarna. Applikationen skapade en en-till-en-koppling mellan en fysisk skärm som användarna interagerade med och dess virtuella... (More)
Syftet med denna rapport är att utvärdera möjligheten att använda Virtuell Verklighet (VR) som ett medium för användbarhetstestning. Användbarhetstestning är en viktig del av alla iterativa utvecklingsprocesser. Vanligtvis utförs testerna i en laboratoriemiljö utanför produkternas naturliga miljö. Genom att använda VR kan dock användare uppleva testmiljön på ett mer realistiskt sätt.

Studien genomfördes på ett iterativt sätt och delades upp i två iterationer, var och en med en utvecklingsfas och en testfas. Under den första utvecklingsfasen skapades en VR-applikation som simulerade en flygplansmiljö för deltagarna. Applikationen skapade en en-till-en-koppling mellan en fysisk skärm som användarna interagerade med och dess virtuella motsvarighet. I testfasen genomfördes ett användbarhetstest av en kartapplikation för ett flygunderhållningsystem med en fullständig testplan.

Den andra iterationen byggde på resultaten och feedbacken från den första iterationen och fokuserade på att förbättra kopplingen mellan de virtuella och verkliga skärmarna. Iterationen inkluderade samma steg som den första iterationen, men fokuserade på att förbättra befintliga aspekter istället för att skapa något nytt.

Den slutliga VR-applikationen visade att virtuell verklighet kan användas som ett medium för användbarhetstestning. Även om användning av VR kan öka utvecklingskostnaden for tester och arbetsbelastningen för testforskarna, så väger fördelarna upp för de negativa aspekterna. Deltagarna ansåg att VR gjorde testerna mer intressanta och realistiska. För vissa användare gjorde det faktum att moderatorn var dold också att de kände sig mer självsäkra och villiga att utforska applikationen ytterligare. (Less)
Please use this url to cite or link to this publication:
author
Andersson, Rasmus LU and Voigt, Fredrik LU
supervisor
organization
alternative title
Utvärdering av virtuell verklighet som ett verktyg för användbarhetstestning av flygunderhållningsapplikationer
course
MAMM01 20231
year
type
H2 - Master's Degree (Two Years)
subject
keywords
Virtual Reality, VR, Usability Evaluation, Usability Testing, UX
language
English
id
9125491
date added to LUP
2023-06-15 12:35:50
date last changed
2023-06-15 12:35:50
@misc{9125491,
  abstract     = {{This thesis aims to evaluate the feasibility of using virtual reality as a medium for usability testing. Usability testing has long been an important part of any iterative development process. Most usability testing is, however, done in a lab setting, outside the product's natural environment. Virtual Reality (VR) on the other hand can engross a user in any environment.

This thesis was done in an iterative manner, splitting it into two iterations both with a development phase and a testing phase. The first iteration's development phase involved creating the VR application which was going to simulate an aeroplane environment for the participant. The application created a one-to-one mapping between a physical screen that the users tapped on and its streamed counterpart which they saw in VR. The testing phase then continued by writing a full test plan and conducting a usability test on an In-Fligt Entertainment (IFE) map application. The second iteration took the results and feedback from the first and improved on the most lacking parts, namely the mapping between the virtual and real-life screens. It contained the same steps as the first iteration but improved only on existing aspects rather than creating anything new. 

The final VR application put forth after the second iteration showed that VR can be used as a medium for usability testing. Using VR does increase costs and workload for the test researchers but the negative aspects are outweighed by the benefits. The participants' answers show that VR makes the tests more interesting and more realistic. For some users, the fact that the moderator is hidden also makes them more confident and want to explore the application further.}},
  author       = {{Andersson, Rasmus and Voigt, Fredrik}},
  language     = {{eng}},
  note         = {{Student Paper}},
  title        = {{Evaluating Virtual Reality as a Medium for Usability Testing on Inflight Entertainment Applications}},
  year         = {{2023}},
}