Mobile Application Usability Research : Case Study of a Video Recording and Annotation Application

Abstract

The purpose of the final year project was to evaluate the usability of AchSo!, an Android application, developed as a tool for informal learning. The goal of the study was to identify usability issues within the application and to determine if the application supports the goals set for its use.

The usability study of AchSo! was conducted as a part of larger user research, the goal of which was to study the suitability of the application for the field of healthcare.

Both qualitative and quantitative data was gathered. The qualitative and quantitative usability research was conducted in two separate field studies, which involved 45 users, who were nursing students studying at Metropolia University of Applied Sciences. The classrooms of the Tukholmankatu campus of Metropolia worked as an environment for the study. During the field studies the students participated in a practical examination. The users were observed while they used AchSo!, and data was also collected using interviews and questionnaires.

The data collected through the questionnaire was analyzed using quantitative methods, and it was used to identify usability issues, whereas the observations and interviews were used to get a better understanding of the users’ experiences with application.

Analyzing the data showed that some parts and functions of the application need to be fixed or revised. One of the discovered issues was a major usability error, which resulted in the loss of a recorded video. According to the users, the categories for the videos were not clear and were not relevant for their field of work. After the first field study the design of the user interface of AchSo! was updated according to the new guidelines of Google.

Despite the individual usability issues, the overall usability of AchSo! is good, and the users felt that the application could be used as a tool to support learning.

Insinöörityön tarkoituksena oli tutkia mobiililaitteilla käytettävän videokuvaus- ja annotointisovelluksen käytettävyyttä. Tutkimuksen tavoitteena oli kartoittaa sovelluksen käytettävyysongelmia ja selvittää, tukeeko sovellus sen käytölle asetettuja tavoitteita.

Käytettävyystutkimus tehtiin osana laajempaa käyttäjätutkimusta, jonka tarkoituksena oli selvittää sovelluksen sopivuutta ja käyttömahdollisuuksia terveydenhuollossa työskenteleville henkilöille.

Kvalitatiivinen ja kvantitatiivinen käytettävyysutkimus tehtiin kahtena erillisenä kenttätutkimuksena, joihin osallistui yhteensä 45 ammattikorkeakoulun sairaanhoitajaopiskelijaa. Testausympäristönä toimivat ammattikorkeakoulun kampuksen luokkatilat, joissa opiskelijat osallistuivat elvytyskokeeseen. Testikäyttäjien sovelluksen käyttöä tarkkailtiin ja tietoa kerättiin haastatteluin sekä sovelluksen tutkimusta varten suunnitellun käytettävyyskyselyn avulla.

Kyselyiden avulla kerättyä tietoa käytettiin käytettävyysongelmien paikallistamiseen, ja haastatteluja ja havaintoja käytettiin täydentämään tietoa käyttäjien kokemuksista.

Kun tulokset analysoitiin, kävi ilmi, että joitain sovelluksen toimintoja ja ominaisuuksia tulee korjata tai uudelleenarvioida. Yksi vakava käytettävyysongelma havaittiin, kun käyttäjä ei valinnut kuvaamalleen videolle kategoriaa, jolloin video ei tallentunut. Videoiden kategoriavaihtoehdot eivät käyttäjien kokemuksen mukaan olleet aivan selkeitä, tai ne eivät kuvastaneet käyttäjien työlle ominaisia tilanteita. Ensimmäisen kenttätutkimuksen jälkeen myös sovelluksen ulkoasu muutettiin vastaamaan uusimpia ohjeita.

Yksittäisistä käytettävyyspuutteista huolimatta tutkitun videokuvaus- ja annotointisovelluksen käytettävyys on pääosin hyvä, ja käyttäjät kokivat sen sopivan oppimista tukevaksi työkaluksi.