Prototyyppilaitteiden automatisoitu rautapohjaisen suorituskyvyn testaus

Abstract

Tämän opinnäytetyön toimeksiantaja oli Digia Oyj. Digia Oyj on ohjelmistokehitysyritys, joka toimittaa tieto- ja viestintäteknologian ratkaisuja maailmanlaajuisesti. Digia Oyj on myös vahva toimija mobiililaitteiden ohjelmistotestauksessa.

Tämän opinnäytetyön tarkoituksena oli löytää toimiva konsepti rautapohjaisten vikojen löytämiseksi prototyyppilaitteista testaamalla enimmäkseen automatisoidusti laitteiden rautapohjaista suorituskykyä. Konseptin käytännön toteutuksen oli oltava sekä nopeasti että mahdollisimman vähällä työmäärällä toteutettavissa, jotta ohjelmistotestauksesta ei tarvitsisi kuluttaa liikaa resursseja. Myös prosessin, jonka perusteella rautapohjaiset viat erotetaan ohjelmistopohjaisista virhetiloista, oli oltava selkeä ja yhtenäinen.

Digia Oyj:n kohdetoimialue mobiililaitteiden testauksessa on ohjelmistopohjainen testaus. Yhden mobiililaitteen mallin kehityskaaren aikana tehdään kuitenkin useita versioita sekä rautatoteutuksesta että ohjelmistototeutuksesta. Koska ohjelmistotestauksessa käytetään vielä kehitysvaiheessa olevia laitteita, on mahdollista, että myös prototyyppilaitteen rautatoteutuksen valmistuksen yhteydessä on tapahtunut virheitä. Tästä johtuen on tärkeää löytää rautapohjaisesti rikkinäiset laitteet ennen niiden laittamista ohjelmistotestaukseen. Rikkinäisillä laitteilla tehdyn ohjelmistotestauksen tulosten paikkansapitävyys on kyseenalaista, joten kyseiset testitapaukset pitää suorittaa uudelleen toimivalla laitteella. Uudelleen testaus taas aiheuttaa turhaa työtä ja kuluttaa resursseja.

Testauskonseptiin suunniteltiin sekä manuaalista suorituskyvyn testausta että automatisoitua kestävyystestausta. Käytännön toteutuksesta saatujen tulosten perusteella voidaan todeta, että on mahdollista erottaa selkeästi rautapohjaiset viat ohjelmistopohjaisista käyttämällä testauskonseptissa suunniteltuja testausprosesseja. Tuloksien vahvistukseksi ajettu pidempi referenssiajo varmisti testauskonseptin tuloksien paikkaansapitävyyden ja toimivuuden. Myös vaatimukset mahdollisimman pienestä työmäärästä sekä ajan kulusta käytännön toteutuksen suhteen onnistuttiin täyttämään.

This Bachelors Thesis was assigned by Digia Oyj. Digia Oyj is a software company, which delivers information and communication technology solutions worldwide. Digia Oyj is also oriented to software testing of mobile devices.

The purpose of this Bachelor’s Thesis was to find a working concept for testing automatically hardware performance of prototype devices in order to find possible hardware based faults. The main requirements of the concept were that the hands-on implementation should be done as fast and with as little work as possible, due to the limited amount of recourses. In addition the process of isolating hardware based bugs from software based errors should be clear and coherent.

Digia’s main scope in mobile testing is to find software bugs from the software versions. However there are several software and hardware versions developed during development process of one single model and therefore it is possible that errors have occurred during the making of hardware versions. Thus it is important to find faulty hardware versions before those are used in software testing. Testing results are not valid if faulty hardware has been used for testing and test cases need to be re-tested.

The testing concept was designed to use both manual performance and automated reliability testing. According to the results of the executed test concept it is possible to clearly isolate the hardware based faults from software based bugs by using the processes designed in the testing concept. The longer reference test execution verified that the results from the hands-on testing of the concept were valid. Also the requirements regarding the minimal time consumption and work efforts were met in the testing concept.