Smoke Testing Bench for FreeNEST Service

Abstract

The main objective of this study was to create a set of thirty automated tests. These tests verify some of the basic functionality of different components included in FreeNEST.

FreeNEST is a web based project management tool developed in the SkyNEST project, which is hosted inside the JAMK University of Applied Sciences. FreeNEST consist of several different open source based software tools. The set of tests created in this study aims at replacing manual tests that have to be performed repeatedly with automatic tests executable by using a test automation framework called Robot Framework.

The tests are meant to be executed using the OpenStack cloud developed and maintained by SkyNEST project. In the theory part of this study the benefits and restrictions of automated and manual testing are compared and different methods used in testing are presented.

Additionally, the tools and software used in the creation of the tests are introduced in the text and the creation of a single test is explained step by step using the RIDE editor, which is the test case editor of Robot Framework.

The test cases were finished on time and executing them using the virtual machines created in the OpenStack cloud was successful. The total coverage of the created tests however remained slightly incomplete, due to certain restrictions in the current test execution system.

Opinnäytetyön tarkoituksena oli luoda kolmenkymmenen automaattitestin sarja FreeNEST-ohjelmiston eri komponenttien testaamiseen. FreeNEST on Jyväskylän ammattikorkeakoulun sisällä toimivan SkyNEST-projektin kehittämä selainpohjainen projektitöissä käytettävä ohjelmisto, joka koostuu useista eri avoimen lähdekoodin työkaluista. Työssä luotu testisarja pyrkii korvaamaan useasti toistettavien testien manuaalisen suorittamisen automatisoiduilla testeillä, jotka voidaan ajaa käyttäen Robot Framework nimistä testiautomaatiotyökalua.

Testit on tarkoitus ajaa käyttäen hyödyksi SkyNEST-projektin omaa OpenStack-pohjaista pilvipalvelua, jota myös kehitetään tällä hetkellä projektin sisällä. Työn teoriaosassa on vertailtu automaattitestauksen ja manuaalitestauksen etuja ja rajoituksia sekä esitelty eri testauskäytäntöjä ja testien luomisessa ja ajamisessa käytetyt työkalut ja ohjelmat.

Työssä on myös esitelty yhden testitapauksen valmistuminen askelittain käyttäen apuna RIDEeditoria, joka on Robot Frameworkin oma testienluontityökalu.

Testien luonti onnistui ajallaan ja niiden ajaminen OpenStack-pilveen luoduilla virtuaalikoneilla voitiin suorittaa. Testien kattavuus kuitenkin jäi tiettyjen testien suorittajaan liittyvien rajoitusten takia puutteelliseksi ja täten kaikille FreeNEST ohjelman perustoiminnoille ei saatu vielä luotua testisarjoja.