Web Application Test Automation with Robot Framework

Abstract

The goal of this thesis was to provide a proof of concept that keyword-driven test automation with the Robot framework is feasible and that it would actually reduce the amount of manual work during the testing phase of projects. The result was an easily expandable demonstration configuration (test data suite), which could be taken into use with a few customizations depending on the project.

First, theory of test automation was examined to assess the benefits and the issues in test automation. The Robot framework was chosen as the test automation framework, because it is open source, thus making it free to use, and because it is platform independent, thus a great choice of software to be run on top of a virtual system. Automated tests were run against Service Now’s Service Catalog homepage. The homepage is a web application similar to an online shop. It consists of order forms built for an organization’s needs to support their internal order processes. These processes can include, for example, ordering a new laptop for an employee. The test automation, when executed, navigates in the webpage, fills in the fields of the order forms, submits orders, reports possible errors and provides statistics. As a result, the test cases were written according to their equivalent use cases.

The result was a configurable test data suite: a set of test data files, which can be easily deployed for the Robot framework to execute. The thesis provides theory of the used techniques and instructions on how to implement a working test environment and the basis for a working test automation suite.

Before taken into use, the suite requires a few customizations that are needed depending on the project and the essential use cases. The suite can be used as a base for any Service Now platform test automation project. From a technical point-of-view, the goals of this thesis were reached, but studying the advantages and disadvantages of acceptance test-driven development could have been emphasized. Also more comparison between a human tester and a computer tester could have been made, to provide an easier choice for those who are contemplating the utilization of test automation in software development projects.

Insinöörityön tavoitteena oli tutkia Robot frameworkilla rakennetun testausautomaation kannattavuutta ja sen vaikutusta projektin testausvaiheen fyysiseen työmäärään. Lopputulemana syntyi helposti laajennettava testauskonfiguraatiokokoelma, joka voitaisiin ottaa käyttöön vain muutamalla muutoksella riippuen projektista.

Ensin testausautomaation teoriaa tutkittiin, jotta voitaisiin arvioida sen hyötyjä ja ongelmia. Robot framework valittiin testausautomaatio viitekehykseksi, koska se on avoimen lähdekoodin järjestelmä ja täten ilmainen. Robot framework on myös alustariippumaton, joten se on hyvä valinta virtuaaliseen järjestelmään.

Tuloksena saatiin konfiguroitava kokoelma testidatatiedostoja, joita voidaan helposti suorittaa Robot frameworkilla. Insinöörityö käsittelee käytettyjen tekniikoiden teoriaa, ja siihen on dokumentoitu toimivan testausympäristön rakennusvaiheet. Se tarjoaa myös pohjan toimivalle testausautomaatiokokoelmalle.

Riippuen projektista ja sen käyttötapauksista, testauskokoelma vaatii muutamia muutoksia ennen käyttöönottoa. Kokoelma itsessään tarjoaa perustan mille tahansa testausautomaatioprojektille, jonka testauksen kohteena on Service Now IT -palvelunhallintajärjestelmä.