Automaatiotestaus ja Robot Framework : Asennus, testien kirjoittaminen sekä ylläpidettävyys

Abstract

Opinnäytetyössä tutkittiin Robot Frameworkin soveltuvuutta testauksen automatisointiin.

Opinnäytetyössä Robot Framework asennettiin Windows 7- ja Ubuntu 11.04 -käyttöjärjestelmille. Käyttöjärjestelmille asennettiin Python, Java JRE, Jython, Robot Framework ja Robot Framework SeleniumLibrary -ohjelmat ja molemmille käyttöjärjestelmille kirjoitettiin asennusohjeet, jotka löytyvät liitteet osiosta. Asennuksissa kohdatut ongelmat ja niihin löydetyt ratkaisut on kuvattu opinnäytetyössä.

Asennuksien lisäksi Robot Framework otettiin käyttöön Atlassian Bamboo 3.4.2- ja TeamCity 6.5.6 -jatkuvan integraation ympäristöissä. Ympäristö asetettiin hakemaan testit versionhallinnasta, suorittamaan testit ja lopuksi kertomaan käyttäjälle testien tulokset.

Opinnäytetyössä selvitettiin, kuinka testeistä saisi sellaisia, ettei niitä tarvitsisi muuttaa, tai tarvittava muutos olisi hyvin pieni, vaikka sivuston toteutus muuttuisi taustalla.

Robot Frameworkin testien kirjoittamiseen tarkoitetun RIDE editorin käytettävyyttä arvioitiin 11 kriteerillä ja löydetyt käytettävyysongelmat arvioitiin 3-tasoisella asteikolla. Käytettävyys arvioitiin opinnäytetyössä saadun materiaalin avulla.

Opinnäytetyössä kartoitettiin testien uudelleenkäytön mahdollisuuksia. Mitä tapoja Robot Framework tarjoaa testien jakamiseen pienempiin osiin ja uudelleen käyttää näitä osia myöhemmin.

The objective of this thesis was to study the suitability of Robot Framework for test automation and it was assigned by Digia.

The thesis describes Robot Framework installation to Windows 7 and Ubuntu 11.04 operating systems. Python, Java JRE, Jython, Robot Framework and Robot Framework SeleniumLibrary programs were installed to these systems. For both systems there is an installation guide which can be found as an appendix. The encountered problems and solutions for those problems are described in the thesis.

In addition to the installations Robot Framework was introduced in Atlassian Bamboo 3.4.2 and TeamCity 6.5.6 continuous integration environments. The environments were set to get the tests from the version control, to execute the tests and finally show the user tests results.

This thesis researched how tests could be written in a way, that they do not need to change even though the implementation changes. If a change is necessary, what is the best way to minimize the necessary change?

Robot Framework test writing editor RIDE usability was evaluated using 11 criteria and the usability issues that were found were rated using a 3-step scale. Usability was evaluated based on the material gained during the thesis writing process.

In this thesis opportunities for reuse were studied, in particular in what ways Robot Framework offers to divide tests into smaller components and reuse these components later.