Päätelaitteiden testauksen raportointijärjestelmä pilvialustalla

Abstract

Teleoperaattorille palvelujen ja laitteiden testaus on olennainen osa laadunvalvontaa. Insinöörityön tarkoituksena oli parantaa päätelaitetestien raportointia. Päätelaitetesteissä havainnoidaan päätelaitteiden suorituskykyä, sisäistä toimintaa sekä laitteen ja verkon välisiä asioita. Insinöörityön toimeksiantajana oli Suomessa toimiva teleoperaattori.

Insinöörityön tavoitteena oli verkkoyhteydellä varustettujen päätelaiteiden testitulosten asettaminen automaattisesti käyttäjien saataville niin, että data on ymmärrettävässä graafisessa muodossa ja helposti saatavilla. Ennen raportointijärjestelmän rakentamista testaajat keräsivät testitulokset raporttimuotoon manuaalisesti raakadatasta, testiraporteille ei ollut keskitettyä säilytyspaikkaa ja testituloksien saaminen visuaaliseen muotoon oli työlästä.

Raportointijärjestelmän pääkomponentteina toimivat datan käsittelyä tarjoava lokienhallintaohjelmisto sekä julkisen pilven palvelu, joka tarjoaa konesalikapasiteettia. Insinöörityön keskeisenä tavoitteena oli järjestelmän alustana toimivan konesalin suunnittelu ja toteutus pilveen, mikä vaati saumatonta integraatiota sovellusten kesken.

Insinöörityön tuloksena syntyi testitulosten raportointijärjestelmä, joka käyttää skaalautuvaa pilvialustaa. Raportointijärjestelmä tallentaa ja tuottaa käyttäjille automaattisesti visuaalisia testiraportteja keskitetyssä paikassa. Raportointijärjestelmän automaatio saatiin nostettua halutulle tasolle ja testitulokset kulkeutuvat testiajojen jälkeen automaattisesti parsittaviksi ja visuaalisiksi raporteiksi verkkokäyttöliittymään, johon tehtiin kahdet eritasoiset käyttäjätunnukset. Raporteista on selkeästi havaittavissa testiajojen tulokset ja mahdolliset epäkohdat.

This engineering thesis was commissioned by the Finnish network operator. For a network operator, it is an essential part of quality assurance to continuously test any user equipment, particularly before releasing any new products and services to the consumers. This study examines the test log management system for equipment such as mobile phones and modems with the main testing areas which are performance, device features and various network functionalities.

The objective of this thesis was to plan, build and implement a centralized test log management system on a scalable cloud platform. Before the implementation of the test log system implementation that is described in this study, a data collection and a results processing were done manually by the test engineers. Test reports had to be compiled manually and there was no common place to store them nor was it easy to create visual graphs or charts making the whole test reporting process cumbersome.

The test log management system implemented in this study is using two major components: a software for data compliance and a public cloud solution. One of the key discussion points of this thesis was the design and implementation a virtual data center that hosted the entire system. The theory part of the study discussed the utilized cloud platform service features and service model. Study also introduced Splunk software architecture and functionalities while compared to a similar open source product ELK (Elasticsearch, Logstash and Kibana).

The study enabled the implementation of the automated log management system that collects and compiles test data from various different sources, creates visual reports on the go and archives them for easy user access.