SQL Server Integration Services : -ETL-prosessien kehittäminen

Abstract

Tämän opinnäytetyön tarkoituksena oli tutkia erityyppisten tietolähteiden ja tievarastojen välisten tiedonsiirtojen toteuttamisessa käytettävää ETL-toteutusmallia ja sen eri vaiheita. Työn tarkoituksena oli tutkia myös, että minkä tyyppisiä tietokonesovelluksia ETL-rajapintojen kehittämisessä käytetään. Tähän liittyen työn tarkoituksena oli tutkia lisäksi, että miten SQL Server -tietokantaohjelmistoon liittyvän SQL Server Integration Services -ohjelmiston avulla luodaan ETL-toteutusmallin mukaisia tiedonsiirtorajapintoja.

Tämän opinnäytetyön teoriaosuudessa käytiin läpi ETL-toteutusmalliin liittyvät poiminta-, muunto- ja lataus-vaihe sekä selvitettiin ETL-tiedonsiirtojen toteutuksessa käytettävien tietokonesovellusten käyttötarkoitus, toimintalogiikka ja hyödyt. Työn käytännön osuus muodostui sen sijaan SSIS-ohjelmiston arkkitehtuuriin kuuluvien keskeisten tekijöiden läpikäynnistä. SSIS-ohjelmiston toimintaa tutkittiin lisäksi laajasti käytännön esimerkkien avulla. Tutkimuksen painopiste oli selkeästi SSIS-ympäristön teknisen toiminnan tutkimisessa.

Tutkimuksen avulla voitiin ottaa kantaa siihen, että miten SSIS-ohjelmisto soveltuu erityyppisten ETL-rajapintojen kehittämiseen huomioiden sekä yrityksen että teknisen näkökulman. Tutkimuksen avulla voitiin ottaa kantaa myös SSIS-ohjelmiston käytettävyyteen. Tällä tarkoitetaan esimerkiksi sitä, että kuinka helppoa SSIS-ohjelmiston avulla on luoda ETL-mallin mukaisia tiedonsiirtorajapintoja.

The purpose of this thesis was to examine the different phases of ETL model which is used in the implementation of data transfers between different types of data sources and data warehouses. The purpose of this thesis was also to examine the characteristics of software that is used in the implementation of ETL processes. In this context the study concentrated on how to implement ETL data transfers using SQL Server Integration Services, which is a feature in the SQL Server database management system.

The theoretical part of this thesis examines the ETL model's extract, transform and load phases as well as the use, logic and advantages of software which is used in the implementation of ETL data transfers. The practical part of the study discusses the main aspects of SSIS architecture. The functionality of the SSIS platform was also examined extensively with the help of pratical examples. The focus in this study was distinctly on examing the functionality of the SSIS platform.

The results of this study made it possible to take a stand on how the SSIS platform is suited in developing different types of ETL data transfers from the view point of company deploying it and that of the technology. In addition to this, the study made it possible to assess the usability of the SSIS platform such as how easy it is to use the SSIS platform in developing ETL data transfers.