Sanomapohjaisen datan prosessointi big datan avulla
Nironen, Toni (2020)
Nironen, Toni
2020
All rights reserved. This publication is copyrighted. You may download, display and print it for Your own personal use. Commercial use is prohibited.
Julkaisun pysyvä osoite on
https://urn.fi/URN:NBN:fi:amk-2020120426214
https://urn.fi/URN:NBN:fi:amk-2020120426214
Tiivistelmä
Tämän opinnäytetyön tavoitteena oli suunnitella ja toteuttaa malli, jonka avulla uuden verkkoteknologian tuottamaa sanomapohjaista dataa voidaan yhdistellä avoimeen lähdekoodiin perustuvilla ratkaisuilla. Tutkimus on toteutettu hyödyntäen konstruktiivista tutkimusotetta, joka sopi hyvin tämän tyyliseen kehittämiseen, jossa halutun tuloksen osalta oli olemassa selkeä tavoite.Työssä käytetyn tutkimusotteen vahvuuksia ovat sen mahdollistama iteratiivinen kehittäminen, sekä konstruktion soveltaminen useisiin käyttötarkoituksiin. Opinnäytetyön lopputulos saavutti sille asetetut tavoitteet ja siitä saadut tulokset olivat luotettavia, vaikkakin testausta ei ollut työn loppuvaiheessa mahdollista toteuttaa halutulla tavalla. Siitä huolimatta työ voidaan todeta onnistuneeksi ja kehitetyn ratkaisun avulla on mahdollista toteuttaa datan yhdistelyä Apache Spark:iin pohjautuvissabig data -järjestelmissä.