Interaktív felderíto adatanalízis web technológiákkal

OData támogatás
Konzulens:
Kocsis Imre
Méréstechnika és Információs Rendszerek Tanszék

A mérnöki munkában mindig is komoly szerepet játszott a problémák minél pontosabb megértése és az adott kérdéskör összefüggéseinek a minél pontosabb feltárása. Erre az egyik legkézenfekvőbb módszer mérések végzése, majd e mérések eredményeinek különböző módszerekkel való elemzése. Az egyik ilyen módszer a mérnöki feltáró adatelemzés (Exploratory Data Analysis, EDA), amely nevéhez híven egy adathalmaz felderítését, tehát azon belül az egyes változók tulajdonságainak és közöttük lévő kapcsolatok feltárását takarja. Ennek támogatására a legfőbb eszköze az adatok interaktív módon való grafikus ábrázolása. Ez az ábrázolás jellegéből adódóan (grafikus megjelenítés, teljes adathalmazt érinti) csak meglehetősen kis adathalmazok mellett valósítható meg könnyedén, viszont a modern mérési eszközök rövid idő alatt óriási mennyiségű adat előállítására képesek. A munkám célja volt annak vizsgálata, hogy a hagyományos EDA módszerek hogyan terjeszthetőek ki úgy, hogy nagy mennyiségű adattal (Big Data) is használhatóak legyenek. A használhatóság mellett természetesen nem térhetünk ki a számítástechnikai trendek elől. Ebből a szempontból különösen a számítási felhők érdekesek, amelyek kézenfekvő tároló, feldolgozó rétegként jelennek meg a Big Data problémákban. Mivel a felhő alapú rendszerek nem választhatóak el a webtől ezért kulcsfontosságú, hogy az általam vizsgált EDA megoldások elérhetőek legyenek az interneten keresztül is.

Ebben a dolgozatban egy böngészőben futó interaktív adatfelderítő alkalmazást készítek el, amelyet Big Data vizualizációban is felhasználok. A dolgozatban kitérek a Big Datával való munka nehézségeire és e nehézségek lehetséges megoldásaira. Proof of concept jelleggel elkészítek egy előszámítás alapú Big Data vizualizációs megoldást, amelyet 2 platformon is kipróbálok.

Letölthető fájlok

A témához tartozó fájlokat csak bejelentkezett felhasználók tölthetik le.