Big data feldolgozása és elemzése – ingyenes tanfolyam az Open Education-tól, képzés 2 hetes, körülbelül heti 36 óra, dátum: 2023. november 29.
Vegyes Cikkek / / November 30, 2023
Ph.D. Beosztás: egyetemi docens, Vezérlőrendszerek és Robotika Kar, docens, Digitális Kultúra Felsőiskola, ITMO Egyetem
Fizikai és matematikai tudományok kandidátusa Pozíció: docens, Digitális Kultúra Felsőiskola, ITMO Egyetem
Ph.D. Beosztás: docens, Digitális Kultúra Felsőiskola, ITMO Egyetem
1. modul 1.1. témakör: Bevezetés az adattudományba Az adatok típusait és forrásait, alapelveit tárgyalja adatok szétválasztása, összevonása, mérleg típusai, adattisztítási és hiánypótlási módszerek, ellenőrzés tartományok. Témakör 1.2 Adatfeldolgozó eszközök Az elsődleges adatfeldolgozó eszközöket tárgyalja, mint például a táblázatokat (Google táblázatok és Excel), az adatok rendezésének és szűrésének, táblázatos adatok összesítésének és elemzésének (pivot táblák) eszközeivel foglalkozik 1.3. témakör Vizualizáció adatok Az adatok megjelenítésének feladatai és módszerei különböző eszközökben (Google táblázatok és Excel), mennyiségi ill. minőségi adatok. A kognitív adatvizualizációt figyelembe veszik. 1.4. témakör Az adatok elemzése és átalakítása Az adatok simításának és normalizálásának módszereit, az adatátalakítás kérdéseit tárgyaljuk. Részletesen ismertetjük a leíró statisztikák típusait és számítási módszereit. 1.5. témakör Munka idősorokkal Az idősorokkal való munkavégzés alapelveit és elemzésük módszereit tekintjük át. Különös figyelmet fordítanak az idősorok simítására szolgáló technikákra, az idősorok trendjeinek és szezonális összetevőinek meghatározására.
2. modul Big Data Storage témakör 2.1. Adatbázis-kezelő rendszerek Az információs rendszerek architektúráját és az adatbázis-kezelő rendszerek fő funkcióit tekintjük át. Téma 2.2. Strukturált adatok tervezése A relációs (táblázatos) modell alapfogalmait tekintjük át adatok, adatok tervezése relációs modellben, táblák létrehozásának szabályai és integritási megkötések meghatározása. Téma 2.3. SQL - lekérdezések adatokhoz és adatbázis-objektumokhoz Az SQL nyelvű adatok lekérdezéseinek felépítésének alapelvei, beleértve a vetítést, rendezést, kiválasztási feltételek beállítását, több tábla összekapcsolását, halmazelméleti műveleteket, beágyazott kéréseket. Az előadásban szó lesz még az adatbázis objektumokról - nézetek, eljárások/függvények, triggerek. Adott az indexek fogalma, amely számos lekérdezés végrehajtásának hatékonyságát javíthatja. Téma 2.4. NoSQL tároló A NoSQL rendszerek alapfogalmai és jellemzői, a NoSQL rendszerek különféle típusai és minősítései: kulcsérték, dokumentum, oszlop és grafikon. A NoSQL-tárolókban lévő adatok lekérdezésének felépítésének elvei. Téma 2.5. MongoDB – dokumentumtárolási munkák Az adatok rendszerezését és lekérdezések létrehozását tárgyalja a MongoDB-ben. Példák találhatók a MongoDB demóadatbázisban lekérdezések felépítésére.