Data Engineer nullától Juniorig - ingyenes tanfolyam a Skillboxtól, képzés, Időpont: 2023. november 29.
Vegyes Cikkek / / November 30, 2023
Kezdőknek
Tanulja meg a Pythont és az SQL-t a semmiből. Tanuljon meg adatokat gyűjteni, elemezni és feldolgozni. Oldja meg a problémákat valós esetek alapján, és adja hozzá portfóliójához. Az adatmérnöki pályafutást a tanulás közben is elkezdheti.
Programozóknak
Bővítse SQL-ismeretét, hogy adatbázisokkal dolgozhasson. A nyers adatok gyűjtésétől a modell üzembe helyezéséig az adatmérnök teljes útját fogja végigjárni. A programozási tapasztalat segít gyorsan megérteni egy új szakmát, és megváltoztatni a szakmát.
Kezdő elemzőknek
Ismerje meg az adatokkal való munka minden szakaszát. Tanuljon meg információkat gyűjteni különböző forrásokból, felépíteni egy architektúrát a tárolásukhoz, és megjeleníteni jelentéseket. Ön képes lesz önállóan előkészíteni az adatokat a későbbi elemzéshez.
A Machine Learning tanfolyam szerzője. Vezető adattudós, a SberData csapatvezetője, Sber. 5+ év a szakmában
Tanfolyam előadója, K+F igazgató, UBIC Tech. Több mint 15 éves fejlesztési tapasztalat
Adattudós a Sberbanknál, matematikus az Orosz Tudományos Akadémia Számítástechnikai Központjában. „A matematika alapjai az adattudományhoz” blokk. Több mint 4 éves felsőfokú matematika oktatási tapasztalat
Első szint: alapképzés
Ismerkedjen meg az adattudomány fő területeivel, képezze ki és valósítsa meg első ML-modelljét. Alapvető ismeretek megszerzése a matematika, a statisztika és a valószínűségszámítás területén. Mindez segít megérteni az adatokkal való munka alapelveit. Az átlagos befejezési idő 6 hónap.
Bevezetés az adattudományba
Az adatokkal való munka minden szakaszán keresztül kell mennie. Tanulja meg azonosítani a problémákat, összegyűjteni az üzleti követelményeket. Különféle forrásokból letölti az adatokat, feltáró elemzést végez, és előkészíti az adatkészletet a további felhasználásra. Tanítson és valósítson meg egy kész ML-modellt, próbálja ki magát termék- és marketingelemzőként. Tanulja meg hipotézisek megfogalmazását és tesztelését. Sajátítsa el a munka alapvető eszközeit: Python, SQL, Excel, Power Bi, Airflow.
Matematika alapismeretek az adattudományhoz
Szerezzen alapvető matematikai ismereteket a gépi tanuláshoz. Meg fogja érteni, mi az a közelítés, az interpoláció, a függvények, a regressziók, a mátrixok és a vektorok. Tanuljon meg matematikai entitásokkal dolgozni a SymPy Python könyvtárban.
A statisztika és a valószínűségszámítás alapjai
Megérted a valószínűségi változókkal és eseményekkel való munka alapelveit. Ismerkedjen meg bizonyos típusú eloszlással és statisztikai tesztekkel, amelyek hasznosak a modellek felépítésében és a hipotézisek tesztelésében.
Gyakornoki lehetőség
Az alapismeretek és készségek elegendőek a gyakorlat megszerzéséhez – a tanfolyamon és a cégnél is folytathatod a tanulást egyszerre.
Második szint: Adatmérnök Junior
Tanuljon meg összetett adatkészleteket gyűjteni, bemutatókat készíteni és folyamatokat készíteni a munkához, DS-projekteket a semmiből telepíteni és tesztelni a kódot. Készen állsz arra, hogy junior adatmérnökként dolgozz. Az átlagos befejezési idő 6 hónap.
Bevezető blokk
Tudja meg, mit csinál egy adatmérnök, milyen szerepet játszik egy adattudományi projektben, és mi a karrierje. Megérted, hogyan épül fel a kurzus, és milyen témákat fog tanulni.
SQL
Tanulja meg a meglévő táblákban lévő adatok kezelését, beszúrási, törlési és frissítési műveleteket. Az adatbázisból különböző formátumokban mentheti az adatokat. Ismerje meg az ablakfunkciókat és az adatpiacok SQL használatával történő előkészítésének alapjait. Tanulja meg az információk helyes beillesztését tranzakciós módban. Képes lesz elolvasni és megérteni a tranzakciós naplót. Ismerje meg, mik az indexek és az indexarchitektúra, és hol használják őket. Tanuljon meg technikákat a lekérdezések felgyorsítására.
Piton. 2 LVL
Fontolja meg az adattípusokat, azok konvertálásának módját, valamint a Python és az SQL együttmûködését – az adatok adatbázisból való lekérését, az adatokkal való munkát és a lekérdezések futtatását. Ismerje meg a JSON- és XML-adatsémák alapfogalmait. Konfigurálhatja az alkalmazások hibakeresését, írhat teszteket, anonimizálhatja és titkosíthatja az adatokat.
Python könyvtárak
Megtanulja, melyek a grafikonokkal való munkavégzéshez szükséges könyvtárak, a felügyelt tanulás, a metrikák és az adatkészletek forrásainak megjelenítése. Tanulja meg a Python és a könyvtárak használatát az adatok kezelésére. Folytathatod a pandák tanulását.
Légáramlat
Tekintse át az Airflow-val való munkavégzés kulcsfontosságú fogalmait és gyakorlatait. Tanulja meg az architektúra és az interoperabilitás alapjait a felhasználói felülettől a CLI-ig. Építse meg első adatfolyamát.
Spark alapjai
Master Spark: megtudhatja, milyen számítási erőforrásokon működik, hogyan tárolja az adatokat, és hogyan működik a memóriával és a lemezzel. Állítsa be első helyi standját. Ismerje meg az RDD alapjait: alapfogalmak, forrásokkal való munka, cselekvések. Tanuljon meg dolgozni a Dataframe API-val. Ismerje meg a Dataframe, az adatforrások és -típusok, az érvényes/érvénytelen adatokkal való munkavégzés, a hibakezelés, az UDF, a Python és az SQL interakciójának teljesítményével és optimalizálásával kapcsolatos problémákat.
A gépi tanulási algoritmusok alapjai
Megérti a gépi tanulási modellek fő típusait, a kulcsfontosságú kifejezéseket és definíciókat. Ismerje meg a regressziós algoritmusokat és a klaszterezési algoritmusokat.
Telepítés
Ismerje meg a modell bevezetésre való előkészítésének főbb szakaszait, az API felépítésének megközelítéseit, valamint a hibák kezelésének és az alkalmazások hibakeresésének módjait. Képes lesz elhárítani a telepítési problémákat és elsajátítani az alapvető swagger eszközöket. Ismerkedjen meg a bash kulcsfolyamataival: szkriptek írása, változókkal való munka, valamint a sed és awk szövegszerkesztők.
Végső projektek
Az első szint teljesítése után készítsen egy bevezető projektet. A kurzus végén bemutatja zárómunkáját.
Bevezetés az adattudományba
Konszolidálja új ismereteit egy egyedi projektben – az adatok betöltésétől a modell megvalósításáig fog eljutni. Oldja meg az adatmérnök, az ML mérnök és az adatelemző problémáit, hogy eldönthesse a specializációját.
Adatmérnök
Utolsó projekt Junior szinten. Végezzen kohorszelemzést, és töltse le az API-referenciákat. Készítsen irányítópultokat a kapott adatok alapján.
Bónusz tanfolyamok
Fejlesztői karrier: Foglalkoztatás és fejlesztés
Megtanulja, hogyan válasszon megfelelő állást, hogyan készüljön fel az interjúra, és hogyan tárgyaljon a munkáltatóval. Gyorsan olyan pozíciót kaphat, amely megfelel az elvárásoknak és készségeinek.
Git verziókezelő rendszer
Tanulja meg a verziókód-módosításokat, lerakatokat, ágakat létrehozni és kezelni, valamint feloldani a verziókonfliktusokat. Ismerje meg a Git-tel való munkavégzés hasznos szabályait.
Angol informatikusoknak
Szerezzen nyelvtudást, amely segít egy külföldi céggel való interjúban és kényelmesen kommunikál vegyes csapatokban.