Duomenų inžinerijos mokymai: valdymas ir analizė (223003461)

  • Mokymų programas rengia ir dėsto dėstytojai, dirbantys lyderiaujančiose IT įmonėse Lietuvoje. Todėl mokymų turinys atitinka naujausias rinkos tendencijas ir aktualijas.
  • Mokymų metu dirbsite su realiais projektais – tokiais pačiais, su kokiais susidursite įsidarbinę naujame darbe. Tai užtikrina, kad įgytos žinios ir įgūdžiai bus itin vertingi šiandieninėje darbo rinkoje.
  • Siūlome lanksčius mokėjimo būdus ir galimybę mokytis nemokamai, pasinaudojus UŽT ar „Kursuok“ finansavimu.
  • Mokymų programos atitinka tarptautinius darbo standartus.
  • CodeAcademy studentai pasižymi vienu didžiausių įsidarbinimo procentų Lietuvoje, o po mokymų gauna vienus didžiausių atlyginimų tarp visų mokymo įstaigų absolventų. ( Įdarbinimo procentas Vilniuje, Kaune ir klaipėdoje 94% visų baigusių studentų)

LAIKOTARPIS:

sausio 26 d. - kovo 20 d.

LAIKAS:

8:00-16:00

KALBA:

Lietuvių

TIPAS:

Pradedančių kursai

Kaina:

2850 €
100% finansuojama Užt

Kontaktinės valandos:

304 val.

Įrankiai ir kalbos

SQL
CI/CD
Python
Airflow
Github
NumPy
Pandas

Ateities profesijos

Duomenų analitikas
Cloud sistemų administratorius
BI inžinierius

Apie kursus

Duomenų inžinerija yra viena iš sparčiausiai augančių technologijų sričių, kuri tampa vis svarbesnė dėl nuolat didėjančio duomenų kiekio ir poreikio juos efektyviai valdyti, apdoroti ir panaudoti. Įmonės kaupia milžiniškus informacijos kiekius, tačiau kol duomenys yra neapdoroti jie nekuria vertės. Organizacijos norėdamos priimti duomenimis grįstus strateginius sprendimus (data driven decision making), reikalingi specialistai, gebantys sisteminti, transformuoti ir paruošti duomenis naudojimui, prižiūrėti duomenų bazes ir kad duomenys atitiktų ne vien kompanijos standartus, bet ir GDPR duomenu apsaugos reglamento.

Duomenų inžinerija – kas tai?

Tai sritis, apimanti duomenų rinkimo, apdorojimo, saugojimo ir perdavimo procesus, kurie leidžia įmonėms efektyviai naudoti duomenis sprendimų priėmimui. Kitaip tariant, duomenų inžinieriai kuria „duomenų infrastruktūrą“ – sistemas ir įrankius, užtikrinančius, kad duomenys iš įvairių šaltinių būtų tiksliai surenkami, išvalomi, struktūruojami ir pateikiami analitikams ar dirbtinio intelekto modeliams.

Šios srities specialistai dirba su dideliais duomenų kiekiais (Big Data), naudodami technologijas kaip SQL, Python, Apache Spark, Hadoop, Airflow, Kafka ar AWS, Google Cloud, Azure platformas. Jie užtikrina, kad duomenys būtų patikimi, prieinami realiu laiku ir tinkamai integruoti tarp skirtingų sistemų.

Duomenų inžinerija glaudžiai susijusi su duomenų mokslu ir analize, tačiau jų tikslai skiriasi. Duomenų mokslininkai kuria modelius ir analizuoja informaciją, o duomenų inžinieriai sukuria visą techninį pagrindą, kad ta analizė būtų įmanoma. Be geros duomenų infrastruktūros, net pažangiausi AI modeliai ar analizės įrankiai negalėtų veikti kokybiškai.

Ši sritis yra itin paklausi, nes įmonės vis labiau remiasi duomenimis priimdamos strateginius sprendimus. Duomenų inžinieriai padeda sujungti technologijas, procesus ir informaciją į vientisą sistemą, todėl jie tampa vienais svarbiausių specialistų šiuolaikinėje duomenimis grįstoje ekonomikoje. Taigi, duomenų inžinerija – tai pamatas, ant kurio statomi visi šiuolaikiniai skaitmeniniai sprendimai.

Įsidarbinimo galimybės

Programa

  • 1 tema
  • 2 tema
  • 3 tema
  • 4 tema
  • 5 tema
  • 6 tema

Python 104 val.

Python programavimo kalbos konceptai I

  •  Įvadas į Python programavimo kalbą
  •  Virtualios aplinkos paruošimas ir pirmoji programa
  •  Kintamieji ir jų tipai
  •  Ciklai, klaidų generavimas (Raise value errors)
  •  Funkcijos
  •  Failų ir katalogų valdymas
  •  Lokalus, nelokalus ir globalus veikimo laukas
  •  Objektinis programavimas, klasės
  •  Individuali užduotis: OOP klasės kūrimas

Kodo versijavimas

  • Nuolatinės integracijos ir diegimo (CI/CD) apžvalga
  • Kodo versijavimas naudojat Git
  •  Saugyklų kūrimas
  • Funkcinių šakų valdymas, sujungimai, traukimo užklausos
  • Individuali užduotis

Python programavimo kalbos konceptai II

  • Duomenų transformacijos naudojant Regex, numpy, pandas
  • Individuali užduotis: duomenų valymas ir analizė
  •  Individuali užduotis

Python programavimo kalba pažengusiems

  • Funkcijų dekoravimas
  • Iteratoriai ir generatoriai
  • Paveldimumas bei abstrakčios klasės ir funkcijos
  •  Individuali užduotis

Aplinkos izoliacija

  •  Įrankis Docker ir konteinerizacija
  • Docker atvaizdžių (angl. image) kūrimas bei vykdymas
  • Individuali užduotis.

Duomenų bazės ir SQL 60 val.

Įvadas į duomenų bazes ir SQL

  • Įvadas į reliacines duomenų bazes bei jų valdymo įrankius
  • Duomenų bazių pagrindai, dizainas, schemos
  • Žvaigždės ir snaigės schemos prieš faktų/dimensijų lenteles (angl. Star/Snowflake vs fact/dimension tables)
  • Lentelių apimtis: laikinos globalios ir lokalios lentelės
  • CRUD operacijos ir ACID savybės
  •  Duomenų normalizavimas/denormalizavimas
  •  Įvadas į SQL
  •  Aplinkos paruošimas SQL užklausų rašymui bei pirmosios užklausos rašymas

SQL užklausų rašymas

  • Duomenų peržiūra naudojant SELECT, filtravimas naudojant WHERE ir agregavimas naudojant GROUP BY
  • Lentelių apjungimas užklausoje naudojant JOIN
  • Agregavimas su GROUP BY, LEAD/LAG, CASE WHEN, RANK, langų funkcijos (window functions)
  • Sub-užklausų (subqueries) rašymas
  • Užklausų struktūrizavimas naudojant CTE (common table expressions)

SQL pažengusiems

  • Užklausų optimizavimo technikos
  • Duomenų bazių objektų kūrimas, modifikavimas ir šalinimas (DDLs)
  • Saugomos procedūros (Stored procedures)
  • Jungimasis prie duomenų bazės naudojant Python
  •  Individuali užduotis: darbas su DATE formatais

Bash programavimas 16 val.

Įvadas į Bash skriptų rašymą

  • Bash ir Shell aplinkos pristatymas
  • Pagrindinės Shell komandos
  •  Darbas su failais ir leidimais
  • Aplinkos kintamieji (Environment variables)
  • Skriptų kūrimas ir paleidimas
  • Individuali užduotis

Airflow 80 val.

Įvadas į Airflow

  • Airflow architektūros komponentai
  • Airflow web serverio tyrinėjimas

Airflow pradmenys

  • Pirmojo DAG (Directed Acyclic Graph) kūrimas
  • Užduočių priklausomybės valdymas (dependencies management)
  •  Airflow duomenų rinkiniai (datasets)
  •  Užduotys, užduočių grupės ir operatoriai
  • Užduočių komunikacija naudojant Xcom
  •  Pirmojo pasirinktinio (custom) operatoriaus kūrimas

Tarpinis patikrinimas – individuali užduotis

 

Individualus baigiamasis projektas 40 val.

Dirbtinio intelekto įrankių naudojimas 4 val.

  • Informacijos paieška su AI pagalba
  • Sprendimų generavimas naudojant AI

Programos kalendorius

LAIKOTARPIS:

sausio 26 d. - kovo 20 d.

LAIKAS:

8:00-16:00

KALBA:

Lietuvių

Kaina:

2850 €
100% finansuojama Užt

Kontaktinės valandos:

304 val.

Programa:

Atsisiųsti

Išsimokėjimo galimybės

Mes siūlome tiek skirtingų išsimokėjimo galimybių ir lengvatų, kad sukūrėme skaičiuoklę savo galimybes pasiskaičiuoti pačiam – visai kaip banke. 💸

Už CodeAcademy kursus galima atsiskaityti dalimis

  • Nuo 89 €/mėn.

100% Užimtumo Tarnybos finansavimas

  • Užimtumo Tarnybos finansavimas leidžia persikvalifikuoti dirbantiems ir įgyti naujas kompetencijas nedirbantiems! 🚀

Mokėk po sėkmingo įsidarbinimo!

  • Mėnesinis mokestis – 10% nuo Neto pajamų, su galimybe turėti mokėjimo atostogas iki 5 mėnesių.

Privalumai

1. Mokymosi Aplinka

Jauki ir moderni mokymosi erdvė su visa reikalinga įranga patogiam ir efektyviam mokymuisi.

2. Karjeros centras

Mūsų karjeros centras padeda studentams sklandžiai pereiti į IT darbo rinką. Konsultuojame, ruošiame darbui ir suteikiame galimybes užmegzti ryšius su darbdaviais.

CV ir LinkedIn korekcijos

Konsultacijos metu susikursi tokį CV ir LinkedIn profilį, kurie pritaikyti persikvalifikavusiam žmogui. Bendradarbiaudami su įmonėmis nuolat konsultuojamės, kokį CV ir LinkedIn jie nori matyti iš persikvalifikavusio žmogaus. Šias žinias perduodame CodeAcademy studentams, kad būtų pastebėti įdarbinimo specialistų.

Darbo paieškos strategijos sukūrimas

Suprasdami, kad šiais laikais darbo paieškos gali užtrukti, studentams sudėliojame aiškų žingsnių planą, kuris padeda ieškotis darbo tikslingai, efekyviai ir rezultatyviai.

Darbo pokalbio simuliacija

Tik gero CV, LinkedIn profilio ar puikios darbo paieškos strategijos nepakanka. Tau reikia išmokti save pristatyti darbo pokalbyje taip, kad parodytum, jog esi tinkamas kandidatas. Karjeros centre mokiname studentus tinkamai atsakyti į populiariausius darbo pokalbio klausimus.

Mentorystė

Suprasdami, kad darbo paieška kartais gali būti sekinantis procesas, Karjeros centras suteikia mentorystę visiems CodeAcademy studentams. Jeigu studentai susiduria su sunkumais ieškantis darbo, konsultuojame ir padedame žmogui tol, kol jis gauna darbo pasiūlymą.

Upskill

Bent kartą į mėnesį Karjeros centras organizuoja renginius, kurie yra skirti tik CodeAcademy studentams. Upskill renginiai yra įvairaus tipo – nuo minkštųjų įgūdžių tobulinimo iki susitikimų su įmonėmis. Šio tipo renginiai yra ypač svarbūs persikvalifikuojantiems ir tapusiems junior lygio specialistais. Įmonės mėgsta paklausti: ką veikei kol ieškojaisi darbo? Ir, jei galėsi atsakyti, kad dalyvavai įvairiuose renginiuose ir tobulinai save, tapsi pranašesniu kandidatu.

Rekomendacijos įmonėms

Bendradarbiaudami su nemažu skaičiu įmonių ir nuolat pildant partnerių sąrašą pažangiausius studentus rekomenduojame įmonėms. Net ir savarankiškai suaplikavus, jei studentas buvo pažangus, mokėsi puikiais pažymiais, parašome įmonei rekomedaciją. Kas šiais laikais yra itin svarbu!

 

Sėkmės istorijos

3. Diplomas

Baigus kursus suteikiame tarptautiniu mastu pripažįstamus sertifikatus, padedančius sėkmingai įsitvirtinti IT rinkoje.

Trumpa online konsultacija

Nori sužinoti daugiau apie mūsų siūlomus kursus? Užsiregistruok 30 min. konsultacijai su mūsų programų specialistu, kurios metu galėsi užduoti tau rūpimus klausimus ir gauti profesionalius patarimus.

Registracija paprasta – pasirink sau tinkamą laiką ir mes su tavimi susisieksime! 👇







Dažniausiai užduodami klausimai

Kursų grafikas yra fiksuotas, visos pamokos yra vedamos gyvai, profesionalių CodeAcademy dėstytojų, kuriems, paskaitų metu, galite užduoti klausimus, pasitikrinti namų užduotis, gauti patarimų dėl ateities projektų.

Mokslams virtualioje erdvėje naudojame vieną pažangiausių bei lanksčiausių pedagoginių programų – Microsoft Teams. Kartu su Microsoft Teams turėsite prieigą prie Microsoft Office paketo nemokamai vieneriems metams.

Prisijungimai prie Studijų aplinkos studentams atsiunčiami likus 5-3 darbo dienoms iki užsiėmimų pradžios į sutartyje nurodytą el. paštą.

Kiekvienas studentas, lankantis CodeAcademy kursus, dovanų gaus metinį Microsoft Office paketą, kurį panaudoti galės ne tik mokomajai medžiagai priimti ir apdoroti, bet ir individualiems tikslams. 

Taip! Kviečiame susisiekti el. paštu [email protected]

Dėl atvirų darbo pozicijų galite teirautis el. paštu [email protected]. Mielai Jus nukreipsime į įmones, kurios ieško specialistų. *Gavus pasiūlymą negalime 100 % garantuoti, kad įmonė Jus įdarbins, kadangi tai labai priklauso nuo to kaip save reprezentuosite darbo pokalbio metu.

Duomenų inžinerija – tai IT sritis, kuri rūpinasi duomenų rinkimu, saugojimu, apdorojimu ir paruošimu analizei. Duomenų inžinieriai kuria sistemas ir infrastruktūrą, leidžiančią įmonėms efektyviai naudoti didelius duomenų kiekius. Jie užtikrina, kad informacija būtų prieinama, tiksli, švari ir laiku pasiektų analitikus ar duomenų mokslininkus. Kitaip tariant, duomenų inžinerija – tai pamatas, ant kurio pastatyta visa duomenų analizė ir dirbtinis intelektas.

Be duomenų inžinerijos, įmonės negalėtų efektyviai naudoti savo turimos informacijos. Ji užtikrina:

  • Duomenų kokybę – kad jie būtų tikslūs ir patikimi.

  • Greitį – automatizuoti procesai leidžia gauti naujausius duomenis realiu laiku.

  • Efektyvumą – sumažinamos klaidos ir duomenų dubliavimas.

  • Strateginius sprendimus – vadovai gali remtis faktais, o ne spėjimais.

Duomenų inžinerija paverčia neapdorotą informaciją vertingu turtu, kuris skatina inovacijas ir augimą.

ETL (Extract, Transform, Load) – tai trijų etapų procesas, naudojamas duomenims paruošti:

  • Extract (Ištraukimas): duomenys paimami iš įvairių šaltinių (pvz., API, duomenų bazių, Excel failų).

  • Transform (Transformavimas): duomenys išvalomi, suvienodinami ir paverčiami tinkamu formatu.

  • Load (Įkėlimas): apdoroti duomenys įkeliami į analizės ar saugojimo sistemą (pvz., duomenų sandėlį).
    ETL yra duomenų inžinieriaus kasdienis darbas – nuo jo kokybės priklauso, ar įmonės sprendimai bus pagrįsti patikimais duomenimis.

Duomenų inžinerija tampa vis svarbesnė, nes įmonės kasdien generuoja milžiniškus duomenų kiekius. Ateityje ši sritis vis labiau remsis automatizacija, dirbtiniu intelektu ir debesų sprendimais. Daug dėmesio bus skiriama realiojo laiko duomenų apdorojimui (real-time data) ir savaime atsinaujinančioms duomenų infrastruktūroms.

Duomenų inžinieriai bus pagrindiniai specialistai, padedantys organizacijoms priimti išmanius sprendimus remiantis patikimais duomenimis – todėl tai viena perspektyviausių IT krypčių šiandien.

Duomenų inžinierius kuria techninę infrastruktūrą – duomenų bazes, integracijas, automatizavimo sistemas ir duomenų srautus. Jo tikslas – kad duomenys būtų kokybiški ir pasiekiami.
Duomenų mokslininkas naudoja šiuos duomenis analizei, modelių kūrimui ir prognozėms.

Duomenų inžinieriai ruošia duomenis, o duomenų mokslininkai juos analizuoja ir interpretuoja. Abi profesijos glaudžiai bendradarbiauja, nes viena be kitos negalėtų veikti.

Susisiekite su mumis!








    Atsisiųskite programą




      Slapukų nustatymai

      Šioje svetainėje naudojame įvairius slapukus. Paspausdami „Patvirtinti visus“, jūs sutinkate, kad būtų naudojami visi slapukai (įskaitant slapukus statistiniams, analitiniams, funkciniams ir rinkodaros tikslams). Jūsų pasirinkimus įsiminsime ateities apsilankymams. Daugiau informacijos privatumo politikoje.