Vedecká cukráreň Bratislava

Transformer je typ neurónovej siete, ktorý udáva trend vývoja hlbokého učenia v posledných rokoch a doteraz nebol prekonaný lepšou architektúrou. Transformerom je známy jazykový model ChatGPT, i väčšina súčasných modelov, ktoré zabezpečujú spracovanie textu, obrazu a zvuku podobným spôsobom, ako by to urobil človek. Pre väčšinu smrteľníkov je transformer čiernou skrinkou, ktorá funguje, ale netušia ako. V prednáške poodkryjeme toto tajomstvo a ukážeme, že matematika, ktorá transformer odlišuje od iných typov modelov, je z väčšej časti na úrovni strednej školy. Okrem týchto princípov si vysvetlíme, čo je neurónová sieť a uvedieme príklad použitia transformeru.

Prednášajúci:

RNDr. Andrej Lúčny, PhD., pôsobí v MicroEpsilon-Inspection ako výskumník v oblasti počítačového videnia. Doktorát z oblasti integrácie metód umelej inteligencie do systémov reálneho času získal na Katedre aplikovanej informatiky Fakulty matematiky, fyziky a informatiky Univerzity Komenského v Bratislave, kde čiastočne pôsobí ako výskumník v oblasti kognitívnej robotiky. Je spoluzakladateľom občianskeho združenia Robotika.SK, ktorá sa venuje popularizácii robotiky, a je pravidelným porotcom súťaže mobilných robotov ISTROBOT.

Otázky pre prednášajúceho môžete zasielať mailom na ncpvat@cvtisr.sk do 7. októbra 2024.

Vedecká cukráreň Bratislava v článkoch

Dejiny trochu inak: Človek a životné prostredie

Ekologické a klimatické problémy súčasného sveta sa podľa varovaní vedcov stávajú pre nás v globále existenčnými a ohrozujú jestvovanie ľudstva na...

| Marta Bartošovičová

Video: Dejiny trochu inak: človek a životné prostredie

Dlhodobé, ako aj krátkodobé zmeny podnebia a prírodného prostredia mali dopad na dejinný vývoj človeka v každom období. Vedecká diskusia sa v súčasnosti...

| VEDA NA DOSAH

Video: Mozog v strese: Čo sa deje v našich hlavách, keď sme pod tlakom?

Vedeli ste, že existuje dobrý a zlý stres? V čom sa líšia? Ako ovplyvňujú naše telo? Dokáže sa mozog pred...

| VEDA NA DOSAH

Eszter Bögi: Nadmerný stres môže vyvolať rôzne ochorenia a poruchy

„O presnej definícii stresu sa dodnes vedú diskusie,“ povedala nám v úvode rozhovoru Mgr. Eszter Bögi, PhD., vedecká pracovníčka Ústavu experimentálnej farmakológie...

| Marta Bartošovičová

Video: Aurel Stodola, otec parných turbín

V májovej Vedeckej cukrárni sme si pripomenuli 160. výročie narodenia slovenského vedca svetového významu, génia energetiky, fyzika, technika a zakladateľa teórie...

| VEDA NA DOSAH