Softverski developer Ishan Anand podigao je ovisnost o proračunskim tablicama na potpuno novu razinu integriranjem GPT-2, velikog jezičnog modela, u Microsoft Excel. NJegovo stvaranje izvanredno funkcionira pružajući vrijedne uvide u unutarnje mehanizme jezičnih modela te mogućnosti predviđanja sljedeće oznake arhitekture Transformatora. Anand hrabro tvrdi da je razumijevanje umjetne inteligencije jednako jednostavno kao razumijevanje tablice, pokazujući ogroman potencijal ove fuzije.
Proračunska tablica GPT-2 veličine 1.25 GB sada je dostupna za preuzimanje na platformi GitHub, omogućavajući bilo kome da eksperimentira i istražuje njezine funkcionalnosti. Iako GPT-2 nije najnovija iteracija jezičnih modela, budući da je privukao pažnju 2019. godine, i dalje služi kao vrijedan prethodni korak u razumijevanju mogućnosti ovih modela.
Važno je zapamtiti da svrha GPT-2 nije dizajnirana za konverzacijske interakcije jer je prethodila eri modela poput ChatGPT-a. Bitno je naglasiti da implementacija u ovom projektu koristi GPT-2 Small model, koji se sastoji od 124 milijuna parametara. Nasuprot tome, puna verzija GPT-2 koristila je 1.5 milijardi parametara, dok je noviji GPT-3 nadmašio očekivanja sa zadivljujućih 175 milijardi parametara.
Primarna funkcija GPT-2-a vrti se oko inteligentne predikcije sljedeće oznake. To postiže se kroz arhitekturu Transformatora jezičnog modela koji može točno predvidjeti najvjerojatniju završnu riječ za dani niz podataka. Implementacija GPT-2 u ovoj proračunskoj tablici djeluje s ograničenjem unosa od samo 10 oznaka, što je značajno manje od impresivnih 128.000 oznaka koje obrađuje GPT-4 Turbo. Ipak, to ograničenje ne bi trebalo umanjiti vrijednost Anandovog projekta jer služi kao praktičan i obrazovni uvod u jezične modele za razne stručnjake, uključujući izvršne direktore u tehnologiji, marketinške stručnjake, proizvodne menadžere, političare za umjetnu inteligenciju, etičare, programere i znanstvenike koji se upućuju u područje umjetne inteligencije.
Anand naglašava da ista arhitektura Transformatora korištena u ovom projektu služi kao temelj za razne druge jezične modele, poput ChatGPT-a OpenAI-ja, Claude Anthropic-a, Bard/Gemini Google-a, Llama Meta-e i mnogih drugih.
U detaljnom prolazu kroz projekt, Anand ilustrira kako implementacija proračunske tablice GPT-2 funkcionira na više listova. Prvi list posvećen je unosu poticaja, s blagim ograničenjem od samo 10 poticaja. Nastavlja objašnjavati bitne koncepte poput tokenizacije riječi, pozicija i težina teksta, iterativno usavršavanje predviđanja sljedeće riječi te odabir izlazne oznake koja predstavlja predviđenu posljednju riječ niza.
Iako Anand koristi relativno kompaktnu verziju GPT-2-a, važno je napomenuti da njegova implementacija gura granice mogućnosti Excela. Međutim, upozorava da se izbjegava pokušaj korištenja ove Excel datoteke na Macu, jer može dovesti do rušenja i zamrzavanja sustava. Osim toga, proračunska tablica trenutno nije kompatibilna s cloud baziranim proračunskim aplikacijama. Preporučuje se korištenje najnovije verzije Excela kako bi se osigurala optimalna izvedba. Ključno je istaknuti da ova proračunska tablica prvenstveno služi kao obrazovni pothvat i izvor zadovoljstva za Ananda.
Jedna izuzetna prednost pokretanja ovog jezičnog modela unutar Excela na vašem računalu je potpuno offline djelovanje bez potrebe za pozivima API-a u oblak. Time se osigurava potpuno lokalno djelovanje i privatnost podataka.
Često postavljana pitanja (FAQ):
Što je GPT-2?
GPT-2 predstavlja “Generativni Pretečki Transformator 2” i veliki jezični model razvijen od strane OpenAI-a. Koristi arhitekture dubokog učenja za generiranje ljudski sličnog teksta na temelju ulaznih poticaja.
Što je arhitektura Transformatora?
Arhitektura Transformatora je tip dubokog modela učenja koji se ističe u zadacima koji uključuju sekvencijalne podatke, poput prevođenja jezika ili generiranje teksta. Ovisi o mehanizmima samo-pažnje s višekanalnim sklopovima koji hvataju jake kontekstualne ovisnosti.
Koja je važnost Anandove implementacije GPT-2-a u Excelu?
Anandova integracija GPT-2-a u Microsoft Excel pruža jedinstvenu perspektivu na potencijalnu fuziju tehnologije proračunskih tablica s umjetnom inteligencijom. Nudi uzbudljivu obrazovnu priliku za stručnjake iz raznih područja da razumiju djelovanje jezičnih modela na praktičan način.
Je li Anandova implementacija GPT-2-a kompatibilna sa svim verzijama Excela?
Ne, preporučuje se korištenje najnovije verzije Excela kako bi se osigurala optimalna izvedba s Anandovom implementacijom proračunske tablice GPT-2-a.
The source of the article is from the blog maestropasta.cz