Umestna Inteligenca (AI) je v zadnjih letih doživela hitre napredke, pri čemer podjetja kot je xAI Elona Muska in OpenAI poganjajo inovacije na tem področju. Vendar pa je koncept “open source” v skupnosti AI sprožil dvome.
Nedavno je xAI izdal Grok, velik jezikovni model (LLM), kot “open source.” Čeprav se zdi, da gre za pomemben prispevek, je pomembno razumeti, kaj dejansko predstavlja model umestne inteligence, ki je “open source.”
Za razliko od tradicionalne programske opreme, so AI modeli edinstven izziv, ko gre za “open source.” Ti modeli so ustvarjeni prek zapletenih statističnih reprezentacij, izhajajočih iz obsežnih podatkov za učenje. Inovativna zgradba AI modelov, zlasti modelov strojnega učenja, jih naredi nemogoče za pregled, revizijo in izboljšanje na enak način kot tradicionalno kodo. Čeprav imajo AI modeli vrednost, jih ni mogoče v celoti razumeti v strogem pomenu besede.
Kljub tem izzivom AI razvijalci in podjetja pogosto uporabljajo izraz “open,” kar razredči njegov pravi pomen. Nekateri smatrajo model za “open,” če ima javno vmesnik ali API, medtem ko drugi menijo, da je odprt, če objavijo članek, ki opisuje razvojni proces. Najbližje, kar lahko AI model doseže “open source,” je takrat, ko njegovi razvijalci objavijo uteži – atribute nevronskih mrež. Kljub temu te “odprte uteži” modele izključijo bistveni podatki, kot so nabori za učenje in postopki, kar otežuje ustvarjanje modela od začetka.
Čeprav razvoj in replikacija AI modelov zahtevata znatne finančne vire in specializirano računalniško opremo. To omejuje sposobnost ustvarjanja in repliciranja teh modelov na podjetja z znatnimi sredstvi.
V primeru Grok modela podjetja xAI se uvršča v kategorijo modelov z “odprtimi utežmi.” Dostopen je za prenos, uporabo, prilagajanje, fino nastavitev ali izvleček. Grok je med največjimi prosto dostopnimi modeli s 314 milijardami parametrov, inženirjem ponuja trdne temelje za testiranje in modificiranje. Kljub temu, da je model velik, zahteva znatno količino visoko zmogljivega RAM-a, da se ga učinkovito uporablja v surovi obliki. Dostop in uporaba modela v celoti lahko zahtevata specializirane nastavitve za razumevanje AI, kar ga naredi manj dostopnega za širšo skupnost.
Čeprav je Grok konkurenčen drugim modernim modelom, je tudi precej večji, kar zahteva večje vire za dosego podobnih rezultatov. Vsekakor je dragocen vir za raziskovalce in razvijalce, vendar bi ga bilo treba obravnavati kot surov material, ne pa kot končni produkt. Poleg tega ni jasno, ali ta izdaja predstavlja najnovejšo in najboljšo različico Groka.
Motivacija za odločitev Elona Muska, da izda Grok kot “open source,” prav tako sproža vprašanja. Ali se xAI resnično zavzema za razvoj odprtokodne programske opreme ali gre za strategično potezo, usmerjeno proti tekmecu OpenAI? Čas bo pokazal, ali je ta izdaja prva od mnogih in ali bo xAI vključil povratne informacije skupnosti, delil dodatne ključne informacije, opisal proces podatkovnega usposabljanja in ponudil dodatne vpoglede v njihov pristop. Kljub temu ta izdaja nosi vrednost, čeprav se lahko dolgoročno vpliv zmanjša po nekaj mesecih eksperimentiranja.
FAQ
Izvira:
The source of the article is from the blog enp.gr