שפת מודל פתוח חדש שפותח על ידי אפל

חברת הטכנולוגיה Apple חשפה פרויקט רב כוח בשם OpenELM, שמטרתו לממש מודלי שפה מתקדמים ישירות בטלפונים הניידים. הפרויקט מתמקד ביצירת מערכות המלכותיות כדי לעבוד ללא צורך תמידי להתחבר לשרתים חיצוניים.

OpenELM מתבלט במתיחת הטכנולוגיה הפתוחה שלו, ולמרות שזה משל Apple ברישיון הקוד לדוגמה—שלא מוכר בדרך כלל כרישיון פתוח—הקוד מתקבל לפיתוחן של מפתחים.

המודל מאד אוניברסלי, והוא עבר אימון בטווח של מ-270 מיליון עד 3 מיליארד פרמטרים, הכל נבע ממידע שנמצא באופן פומבי. Apple מציעה כי גם עם מודל רחב כגודל 1 מיליארד פרמטרים, OpenELM מספק ביצועים טובים יותר לעומת מודלים בגודל דומה מצד יריבים.

בהשוואה למודלים קיימים, OpenELM הוא בגודל משמעותית קטן ובכל זאת אפקטיבי. ה-Llama 3 של Meta מתרואה ב-70 מיליארד פרמטרים, וה-GPT-3 הידוע משנת 2020 מכיל 175 מיליארד פרמטרים.

מצפה לראות ש-OpenELM יהיה מאפיין חשוב בעדכון הקרוב של iOS 18 שמתוכנן לשחרור ביוני. השילוב הזה מייצג קידום צעד באמצעות להביא אכיפות המלכותיות משנה מפקידתו של משתמשים, ללא פגיעה בביצועים, או לזרוז שמאמצים רבים לשפע נכון לפעילות.

שאלות ראשיות ותשובות:

ש: מהו OpenELM?
ת: OpenELM הוא פרויקט של Apple להקים מודלים מתקדמים משפה היכולים לפעול ביעילות בטלפונים ניידים, מבלי להצרך הקבוע להתחבר לשרתים חיצוניים.

ש: כיצד OpenELM משווים למודלים אחרים של שפה?
ת: למרות שהפרמטרים של OpenELM נהיו מ-270 מיליון עד 3 מיליארד, הוא קטן יותר בגודל לעומת מודלים אחרים כמו ה-Llama 3 של Meta עם 70 מיליארד פרמטרים, וה-GPT-3 עם 175 מיליארד פרמטרים. עם זאת, OpenELM מדיד מספק ביצועים טובים יותר למרות הגודל הקטן.

ש: מה חשוב בכך ש-OpenELM הוא תוצאת קוד פתוח?
ת: למרות שזה מבוסס רישיון שאינו מכר בעיקר כאשר פותח ע"י Apple, ההיות ש-OpenELM פתוח פתח אומר שהקוד מגיע לידי מפתחים, מה שיכול לעודד תרומות קהילתיות ושיתוף פעולה.

אתגרים וסכסוך מרכזיים:

אתגר אפשרי המשויך ל-OpenELM הוא לשמור על פרטיות המשתמש והאבטחה. כלול טכנולוגיה מלכותית בהתקנה מעוצבת הרגילה דורש תשומת לב עקבית למידע אישי. איתור ביטחון המעבד מזהה חשוב.

אתגר נוסף הוא לאיזון בין גודל המודל (מספר פרמטרים) והיעילות. בעוד ש-OpenELM קורא ליעילות עם פחות פרמטרים, עדיין יהיה רואים איך הוא עובד במגוון רחב של משימות לעומת מודלים נותרים כמו GPT-3.

יתרונות:
– היעילות המוגברת וההתאמסה המופחתת על תקשורת האינטרנט למשימות AI
– טבע הקוד הפתוח מעודד כלול וחדשנות
– הקשיחות של Apple כחלוץ באינטגרציה של ה-MI עם חומרה לצרכן

חסרונות:
– אולי מוגבל ע"י מספר הפרמטרים הקטן בהשוואה למודלים גדולים יותר
– נסמך על רישיון קוד הדוגמה של Apple עבור מעמד הקוד, שיכול לא להציע את החרות התקפיחות אסף בריו רישיונות קוד פתוח פופולריים

העובד ש-OpenELM הוא פתוח תחת רישיון מדגים קוד של Apple עשוי לעורר שיח פנים עם הקהילה פתח ה"קוד פתוח", משום שיש סטנדרטים והגדרות המנהיגים אילו ניתן תקבל באמת כפתוח. דרך שהנוטות של רישיון שאוזן שהאם זוכאים הפסדות כיזה קוד קהילתי.

למידע נוסף על מודל הלשונית החדש של Apple, M יתכן להתייחס ע"י כישורפו של Apple הרשמי ב-Apple. חשוב לשים לב שפרטים מסויימים על OpenELM אמורים לא להיותזמים מיידית בעמוד הראשי אלא אם נמצאים על יד בידע ברמה הרשמי מדגומים או משאבים מונתנים מנתנים באפל.

[מטמולם] https://www.youtube.com/embed/LXI0athoaVg[/embed]