Штучний інтелект (AI) захоплює нові території завдяки розробці системи ReALM, яку представили дослідники Apple. Ця система відкриває нові можливості для галузі, дозволяючи AI краще розуміти та сприймати контекст на екрані, що дозволяє користувачам робити запитання про будь-що, що вони бачать на екранах. Цей прорив призводить до справжнього досвіду безконтактного користування голосовими асистентами.
Система ReALM показала кращі результати, перевершуючи навіть GPT-4 у конкретному завданні розрізнення посилань. Однією з ключових інновацій ReALM є її можливість відтворювати структуру екрана, використовуючи розібрані на екрані сутності та їх розташування, створюючи текстове представлення, яке точно передає візуальне розташування. Це дозволяє AI ефективніше вирішувати завдання, пов’язані з екраном.
Однак існують обмеження у використанні лише автоматизованого аналізу екранів. Більш складні візуальні посилання, такі як розрізнення між кількома зображеннями, можуть потребувати використання технік комп’ютерного зору та багатомодального підходу. Це підкреслює необхідність додаткових досягнень у технологіях AI для вирішення цих викликів.
Досягнення Apple у дослідженнях AI мають велике значення, незважаючи на те, що компанія відстає від своїх конкурентів у сфері AI. Дослідні лабораторії компанії здійснили помітні кроки в різних напрямках, таких як багатомодальні моделі, інструменти для анімації, підтримані AI, та розробка спеціальних рішень в рамках обмеженого бюджету. Ці досягнення свідчать про здатність Apple покращувати продукти, такі як Siri, роблячи їх більш розмовними і контекстно-орієнтованими.
Але Apple стикається з сильною конкуренцією від компаній, таких як Google, Microsoft, Amazon та OpenAI, які активно використовують генеративний AI у різних галузях. Хоча Apple прийшла на ринок AI досить пізно, його значні фінансові ресурси, висока лояльність споживачів, виняткові інженерні здібності та інтегрований портфель продуктів створюють у нього можливість догнати своїх конкурентів.
Під час Світової конференції розробників у червні очікується, що Apple представить нову модельну структуру для мови та представить чат-бот “Apple GPT”, який демонструватиме функції, що працюють на основі AI, інтегровані у його екосистему. Генеральний директор Тім Кук натякає на обширні зусилля компанії в області AI, підтверджуючи відданість Apple у розвитку в цій сфері.
Співтовариство для домінування в галузі AI зростає, і Apple має намір мати значний вплив на формування світу повсюдної і дійсно розумної обчислювальної техніки. Прогрес у дослідженні AI, зокрема в розумінні контексту екрана, допомагає Apple наблизитися до досягнення цієї мети.
Часті запитання (FAQ)
The source of the article is from the blog klikeri.rs