Scale AI, wiodący partner w testach i ocenach (T&E) dla nowoczesnych firm zajmujących się sztuczną inteligencją (AI), połączył siły z Biurem Cyfrowym i Sztuczną Inteligencją Departamentu Obrony USA (CDAO), aby stworzyć kompleksową strukturę T&E skupioną na odpowiedzialnym wykorzystaniu dużych modeli językowych (LLM) w ramach DoD.
Ta współpraca pozwoli Scale AI opracować testy wzorcowe dostosowane specjalnie do zastosowań w DoD, integrując je płynnie w swoją platformę T&E, aby wspierać strategię CDAO dotyczącą wykorzystania LLM. W ten sposób inicjatywa ta dostarczy CDAO strukturę umożliwiającą bezpieczne wdrożenie AI poprzez ocenę wydajności modelu, oferowanie informacji zwrotnej w czasie rzeczywistym dla żołnierzy oraz tworzenie specjalistycznych zestawów ocen dostosowanych do wymagań sektora publicznego dotyczących testowania modeli AI w zastosowaniach wsparcia militarnego, takich jak wydobywanie wniosków z raportów po działaniach.
Głównym celem tego przedsięwzięcia jest ulepszenie polityk T&E DoD poprzez włączenie generatywnej AI, stosowanie kwantyfikowalnych testów wzorcowych dla metryk oceny oraz zbieranie informacji zwrotnej od użytkowników. Ten rygorystyczny proces T&E pozwoli na identyfikację modeli generatywnej AI odpowiednich do zastosowań wojskowych, dostarczając dokładnych i trafnych wyników przy użyciu terminologii i baz wiedzy specyficznych dla DoD. Ostatecznym celem tego kompleksowego podejścia jest wzmocnienie odporności i wytrzymałości systemów AI w środowiskach o klasyfikowanym charakterze, ułatwiając wdrażanie technologii LLM w bezpiecznych środowiskach.
Alexandr Wang, założyciel i dyrektor generalny Scale AI, wyraził zaangażowanie firmy w ochronę integralności przyszłych zastosowań AI w dziedzinie obrony i wzmocnienie globalnego przywództwa Stanów Zjednoczonych w odpowiedzialnym wprowadzaniu bezpiecznej i niezawodnej AI. Wang podkreślił, że poprzez testowanie i ocenę generatywnej AI, DoD może uzyskać kluczowe informacje na temat mocnych i słabych stron tej technologii, umożliwiając odpowiedzialne i skuteczne wdrożenie. Wang zauważył, że „Scale ma zaszczyt współpracować z DoD nad tą strukturą”.
Chociaż procesy testowania i oceny od dawna są standardem w różnych branżach w celu zapewnienia bezpieczeństwa produktu i gotowości rynkowej, konkretne standardy bezpieczeństwa AI wciąż nie zostały ustandaryzowane. Pionierska metodologia Scale, opublikowana latem ubiegłego roku, stanowi pierwsze kompleksowe podejście techniczne do T&E LLM w branży. Przyjęcie tej metodologii przez DoD podkreśla zaangażowanie Scale w zrozumienie potencjału i ograniczeń LLM, minimalizację ryzyka oraz spełnienie specyficznych wymagań militarnych.
Dowiedz się więcej o podejściu Scale do testowania i oceny na stronie [https://scale.com/llm-test-evaluation](https://scale.com/llm-test-evaluation).
O Scale AI
Scale AI jest siłą napędową rewolucji Generatywnej AI. Na fundamencie wysokiej jakości danych i wglądu ludzkiego, własny Silnik Danych Scale zasila najbardziej zaawansowane modele na świecie. Rozległe partnerstwo Scale z wiodącymi twórcami modeli pozwala każdej organizacji skutecznie stosować AI, pozycjonując Scale jako zaufanego współpracownika dla liderów branżowych, takich jak Meta, Microsoft, U.S. Army, DoD’s Defense Innovation Unit, OpenAI, Cohere, Anthropic, General Motors, Toyota Research Institute oraz NVIDIA.
Kontakt Prasowy:
Heather F. Horniak
[email protected]
Wersja źródłowa: [businesswire.com](https://www.businesswire.com/news/home/20240220793678/en/)
The source of the article is from the blog papodemusica.com