Амерички Национални институт за стандарде и технологију, НИСТ, покренуо је у понедељак програм АИТЕ, нову платформу за тестирање модела вештачке интелигенције у изолованом окружењу. Циљ је безбедна и објективна процена способности модела при извршавању различитих задатака.
АИТЕ, пуним називом АИ Тецхнологy Евалуатион, заснован је на добровољном учешћу истраживача и компанија. Систем користи „слепе“ податке које модели обрађују током задатака како би се добили мерљиви резултати, без утицаја на обуку самих модела.
Прве процене почињу у августу
Подаци који се користе у АИТЕ нису намењени за тренирање модела. У првој фази платформа ће бити усмерена на анализу слика уз употребу великих визуелно-језичких модела у три области: квантна наука, геномика и јавна безбедност.
Први циклус процене почиње у августу 2026. године. НИСТ планира да касније прошири број задатака, док је основни циљ успостављање јединственог оквира за мерење способности АИ модела и поређење резултата.
Добровољно учешће компанија и истраживача
Даваоци података морају да доставе оригиналне скупове података који нису јавно доступни, као и јасно дефинисан задатак за тестирање. Развијачи модела, са друге стране, пријављују своје моделе за проверу на тим скуповима.
Овај потез уклапа се у шири приступ Вашингтона да безбедност АИ модела проверава кроз добровољне пријаве водећих технолошких компанија. Министарство трговине САД је у мају већ договорило сарадњу са Гоогле Деепминд, Мицрософт и xАИ на процени модела преко Центра за АИ стандарде и иновације.