Створено је тестно окружење за процену чијег дела

Група међународних научника развила је фондацију Аренске аренске агенције, дизајнирана да провери и побољша рад рачунарских агената вештачком интелигенцијом. Пројекат има учешће стручњака са Универзитета у Ватерлоу, универзитету Хонг Конг, истраживања продавача и Универзитета Царнегие Меллон.

Рачунарски асистенти су програми који обављају задатке без људске интервенције. Примери таквих асистената су Сири гласовни асистент који може слати поруке и одржати састанке. Међутим, савремени асистисти суочавају се са потешкоћама у обављању сложених задатака који захтевају интеракцију са различитим апликацијама. На пример, извештавање о граници можда је тешко због потребе да се подаци у писмама, екстрактима и табелама.

Арена рачунара Арена је постала прва платформа за проверу Аисфистри у стварном рачунарском окружењу. Ово је развој претходног пројекта ОСВорлд – прво ширење окружења за рад мултимодалних система.

Према речима једног од програмера, професор на Универзитету Ватерлоо Виктор Зхонг, ново окружење омогућава вам да упоредите различите АИ моделе на основу језичких и визуелних технологија. Корисници бирају оперативни систем, апликације (на пример, Гоогле Цхроме или Екцел), а затим поставите задатак помоћника, а затим систем у реалном времену упоређујући перформансе задатка са два различита модела.