IQ test for kunstig intelligens systemer

Washington State University-forskere laver den første "IQ-test" nogensinde for kunstig intelligens (AI)-systemer, der vil score systemer på, hvor godt de lærer og tilpasser sig nye, ukendte miljøer.

Diane Cook, Regents Professor og Huie-Rogers Chair Professor, og Larry Holder, professor ved Skolen for Elektroteknik og Datalogi, modtaget et tilskud på lidt over $1 million fra Defense Advanced Research Projects Agency (DARPA) til at skabe en ramme til at teste "intelligensen" af AI-systemer.

"Tidligere forskning i måling af intelligens i AI-systemer har for det meste været teoretisk, " sagde Holder. "De målte ikke virkelighedens præstation i roman, tidligere usete miljøer og tog ikke højde for kompleksiteten af ​​opgaverne."

Holder og Cook vil designe en test, der vil klassificere AI-systemer baseret på sværhedsgraden af ​​problemer, som de kan løse. At skabe metoder til at rangordne problemer efter deres sværhedsgrad vil være en af ​​de vigtigste dele af forskningen.

"Scoren vil også tage højde for systemernes nøjagtighed, korrekthed, det tager tid og mængden af ​​data, de skal bruge for at fungere godt, " sagde Holder.

En af hovedudfordringerne for AI-forskere er at skabe maskiner, der kan lære i et ukendt miljø, ligesom et menneske kan. Mange nylige fremskridt inden for maskinlæring og kunstig intelligens har været i snæver, specialiserede opgaver som at opdage ansigter og forudsige resultater af baseballkampe.

At skabe maskiner, der kan lære og handle intelligent i nye miljøer, er stadig AI-forskningens hellige gral.

"Vi er fokuseret på at teste og forbedre systemer, der kan være mere generelle, som en robotassistent, der kan hjælpe dig med mange af dine daglige opgaver, " han sagde.

En af adfærdsmønstrene Holder og Cook vil se på er, hvor godt de maskiner, de tester, kan overføre deres læring fra én opgave og anvende den til en ny, usynlig opgave.

"For eksempel, du vil måske lære dam før skak, fordi du nemt kan overføre din viden fra den ene til den anden, " sagde Holder.

En bachelorstuderende, der lavede sommerforskning sammen med Holder, hjalp ham med at komme op med et evalueringsmiljø, der ville blive brugt til at teste AI-systemer på opgaver som at spille videospil, løse SAT-testproblemer og løse Rubiks terning.

Cook er også direktør for Center of Advanced Studies in Adaptive Systems (CASAS) ved WSU, som fokuserer på at skabe smarte hjem med robotassistenter, der plejer ældre, blandt andre projekter. Disse robotter kan bruges til at overvåge sikkerheden, sundhed, ældres mobilitet og sociale liv.

Holder vedligeholder i øjeblikket et websted, der er vært for AIQ-udfordringen og ranglisten. Som en del af bevillingen, Holder håber at udvide den offentligt tilgængelige softwaregrænseflade, som kan bruges af enhver til at teste deres AI-system og samtidig give flere data til forskerne i processen.