Meena er model for fornuftig samtale, overgår andre chatbots

Googles AI -forskere har afsløret Meena. Tekniske overvågere kalder det et chatbot -gennembrud. Punkter for svar svarede godt til menneskelig hensigt. Punkter til relevante ordvalg. Point for (gisp) at lyde fornuftigt.

Voicebot.AI nåede målene for dette Meena -teams indsats. Du kunne ikke komme tættere på, hvad frustrerede brugere af chatbots ønskede, at de ville komme ned fra himlen. "Forskerne bag Meena byggede chatboten til at reagere på folks beskeder, at blive ved emnet, og at opføre sig så meget som et andet menneske som muligt. "

Artiklen fastslog også, hvorfor Meena skiller sig ud fra velkendte stemmeassistenter:"Meena kan teoretisk tale om alt, ikke kun de emner, der allerede er programmeret i det. "

Kudos fra andre tech watchers handlede om samtale leveret på et niveau, der føltes mere som at tale med en anden person end nogen eksisterende chatbot.

Quint :Google er kommet ud med sin egen chatbot kaldet Meena, og "Tidlige tegn tyder på, at søgegiganten er på noget, der kan ændre dynamikken i chatbots i branchen."

Neowin :"Googles AI-baserede chatbot overgår potentielt alle andre chatbots, der er tilgængelige i dag."

ZDNet sagde, at programmet "har få af de absurde, useriøse udsagn, der har haft tendens til at karakterisere chatbots til dato. Det forbliver stort set på emnet og reagerer på detaljer i samtalen, som vurderet af menneskelige anmeldere. "

Douglas Heaven in MIT Technology Review :"Åben samtale, der dækker en lang række emner, er vanskelig, og de fleste chatbots kan ikke følge med. På et tidspunkt siger de fleste ting, der ikke giver mening eller afslører mangel på grundlæggende viden om verden. En chatbot, der undgår sådanne fejl, vil gå langt i retning af at få AI'er til at føle sig mere menneskelige, og gøre karakterer i videospil mere naturtro. "

En Google AI -blogindgang fra Google Research, Hjerneteam, udforskede dette koncept med åbent domæne:

"For bedre at håndtere en lang række forskellige samtaleemner, open-domain dialog forskning udforsker en komplementær tilgang, der forsøger at udvikle en chatbot, der ikke er specialiseret, men stadig kan chatte om stort set alt, hvad en bruger ønsker. "

Det her, de sagde, kan føre til fascineringsapplikationer:"såsom yderligere humanisering af computerinteraktioner, forbedring af fremmedsprogspraksis, og lave relatable interaktive film- og videospilkarakterer. "

Folkene bag Meena har givet sig selv prale af rettigheder, som de ikke har holdt tilbage. Deres papir har titlen "Mod en menneskelignende Open-Domain Chatbot, "og det er op på arXiv -serveren.

"Vores bidrag er ... at foreslå en simpel menneskelig evalueringsmetrik for multi-turn opendomain chatbots, der fanger grundlæggende, men vigtige egenskaber ved menneskelig samtale ... demonstrerer, at en end-to-end neural model med tilstrækkelig lav forvirring kan overgå fornuftigheden og specificiteten af ​​eksisterende chatbots, der er afhængige af komplekse, håndlavede rammer udviklet over mange år. "

Googles Meena chatbot scorer lavt på 'forvirring' og, i dette tilfælde, lav er en positiv; Meena har mindre svært ved at finde det rigtige ord.

Teamet udtalte, at "Vi præsenterer Meena, en multi-turn open-domain chatbot. "

S Aadeetya i Quint forklarede, hvad Google mente med at kalde Meena en platform med åbent domæne. Brugere kan skrive og stille forespørgsler fra enhver platform og have en samtale uden at begrænse dens ekspertise.

Dem, der gennemgik papiret om arXiv, fremhævede ofte Meena's Sensibleness and Specificity Average (SSA).

Hvad er SSA? Meena blev testet med en "menneskelig evaluering" -måling, denne SSA. Det fanger centrale elementer i en menneskelignende "multi-turn-samtale, "som beskrevet i avisen.

De sagde, at "en SSA på menneskeligt niveau på 86% potentielt er inden for rækkevidde, hvis vi bedre kan optimere forvirring. Derudover kan den fulde version af Meena (med en filtreringsmekanisme og afstemt afkodning) scorer 79% SSA, 23% højere i absolut SSA end de eksisterende chatbots, vi vurderede. "

Ofer Ronen, Chatbase general manager, Googles område 120, optrådte i en ZDNet interview for at forklare, hvad chatbots har opnået, og hvordan de ikke altid har opfyldt brugernes behov. Mennesker kan lide at tale, at bruge tale, og det alene udgør et problem i alderen mand-til-maskine. Der er mange måder at bede om det samme, sagde Ronen.

Tiernan Ray ind ZDNet ikke desto mindre gjorde det klart, at Meena opnåede meget, men samtaleoplevelsen kan forventes at være glat, men ikke skinnende.

"Mennesker blev ansat som folkemængder for at vurdere hver sådan samtale på grund af dens" følsomhed "og dens" specificitet, 'og sådanne eksempler gør, Ja, gøre store fremskridt fra tidligere chatbots. ... desværre, mennesker blev ikke bedt af Adiwardana og kolleger om at vurdere samtaler for 'interessanthed, 'fordi denne og andre udvekslinger i prøven er utrolig kedelige. "

Men man skal ikke lade det være ved det, fordi det ser ud til, at teamet har realiseret sine skridt fremad, når de gennemgår deres arbejde, og hvilke mål der endnu ikke skal nås. De skrev i deres papir:

"Desuden, det kan være nødvendigt at udvide sættet med grundlæggende menneskelignende samtaleegenskaber, der måles ud over fornuftighed og specificitet. Nogle retninger kan omfatte humor, empati, dyb ræsonnement, spørgsmålssvar og viden diskussionsfærdigheder. "

Dette er i den tidlige fase af dets udvikling, og Meena vil gennemgå yderligere evaluering, før du rent faktisk kan tale med det, sagde rapporter.

Hvordan blev Meena uddannet? MIT Technology Review henviste til en rigtig "dataslurp", da Meena blev uddannet i 341 gigabyte offentlig social-medie-snak. Neowin uddybet deres "træning i 341 GB sociale mediesamtaler og sportslige en 2,6 milliarder parameter end-to-end trænet neurale samtalemodeller."

© 2020 Science X Network