Bør chatbots kime ind på klimaændringer? Undersøg udforsk potentialet for AI-platforme for klimakendskab

Kan chatbots give nøjagtige oplysninger om farerne ved klimaændringer? Nå, det afhænger af en række faktorer, herunder det specifikke emne, det sted, der overvejes, og hvor meget chatbotten betales, ifølge en gruppe Virginia Tech-forskere.

"Jeg tror, ​​at det, vi fandt ud af, er, at det er OK at bruge kunstig intelligens, man skal bare være forsigtig, og man kan ikke tage det ord for ord," sagde Gina Girgente, der sidste forår blev færdig med en bachelorgrad i geografi. "Det er bestemt ikke en idiotsikker metode."

Girgente var en del af et tværfagligt forskerhold, der stillede spørgsmål om tre klimaændringsrelaterede farer - tropiske storme, oversvømmelser og tørke - i 191 lande til både gratis og betalte versioner af ChatGPT. ChatGPT er udviklet af OpenAI Inc. og er en storsproget model designet til at forstå spørgsmål og generere tekstsvar baseret på anmodninger fra brugere.

Gruppen sammenlignede derefter chatbots' svar med farerisikoindekser, de genererede ved hjælp af data fra det mellemstatslige panel om klimaændringer, et FN-organ, der har til opgave at vurdere videnskab relateret til klimaændringer.

"Samlet set fandt vi mere enighed end ikke," sagde Carmen Atkins, hovedforfatter og andenårs Ph.D. studerende ved Institut for Geovidenskab. "De AI-genererede output var nøjagtige mere end halvdelen af ​​tiden, men der var mere nøjagtighed med tropiske storme og mindre med tørke."

I en artikel offentliggjort i Communications Earth &Environment , rapporterede gruppen ChatGPT4's svar tilpasset indeksene med følgende nøjagtighedsgrader:

• Tropiske storme—80,6 %
• Oversvømmelse – 76,4 %
• Tørke – 69,1 %

De fandt også, at chatbottens nøjagtighed steg, når de blev spurgt om mere udviklede lande, og at den betalte version af platformen, i øjeblikket ChatGPT-4, var mere nøjagtig end den gratis version, som på det tidspunkt var ChatGPT-3.5.

De fandt mindre konsistens i svar om det samme emne, når de blev spurgt om visse regioner, især mange lande i Afrika og Mellemøsten, der betragtes som lavindkomst- eller udviklingslande. Og de fandt ud af, at den betalte version af platformen, i øjeblikket ChatGPT-4, var mere nøjagtig end den gratis version, som på det tidspunkt var ChatGPT-3.5.

"Vi er de første til at se på dette på en systematisk måde, så vidt vi er klar over, og ud over det er det virkelig en opfordring til handling for flere mennesker til at undersøge dette problem," sagde Atkins.

Ifølge publikationen valgte forskerne ChatGPT-tjenesten på grund af dens popularitet, især blandt brugere i alderen 18-34 år, og dens anvendelseshastighed i udviklingslande.

Atkins og Girgente, som vil være kandidatstuderende ved University of Denver til efteråret, sagde, at ideen til projektet stammede fra deres tid i klassen med Junghwan Kim, en adjunkt ved Institut for Geografi. Der delte Kim noget af sin egen forskning, der studerede de geografiske skævheder i ChatGPT, da han blev spurgt om emner inden for miljøretfærdighed.

"Det åbnede op for hele denne idé om de forskellige ting, vi kunne se på med ChatGPT," sagde Atkins. "Og for mig personligt gav klimaændringer og specifikt viden om klimaændringer, som er afgørende for at bekæmpe misinformation, mig lyst til at se, om ChatGPT kunne være nyttigt eller skadeligt med det problem."

Kim er også medforfatter til denne nye undersøgelse, ligesom Manoochehr Shirzaei, en lektor i geofysik og fjernmåling.

Kim sagde, at han følte, at resultaterne ville være særligt vigtige at dele med elever, der måske tror på chatbots, og at de også havde påvirket hans egen brug af softwaren.

Selvom gruppen mener, at deres resultater viser det klare behov for en forsigtig tilgang til brug af generativ kunstig intelligens, mener de også, at denne undersøgelse kun er begyndelsen på den nødvendige forskning, som skal gentages, efterhånden som den forskellige software fortsætter med at udvikle sig.

"Dette er kun toppen af ​​isbjerget, og mere end noget andet vil vi blot henlede opmærksomheden på disse spørgsmål," sagde Atkins. "Generativ AI er en del af vores verden nu, men vi er nødt til at bruge det på en så veluddannet måde, som vi kan."

Flere oplysninger: Carmen Atkins et al., Generative AI-værktøjer kan forbedre klimakendskab, men skal kontrolleres for skævheder og unøjagtigheder, Communications Earth &Environment (2024). DOI:10.1038/s43247-024-01392-w

Journaloplysninger: Kommunikation Jord og miljø

Leveret af Virginia Tech