Lucía Sáez. Kredit:Baskerlandets universitet
"De sidste to årtier har oplevet en betydelig vækst i spredningen af værktøjer til at klassificere og måle bypræstationer (placeringer, indekser, osv.) på tværs af både de offentlige og private institutioner, der bruger dem, som reaktion på forskellige former for pres, der tilskynder til ensartethed. Naturligt, alle disse værktøjer er nyttige til at vejlede og vurdere de politikker, der er implementeret af lokale myndigheder inden for forskellige indsatsområder, og er særlig produktive inden for bæredygtighed. Alligevel er der mangel på viden om det faktiske metodologiske grundlag, der ligger til grund for dem, og som formodes at legitimere deres anvendelse, "forklarede Lucía Sáez-Vegas, Ph.d. indehaver i UPV/EHU's Institut for Finansiel Økonomi II.
"Med det formål at analysere og vurdere kvalitet og god praksis inden for bymåling og -overvågning, og med særlig opmærksomhed på de metodiske aspekter, vi tog hundredvis af måleværktøjer og valgte et sæt med 21 lignende placeringer, indekser og værktøjer designet til at rangere og overvåge byernes bæredygtighed (forstået i meget bred forstand), så vi kunne studere dem i dybden og dermed tilpasse og anvende en analysemetode testet på et andet felt, universitetsrangeringer, "tilføjede Dr. Sáez.
Betydningen af metodiske aspekter
I hver af de lignende placeringer, indekser og værktøjer analyseret, forskerne undersøgte følgende fire hovedprincipper:mål og målgruppe, de er rettet mod; metode og vægtning anvendt i deres design; gennemsigtighed vedrørende dataindsamling og databehandling; og endelig, præsentation af resultaterne. Som Dr. Saéz forklarede, "af disse fire aspekter er oplysningerne om det første og det sidste mest tilgængelige, med andre ord, de beskrivende oplysninger. Det er specificeret af alle de analyserede klassifikationer; men det sker ikke, når det handler om at få adgang til alle oplysninger om de metodologiske aspekter, dataindsamling og informationsbehandling; dette resulterer i det, der er kendt som den sorte boks, en artefakt, hvis resultater studeres og formidles, uden at dets indre virke bliver kastet i tvivl. "
Sådan bekræftede forskerne forskellige metodiske svagheder i alle de analyserede placeringer. Forskeren insisterer på, at "værktøjer af denne type har tendens til at negligere komplekse årsagssammenhænge og mangler gennemsigtighed med hensyn til dataindsamling, vægtning og aggregeringsproces i deres design - de har en tendens til at være forudindtaget og, som resultat, har en tendens til at ignorere dårligt rangerede byer og til at forstærke eksisterende stereotyper. "
"Muligheden for at rangordne og sammenligne byer med forskellige dimensioner kan være med til at få øje på dem, der ser ud til at fungere bedre i forskellige byaspekter. Derfor bruges disse værktøjer lejlighedsvis af byledere og offentlige beslutningstagere til at udvikle en handlingsplan, selvom man skal have en klar idé om, hvordan rangeringen eller indekset er udarbejdet, og vær forsigtig, når du bruger den, frem for alt, hvis der ikke gives tilstrækkelige oplysninger om de metodologiske aspekter og robustheden af dets resultater. Vi forstår, at disse værktøjer bør bruges mere som en kilde til information og endda inspiration, og mindre som en køreplan for handling, "tilføjede hun.
"Disse placeringer tiltrækker offentlighedens interesse, fordi de måler begreber af kompleks karakter, der præsenteres ved hjælp af en rangering, generelt af en numerisk type, som meget let kan forstås. Fra vores akademiske synspunkt, det faktum, at resultaterne præsenteres i form af en endelig placering med en omtale af de vigtigste fund, men med lidt eller ingen hensyntagen til de metodologiske aspekter, som, i sidste ende, er dem, der understøtter scoren eller rangeringen, betegner en klar svaghed ved disse værktøjer, når de bruges til at måle og overvåge bypræstationer, "sagde Sáez.