Znanstveniki razvijajo obsežna skladišča dokazov za razvoj učinkovitih politik

Znanstveniki razvijajo obsežna skladišča dokazov za razvoj učinkovitih politik

Vlagatelji vlagajo na desettisoče milijonov dolarjev v ambiciozen načrt za rešitev največjega problema znanstvenega svetovanja: zagotavljanje dokazov vladam. Njihov cilj je ustvariti sistem, ki oblikovalcem politik po vsem svetu omogoča ustvarjanje hitrih sintez znanstvenih dokazov, ki jim bodo pomagali razviti politike, ki temeljijo na dokazih. kritične težave, kot so podnebne spremembe rešiti.

»Na koncu bi lahko imeli ogromno koristi od sveta, v katerem so celovite sinteze dokazov o vsakem večjem družbenem problemu na voljo na enem mestu in se nenehno posodabljajo,« pravi Will Moy, ki vodi Campbell Collaboration, mednarodno neprofitno organizacijo, ki podpira družboslovne ocene.

Čeprav raziskovalci na politično pomembnih področjih izvajajo različne študije, so sinteze, ki predstavljajo težo dokazov o temi, redke na številnih področjih in se ne uporabljajo rutinsko za usmerjanje oblikovanja politik. "Obstaja veliko povpraševanje" oblikovalcev politik po takšnih sintezah, pravi Jen Gold, direktorica raziskav pri Svetu za ekonomske in socialne raziskave (ESRC), britanski agenciji za financiranje. "Toda ponudba se ne ujema."

Sinteza dokazov je »vse, kar svet ve o tem, kako rešiti pomemben problem na enem mestu,« pojasnjuje Moy. V medicini zdravniki redno uporabljajo na tisoče sistematičnih pregledov – temeljite sinteze študij, kot so randomizirana preskušanja zdravil – ki kažejo, ali zdravljenje pomaga ali škodi. Na večini drugih področij pa takšna celovita osnova manjka (glejte 'Manjkajoče sinteze'). Trajajo lahko meseci ali leta, da iz obsežnega korpusa raziskav izluščimo pomen – in agencije za financiranje so v preteklosti porabile sorazmerno malo za sintezo znanja v primerjavi z milijardami, ki jih porabijo za nove raziskave.

Da bi to rešili, sta ESRC in Wellcome, financer biomedicinskih raziskav v Londonu, 21. septembra objavila, da bosta vložila 9,2 milijona funtov (12,2 milijona dolarjev) oziroma približno 45 milijonov funtov v petih letih v baze podatkov in orodja, ki lahko pomagajo sintetizirati raziskave. Britanski minister za znanost Patrick Vallance in šef Wellcome John-Arne Røttingen sta napovedala financiranje na dogodku v New Yorku, povezanem z vrhom Združenih narodov o prihodnosti, srečanjem, namenjenim oblikovanju boljšega sveta, tudi z znanostjo.

Raziskovalci so pozdravili novico – domnevno eno največjih posamičnih naložb v sintezo dokazov – in pravijo, da prihaja ob pravem času, saj napredek umetne inteligence (AI) pospešuje proces iskanja in združevanja študij. "Tako vznemirljivo je," pravi Isabelle Mercier, raziskovalka pri Razvojnem programu Združenih narodov Podprte sinteze dokazov v ZN. »Pred štirimi leti je bilo to preveliko, da bi o tem razmišljali, zdaj pa ugotavljamo, da lahko to dejansko uresničimo,« pravi.

Toda umetna inteligenca tudi oteži nalogo, saj lahko klepetalni roboti z umetno inteligenco, kot je ChatGPT, ustvarijo zveneče verodostojne, a potencialno zavajajoče povzetke rezultatov raziskav. »Izziv je, kako ločiti, kaj je resnično zanesljivo, od tega, kar ni,« pravi Moy.

Proizvodnja sintez je običajno počasna, težavna in draga. Raziskovalci, ki izvajajo sistematični pregled, morajo iskati po svetovnih bazah podatkov objavljenih in neobjavljenih člankov, da bi našli potencialno ustrezne študije. Nato skrčijo dolg seznam tisočih študij na najpomembnejše, ocenijo njihovo zanesljivost, izvlečejo podatke in združijo rezultate, včasih z uporabo statistične metode, imenovane meta-analiza. Tudi ko so zaključene, sinteze dokazov pogosto ne dosežejo oblikovalcev politik in hitro postanejo zastarele, ko pridejo nove raziskave. "Ko oblikovalec politike pride z vprašanjem, ne bi smelo trajati tri mesece, da najdemo raziskavo," pravi James Thomas, specialist za sintezo raziskav na University College London. "To je smešno."

Težava se je poslabšala med pandemijo COVID-19, ko so oblasti povsod potrebovale hitro sintezo za sprejemanje odločitev glede zdravil, mask in zaklepanja. Sprva jih znanstveniki niso mogli zagotoviti dovolj hitro – potem pa so jih proizvedli preveč podvojenih sintez in slabih ocen.

Sanje znanstvenikov so, da bi lahko kdorkoli in kjer koli s pritiskom na gumb sestavil sintezo, prilagojeno njihovemu vprašanju in regiji. Da bi to naredili, želijo raziskovalci ustvariti 'banke dokazov': skupne podatkovne zbirke vnaprej izbranih študij, označene z informacijami, kot sta metoda in lokacija, ter vsebujejo podatke v skupni obliki, da jih je mogoče kombinirati. Usposobljena orodja AI bi morala opraviti večino dolgočasnega dela razvrščanja študij in sintetiziranja podatkov, medtem ko ljudje preverjajo kakovost – na primer z ocenjevanjem morebitnih pristranskosti v temeljnih študijah.

Nekatere zbirke podatkov so že na pravi poti. Fundacija Education Endowment Foundation (EEF), dobrodelna ustanova v Londonu, ima bazo podatkov z več kot 3500 izobraževalnimi študijami. Z uporabo te zbirke podatkov je organizacija ustvarila vrsto sistematičnih pregledov, ki Vpliv mentorstva, domačih nalog in velikosti razreda na učenje razkriti. Podatkovno bazo in preglede deli z več državami, da prepreči, da bi druge ponovile delo. V idealnem primeru, "namesto da naredite šest ločenih sistematičnih pregledov, ustvarite en odličen pregled, ki ga lahko uporabimo skupaj," pravi Jonathan Kay, ki vodi delo sinteze dokazov pri EEF.

Zadnje naložbe bi lahko sčasoma pripeljale do serije podatkovnih zbirk, podobnih ERS, pripravljenih za sintezo za ključna področja politike, kot je varstvo okolja. Iz teh želijo zagovorniki zgraditi 'žive' - ali nenehno posodobljene - sinteze dokazov, ki kažejo, npr. ki pomaga zmanjšati podnebne spremembe, izboljšanje duševnega zdravja in zmanjšanje brezposelnosti mladih.

Wellcome namerava financirati konzorcije, ki razvijajo podatkovne platforme in orodja, ki pomagajo doseči ta cilj. To je "nenavadna poteza družbe Wellcome," pravi Tariq Khokhar, vodja podatkovne organizacije za znanost in zdravje. Organizacija je znana po tem, da financira zdravstvene raziskave, vendar bi ta denar lahko pripomogel k temu, da bi bili dokazi v različnih disciplinah bolj razumljivi. "To je res temelj, na katerem lahko vsak gradi," pravi.

ESRC namerava financirati konzorcij za pospešitev sinteze dokazov in razvoj prvih različic živih sintez na področjih, kot je zdravo staranje. Obe prizadevanji bi bili različni, vendar bi se lahko prekrivali, pravi Khokhar.

ESRC prav tako želi, da njegov konzorcij razvije načine, ki bi oblikovalcem politik olajšali uporabo sinteze dokazov. Nekateri britanski uradniki začenjajo uporabljati orodje AI, imenovano Redbox Copilot, za analizo in povzemanje vladnih dokumentov in govorov. Raziskovalci bi lahko razvili orodja, ki "vključujejo dokaze sistematičnega pregleda v ta proces," pravi Gold.

55 milijonov funtov ne bo dovolj za doseganje takšne brezhibne sinteze dokazov, o kateri sanjajo zagovorniki. Toda financerji upajo, da bodo zbrali več sredstev - in da bo ta začetna naložba spodbudila druge financerje, da se vključijo. »Ideja je, da lahko vsaka naložba nadgradi veliko dela, ki je že bilo opravljeno,« pravi Khokhar.