A tudósok a bizonyítékok hatalmas tárházát fejlesztik hatékony politikák kidolgozása érdekében

A tudósok a bizonyítékok hatalmas tárházát fejlesztik hatékony politikák kidolgozása érdekében

A befektetők több tízezer millió dollárt költenek egy ambiciózus tervbe, hogy megoldják a tudományos tanácsadás legnagyobb problémáját: bizonyítékokat szolgáltatjanak a kormányoknak. Céljuk egy olyan rendszer létrehozása, amely lehetővé teszi a döntéshozók számára világszerte, hogy olyan tudományos bizonyítékok gyors szintézisét állítsák elő, amelyek segítik őket bizonyítékokon alapuló politikák kidolgozásában. olyan kritikus problémák, mint az éghajlatváltozás megoldani.

„Végül óriási hasznunkra válhat egy olyan világ, amelyben minden jelentős társadalmi probléma átfogó bizonyítékszintézise egy helyen elérhető, folyamatosan frissítve” – mondja Will Moy, a társadalomtudományi értékeléseket támogató nemzetközi nonprofit szervezet, a Campbell Collaboration vezetője.

Bár a szakpolitika szempontjából releváns területek kutatói számos tanulmányt készítenek, a témával kapcsolatos bizonyítékok súlyát képviselő szintézisek sok területen ritkák, és nem rutinszerűen használják a politikai döntéshozatal iránymutatására. „Óriási igény van” a döntéshozók részéről az ilyen szintézisekre – mondja Jen Gold, a Gazdasági és Társadalmi Kutatási Tanács (ESRC), egy brit finanszírozó ügynökség kutatási igazgatója. – De az ajánlat nem egyezik.

A bizonyítékok szintézise „mindent, amit a világ tud egy fontos probléma megoldásáról egy helyen” – magyarázza Moy. Az orvostudományban az orvosok rendszeresen több ezer szisztematikus áttekintést alkalmaznak – alapos szintézisek olyan tanulmányok, mint például a randomizált gyógyszervizsgálatok – amelyek megmutatják, hogy a kezelés segít-e vagy árt-e. A legtöbb más területen azonban hiányzik egy ilyen átfogó alap (lásd „Hiányzó szintézisek”). Hónapokba vagy évekbe telhet, amíg a kutatások hatalmas gyűjteményéből értelmet nyernek – és a finanszírozó ügynökségek a történelem során viszonylag keveset költöttek a tudás szintézisére ahhoz képest, hogy milliárdokat költenek új kutatásokra.

Ennek megoldására az ESRC és a Wellcome, az orvosbiológiai kutatásokat finanszírozó londoni szeptember 21-én bejelentette, hogy 9,2 millió fontot (12,2 millió dollárt), illetve körülbelül 45 millió fontot fektetnek be öt év alatt olyan adatbázisokba és eszközökbe, amelyek segíthetik a kutatások szintetizálását. Patrick Vallance brit tudományos miniszter és a Wellcome főnöke, John-Arne Røttingen jelentette be a finanszírozást egy New York-i rendezvényen, amely az Egyesült Nemzetek Jövőről szóló Csúcstalálkozójához kapcsolódik, amely találkozó célja egy jobb világ alakítása, többek között a tudományon keresztül.

A kutatók üdvözölték a hírt, amelyről úgy gondolják, hogy ez az egyik legnagyobb egyedi befektetés a bizonyítékok szintézisébe, és azt mondják, hogy a megfelelő időben érkezik, mivel a mesterséges intelligencia (AI) fejlődése felgyorsítja a tanulmányok megtalálásának és kombinálásának folyamatát. „Annyira izgalmas” – mondja Isabelle Mercier, az Egyesült Nemzetek Fejlesztési Programjának kutatója Támogatott bizonyítékok szintézise az ENSZ-ben. „Négy évvel ezelőtt ez túl nagy volt ahhoz, hogy belegondoljunk, de most kezdjük látni, hogy valóban meg tudjuk valósítani” – mondja.

De a mesterséges intelligencia is megnehezíti a feladatot, mivel az olyan AI chatbotok, mint a ChatGPT, hitelesen hangzó, de potenciálisan félrevezető összefoglalókat készíthetnek a kutatási eredményekről. „A kihívás az, hogyan lehet elválasztani azt, ami igazán megbízható, és a nem megbízható” – mondja Moy.

A szintézisek előállítása általában lassú, nehéz és költséges. A szisztematikus áttekintést végző kutatóknak világméretű adatbázisokban kell keresniük a publikált és nem publikált dokumentumokat, hogy potenciálisan releváns tanulmányokat találjanak. Ezután a több ezer tanulmányból álló hosszú listát a legrelevánsabbakra redukálják, értékelik azok megbízhatóságát, kivonják az adatokat, és egyesítik az eredményeket, néha a metaanalízisnek nevezett statisztikai módszert alkalmazva. A bizonyítékszintézisek gyakran még akkor sem jutnak el a döntéshozókhoz, ha elkészülnek, és gyorsan elavulnak, ahogy új kutatások érkeznek. „Ha egy politikai döntéshozó kérdéssel érkezik, nem kell három hónapba telnie a kutatás megtalálásához” – mondja James Thomas, a University College London kutatási szintézis specialistája. – Ez nevetséges.

A probléma súlyosbodott a COVID-19 világjárvány idején, amikor a hatóságoknak mindenhol gyors szintézisre volt szükségük ahhoz, hogy döntéseket hozzanak a gyógyszerekről, maszkokról és elzárásokról. Eleinte a tudósok nem tudták elég gyorsan biztosítani őket, de aztán előállították őket túl sok ismétlődő szintézis és gyenge értékelés.

A tudósok álma, hogy bárki, bárhol egy gombnyomással összeállíthassa a kérdésére és régiójára szabott szintézist. Ennek érdekében a kutatók „bizonyítékbankokat” szeretnének létrehozni: előre kiválasztott tanulmányok megosztott adatbázisait, amelyek olyan információkkal vannak ellátva, mint a módszer és a hely, és amelyek közös formátumban tartalmazzák az adatokat, így kombinálhatók. A képzett mesterséges intelligencia eszközöknek kell elvégezniük a tanulmányok rendezése és az adatok szintetizálása fáradságos munkáját, miközben az emberek ellenőrzik a minőséget – például az alapul szolgáló tanulmányok lehetséges torzításainak felmérésével.

Egyes adatbázisok már jó úton haladnak. Az Education Endowment Foundation (EEF), egy londoni jótékonysági szervezet, több mint 3500 oktatási tanulmányt tartalmazó adatbázissal rendelkezik. Ennek az adatbázisnak a felhasználásával a szervezet szisztematikus áttekintések sorozatát hozta létre, amelyek A korrepetálás, a házi feladat és az osztálylétszám hatása a tanulásra felfedni. Megosztja az adatbázist és az áttekintéseket több országgal, hogy elkerülje, hogy mások megismételjék a munkát. Ideális esetben „hat külön szisztematikus áttekintés helyett egyetlen nagyszerű áttekintést készítünk, amelyet együtt használhatunk” – mondja Jonathan Kay, az EEF bizonyíték-szintézisének vezetője.

A legújabb beruházások végül az EFA-hoz hasonló adatbázisok sorozatát eredményezhetik, amelyek készen állnak a szintetizálásra olyan kulcsfontosságú szakpolitikai területeken, mint a környezetvédelem. Ezekből az érdekvédők „élő” – vagy folyamatosan frissített – bizonyítékszintéziseket akarnak építeni, amelyek azt mutatják, hogy pl. amely segít csökkenteni a klímaváltozást, a mentális egészség javítása és a fiatalok munkanélküliségének csökkentése.

A Wellcome olyan konzorciumokat kíván finanszírozni, amelyek e cél elérését segítő adatplatformokat és eszközöket fejlesztenek. Ez „a Wellcome szokatlan lépése” – mondja Tariq Khokhar, a jótékonysági szervezet tudományos és egészségügyi adatokért felelős vezetője. A szervezet arról ismert, hogy finanszírozza az egészségügyi kutatásokat, de ez a pénz segíthet érthetőbbé tenni a különböző tudományágak bizonyítékait. „Ez valóban egy olyan alap, amelyre bárki építhet” – mondja.

Az ESRC egy konzorcium finanszírozását tervezi a bizonyítékok szintézisének felgyorsítására és az élő szintézisek első verzióinak kidolgozására olyan területeken, mint például az egészséges öregedés. A két erőfeszítés eltérő lenne, de átfedheti egymást, mondja Khokhar.

Az ESRC azt is szeretné elérni, hogy konzorciuma olyan módszereket dolgozzon ki, amelyek megkönnyítik a politikai döntéshozók számára a bizonyítékok szintézisének használatát. Egyes brit tisztviselők a Redbox Copilot nevű mesterségesintelligencia-eszközt kezdik használni kormányzati dokumentumok és beszédek elemzésére és összefoglalására. A kutatók olyan eszközöket fejleszthetnek ki, amelyek „szisztematikus felülvizsgálati bizonyítékokat építenek be ebbe a folyamatba” – mondja Gold.

Az 55 millió font nem lesz elég ahhoz, hogy elérjük azt a zökkenőmentes bizonyítékszintézist, amelyről az érdekvédők álmodnak. A finanszírozók azonban azt remélik, hogy több forrást tudnak összesíteni – és ez a kezdeti befektetés más finanszírozókat is ösztönözni fog a részvételre. „Az ötlet az, hogy minden egyes beruházás sok, már elvégzett munkára épülhet” – mondja Khokhar.