Учените разработват огромни хранилища от доказателства за разработване на ефективни политики

Учените разработват огромни хранилища от доказателства за разработване на ефективни политики

Инвеститорите влагат десетки хиляди милиони долари в амбициозен план за решаване на най-големия проблем в научните съвети: предоставяне на доказателства на правителствата. Тяхната цел е да създадат система, която позволява на политиците по целия свят да генерират бързи синтези на научни доказателства, които ще им помогнат да разработят политики, основани на доказателства критични проблеми като изменението на климата за решаване.

„В крайна сметка бихме могли да извлечем огромна полза от свят, в който изчерпателни синтези на доказателства за всеки голям социален проблем са достъпни на едно място, непрекъснато актуализирани“, казва Уил Мой, който ръководи Campbell Collaboration, международна организация с нестопанска цел, която подкрепя оценките на социалните науки.

Въпреки че изследователите в области, свързани с политиката, произвеждат различни изследвания, синтезите, които представят тежестта на доказателствата по дадена тема, са рядкост в много области и не се използват рутинно за насочване на политиката. „Има огромно търсене“ от политиците за такива синтези, казва Джен Голд, директор на изследванията в Съвета за икономически и социални изследвания (ESRC), британска агенция за финансиране. „Но офертата не съвпада.“

Синтезът на доказателства е „всичко, което светът знае за това как да се реши важен проблем на едно място“, обяснява Мой. В медицината лекарите рутинно използват хиляди систематични прегледи – задълбочени синтези на проучвания като рандомизирани изпитвания на лекарства – които показват дали лечението помага или вреди. В повечето други области обаче такава цялостна основа липсва (вижте „Липсващи синтези“). Може да отнеме месеци или години, за да се извлече смисъл от огромен набор от изследвания - и финансиращите агенции исторически са харчили сравнително малко за синтезиране на знания в сравнение с милиардите, които харчат за нови изследвания.

За да се справят с това, ESRC и Wellcome, финансиращият биомедицински изследвания в Лондон, обявиха на 21 септември, че инвестират съответно £9,2 милиона ($12,2 милиона) и около £45 милиона за пет години в бази данни и инструменти, които могат да помогнат за синтезиране на изследвания. Британският министър на науката Патрик Валанс и шефът на Wellcome Джон-Арне Рьотинген обявиха финансирането на събитие в Ню Йорк, свързано със срещата на върха на ООН за бъдещето, среща, насочена към оформянето на един по-добър свят, включително чрез наука.

Изследователите приветстваха новината - смятана за една от най-големите отделни инвестиции в синтеза на доказателства - и казват, че идва в точното време, тъй като напредъкът в изкуствения интелект (AI) ускорява процеса на намиране и комбиниране на проучвания. „Толкова е вълнуващо“, казва Изабел Мерсие, изследовател от Програмата за развитие на ООН Подкрепени синтези на доказателства в ООН. „Преди четири години това беше твърде голямо, за да мислим, но сега започваме да виждаме, че наистина можем да го направим“, казва тя.

Но AI също така прави задачата по-трудна, тъй като AI chatbots като ChatGPT могат да генерират достоверно звучащи, но потенциално подвеждащи обобщения на резултатите от изследванията. „Предизвикателството е как да отделим това, което е наистина надеждно, от това, което не е“, казва Мой.

Производството на синтези обикновено е бавно, трудно и скъпо. Изследователите, извършващи систематичен преглед, трябва да търсят в световни бази данни с публикувани и непубликувани статии, за да намерят потенциално подходящи изследвания. След това те намаляват дълъг списък от хиляди проучвания до най-подходящите, оценяват тяхната надеждност, извличат данните и комбинират резултатите, понякога използвайки статистически метод, наречен мета-анализ. Дори когато са завършени, синтезите на доказателства често не достигат до политиците и бързо остаряват с пристигането на нови изследвания. „Когато политиците идват с въпрос, не би трябвало да са необходими три месеца, за да се намерят изследванията“, казва Джеймс Томас, специалист по синтез на изследвания в University College London. "Това е нелепо."

Проблемът се влоши по време на пандемията от COVID-19, когато властите навсякъде се нуждаеха от бърз синтез, за ​​да вземат решения относно лекарства, маски и блокировки. Отначало учените не можаха да ги осигурят достатъчно бързо, но след това ги произведоха твърде много дублирани синтези и лоши оценки.

Мечтата на учените е всеки и навсякъде да може да състави синтез, съобразен с неговия въпрос и регион, с натискането на един бутон. За да направят това, изследователите искат да създадат „банки с доказателства“: споделени бази данни от предварително избрани изследвания, маркирани с информация като метод и местоположение и съдържащи данни в общ формат, така че да могат да бъдат комбинирани. Обучените AI инструменти трябва да свършат по-голямата част от досадната работа по сортиране на проучвания и синтезиране на данни, докато хората проверяват качеството – например, като оценяват възможните отклонения в основните изследвания.

Някои бази данни вече са на прав път. Фондацията за дарения за образование (EEF), благотворителна организация в Лондон, разполага с база данни с повече от 3500 образователни проучвания. Използвайки тази база данни, организацията създаде серия от систематични прегледи, които Влияние на обучението, домашната работа и размера на класа върху ученето разкривам. Той споделя базата данни и прегледите с множество държави, за да избегне други да повтарят работата. В идеалния случай, „вместо да правите шест отделни систематични прегледа, вие създавате един страхотен преглед, който можем да използваме заедно“, казва Джонатан Кей, който ръководи работата по синтеза на доказателства в EEF.

Последните инвестиции биха могли в крайна сметка да доведат до поредица от бази данни, подобни на EDF, готови да бъдат синтезирани за ключови области на политиката като опазване на околната среда. От тях застъпниците искат да изградят „живи“ – или постоянно актуализирани – синтези на доказателства, които показват, напр. което помага за намаляване на изменението на климата, подобряване на психичното здраве и намаляване на младежката безработица.

Wellcome възнамерява да финансира консорциуми, които разработват платформи за данни и инструменти, които помагат за постигането на тази цел. Това е „необичаен ход от Wellcome“, казва Тарик Кохар, ръководител на отдела за данни за наука и здраве на благотворителната организация. Организацията е известна с това, че финансира изследвания в областта на здравеопазването, но тези пари биха могли да помогнат за по-разбираемите доказателства в различни дисциплини. „Това наистина е основа, върху която всеки може да гради“, казва той.

ESRC планира да финансира консорциум за ускоряване на синтеза на доказателства и разработване на първи версии на живи синтези в области като здравословното остаряване. Двете усилия биха били различни, но биха могли да се припокрият, казва Khokhar.

ESRC също иска неговият консорциум да разработи начини, които да улеснят политиците при използването на синтез на доказателства. Някои британски служители започват да използват AI инструмент, наречен Redbox Copilot, за да анализират и обобщават правителствени документи и речи. Изследователите биха могли да разработят инструменти, които „включват доказателства от систематичен преглед в този процес“, казва Голд.

£55 милиона няма да са достатъчни за постигане на безпроблемен синтез на доказателства, за който защитниците мечтаят. Но финансиращите се надяват да съберат повече средства - и че тази първоначална инвестиция ще насърчи други финансиращи да се включат. „Идеята е, че всяка инвестиция може да се основава на много работа, която вече е свършена“, казва Khokhar.