Vytvárajú modely AI viac originálnych nápadov ako vedci?
Vytvárajú modely AI viac originálnych nápadov ako vedci?
Systém generátora nápadov poháňaný umelou inteligenciou (AI) vyvinul viac pôvodných výskumných prístupov v nedávnej rekvizite na ARXIV ako 50 vedcov, ktorí pracovali nezávisle od seba 1 .
Nápady, ktoré generovali ľudia a AI, hodnotili odborníci, ktorí nevedeli, kto alebo čo urobil každý nápad. Odborníci hodnotili koncepty generované AI ako vzrušujúce v porovnaní s myšlienkami napísanými ľuďmi, hoci návrhy AI robia z hľadiska uskutočniteľnosti trochu horšie.
Vedci však poukazujú na to, že štúdia, ktorá ešte nebola recenzovaná, má obmedzenia. Zamerala sa na konkrétnu výskumnú oblasť a vyžadovala, aby ľudskí účastníci spontánne rozvíjali myšlienky, čo pravdepodobne zhoršuje ich schopnosť vytvárať najlepšie koncepty.
Umelá inteligencia vo vede
Existuje , Literature Research . Bolo však ťažké posúdiť, či tieto nástroje AI môžu vytvárať nové výskumné prístupy na podobnej úrovni ako ľudia. Dôvodom je, že hodnotenie nápadov Bleiben Sie informiert: Jeden Abend senden wir Ihnen die Artikel des Tages aus der Kategorie Allgemein – übersichtlich als Liste. Jednoročný projekt je jedným z najväčších projektov na hodnotenie, či už veľké jazykové modely-technológie za nástrojmi ako Chatgpt -inovatívne výskumné prístupy, Tom Hope, počítačový vedec vo všetkých inštitúciách pre AI v Jeruzaleme. „Musí existovať viac práce,“ hovorí. Tím prijal viac ako 100 výskumných pracovníkov v oblasti spracovania prirodzeného jazyka, sub -peroerea počítačovej vedy, ktorá sa zaoberá komunikáciou medzi AI a ľuďmi. Účastníci deviatich rokov boli poverení rozvíjať nápady a formulovať do desiatich dní na základe jednej zo siedmich tém. Ako stimul, vedci dostali 300 dolárov za každý nápad, s bonusom 1 000 dolárov za päť najlepších nápadov. Vedci zároveň vyvinuli generátor nápadov s Claude 3.5, LLM vyvinutý antropickým v San Franciscu v Kalifornii. Vedci požiadali svoj nástroj AI, aby našli relevantné články o siedmich výskumných témach prostredníctvom sémantického učenia, vyhľadávacieho nástroja na literatúru založenú na AI. Na základe týchto článkov vedci požiadali svojich agentov AI, aby vygenerovali 4 000 nápadov pre každú tému výskumnej témy a vyhodnotili tie najoriginálnejšie. Potom vedci náhodne priradili človeka a AI generovali myšlienky 79 odborníkov, ktorí hodnotili každú myšlienku s ohľadom na novosť, napätie, uskutočniteľnosť a očakávanú účinnosť. Aby sa zabezpečilo, že tvorcovia myšlienok zostali pre odborníkov neznáme, vedci použili ďalší LLM na úpravu oboch typov textu tak, aby štýl písania a zvuk boli štandardizované bez toho, aby zmenili samotné myšlienky. V priemere odborníci hodnotili AI generované nápady ako originálnejšie a vzrušujúcejšie ako návrhy ľudských účastníkov. Pri pohľade na 4 000 nápadov, ktoré vytvoril LLM, vedci našli iba asi 200, ktoré boli skutočne jedinečné, čo naznačuje, že AI sa stala menej originálnym, tým viac nápadov vygenerovala. Keď sa účastníci uskutočnili v rozhovoroch, väčšina pripustila, že ich predložené nápady boli iba priemerné v porovnaní s myšlienkami vyrobenými v minulosti. Výsledky naznačujú, že LLM môžu ľahko generovať nápady ako existujúca literatúra, hovorí Cong Lu, výskumný pracovník pre strojové učenie na University of British Columbia vo Vancouveri v Kanade. Či už však dokážete prekonať najviac priekopnícke ľudské myšlienky, zostáva otvorenou otázkou. Ďalším obmedzením štúdie je, že porovnané písomné myšlienky spracovali LLM, ktorý zmenil jazyk a dĺžku podaní, hovorí Jevin West, počítačový vedec v oblasti spoločenských vied na University of Washington v Seattli. Takéto zmeny mohli byť jemné, ako odborníci vnímali novosť, dodáva. West dodáva, že to nemusí byť úplne spravodlivé porovnanie, aby vedci konkurovali LLM, ktoré môžu za pár hodín generovať tisíce nápadov. „Musíte porovnávať jablká s jablkami,“ hovorí. SI a jeho kolegovia plánujú porovnávať nápady generované AI s vedúcimi príspevkami konferencie, aby lepšie porozumeli tomu, ako LLM robia v porovnaní s ľudskou kreativitou. „Snažíme sa stimulovať komunitu, aby premýšľala viac o tom, ako by mala vyzerať budúcnosť, ak AI môže zohrávať aktívnejšiu úlohu vo výskumnom procese,“ hovorí. si, C., Yang, D. & Hashimoto, T. Pretlač v Arxiv https://doi.org/10.48550/arxiv.24109 (2024).
Human Expert