Chatgpt går två: Hur ai chatbot förändrade forskarnas liv

Chatgpt går två: Hur ai chatbot förändrade forskarnas liv

Under de två åren sedan Dela Chatgpt För allmänheten använder forskare det för att kommunicera sina Förbättra vetenskapliga texter, Granska den vetenskapliga litteraturen och Skriv kod för att analysera data. Medan vissa tror att chatboten, som blev populär den 30 november 2022, ökar forskarnas produktivitet, andra fruktar att han Plagiering underlättade, introducerar felaktigheter i forskningsartiklar och förbrukar stora mängder energi.

Hoboken, New Jersey-baserade förlaget Wiley undersökte 1 043 forskare i mars och april om deras användning av generativa AI-verktyg som Chatgpt och delade de preliminära resultaten med naturen. Åttio procent av de svarande rapporterade att han använde chatgpt antingen personligen eller professionellt, vilket gjorde det till det mest använda verktyget bland akademiker. Tre fjärdedelar av de svarande trodde att det under de kommande fem åren kommer att vara viktigt för forskare att utveckla AI -förmågor att göra sitt arbete.

"AI -ordprocessorer fanns tidigare, men en betydande förändring inträffade med utgivningen av dessa mycket kraftfulla stora språkmodeller," förklarar James Zou, AI -forskare vid Stanford University i Kalifornien. Chatbot Chatgpt, utvecklad av San Francisco-baserade teknikföretaget OpenAI, var katalysatorn för denna förändring.

För att markera Chatgpts andra födelsedag sammanställde naturen användningsdata och talade med forskare om hur Chatgpt har förändrat forskningslandskapet.

Chatgpt i antal

• 60.000: Die Mindestanzahl an wissenschaftlichen Arbeiten, die 2023 veröffentlicht wurden und voraussichtlich mit Hilfe eines großen Sprachmodells (LLM) verfasst wurden 1. Dies entspricht etwas mehr als 1 % aller Artikel in der von dem Forschungsteam untersuchten Dimensions-Datenbank akademischer Veröffentlichungen.
• 10 %: Der Mindestanteil der Forschungspapiere, die von Mitgliedern der biomedizinischen Gemeinschaft in der ersten Jahreshälfte 2024 veröffentlicht wurden und voraussichtlich ihre Abstracts mit Unterstützung eines LLM verfasst haben 2. Eine andere Studie schätzte diesen Anteil für die Informatikgemeinde im Februar sogar auf höhere 17.5 % 3.
• 6.5–16.9 %: Der geschätzte Anteil der Peer-Reviews, die 2023 und 2024 an einer Auswahl von Top-AI-Konferenzen eingereicht wurden und vermutlich erheblich von LLMs generiert wurden 4. Diese Bewertungen beurteilen Forschungspapiere oder Präsentationen, die für die Konferenzen vorgeschlagen werden.

Skrivassistent

Alla dessa siffror, bestämda genom att utvärdera mönster och nyckelord i texter som är karakteristiska för LLM, är förmodligen konservativa uppskattningar, säger Debora Weber-Wulff, en datavetare och plagieringsforskare vid HTW Berlin. Deras arbete visar att detekteringsverktyg ofta misslyckas när det gäller att bestämma om ett papper skrevs med hjälp av AI 5.

Under de senaste två åren har forskare funnit att att använda chatgpt för att skapa sammanfattningar, såväl som bidragsansökningar och stödbrev för studenter, gör det möjligt för dem att fokusera på komplexa uppgifter. "De saker som är värda vår tid är de svåra frågorna och de kreativa hypoteserna," säger Milton Pividori, en medicinsk informatik vid University of Colorado School of Medicine i Aurora.

Forskare rapporterar att LLM: er är särskilt användbara för att övervinna språkbarriärer. "Det demokratiserar skrivande och hjälper människor som engelska är ett andraspråk," förklarar Gabe Gomes, kemist vid Carnegie Mellon University i Pittsburgh, Pennsylvania. En analys som publicerades på PrePrint -servern SSRN före Peer Review i november fann att kvaliteten på skrivning i artiklar av författare vars första språk inte är engelska förbättrats efter Chatgpts publicering, mer än att skriva författare flytande på engelska 6.

Sedan det släpptes 2022 har Chatgpt genomgått flera uppgraderingar. GPT-4, Publicerad i mars 2023, imponerade användare med sin förmåga att generera mänskliga texter. Den senaste modellen, O1, som tillkännagavs i september Och tillgängligt för vissa betalande kunder såväl som vissa utvecklare i testning, säger OpenAI att det kan "analysera komplexa uppgifter och lösa svårare problem än tidigare modeller inom vetenskap, programmering och matematik." Kyle Kabasares, en datavetare vid Bay Area Environmental Research Institute i Moffett Field, Kalifornien, använde O1 till För att återge en viss kod från sitt doktorandprojekt. När han gick in i informationen från metodersavsnittet i sitt forskningsdokument skrev AI -systemet kod på bara en timme som hade tagit honom nästan ett år av sina forskarstudier för att skapa.

Begränsningar och potential

Ett område där chatgpt och liknande AI -system har varit mindre framgångsrika är att genomföra litteraturrecensioner, säger Pividori. "De hjälper oss inte riktigt mer produktiva," förklarar han, eftersom en forskare måste läsa och förstå de relevanta artiklarna i sin helhet. "Om papperet inte är centralt för din forskning kan du kanske använda AI -verktyg för att sammanfatta det," tillägger han. Men LLMS har visats hallucinera 7 - Det vill säga de gör information. Till exempel kan de prata om siffror som inte ens finns i en artikel.

Ett annat problem för forskare när man använder LLMS är dataskydd. Till exempel, när forskare matar in opublicerade originaldata i ett av dessa AI -verktyg för att skriva ett papper, finns det en risk att innehållet kommer att användas för att träna uppdaterade versioner av dessa modeller. "Det här är svarta lådor," förklarar Weber-Wulff. "Du har ingen aning om vad som händer med de uppgifter du laddar upp där."

För att undvika denna risk väljer vissa forskare mindre, lokala modeller istället för chatgpt. "Du kör den på din dator och ingenting delas externt," säger Pividori. Han tillägger att vissa ChatGPT -prenumerationsplaner säkerställer att dina data inte används för att träna modellen.

En stor fråga som forskare har bedrivit under det senaste året är om chatgpt kommer att gå utöver rollen som en virtuell assistent och en AI -forskare kan vara. Vissa tidiga ansträngningar tyder på att detta är möjligt. Zou leder utvecklingen av ett virtuellt laboratorium där olika LLM: er tar på sig rollen som forskare i ett tvärvetenskapligt team medan en mänsklig forskare ger feedback på hög nivå. "De arbetar tillsammans för att formulera nya forskningsprojekt," säger han. Förra månaden publicerade Zou och hans kollegor resultaten från ett av dessa projekt på PrePrint Server Biorxiv före peer review 8. Det virtuella laboratoriet designade nanobodier-en typ av liten antikropp-som kan binda till varianter av SARS-CoV-2-koronaviruset som orsakade den covid-19-pandemin. Mänskliga forskare validerade arbetet genom experiment och identifierade två lovande kandidater för ytterligare studier.

Gomes och hans kollegor är också glada över möjligheten att använda chatgpt i labbet. Hon Använd verktyget för att utföra flera kemiska reaktioner Med hjälp av ett robotsystem satte de ut i slutet av förra året. "Förväntningen är att dessa modeller kommer att kunna upptäcka ny vetenskap," säger Gomes.

1. Gray, A. Preprint on Arxiv https://doi.org/10.48550/arxiv.2403.16887 (2024).

2. Kobak, D., González-Márquez, R., Horvát, E.-á. & Lause, J. Preprint on Arxiv https://doi.org/10.48550/arxiv.2406.07016 (2024).

3. Liang, W. et al. Förtryck på arxiv https://doi.org/10.48550/arxiv.2404.01268 (2024).

4. Liang, W. et al. Förtryck på arxiv https://doi.org/10.48550/arxiv.2403.07183 (2024).

5. Weber-Wulff, D. et al. Int. J. Educ. Integr. 19, 26 (2023).

   Artikel
   Pub
   
   Google Scholar

6. Liang, Y., Yang, T. & Zhu, F. Förtryck på SSRN https://doi.org/10.2139/ssrn.4992755 (2024).

7. Farquhar, S. et al. Nature 630, 625–630 (2024).

   Artikel
   Pub
   
   Google Scholar

8. Swanson, K., Wu, W., Bulaong, N. L., Pak, J. E. & Zou, J. Preprint on Biorxiv https://doi.org/10.1101/2024.11.11.623004 (2024).

Ladda ner referenser