Chatgpt går to: Hvordan AI Chatbot forandret forskernes liv

Chatgpt går to: Hvordan AI Chatbot forandret forskernes liv

I de to årene siden Deling chatgpt For publikum bruker forskere det for å kommunisere sin forbedre vitenskapelige tekster, Gjennomgå den vitenskapelige litteraturen og Skriv kode for å analysere data. Mens noen tror at chatbot, som ble populær 30. november 2022, øker forskernes produktivitet, andre frykter at han Plagiering gjorde lettere, introduserer unøyaktigheter i forskningsartikler og forbruker store mengder energi.

Hoboken, New Jersey-baserte publiseringshus Wiley undersøkte 1.043 forskere i mars og april om deres bruk av generative AI-verktøy som ChatGPT og delte de foreløpige resultatene med naturen. Åtti prosent av de spurte rapporterte å bruke ChatGPT enten personlig eller profesjonelt, noe som gjorde det til det mest brukte verktøyet blant akademikere. Tre fjerdedeler av respondentene mente at det i løpet av de neste 5 årene vil være viktig for forskere å utvikle AI -evner for å gjøre arbeidet sitt.

"AI -tekstbehandlere eksisterte før, men et betydelig skifte skjedde med utgivelsen av disse veldig kraftige store språkmodellene," forklarer James Zou, en AI -forsker ved Stanford University i California. Chatbot Chatgpt, utviklet av San Francisco-baserte teknologifirmaet Openai, var katalysatoren for denne endringen.

For å markere Chatgpts andre bursdag samlet Nature bruksdata og snakket med forskere om hvordan Chatgpt har endret forskningslandskapet.

Chatgpt i tall

• 60.000: Die Mindestanzahl an wissenschaftlichen Arbeiten, die 2023 veröffentlicht wurden und voraussichtlich mit Hilfe eines großen Sprachmodells (LLM) verfasst wurden 1. Dies entspricht etwas mehr als 1 % aller Artikel in der von dem Forschungsteam untersuchten Dimensions-Datenbank akademischer Veröffentlichungen.
• 10 %: Der Mindestanteil der Forschungspapiere, die von Mitgliedern der biomedizinischen Gemeinschaft in der ersten Jahreshälfte 2024 veröffentlicht wurden und voraussichtlich ihre Abstracts mit Unterstützung eines LLM verfasst haben 2. Eine andere Studie schätzte diesen Anteil für die Informatikgemeinde im Februar sogar auf höhere 17.5 % 3.
• 6.5–16.9 %: Der geschätzte Anteil der Peer-Reviews, die 2023 und 2024 an einer Auswahl von Top-AI-Konferenzen eingereicht wurden und vermutlich erheblich von LLMs generiert wurden 4. Diese Bewertungen beurteilen Forschungspapiere oder Präsentationen, die für die Konferenzen vorgeschlagen werden.

Skriveassistent

Alle disse tallene, bestemt ved å evaluere mønstre og nøkkelord i tekster som er karakteristiske for LLM-er, er sannsynligvis konservative estimater, sier Debora Weber-Wulff, en dataforsker og plagieringsforsker ved HTW Berlin. Arbeidet deres viser at deteksjonsverktøy ofte mislykkes når det gjelder å avgjøre om et papir ble skrevet med hjelp fra AI 5.

I løpet av de siste to årene har forskere funnet ut at bruk av chatGPT for å lage abstrakter, samt gi applikasjoner og støttebrev for studenter, lar dem fokusere på komplekse oppgaver. "De tingene som er verdt vår tid er de harde spørsmålene og de kreative hypotesene," sier Milton Pividori, medisinsk informatiker ved University of Colorado School of Medicine i Aurora.

Forskere rapporterer at LLM -er er spesielt nyttige for å overvinne språkbarrierer. "Det demokratiserer skriving og hjelper mennesker som engelsk er et andrespråk," forklarer Gabe Gomes, en kjemiker ved Carnegie Mellon University i Pittsburgh, Pennsylvania. En analyse publisert på forhåndsprintserveren SSRN i forkant av fagfellevurdering i november fant at kvaliteten på skriving i papirer av forfattere hvis førstespråk ikke er engelsk forbedret etter Chatgpts publisering, mer enn skrivingen av forfattere flytende på engelsk 6.

Siden utgivelsen i 2022 har ChatGPT gjennomgått flere oppgraderinger. GPT-4, Publisert i mars 2023, imponerte brukerne med sin evne til å generere menneskelignende tekster. Den siste modellen, O1, som ble kunngjort i september Og tilgjengelig for noen betalende kunder så vel som visse utviklere i testing, sier Openai at de kan "analysere komplekse oppgaver og løse vanskeligere problemer enn tidligere modeller innen vitenskap, programmering og matematikk." Kyle Kabasares, en dataforsker ved Bay Area Environmental Research Institute i Moffett Field, California, brukte O1 til Å reprodusere litt kode fra doktorgradsprosjektet. Da han skrev inn informasjonen fra metodedelen i forskningsoppgaven, skrev AI -systemet kode på bare en time som hadde tatt ham nesten et år med studiene hans for å lage.

Begrensninger og potensial

Et område der ChatGPT og lignende AI -systemer har vært mindre vellykket, er å gjennomføre litteraturgjennomganger, sier Pividori. "De hjelper oss egentlig ikke å være mer produktive," forklarer han, fordi en forsker må lese og forstå de aktuelle artiklene i sin helhet. "Hvis papiret ikke er sentralt i forskningen din, kan det hende du kan bruke AI -verktøy for å oppsummere det," legger han til. Men LLMS har vist seg å hallusinere 7 - det vil si at de utgjør informasjon. For eksempel kunne de snakke om tall som ikke en gang eksisterer i en artikkel.

En annen bekymring for forskere når du bruker LLMS er databeskyttelse. For eksempel når forskere legger inn upubliserte originale data i et av disse AI -verktøyene for å skrive et papir, er det en risiko for at innholdet vil bli brukt til å trene oppdaterte versjoner av disse modellene. "Dette er svarte bokser," forklarer Weber-Wulff. "Du aner ikke hva som skjer med dataene du laster opp der."

For å unngå denne risikoen, velger noen forskere mindre, lokale modeller i stedet for chatGPT. "Du kjører den på datamaskinen din, og ingenting deles eksternt," sier Pividori. Han legger til at visse chatGPT -abonnementsplaner sikrer at dataene dine ikke brukes til å trene modellen.

Et stort spørsmål som forskere har forfulgt det siste året er om Chatgpt vil gå utover rollen som en virtuell assistent og en AI -forsker kan være. Noe tidlig innsats antyder at dette er mulig. Zou leder utviklingen av et virtuelt laboratorium der forskjellige LLM-er tar på seg forskernes rolle på et tverrfaglig team mens en menneskelig forsker gir tilbakemelding på høyt nivå. "De jobber sammen for å formulere nye forskningsprosjekter," sier han. Forrige måned publiserte Zou og kollegene resultatene av et av disse prosjektene på prepprint -serveren Biorxiv foran fagfellevurderingen 8. Det virtuelle laboratoriet designet nanobodies-en type lite antistoff-i stand til å binde seg til varianter av SARS-COV-2 koronavirus som forårsaket Covid-19-pandemien. Menneskelige forskere validerte arbeidet gjennom eksperimenter og identifiserte to lovende kandidater for videre studier.

Gomes og hans kolleger er også begeistret for muligheten for å bruke chatGPT i laboratoriet. Hun Bruk verktøyet til å utføre flere kjemiske reaksjoner Ved hjelp av et robotsystem distribuerte de sent i fjor. "Forventningen er at disse modellene vil kunne oppdage ny vitenskap," sier Gomes.

1. Gray, A. Forhåndtrykk på arxiv https://doi.org/10.48550/arxiv.2403.16887 (2024).

2. Kobak, D., González-Márquez, R., Horvát, E.-á. & Lause, J. Forhåndtrykk på ARXIV https://doi.org/10.48550/arxiv.2406.07016 (2024).

3. Liang, W. et al. Forhåndtrykk på arxiv https://doi.org/10.48550/arxiv.2404.01268 (2024).

4. Liang, W. et al. Forhåndtrykk på arxiv https://doi.org/10.48550/arxiv.2403.07183 (2024).

5. Weber-Wulff, D. et al. Int. J. Educ. Integr. 19, 26 (2023).

   Artikkel
   PubMed
   
   Google Scholar

6. Liang, Y., Yang, T. & Zhu, F. Forhåndtrykk på SSRN https://doi.org/10.2139/ssrn.4992755 (2024).

7. Farquhar, S. et al. Nature 630, 625–630 (2024).

   Artikkel
   PubMed
   
   Google Scholar

8. Swanson, K., Wu, W., Bulaong, N. L., Pak, J. E. & Zou, J. Preprint on Biorxiv https://doi.org/10.1101/2024.11.11.623004 (2024).

Last ned referanser