ChatGPT: Metin robotu ABD tıp sınavını çözüyor

GokyuzuYankilari

Global Mod
Yetkili
Global Mod
Minimum puana ulaşıldı


ChatGPT aynı zamanda tıbbi bir sınavda da ustalaşıyor mu? Bir çalışmada, metin robotu hiç de fena değil







ChatGPT ana sayfasını görüntüleyen bir ekranda bir şiir kitabı var.

© Kaynak: Karl-Josef Hildenbrand/dpa


Yapay zeka ve sohbet robotlarını çevreleyen yutturmaca bilime de ulaştı. Metin robotu ChatGPT artık normalde yıllarca tıbbi eğitim gerektiren sınav sorularını çözmüştür. Ancak test sınırlamalarla çalıştı.








San Francisco Metin robotu ChatGPT, ABD’deki müstakbel tıp öğrencilerine yönelik bir sınavda oldukça başarılı olacaktır. Belirli koşullar altında, AI yazılımı Amerika Birleşik Devletleri Tıbbi Lisanslama Sınavının (USMLE) üç teorik bölümünde gerekli minimum puan sayısını elde etmeyi başardı. Bu, ABD’li uzmanlar tarafından “PLOS Digital Health” dergisinde bildirildi. Ancak, Kaliforniyalı startup AnsibleHealth’ten Victor Tseng liderliğindeki ekip birkaç soruyu atladı.


USMLE, tıp öğrencilerinin Amerika Birleşik Devletleri’nde tıp pratiği yapabilmek için geçmeleri gereken standartlaştırılmış üç bölümden oluşan bir sınavdır. Biyokimyadan tanısal düşünceye ve biyoetiğe kadar çoğu tıbbi disiplinden gelen bilgiler değerlendirilir.




Sohbet GPT yutturmaca: AI sohbet robotları hayatımızı değiştirecek – onlar bir tehlike mi?


Chatbot Chat GPT, istenirse hemen hemen her tür metin üretebilir. Bu genellikle şaşırtıcı derecede iyi çalışır ve yapay zeka tarafından üretilen bir metni bir insanınkinden ayırt etmeyi zorlaştırır.

Resim tabanlı sorular olmadan çalışın


Ancak, ChatGPT ile test yaparken, çalışmanın yazarlarının OpenAI AI yazılımının yalnızca metin girişini kabul edebileceğini hesaba katması gerekiyordu. Yazarlar, görüntüye dayalı soruları kaldırdıktan sonra, yazılımı geçen yaz USMLE sınavının bir parçası olan halka açık 350 soru üzerinde test ettiler.

Bu herkesin bildiği zor uzman sınavı için minimum geçme notunu elde etmek ve bunu herhangi bir insan yardımı olmadan yapmak, klinik AI’nın evriminde dikkate değer bir kilometre taşıdır.
çalışmanın yazarları


Belirsiz cevaplar da kaldırıldıktan sonra ChatGPT, sınavın üç USMLE bölümünde hala alınabilecek puanların yüzde 52,4 ila 75’ini elde etti. Sonuçlar, testin bölümüne ve görev türüne (örneğin, tik testleri veya açık uçlu sorular) bağlı olarak değişiklik gösteriyordu. Geçme eşiği yüzde 60 civarındadır ve yıla göre biraz değişir. Belirsiz cevaplar sonuca dahil edilirse, ChatGPT olası puanların yüzde 36,1 ila 61,5’ini elde etti.

Yazarlara göre ChatGPT, yalnızca biyomedikal literatür üzerine eğitilmiş bir karşı model olan PubMedGPT’den daha iyi performans gösterdi.

ChatGPT hukuk sınavlarını da geçti


Ekip, ChatGPT’nin tıp eğitimini ve dolayısıyla klinik uygulamayı iyileştirme potansiyeline sahip olduğu sonucuna vardı. Yazarlar, “Zorluğuyla ünlü bu uzman sınavında geçme notunu elde etmek ve bunu herhangi bir insan yardımı olmadan yapmak, klinik yapay zekanın geliştirilmesinde dikkate değer bir kilometre taşıdır” diye yazdı.


Metin robotu ChatGPT, sınavlarda yüksek puan alamasa da daha önce diğer üniversite derslerinde kendini göstermişti. Minnesota Üniversitesi’ndeki profesörlere göre AI chatbot aracı, Pennsylvania Üniversitesi’ndeki Wharton School of Business’ta dört ders ve bir derste hukuk sınavlarını geçti.

Teknoloji devlerinden ticaret darbesi


Kasım 2022’de Kaliforniyalı start-up şirketi OpenAI tarafından ChatGPT’nin halka arz edilmesinin ardından, teknoloji endüstrisindeki bazı oyuncular, kullanıcıların lehine olmak için gerçek bir yarış içindeydi. OpenAI, Microsoft tarafından milyarlarca dolarla desteklenmektedir. Buna karşılık Microsoft, teknolojiyi Bing arama motoruna ve diğer ürünlerine entegre edebilir.

OpenAI ve Microsoft’un en büyük rakibi Google’dır. Arama motoru devi, Salı günü kendi sohbet botu Bard’ı başlattı. Alman AI araştırmacısı Richard Socher’in You.com gibi daha küçük oyuncuları da yarışa katılıyor. Socher, Dresden’den geliyor ama yıllardır ABD’de yaşıyor ve çalışıyor.


Haberler
 
Üst