ChatGBT tıpta uzmanlık sınavını geçti: Yapay zekaya sahip doktorlar mı geliyor?

ChatGPT, ABD'de doktorluk yapmak için gereken oldukça zorlu bir sınavı geçti. Araştırmacılar yapay zekaya sahip sohbet robotunun bu başarısını, tıp biliminde bir kilometre taşı olarak değerlendirdi.

Sohbet robotu ChatGBT, ABD'de üç bölümden oluşan Tıbbi Lisanslama Sınavı'nda (USMLE) çeşitli bölümlerde yüzde 52,4 ile yüzde 75 arasında başarılı oldu. Sınavın geçmek için ortalama yüzde 60 oranında başarılı olmak gerekiyor. Araştırmayı yapan teknoloji şirketi AnsibleHealth'ten araştırmacılar, konuya ilişkin yaptıkları açıklamada, "Zorluğuyla ünlü bu uzman sınavı için geçme puanına ulaşmak ve bunu herhangi bir insan takviyesi olmadan yapmak, klinik yapay zekanın gelişiminde dikkate değer bir kilometre taşını işaret ediyor." ifadelerini kullandı. Araştırmanın sonuçları, hakemli bir bilimsel dergi olan PLOS Digital Health'de yayımlandı.*Bununla birlikte ChatGBT, daha önce işletme (Pennsylvania Üniversitesi'nin Wharton İşletme Okulu) ve hukuk (Minnesota Üniversitesi) bölümlerde de* teste tabi tutulmuş ve sınavları geçmişti. Son çalışmada, araştırmacılar yazılımı Haziran 2022 USMLE'den 350 soru üzerinde test etti.İki doktor sonuçları değerlendirdi ve tutarsızlıklar üçüncü bir uzman tarafından incelendi.Söz konusu sınav, tıp öğrencilerinin ve eğitimdeki doktorların tıbbi alanlardaki bilgilerini değerlendiriyor ve 1992'den beri kullanılıyor. ABD'deki tıp öğrencileri USMLE'nin birinci adıma genellikle tıp fakültesinin ikinci yılının sonunda sonunda, ikinci adımına dördüncü yılda alınır, üçüncü adımına ise tıp fakültesini bitirdikten sonra ihtisaslarının* ilk yılında giriyor. Sınava her yıl yüz binden fazla öğrenci ve lisansüstü öğrenci giriyor. Diğer taraftan araştırmacılar, ChatGPT'nin ayrıca yanıtlarının yüzde 88,9'u için "yeni ve klinik olarak geçerli" en az bir önemli içgörü ürettiğini vurguladı. Sonuçlar, USMLE tarzı sorulardan oluşan bir sınavda yüzde 50,8 oranında başarılı olan ve , özel olarak biyomedikal alan literatürü üzerine eğitilmiş farklı bir yapay zeka robotu olan PubMedGPT'nin performansını da aştı. Çalışmanın yazarları araştırma bulgularının* ChatGPT'nin tıp eğitiminde değerli bir araç haline gelebileceğini gösterdiğini belirterek, "Yapay zeka botu, öğrencilerin farkındalık alanında olmayabilecek yeni ve açık olmayan kavramları ortaya çıkararak tıp öğretme konusunda kısmi bir yeteneğe sahip. Yapay zeka teknolojisi* artık tüm sağlık sektörlerinde çeşitli uygulamalarla yakında klinik uygulamada her yerde bulunacak şekilde konumlandırıldı." açıklamasında bulundu. Yakın zamanda Microsoft tarafından satın alınan ChatGPT, insanlarınkine benzer metinler oluşturmak için GPT (Generative Pre-training Transformer) mimarisinin bir çeşidini kullanan büyük bir dil modeline deniliyor. Çeşitli internet metinleri üzerinde eğitilen sohbet robotu ve çok çeşitli komutlara tutarı yanıtlar üretebiliyor. Model, dil çevirisi, soru yanıtlama ve konuşma gibi çeşitli görevler için ince ayar yapılabiliyor. ABD'deki OpenAI adlı kuruluşun araştırma ekibi tarafından yaratılan ChatGBT, yeni araştırma ve gelişmelere dayalı olarak güncellenmeye devam ediyor. Soru-cevapMetin yazma (temel akademik makaleler, edebi metinler, film senaryosu vb.)Matematik denklemleri çözmeHata ayıklama ve düzeltme (örneğin herhangi bir kod bloğundaki hataları tespit edip doğrusuyla düzeltme)Diller arası çeviriMetin özetleme ve metindeki anahtar kelimeleri tespit etmeTavsiyelerde bulunmaSınıflandırmaHerhangi bir şeyin ne işe yaradığını açıklama (örneğin bir kod bloğunun ne işe yaradığını açıklama)