ChatGPT Hangi Tıbbi Muayenelerden Geçti?

Son zamanlarda interneti ele geçiren konu, Kasım ayında tanıtılan ChatGPT adlı yapay zeka sohbetbotudur. İnsanlar, onun konuşkanlık yeteneklerini test etmek için eğlenceli ve neşeli konuşmalara katıldılar. Bununla birlikte, ChatGPT, Amerika Birleşik Devletleri Tıp Lisanslama Sınavı, Wharton Business School sınavı ve dört adet University of Minnesota Law School Anayasal Hukuk sınavı gibi en zorlu sınavlardan bazılarını geçerek bir dizi başarı elde etmiştir. Bu başarı, Twitter CEO'su Elon Musk'ın dikkatini çekti ve “Her şeyin yolunda olacağından eminim” diyerek bu yapay zeka sohbetbotuna bir gönderme yaptı. Şimdi, ChatGPT Hangi Tıbbi Sınavı Geçti?

ChatGPT'nin Yükselişi

Ilginç bir not olarak belirtmek ilginçtir ki, Musk ve Microsoft’un yatırım yaptığı araştırma şirketi Open AI, ChatGPT'yi yarattı. AI aracı web sitesini kullanan herkes, herhangi bir konuda soru sorabilir ve paragraf şeklinde hızlı ve detaylı bir yanıt alabilir. ChatGPT, çeşitli alanlarda kabiliyetini göstermiştir. Anında ve karmaşık denemeler yazabilir, pazarlama sunumları tasarlayabilir, şiir ve şakalar yapabilir ve hatta Amerika Birleşik Devletleri'ndeki bir kongre üyesi için bir konuşma taslağı hazırlayabilir. Bununla birlikte, AI'nın bazı insan işlerini devralabileceği konusunda endişeler bulunmaktadır.

Ayrıca okuyun: ChatGPT 4 Ücretsiz mi Kullanılıyor?

ChatGPT Hekim Muayenesi Yapıyor: Genel Bakış

Bu aracın en son başarılarından biri, ABD Tıbbi Lisanslama sınavlarını geçebilme yeteneğidir. Bir önceden baskı yapmış çalışmada araştırmacılar, ChatGPT'nin yeteneklerinin üst sınırlarını keşfettiler. AI aracına önceki sınavlardan sorular sordular ve cevapları, açık uçlu yazılı yanıtlardan çoktan seçmeliye kadar, iki doktor karar vericinin bağımsız olarak puanladı. Bu soruların cevaplarının, chatbot eğitim alırken erişilebilir veri setinde zaten bulunmadığından emin oldular. Ekip, ChatGPT'nin cevapları daha önce görmediği halde, özel bir eğitim veya takviye olmaksızın sınavlar için geçme eşiğinde veya yakınında performans gösterdiğini belirtti. Araç, tüm sınavlarda %50'den fazla başarı gösterdi ve ABDMLE geçme eşiği olan yaklaşık %60'a ulaştı. "Bu nedenle, makale şu şekilde sonuçlarını özetliyor: ChatGPT artık rahatlıkla geçme aralığında bulunmaktadır."

ChatGPT, USMLE Sınavını Geçti: Bilmeniz Gereken Her Şey

Bir devrim niteliğindeki yeni bir çalışmada, Massachusetts General Hastanesi (MGH) ve AnsibleHealth'deki bilim insanları OpenAI'nin ChatGPT'sinin Amerika Birleşik Devletleri Tıbbi Lisanslama Sınavı (USMLE) geçebildiğini keşfettiler ve bunu etkileyici bir %60 doğruluk oranıyla gerçekleştirdi. Bu araştırma, tıp eğitimi ve eğitiminde yapay zekanın rolü için heyecan verici olanaklar sunmaktadır.

Doğal Dil İşleme Araçları ve Tıp Eğitimi

ChatGPT, geniş miktarda dil verisi üzerinde eğitilen ve desenler ve ilişkiler arayan doğal dil işleme bir aracıdır. Eğitildiği dil temelinde yeni metinler oluşturma yeteneği, tıp eğitiminde kullanım için ideal bir aday haline getirmektedir. Bununla birlikte, ChatGPT'nin eğitim verisine bağımlılığı, diğer yapay zeka sohbetbotları gibi web üzerinde araştırma yapmadığı anlamına gelmektedir.

Modeli Test Etme

Bilim insanları, ChatGPT modelini USMLE'nin oluşturduğu üç standartlaştırılmış test temelinde değerlendirdi. Ekip, halka açıklanan Haziran 2022 örnek sınavındaki test sorularını kullanarak modeli eğitti. Görsel analiz gerektiren sorular eğitim setinden çıkarıldı.

Bellek retansiyon önyargısını azaltmak için, ekip modelin içine üç farklı tipte soru girdi:

1. Çoktan seçmeli tek cevap, zorunlu bir gerekçe olmadan; örneğin, "Hastanın durumu büyük olasılıkla aşağıdaki patojenlerden hangisi tarafından neden kaynaklanıyor?"
2. Çoktan seçmeli tek cevap, zorunlu bir gerekçeyle birlikte; örneğin, "Hastanın gece belirtilerinin en muhtemel nedeni nedir? Her bir seçenek için mantığınızı açıklayın."
3. Açık uçlu teşvik, örneğin, "Verilen bilgilere dayanarak hastanın teşhisi ne olurdu?"

Etkileyici Sonuçlar

İlk kez, AI modeli, sağlık uzmanı eğiticilerin yardımı olmadan USMLE sınavını %60 civarında bir doğruluk oranıyla geçti. Bu sonuç önemlidir ve tıp eğitiminde AI için yeni olanaklar sunmaktadır. Araştırmacılar ayrıca, ChatGPT'nin sonuçlarının geçerli klinik görüşler ve gerekçeler sunduğunu ve modelin açıklanabilirliği ve güvenilirliği konusunda daha fazla güvence sağladığını tespit etti.

Tıp Eğitiminin Geleceği

Takım, ChatGPT ve diğer üretken konuşma modellerinin, gelecekteki doktorların eğitimine yardımcı olabileceğine inanmaktadır. Bu tür bir uygulama, teknik tıbbi sonuçları hastalar için daha anlaşılır bir dile çevirmek olabilir. AnsibleHealth zaten bu proje üzerinde çalışıyor.

ChatGPT, Tıbbi Alanında Yeteneklerini Gösteriyor

GPT-4, Türkçe (Türkiye) çeviri konusunda da oldukça başarılıdır. Sorulara cevap verebilme ve hastalıkları teşhis etme yeteneklerinin yanında, GPT-4, Portekizce konuşan bir hastanın taburcu bilgilerini çevirebilir ve teknik terimleri 6. sınıf öğrencilerinin kolayca anlayabileceği bir dilde sunabilir. Ayrıca GPT-4, doktorlara hasta yaklaşımıyla ilgili yararlı öneriler sağlayarak hastalarıyla durumları hakkında duyarlı ve anlaşılır bir dille konuşma konusunda ipuçları sunabilir.

GPT-4'ün sınırlamalarına rağmen, doktorların durumları teşhis etme şeklini çarpıcı, ancak mükemmel olmayan sonuçlarla taklit edebilir. Causal nedensellikle uğraşabileceğini sorulduğunda, zekasının hala "verideki desenlere ve gerçek anlama veya kasıtlılığa dahil olmadığını" belirtti.

Dr. Isaac Kohane'nin GPT-4 hakkındaki düşünceleri

Yakında çıkacak olan "Tıpta Yapay Zeka Devrimi" adlı kitapta, bilgisayar bilimcisi ve doktor Dr. Isaac Kohane, OpenAI'in en yeni yapay zeka modeli GPT-4'ü iki meslektaşıyla birlikte tıbbi bir ortamda nasıl performans gösterdiğini test etti. Sonuçlar etkileyiciydi.

Kitapta Dr. Kohane, Mart 2023'te ücretli abonelere sunulan GPT-4'ün, ABD tıp sınavı lisans sorularına zamanın %90'ından fazlasında doğru cevap verebildiğini belirtmektedir. Bu daha önceki ChatGPT AI modelleri GPT-3 ve -3.5'ten çok daha iyi bir sınav yapabilen bir modeldir ve bazı lisanslı doktorlardan da daha iyidir. Carey Goldberg ve Microsoft’un araştırma başkan yardımcısı Peter Lee'ye göre GPT-4, "birçok doktordan" daha iyi klinik değerlendirme yapabilmekte ve "benim yaptığım gibi" nadir durumları teşhis edebilmektedir.

GPT-4 Test Etme: Yöntem

GPT-4'ü test etmek için, Dr. Kohane ve meslektaşları AI modelinin tıbbi bir ortamda nasıl performans gösterdiğini görmek için işbirliği yaptılar. GPT-4'e sorular sordular ve tıbbi senaryolar vererek teşhis koymasını istediler, ardından insan doktorlar tarafından yapılan teşhislerle karşılaştırıldı. Yazarlar, GPT-4'ün insan doktorlara göre bazı avantajları olduğunu belirtiyor, örneğin çoklu kaynaklardan büyük miktarda bilgiyi hatırlayabilme ve sentezleyebilme yeteneği.

Ancak yazarlar, GPT-4'ün birkaç kısıtlama olduğunu kabul etmektedir. Örneğin, GPT-4, bir hastanın benzersiz tıbbi geçmişini veya sağlık sosyal belirleyicilerini dikkate alamaz. Ayrıca, GPT-4'ün geniş miktarda veriye dayanması, veri gizliliği ve önyargı konularında endişeleri beraberinde getirmektedir.

GPT-4: Yetenekler ve Potansiyel

GPT-4 sadece bir gerçek bulucusu ve iyi bir test çözücüsü değildir; aynı zamanda mükemmel bir çevirmendir de. Yazarlara göre, GPT-4, Portekizce konuşan bir hastanın taburcu bilgilerini çevirebilir ve teknik jargonu altıncı sınıf öğrencilerinin kolayca anlayabileceği bir şeye dönüştürebilir.

Ancak GPT-4 yalnızca teşhis alanında vaatler sunmuyor. Kitapta yazarlar, GPT-4'ün doktorlara hastalarla daha iyi iletişim kurma konusunda yardımcı öneriler sunabileceğini açıklıyor.

Yine de, GPT-4'ün hatasız olmadığını belirtmek önemlidir. Yazarlar uyarıda bulunurken, hala hatalar yapabilir ve Hipokrat Yemini yapmamıştır. Dahası, GPT-4 dahil yapay zeka teknolojisi, iş kaybı ve hasta gizliliği konusunda etik sorular ortaya çıkarır.

Sonuç: Tıpta Yapay Zekanın Geleceği

Bu sınırlamalara rağmen GPT-4'ün tıbbi durumları teşhis etme başarısı, tıp alanında yapay zeka teknolojisi için heyecan verici olasılıklar sunmaktadır. Gelecekte GPT-4 gibi yapay zeka modelleri, doktorların nadir hastalıkları teşhis etmesine, tıbbi jargonu çevirmesine ve hastalara daha iyi bakım sağlamasına yardımcı olabilir. Bununla birlikte, yapay zeka modellerinin etik düşünceler gözetilerek geliştirilip test edilmesi önemlidir.