GPT-4 bazı pratisyen doktorlardan daha mı iyi?

GPT-4, soruların %90'ını doğru yanıtlayarak ABD tıbbi lisans sınavını başarıyla geçti. Birçok bilim insanı, OpenAI'nin en son yapay zeka modelinin iyi hastalık teşhisi ve çeviri yetenekleri karşısında şaşırdı.

Harvard Üniversitesi'nde bilgisayar bilimcisi ve doktor olan Dr. Isaac Kohane ve iki meslektaşı, GPT-4'ün tıbbi ortamda nasıl performans göstereceğini test etti.

Dr. Kohane yakında çıkacak olan Tıpta Yapay Zeka Devrimi kitabında GPT-4'ü değerlendirdiği birçok doktordan daha iyi bulduğunu yazdı.

GPT-4 yalnızca bir bilgi arama aracı veya iyi bir "aday" değil, aynı zamanda Bay Kohane ve meslektaşları tarafından yetenekli bir çevirmen olarak değerlendiriliyor. Portekizce konuşan bir hasta için hastaneden taburcu bilgilerini, karmaşık teknik dili 6. sınıf öğrencisinin bile okuyabileceği ve anlayabileceği basit bilgilere çevirebilir.

Ayrıca GPT-4, uzun raporları ve çalışmaları özetleyebilir, bakımın nasıl yapılacağına dair faydalı öneriler verebilir ve hastalarla konuşabilir.

OpenAi ürünleri, insanların sıklıkla yaptığı gibi, sorunların nedenlerini açıklamak için ölçüm ve hesaplama teknikleri gerektiren yöntemleri bile kullanabilir.

Pek çok sınırlama olmasına ve teşhisin her zaman mükemmel olmamasına rağmen, GPT-4 yine de doktorların hastalıkları teşhis etme şeklini taklit edebilir.

Dr. Isaac Kohane. Fotoğraf: Harvard Tıp Okulu.

Dr. Kohane, GPT-4'ün hastalığı teşhis etme yeteneğini test etmek için birkaç yıl önce tedavi ettiği gerçek bir vakayı kullandı. Hasta yeni doğmuş bir bebek. Bebek hakkında bazı ayrıntıların yanı sıra bazı ultrason bilgileri ve hormon düzeyleri de sağladı ve GPT-4 sonuçları çocuğun durumunu konjenital adrenal hiperplazi (CAH) olarak doğru bir şekilde teşhis edebildi.

Dr. Kohane, GPT-4'ün hastalıkları doğru bir şekilde teşhis edebilmesi nedeniyle son derece şaşırmıştı; bu, onun uzun yıllar süren çalışma ve çalışmasını gerektirdi.

GPT-4 hâlâ hata veriyor

GPT-4'ün hala birçok sınırlaması vardır ve yanlış BMI yazma, Sudoku bulmacalarını yanlış çözme veya yanlış denklemleri çözme gibi temel hatalara ve hastalıklara reçete yazarken veya teşhis koyarken ciddi hatalara sahiptir.

Araştırma ekibi bu konuyu sorduğunda GPT-4'ün bazen hata yaptığını ya da eksik ya da yanlış verilere dayanarak varsayımlarda bulunduğunu ancak yalan söyleme veya kimseyi yanıltma niyetinde olmadığını söyledi.

GPT-4 şunları söyledi: "Bir doktor veya hemşireyle aynı klinik teşhis yeteneğine veya etik sorumluluğa sahip değilim."