ABD’de yer alan Maryland Tıp Fakültesi’nden araştırmacılar, ChatGPT’nin göğüs kanseri taraması hakkında 25 soruya yanıt vermesini istedi.
Sohbet robotunun karşılıklarının değişebildiği bilindiğinden, her soru üç kere soruldu. Sonuçlar daha sonra mamografi eğitimli üç radyolog tarafından tahlil edildi.
Yanıtların çok büyük bir kısmı (yüzde 88) uygun ve anlaşılır nitelikteydi. Lakin kimi karşılıkların “yanlış hatta uydurma” olduğu görüldü. Örneğin, cevaplardan biri eski bilgilere dayanıyordu.
Yaklaşık bir buçuk yıl evvel Covid-19 aşısından sonra dört ila altı hafta içinde yapılacak bir mamogramın geciktirilmesi öneriliyordu. Lakin,, bu tavsiye bir yıl evvel Dünya Sıhhat Örgütü (DSÖ) tarafından bayanların beklememesi tarafında değiştirildi.
“AYNI SORUDA CEVAP BÜYÜK ÖLÇÜDE DEĞİŞTİ”
ChatGPT, ayrıyeten “meme kanseri riski” ve “Mamogram nerede çektirilir?” üzere sorulara tutarsız cevaplar verdi. Birebir soru tekrarlandığında karşılıklar “önemli ölçüde” değişti.
“SAHTE BİLİMSEL MAKALELER VE KURULUŞLAR ÜRETİYOR”
Çalışmanın ortak muharriri Dr. Paul Yi, bahse ait yaptığı açıklamada, “Deneyimlerimizde ChatGPT’nin bazen tezlerini desteklemek için uydurma mecmua makaleleri yahut sıhhat kuruluşları uydurduğunu gördük. İnsanların, bunların yeni, kanıtlanmamış teknolojiler olduğunu ve tavsiye almak için ChatGPT yerine hala tabiplerine güvenmeleri gerektiğini bilmeleri gerekiyor.” dedi.
Radiology mecmuasında yayınlanan araştırmanın başyazarı Dr. Hana Haver ise ChatGPT’nin yalnızca Amerikan Kanser Derneği tarafından verilen bir teklif setini referans alarak soruları yanıtladığını, ABD Hastalık Denetim Tedbire Merkezleri (CDC) ve Dünya Sıhhat Örgütü (DSÖ) üzere kuruluşların güncellemelerine hakim olmadığını vurguladı.
