Dijital ve insan kaynaklı bilgi: Chatbotlar ile klinisyenlerin ortodonti ile ilgili sorulara verdikleri yanıtların karşılaştırılması
Information from digital and human sources: A comparison of chatbot and clinician responses to orthodontic questions
- Tez No: 939777
- Danışmanlar: DOÇ. DR. MERVE GÖYMEN
- Tez Türü: Diş Hekimliği Uzmanlık
- Konular: Diş Hekimliği, Dentistry
- Anahtar Kelimeler: Yapay zeka, ortodonti, sohbet robotu, Artificial intelligence, orthodontics, chatbot
- Yıl: 2025
- Dil: Türkçe
- Üniversite: Gaziantep Üniversitesi
- Enstitü: Diş Hekimliği Fakültesi
- Ana Bilim Dalı: Ortodonti Ana Bilim Dalı
- Bilim Dalı: Ortodonti Bilim Dalı
- Sayfa Sayısı: Belirtilmemiş.
Özet
Bu çalışmanın amacı, yapay zeka tabanlı sohbet robotlarının (chatbotların) ortodontik pratiğe güvenilir yardımcı araçlar olarak kullanılıp kullanılamayacağını değerlendirmek ve chatbot yanıtlarını, farklı bilgi seviyelerine sahip klinisyenlerin yanıtlarıyla karşılaştırmaktır. Çalışmaya Büyük Dil Modeli (LLM) tabanlı sohbet robotları (ChatGPT-4, ChatGPT-4o, Microsoft Copilot, Google Gemini 1.5 Pro, Claude 3.5 Sonnet) ve klinisyenler (diş hekimliği öğrencileri, genel diş hekimleri, ortodontistler, n=30) dahil edilmiştir. Gruplara 40 doğru/yanlış sorusu yöneltilmiş ve her bir sorunun doğruluk oranı, önceden belirlenen cevap anahtarı ile karşılaştırılarak değerlendirilmiştir. Toplam puan yüzdeye çevrilmiştir. Chatbotların üç farklı zamanda verdiği yanıtların tutarlılığı Cronbach's alfa katsayısı ile değerlendirilmiştir. Diş hekimliği öğrencilerinin doğruluk oranı puanları, Microsoft Copilot, Claude 3.5 Sonnet, ChatGPT-4o ve ortodontistlerden anlamlı derecede daha düşük bulunmuştur. Genel diş hekimlerinin doğruluk oranı puanları ise ChatGPT-4o ve ortodontistlerden anlamlı derecede daha düşük bulunmuştur. ChatGPT-4o'nun doğruluk oranının ortodontistlere en yakın olduğu, ChatGPT-4, Microsoft Copilot, Claude 3.5 Sonnet ve Google Gemini 1.5 Pro'nun doğruluk oranlarının ise ortodontistlerden daha düşük ancak genel diş hekimlerinden daha yüksek olduğu görülmüştür. ChatGPT-4'ün yanıtlarının yüksek derecede tutarlı olduğu, ancak ChatGPT-4o ve Claude 3.5 Sonnet'in en az tutarlı chatbotlar olduğu tespit edilmiştir. Çalışmada en yüksek doğruluk oranına ortodontistlerin sahip olduğu, yapay zeka tabanlı chatbotların ise diş hekimliği öğrencileri ve genel diş hekimlerine kıyasla daha yüksek doğruluk oranına sahip olduğu bulunmuştur. Bununla birlikte, ChatGPT-4 en tutarlı yanıtları verirken, ChatGPT-4o ve Claude 3.5 Sonnet en düşük tutarlılığı göstermiştir. Yapay zeka tabanlı sohbet robotları hasta eğitimi ve genel ortodontik rehberlik için faydalı olabilir, ancak yanıtların tutarsız olması yanlış bilgilendirme riskine yol açabilir.
Özet (Çeviri)
The aim of this study is to investigate whether AI-based chatbots can be used as reliable adjunct tools in orthodontic practice by evaluating chatbot responses and comparing them to those of clinicians with varying levels of knowledge. LLM Based Chatbots (ChatGPT-4, ChatGPT-4o, Microsoft Copilot, Google Gemini 1.5 Pro, Claude 3.5 Sonnet) and clinicians (dental students, general dentists, orthodontists, n=30) were included. The groups were asked 40 true/false questions, and the accuracy rate for each question was assessed by comparing it to the predetermined answer key. The total score was converted into a percentage. The consistency of the answers given by chatbots at three different times was assessed by Cronbach's alpha. The accuracy ratio scores for students were significantly lower than for Microsoft Copilot, Claude 3.5 Sonnet, ChatGPT-4o, and orthodontists. For dentists, it was found to be significantly lower than the scores of ChatGPT-4o and orthodontists. It was found that the accuracy rate of ChatGPT-4o was closest to that of orthodontists, while the accuracy rates of ChatGPT-4, Microsoft Copilot, Claude 3.5 Sonnet, and Google Gemini 1.5 Pro were lower than orthodontists but higher than general dentists. Although ChatGPT-4's responses were highly consistent, Chat GPT-4o and Claude 3.5 Sonnet were the least consistent chatbots. The study found that orthodontists had the highest accuracy rate, while AI-based chatbots had a higher accuracy rate compared to dental students and general dentists. However, ChatGPT-4 gave the most consistent answers, while ChatGPT-4o and Claude 3.5 Sonnet showed the least consistency. AI-based chatbots can be useful for patient education and general orthodontic guidance, but a lack of consistency in responses can lead to the risk of misinformation.
Benzer Tezler
- An Experimental and analytical investigation of cam follower jump phenomenon
Başlık çevirisi yok
ŞÖLEN ŞEN
Yüksek Lisans
İngilizce
1987
Makine MühendisliğiOrta Doğu Teknik ÜniversitesiMakine Mühendisliği Ana Bilim Dalı
DOÇ. DR. MEHMET ÇALIŞKAN
- A-D, D-A çeviricileri ve -40 derece ile 100 derece arasında çalışan bir dijital termometre tasarım ve yapımı
Başlık çevirisi yok
N.GÜLER FENER
Yüksek Lisans
Türkçe
1986
Fizik ve Fizik MühendisliğiGazi ÜniversitesiFizik Mühendisliği Ana Bilim Dalı
DOÇ. DR. ATİLLA ÖZMEN
- Digital alan kalp hastalarının ilaç kullanımına uyumu ve uyumu etkileyen faktörler
The Drug adaptability of heart patients taking digitalis and factors affecting the adaptability
MÜYESSER ERDEM
Yüksek Lisans
Türkçe
1987
HemşirelikCumhuriyet ÜniversitesiHemşirelik Ana Bilim Dalı
YRD. DOÇ. DR. YUSUF SARIOĞLU
- Landsat uyduları aracılığı ile elde edilen görüntülerin işlenmesinde kontrast artırma tekniklerinin tanımı ve bu tekniklere ilişkin bilgisayar programlarının hazırlanması üzerine bir çalışma
Başlık çevirisi yok
BİLHAN TABAK
Yüksek Lisans
Türkçe
1986
Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve KontrolEge ÜniversitesiBilgisayar Bilimleri ve Mühendisliği Ana Bilim Dalı
- Dört zamanlı türbaşarj direk püskürtmeli bir dizel motorunun bilgisayar ile sümülasyonu
Computer aided simulation of a fourstroke turbocharged direct-anjection diesel engine
MUSTAFA BALCI