Dijital ve insan kaynaklı bilgi: Chatbotlar ile klinisyenlerin ortodonti ile ilgili sorulara verdikleri yanıtların karşılaştırılması
Information from digital and human sources: A comparison of chatbot and clinician responses to orthodontic questions
- Tez No: 939777
- Danışmanlar: DOÇ. DR. MERVE GÖYMEN
- Tez Türü: Diş Hekimliği Uzmanlık
- Konular: Diş Hekimliği, Dentistry
- Anahtar Kelimeler: Yapay zeka, ortodonti, sohbet robotu, Artificial intelligence, orthodontics, chatbot
- Yıl: 2025
- Dil: Türkçe
- Üniversite: Gaziantep Üniversitesi
- Enstitü: Diş Hekimliği Fakültesi
- Ana Bilim Dalı: Ortodonti Ana Bilim Dalı
- Bilim Dalı: Ortodonti Bilim Dalı
- Sayfa Sayısı: 89
Özet
Bu çalışmanın amacı, yapay zeka tabanlı sohbet robotlarının (chatbotların) ortodontik pratiğe güvenilir yardımcı araçlar olarak kullanılıp kullanılamayacağını değerlendirmek ve chatbot yanıtlarını, farklı bilgi seviyelerine sahip klinisyenlerin yanıtlarıyla karşılaştırmaktır. Çalışmaya Büyük Dil Modeli (LLM) tabanlı sohbet robotları (ChatGPT-4, ChatGPT-4o, Microsoft Copilot, Google Gemini 1.5 Pro, Claude 3.5 Sonnet) ve klinisyenler (diş hekimliği öğrencileri, genel diş hekimleri, ortodontistler, n=30) dahil edilmiştir. Gruplara 40 doğru/yanlış sorusu yöneltilmiş ve her bir sorunun doğruluk oranı, önceden belirlenen cevap anahtarı ile karşılaştırılarak değerlendirilmiştir. Toplam puan yüzdeye çevrilmiştir. Chatbotların üç farklı zamanda verdiği yanıtların tutarlılığı Cronbach's alfa katsayısı ile değerlendirilmiştir. Diş hekimliği öğrencilerinin doğruluk oranı puanları, Microsoft Copilot, Claude 3.5 Sonnet, ChatGPT-4o ve ortodontistlerden anlamlı derecede daha düşük bulunmuştur. Genel diş hekimlerinin doğruluk oranı puanları ise ChatGPT-4o ve ortodontistlerden anlamlı derecede daha düşük bulunmuştur. ChatGPT-4o'nun doğruluk oranının ortodontistlere en yakın olduğu, ChatGPT-4, Microsoft Copilot, Claude 3.5 Sonnet ve Google Gemini 1.5 Pro'nun doğruluk oranlarının ise ortodontistlerden daha düşük ancak genel diş hekimlerinden daha yüksek olduğu görülmüştür. ChatGPT-4'ün yanıtlarının yüksek derecede tutarlı olduğu, ancak ChatGPT-4o ve Claude 3.5 Sonnet'in en az tutarlı chatbotlar olduğu tespit edilmiştir. Çalışmada en yüksek doğruluk oranına ortodontistlerin sahip olduğu, yapay zeka tabanlı chatbotların ise diş hekimliği öğrencileri ve genel diş hekimlerine kıyasla daha yüksek doğruluk oranına sahip olduğu bulunmuştur. Bununla birlikte, ChatGPT-4 en tutarlı yanıtları verirken, ChatGPT-4o ve Claude 3.5 Sonnet en düşük tutarlılığı göstermiştir. Yapay zeka tabanlı sohbet robotları hasta eğitimi ve genel ortodontik rehberlik için faydalı olabilir, ancak yanıtların tutarsız olması yanlış bilgilendirme riskine yol açabilir.
Özet (Çeviri)
The aim of this study is to investigate whether AI-based chatbots can be used as reliable adjunct tools in orthodontic practice by evaluating chatbot responses and comparing them to those of clinicians with varying levels of knowledge. LLM Based Chatbots (ChatGPT-4, ChatGPT-4o, Microsoft Copilot, Google Gemini 1.5 Pro, Claude 3.5 Sonnet) and clinicians (dental students, general dentists, orthodontists, n=30) were included. The groups were asked 40 true/false questions, and the accuracy rate for each question was assessed by comparing it to the predetermined answer key. The total score was converted into a percentage. The consistency of the answers given by chatbots at three different times was assessed by Cronbach's alpha. The accuracy ratio scores for students were significantly lower than for Microsoft Copilot, Claude 3.5 Sonnet, ChatGPT-4o, and orthodontists. For dentists, it was found to be significantly lower than the scores of ChatGPT-4o and orthodontists. It was found that the accuracy rate of ChatGPT-4o was closest to that of orthodontists, while the accuracy rates of ChatGPT-4, Microsoft Copilot, Claude 3.5 Sonnet, and Google Gemini 1.5 Pro were lower than orthodontists but higher than general dentists. Although ChatGPT-4's responses were highly consistent, Chat GPT-4o and Claude 3.5 Sonnet were the least consistent chatbots. The study found that orthodontists had the highest accuracy rate, while AI-based chatbots had a higher accuracy rate compared to dental students and general dentists. However, ChatGPT-4 gave the most consistent answers, while ChatGPT-4o and Claude 3.5 Sonnet showed the least consistency. AI-based chatbots can be useful for patient education and general orthodontic guidance, but a lack of consistency in responses can lead to the risk of misinformation.
Benzer Tezler
- Yeni bir akıllı uyarı levhası tasarımı ve kauçuk üretim fabrikasında iş sağlığı ve güvenliği amaçlı kullanım uygulaması
A new smart warning sign design and use practice for occupational health and safety purposes in rubber production factory
ERDEM ÖNDER
Yüksek Lisans
Türkçe
2025
Endüstri ve Endüstri Mühendisliğiİstanbul Yeni Yüzyıl Üniversitesiİş Sağlığı ve Güvenliği Ana Bilim Dalı
DR. ÖĞR. ÜYESİ TAHSİN AYKAN KEPEKLİ
- Geleneksel yapıların x,y,z düzlemindeki yapısal bozuklarınım bım teknolojisi ve lazer tarama yardımıyla inceleyen bir alan çalışması
A field study investigating structural defects in the x, y, z plane of conventional structures with the help of bim technology and laser
FIRAT KAYA
- Gemi adamlarının işe alım süreci için ölçme değerlendirme sisteminin geliştirilmesi
Developing a measurement and evaluation system for seafarers' recruitment process
İPEK GÖLBOL PEKDAŞ
Doktora
Türkçe
2025
Denizcilikİstanbul Teknik ÜniversitesiDeniz Ulaştırma Mühendisliği Ana Bilim Dalı
PROF. DR. ÖZCAN ARSLAN
- Elektronik Belge Yönetim Sistemleri (EBYS) çerçevesinde metin madenciliği
Text mining in the context of Electronic Records Management Systems (ERMS)
DENİZ BEGÜM KÜÇÜK
Yüksek Lisans
Türkçe
2025
Bilgi ve Belge YönetimiAnkara ÜniversitesiBilgi ve Belge Yönetimi Ana Bilim Dalı
PROF. DR. TÜLAY OĞUZ
- Modeling land use/land cover change using remote sensing and geographic information systems: A case study of Gaza strip, Palestine
Uzaktan algılama ve coğrafi bilgi sistemleri kullanılarak arazi kullanımı / arazi kapak değişimi modelleme: Gazze şeriti, Filistin örneği
AHMED A.S. ALMASHHARAWI
Yüksek Lisans
İngilizce
2021
Bilim ve TeknolojiÇukurova ÜniversitesiUzaktan Algılama ve Coğrafi Bilgi Sistemleri Ana Bilim Dalı
PROF. DR. HACI MUSTAFA KANDIRMAZ