AMAÇ: Bu çalışmada, ChatGPT’nin özellikle vestibüler alandaki Türkçe ve İngilizce yanıtlarının doğruluğu ve tutarlılığı karşılaştırıldı.
YÖNTEMLER: Güncel literatür taranarak vestibüler sistem anatomisi ve fizyolojisi, vestibüler tanı ve testler, vestibüler rehabilitasyon ve tedavi olmak üzere üç alt kategoride toplam 42 soru oluşturuldu. Sorular ChatGPT 3.5’e Türkçe ve İngilizce olarak yöneltildi. Yanıtların doğruluğu dokuz uzman tarafından beş puanlık Likert ölçeği ile değerlendirildi. Bir hafta sonra sorular farklı sırayla tekrar sorularak yanıtların tutarlılığı yazarlar tarafından aynı beş puanlık Likert ölçeği kullanılarak analiz edildi.
BULGULAR: İngilizce yanıtlar birinci ve üçüncü alt kategorilerde (sırasıyla 3.57±0.34 ve 3.97±0.47) Türkçe yanıtlara (sırasıyla 3.33±0.27 ve 3.64±0.36) kıyasla anlamlı derecede daha doğruydu. Her iki dil için de değerlendiriciler arası güvenirlik ve test-tekrar test güvenirliği yüksekti.
SONUÇ: Çalışma sonuçlarımız, ChatGPT’nin tamamlayıcı bir eğitim aracı olarak kullanılabileceğini göstermektedir; ancak, ChatGPT tarafından vestibüler sistem gibi belirli konularda üretilen içeriğin güvenilirliği ve doğruluğunun doğrulanması gerekmektedir. Ayrıca Türkçe veya İngilizce gibi dil seçimi belirli alt kategorilerdeki performansı etkileyebilir.

OBJECTIVE: The aim of this study was to compare the accuracy and consistency of ChatGPT’s responses in Turkish and English, specifically within the vestibular field.
METHODS: Based on a review of the current literature, a total of 42 questions were created in three subcategories: vestibular system anatomy and physiology, vestibular diagnosis and tests, and vestibular rehabilitation and treatment. These questions were presented to ChatGPT 3.5 in both Turkish and English. The accuracy of the responses was evaluated by nine experts using a five-point Likert scale. One week later, the same questions were presented in a different order, and the consistency of the responses was assessed by the authors using the same five-point Likert scale.
RESULTS: English responses (3.57±0.34 and 3.97±0.47, respectively) were significantly more accurate than Turkish responses (3.33±0.27 and 3.64±0.36, respectively) in the first and third subcategories. Both inter-rater reliability and test-retest reliability were found to be high for both languages.
CONCLUSION: Our study findings suggest that ChatGPT may serve as a complementary educational tool; however, the reliability and accuracy of its content in specific areas such as the vestibular system require further validation. Additionally, language choice, such as Turkish versus English, may influence performance in certain subcategories.