Gerçek ve LLM Temelli CBT Seanslardaki Duygusal Yayların Karşılaştırmalı Analizi

Gerçek ve LLM Temelli CBT Seanslardaki Duygusal Yayların Karşılaştırmalı Analizi

Büyük dil modellerinin (LLM'ler) ürettiği sentetik terapi diyalogları, zihinsel sağlık NLP'sinde danışmanlık senaryolarını simüle etmek, modelleri eğitmek ve sınırlı gerçek dünya verilerini desteklemek için giderek daha fazla kullanılıyor. Ancak, bu sentetik konuşmaların gerçek terapinin hassas duygusal dinamiklerini ne ölçüde yakaladığı hala belirsiz. Bu çalışmada, gerçek bilişsel davranışçı terapi (CBT) diyaloglarından oluşan RealCBT veri setini tanıtıyor ve gerçek ve LLM-üretilmiş CBT seanslardaki duygusal yayların karşılaştırmalı bir analizini sunuyoruz.

Duygusal Yayların Analizi

Duygusal yayları valans, uyarılma ve hakimiyet boyutlarında incelemek için Utterance Emotion Dynamics çerçevesini uyarlıyoruz. Analizimiz, hem tam diyaloglar hem de danışman ve müşteri gibi bireysel konuşmacı rolleri üzerinde gerçekleşiyor, gerçek seanslarda RealCBT veri setini ve sentetik diyalogları CACTUS veri setini kullanıyoruz.

Sonuçlar

Sentetik diyalogların akıcı ve yapısal olarak tutarlı olmasına rağmen, gerçek konuşmalardan kilit duygusal özelliklerde ayrıldığını buluyoruz: Gerçek seanslarda daha büyük duygusal değişkenlik, daha çok duygu yüklü dil ve daha otantik tepki ve düzenleme örüntüleri sergiliyor. Dahası, duygusal yay benzerliği tüm eşleştirmeler boyunca düşük kalmakta, özellikle de gerçek ve sentetik konuşmacılar arasındaki uyum zayıf.

Sonuç

Bu bulgular, mevcut LLM-üretilmiş terapi verilerinin sınırlamalarını vurguluyor ve zihinsel sağlık uygulamalarında duygusal sadakatin önemini ortaya koyuyor. Gelecekteki araştırmaları desteklemek için, RealCBT veri setimiz bu https URL'sinde yayınlanmaktadır.