Geri Dön

Fusing acoustic and linguistic parameters for multilingual emotion recognition

Akustik ve dilbilimsel parametrelerle çok dilli duygu tanıma

  1. Tez No: 286345
  2. Yazar: MUSTAFA ERDEN
  3. Danışmanlar: PROF. DR. LEVENT ARSLAN
  4. Tez Türü: Yüksek Lisans
  5. Konular: Elektrik ve Elektronik Mühendisliği, Electrical and Electronics Engineering
  6. Anahtar Kelimeler: Belirtilmemiş.
  7. Yıl: 2011
  8. Dil: İngilizce
  9. Üniversite: Boğaziçi Üniversitesi
  10. Enstitü: Fen Bilimleri Enstitüsü
  11. Ana Bilim Dalı: Elektrik-Elektronik Mühendisliği Ana Bilim Dalı
  12. Bilim Dalı: Belirtilmemiş.
  13. Sayfa Sayısı: Belirtilmemiş.

Özet

Sesten duygu tanıma çağrı merkezlerinde problemlerin tespitinde, operatör performansınıngözlemlenmesinde, otomatik konuşma tanıma sistemlerinin iyileştirilmesinde, insan-robot veinsan-makine etkileşiminin artırılmasında kullanılabilir. Bu tezde iki farklı doğal veritabanı ikiliduygu tanıma açısından incelenmiştir. Türkçe çağrı merkezi veritabanı üzerinde duygutanıma problemi sinirli ve sinirli-olmayan sınıflar üzerinde tanımlanmıştır. Robot bir evcilhayvanla oynayan çocukların kayıtlarından oluşan Almanca Fau Aibo veritabanı üzerindede negatif ve negatif-olmayan sınıflar göz önünde bulundurulmuştur.Akustik bilgiyi çıkarmak için sözcük grubu bazında parametreler kullanılarak DestekçiVektör Makineleri ve çerçeve bazında parametreler kullanılarak Gauss Karışım Modelleritabanlı modeller karşılaştırılmışlardır. Çağrı merkezi veritabanında kök+ek bazlı dil modelien yüksek sonuçlar sağlarken, Fau Aibo veritabanında kelime tabanlı dil modeli en iyi sonuçlarıvermiştir. Bu durum Türkçe'nin bitişken yapısına bağlanabilir. Akustik ve dil modelisınıflandırıcılarının skorları çok katmanlı algılayıcı kullanılarak birleştirildiğinde, çağrı merkezi ve Fau Aibo veritabanları için sırasıyla 89\% ve 69\% doğru tanıma elde edilmiştir.

Özet (Çeviri)

Emotion recognition from speech can be used for detection of customer problemsin call centers, agent performance monitoring, improving automatic speech recognitionaccuracies, enhancing human robot as well as human machine interaction. In thisthesis two different spontaneous databases are investigated in terms of binary emotionclassification. On Turkish call center dataset (CCD) which consists of human-humandialogs, emotion recognition problem is defined on angry and non-angry classes. OnFau Aibo dataset (FAD) which is composed of recordings of children playing with apet robot, the negative and idle classes are considered.For extracting acoustic information we have implemented Support Vector Machineswith utterance level features and Gaussian Mixture Models with frame levelfeatures. In terms of language modeling we compared word based, stem-only andstem+ending structures using manual transcriptions. Stem+ending based system resultedin the highest accuracies on CCD whereas the word based LM performed thebest on FAD. This can be mainly attributed to the agglutinative nature of Turkish language.When we fused the acoustic and LM classifiers using a Multi Layer Perceptron(MLP) we could achieve 89% and 69% correct detection of both classes for CCD andFAD respectively.

Benzer Tezler

  1. Türk dili için konuşma üretme

    Başlık çevirisi yok

    NİHAL ALICI

    Yüksek Lisans

    Türkçe

    Türkçe

    1998

    Bilgisayar Mühendisliği Bilimleri-Bilgisayar ve Kontrolİstanbul Teknik Üniversitesi

    Kontrol ve Bilgisayar Mühendisliği Ana Bilim Dalı

    PROF. DR. EŞREF ADALI

  2. Marmara Denizi kuzey şelfi'nin sismik ve akustik verilerle araştırılması

    Investigation of northern shelf of the Marmara Sea using seismic and acoustic data sets

    ASLIHAN NASIF

    Yüksek Lisans

    Türkçe

    Türkçe

    2016

    Deniz BilimleriDokuz Eylül Üniversitesi

    Deniz Bilimleri Ana Bilim Dalı

    PROF. DR. DERMAN DONDURUR

  3. Glioblastoma multiforme kanser kök hücrelerinde PI3K/AKT/mTOR dual inhibisyonu ve düşük yoğunluklu darbeli ultrason uygulamasının F-aktin ve otofaji özelinde araştırılması

    An investigation of PI3K/AKT/mTOR dual inhibition and low intensity pulsed ultrasound application on F-actin and autophagy in glioblastoma multiforme cancer stem cells

    IRMAK TUTAK

    Yüksek Lisans

    Türkçe

    Türkçe

    2020

    Bilim ve TeknolojiEge Üniversitesi

    Kök Hücre Ana Bilim Dalı

    PROF. DR. AYŞEGÜL UYSAL

  4. Yüzey akustik dalga esasına dayanan filtre ve rezonatörlerin analizi ve tasarımı

    Analysis and design of surface acoustic wave filters and resonators

    ŞENAY CÖMERT

    Yüksek Lisans

    Türkçe

    Türkçe

    1992

    Elektrik ve Elektronik Mühendisliğiİstanbul Teknik Üniversitesi

    PROF. DR. ERGÜL AKÇAKAYA

  5. Development of flextensional transducer for underwater acoustic applications

    Sualtı akustik uygulamaları için esnek gerilmeli transdüser geliştirilmesi

    ATA CAN ÇORAKÇI

    Doktora

    İngilizce

    İngilizce

    2025

    Elektrik ve Elektronik MühendisliğiGebze Teknik Üniversitesi

    Elektronik Mühendisliği Ana Bilim Dalı

    PROF. DR. SERKAN AKSOY