Post by Bahar Hatipoğlu Yılmaz

TÜBİTAK 3501 Kariyer Geliştirme Programı kapsamında yürütücülüğünü üstlendiğim 123E648 numaralı “Sesli-Görsel-Zihinsel Çok Modlu Tanıma Yaklaşımlarıyla Duygu Durum Analizinde Sinyal Görüntü Dönüşümü ve Evrişimli Sinir Ağı Modelinin Birlikte Kullanılması” başlıklı projemiz başarıyla tamamlanmıştır. Bu proje kapsamında, duygu durum analizi alanında kullanılmak üzere ses, video ve EEG kayıtlarından oluşan çok modlu bir veri seti oluşturulmuştur. Çalışmamızda toplam 40 gönüllü katılımcıdan veri kaydı alınmış ve sesli, görsel ve zihinsel modalitelerin birlikte değerlendirilebileceği özgün bir araştırma altyapısı ortaya konulmuştur. Bu süreçte projeye katkı sunan bursiyerlerimiz Ümran Bahadır ve Büşra Özkellekçi’ye, araştırmacılarımız Çağatay Murat Yılmaz, Elif Baykal Kablan ve Demet Sağlam Aykut’a, ayrıca danışmanımız Prof. Dr. Cemal Köse’ye değerli destekleri için teşekkür ederim. En büyük teşekkürü ise çalışmamıza gönüllü olarak katılan tüm katılımcılarımıza sunmak isterim. Onların desteği olmadan bu veri setinin oluşturulması mümkün olmazdı. Veri setimizin, ilgili makale yayın sürecinin tamamlanmasının ardından araştırmacıların kullanımına açılması planlanmaktadır. Son olarak bu projeyi destekleyen TÜBİTAK’a teşekkür ederim. I am pleased to announce that the final report of our TÜBİTAK 3501 Career Development Program project, numbered 123E648, titled “The Joint Use of Signal-to-Image Transformation and Convolutional Neural Network Models in Emotion State Analysis with Audio-Visual-Cognitive Multimodal Recognition Approaches”, has been successfully completed. Within the scope of this project, we collected a multimodal dataset consisting of speech, video, and EEG recordings for emotion state analysis. Data were recorded from 40 volunteer participants, providing a valuable research infrastructure in which auditory, visual, and cognitive modalities can be jointly analyzed. I would like to sincerely thank our scholarship students Ümran Bahadır and Büşra Özkellekci, our researchers Çağatay Murat Yılmaz, Elif Baykal Kablan, and Demet Sağlam Aykut, as well as our advisor Prof. Dr. Cemal Köse for their valuable contributions throughout the project. Most importantly, we are deeply grateful to all volunteer participants who took part in the data collection process. This dataset would not have been possible without their support. Following the completion of the related manuscript publication process, we plan to make the dataset available to researchers. Finally, I would also like to thank TÜBİTAK for supporting this project. #emotiv #multimodal #emotionrecognition #KTUMEDAFEDataset