Sanat ve Tasarım Uygulama ve Araştırma Merkezi -
Gelişim Üniversitesi
  1.   Anasayfa
  2. Sanat ve Tasarım Uygulama ve Araştırma Merkezi
  3. ETKİLEŞİMLİ DUYGUSAL DİJİTAL TUVAL SİSTEMİ


ETKİLEŞİMLİ DUYGUSAL DİJİTAL TUVAL SİSTEMİ



Patent No: 2025-GE-858149

ETKİLEŞİMLİ DUYGUSAL DİJİTAL TUVAL SİSTEMİ

Dr. Öğr. Üyesi Mustafa GÜNAY

Bu buluş, izleyicinin yüz ifadeleri ve ses tonuna ilişkin
duyusal verilerin gerçek zamanlı olarak analiz edilerek
sanatsal görsel parametrelere dönüştürülmesi yoluyla
kişiselleştirilmiş ve dinamik bir görsel deneyim sunan,
sergi ve dijital sanat uygulamalarında kullanılabilen
etkileşimli duygusal dijital tuval sistemi ile ilgili olup,
özelliği; izleyicinin yüz ifadeleri, mikro-ifadeleri ve ses
tonuna ilişkin biyoduyusal verileri kamera ve mikrofon ile
gerçek zamanlı olarak toplayan algılama ünitesi (1),
algılama ünitesinden (1) elde edilen ham görüntü ve ses
verilerini gürültüden arındırarak analiz için uygun standart
formata dönüştüren ön işleme modülü (2), ön işleme
modülünden (2) gelen verileri yapay zekâ ve makine
öğrenmesi tabanlı modeller ile işleyerek izleyicinin
duygusal durumunu belirleyen duygu analiz modülü (3),
duygu analiz modülü (3) tarafından üretilen duygu
kategorileri ve yoğunluk skorlarının birleşik biçimde temsil
edildiği ve sistemde gerçekleştirilecek tüm görsel
dönüşümlerin temel girdisini oluşturan duygu durumu
vektörü (3), duygusal veriler ile renk, doku, fırça darbesi
karakteri ve kompozisyon karmaşıklığı arasında
sistematik eşleme yaparak duygu durumu vektörünü (4)
sanatsal ve görsel parametrelere dönüştüren duygu
dönüşüm algoritması (5), duygu dönüşüm
algoritmasından (5) elde edilen sonuçları somut grafik
üretim komutlarına çeviren görsel parametre üretim
katmanı (6), belirlenen görsel parametreleri kullanarak
generatif grafik üretimi gerçekleştiren görüntü üretim
motoru (7), görüntü üretim motoru (7) tarafından
oluşturulan görsel içeriğin izleyiciye sunulduğu ekran veya
projeksiyondan oluşan dijital görüntüleme katmanı (8) ve
izleyici-duygu-görsel ilişkisinde kesintisiz ve adaptif bir
çalışma döngüsü oluşturmak için izleyicinin güncel
 
tepkilerinin yeniden algılanarak sistemin sürekli olarak
kendini güncellemesini sağlayan kapalı döngü geri
besleme modülü (9) sahip olmasıdır.