An acoustic signal based language independent lip synchronization method and its implementation via extended LPC

Basit Öğe Kaydı
dc.authorid0000-0003-3143-2538
dc.authorid0000-0002-2553-1911
dc.authorid0000-0001-6430-3009
dc.contributor.authorCankurtaran, Halil Said
dc.contributor.authorBoyacı, Ali
dc.contributor.authorYarkan, Serhan
dc.date.accessioned2024-10-12T19:42:53Z
dc.date.available2024-10-12T19:42:53Z
dc.date.issued2020
dc.departmentİstanbul Ticaret Üniversitesi, Mühendislik Fakültesi, Elektrik Elektronik Mühendisliği (İngilizce) Bölümü en_US
dc.departmentİstanbul Ticaret Üniversitesi, Mühendislik Fakültesi, Bilgisayar Mühendisliği (İngilizce Destekli) Bölümü
dc.description28th Signal Processing and Communications Applications Conference (SIU) -- OCT 05-07, 2020 -- ELECTR NETWORKen_US
dc.description.abstractProcessing human speech with the use of digital technologies leads to several important fields of research. Speech-to-text and lip-syncing are among the instances of relevant prominent research areas. In this regard, audio-visualization of acoustic signals, providing visual aid in real-time for disabled people, and realization of text-free animation applications are just to name a few. Therefore, in this study, a language-independent lip-sync method that is based on extended linear predictive coding is proposed. The proposed method operates on baseband electrical signal that is acquired by a standard single-channel off-the-shelf microphone and exploits the statistical characteristics of acoustic signals produced by human speech. In addition, the proposed method is implemented on an embedded system, tested, and its performance is evaluated. Results are given along with discussions and future directions. en_US
dc.description.abstractKonuşmanın sayısal teknolojiler yardımı ile işlenmesi birçok önemli araştırma alanının ortaya çıkmasına yol açmıştır. Konuşmanın metne çevrilmesi ve sentetik olarak üretilmiş dudak biçimleri ile eşzamanlılaştırılması söz konusu araştırma alanlarından öne çıkanlar arasındadır. Bahsi geçen alanlara ilişkin hizmetler arasında seslerin işitsel destekle görselleştirilmesi, engelliler için gerçek–zamanlı görsel yardım sağlanması ve metinden bağımsız animasyonların üretilmesi sayılabilir. Yukarıdaki bağlamdan hareketle, bu çalışmada, genişletilmiş¸ doğrusal tahmin kodlama aracılığı ile dilden bağımsız olarak çalışan bir ses–dudak şekli eşleştirme yöntemi ortaya konmuştur. Önerilen yöntem standart tek kanallı bir mikrofon aracılığı ile elde edilmiş temel banttaki elektriksel işaretler üzerinde çalışmakta ve konuşma ile üretilen akustik işaretlerin istatistiksel yapısından yararlanmaktadır. Ayrıca, önerilen yöntem bir gömülü sistem aracılığıyla gerçeklenmiş, test edilmiş ve başarımı değerlendirilmiştir. Sonuçlar, tartışmalar ve geleceğe yönelik çalışmalar ile birlikte sunulmuştur.
dc.description.sponsorshipIstanbul Medipol Univen_US
dc.identifier.isbn978-1-7281-7206-4
dc.identifier.issn2165-0608
dc.identifier.scopus2-s2.0-85100299991en_US
dc.identifier.scopusqualityN/Aen_US
dc.identifier.urihttps://hdl.handle.net/11467/8634
dc.identifier.wosWOS:000653136100350en_US
dc.identifier.wosqualityN/Aen_US
dc.indekslendigikaynakWeb of Scienceen_US
dc.indekslendigikaynakScopusen_US
dc.language.isotren_US
dc.publisherIEEEen_US
dc.relation.ispartof2020 28th Signal Processing And Communications Applications Conference (Siu)en_US
dc.relation.publicationcategoryKonferans Öğesi - Uluslararası - Kurum Öğretim Elemanıen_US
dc.rightsinfo:eu-repo/semantics/closedAccessen_US
dc.subjectFormant Frequencyen_US
dc.subjectLinear Predictive Codingen_US
dc.subjectLip Syncen_US
dc.subjectBelirleyici Frekans
dc.subjectDoğrusal Tahmin Kodlama
dc.subjectDudak Hareket Eşzamanlılaştırma
dc.titleAn acoustic signal based language independent lip synchronization method and its implementation via extended LPCen_US
dc.title.alternativeGenişletilmiş DTK yardımı ile akustik işaret tabanlı, dilden bağımsız bir ses–dudak şekli eşleştirme yöntemi ve gerçeklemesi
dc.typeConference Objecten_US

Dosyalar

Orijinal paket
Listeleniyor 1 - 1 / 1
Küçük Resim Yok
İsim:
An Acoustic Signal Based Language Independent Lip Synchronization Method and Its Implementation via Extended LPC.pdf
Boyut:
171.86 KB
Biçim:
Adobe Portable Document Format
İndir

Koleksiyon

WoS İndeksli Yayınlar Koleksiyonu
Mühendislik Fakültesi, Bilgisayar Mühendisliği (İngilizce Destekli) Bölümü Koleksiyonu
Mühendislik Fakültesi, Elektrik Elektronik Mühendisliği (İngilizce) Bölümü Koleksiyonu
Scopus İndeksli Yayınlar Koleksiyonu