Beszélő hangjának átalakítása modern gépi tanulási eszközökkel

OData támogatás
Konzulens:
Dr. Csapó Tamás Gábor
Távközlési és Médiainformatikai Tanszék

Konuşmacı dönüştürme genel olarak yeni bir araştırma alanı olarak değerlendirilebilir ve tarihi 1980’li yılların sonuna dayanır. Konuşmacı dönüştürmede amaç belirli bir kişinin sesinin yine başka bir belirli kişinin sesiymiş gibi duyulmasını sağlayacak şekilde dönüştürülmesidir. Gelişim süreci içerisinde, geçmişten günümüze bu konuya yönelik farklı bakış açıları vardı. Bazı araştırmacılar, konuşturmacı dönüştümenin en önemli adımlarından birisi olan ses sinyalini matematiksel model ile temsil etme alanına daha fazla odaklandılar. Başka bir deyişle, ses sinyalinin kodlanması ve çözümlenmesi ile daha çok ilgilendiler. Ancak, diğer başka araştırmacılar bu konuyu karakterize edilmiş sinyalin eşleştirilmesi olarak değerlendirip, bu konu üzerine yoğunlaştılar. Bu alanda yapılan çalışmalarda araştırmacılar limitlerini bildikleri için belirli şartlar altında iyi sonuçlar veren uygulamalar geliştirebildiler. Bu sebeple bu zamana kadar her durum için iyi sonuçlar veren bir uygulama geliştirilememiştir. Teknolojik gelişmeler sayesinde ve bilgisayarların çok daha fazla bilgi işleme kapasitelerinin yardımı ile, araştımacılar önceki methodlara göre limitleri çok daha yüksek algoritmalar kullanabilir hale geldiler. Bu algortimalara makine öğrenmesi tabanlı algoritmalar denmektedir. Son zamanlarda bu modern makine öğrenmesi algoritmaları içinden bir tanesi olan derin öğrenme, araştırmacıların ilgisini çok daha fazla çekmiştir. Bu tez kapsamında kullanılan derin sinir ağları tabanlı konuşmacı dönüştürme programı, açık kaynak kodlu Merlin methodudur. Bizim bu methoda katkımız, ona Ahocoder olarak bilinen yeni bir ses kodlayıcısı entegre etmektir. Bu tez kapsamında, Merlin, uygulanan bu yeni ses kodlayıcısı ile ele alınmıştır. Derin sinir ağları tabanlı konuşturmacı dönüştürme ile beklenti, esas konuşmacıya olan bağımlılığın azalmasıydı. Bu bağımlılığı kontrol edebilmek için, önceki methodlardan elde ettiğimiz sonuçlar ile bu method ile elde ettiğimiz sonuçlar karşılaştırılmıştır. Bu karşılaştırma işlemi öznel ve nesnel değerlendirmeler içermektedir.

Letölthető fájlok

A témához tartozó fájlokat csak bejelentkezett felhasználók tölthetik le.