Samsung'un Cambridge, Birleşik Krallık'taki yapay zeka araştırma merkezinden araştırmacılar, Imperial College London'dan bilgisayar bilimi uzmanlarıyla birlikte, 2D görüntülerin yüz hareketlerini canlandırabilen ve mükemmel şekilde senkronize edebilen, rakipsel bir ağ (GAN) oluşturmak için bir proje üzerinde işbirliği yaptı. insan sesleri içeren ses klipleri ile.
Bu yapay zeka modeli, dudak ve ağız hareketlerini senkronize etmenin yanı sıra, oluşturduğu yüzlerin daha doğal görünmesini sağlamak için kaş hareketlerini ve göz kırpma hareketlerini de ayarlayabiliyor. Ancak yine de en önemli görev dudakları ve ağzı yayılan sesle senkronize etmek olacaktır. Günümüzde bu adım genellikle düzenleme sonrası veya bilgisayar grafikleri kullanılarak yapılıyor.
Samsung Yapay Zeka Merkezi
Araştırmacılar, modelin çizgi film karakterleri için en doğal şekilde otomatik olarak konuşan yüzler oluşturmak, düşük bant genişliğine sahip görüntülü aramalarda görünürlüğü artırmak, daha iyi ağız senkronizasyonu veya yabancı filmler için dublaj sağlamak için kullanılabileceğini düşünüyor.
Bu araştırmanın YouTube'da paylaşılan örnekleri arasında en etkileyici olanı, ünlü Rus mistik Rasputin'in (1869 - 1919) kadın şarkıcının Halo sanatçısı Beyoncé şarkısını "seslendirdiği" videodur. Son dönem rapçileri 2Pac ve Biggie'nin eserlerinin cover'larını söylemesi veya büyük bilim adamı Albert Einstein'ın bilimin ortak diliyle ilgili bir alıntı okuması gibi diğer bazı videolar da oldukça dikkate değerdir.
Kara keşiş Rasputin Halo şarkısını seslendiriyor
Ayrıca başka birçok ilginç video örneği de var, bunlara şu adresten bakabilirsiniz: https://sites.google.com/view/facial-animation/home
Yukarıdaki araştırmanın haberi, Moskova'daki başka bir Samsung AI araştırma merkezinin, modeller kullanmadan yapay zeka kullanarak 2D animasyonlar oluşturmaya yönelik bir projeyi tanıtmasından yalnızca bir ay sonra geldi. Bu teknolojinin daha inandırıcı dijital avatarlar veya deepfake görseller oluşturmak için kullanılabileceği biliniyor.
Görüntüler ve videolar gibi dijital medyayı taklit etmek için GAN ağlarının kullanılması, son yıllarda dünya çapında genel yapay zeka alanında dikkate değer bir trend olarak ortaya çıktı. Sene başından bu yana ICML, CVPR gibi yapay zeka konferansları ve daha birçok önemli etkinlik çerçevesinde pek çok gelişmiş GAN modeli tanıtıldı.

Bunlar arasında, son derece yüksek uygulama potansiyeline sahip bazı önemli modeller arasında, MS Paint tarzı karalamaları sanatsal "başyapıtlara" dönüştürebilen Nvidia'nın GauGAN'ı yer alıyor . Veya Koreli araştırmacılar tarafından her görüntüdeki eksik veri miktarını değiştirmek için oluşturulan bir yöntem olan CollaGEN.
Deepfake araçlarının birçok farklı alana katkı sağlama potansiyeli çok büyük olsa da, getirdikleri potansiyel riskler de bilim insanlarının başını ağrıtıyor.
Aslında bu teknoloji, sahte videolarda veya daha kötüsü porno filmlerde ünlü kişilerin (aktörler, şarkıcılar, modeller...) kimliğine bürünmek için sıklıkla kullanılıyor. Pek çok kişinin bunun doğru olduğuna inanması nedeniyle bu teknolojinin güçlü bir şok yarattığı görülüyor. Bu durum, sahtesi yapılan kişinin şeref ve haysiyetini etkilemekle kalmayıp, aynı zamanda kamuoyunun karışmasına ve birçok tartışmaya, hatta daha da kötü çatışmalara yol açmaktadır.

Belki gelecekte, bilim adamlarının yanı sıra devlet yönetim kurumlarının da bu harika teknolojinin toplum için doğru ve güvenli bir şekilde kullanılmasına yönelik sözleşmeler bulmak üzere bir araya gelmeleri gerekecektir.