Deepfake-ul Samsung îl poate face pe călugărul întunecat Rasputin să cânte pe bune

Cercetătorii de la centrul de cercetare AI al Samsung din Cambridge, Marea Britanie, împreună cu experți în informatică de la Imperial College din Londra, au colaborat la un proiect de creare a unei rețele adverse generative adversarial network (GAN), care poate anima și sincroniza perfect mișcările faciale ale imaginilor 2D. cu clipuri audio care conțin voci umane.

Pe lângă sincronizarea mișcărilor buzelor și gurii, acest model de inteligență artificială poate ajusta și mișcările sprâncenelor și clipirea ochilor pentru a face ca fețele pe care le creează să pară mai naturale. Cu toate acestea, cea mai importantă sarcină va fi totuși să sincronizați buzele și gura cu sunetul emis. Astăzi, acest pas se face adesea în timpul post-editării sau prin utilizarea graficii pe computer.

• Modelul AI folosește date aeriene și terestre pentru a naviga în zone greu de observat

Centrul AI Samsung

Cercetătorii cred că modelul ar putea fi folosit pentru a genera automat chipuri vorbitoare pentru personajele de desene animate în cel mai natural mod, îmbunătățind vizibilitatea în apelurile video cu lățime de bandă redusă, oferind o mai bună sincronizare a gurii sau dublare pentru filmele străine.

Dintre exemplele acestei cercetări împărtășite pe YouTube, cel mai impresionant este videoclipul care îl înfățișează pe celebrul mistic rus Rasputin (1869 - 1919) „interpretând” melodia cântăreței, artistul Halo, Beyoncé. Alte videoclipuri sunt, de asemenea, foarte notabile, cum ar fi regretații rapperi 2Pac și Biggie care cântă cover-uri ale lucrărilor lor sau marele om de știință Albert Einstein care citește un citat despre limbajul comun al științei.

• STEAL AI de la Nvidia oferă un suport de inferență mai bun pentru modelele de computer vision

Călugărul întunecat Rasputin interpretează cântecul Halo

În plus, există multe alte exemple video interesante, le puteți consulta la: https://sites.google.com/view/facial-animation/home

Vestea cercetărilor de mai sus a venit la doar o lună după ce un alt centru de cercetare Samsung AI din Moscova a introdus un proiect pentru a crea animații 2D folosind inteligența artificială fără a folosi modele. Se știe că această tehnologie poate fi folosită pentru a crea avatare digitale mai convingătoare sau imagini deepfake.

Utilizarea rețelelor GAN pentru a falsifica mediile digitale, cum ar fi imagini și videoclipuri, a apărut ca o tendință notabilă în domeniul general al AI la nivel mondial în ultimii ani. Multe modele GAN sofisticate au fost introduse în cadrul conferințelor de inteligență artificială, cum ar fi ICML, CVPR și multe alte evenimente notabile de la începutul anului până în prezent.

• 5 minți de geniu în domeniul AI își unesc mâinile pentru a crea roboți uimitoare

Rasputin și ca cântăreața Beyoncé

Printre acestea, unele modele notabile cu potențial de aplicare extrem de ridicat includ GauGAN de la Nvidia, care poate transforma mâzgălile în stil MS Paint în „capodopere” artistice. Sau CollaGEN, o metodă creată de cercetătorii coreeni pentru a înlocui cantitatea de date lipsă din fiecare imagine.

Deși potențialul ca instrumentele deepfake să contribuie în multe domenii diferite este uriaș, riscurile potențiale pe care le aduc sunt, de asemenea, o durere de cap pentru oamenii de știință.

De fapt, această tehnologie este adesea exploatată pentru a uzurpa identitatea unor persoane celebre (actori, cântăreți, modele...) în videoclipuri false sau mai rău, în filme porno. Se poate observa că această tehnologie a creat un șoc puternic pentru că mulți oameni au crezut că este adevărat. Acest lucru nu numai că afectează onoarea și demnitatea persoanei falsificate, dar determină și opinia publică să se agite și să provoace multe controverse sau chiar mai grave conflicte.

• Inteligența artificială japoneză a creat modele de modă virtuale super realiste

Deepfake conține multe riscuri potențiale

Poate că în viitor, oamenii de știință, precum și agențiile de management de stat trebuie să stea împreună pentru a găsi convenții pentru utilizarea acestei tehnologii minunate în mod corespunzător și în siguranță pentru comunitate.