Noua tehnologie poate schimba expresiile faciale în timp real

$config[ads_kvadrat] not found

Expresiile si Microexpresiile faciale

Expresiile si Microexpresiile faciale
Anonim

Amintiți-vă că aplicația Bizarro World "Myidol", care a devenit virale în primăvara anului, datorită capacității sale de a utiliza software-ul de recunoaștere a feței pentru a face un avatar digital care arată și se mișcă exact mai mult ca tine? E pe cale să devină o realitate … un fel de.

Cercetătorii de la Stanford și-au dat seama cum să transfere expresiile faciale ale unei persoane pe alte persoane în timp real prin intermediul videoclipului.

Modelul prezentat în video demonstrativ al lui Stanford folosește doar un calculator PC de calitate pentru consumatori și camera de adâncime pentru fiecare actor - ceea ce înseamnă că nu aveți nevoie de echipamentul fantezist pentru a executa acest tromp l'oeil, aveți nevoie doar de niște algoritmi complexe.

Cercetătorii au dezvoltat un nou algoritm în timp real, care ia vizuale de înaltă calitate ale fețelor fiecărui participant și le folosește pentru a transpune expresiile de la un "actor sursă" (persoana care furnizează expresii faciale și / sau vorbire) la un "actor țintă" (persoana a cărei față va fi manipulată în funcție de ceea ce face actorul sursă). Informațiile vizuale ale actorului sursă trec prin program și devin redate în fața fluxului video al actorului țintă, astfel încât se pare că actorul țintă zâmbește, vorbește, își lipsește limba sau orice altceva vine în minte.

Datorită unei serii de puncte de referință mapate în jurul feței (similar cu aplicația Myidol), tipurile de informații vizuale măsurate de sistem includ forma și caracteristicile feței (cum ar fi ochii, nasul, gura și chiar ridurile) precum și textura și adâncimea feței. Programul se potrivește apoi punctelor de referință ale actorului sursă cu actorul țintă și suprapune aceste expresii pe țintă pentru un feed video hiperrealist.

Deoarece acest sistem se află încă în fabrică (și a fost folosit un echipament destul de rudimentar), rezultatele finale sunt încă puțin ciudate - cum ar fi dinții semi-perturbativi, programul suprapus în gura țintă, astfel încât nu există o gaură neagră când este " deschis "(a se vedea mai sus) … precum și aspectul gol în ochii țintă. Dar acestea sunt cartofi prajiti in comparatie cu ce lucruri racoase inseamna dezvoltarea acestui program pentru noi.

Iată câteva idei despre ce am putea folosi această tehnologie pentru:

  • Ai un interviu important de angajare pe Skype, și nu ești îmbrăcat pentru succes. Utilizați un stand elegant în timp ce oferiți expresii faciale și răspunsuri de interviu ucigaș.
  • Vizionați o cursă live de la un profesor de top din Germania - singura problemă este că nu vorbești germană. Nu vă faceți griji, datorită unui traducător în timp real, care utilizează acest software, puteți viziona prof. Discursul dvs. în limba dvs. maternă, fără nici o întârziere dubioasă a dublării imaginilor.

Urmăriți expresia-swap în acțiune:

$config[ads_kvadrat] not found