Încorporat în aplicația pentru cameră Samsung Galaxy S9, AR Emoji vă permite să utilizați camera frontală pentru a crea și trimite avatare de desene animate digitale. Similar cu conceptul Animojis de la Apple, AR Emoji vă captează mișcările feței și le reflectă sub forma unui personaj sau animal. Dar, cu funcția „Create My Emoji”, puteți crea, de asemenea, unul dintre voi pur și simplu făcând un selfie - permițându-vă să alegeți un ton de piele, ținută, coafură, culoarea părului și ochelari.
Cu AR Emoji, Samsung și-a propus să rezolve ceea ce vede ca o problemă - găsind o modalitate de a înlocui emoji-urile existente cu cele interactive. Compania a dorit să facă acest lucru într-un mod simplu, oferind utilizatorilor instrumentele potrivite pentru a capta emoții, dar le-a permis totuși să distribuie cu ușurință rezultatul pe o varietate de platforme de mesagerie.
Deci, cum a creat Samsung emoji-urile sale AR? Pentru început, a ajuns direct la experții în animație 3D care au adus la viață unele dintre cele mai populare personaje de la Hollywood.
De la ecran mare la camera smartphone
Pentru a alimenta noua caracteristică, Samsung a colaborat cu Loom.ai - un startup din San Francisco specializat în animație 3D. Software-ul companiei permite utilizatorilor să creeze avatare 3D complet personalizate și personalizabile dintr-o singură fotografie, fără hardware personalizat sau senzori de adâncime. Printr-un parteneriat și un kit de dezvoltare software (SDK), Samsung a combinat tehnologia Loom.ai cu tehnologia camerei S9 (mărită) realitate și recunoaștere facială) pentru a face posibilă emoji AR personalizate.
Samsung dorește să găsească o modalitate de a înlocui emoji-urile existente cu cele interactive.
Viziunea din spatele Loom.ai a început cu filme - desene animate și super-eroi mai exact. Lucrând anterior la companii populare de efecte vizuale precum DreamWorks și Lucasfilm, fondatorii Loom.ai - Mahesh Ramasubramanian și Kiran Bhat - au ajutat la aducerea pe marele ecran a unor personaje cunoscute, precum Shrek și Hulk.
Pentru a injecta personalitate acelor personaje, ei au folosit tehnologia de captare a performanței pentru a încorpora actorii care le-au jucat - înregistrând mișcările actorului, nu aspectul lor vizual. Dar, după ce au văzut cum au reacționat publicul filmelor la creațiile lor 3D, Ramasubramanian și Bhat au decis să ducă această tehnologie mai departe - dincolo de Hollywood - lansând Loom.ai, care se concentrează pe smartphone-uri.
„Oamenii reacționează instant la faptul că aceste personaje prind viață atunci când sunt conduse de actori umani”, a declarat Ramasubramanian, care este CEO și cofondator, pentru Digital Trends. „Am început Loom.ai cu scopul că trebuie să putem găsi o modalitate ușoară pentru ca fiecare persoană să se poată vedea în 3D și, pentru aceasta, a trebuit să construim o nouă tehnologie.”
Brenda Stolyar / Tendințe digitale Cu lungmetrajele, crearea unui avatar 3D necesită o mulțime de echipamente - hardware și software scumpe, machiaj și un cadru de studio. Dar Loom.ai a găsit o modalitate de a simplifica procesul de captare a caracteristicilor unei persoane fără instrumentele obișnuite; în schimb, tehnologia sa brevetată folosește o singură fotografie și o învățare profundă pentru a analiza o imagine. Dacă o fotografie nu conține expresii faciale, algoritmul de învățare profundă privește pixelii și produce automat o față care încapsulează mișcarea musculară corectă.
„Când parteneriatul Samsung s-a desfășurat, am avut șansa de a implementa acea tehnologie sofisticată pe un dispozitiv, despre care considerăm că este deja o sarcină de inginerie destul de convingătoare de la sine”, a declarat Bhat, CTO și co-fondator Loom.ai, pentru Digital Trends. „Este un mare salt tehnologic în a putea lua unele dintre aceste idei și aspirații de pe marele ecran și să le aduc pe mobil.”
Pentru a alimenta AR Emoji, Samsung a apelat la ajutorul Loom.ai - un startup din San Francisco specializat în animație 3D.
Încorporarea acestei tehnologii în hardware-ul Galaxy S9 a impus Loom.ai să își restructureze algoritmii, pentru a rula pe dispozitiv. Dar Loom.ai nu a creat AR Emoji singur: Atât Ramasubramanian, cât și Bhat îl recunosc pe Samsung că a dedicat un efort uriaș în optimizarea software-ului. Prin furnizarea SDK-ului pentru a se integra în smartphone-uri, fondatorii Loom.ai cred că Samsung poate face cadrul mult mai bogat adăugând mai multe opțiuni de conținut și personalizare în viitor.
Cum Galaxy S9 creează un avatar digital
Deci, cum anume S9 (și S9 Plus) creează AR Emojis? Deși Samsung nu și-a dezvăluit sosul secret, acesta a arătat Digital Trends sub capotă.
Folosind tehnologia Loom.ai, camera telefonului captează și procesează o imagine 2D în 3D. Pentru a îmbunătăți acest lucru în continuare, S9 folosește software suplimentar - urmărirea feței și tehnologia Samsung Blend Shape - pentru a oferi expresii faciale pentru Emoji AR.
Ați rămas apoi cu o versiune a dvs. ca un desen animat, care poate emota 18 expresii diferite - pe care Samsung intenționează să le extindă încet la 54 - de la bucurie și plăcere, la tristețe și furie. Toate datele sunt, de asemenea, locale pentru dispozitiv și nu sunt stocate în altă parte.
Ambele lucrează împreună, tehnologia de urmărire a feței urmărește peste 100 de trăsături faciale în timp real (cum ar fi cu ochiul sau zâmbetul) pentru a surprinde emoțiile individuale, în timp ce Blend Shape ajută la livrarea unei game mai largi de ele - care îmbină expresiile împreună pe baza a 75 de trăsături faciale umane de bază . Samsung spune, pentru Blend Shape, că a efectuat cel puțin 100 de teste săptămânale în laboratoarele sale, pentru a se asigura că există suficiente date care să-i atragă pe utilizatori. (Blend Shape este, de asemenea, utilizat pentru a crea Disney AR Emojis, cum ar fi Mickey și Minnie Mouse.)
În propriul nostru test AR Emoji, majoritatea dintre noi am simțit că personajele noastre par extrem de inexacte. Un scriitor a considerat că există o lipsă de opțiuni disponibile pentru tonul pielii, fără tonuri de culoare închisă din care să aleagă. Alții au simțit că emoji-urile lor AR nu arătau ca ele, ceea ce a făcut ca editarea avatarului să pară mai mult o corvoadă decât o sarcină plăcută.
Potrivit Loom.ai, crearea unui AR Emoji precis se bazează foarte mult pe felul în care este fotografiat selfie-ul. Utilizatorii ar trebui să facă fotografii în același mod în care ar face o fotografie de pașaport. „Vrei chiar iluminare, nimic care să-ți acopere fața și o expresie neutră, astfel încât să putem adăuga expresiile mai târziu”, a explicat Ramasubramanian. „Este o chestiune ca oamenii să se obișnuiască puțin cu el și apoi să vadă posibilitățile de a-l anima și de a-l folosi.”
Ramasubramanian a mai spus că utilizatorii ar trebui să o trateze așa cum ar face în timp ce fac orice selfie - ceea ce înseamnă că puteți face o mulțime de fotografii până când sunteți mulțumit de fotografie. Deoarece AR Emoji vă permite să creați mai multe avatare, le puteți compara pentru a-l găsi pe cel care vă place cel mai mult. Fiecare pe care îl creați salvează și pe telefonul dvs., astfel încât să puteți schimba versiunea pe care o utilizați în funcție de starea de spirit.
Cea mai recentă actualizare a AR Emoji include coafuri suplimentare, pălării, cum ar fi un hijab și alte opțiuni. Actualizarea se lansează în prezent la versiunile deblocate ale Samsung Galaxy S9 și S9 Plus în Coreea, China și Europa. Dispozitivele de transport europene și dispozitivele deblocate din SUA ar trebui să aibă actualizarea disponibilă pentru descărcare săptămâna aceasta. Actualizarea pentru dispozitivele de transport din SUA va fi lansată în următoarele săptămâni. Samsung spune că AR Emoji va continua să evolueze în viitor, dar deocamdată rămâne strâns pe detalii exacte.
