YouTube merită o rundă de aplauze - deoarece platforma video poate include acum [Aplauze] și alte efecte sonore în subtitrările închise ale unui videoclip. Extinderea subtitrării, anunțată joi, 23 martie, este posibilă de rețelele neuronale profunde, o formă de inteligență artificială.
Deocamdată, YouTube poate eticheta automat numai aplauze, muzică și râs, dar aceste trei efecte sonore au fost descrierile pe care creatorii de conținut le-au adăugat manual peste orice alt zgomot de subtitrare închis. Cea mai recentă caracteristică se bazează pe funcția de subtitrare automată lansată în 2009 pentru text, dar adaugă primele efecte sonore sistemului.
YouTube spune că programul funcționează similar cu detectarea obiectelor din imagini, dar s-a confruntat cu câteva dificultăți în ceea ce privește recunoașterea obiectelor. Pentru ca programul să recunoască doar acele trei sunete, inginerii YouTube au trebuit să învețe programul să detecteze acele sunete, să le separe temporar și apoi să introducă acel sunet recunoscut în subtitrări.
De asemenea, sistemul a avut tendința de a se lupta cu efectele sonore care au apărut în același timp cu alte sunete, cum ar fi râsul și vorbirea. O altă provocare a fost găsirea unui set de date suficient de mare pentru a antrena sistemul care nu era deja etichetat în mod adecvat prin introducerea manuală a datelor.
Rețeaua de învățare profundă analizează secvențe scurte și este capabilă să prezică probabilitatea acelor efecte sonore la o rată de aproximativ 100 de cadre pe secundă. Cu toate acestea, inginerii YouTube au construit sistemul într-un mod care va permite adăugarea de efecte sonore suplimentare la sistem ulterior.
Deci, de ce aplauze, muzică și râsete? Pe lângă faptul că sunt cele mai frecvent etichete reglate manual din sistemul de subtitrare, fiecare dintre aceste sunete are, de asemenea, un singur sens. Un „sunet”, a explicat YouTube, oferind un exemplu, ar putea fi un sunet de la sonerie, telefon sau alarmă, prezentând o nouă provocare pentru software.
Potrivit YouTube, peste 15 milioane de videoclipuri cu subtitrări automate sunt vizionate în fiecare zi. Într-un test al celei mai recente actualizări a subtitrărilor automate, două treimi au spus că etichetele cu efecte sonore au îmbunătățit experiența generală.
