Google sa naučil odčítať z pier, rozozná reč aj v hlučnom prostredí

Rozoznať prekrývajúce sa hlasy v rušnom prostredí bolo doteraz pre počítače problémom.

Google. Google. (Zdroj: SITA/AP)

BRATISLAVA. Výskumníkom zo spoločnosti Google sa podarilo vytvoriť systém, vďaka ktorému vedia počítače rozoznať hlasy v hlučnom prostredí. Jav známy ako kokteilový efekt, keď sa človek dokáže v hlučnom prostredí sústrediť na jednotlivé hlasy, je pre ľudí bežný.

Počítače, ktoré napríklad prepisovali hlasy zo zvukového záznamu do textu, však so sústredením sa na jeden hlas mali problém.

Výskumníci preto systém navrhli tak, aby pracoval na základe audiovizuálneho modelu. V štúdii predstavili technológiu, ktorá dokázala v bežných videách na sieti YouTube zvýrazniť rečový prejav konkrétnych ľudí, zatiaľ čo všetky ostatné zvuky sa stlmia. Prácu predstavili na Google Research Blog.

Od používateľa sa len vyžaduje, aby vo videu zvýraznil tvár človeka, ktorého chce počuť, alebo nechá systém, aby hlasy zvýrazňoval podľa toho, kto práve rozpráva.

Podľa Googlu je vizuálny podklad kľúčový, pretože technológia sleduje, čie ústa sa práve pohybujú a na základe toho vie, na koho sa má sústrediť a zvýrazniť rečový prejav. Spojenie zvuku a videa zaistí, že oddelenie reči je omnoho kvalitnejšie aj v prípade, keď sa prekrýva rečový prejav viacerých ľudí.

Výskumníci zozbierali najprv stotisíc vysokokvalitných videí prednášok a prejavov na YouTube. Z nich oddelili zvukové stopy čistej reči, bez zvukov v pozadí. Neurálna sieť tak mohla zistiť, kedy človek hovorí a ako vyzerá spektrogram, teda vizuálny záznam zvuku jeho reči.

Načítavám video...

Nakoniec "namiešali" dohromady rečový prejav a rôzne zábery pôvodných videí a pridali do pozadia šum.

Neurálnu sieť potom naučili rozpoznať v záberoch tváre jednotlivých ľudí a prečítať už celý spektrogram všetkých zvukov vo videu. Počítač tak dokázal oddeliť rečový prejav jednotlivých ľudí, vytvoriť individuálnu zvukovú stopu pre ich reč a zvýrazniť ju.

Google verí, že ich technológia sa uplatní pri strojovom prepisovaní záznamov, zlepší automatické titulkovanie vo videách, či pomôže aj pri videokonferenciách.

Načítavám video...

Na spracúvanie osobných údajov sa vzťahujú Zásady ochrany osobných údajov a Pravidlá používania cookies. Pred zadaním e-mailovej adresy sa, prosím, dôkladne oboznámte s týmito dokumentmi.

Najčítanejšie na SME Tech

Inzercia - Tlačové správy

  1. Tipy, kam ísť na dovolenku počas Veľkej Noci
  2. Tablet nie je na všetko, ale v tomto dokáže zázraky
  3. Doplňte si knižnicu o svetovú klasiku už od 99 centov
  4. Žiaci sa šikanovali, dnes si pomáhajú. Pomohlo sedem krokov
  5. Investment Advisory Guide for Slovakia
  6. Jazdili sme na novom Volkswagene T-Cross!
  7. Slovensko čaká najdôležitejšie politické rozhodnutie roka
  8. Obľúbené Tunisko sa vracia do ponuky dovoleniek na rok 2019
  9. Máte pri čítaní „krátke ruky“? Vitajte vo svete štyridsiatnikov
  10. Test LG OLED B8: špičkový 4K televízor za cenu, akú ste nečakali
  1. Vaše umenie bude hýbať Tatrami. Zapojte sa do súťaže ZSSK
  2. Tipy, kam ísť na dovolenku počas Veľkej Noci
  3. Tablet nie je na všetko, ale v tomto dokáže zázraky
  4. Recenze youtubera JeezyJ: jak dopadla autokamera Mio MiVue 785 ?
  5. Burza pracovných príležitostí opäť na Stavebnej fakulte STU
  6. Počet ochorení na rakovinu stále stúpa. Nepodceňujte prevenciu
  7. Doplňte si knižnicu o svetovú klasiku už od 99 centov
  8. Žiaci sa šikanovali, dnes si pomáhajú. Pomohlo sedem krokov
  9. Forum Prešov má platné stavebné povolenie a začína s výstavbou
  10. Slávnostná inaugurácia rektora a dekanov fakúlt EU v Bratislave
  1. Slovensko čaká najdôležitejšie politické rozhodnutie roka 29 651
  2. Žiaci sa šikanovali, dnes si pomáhajú. Pomohlo sedem krokov 22 871
  3. Doplňte si knižnicu o svetovú klasiku už od 99 centov 19 596
  4. Premýšľate o aute do 10 000 eur? Poradíme vám, ako nenaletieť 16 299
  5. Tablet nie je na všetko, ale v tomto dokáže zázraky 15 106
  6. Tipy, kam ísť na dovolenku počas Veľkej Noci 10 929
  7. Obľúbené Tunisko sa vracia do ponuky dovoleniek na rok 2019 9 464
  8. Prievidzská firma je malý zázrak. Uznáva ju americké letectvo 8 652
  9. Forum Prešov má platné stavebné povolenie a začína s výstavbou 6 766
  10. Test LG OLED B8: špičkový 4K televízor za cenu, akú ste nečakali 6 264

Téma: Umelá inteligencia


Článok je zaradený aj do ďalších tém Google

Hlavné správy zo Sme.sk

DOMOV

Mistrík odstúpil z prezidentského súboja, podporil Čaputovú

Mistríkovo rozhodnutie ocenil aj prezident Kiska a tiež podporil Čaputovú.

KOMENTÁR PETRA TKAČENKA

Toto by Čaputová nemala zahodiť

Po dvadsiatich rokoch môže prvé kolo vyhrať blok mimo Smeru a HZDS.

AUTO

Prichádza malé SUV Škoda Kamiq. Aké sú naše prvé dojmy?

Zaboduje priestorom aj bohatou výbavou.

Neprehliadnite tiež

Medve´d malajský v Zoo.
Výstavba projektu ITER (Medzinárodný termonukleárny experimentálny reaktor) v decembri 2017.
Ilustračné foto.
na projekte S-case pracuje aj Martin Pekarčík z Lekárskej fakulty UK. Na snímke počas slávnostného oceňovania výnimočných študentov a pedagógov v aule Univerzity J. A. Komenského v Bratislave.

Dvaja americkí astronauti začali vo vesmíre výmenu batérií na ISS

Astronauti vymenia tri zastarané batérie za silnejšie lítiovo-iónové.

Astronauti by mali v otvorenom vesmíre podľa plánu pracovať niekoľko hodín.