Google sa naučil odčítať z pier, rozozná reč aj v hlučnom prostredí

Rozoznať prekrývajúce sa hlasy v rušnom prostredí bolo doteraz pre počítače problémom.

Google. (Zdroj: SITA/AP)

BRATISLAVA. Výskumníkom zo spoločnosti Google sa podarilo vytvoriť systém, vďaka ktorému vedia počítače rozoznať hlasy v hlučnom prostredí. Jav známy ako kokteilový efekt, keď sa človek dokáže v hlučnom prostredí sústrediť na jednotlivé hlasy, je pre ľudí bežný.

Počítače, ktoré napríklad prepisovali hlasy zo zvukového záznamu do textu, však so sústredením sa na jeden hlas mali problém.

Výskumníci preto systém navrhli tak, aby pracoval na základe audiovizuálneho modelu. V štúdii predstavili technológiu, ktorá dokázala v bežných videách na sieti YouTube zvýrazniť rečový prejav konkrétnych ľudí, zatiaľ čo všetky ostatné zvuky sa stlmia. Prácu predstavili na Google Research Blog.

Článok pokračuje pod video reklamou

Od používateľa sa len vyžaduje, aby vo videu zvýraznil tvár človeka, ktorého chce počuť, alebo nechá systém, aby hlasy zvýrazňoval podľa toho, kto práve rozpráva.

Podľa Googlu je vizuálny podklad kľúčový, pretože technológia sleduje, čie ústa sa práve pohybujú a na základe toho vie, na koho sa má sústrediť a zvýrazniť rečový prejav. Spojenie zvuku a videa zaistí, že oddelenie reči je omnoho kvalitnejšie aj v prípade, keď sa prekrýva rečový prejav viacerých ľudí.

Výskumníci zozbierali najprv stotisíc vysokokvalitných videí prednášok a prejavov na YouTube. Z nich oddelili zvukové stopy čistej reči, bez zvukov v pozadí. Neurálna sieť tak mohla zistiť, kedy človek hovorí a ako vyzerá spektrogram, teda vizuálny záznam zvuku jeho reči.

Nakoniec "namiešali" dohromady rečový prejav a rôzne zábery pôvodných videí a pridali do pozadia šum.

Neurálnu sieť potom naučili rozpoznať v záberoch tváre jednotlivých ľudí a prečítať už celý spektrogram všetkých zvukov vo videu. Počítač tak dokázal oddeliť rečový prejav jednotlivých ľudí, vytvoriť individuálnu zvukovú stopu pre ich reč a zvýrazniť ju.

Google verí, že ich technológia sa uplatní pri strojovom prepisovaní záznamov, zlepší automatické titulkovanie vo videách, či pomôže aj pri videokonferenciách.

Najčítanejšie na SME Tech


Inzercia - Tlačové správy


  1. NBS od leta opäť sprísňuje hypotéky. Viete čo vás čaká?
  2. Atos a Google Cloud nadviazali globálne partnerstvo
  3. Za palivo Shell BMW domov
  4. Košice majú svoju prvú Kozlovnu s najdlhším výčapom
  5. V špeciálnom kole sú vyčlenené 4 milióny € pre kotly a čerpadlá
  6. Adlerova - dobré miesto pre rodinu na Furči sa už stavia
  7. Aj staršie životné poistenie môže mať nové výhody
  8. 7 miest, kde ešte stále môžete zažiť cisárske Rakúsko
  9. Nukleárna magnetická rezonančná liečba znova v Košiciach
  10. Ružička Csekes je už po šiesty krát Právnickou firmou roka
  1. Atos a Google Cloud nadviazali globálne partnerstvo
  2. Košice majú svoju prvú Kozlovnu s najdlhším výčapom
  3. Plynové kondenzačné kotly IMMERGAS „šité na mieru“
  4. V špeciálnom kole sú vyčlenené 4 milióny € pre kotly a čerpadlá
  5. NBS od leta opäť sprísňuje hypotéky. Viete čo vás čaká?
  6. Adlerova - dobré miesto pre rodinu na Furči sa už stavia
  7. Naše finančné družstvo zveľaďuje svoje aktíva
  8. Obchodník roka: Najvyššie ocenenie si piatykrát odnáša Martinus
  9. Za palivo Shell BMW domov
  10. Shell ponúkne najrýchlejšie dobíjanie elektromobilov v Európe
  1. Reportáž: Ako sa robia balené bagety? Zisťovali sme vo fabrike 22 637
  2. Plánujete zmeniť lekára? Na toto sa potrebujete pripraviť 17 431
  3. Desať obľúbených multistop zájazdov do celého sveta 14 076
  4. Aká je skutočná pravda o Partners Group Sk? 11 755
  5. 7 miest, kde ešte stále môžete zažiť cisárske Rakúsko 7 628
  6. Firmy, pri ktorých sa nemusíte obávať dvojakej kvality potravín 5 364
  7. Nový rekord SME.sk: Za 2 roky takmer 2-krát viac predplatiteľov 5 232
  8. Tieto dizajnové hrnčeky a poháre na kávu ocení každý 4 004
  9. Tri pravidlá, na ktoré inovatívne firmy nikdy nezabúdajú 3 507
  10. Vieme, čo môže spôsobovať neplodnosť u mužov a žien 3 309

Téma: Umelá inteligencia


Článok je zaradený aj do ďalších tém Google

Hlavné správy zo Sme.sk

DOMOV

Fico nepripustil chyby, viní Kisku a médiá

???????My nikam neodchádzame, povedal Robert Fico na sneme Smeru v Častej- Papierničke.

DOMOV

Snem Smeru: Fico opäť útočil na Kisku, aktivistov i médiá

Delegáti odštartovali snem hymnou a minútou ticha za Pašku.

KOMENTÁRE

Ficovi už nepomôžu ani dva kamene

Niet dôvodu si myslieť, že Smer a Fico budú robiť niečo iné, ako robili doteraz.

DOMOV

Začali hlásiť potraty cudziniek, stúpli takmer päťstonásobne

Mediklinik z Levíc začal zverejňovať počet potratov, ktoré urobil Poľkám.

Neprehliadnite tiež

Štíty zo Star Wars sú možné, ukázali nové technológie

Armádni výskumníci pracujú na riešeniach, ktoré majú ochrániť vozidlá aj vojakov.

Únia má na obežnej dráhe ďalšiu družicu, mapuje zmeny pôdy

Vesmírny program Copernicus je určený na monitorovanie životného prostredia našej planéty.

TEST

Vyskúšali sme bezdrôtovú myš, ktorá nepotrebuje batérie

Je ľahká, rýchla, vhodná pre hráčov, funguje bez kábla a vôbec ju nemusíte nabíjať.

Vedci skúmali latríny, spoznali stravovanie našich predkov

Štúdia ukazuje, ako sa ľudia v severnej Európe a na Blízkom východe stravovali, ale tiež to, aké chovali domáce zvieratá.

OBJEKTÍV

Ako snehová búrka. Úchvatné zábery ukazujú povrch kométy

Sonda Philae robila zábery 25 minút.