Kdo igra?

Avtor: Uredništvo, Objavljeno: 10.7.2018 5:45:00, Kategorija: Zvok in slika

Znanstveniki razvijajo sistem, ki bo omogočal spreminjanje glasbe kar znotraj videospota.

Kdo igra?

Zamislite si, da ste glasbenik in da ste s svojo skupino posneli videospot vašega nastopa v živo. Tak, amaterski, kjer ste se morali zanašati le na to, kar posname kamera in ne na ločene zvočne vhode za vsak inštrument in mešalno mizo. Rezultat je sicer lahko kolikor toliko dober, a verjetnost, da bo tako, je precej majhna. Uspeh je namreč odvisen od akustike prostora, postavitve kamere, kakovosti mikrofona in še kaj bi se našlo.

Kaj pa, če bi obstajal način, kako na posnetku zvok naknadno popraviti? Recimo tako, da se zvok enega inštrumenta okrepi, drugega utiša, izreže kakšno piskanje ali napaka in podobno. Ideja je sicer odlična, izvedba pa vse prej kot preprosta. Izdelati je namreč potrebno sistem, ki bo iz enotnega zvoka znal izluščiti posamezni inštrument, katerega zvok potem lahko obdelamo.

In prav to je uspelo znanstvenikom univerze MIT, točneje laboratorija CSAIL (Computer Science and Artificial Intelligence Laboratory). Izdelali so sistem umetne inteligence, imenovan PixelPlayer, ki zna ta trenutek ločiti zvok dveh inštrumentov, ki jih je nato mogoče obdelati in vrniti nazaj v posnetek. Pri tem je zanimivo to, da sistem zazna inštrumente samodejno preko kombinecije video in zvočnega zapisa - če na primer v videu nekdo sedi na levi in igra violino, nekdo na desni pa kitaro, sistem to zazna in iz slike izlušči zvok vsakega inštrumenta posebej. Ta povezava video-zvok omogoča, da v videu kliknemo glasebnika in predvajal se bo le zvok, ki ga oddaja njegovo glasbilo.

Zadeva je ta trenutek še precej groba, saj zvok ni ravno zelo kakovosten, sistem pa deluje le z dvema zvokoma/inštrumentoma, a vedeti je treba, da gre šele za prve korake. V nadaljevanju bodo ločevanje zvokov izboljšali, omogočili pa tudi podporo več kot dvema inštrumentoma.


Vir: MIT CSAIL

preberite še to

Zvok in slika
Prihaja novi Dumbo

Prihaja novi Dumbo

Prihodnje leto se na filmska platna vrača slonček Dumbo, tokrat ne kot risanka in z impresivno igralsko zasedb...

Zvok in slika
Hitra maska

Hitra maska

Adobe v novem urejevalniku videoposnetkov nudi zanimivo funkcijo, imenovano FastMask.

Zvok in slika
8K in 216 centimetrov

8K in 216 centimetrov

Samsung je začel zbirati prednaročila za svoj gromozanski 85-plačni televizor ločljivosti 8K. Cena? Malenkost&...

Zvok in slika
WinAmp je res oživel

WinAmp je res oživel

Po skoraj točno dveh letih bete bo pojutrišnjem na voljo »prava« različica 5.8, WinAmp 6 pa...

Zvok in slika
Facebookov videočvekalnik

Facebookov videočvekalnik

Facebook je na trg poslal pametni zvočnik, ki je istočasno tudi videokomunikacijska naprava. In nekateri s(m)o...

Zvok in slika
Je blizu tretji Chromecast?

Je blizu tretji Chromecast?

Pet let po prvem in tri leta po drugem se nam obeta tretja generacija Googlovega medijskega pretočnega predvaj...

Zvok in slika
Vrača se Območje somraka

Vrača se Območje somraka

Prihodnje leto bomo priča tretjemu povratku serije The Twilight zone.

Zvok in slika
Tako slab, da je brezplačen

Tako slab, da je brezplačen

Film Tommyja Wiseauja iz leta 2003 z naslovom Soba je »tako slab, da je že dober«. In sedaj si ga ...

Zvok in slika
Se res vrača WinAmp?

Se res vrača WinAmp?

Eden najbolj priljubljenih medijskih predvajalnikov očitno vstaja od mrtvih, saj je na spletu mogoče najti nje...

Zvok in slika
Prihaja še OnePlus TV

Prihaja še OnePlus TV

Proizvajalec cenovno ugodnih telefonov se spušča še v televizijske vode. OnePlus TV bo pameten, ...

Zvok in slika
Paul v živo

Paul v živo

Jutri zgodaj zjutraj po našem času si lahko v živo in brezplačno ogledate koncert Paula McCartneya.

Zvok in slika
Zvok iz steklenice

Zvok iz steklenice

Zvočnik, ki ga za boljši zvok navijete na – plastenko. Bravo!