Kdo igra?

Avtor: Uredništvo, Objavljeno: 10. 07. 2018 05:45:00, Kategorija: Zvok in slika

Znanstveniki razvijajo sistem, ki bo omogočal spreminjanje glasbe kar znotraj videospota.

Kdo igra?

Zamislite si, da ste glasbenik in da ste s svojo skupino posneli videospot vašega nastopa v živo. Tak, amaterski, kjer ste se morali zanašati le na to, kar posname kamera in ne na ločene zvočne vhode za vsak inštrument in mešalno mizo. Rezultat je sicer lahko kolikor toliko dober, a verjetnost, da bo tako, je precej majhna. Uspeh je namreč odvisen od akustike prostora, postavitve kamere, kakovosti mikrofona in še kaj bi se našlo.

Kaj pa, če bi obstajal način, kako na posnetku zvok naknadno popraviti? Recimo tako, da se zvok enega inštrumenta okrepi, drugega utiša, izreže kakšno piskanje ali napaka in podobno. Ideja je sicer odlična, izvedba pa vse prej kot preprosta. Izdelati je namreč potrebno sistem, ki bo iz enotnega zvoka znal izluščiti posamezni inštrument, katerega zvok potem lahko obdelamo.

In prav to je uspelo znanstvenikom univerze MIT, točneje laboratorija CSAIL (Computer Science and Artificial Intelligence Laboratory). Izdelali so sistem umetne inteligence, imenovan PixelPlayer, ki zna ta trenutek ločiti zvok dveh inštrumentov, ki jih je nato mogoče obdelati in vrniti nazaj v posnetek. Pri tem je zanimivo to, da sistem zazna inštrumente samodejno preko kombinecije video in zvočnega zapisa - če na primer v videu nekdo sedi na levi in igra violino, nekdo na desni pa kitaro, sistem to zazna in iz slike izlušči zvok vsakega inštrumenta posebej. Ta povezava video-zvok omogoča, da v videu kliknemo glasebnika in predvajal se bo le zvok, ki ga oddaja njegovo glasbilo.

Zadeva je ta trenutek še precej groba, saj zvok ni ravno zelo kakovosten, sistem pa deluje le z dvema zvokoma/inštrumentoma, a vedeti je treba, da gre šele za prve korake. V nadaljevanju bodo ločevanje zvokov izboljšali, omogočili pa tudi podporo več kot dvema inštrumentoma.


Vir: MIT CSAIL

preberite še to

Zvok in slika
Kakšni bodo letos televizorji?

Kakšni bodo letos televizorji?

Promocijska vsebina
Samsung je predstavil celotno serijo QLED TV 2019

Zvok in slika
Tudi to je rešitev

Tudi to je rešitev

Kaj narediti, da ne izgubite slušalk AirPods? Recimo tole.

Zvok in slika
Čemu bomo sploh še verjeli?

Čemu bomo sploh še verjeli?

Umetna inteligenca nas že sedaj lahko prelisiči. In postaja še boljša...

Zvok in slika
Vsestranska zvočna rešitev

Vsestranska zvočna rešitev

Dobra ideja in zanimiva cena za dober zvok v dnevni sobi.

Zvok in slika
Retro in ugodno

Retro in ugodno

Brezžične slušalke s spodobnim zvokom, spodobno ceno in odlično baterijo.

Zvok in slika
»Zarolani« televizor

»Zarolani« televizor

LG je predstavil televizor OLED, ki se zvije v podnožje in tako zasede manj prostora.

Zvok in slika
Res prenosni zvočnik

Res prenosni zvočnik

Lenovo je na sejmu CES prikazal prenosni zvočnik, ki je nekaj posebnega.

Zvok in slika
Konec deljenja gesel?

Konec deljenja gesel?

Netflix in družba naj bi z uporabo umetne inteligence poskušali preprečiti deljenje gesel s prijatelji.

Zvok in slika
Sposobni malček

Sposobni malček

Projektorji so lahko zelo uporabne naprave. Če niso predrage, prevelike in preobčutljive…

Zvok in slika
Miška in tipkovnica s televizorjem

Miška in tipkovnica s televizorjem

Samsungovi novi pametni televizorji bodo podpirali vnos podatkov in krmiljenje z miško in tipkovnico.

Zvok in slika
4K, 2 m, 5 cm

4K, 2 m, 5 cm

Prvi podatek je ločljivost, drugi diagonala slike, tretji oddaljenost od stene, gre pa za projektor.

Zvok in slika
 »The Frame« in »SERIF TV«

»The Frame« in »SERIF TV«

Promocijska vsebina
Samsung za sejem CES 2019 napoveduje dva nova Lifestyle televizorja.