Kdo igra?

Avtor: Uredništvo, Objavljeno: 10.7.2018 5:45:00, Kategorija: Zvok in slika

Znanstveniki razvijajo sistem, ki bo omogočal spreminjanje glasbe kar znotraj videospota.

Kdo igra?

Zamislite si, da ste glasbenik in da ste s svojo skupino posneli videospot vašega nastopa v živo. Tak, amaterski, kjer ste se morali zanašati le na to, kar posname kamera in ne na ločene zvočne vhode za vsak inštrument in mešalno mizo. Rezultat je sicer lahko kolikor toliko dober, a verjetnost, da bo tako, je precej majhna. Uspeh je namreč odvisen od akustike prostora, postavitve kamere, kakovosti mikrofona in še kaj bi se našlo.

Kaj pa, če bi obstajal način, kako na posnetku zvok naknadno popraviti? Recimo tako, da se zvok enega inštrumenta okrepi, drugega utiša, izreže kakšno piskanje ali napaka in podobno. Ideja je sicer odlična, izvedba pa vse prej kot preprosta. Izdelati je namreč potrebno sistem, ki bo iz enotnega zvoka znal izluščiti posamezni inštrument, katerega zvok potem lahko obdelamo.

In prav to je uspelo znanstvenikom univerze MIT, točneje laboratorija CSAIL (Computer Science and Artificial Intelligence Laboratory). Izdelali so sistem umetne inteligence, imenovan PixelPlayer, ki zna ta trenutek ločiti zvok dveh inštrumentov, ki jih je nato mogoče obdelati in vrniti nazaj v posnetek. Pri tem je zanimivo to, da sistem zazna inštrumente samodejno preko kombinecije video in zvočnega zapisa - če na primer v videu nekdo sedi na levi in igra violino, nekdo na desni pa kitaro, sistem to zazna in iz slike izlušči zvok vsakega inštrumenta posebej. Ta povezava video-zvok omogoča, da v videu kliknemo glasebnika in predvajal se bo le zvok, ki ga oddaja njegovo glasbilo.

Zadeva je ta trenutek še precej groba, saj zvok ni ravno zelo kakovosten, sistem pa deluje le z dvema zvokoma/inštrumentoma, a vedeti je treba, da gre šele za prve korake. V nadaljevanju bodo ločevanje zvokov izboljšali, omogočili pa tudi podporo več kot dvema inštrumentoma.


Vir: MIT CSAIL

preberite še to

Zvok in slika
Zvočnik na zvočnik…

Zvočnik na zvočnik…

Tile zvočniki, ki se jim moč poveča tako, da nanje postavimo nove, so prav zanimiva ideja.

Zvok in slika
Kdo igra?

Kdo igra?

Znanstveniki razvijajo sistem, ki bo omogočal spreminjanje glasbe kar znotraj videospota.

Zvok in slika
Sonyjev »Ups«

Sonyjev »Ups«

Nekdo pri Sony Pictures ga je pobiksal in namesto predogleda na YouTube naložil kar celoten film.

Zvok in slika
Da nas ne slišijo

Da nas ne slišijo

Tale majhna pripravica preprečuje, da bi kdo »vdrl« v vaš mikrofon na računalniku ali telef...

Zvok in slika
Protismrčalne slušalke

Protismrčalne slušalke

Slušalke, ki bodo vašega partnerja ali partnerico obdržale v postelji kljub vašemu smrčan...

Zvok in slika
Fotografiranje in glasba

Fotografiranje in glasba

Sony bo v naslednjih letih vložil ogromno denarja v razvoj slikovnih senzorjev, velike vsote pa bo namenil tud...

Zvok in slika
Kasetofon in digitalna glasba

Kasetofon in digitalna glasba

Nekdo je stari dobri kasetofon predelal tako, da zna predvajati glasbo v formatu MP3 in še kakšn...

Zvok in slika
Kaj pa vi slišite?

Kaj pa vi slišite?

Po internetu zadnje dneve kroži zvočni posnetek, za katerega se ne ve ali glas v njem reče »Yanni«...

Zvok in slika
Prihaja vinil visoke ločljivosti

Prihaja vinil visoke ločljivosti

Avstrijsko podjetje naj bi proizvodnjo vinilnih plošč tudi tehnološko postavila v 21. stoletje.

Zvok in slika
Ikea tudi z zvočniki

Ikea tudi z zvočniki

Podjetje v svojo ponudbo uvršča tudi zvočnike bluetooth, ki se dokaj skladajo s ponudbo pohištva...

Zvok in slika
Grafični napredek

Grafični napredek

Tale primerjava med igro Grand Theft Auto na Xbox 360 in več tisoč evrov vrednem igralnem računalniku je dober...

Zvok in slika
Zbogom HEVC, prihaja AV1

Zbogom HEVC, prihaja AV1

Kodek H.265/HEVC še niti prav zaživel ni, pa je že dobil izzivalca. Ta je boljši, poleg tega pa ...