6533b7d7fe1ef96bd1269317

RESEARCH PRODUCT

Digitālā audio apstrāde un efektu sintēze pielietojot bezvadu sensorus

subject

description

Žesti un kustības ļoti bieži atspoguļo emocijas. Mūzikas instrumenti, kas reaģētu uz tiem, piedāvātu mūziķim jaunu, aizraujošu režīmu mūzikas izpausmēm. Tāpēc šī darba mērķis ir izpētīt objektu kustību izsekošanu un trajektoriju noteikšanu ar miniatūriem bezvadu sensoru moduļiem, kā arī radīt sistēmu/ietvaru priekš interaktīvas mūzikas instrumentu audio signāla apstrādes un efektu sintēzes, kas vadāma ar bezvadu sensoriem, kuri ir izvietoti uz mūzikas instrumenta un mūziķa. Darba rezultātā ir izstrādāta sistēma/ietvars. Tā veic digitālo audio apstrādi un efektu sintēzi, pamatojoties uz audio efektu konfigurācijām, un atbilstībām starp audio efektu parametriem un žestiem vai kustībām, ko detektē bezvadu sensoru moduļi. Šīs atbilstības definē kāda veidā kustību dati no moduļiem ietekmē audio efektu parametru vērtības. Sistēmas/ietvara izstrādē tika izmantota „uz iekšu vērsta” („outside-in”) objektu kustību izsekošanas pieeja, t.i. sensori uz cilvēka ķermeņa un mūzikas instrumenta mēra datus no ārēja avota, kur dati tiek iegūti no 3-ass akselerometriem. Lai iegūtu pēc iespējas precīzāku objekta orientāciju telpā tiek piedāvāts sensoru datu saplūdumu algoritms, kurā pamatā ir rekursīvs Kalmana filtrs. Dati no žiroskopa ir kontroles signāls un dati no akselerometra ir mērījumu signāls. Sistēma darbojas un ir izmēģināta mūzikas ģenerācijas procesā.