Stenda e Muzikës Multimodale: 9 hapa (me fotografi)

2024 Autor: John Day | [email protected]. E modifikuara e fundit: 2024-01-30 12:29

Multimodal Music Stand (MMMS) është një mënyrë e re për të kontrolluar sintezën dhe efektet audio ndërsa luani një instrument tradicional (saks, flaut, violinë, ju e quani atë), dhe ofron mjaft mundësi shtesë për teknika të zgjeruara që mund të përdoren gjatë lojës. ! Tashmë ekziston një faqe në internet për projektin tonë të grupit në UC Santa Barbara, në të cilën ne zhvilluam MMMS, kështu që në vend që ta përsëris atë këtu, unë do të postoj lidhjen - shikojeni! Uebfaqe Multimodal Music Stand Një klip i shkurtër i MMMS në veprim është këtu, por ka video më të mira në sajtin e mësipërm… Multimodal i referohet aftësisë për të ndjerë hyrjen në më shumë se një modalitet (hyrje audio, hyrje video dhe hyrje të bazuar në sensorë). Hyrja audio dhe video janë goxha të drejtpërdrejta, që përfshijnë një mikrofon normal dhe një kamer në internet të lidhur me kompjuterin tuaj, por hyrja e sensorit është pak më komplekse, prandaj kjo është e udhëzueshme… Ne përdorim CREATE USB Interface, një qark të thjeshtë që kam zhvilluar për një klasë Unë jap mësim në UCSB, së bashku me çantën ThereminVision II për fushën E (e njohur edhe si sensing capacitive) siç tregohet këtu: CREATE USB InterfaceThereminVisionII kit Nëse nuk e dini se çfarë është Theremin, bëni një nder vetes dhe kërkoni në Youtube, ju fituat mos u zhgënje! MMMS është në thelb ekuivalente me 2 Theremins, pasi ka 4 antena të ndjeshme të fushës E, përveç hyrjes audio/video natyrisht. Nëse jeni të interesuar të zgjeroni teknikat tuaja të performancës me instrumentin tuaj duke bashkëvepruar me një kompjuter, por nuk doni të përdorni këmbë të thjeshta, ndërtoni vetes një Stand Multimodal Music dhe filloni të praktikoni me të!

Hapi 1: Rreth krijimit të ndërfaqes USB

CREATE USB Interface (CUI) është një qark i thjeshtë i programueshëm i bazuar në PIC që ose mund të ndërtohet tërësisht vetë, ose mund të merrni një të para-ndërtuar nga unë drejtpërdrejt për 50 dollarë (+ 5 për transport), dhe nuk do t'ju duhet për të blerë një programues PIC pasi kam vënë bootloader në të për ju … shihni faqen e internetit për detaje, ose thjesht më dërgoni me email për të kërkuar një: CREATE USB Interface websiteThe CUI mund të funksionojë si shumë gjëra të ndryshme, dhe deri tani është përdorur në qindra projekte interesante në të gjithë botën … disa shembuj nga studentët në UC Santa Barbara janë në këtë punim konferencash (PDF). CUI mund të riprogramohet përmes kabllit USB duke përdorur bootloader, kjo është arsyeja pse është kaq i përshtatshëm - thjesht ndryshoni firmware -in dhe është diçka tjetër. Për shembull, është e lehtë të bëhet CUI në një ndërfaqe të sensorit pa tel duke përdorur një nga modulet Bluetooth nga argëtimi i ndezjes - nëse dikush është i interesuar ta bëjë këtë, postoni një shënim në komente duke kërkuar një tjetër udhëzues. CUI ka 13 kanale me hyrje analoge 10-bit dhe 16 kunja hyrëse/dalëse për qëllime të përgjithshme. Firmueri i parazgjedhur i dërguar me tabelat CUI v1.0 i dërgon të gjitha si hyrje në kompjuterin pritës dhe punon bukur me mjedise interaktive të krijimit të artit si Max/MSP/Jitter, Pd/Gem, SuperCollider, Chuck, etj. I përdorur një nga bordet CUI v1.0 për të ndërtuar Stand Multimodal Music në këtë udhëzues. Ne përdorim Max/MSP/Jitter si një mjedis, por me çdo kusht mos ngurroni ta përshtatni këtë me Pd ose zgjedhjen tuaj të softuerit. Unë jam një tifoz i madh i burimit të hapur (vetë CUI është burim i hapur), dhe kjo ndihmon shumë nëse të gjithë qëndrojmë mbi supet e njëri -tjetrit dhe përmirësojmë gjërat që po bëjmë!

Hapi 2: Rreth Kit TheminVision II

ThereminVision II është i disponueshëm si një komplet (50 dollarë) dhe i para -ndërtuar (80 dollarë) nga faqja e shitësit, RobotLand, dhe është gjithashtu me burim të hapur - manuali i ThereminVision II (PDF) përfshin diagramet e qarkut. Për MMMS, bleva çantën dhe pastaj vendosa të shkoj me atë të para-ndërtuar këtë herë (kjo është MMMS e dytë që kam ndërtuar). Si anash, në rast se pyes veten pse nuk ofroj një kompleti i ndërfaqes CREATE USB, është sepse ngarkuesi CUI duhet të programohet me një programues konvencional PIC para se firmware i ri të mund të dërgohet përmes USB - përndryshe unë patjetër do të ofroja një çantë, edhe pse do të përfshinte saldim në sipërfaqe … Pra, përsëri TheminVision II - nëse e keni blerë atë në formë faktori kit, ndiqni udhëzimet (e shkëlqyeshme!) në pdf: manuali ThereminVision II Ka shumë diagrame të bukura të instalimeve elektrike që do t'ju duhet të bëni - e vetmja gjë që nuk shfaqet është lidhja me ndërfaqen CREATE USB, kështu që unë do të postoj fotot që kam bërë në hapat e ardhshëm … oh, dhe mora antenat për ThereminVision (nuk përfshihen) nga All Electronics.

Hapi 3: Përgatitja e Bazës së Muzikës

Bëni muzikën tuaj Multimodale Qëndroni nga një stendë e bukur muzikore siç është "stenda e dirigjentit" e treguar këtu ose përdorni gjithçka që keni në dorë - akoma më mirë, bëni tuajin!

Pavarësisht se çfarë stende përdorni, do të ketë nevojë për montime të izoluara për katër antenat në qoshet e stendës. Filloni duke shpuar vrima në qoshe - pajisja e montimit që kam vendosur rreth saj ka punuar me një stërvitje 1/4 , e juaja ndoshta do të jetë e ndryshme. Mundohuni ta mbani pjesën e përparme të sipërfaqes sa më të skuqur të jetë e mundur për të shmangur ndërhyrjen në fletën e muzikës.

Hapi 4: Lidhja e moduleve të sensorit ThereminVision

Lidhja e moduleve "sensor" ThereminVision (555 qarqe kohëmatëse) me modulin "procesor" ThereminVision diskutohet gjithashtu në mënyrë më të detajuar në manualin e ThereminVision II, por këtu janë disa fotografi të procesit …

Hapi 5: Lidhja e ThereminVision me ndërfaqen CREATE USB

Siç e pamë në hapin e fundit, ka 4 tela që lidhin secilin nga modulet e sensorit me modulin e procesorit ThereminVision. Ekzistojnë gjithashtu 6 tela që lidhin modulin e procesorit ThereminVision me ndërfaqen CREATE USB - ato janë Power, Ground, Sensor Output, Sensor Select A, Sensor Select B dhe Sensor Stop.

Meqenëse ThereminVision II do të marrë fuqinë e tij nga ndërfaqja CREATE USB (e cila nga ana tjetër merr fuqinë e saj nga USB), vendosa të lidh fuqinë për secilin nga modulet e sensorit ThereminVision direkt në CREATE USB Interface - kjo e bën atë pak më pak të folesë së shpendëve në instalime elektrike pasi tashmë ka shumë tela që hyjnë në bordin e procesorit TherminVision. Lidhni "+" në ThereminVision me "5V" në CUI Connect "-" në ThereminVision në "GND" në CUI Connect "4" (pjesëtimi me 4 dalje) në ThereminVision në "D7" në CUI Connect "SEL B" në ThereminVision në "D5" në CUI lidhni "SEL A" në ThereminVision në "D4" në CUI Lidhni "S" në ThereminVision në "D6" në CUI

Hapi 6: Montimi i gjithçkaje në stendë

Pra, elektronika është e përfunduar, tani thjesht montojeni atë në stendë - ka shumë metoda për ta bërë këtë, dhe ju mund të dëshironi t'i vendosni pajisjet elektronike në një kuti mbrojtëse, etj….

Këtu janë disa fotografi të disa prej metodave më të thjeshta të montimit.

Hapi 7: Ngarkimi i firmuerit për ThereminVision në CUI

ThereminVision dërgon sinjale kohore për sensorët e tij në vend të daljeve analoge (ose ndonjë prej protokolleve standarde dixhitale si I2C ose SPI). Pra, ishte i nevojshëm një firmware i personalizuar për të matur kohën e këtyre sinjaleve … Versioni i parë i firmware -it Multimodal Music Stand është në skedarin zip më poshtë, si kodi burimor ashtu edhe skedari gjashtëkëndësh i përpiluar përfshihen (së bashku me një arna testimi për Max/ MSP/Jitter): Firmware CUI -ThereminVision Pamja e ekranit më poshtë tregon programin OS X Boot Down nga Craig Schimmel - një mjet për ngarkimin e Macintosh për CUI. Nëse jeni në dritare, gjëja më e lehtë është të përdorni mjetin e vet të Microchip, PDFSUSB.exe që mund të shkarkohet nga faqja e tyre e internetit, ose të përfshihet në këtë shembull kod për CREATE USB Interface. Për ta vendosur CUI në "modalitetin e nisjes", mbajeni të shtypur butonin e programit dhe shtypni butonin e rivendosjes (ose thjesht lidhni kabllon USB ndërsa mbani shtypur butonin e programit). LED i statusit të CUI do të pulsojë vazhdimisht duke treguar se është në modalitetin e ngarkuesit. Tani mund të përdorni Boot Down për të dërguar skedarin CUIEfieldBootDown.hex në CREATE USB Interface. Nëse ndonjëherë dëshironi të ndryshoni firmware -in për CREATE USB Interface përsëri në origjinal, ai është këtu, dhe ka shembuj të tjerë të firmware -it për CUI edhe këtu.

Hapi 8: Testimi i Qëndrimit Multimodal të Muzikës në Max/MSP/Jitter

Hapni arnën shembullore në Max/MSP/Jitter (një demonstrim 30-ditor mund të shkarkohet nga www.cycling74.com, dhe një version "runtime" gjithashtu i disponueshëm që nuk lejon ruajtjen e arnave), ose ndiqni konventat në arnimin Max dhe bëni arnimin tuaj në PureData (Pd)… Jitter përdoret për të shfaqur pozicionin 3D të hyrjeve gjestike, ku boshti z (drejt dhe larg stendës) është i hartuar në intensitetin e përgjithshëm të të katër antenave - jo shumë shkencore, por funksionon! Të dhënat nga sensorët individualë dërgohen gjithashtu si OSC në 127.0.0.1 (localhost) për përdorim nga aplikacione të tjera nëse është e nevojshme. Një objekt i dobishëm në Max/MSP/Jitter për filtrimin e pikave nga të dhënat e sensorit (të shkaktuara nga ndërhyrjet elektrike) është "më e butë" e Tristan Jehan, e cila mund të shkarkohet këtu: objekti më i lëmuar max Faqja e Tristanit gjithashtu ka një mori të jashtme MSP për Max që ne përdorim për pjesën e analizës audio të hyrjes së Multimodal Music Stand - ato përfshijnë lartësinë loud, zhurmën ~, shkëlqimin, zhurma ~, dhe objekti i analizuesit të gjitha-në-një. Pasi të keni të dhëna që vijnë në Max, do t'ju duhet të rregulloni ndjeshmërinë e sensorëve të ThereminVision individualisht me një kaçavidë të vogël. Bëni këtë duke i shtrirë antenat deri në fund, pastaj duke e kthyer trinpin blu në drejtim të kundërt të akrepave të orës derisa të kalojë në modalitetin e "sensimit të kundërt" - pastaj kthejeni atë në drejtim të akrepave të orës derisa të ktheheni në intervalin normal të ndijimit. Rregullime të vogla (rregullimi i ndjeshmërisë, ashtu si akordimi i një kitare) mund të bëhen duke ndryshuar gjatësinë e antenave, kështu që nuk do të keni nevojë të mbani kaçavidën e vogël në koncerte me vete.

Hapi 9: Përdorimi i Stand Multimodal Music in Performance! (dhe duke e zgjeruar atë)

Mos harroni, teknikat e reja të performancës që mundëson Stand Multimodal Music kanë nevojë për praktikë dhe zhvillim të hartave dhe ideve të reja për atë që dëshironi të kontrolloni me të! Gjithashtu, nëse doni të zgjeroni MMMS tuaj për të përfshirë lloje të tjera të sensorëve, do të jetë e mundur të përdoren 13 hyrjet analoge në CUI përveç sensorëve të ThereminVision në versionet e ardhshme të firmware -it MMMS, pra me disa sensorë të thjeshtë (rrëshqitës/pulla/këmbë) ose lloje të tjera të sensorëve (IR/ultratinguj/etj), këto mund të përdoren së bashku me hyrjen audio dhe video në kompjuter. Aktualisht firmueri përdor një protokoll "serial-mbi-USB", por përfundimisht plani është të kaloni në protokollin "HID" (Pajisja e Inputit Njerëzor) që përdoret normalisht nga CREATE USB Interface. Ju lutemi mos ngurroni të kontribuoni në përpjekjen … Ekziston një projekt i ngjashëm me burim të hapur për zbulimin e fushës E (i njohur gjithashtu si sensing capacitive) që përdor të njëjtën topologji të qarkut (bazuar në modelin ThereminVision) të quajtur CapToolKit - përdor "vëllain e vogël "të PIC18F4550, PIC18F2550 i cili nuk ka aq shumë hyrje analoge (10 në vend të 13). Firmware për CapToolKit do të jetë paksa i ndryshëm pasi ata nuk përdorin bordin e procesorit ThereminVision. Ne përdorim një aparat të thjeshtë firewire (stili i kamerës në internet) të montuar në pjesën e sipërme të stendës së muzikës për njohjen optike të gjesteve fizike dhe zbulimin e shikimit - Nëse jeni të interesuar në aspektin e vizionit kompjuterik ose analizës audio dhe sintezës së hulumtimit të grupit tonë, ju lutemi shikoni punimet në faqen e internetit të Multimodal Music Stand. Dhe ju lutemi postoni përvojat tuaja nëse ndërtoni një Stendë Muzike Multimodale… Ne tani kemi dy prej tyre në UCSB siç tregohet në foton më poshtë - do të ishte mirë të kishim më shumë kompozime, performanca dhe muzikantë duke i përdorur ato atje! Dr. JoAnn Kuchera-Morin shkroi përbërjen e parë që përfshinte MMMS, e cila u interpretua nga flautistja Jill Felber në Shkollën e Muzikës Eastman në Mars 2007.