https://frosthead.com

Denne video konkurrenceindgang er en mindblowing visning af visualiseret og forvrænget lyd

James Allibans Bipolar præsenterer et audiovisuelt spejl, der genererer et lydbillede fra tilstedeværelsen og bevægelsen af ​​dets motiver. De resulterende lyddata (inklusive data fra deltageren) bruges til at omdanne kroppen til et forvrænget portræt, der svinger mellem tilstande af kaos og orden. Videoen gør også et enormt effektivt job med at fange motivernes uendelige fascination med installationen, giver øjeblikkelig tilfredsstillelse og en følelse af utallige muligheder.

Hvordan kom du på idéen til denne video?

Dette stykke startede som et eksperiment. Jeg talte på en designfestival og blev bedt (sammen med de andre højttalere) om at sammensætte en kort “tak for at komme” video, der skulle spilles i slutningen af ​​begivenheden. Jeg ville gøre noget lidt mere interessant end blot at tale ind på min smartphone. Oprindeligt planlagde jeg at lave et ansigtssporingsapplikation, der varvede og fløj op i mit ansigt som svar på min tale. Med tiden ændrede jeg dette til en hel kropsoplevelse ved hjælp af Kinect-kameraet.

Jeg stødte på denne virkning, der syntes så dramatisk, at jeg besluttede at undersøge yderligere og udgive Bipolar (så navngivet på grund af de konstante svingninger mellem ordenstilstande og kaos) i form af en kort video. Folk begyndte at blive interesseret i at udstille stykket, så jeg ændrede det til at blive en installation. Projektet blev en samarbejdsindsats, da Liam Paton fra Silent Studios tilføjede et interaktivt lydaspekt. Det er blevet udstillet på flere arrangementer og udstillinger siden.

Vi elsker at geek ud, så forkæl os, hvad ser vi her?

Den grundlæggende effekt er ikke for involveret. Jeg bruger openFrameworks, som er et C ++ kunstbaseret programmeringsværktøjssæt. Cirka 30 gange i sekundet kombineres dybdedata og videofeed fra et Xbox Kinect-kamera for at skabe en 3D-model for de besøgende. Jeg bruger lyddataene fra mikrofonen til at ekstrudere hvert andet punkt i 3D-modellen. Punkterne ekstruderes i den retning, de vender mod for at give en rumlig æstetik, der ikke rigtig er mulig med dataene fra et standardkamera.

Ud over dette bliver det ret involveret. Der sker meget mere bag kulisserne. Jeg bruger grafikkortets magt til at udjævne 3D-modellen og beregne en masse data, der fremskynder applikationen og generelt forbedrer udseendet på stykket. Jeg har en brugergrænseflade i appen med cirka 15-20 sider med knapper og skydere, der giver mig mulighed for at finpusse stykket, indtil jeg er tilfreds. Med hensyn til lyden beregnes deltagerens bevægelse og sendes til et separat stykke software bygget i Max / MSP af Liam. Derefter skaber han det snoede lydbillede baseret på mængden af ​​aktivitet og flere andre faktorer, såsom placering og nærhed. Denne lyd samles derefter op af mikrofonen sammen med andre lyde i miljøet og visualiseres på motivets krop.

Hvad har været det mest tilfredsstillende aspekt for dig med netop dette stykke?

Mens læringsprocessen og opdagelsen og serendipity var meget underholdende, var den bedste del af dette projekt det endelige resultat. At se mennesker opdage og interagere med installationen for første gang er en vidunderlig oplevelse, som jeg nyder for hvert stykke, jeg tilbyder offentligheden. At stå anonymt bagpå rummet og se mennesker nyde en uventet oplevelse, som jeg har arbejdet hårdt for at skabe, er altid meget givende.

Hvad er den sidste store ting, du har læst, set eller hørt?

Jeg gik for at se University of Virginia's nye stykke "Momentum" på Barbican's Curve-galleriet for nylig. Det består af en serie af 12 mekaniske lyspendler, der svinger ens i det mørke rum. Effekten var meget kontemplativ, og i det mindste for mig lidt uhyggelig på grund af den unaturlige opførsel af disse langsomt bevægelige spotlights.

Hvad er det næste?

Jeg taler med et par kuratorer om udstilling af Bipolar, og i mellemtiden fortsætter jeg med at udforske nye måder at repræsentere kroppen gennem interaktivitet. Jeg arbejder på flere projekter i øjeblikket, hvoraf et par snart er ved at falde, så hold øje med.

Denne video konkurrenceindgang er en mindblowing visning af visualiseret og forvrænget lyd