science >> Wetenschap >  >> Elektronica

Hoe werden muziekinstrumenten ontworpen met de hulp van gehandicapte muzikanten en VR

Virtual Reality-technologie opent nieuwe ervaringen en mogelijkheden in muziek voor mensen met een handicap. Krediet:prestaties zonder belemmeringen, Auteur verstrekt

De meeste nieuwe digitale technologieën zijn meestal ontworpen met een valide gebruiker in gedachten. De eerste desktopcomputers vereisten fijne motoriek om met een muis door softwaremenu's te navigeren, en mobiele telefoons hebben gebruikers nodig om op knoppen te drukken, veeg schermen, enzovoort. Om dergelijke technologie te gebruiken, moet een persoon redelijk handig zijn.

In onze onderzoeksgroep Prestaties zonder Barrières, we ontwerpen digitale muzikale interfaces met gehandicapte muzikanten in het achterhoofd. Dit werk betrekt gehandicapte artiesten vanaf het begin van een nieuwe technologie en kijkt naar de specifieke vaardigheden die ze hebben. Op deze manier, technologieën ontwikkelen zich samen met hen, rekening houdend met hun mobiliteit, behoeften en creatieve interesses.

De huidige VR-technologie is ontworpen voor valide, maar wat nog belangrijker is, het laat vaak alleen passieve interacties toe - luisteren naar muziekuitvoeringen, zoals het 360-concert van Elton John, bijvoorbeeld, of "rijden" in een achtbaan. We waren meer geïnteresseerd in hoe gehandicapte muzikanten VR-technologieën op een actieve en performatieve manier kunnen gebruiken.

Samenwerken

Ons onderzoeksteam bestaat uit een diverse groep, inclusief elektronische ingenieurs, computer wetenschappers, sonische kunst onderzoekers, meeslepende inhoudsontwerpers, een solistenensemble en een lokale groep die gehandicapte musici helpt bij het zelfstandig uitvoeren en componeren van hun eigen muziek. Samen met deze muzikanten we werkten samen met een Amerikaanse softwareontwikkelaar, die een VR-muziekinstrument ontwierp genaamd het "Infinite Instrument", draait op een 360° VR-headset genaamd HTC VIVE.

Het instrument is ontwikkeld met valide muzikanten in het achterhoofd, daarom hebben we het ontworpen om rekening te houden met verschillende soorten mobiliteiten. Dit leidde ertoe dat een van onze muzikanten met hersenverlamming een nieuw VR-instrument bespeelde dat speciaal was ontworpen om rekening te houden met haar expressieve bewegingen van het bovenlichaam. Ze hoefde geen fijne motorische precisie in haar armen of vingers te gebruiken, die ze niet bezit.

VR-headsets gaan noodzakelijkerwijs over wat je ziet. Echter, we ontdekten dat de tactiele feedback van de handheld-controllers - waarmee een gebruiker een menu opent en op commando's drukt om inhoud te bereiken - deze specifieke muzikant in staat stelde het instrument te bespelen door het te voelen en te horen, in plaats van het door de headset te zien. Omdat ze niet afhankelijk was van de headset, kon ze tijdens het optreden ook visueel contact houden met andere muzikanten.

Een ander voorbeeld van ons gezamenlijke VR-ontwerp was het werken met een blinde artiest. Sleutel tot deze muzikant waren zijn virtuoze vaardigheden op de klarinet. Het idee was om voort te bouwen op zijn expertise en zijn muzikale prestatievaardigheden aan te passen en te verbeteren met behulp van VR-technologieën.

VR-ervaringen zijn zo geconcentreerd op de visuele ervaring dat ze vaak voorbijgaan aan de inherent meeslepende aard van geluid, maar het is overal om ons heen, een echte 360°-ervaring. Duidelijk, een visuele headset was niet relevant of nuttig voor deze blinde muzikant. We moesten ons concentreren op hoe we de andere meeslepende kwaliteiten van een ruimte voor een muziekuitvoering konden gebruiken.

Ons team is gevestigd in het Sonic LAB in Queen's, een meeslepende en volledig aanpasbare 3D-geluidsruimte – vaak de iMAX voor de oren genoemd – hebben we besloten om de VIVE-technologie aan te passen aan deze bestaande context.

Virtual Reality-technologie opent nieuwe ervaringen en mogelijkheden in muziek voor mensen met een handicap. Krediet:prestaties zonder belemmeringen, Auteur verstrekt

Voor onze klarinettist hebben we ons gericht op de VIVE-controllers, omdat ze meer tastbaar dan visueel zijn. Ze kunnen ook fysieke posities in een ruimte volgen, wat betekende dat de klarinettist geluiden in het 3D Sonic LAB kon positioneren door de VIVE-controller op zijn instrument te bevestigen.

Inclusief denken en ontwerpen

Deze op maat gemaakte VR-instrumentontwerpen waren te zien tijdens een showcaseconcert in november 2018, waar gehandicapte muzikanten optraden naast muzikanten van het Hard Rain Soloist Ensemble.

Het publiek werd in een cirkel geplaatst die dicht bij de muzikanten stond om de meeslepende ervaring van de speelruimte te versterken.

De markt voor apparatuur voor gehandicapten wereldwijd zal naar schatting toenemen tot meer dan US $ 8 miljard in 2020, en de verkoop van gehandicapte apparatuur in het VK is de afgelopen tien jaar met meer dan 93% gestegen. Alle technologieën, inclusief VR, kan inclusief zijn als het perspectief van mensen met een handicap deel uitmaakt van hun ontwerp.

Onze aanpak laat zien hoe nieuwe technologieën kunnen worden ontwikkeld, die gehandicapte musici actief betrekken bij het maken van muziek en blijk geven van toewijding aan de levenskwaliteit van gehandicapte musici. We zullen doorgaan met het ontwerpen van instrumenten die kunnen worden gebruikt in VR, maar we zullen ons nu concentreren op het gebruik van meer betaalbare systemen, met het oog op het creëren van een virtual reality-ensemble van gehandicapte en valide muzikanten.

Dit artikel is opnieuw gepubliceerd vanuit The Conversation onder een Creative Commons-licentie. Lees het originele artikel.