Sonification of a juggling performance using spatial audio

Kód výsledku v IS VaVaI

<a href="https://www.isvavai.cz/riv?ss=detail&h=RIV%2F68407700%3A21230%2F23%3A00368552" target="_blank" >RIV/68407700:21230/23:00368552 - isvavai.cz</a>

Výsledek na webu

<a href="https://doi.org/10.1145/3597619" target="_blank" >https://doi.org/10.1145/3597619</a>

DOI - Digital Object Identifier

<a href="http://dx.doi.org/10.1145/3597619" target="_blank" >10.1145/3597619</a>

Jazyk výsledku

angličtina

Název v původním jazyce

Sonification of a juggling performance using spatial audio

Popis výsledku v původním jazyce

We developed a new musical instrument by equipping juggling balls with accelerometers, gyroscopes, and WiFi sensors. The system measures acceleration and rotation, allowing us to distinguish between ball movement and static states. We can determine the direction of each throw based on the acceleration data. A movement-driven instrument animates the virtual audio source position based on the throw direction. A different synthesizer is assigned to each ball, resulting in a synesthetic experience. The system integrates the juggling patterns simulator with OSC and MIDI API, allowing real-time rhythm generation and composition.

Název v anglickém jazyce

Sonification of a juggling performance using spatial audio

Popis výsledku anglicky

We developed a new musical instrument by equipping juggling balls with accelerometers, gyroscopes, and WiFi sensors. The system measures acceleration and rotation, allowing us to distinguish between ball movement and static states. We can determine the direction of each throw based on the acceleration data. A movement-driven instrument animates the virtual audio source position based on the throw direction. A different synthesizer is assigned to each ball, resulting in a synesthetic experience. The system integrates the juggling patterns simulator with OSC and MIDI API, allowing real-time rhythm generation and composition.

Druh

J_SC - Článek v periodiku v databázi SCOPUS

CEP obor

—

OECD FORD obor

10201 - Computer sciences, information science, bioinformathics (hardware development to be 2.2, social aspect to be 5.8)

Projekt

<a href="/cs/project/EF16_019%2F0000765" target="_blank" >EF16_019/0000765: Výzkumné centrum informatiky</a><br>

Návaznosti

P - Projekt vyzkumu a vyvoje financovany z verejnych zdroju (s odkazem do CEP)<br>S - Specificky vyzkum na vysokych skolach

Rok uplatnění

2023

Kód důvěrnosti údajů

S - Úplné a pravdivé údaje o projektu nepodléhají ochraně podle zvláštních právních předpisů

Název periodika

Proceedings of the ACM on Computer Graphics and Interactive Techniques

ISSN

2577-6193

e-ISSN

2577-6193

Svazek periodika

6

Číslo periodika v rámci svazku

2

Stát vydavatele periodika

US - Spojené státy americké

Počet stran výsledku

6

Strana od-do

1-6

Kód UT WoS článku

001056350400005

EID výsledku v databázi Scopus

2-s2.0-85167947309