Project Description

Dit project is begonnen als een onderzoek naar geluid-naar-kleur synesthesie (Chromesthesia). Ik heb me verdiept in het onderwerp en ben er achter gekomen dat, ondanks dat ieder individu met dit fenomeen andere kleuren bij geluiden ziet, de meeste mensen hogere toonhoogtes bij helderdere kleuren vinden passen.   Om geluiden om te zetten in kleur heb je bepaalde vaste waardes nodig om mee te rekenen. Zo is het bijvoorbeeld erg lastig om de frequentie te gebruiken bij het vaststellen van de kleur bij een geluid. Zodoende heb ik een stukje code geschreven dat het geluid analyseert, de frequentie met de hoogste amplitude eruit haalt, die de desbetreffende frequentie vertaald naar een midi noot volgens de volgende formule: d = 69 + 12log2 (f/440Hz). De gevormde midi noten heb ik daarna vertaald naar noten zoals iedereen ze kent, bijv. A, F, C. Aan deze noten heb ik de kleuren gelinkt. Mijn eerste programma waarbij geluid direct om werd gezet in kleur liet de gebruiker direct zien wat de feedback was.   Om de data die je verzameld ook te kunnen gebruiken heb je meer parameters nodig. Zodoende heb ik een user interface gemaakt waarbij je je naam, leeftijd en geslacht in kunt vullen. Wanneer dit gedaan is door de gebruiker kan hij/zij doorgaan met het visueel maken van zijn/haar stemgeluid. Hiervoor had ik een quote van Shakespeare gepakt die de mensen uit moesten spreken. Wanneer de mensen tevreden waren met het resultaat konden ze op ‘submit’ drukken, er werd ook meteen een afbeelding opgeslagen van hun resultaat. Wanneer dit niet het geval was kon de gebruiker het nog eens rustig over doen. Wanneer de gebruiker de data ‘submit’, slaat het programma wat ik heb geschreven een aantal verschillende parameters op in een database. Naam, leeftijd, geslacht, hoe vaak een bepaalde noot voorkomt in percentages, wat de meest en minst voorkomende noot is en de plaats waar het programma de afbeelding op heeft geslagen. Mijn bedoeling was om met deze informatie het programma te laten berekenen wie de drie andere mensen zijn met de dichtstbij-liggende resultaten.   Mijn volgende iteratie was het programmetje een fysieke vorm te geven. In deze vorm werden de gesproken woorden omgezet in kleuren die te zien waren met behulp van LED-verlichting.   Als u het leuk vindt, is er een voorbeeld van de applicatie te vinden bij de Project URL.