Courtesy of Golan Levin and Zachary Lieberman Messa di Voce ( Italian for “voice placement” ) is an audio-visual system in which the oral speech, shouts and songs of two vocalists dramatically increase in real time by custom interactive visualization software. In this installation, abstract communication gives synesthetic relationships, the language of strips, and the writing of a system and production scores are discussed… Within the framework of a sophisticated and fun virtual world. It stimulates the eye and ears, and attracts you to engage with it. It’s responsive, and in a modern day and age people will still feel the need to patch up the idea of non-responsiveness. Another great example of recognition and response is the ideal concept of the future virtually conceptualized by the movie ‘Her’. Levin and Lieberman’s Software transforms every vocal nuance graphs. It’s corresponding complexity, subtly differentiated and highly expressive. Through these displays not only the voices of users are displayed, but it also serves as a ‘device’ to pre-record sound and play during performance. While the voice charts as a tool that observers/performers can use to interpret physical manipulations of these graphics, the screens reformulate the sounds of voices of users, to mimic them, so a cycle of interaction occurs and fully integrates public in connection to a healthy environment. It’s a matter of virtual objects and real- time processing. The installation was made in a different time (2003) than XBOX’s kinect (2010), which uses a similar idea of voice and movement recognition. ‘Messa di Voce’ lies at the crossroads of two extremes, human and technological, and adds the unpredictable spontaneity of the human voice with advanced visual computing technologies and discourse analysis. No words, but deep verbal sounds, the ‘Messa di Voce’ project is designed to reflect on the meaning and implications of speech, sounds provoke acts of language and absorb a language environment. It’s a form of visual art which can certainly be implemented for various technical solutions such as interactive supermarket displays or ad space when you walk along or make a sound. There’s even a possibility something might exist generated from your interests by shouting them out. http://lsdcrosslab.tumblr.com/ pinterest link: http://www.pinterest.com/mswontwerp/experiment-bliss/
motion tracking
Hand From Above [openFrameworks]
Chris O’Shea is a multidisciplinary artist who works a lot with openFrameworks projects. His work always had a kinetic approach and he plays a lot with human interaction. Human interaction interferes with the intellect of things and it lets objects recognize you.
Hand From Above is the latest project from Chris O’Shea, a joint co-commission between FACT: Foundation for Art & Creative Technology and Liverpool City Council for BBC Big Screen Liverpool and the Live Sites Network. It premiered during the inaugural Abandon Normal Devices Festival.
Inspired by Land of the Giants and Goliath, the project aims to remind us of mythical stories by mischievously unleashing a giant hand from the BBC Big Screen. Passers are playfully transformed being tickled, stretched, flicked or removed entirely in real-time by a giant deity.
Fitted with a CCTV camera, The BBC Big Screen is linked into a computer that runs the custom built software then outputs to the screen. The software picks a person based on their proportions & how alone they are from other people, then tracks the blob over time using optical flow. If the giant hand removes, flicks or shrinks a person, firstly it rubs out the person from the live video using the background reference pixels. Then the tracked person is redrawn over the top in relation to what the hand is doing, i.e. being picked up, or flying out to the left of the screen (not shown in this video). When the hand shrinks a person it redraws them into the video at half scale. When there is too big a crowd it resorts to tickling people, with a random selection.
Many people thought it was a real hand, or at least controlled by an operator. Many didn’t care how it worked. People liked seeing themselves on a big screen and then were completely surprised when this big hand came in and did something to someone. Apparently one lady said “I haven’t had a man’s hand all over me like that in years!” Chris
Hand from Above was built using openFrameworks & openCV.
United Visual Artists
United Visual Artists (UVA) en Cape Farewell.
PROJECT: High Artic
MATERIAAL
Witte geometrische sculpturen
Licht projectors
Geluidsinstallatie
UV torch (voor interactie met animaties)
ShowTex Giant Mirror van 44m breed en bijna 4m hoog
EFFECT
High Arctic is een immense installatie die de volledige galerij van 820m² inneemt en over de omvang, de schoonheid en de breekbaarheid van het noordpoolgebied gaat.
High Arctic creëert een abstract Arctisch landschap en combineert daarbij geluid, licht, sculpturen en een ShowTex Giant Mirror van 44m breed en bijna 4m hoog. De spiegel doet dienst als horizondoek in de galerij en geeft dankzij het licht dat voortdurend van intensiteit en kleur veranderd het gevoel van oneindigheid.
TECHNIEK
High Arctic is een atypische tentoonstelling zonder statische foto’s of panelen met tekst. Door de visuals en animaties die met je mee bewegen is het een grote experience. Bezoekers worden door de UV torch achtervolgd waardoor de omgeving op ze reageert met licht animaties. Het is de eerste keer dat UVA en NMM zulk een grootschalig kunstwerk presenteren. De tentoonstelling liep tot 13 juli 2012.
SAME MATERIAL
POSTexhibition door POSTmatter iPad Magazine
PROJECT
In een 16e eeuwse kerk uit de Renaissance in Milaan organiseerde POSTmatter een interactieve modefilm tentoonstelling. Deze rijke media ervaring waren 3 films te zien: Echo, Fracity en Ripple waarbij de inhoud van film reageerde op de beweging van de bezoekers. Gravity breekt het model op in geometrische vormen als bezoekers lang lopen maar herstelt weer zodra bezoekers buiten de sensoren vallen. Echo moedigt bezoekers aan visuals te veranderen door hun handen te bewegen. Het beeld verdraaid en vervormd. Ripple geeft een tacitiliteits ervaring. De bezoekers kunnen over een lap stop voelen en zo veranderen de ‘riples’ op het scherm, ze hebben het gevoel alsof ze de film aanraken en ermee spellen
EFFECT
Door de interactie met het publiek, heeft het publiek het idee dat ze dichter bij de film staan dan dat ze er alleen naar kijken. Ze maken deel uit van de video en voelen zich zo ook meer verbonden met de kleding.
MATERIAAL
HD schermen en infrarood- en motiontracking sensoren. Net als Minimaforms maakt dit project gebruik van sensoren.
TECHNIEK
Door middel van de sensoren worden de bewegingen van de bezoekers waargenomen en omgezet in variaties van beelden. (geen verdere informatie)
THIBAUT SLD.
Thibaut is een kunstenaar wonend in Canada. Hij is opgeleid als een graphic designer op de Franse Beeldende kunst Academy, Hij raakte geïnteresseerd in reagerende omgevingen. Zijn designs bezitten nu dan ook mechanisme en interactie. Een van zijn werken is de muur ‘Hexi’. Dit is een installatie van 60 gemonteerde panelen die reageren op de bewegingen van mensen in de buurt. De door Thibaut zelf gemaakte complexe mechanische project is een samensmelting van interactie, geometrie en kunst. https://vimeo.com/86905477 De zeshoekige panelen gebruiken real- time data verzameld van motion-tracking technology voor het decoderen en interpreteren van de gebaren en handelingen van een persoon binnen handbereik. Met behulp van deze feedback van de deelnemer die voorbij loopt, springt of zwaait in de richting van de muur ‘hexi’ veroorzaakt die een golvende deining en sterke stijging van de onafhankelijke beweging. Waar Thibaut ook vooral mee werkt is licht, lampen. De aspecten geometrie, interactie en mechanisme zijn ook bij dit project gecombineerd. Veilleuse reageert op activiteiten van dichtbij. De positie en het dimmen van de lamp wordt veroorzaakt als hij de aanwezigheid van een persoon voelt. Hij volgt je of gaat weg. Ook S1 reageert op de aanwezigheid van een mens. De helderheid en hoogte wordt aangepast op basis van menselijke aanwezigheid. Je kan er een ophangen maar ook combineren met meerder exemplaren om een dynamisch patroon te creëren. MATERIALEN. Gegoten polyurethaan hars, gefreesd aluminium, vacuüm gegoten facetten, bewerkt aluminium, PVC, PMMA, ABS, LED
‘Drawing Machine’ door Harvey Moon
Dit project is gemaakt door Harvey Moon. Hij wilt zijn menselijk gebreken aanvullen met machines. Als kind kon hij niet goed tekenen maar hij heeft wel veel beelden in zijn hoofd die hij graag op papier zou willen zien. Zo is hij gekomen op ‘The Drawing Machine’
Materials:
De materialen die Harvey Moon gebruik zijn ijzer, motoren, bedrading, hout, machines, inkt en papier.
Technology:
Op de computer geprogrammeerde programma’s omgezet in een ‘Drawing Machine‘. De machine bevat ook een tracker, daarmee kan hij van alles volgen en zet dat direct neer op papier.
Effect:
De beelden wat de Drawing Machine creëert zijn heel precies en stapsgewijs gemaakt. Daardoor merk je dat het niet menselijk is. De beelden zijn vaak abstract en soms heel realistisch. Het is maar niet wat je hem laat tekenen.
Solar Flare
SIMILAR TECHNOLOGY
SOLAR FLARE: an interactive light sculpture
The sculpture involves public space, contextual scale, and environmental conditions. It was installed at a busy pedestrian walkway during winter and after fiddling it with animated LEDs, one large light bulb inside the belly of the sun was put to have an analogue approach. The bulb is surrounded by a rotating tin cylinder with holes cut out of it, geared to a small electric motor that is activated by motion sensors placed on either side of Stephen Avenue walkway. When tripped, either one of the motion sensors switches the motor to 3-volt rotational speed, creating a slow glimmer of light on the surface of the sculpture for a matter of seconds. The transformers were wired in series, meaning that when both motion detectors are simultaneously tripped, the motor switches to a 9-volt setting, and the sculpture shimmers rapidly, a reflection of the surrounding action.
MATERIALS
LED, light bulb.
TECHNOLOGY
Eletronic sensors.
EFFECT
The performance hoped to explore the social magnetism of light and its mysterious ability to draw strangers together.
NEON House
UV fluorescent nylon string.
TECHNOLOGY
Electronic sensors.
EFFECT
Giant inhabitable harp that allows the audience to collaborate with the DJ, creating new sounds and influencing the musical output.