une chronique de Poss publiée le 21 août 2007
// Info mai 2009: Un exemplaire de la Reactable sera en démonstration durant le Festival Art Rock de Saint-Brieuc du 26 au 31 mai (Musée de Saint-Brieuc). Le public sera invité à prendre en main la bête pour en tirer des sons. //
Une active équipe de chercheurs espagnols de l’Université Pompeu Fabra a créé un système de manipulation du son plutôt original et surtout open source. On voit en effet fleurir depuis plusieurs mois un grand nombre d’écrans tactiles, ou s’y apparentant, destinés à modifier notre façon d’appréhender le monde informatique. D’aspects très souvent ludiques, dotées d’une ergonomie où la main en tant qu’outil prend toute sa dimension humaine, ces interfaces sont souvent spectaculaires au point qu’il est évident de faire le rapprochement avec les écrans manipulables imaginés par les réalisateurs du film Minority Report (cf. par exemple Tangibletable / Surface / DataTiles). Sauf que là c’est du concret et c’est maintenant !
Voici à quoi ressemble l’installation des espagnols.
Le premier prototype a été présenté lors de l’AES 2005 à Barcelone.
Le principe est plutôt simple. Une caméra vidéo placée sous la surface vitrée servant de support (et d’écran) est interfacée avec un logiciel de reconnaissance de formes et de mouvements : ReacTIVision. Ce dernier analyse alors ce qui se passe sur la vitre – chaque objet ayant une forme et un identifiant unique (dénommé fiducial en anglais, à mon avis impromprement traduit fiduciaire par beaucoup en français, le terme exact semblant plutôt être fiduciel) – et envoie les infos, d’une part à un logiciel de synthèse sonore qui récupère les paramètres et les transforme de façon à générer du son et d’autre part à une application (un synthétiseur visuel en quelque sorte) gérant un videoprojecteur pour diffuser une interface visuelle sur l’écran-vitre.
Le module ReacTIVision est donc disponible sur le site de l’équipe, et tout un chacun peut se lancer dans la création de sa propre table en utilisant selon ses goûts PureData, Processing, Reaktor (avec une adaptation en Midi visiblement), AudioMulch (le créateur de ce logiciel faisant partie de l’équipe de recherche)…
* Expérience *
J’ai commencé à voir dans quelle mesure cela est accessible au commun des mortels n’ayant quasiment pas de connaissance dans le domaine.
Je livrerai ici les résultats des expériences au fur et à mesure de leurs avancées (si avancées il y a).
Sans forcément recréer une table aussi parfaite que celle de Barcelone, le but est d’essayer de créer un petit instrument de synthèse sonore (sans le feedback du videoprojecteur) transportable et montrable à peu de frais (logiciels de gestion du son gratuit tant qu’à faire)
* 13 août *
récupération de ReacTIVision, de PureData, lecture du blog de Jean-Yves Gratius détaillant sa Reactable maison (cheap mais fonctionnelle)
* 14 août *
premiers tests avec une Quickcam en Usb dont la résolution est normalement insuffisante pour des résultats probants, mais c’est pour un test. On verra plus tard s’il est intéressant d’investir dans du matériel plus évolué.
Installation de PureData sur mon PC (PIV 2,4Ghz, Ram 1Go, XP Professionnel) : j’avais déjà effleuré ce logiciel il y a un ou deux ans, je me souviens maintenant pourquoi je n’étais pas allé plus loin ! Y a du taf !
La communication entre la Quickcam et ReacTIVision ne semble pas être opérant. Diable !
* 16 août *
La Quickcam est finalement reconnue par Reactivision sous PureData. Je teste avec un des fiduciaires : mouvements et identification fonctionnent.
On approche !
J’ai installé les abstraction PureData de J-Y. Gratius, mais je reste désespérément perdu face à ça… Il se passe des choses, mais je ne sais pas trop quoi et je n’arrive pas à sortir un seul son du générateur sonore fourni dans l’archive. Tout cela me semble très gourmand en ressources systèmes et le PC n’est jamais très loin du plantage général…
Tentatives pour trouver des solutions sur le net ou d’autres applications communiquant aussi avec ReacTIVision. Apparemment il est aussi possible de l’interfacer avec Reaktor ou Live, mais cela sort du cadre open-source et gratuit que je m’étais fixé au départ…
Toutefois et en attendant la suite, une démo sympathique par l’Institut Fatima avec Live (collectif hispanico-germanique) :
J’ai lâché le monde du gratuit et l’univers de l’OSC (Open Sound Control) pour celui du payant (en version démo) et du Midi.
Je me suis finalement rabattu sur Live et la sortie MIDI de ReacTiVision grâce aux blogs de Èffe et de Roo Reynolds qui ont travaillé aussi sur leurs propres tables maison. Après avoir installé le merveilleux logiciel MidiYoke qui permet de router le flux Midi en interne sans interface physique, j’ai pu – au bout de 24h – trouver la bonne config stable et efficace entre la webcam et LiveTM.
Dès que les résultats auront un peu plus d’allure je posterai une petite vidéo de démonstration. Mais en attendant, quelques images d’un exemplaire de la ReacTable espagnole à l’oeuvre lors d’un live de Björk dans l’émission Later de Jools Holland.
Après divers essais et le début de fabrication de la ReacTable maison je vous livre ici une toute première video qui montre que ça peut marcher: déclenchement et arrêt de la lecture des samples dans Live, gestion des paramètres de divers effets (délai, filtre). C’est encore un peu bricolo. La caméra et le PC sont au max de leurs capacités parce que je pense que la chaîne Webcam USB –> Reactivision –> Live est au max de ses capacités en l’état actuel des choses. Il faut aussi pas mal gérer divers problèmes de luminosité: lumière incidente qui fausse l’analyse, reflets (du coup j’utilise un verre organique anti-reflet comme ceux que l’on trouve pour l’encadrement de tableaux)… mais bon c’est assez satisfaisant de faire de la musique juste en déplaçant des petits bouts de machin (doublés polystyrène : grand luxe !) sur une surface vitrée.
Tout d’abord le logiciel Bidule de chez Plogue qui est un synthé modulaire d’une utilisation hyper simple et qui se marie à merveille avec ma Reactable. L’interface se fait toujours via le Midi mais il semblerait que Bidule soit capable de converser via OSC. Il ne me reste plus qu’à moi-même apprendre à causer OSC… mince tâche….
Ensuite, je remercie Rutrus pour m’avoir fait découvrir Psychosynth, nouveau synthé modulaire aussi mais dont l’interface est inspiré de la Reactable et qui devrait normalement pouvoir s’interfacer avec elle. Pour le moment le logiciel n’est disponible que pour Linux, mais des versions pour Windows et Mac OSX devraient bientôt voir le jour. Je vous laisse en compagnie de la vidéo de démonstration, plutôt sympathique !
// Références //
° Reactable site officiel
° XRing, Captation d’objets tangibles : Reactivision 1.3 et la Reactable
° 100 Loaded : So, I’m obssesed with multi-touch. But who isn’t?
ça ferait top clsse dans notre salon!!!
Clochette
Je n’ai pas tout compris dans la technique, ni dans le rendu. Faudra m’inviter à une démo avec bon vin. Puis me payer un Aller pour Barcelone pour serrer la pince aux inventeurs. Pas besoin de billet Retour. Merci d’avance. Je vous enverrai des cartes postales.
Amitiés sincères
ouais ben c’est pas gagné… autant décider de boire un bon vin sans ça parce que sinon on va être mort de soif…
terrific !!!
Après les « poubelle boy », voici les « boite cuver boy » !
C’est très très bon, félicitations.
Excellent!
J’aimerais bien reussir à m’en fabriquer une…
Pourrais-tu m’envoyer un tuto avec les differentes etapes de construction et surtout avec les manips informatique? (j’utilise live)
En attendant ta réponse, salut et amuse toi-bien!…
Salut Jo,
en fait tous les éléments sont dans l’article (bon un peu en vrac certes). Tu peux aussi aller consulter le forum qui traite de la Reactable sur Audiofanzine. J’y ai posté des messages complémentaires sur les lignes de commande et divers détails en plus de tout ce que les autres contributeurs ont amené.
A toi de jouer… Tiens-nous au courant de tes progrès (ou de tes soucis)
Bonsoir,
j’ai installé processing, pure data, flash et biensur ReacTIVision.. mais la communication entre la caméra et ReacTIVision ne semble pas être opérante. J’ai essayé 2 caméras, une logitech Quickcam pro 3000 et une caméra DV panasonic nvgs320. Ces deux caméras fonctionnent parfaitement comme webcam mais lorsque je lance ReacTIVision, la fenêtre « Property sheet » est grisée, je ne peux changer aucun paramètre et lorsque je valide, l’écran reste désespéremment noir… damned !
en tout cas merci pour ton expérience et ton article.
Salut Simon,
est-ce que tu as essayé d’installer Midi Yoke et de voir si tu arrivais à faire fonctionner ainsi ta caméra avec ReactiVision via le flux MIDI au lieu de l’OSC ?
Tu es sur Mac ? PC ? Ta ligne de commande de lancement semble correcte ?
Bonsoir !!!!
je n’arrvive pas à avoir du midi qui rentre dans Live !!!!
C’est configurer reactable en midi qui ne doit pas être bon dans mon cas… Comment fait-on exactement ???
Je suis sur XP, j’ai midiyoke, …
Merci de me répondre
Sioul
Salut,
est-ce que ta ligne de commande ressemble à ça :
d:\softs\reactivision.exe -m d:\softs\midi\conf.xml –midi-device 10
- « -m » permet d’indiquer à Reactivision que tu passes le flux en Midi et pas en OSC
- « conf.xml » est le fichier de config Midi
- « –midi-device 10″ indique via quel périph Midi le tout transite
Est-ce que Live est configuré pour les entrées via MidiYoke ?
bonjour,
j’ai un petit soucis moi aussi, la liaision entre la cam et réactivision est bonne aucun problème le logiciel reconnais les symboles, mais lorsque que je « l’invite en midi » réactivision affiche un message d’érreure concernant le fichier de démo (config) xml, je n’arrive pas a savoir pourquoi ? j’ai éssayé de modifier le fichier en lui indiquant les messages que je souhaite qu’il envoie mais rien a faire,
(j’ai midiyoke, reactor version demo lol et bientot sampler music studio 2007 avec le patch midi), ca serai cool si vous pouviez m’aider car je voudrais présenter le projet dans le cadre de mon Bac TPE de 1èreS, vous pouvez me contacter par mail,
merci de votre réponce
a bientot
bonjour Chad,
es-tu sûr du chemin exact que tu indiques vers le fichier XMl ?
Il me semble qu’il faut faire attention à ne pas mettre reactivision et les fichiers midi dans des répertoires dont les noms contiennent des espaces.
Quel est le message d’erreur que tu as lorsque tu lances le soft avec l’interface Midi ?
visit http://www.myspace.com/midihands – merci!!!
salut !
tu a deja bien avancé dans la conception de ta reactable, bon c’est vrai c’est pas encore la meme que celle des pro mais felicitations.
tu fait voir que le commun des mortels peut y arriver, en se creusant quand meme legerement la tete.
bon j’ai plus qu’a m’y mettre, mais vu la puissance de mon pc, je crois que c’est mort.
Welcome dans le monde des Reactabilisés
Je ne sais pas ce que tu as comme machine, mais en tout cas la mienne (comme tu peux le voir dans l’article) est loin d’être une bête de course, et pourtant ça marche. Ca prend un peu de temps à stabiliser mais c’est hyper satisfaisant d’y arriver même avec du matos un peu cheap.
Tiens-nous au courant de tes avancées et de tes améliorations (si jamais tu arrivais à mettre en oeuvre le feedback video je m’inclinerais !)
hey les amis,
tout d abord un grand merci pour votre reponse rapide via YOUTUBE
j ai pas mal d infos maintenant, je vais pouvoir m occuper de la partie montage, et mon voisin ( avec qui j ai ce projet ) va s occuper de la partie informatique « que je ne gere pas enormement meme si j ai bien saisi le principe ».
Concernant la machine utilisée j utilise un pc monter maison ( pross dual core 3ghz, carte video nvidia gtx geforce 285, 8giga de ram et 500go de memoire, windows xp 64bits ) j espere que ca suffirat, j ai une cam logitech basique et une bonne carte son creative.
je dispose aussi d un gentil voisin qui est programmateur et qui tout comme moi a scotché sur la reactable de nos amis sudiste.
a bientot pour des nouvelles qui je l espere montrerons notre avancée
Cioa
Jamous
bonjour a tous et merci chuchumuchu pour toutes tes infos !
je vais essayer d’etre bref :
je suis sous xp
utilise midiyoke, reacTIVision et linux multimedia studio n’ayant rien trouve de mieux en logiciel gratuit non limité pour ce qui est du son !
aucun problemes pour faire tourner reacTIVision, le logiciel de son repond tout vas bien, mais je n’arrive pas a trouver la methode pour mettre en lecture un son au moment ou je pose le fiducial !
je ne trouve pas de logiciel pour gerer l’envoi des images !
je pense utiliser mon ecran pour comme rendu visuel pour le prototype !
si des fois vous auriez deq informations je vous en remerci d’avance !
j’ai oublié de preciser que j’ai un imperatif temp pour finaliser mon projet : noêl ! j’ai decide d’ofrir un reactable maison a ma fille !
Bonjour, je tenais a vous remercier car depuis ma derniere visite ma réactable a bien évoluée, je suis passé sous Max/MSP et c’est grace a vous et a votre travail que je continue a la réalisé. Encore merci et bonne continuation !!
Salut Chad,
voilà donc une bonne nouvelle ! Il y a moyen de voir ta Reactable en action quelque part sur le net ? Si tu as une video sur Youtube, Dailymotion ou autre on pourra faire un lien depuis notre article.