Annonce

>>> Bienvenue sur codelab! >>> Première visite ? >>> quelques mots sur codelab //// partage de liens //// une carte des membres//// (apéros) codelab


#1 2010-02-18 23:23:22 Reactable avec PS3eye/MIDI

SegmA
membre
Date d'inscription: 2010-02-18
Messages: 11

Reactable avec PS3eye/MIDI



Bonsoir à tous!
Je suis nouveau dans le monde des tables réactives; et très intéressé par tout ce beau matos, je m'étais juré de m'en réaliser une! C'est pourquoi depuis lundi dernier j'ai débuté mon projet.

Voici ce dont je me sers actuellement:

-Plaque de verre 3mm d'épaisseur (avec 4 feuilles blanches Canson 21*29.7cm - cheap ! :p )
-PC sous Windows 7 x64 - Ubuntu.
-PS3eye.
-ReacTIVision 1.4.
-Reason 4/Fruityloops 9.

Voila ce que ça donne côté photo:

http://img15.imageshack.us/img15/2199/16022010031.jpg

Une petite vidéo réalisée hier après-midi (soit au bout de seulement 3 jours de création, alors soyez indulgent svp! lol):





lien vers la page de la vidéo sur youtube



Ma table marche plutôt bien; pour l'instant en midi donc, sous FL9 et Reason 4 aucun problèmes notables.

Je souhaitais m'attaquer au feedback vidéo; mais me rendant compte qu'un vidéo-projecteur n'était pas dans mes moyens pour le moment, une question m'est venue.
Vu que le retour se fait avec une source lumineuse (logique je sais!); pourrais-je, à votre avis, utiliser un moniteur LCD (que j'ai en rab'); le fixer sous ma plaque de verre, et avoir un rendu <<passable>>?!
Mon idée n'est peut-être pas nouvelle, mais je voudrais savoir si quelqu'un l'a déjà réalisée, et si c'est à recommander ou non!
Si cela s'avêrait positif, peut-être serait-il bénéfique de supprimer le cadre du moniteur, avec de gagner quelques précieux millimètres...
Bref, c'est un projet qui me tient à coeur, j'en apprends beaucoup ici et là, et je trouve que l'idée de réunir les créateurs de réactable DIY une excellente idée!

Merci à ceux qui prendront la peine de me répondre ;)

Hors ligne

 

#2 2010-02-19 14:35:34 Re : Reactable avec PS3eye/MIDI

emoc
@#@*$
Lieu: Quimper
Date d'inscription: 2008-01-28
Messages: 1573
Site web

Re: Reactable avec PS3eye/MIDI



Bonjour SegmA et bienvenue!

Dunya, la table de Bitcrusher, fonctionne avec un moniteur. Il avait donné le lien vers tous les fichiers, photos, etc. dans la première discussion sur les tables réactives (http://codelab.fr/48-3#p3827 ), le revoilà : http://bitcrusher.free.fr/dunya/
Il pourra probablement t'en dire plus quand il repassera par ici. Le gros avantage que je vois, c'est qu'il est possible d'obtenir vite des résultats, et de travailler sur le retour visuel sans se confronter à trop de construction et de casse-têtes : miroir(s), infrarouge, etc...

Bonne continuation à ton projet!

Hors ligne

 

#3 2010-02-19 18:53:27 Re : Reactable avec PS3eye/MIDI

SegmA
membre
Date d'inscription: 2010-02-18
Messages: 11

Re: Reactable avec PS3eye/MIDI



Tout d'abord, merci de ta réponse très rapide; et de l'accueil !
Merci également pour les liens/conseils, je vais de ce pas m'y coller !

Le lcd sera fixé d'ici lundi, et je vais essayer de basculer vers ubuntu; pour l'instant j'ai du mal à compiler les sources de reactivision 1.4 sur la Karmic Koala; est-ce que quelqu'un à le même problème?!.

Je vous ferais part de mes différentes avancées dans un futur proche !
Tchao les amis !

Dernière modification par SegmA (2010-02-19 18:57:38)

Hors ligne

 

#4 2010-02-22 19:39:47 Re : Reactable avec PS3eye/MIDI

SegmA
membre
Date d'inscription: 2010-02-18
Messages: 11

Re: Reactable avec PS3eye/MIDI



Me revoici!
J'apporte des nouvelles de mon projet!
Bon alors concernant le feedback vidéo, tant que j'ai pas de vidéoprojecteur, je le laisse de côté!
Le lcd étant relativement petit, ça me limiterait trop; je préfère attendre pour plus de sérieux.

Alors voilà les changements, et ils sont de taille!
Je ne suis pas un pro de KNEX, mais j'en fais usage car c'est simple pour moi de créer un support!
Je trouvais que mon ancien système était un peu précaire (2 chaises , une planche disposée verticalement + des KNEX relativement peu stables)
Donc on reste dans le précaire, mais un peu moins =P :

http://img687.imageshack.us/img687/1321/22022010040.jpg

Au sujet de la webcam je voulais savoir si quelqu'un sait quelle est la meilleure fréquence d'utilisation?!
Je suis sous du 15fps, ça marche plutôt sans aucun soucis, mais je me dis que plus c'est haut mieux ça doit interpréter les fiducials (au risque de bouffer plus de ressources).

Hors ligne

 

#5 2010-02-22 20:34:28 Re : Reactable avec PS3eye/MIDI

teofil
modérateur
Date d'inscription: 2008-10-12
Messages: 35
Site web

Re: Reactable avec PS3eye/MIDI



C'est ça. Plus la définition est élevée, et plus le nombre de frames par seconde (fps) est élevé, et meilleur sera la détection des fiducials, tant en réactivité (la vitesse à laquelle tu les bouges), qu'en taille (plus ils sont petits, plus il sera difficile pour reactivision de les reconnaître).

Vu ta configuration (windows 7+PS3 eye), tu dois pouvoir monter à 30 voir 60fps en 640x480 avec les drivers d'AlexP, ce qui est largement suffisant vu la taille de ta surface.

Bien sûr, plus ces valeurs sont fortes, pus ça te bouffe de la ressource, mais c'est pas non plus gigantesque.

Sympa la structure en Knex big_smile

Vu ta configuration hardware ("Front DI" avec éclairage et prise de vue par le dessus), la feuille canson sous le verre ne sert pas à grand chose.

Pour ce qui est du feedback vidéo via un écran lcd, je ne vois moi aussi que le projet Dunya qui fait ça (Bitcrusher est très sympa smile  )

Il y a en revanche une autre solution que de simplement mettre un écran sous ta plaque. C'est une manip risquée, mais si c'est bien fait, le résultat peut être au rendez-vous. Ça consiste en fait à démonter entièrement un écran LCD (genre d'ordi) et de séparer la dalle LCD (une plaque fine, fragile et transparente avec tous les pixels) de la dalle lumineuse (celle qui éclaire les pixels pour en voir la couleur), et de la carte mère de l'écran avec les connectiques et tout. Une fois ta dalle LCD mise entre 2 plaques de verre pour la protéger, tu pourra filmer par en dessous et ainsi avoir une table plus "classique". Bien entendu, cela engendre le passage de la caméra dans le spectre infrarouge pour ne pas être perturbé par ce qu'affiche l'écran, et tout l'éclairage qui va avec.
Ça a l'air ambitieux, mais ça revient pas si cher que ça.

Trêve de bavardage, voilà quelques exemples de projets de ce type chez le Nui group :
Une table faite à partir d'un écran 17", le thread est bien garni en photos et vidéos.
Ici le démontage complet d'un écran et son conditionnement pour une table, tout en photos.

Cette manip ne fonctionne pas avec tous les écrans, cela dépend de la difficulté à les démonter, la manière dont est fixé la dalle lcd à la dalle lumineuse, et la longueur des "fiches".

Hors ligne

 

#6 2010-02-22 20:59:23 Re : Reactable avec PS3eye/MIDI

SegmA
membre
Date d'inscription: 2010-02-18
Messages: 11

Re: Reactable avec PS3eye/MIDI



En effet, c'est énorme; je vais y réfléchir, ça paraît vraiment du bon !

Pour windows 7; je crois que je vais installer un windows xp mais en 32bits, afin d'avoir un meilleur rendu (les pilotes de la ps3eye d'AlexP ont l'air de freezer sur quelques config en 64bits avec seven, dont la mienne quand je suis à 30fps ou plus, donc je préfèrerais fixer ce problème rapidement et enfin avoir du 60/100 fps sans soucis smile )

Merci de ta réponse teofil; ça me motive à aller plus loin dans tout ce projet !

Comme dit précédemment, je tiendrais au courant lors de mes avancées !
See you wink

Hors ligne

 

#7 2010-02-24 16:42:15 Re : Reactable avec PS3eye/MIDI

SegmA
membre
Date d'inscription: 2010-02-18
Messages: 11

Re: Reactable avec PS3eye/MIDI



Allez, je reviens vous larguer une petite série de photos de mon avancée!
Néon fixé, je n'ai plus de soucis d'ombres sur ReacTIVision!

Qu'en pensez-vous? (Même si ça ne reste que du design; et que c'est en KNEX!)

Face avant:

http://img62.imageshack.us/img62/9800/24022010041.jpg

Face avant /nuit:

http://img208.imageshack.us/img208/2667/24022010042.jpg

Vue de côté:

http://img694.imageshack.us/img694/880/24022010045.jpg

Face arrière:

http://img208.imageshack.us/img208/6214/24022010048.jpg

Concernant la face arrière, c'est pas du "gadget"; s'il y a autant de knex; c'est pour assurer la plus grande stabilité de la caméra!

Bon, hormis tout ça, je suis repassé sur une config. : ubuntu/win7 x64/win7 x86.
Sur la 32 bits, j'obtiens un "petit" 30fps; mais qui me paraît pour l'instant suffisant.
Pour avoir du 60fps constant, faut que je boot sans aucun périphériques usb à part la ps3eye; la bande passante usb de mon pc est faible.
Si j'utilisais un hub usb alimenté sur secteur, aurais-je un meilleur rendement?!
A bientôt les amis !

Hors ligne

 

#8 2010-02-24 18:34:12 Re : Reactable avec PS3eye/MIDI

pob
Exterminator
Lieu: Toulouse
Date d'inscription: 2009-10-13
Messages: 750
Site web

Re: Reactable avec PS3eye/MIDI



Je n'ai absolument aucun soucis sous windows7 64bits avec la PS3Eye. Mon ordi est léger côté CPU : Tablet PC Lenovo x61t. On est en Core2Duo LV à 1,6GHz par noyau. Donc très léger...
Enfin je touche du bois, mais ça marche très bien ici.

Dernière chose à propos de cette camera. Elle utilise un mode USB très particulier. Il ne faut pas brancher d'autre périphérique sur le même canal USB, ou du moins un périphérique qui ne fonctionne pas dans ce mode "bulk", c'est à dire la grande majorité. Par contre on peut brancher plusieurs PS3Eye sur le même contrôleur/hub sans ce problème.


A propos du frame rate... A quoi bon aller aussi haut ? A moins de faire du hockey sur glace avec vos palets, ça n'a aucun intérêt.
Peut-être que tes soucis proviennent de là plus que du driver.

Pour donner une idée, j'ai fait un touch pad avec une dalle tactile. Pour suivre le point de contact d'un doigt, je suis à environ une mesure toutes les 60ms voire 100ms... Et là c'est tout à fait suffisant. Si vous prenez votre calculette, on est entre 17 et 10 Hz.
Il vaut mieux lisser les contrôles entre les mesures que de mesurer beaucoup. Ca allège la partie la plus lourde sans causer de soucis niveau rendu.

Dernière modification par pob (2010-02-24 18:44:19)

Hors ligne

 

#9 2010-02-24 19:51:09 Re : Reactable avec PS3eye/MIDI

SegmA
membre
Date d'inscription: 2010-02-18
Messages: 11

Re: Reactable avec PS3eye/MIDI



En effet, voici des tests que j'ai pu effectuer en fin d'aprem (et ENFIN le son enregistré est en bonne qualité!!! cool)





lien vers la page de la vidéo sur youtube



Je trouve le rendu bon pour 15fps. big_smile
Disons que tant qu'à faire, j'aurais aimé avoir la meilleure fluidité, le meilleur tracking de mes fiducials.
Mais il est vrai que pour ce que je vais en faire, les 15fps voir 30 me suffisent amplement!

Des améliorations seront à faire du côté <options> de la caméra: on peut le voir sur la vidéo, certains knob réagissent un peu tardivement; mais ce ne sont que de petites modifs, le résultat produit me convient parfaitement.

Pour le feedback vidéo, dès que j'ai l'occasion de récupérer un vidéo projecteur je me lance; je scierai mon meuble et ferai tout le nécessaire (LED IR etcetc...)

wink

Hors ligne

 

#10 2010-02-25 10:53:12 Re : Reactable avec PS3eye/MIDI

emoc
@#@*$
Lieu: Quimper
Date d'inscription: 2008-01-28
Messages: 1573
Site web

Re: Reactable avec PS3eye/MIDI



pob a écrit:

A propos du frame rate... A quoi bon aller aussi haut ? A moins de faire du hockey sur glace avec vos palets, ça n'a aucun intérêt.

smile
Le framerate a plus d'importance dans le repérage des marqueurs que dans celui des blobs / doigts. Un framerate bas entraine des pertes dans le repérage des marqueurs quand il y a un mouvement rapide (rotation, translation), selon le traitement qui est fait de ces infos, ça peut provoquer des effets «non souhaités». D'ailleurs, avec une détection caméra par le haut, le cas peut aussi se présenter en bouchant la détection d'un marqueur, en passant la main au dessus par exemple.
Deux autres paramètres influent sur ce repérage, qui permettent de compenser le framerate : la luminosité (les caméras s'en sortent mieux pour capter des images avec une bonne luminosité) et la taille des marqueurs, plus c'est gros, plus c'est facilement reconnu par reactivision. En somme, il faut trouver le bon dosage, ou intégrer qu'un marqueur peut-être temporairement invisible sans modifier ce qu'il contrôle.

Hors ligne

 

#11 2010-02-26 16:25:22 Re : Reactable avec PS3eye/MIDI

SegmA
membre
Date d'inscription: 2010-02-18
Messages: 11

Re: Reactable avec PS3eye/MIDI



Je repasse dans le coin pour vous informer que je me lance dans le feedback vidéo afin de tester la chose.
J'ai récupéré une antiquité : P4 1.7 GHz/768Mo de DDR/180 Go de DD/4 ports USB2/XP 32bits.
Je sais, ça fait pas rêver ! Mais est-ce suffisant?!

Pour vous résumer ce que je vais faire en cette après-midi (oui je raconte ma vie je sais wink ):
Je vais tenter de faire tourner reactivision dessus avec ma ps3eye, et voir les limites que j'aurais (fps etc).
Si c'est convaincant (ce que j'espère malgré la machine utilisée), je vais extraire la carte mère, la fixer sur mon meuble, évidemment réaliser toute la connectique de manière la plus intelligente possible (niveau fixation/encombrement.
Une fois tout ceci fait (je pense que ça va me prendre du temps!), je vais tenter d'avoir un feedback vidéo sur mon moniteur LCD 15"; juste pour effectuer des tests donc.
La ps3eye sera toujours sur son support en hauteur par rapport à la table.

Si le tout est satisfaisant; je me prendrais un vidéoprojecteur type pico d'ici peu; bien que j'aimerais en savoir plus sur les lentilles de Fresnel (apparement très peu chères). J'ai lu qu'en règle générale, c'est un attrape-c*****on, et qu'on n'a pas le résultat souhaité; mais sait-on jamais!

Je vous tiens au courant as usual !

Hors ligne

 

#12 2010-02-26 17:50:55 Re : Reactable avec PS3eye/MIDI

xray303
membre
Date d'inscription: 2009-03-20
Messages: 11

Re: Reactable avec PS3eye/MIDI



hello,

Ton feedback video, tu veux le faire avec quoi ? processing,, pure data, MAX/MSP, etc .. ??

Nico

Hors ligne

 

#13 2010-02-26 17:56:00 Re : Reactable avec PS3eye/MIDI

SegmA
membre
Date d'inscription: 2010-02-18
Messages: 11

Re: Reactable avec PS3eye/MIDI



@xray303: puredata/GEM/Fid_Abs, le taff d'asurmen m'ayant réellement bluffé !
J'espère en arriver jusque là! wink

Hors ligne

 

#14 2010-03-01 01:11:51 Re : Reactable avec PS3eye/MIDI

xray303
membre
Date d'inscription: 2009-03-20
Messages: 11

Re: Reactable avec PS3eye/MIDI



Hello,

Fid_abs est effectivement un excellente idee etant donne que ca va te faciliter vachement le boulot...
dans les abs de pdmtl (maintenant nomme mtl) il y a aussi pas mal de truc utile, par exemple gem_scop qui te permettra d'utiliser le signal dans ton feedback video.
Je suis aussi en train de faire une reactable like mais ca stagne en ce moment du au manque de temps pour m'y consacrer.

Par contre je trouve que GEM est assez gourmant en ressource surtout lorsquîl faut dessiner le signal a l'ecran (1 source audio ca va mais 10 ca devient limite).

Bonne chance pour ton projet.

Hors ligne

 

#15 2010-03-02 15:47:13 Re : Reactable avec PS3eye/MIDI

SegmA
membre
Date d'inscription: 2010-02-18
Messages: 11

Re: Reactable avec PS3eye/MIDI



Bon bon bon, je repasse dans le coin; je me suis "lancé" dans le feedback vidéo, et je ne pensais vraiment pas passer tant de temps à coder ça. On a rien sans rien comme dirait l'autre.

Je laisse de côté pure-data qui pour l'instant me paraît bien trop complexe pour moi; à mon niveau.
J'ai préféré regarder du côté de processing qui est bien plus dans mes capacités je pense.

J'arrive à réaliser un track de mes fids; mais pour l'instant toujours très basique, pas de fx etc...

J'ai essayé de suivre ce tutoriel (qui date plutôt, 2007): http://nuigroup.com/forums/viewthread/17/ mais qui me paraît vraiment excellent.

Bon le soucis que est que suivant ce tutoriel, arrivé au moment où je lance vvvv, avec le projet "vvvv2processing_blobtracker_backsubtract_new.v4p", lorsque j'effectue la partie 7.a, (donc clic droit sur le bouton nommé "Video In on/off"), je n'ai pas de rendu de la caméra à gauche (même en modifiant certains paramètres de gauche).
Je précise que normalement toutes mes librairies sont ok, j'ai suivi tous les pré-requis à la lettre.

Alors ma question est la suivante: est-ce un tutoriel obsolète, où est-ce tout simplement incompatible avec la ps3eye?!
Peut-être que la fausse manip' vient de mon côté...
Ca me ferait plaisir que quelqu'un m'indique le chemin à suivre pour un rendu simple, efficace et instructif niveau code (le feedback réalisé dans la vidéo du tutoriel me conviendrait amplement dans l'immédiat).

Ou même si quelqu'un avait des petits bouts de codes processing fonctionnels à m'envoyer par mp, ça me serait toujours extrêmement pratique pour une meilleure approche de ce monde-là!
Je reste évidemment conscient que chacun d'entre vous taffez comme des dingues pour parvenir à de superbes réalisations...

Merci à vous d'avance !

Dernière modification par SegmA (2010-03-02 15:48:15)

Hors ligne

 

fil rss de cette discussion : rss

Pied de page des forums

Powered by FluxBB

codelab, graphisme & code : emoc / 2008-2019