Quelques documents et videos sur le web - Juillet 2012

[version française]

Voici un ensemble de liens vers des développement basés sur la wii remote (avec regret, cette liste ne peut être maintenue qu'annuellement) :


1. 3D, tracking et capture de mouvement

- Système Multi-Camera pour  3D Tracking (Lang. Ang.) (2011) Rapport de projet Semestriel
J.M. Comellas Goberna, EPFL Laboratoire de Biorobotique, Europe(Suisse)
- Base de donnée 6D de reconnaissance de mouvement (Lang. Ang.)(2012) [PDF]
M. Chen, G. AlRegib, B.-H. Juang,
Ecole d'Electricité et d'Informatique, Georgia Institute of Technology, USA
- Headtracking dans l'infrarouge, utilisant la wiimote (Lang. Espagnol) (2009)
M. J. Ubilla Carvajal, Ecole d'Ingénieur, Pontificia Universidad Catolica de Chile, Chile
- Intuitive Teleoperation of an Intelligent Robotic System Using Low-Cost 6-DOF Motion Capture (Lang. Ang.)(Thèse - 2011) [PDF]
J. Gagné, Université de Waterloo, Canada

 
[UACh Mono C# Hokuyo URG-04-LX-UG01 Wii Controler First Test - vidéo Youtube de afiebigc]

(Cette vidéo montre un premier test du programme Hokuyo URG-04-LX range finder basé sur l'utilisation de wii mote pour la mesure d'angle et la génération de cartographie 3D.)

- A “Smart” Motion Sensor for Navigated Surgery (Lang. Angl.) (Poster)
G. C. Claasen, P. Martin, Centre Automatique et Systemes, Mines ParisTech, Europe (France)
F. Picard, Department of Orthopaedics, Golden Jubilee National Hospital, Europe (UK)


2.  Environnement Immersif et apprentissage

-  Immersive Virtual Mine (Lang. Ang.) (2009)
L. Soares, Pontifical Catholic University of Rio de Janeiro, Brézil
R. Varela, R. Bastos, N. Carvalho, Institute of Management, Social Sciences and Technology, Europe(Portugal)
F. Pires, M. S. Dias, Microsoft Language Development Center, Europe(Portugal)
- Système d'apprentissage à la détection de mine à bas cout (trad. Low-Cost, High-Fidelity Virtual Landmine Detection Training System) (Lang. Ang.)
W. Zhu, M. C. Leu, H. He,X. F. Liu, Université des Sciences et Techniques du Missouri, USA
 R. Kotikalapudi, S. Surisetty, Ecole d'Ingénieur, Université d'Etat de l'Oregon, USA
J. D. Plunkett, G. Pierson, Advanced Military Equipment, USA
B. M. Davis, Laboratoire de Recherche Militaire, Alabama, USA


3. Bioscience

- Rotation-Invariant Detection of 2D-Gestures using 3D-accelerometers (Lang. Ang.) (2011) [source]
T. Croonenborghs , P. Karsmakers, K.H.Kempen
Université, Département Techniques et Biosciences, Europe(Belgique)
- Using the Wiimote as a sensor in water research (Lang. Ang.) (2010)
Hut, R. W., S. V. Weijs, and W. M. J. Luxemburg, Université de Delft, Europe(Pays-bas)
- Effects of Travel Technique and Gender on a Divided Attention Task in a Virtual Environment (Lang. Ang.) (2010)
E. A. Suma, S. L. Finkelstein, S. Clark, P. Goolkasian, Université de Caroline du Nord, Charlotte, USA
L. F. Hodges, Université de Clemson, USA


4. Education et développement de nouvelles applications

- Wii4dida e WiiLD: Sperimentazione didattica su larga scala per una lavagna digitale aperta (Lang. Italien) (2011) [PDF2]
B. Bosetti, Département des Technologies de l"information, Université de Trente, Europe(Italie)
E. Nanni, USR Umbria, Europe(Italie)
P. Pilolli, Fondation Bruno Kessler, Europe(Italie)
M. Ruffoni; CFP I.A. Enaip di Arco, Europe(Italie)
- Rapport d'activité Centre de Recherche en Informatique  2011 (Lang. Fr.)
Mines-Paritech, Europe (France)
- Cal Climber Part IV Model-Based Hill Climb in Statechart (Lang. Ang.) (Extrait d'examen de travaux pratiques - 2011)
J. C. Jensen, T. N. Tran (National Instruments)
Université de Californie, Berkeley, USA
- Measure de forces avec une WiiMote - GiiForce (Lang. Allemand)
(Video ci-dessous)

[GiiForce - video youtube de vortex3k]

- Elements de travaux pratiques sur Matlab/Scilab (Lang. Fr.) (2010) (manuel d'utilisateur)
P. Bonnet, Université de Lille, Europe (France)
- La bibliothèque wiiiuse  est, désormais, maintenue sur GitHub par R. Pavlik. 

Merci.

* * *

fWiine sur Mac OSX ?

Une nouvelle version de la bibliothèque wiiuse qui permet à fWiine de communiquer avec les wiimotes vient d'être publiée. Cette version apporte le support de Mac OSX. Vous pouvez télécharger le code source à l'adresse : http://sourceforge.net/projects/fwiine/files/wiiuse/0.13/wiiuse_v0.13_src.zip/download. Vous trouverez dans l'archive ce qu'il faut pour compiler la bibliothèque avec Xcode ainsi que des instructions dans le fichier README.

Pour l'instant, cette version n'a pas encore été testée avec l'application fWiine. Nous cherchons des volontaires pour vérifier l'aptitude de fWiine à s'exécuter sur Mac. Merci d'avance pour vos retours !

Robot contrôlé à la wii remote

[version francaise]

Retour, ici, sur un travail sur les Interfaces Hommes Machines avec documentation et video à l'appui :

High-level programming and control for industrial
robotics: using a hand-held accelerometer-based input
device for gesture and posture recognition [Article] (trad. : Programmation haut niveau pour robot industriel : utilisation de la reconnaissance de mouvement à partir d'accéléromètre) (Lang. : Anglais)
Pedro Neto(1), J. Norberto Pires(1), A. Paulo Moreira(2)
(1)Mechanical Engineering Department, University of Coimbra, Coimbra, Europe(Portugal)
(2)INESC Porto - Institute for Systems and Computer Engineering of Porto, Porto, Europe(Portugal)

Résumé :
Le processus d'apprentissage d'un robot industriel requiert une expertise technique certaine. L'objectif, ici, est de présenter un prototype intuitif de programmation d'instruction haut niveau pour un système controle-commande robotisé. A partir de la wiimote, une reconnaissance de mouvement (basée sur des réseaux neuronaux) permet le contrôle du robot. (extrait du résumé présenté dans Emerald)

[Industrial robot controlled by a Wii Remote and speech - Youtube's video from Robotics Time]

Merci à Pedro Neto pour la présentation de son travail.
Vous aussi, n'hésitez pas à nous faire part de votre travail à l'adresse: wiill.iam
Faites aussi un tour sur le forum wiimoteproject

La Wiimote et les dernières interfaces Homme Machine - Quid des performances ?

[version française]

Tandis que la popularité des interfaces Homme Machine ne se dément pas (système de vision 3D, écran tactile multipoint), plusieurs études mettent en avant leurs performances limitées.

Avantages de la souris sur les différents périphériques 3D de positionnement
(trad. Did “Minority Report” Get it Wrong? Superiority of the Mouse over 3D Input in a 3D Placement Task) (Lang. Anglais)
F. Bérard1, J. Ip2, M. Benovoy2, D. El-Shimy2, J. R. Blum2, J. R. Cooperstock2 1 Université de Grenoble, Europe (France) 2 Université McGill, Canada

Il parait évident que les interfaces traditionnelles ne vont pas être rapidement supplantées par les derniers périphériques 3D.
En revanche, ces périphériques classiques (souris, clavier) risquent d'être bousculés sur les applications innovantes.

En captant l'intérêt des capteurs (trad. Making Sense of Sensors) (Lang. Anglais)
Alex Wright, Ecrivain et Architecte de l'Information, New-York, USA
(extrait : Les chercheurs s'intéressent fortement aux capteurs de positions afin de surmonter les limitations des périphériques utilisateurs usuels.)

[vidéo YouTube de TheTowerBarron]

Concernant la Wiimote, les applications, présentées dans ce post, font le point sur la précision et la robustesse de ce type d'interface (en terme d'erreur de poursuite ou de
plage d'utilisation, etc...)

Pour finir, les derniers chapitres donnent un aperçu de récentes études utilisant la wiimote comme capteur scientifique (études comportementales et customisation du périphérique)


1. Précision du capteur IR pour les algorithmes de suivi

Un article relevant une erreur de suivi de l'order de 2cm avec 1 wiimote :
- Analyse et limitation des algorithmes de poursuites d'O. Kreylos à propos de la wiimote (trad. Dr. Oliver Kreylos' Wiimote Tracking Algorithm and its Limitations) (Lang. Anglais)
et un poster résumant le tout : Interaction dans un environnement virtuel à l'aide d'une wii remote (trad. Interaction within a VR environment using a wii remote) (Lang. Anglais)
P. Vuong, G. Kurillo, R. Bajcsy Université de Californie Berkeley, USA

Un autre étude atteignant une précision de 2.233mm avec 2 wiimotes :
- Stereowiision : vision stereo avec des wiimotes (Lang. Anglais)
T. Cuypers(1), T. Van den Eede(2), S. Ligot(2), Y. Francken(1), C. Hermans(1), F. Arickx(3), P. Bekaert(1) (1) Université Hasselt - tUL - IBBT (2)(3)Université d'Anvers Europe (Belgique)

[Stereowiision – vidéo YouTube de uawiist]

Une autre analyse :
- WiiRtrack - an evaluation of a low cost head tracking based on the Wiimote (trad. WiiRtrack - an evaluation of a low cost head tracking based on the Wiimote) (Lang. Anglais)
J. Frohnmayer1, R. Blach2, T. Gleue2, N. Frangakis3 1Merz Akademie, Hochschule für Gestaltung, Stuttgart, Europe (Allemagne)
2CC Virtual Environments, Fraunhofer IAO, Stuttgart, Europe (Allemagne)
3Institute of Communication and Computer Systems, Athens, Europe (Grèce)


2. Plage de Fréquence

- Développement d'un système de mesure et d'analyse de tremblement à l'aide d'un accéléromètre tri-axial.
N. Mamorita (1), T. Iizuka (2), A. Takeuchi (1), M. Shirataka (1), N. Ikeda (1)
(1) Informatique Medicale, Graduate School of Medical Sciences, Kitasato University, Kanagawa, Japon
(2) Départment de Neurologie, School of Medicine, Kitasato University, Kanagawa, Japon
(link 1) (link 2)
Extrait du résumé (fichier non disponible en libre accès (propriété et mis gracieusement à disposition par la bibliothèque Nationale de Médecine):
"Le système utilise une wiimote afin d'analyser les fréquence et d'estimer l'amplitude des tremblements sur une plage de 3 Hz à 15 Hz... L'accélération issue de la wiimote est échantillonnée à 30ms."


3. Nouvelles études comportementales - psychologie expérimentale

- Goulet d'étranglement cognitif et comportements dynamiques (Lang. Anglais)
K. Snyder-Tapp, R. Dale, Département de Psychologie, Memphis, USA
- Etudes des dispositions du bras lors d'un apprentissage de positions successives (Lang. Anglais)
N. D. Duran, R. Dale Département de Psychologie, Université de Memphis, USA
- Un lien vers le site web :
Nintendo Wiimote et psychologie expérimentale (Lang. Anglais)
R. Dale, Assistant Professeur, Université de Memphis

- Développement d'un système d'annalyse de situation de concentration utilisant un accéléromètre (Lang. Anglais) P.131-140
M. Okubo, A. Fujimura Université Doshiba, Kyoto, Japon

4. Hardware customization

- Manuel d'instruction pour ajouter un bouton externe à une wiimote

- Bricolage d'une Wii Remote pour un positionnement 3D absolut et une détection d'orientation
(link 1)(link 2)


5. Autres liens à voir :

- Une rétrospective du hacking de la wiimote sur la blogosphère (Lang. Anglais)

- jOG : podomètre (exemple de nouveau matériel connectable sur la wii remote) (Lang. Anglais)

- Intéraction d'une Wii Remote pour un Usage Industriel (rapport de projet d'étudiant) (Lang. Anglais)
M. Nielsen, M. Stenbacka Mälardalens högskola, Europe (Suède)

- Intuitivité et incorporation des interactions gestuelles chez les utilisateurs de jeux vidéo (Lang. Français)
Nicolas Nova, Liftlab, Suisse Timothée Jobert, CEA-LETI – Minatec®,Europe(France)

- Wiimote durant la classe de physique :

[Wiimote comme détecteur de mouvement - vidéo YouTube de pkarcsi55]

La Wiimote, une Interface Homme-Machine aux applications multiples

[Version Française]

Les travaux de recherche sur les interfaces Homme-Machine englobent les domaines de la reconnaissance de mouvement, de l'écriture de texte et de capture de mouvement.
A nouveau (et après plusieurs posts précédents (1 , 2 , 3), les développements présentés, ci-dessous, illustrent l'interaction en 3 dimensions entre l'utilisateur et l'ordinateur via la wiimote

[Smart Sensor Integration - un exemple d'Interface Homme-Machine avec une wiimote]
[ (voir chap. "5. Reconnaissance des émotions et des mouvements") ]

1. En guise d'introduction

Une introduction très générale sur les applications basées sur la wiimote de J. Lee
- Jouer et plus avec la wiimote - Interaction Homme-Machine (Trad. : Gaming and beyond with the Wiimote - Applications of the Nintendo Wiimote in terms of Human Computer Interaction) (Lang. Anglais)
S. Kahl - Support
Séminaire 2009 "Cognitive human-computer interaction"

2. Entrée Textuelle

- Clavier virtuel à partir d'une wiimote : nouvelle interface homme-machine) (Lang. : Français)
J. Bier, I. Pecci,
LITA - Université Paul Verlaine-Metz, Europe (France)

- S. J. Castellucci - site web personnel sur les recherches en entrée textuelle(Lang. : Anglais)
S.J. Castellucci, Département d'Informatique, Université d'York, Canada
et de la même équipe :
Une première étude comparative sur l'utilisation de wiimote comme outil de pointage (trad. : An Empirical Comparison of "Wiimote" Gun Attachments for Pointing Tasks
V. McArthur, S.J. Castellucci, and I. S. MacKenzie


2. Interaction dans environnement immersif

- Ecran Virtuel Interactif

[Ecran Virtuel Interactif basé sur l'utilisation d'un Wiimote - Vidéo YouTube de timmtub3]

- Interopérabilité dans des environnements virtuels collaboratifs (Lang. : Anglais)
( papier )( présentation )( site web )
M. Ciampi, L. Gallo, A. Coronato, and G. De Pietro ICAR-CNR Université de Naples, Europe(Italie)

- Interaction sur mur d'écran basée sur les mouvements(Lang. : Anglais)
J. Grubert,1 M. Hancock,1 S. Carpendale,1 E. Tse,1 T. Isenberg1,2 1Université de Calgary Canada, 2Université de Groningen Europe(Pays Bas)

- Travail collaboratif en environnement immersif 1
[inria-00433853, v1] Travail collaboratif sur des données scientifiques en 3D
T. Duval / IRISA – Université de Rennes 1 C. Fleury / IRISA – INSA de Rennes B. Nouailhas / EDF R&D Clamart L. Aguerreche / IRISA – INSA de Rennes Europe (France)

- Travail collaboratif en environnement immersif 2
valuation de Métaphores d'Interaction Pour Le Travail Collaboratif Entre Sites Distants D'Immersion Virtuelle (Lang. Français)
H. Hrimech, Thèse d'Informatique, École Nationale Supérieure d'Arts et Métiers, Europe (France)

-Virtual shelves: interactions avec des dispositifs d'orientation (Lang. Anglais)

- NearTouch : Une interaction sans contact avec un terminal mobile (Lang. : Français)
H. Guan, J. E. Viallet Orange Labs France Télécom, Europe(France)

- Office environment demonstrator :
Prototypage rapide d'un environnement de travail virtuel (Lang. : Anglais)
D. Grammenos1, Y. Georgalis1, N. Partarakis1, X. Zabulis1, T. Sarmis1, S. Kartakis1, P. Tourlakis1, A. Argyros1,2, and C. Stephanidis1,2 1 Institut d'Informatique, Fondation pour la Recherche - Hellas 2 Département d'Informatique, Université de Crete Europe (Grèce)


3.Capture de mouvement (...à nouveau)

Les applications de J. Lee ont encore inspiré de multiples travaux :

- Capture de mouvement de tête pour applications en OpenGL (Lang. : Anglais)
(localisation 1) (ancienne localisation 2)
Rapport de Projet de License, Frank Evers – (Site Web Personel)

- Manipuler à distance : une approche écologique (Lang. : Anglais)
J. A. Atherton Projet de Mastère de Science - Département d'Informatique de l'université Brigham Young, USA

- Suivi d'objet infrarouge avec des wii remotes (poster) (Lang. : Anglais)
S. Browning, P. Weber, J. Schulze Institut Californien des Telecommunications et des Technologies de l'Information Université de Californie San Diego, USA

- Interfaces utilisateurs basée des projecteurs portables (Lang. : Anglais)
K. Bergmann - Rapport de Projet de fin d'étude - Université Technique de Berlin, Europe (Allemagne)

- WiiMoCap: un système de capture de mouvement bon marché (poster) (Lang.: Anglais)
N. Krishnamurthy1,2, D. Bacher1, J. F. McFerron3, A. P. Batista1,2 1Département de Bioengénierie, Université de Pittsburgh, Pittsburgh, PA; 2 Center for the Neural Basis of Cognition, Pittsburgh, PA; 3 Crossroads Consulting LLC, Johnstown, PA; USA

- Gestaction3D: vers un outil générique d'interactions gestuelles (Lang. Français)
S. Meunier – Rapport de Projet de Fin d'Etude - Université Polytech'Nice – Europe (France)

- Experimentation avec acquisition de mouvement via la wiimote (Lang. : Anglais)
A. Rodriguez – Site web personnel Université Southern California's School of Cinematic Arts, USA

- AAL SAFE Algorithme de traitement du signal (Lang. Anglais)
R. J. Pina Amaro - Mastère d'Ingénierie Biomédicale, Septembre 2009
Département de Physique de l'Université des sciences et techniques de Coimbra, Europe (Portugal)


4. La Wiimote et le son

- Pinocchio: Piloter virtuellement un orchestre symphonique (Lang. : Anglais)
B. Bruegge, C. Teschner, P. Lachenmaier, E. Fenzl, D. Schmidt, S. Bierbaum
Chaire d'Informatique Appliquée, Université Technique de Munich,
Europe(Allemagne)

- Design et développement d'une interface sonorisée pour diffusion d'image sur support sonore (Lang. : Anglais)
C. O’Neill and K. Ng
ICSRiM – Université de Leeds, Ecole de Musique et d'Informatique,
Europe (Royaume-Uni)


5. Reconnaissance des émotions et des mouvements

- Hawk: Simulation de vol d'oiseau basée sur une interaction gestuelle en trois dimensions (Lang. : Anglais)
Rapport Technique "Dartmouth Computer Science" TR2009-647 - T. Y. Eastman

- Wii Want to Write: Reconnaissance de mouvement basée sur un système comportant des accéléromètres (Lang. : Anglais)
T. S. Leong, J. Lai, J. Panza, P. Pong, J. Hong
Université Carnegie Mellon University, USA

- MythMote: Télécommandes alternative pour la télévision (Lang. : Anglais)
A. Ramirez Del Villar, M. Kesavan, S. Talapatra, Y. Mundada - Institut de Technologie de Georgie,Atlanta, USA

- Analyse des mouvements de conducteurs à l'aide de la wiimote (Lang. : Anglais)
D. Bradshaw & K. Ng ICSRiM - Université de Leeds,Ecole d'Informatique et de Musique,
Europe(Royaume-Uni)

- Reconnaissance de geste basée sur la wiimote (Lang. : Anglais)
J. Mlích - Rapport de DEA, DCGM, FIT BUT - Europe(Allemagne)

- Interaction Gestuelle à base d'accéléromètre et d'écran tactile (Lang. : Anglais)
P. D. Varcholik, Institut de formation et de simulation, Université Centrale de Floride
J. L. Merlo, Ph.D., Acadmie Militaire de West Point - USA
- UbiGesture: Interaction Gestuelle dans un environnement immersif (trad. : UbiGesture: Customizing and Profiling Hand Gestures in Ubiquitous Environment) (Lang. : Anglais)
A. Atia, S. Takahashi, K. Misue, and J. Tanaka - Ecole Supérieure des Systèmes et d'Ingénierie Informatique, Département d'Informatique, Université de Tsukuba, Japon

- Reconnaissance des différents états de marche à pied pour des applications robotiques (Lang. : Anglais)
V. V. Hafner, F. Bachmann Humboldt-Université Humboldt de Berlin, Institut d'Informatique, Berlin, Europe(Allemagne)

- Wii Ergometer (Lang. : Allemand )
Vélo d'appartement thérapeutique - H. Bergunde, T. Rakow, S. Schindler
Université de Postdam, Europe(Allemagne)

- Smart Sensor Integration (SSI) "Intégration de Capteurs Intelligents: reconnaissance d'émotion en temps réel" (Lang. : Anglais)
J. Wagner, E. Andre, F. Jung - Concepts et Applications Multimédia, Université d'Augsburg,
Europe(Allemagne)


6. Contrôle externe à l'aide d'une wiimote et d'autres liens encore :

- Examen radiologique avec une wiimote (Lang. : English) (Vidéo ayant été présenté dans un post précédent)
( PDF Page 4 )( Article )( Logiciel )
L. Zheng M. Brown, Département d'informatique de l'Université d'Etat de Singapour, Singapour

- Orchestra and Comau Robotics – Pilotage de robot à l'aide d'une wii remote

- Robot LEGO Mindstorms piloté à la wiimote (Lang. Anglais)
Projet de Design et Innovation - Université Technique Nanyang, Singapour
M. A. Chengappa, A. Goyal, S. B. Saaban, S. S. Pal, S. Singh

- Caméra motorisée (PTZ) interactive controlée à la Wii Remote (Lang. : Anglais)
A. H. W. Goh, Y. S. Yong, C. H. Chan, S. J. Then, L. P. Chu, S. W. Chau, and H. W. Hon Université Multimedia, Malaisie

- Autre blogs et liens liés à la wiimote :
a. marvelous night for a moon dance (Lang. : Espagnol)
b. site bookmark (Lang. : Anglais)
c. Glide Labs - journal de bord d'un projet de fin d'étude basé sur la wiimote (Lang. : Anglais)
d. suivi de mouvement à la wiimote sous Processing (Lang. : Anglais)

--

Wiimote – Un instrument de mesure pour la Science

[Version Française]

La wiimote continue de susciter de l'intérêt dans le champ des expérimentations scientifiques. Bon marché et bourrée de capteurs, elle demeure un instrument de mesure et un support technique pour l'apprentissage, de choix, pour les chercheurs et les enseignants.

1. Un instrument de mesure

- Conception d'un capteur scientifique intelligent à partir d'une Wiimote bricolée (Trad. "Hacked Wiimote Makes Super Scientific Sensor") (Lang. : Anglais)
S. WEIJS, R. HUT, Université Technique de Delft , Europe (Pays-Bas)

[Utilisation d'une wiimote comme capteur hydrologique - demonstration - source Wired]

Et du même auteur :
Gadgets météorologiques bon marché (Trad. "Cheap weather gadgets") (Lang. Anglais)
(site)(PDF Page 4)

Résumé : "Des chercheurs du département de traitement et gestion des eaux (Université de génie Civil et des Géosciences) veulent couvrir l'Afrique avec des capteurs météorologiques bon marché à base de gadgets électroniques comme la wii remote."

source T. VAN DIJK

- Estimation des données d'entrée pour des opérations déportées (En utilisant des modèles de déplacements humains à à-coup minimal, ceci afin d'améliorer les performances en robotique pilotée à distance) (Lang. Anglais)
Thèse Doctorale, C. Smith, Europe (Suède) 2009

- Wiihabilitation: Réhabilitation de la flexion/extension du poignet en utilisant des jeux à base de Wiimote (Lang. : Anglais)
J. Decker, H. Li, D. Losowyj, V. Prakash Université Rutgers, USA

2. Enseigner avec des wiimotes (...encore.un autre.post)

De nouveaux liens sont susceptibles d'intéresser ceux qui désirent utiliser les wiimotes comme support de cours :

- Applications à partir de wiimote (Lang. : Anglais)
J.A. Vicaria, J.M. Maestre, E.F. Camacho Departement d'Automatique, Université de Séville, Europe (Espagne)

- Utiliser le wii controller pour enseigner les bases de la Physique (Lang. : Anglais)
L. Horner, T. Duncan, H. Lynch, A. Martin, S. Miller Université de Southern Illinois Edwardsville, USA

- Enseignement à distance intruitif via de multiples Interfaces Hommes Machines : Expériences avec des applications à partir de Wiimote (Lang. : Anglais)
Andreas Holzinger1, Selver Softic2, Christian Stickel2, Martin Ebner2, Matjaz Debevc3 1Faculté de Médecine Graz, A-8036 Graz, Europe (Autriche) Institut d'Informatique Médicale, Statistiques & Documentation (IMI) Unité de Recherche HCI4MED 2Université Technique de Graz, A-8010 Graz, Institut d'Informatique (IICM) 3Université de Maribor, Faculté d'Informatique
- TD n° 3 Interaction – Wiimote (Lang. : French)
Travaux Dirigés de l'université Polytech'Nice – Europe (France)


3. Quelques notions de mathématiques et caractéristiques techniques pour des expériences à base de Wiimote :

- Retour sur quelques expériences :
a. Algèbre et wii remote (Lang. Anglais)
b. Suivi à partir de Wiimote basée sur les Quaternions (Lang. : Anglais)
Les deux documents écrits par M. Q. Rieck, Ph. D. Mathematique et Informatique, Université Drake, USA

- Calibration des accélérations de wiimote (Lang.: Italien)
C. Scozzafava – Personal Web site

- Mini-Projet sur interfaces multimodales, Analyse comparative de plusieurs bibliothèques wiimotes. (Lang. Polonais)
L. Kopec, P. Krzepowski, A.G.H. – Europe (Pologne)

- Etude de faisabilité d'interface de controle à partir de Wiimote (Lang. : Catalan)
Miguel Ángel Granado Navarro Projet de fin d'étude, Ecole supérieure Polytechnique de Castelldefels, Europe (Espagne)

Manuel et guide d'installation pour fwiine v0.4

[version française]

Quelques documentations susceptibles d'intéresser les futurs utilisateurs de fWIIne.
Le guide d'installation et bordereau de livraison de fWIIne v0.4 est maintenant disponible @ :
fWIIne_V0.4_Release_Note_fr.pdf

Le manuel d'instruction est disponible @ :
fWIIne_V0.4_Manuel_fr.pdf

--

[fwiine pendolo wiimote - video from mattruffoni]

--
Addedum :
Pour information et pour aider les développeurs, plusieurs cas de problème de compilation de la bibliothèque ont été résolus de la manière suivante :
- Soit passer à une version de Visual Studio inférieure à la version 9 (source)
- soit passer de la version courante WINDDK 7600.16385.0 à la version WIN DDK 3790.1830 (lien [236MO] - image iso à graver sur un CD et lancer l'installateur)

Quand la wiimote entre à l'université

[version française]

Le périphérique de jeu de la Wii a très vite suscité l'intérêt du milieu universitaire. Dès les premières utilisations détournées, la wii remote représentait un source d'inspiration pour l'apprentissage et la découverture en ingénierie de la commande. Ainsi, plusieurs cours l'emploient à titre de support d'expérience ou la présentent comme un cas d'étude.

1. Cours

Informatique – Travaux Pratiques à l’Université d'état de Iowa:

[Informatique – Lancer de Wiimote (Université de l'Iowa – U.S.A.)]

Comme présentée dans la vidéo ci-dessus, la wiimote est entrée au programme des universités :
- La Wii Remote et vous (trad. The Wii Remote and You) (lang.: ang.)
CHI 2009 Notes de cours - LaViola, Kruijff, Bowman, Poupyrev, Stuerzlinger – Département d'informatique, Université de l'Etat de Virginie, U.S.A
- Extrait du programme de 2nd année de l' Ecole des Mines de Paris 2009 (option mathématique appliquée : robotique, vision,automatique) (lang.: fr.) – Europe (France) :


2. Simulation dans un environnement virtuel (Serious Game)

La reconnaissance tridimensionnelle de mouvements est employé dans les simulations destinées à la formation (programmes aussi appelés "serious games")
- Formation à l'utilisation de matériel d'échographie pour les pays émergents (trad.
Cost Effective Ultrasound Imaging Training Mentor for use in Developing Countries) (lang.: eng.)
Llyr ap Cenydd 1, Franck P. Vidal 1, Nigel W. John 1, Derek A. Gould 2,
Elizabeth Joekes 2, Peter Littler 2
1 Université de Bangor, Europe (UK)
2 Université de Liverpool NHS Trust, Europe (UK)

- Simulation d'écho-endoscopie rectale (trad. Wii Transrectal Ultrasound Simulator) (lang.: eng.)
Sweet, Fulgham, Parekattil, Shen, Chitvala
Université du Minnesota, U.S.A.


3. Cours sur les IHM (Interface Homme Machine)

La wiimote permet d'aborder de multiples problèmes présent dans l'ingéniérie de la commande :
- Système Interactifs et Multimodaux (lang.: fr.) – cours de Ecole de Technologie Supérieure – Université du Québec - Canada
LOG 350 – Conception et évaluation des interfaces utilisateurs (Cours sur IHM)

- Physical Computing(8physcomp.pdf) : Une présentation de cours sur l'interaction Homme-Machine (lang.: fr.)
Pierre Cubaud - CNAM – Europe (France)

- Note de cours sur interfaces complexes
Laurent Grisoni, Department of computer science, Lille University (Laboratoire d'Informatique Fondamentale de Lille – Université des Sciences et Technologies de Lille) – Europe (France)

- Technologies de suivi de mouvement 3D
Steven Feiner, Département d'informatique, Université Columbia, New York, U.S.A.

Projet d'université : une tondeuse contrôlée à la Wiimote

[The lawnmower powered by the wii]

Projet d'université : wiimote et bras robotisé (université)

[Wiimote control of robot arm and base]

4. Informatique

- WiiLab Programmation sous MATLAB – Une expérience d'enseignant-chercheurs à l'université de Notre Dame
Juanita Gerard
Département d'Informatique et d'Ingénierie, Université of Notre Dame, U.S.A.

- Une publication en rapport
Jordan Brindza, Jessica Szweda, Qi Liao, Yingxin Jiang, Aaron Striegel
Département d'Informatique et d'Ingénierie, Université of Notre Dame, U.S.A.


5. Posters et présentations diverses :

- Wiimote Lab (presentation de la wiimote et de l'interface)
Projet SKIES, Université d'Etat du Colorado, U.S.A.

- Applications mutliples avec une wiimote
Sung Jun Bae , Mike Wozniewski, Zack Settel, and Jeremy Cooperstock
Shared Reality Lab - Centre for Intelligent Machines, Université McGill, Canada


6. Divers.

Pour finir un projet intéressant de l'université de l'Arizona à destination des aveugles :

[The Laser Guided Cane - senior design project EE]

La Wiimote et les nouvelles technologies du jeu vidéo

La Wiimote et les nouvelles technologies du jeu vidéo
[version française]

Le périphérique de jeu de chez Nintendo a bien évidemment été utilisé par de nombreux jeux et, à ce titre,a fait l'objet d'études diverses dans l'industrie du jeu vidéo. A ce jour, la technologie de la wiimote est largement maitrisée. L'objet de ce post est de présenter quelques travaux publiés sur le sujet. (Vu les enjeux et la confidentialité dans l'industrie du jeu, il est facile de comprendre qu'on ne peut prétendre ici à l'exhaustivité.). Même si les technologies des jeux videos ne sont pas le coeur du sujet de ce blog, les études et applications suivantes méritaient d'être présentées (ne serait-ce que pour les connaissances auxquelles elles font appel : mathématiques, traitement du signal...) Plusieurs liens et documentation peuvent donc être explorées pour plus d'information :

- S'adapter à l'expérience du joueur dans les jeux de la Wii (trad.Towards Tailoring Player Experience in Physical Wii Games: A Case )
- Personnaliser les jeux pour les patients victimes d'AVC (trad. Customizing Games for Stroke Patients)
- Faire voler un Manta via la gestuelle (trad. Flying a Manta with Gesture and Controller: An Exploration of (gaming technology)
-Rapport final projet Handimation (trad. Final report for the Tangible Handimation project)
- wii punch (poster)
- Apprentissage interactive d'un robot [Certainement déjà présenté] RGame: A Video Game for Interactive Robot Learning
- Contrôler un personnage à partir d'interface à base d'accéléromètre (trad. Accelerometer-based User Interfaces for the Control of a Physically Simulated Character).
- Exergaming: fusion entre jeu vidéo et exercice (trad. A Fusion of Exercise and Video Gaming)

Wiimote et MotionPlus

[version française]
Motion Plus et wiimote

[WMP/WM+ appelé plus communément Wii Motion Plus]

Le Wii MotionPlus est un périphérique à connecter sur la Wiimote. Il est conçu à partir de deux capteurs : IDG 600(Invensense) gyroscope bi-axial et X3500W (EPSON) gyroscope simple axe.

A l'origine, il n'était pas possible d'obtenir, avec une wiimote seulement, une représentation fidèle de la position 3D à partir des données capteurs de l'accéléromètre. Afin d'améliorer la jouabilité, Nintendo a fait le choix de combiner l'accéléromètre tri-axial à un capteur gyroscopique tri-axial.

[Les algorithmes de fusion de capteur permettent de combiner gyroscope et accéléromètre afin de couvrir un large gamme de fréquence et donc de mouvements - source]

La fusion de données provenant de plusieurs capteurs est, en effet, une solution souvent retenue. Ainsi, le choix des ingénieurs de Nintendo s'est rapidement porté sur l'usage combiné d'accéléromètre et de gyroscope. (Ce choix est aussi inspiré des techniques de navigation à l'estime" (trad. dead reckoning techniques) qui utilisent, entre autres, ce genre de capteur.)

Coté Wii remote, le wm+ n'est pas tout aussi bien interfaçable qu'un autre composant externe classique (nunchuk, classic controller...). Par ailleurs la compréhension et la description des données provenant des 3 gyroscopes a pris un certain temps.
Ainsi, certains développeurs décidèrent, dans un premier temps, de concevoir leur propre extension au wii controller et à base de gyroscope : VR inertial input device 28

Des débuts de l'utilisation détournée du WM+ avec le Nunchuck ...
Par la suite, le MotionPlus, disponible dans le commerce l'été 2009, fut utilisé de manière détournée avec le Nunchuck pour l'acquisition de données des accéléromètres et du gyroscope (via le bus I²C) avant de pouvoir faire cela avec une Wiimote et un WM+.

Les liens suivants donnent une idée des développements à base de WM+ :

- Estimation du bruit des capteurs du Nunchuk et du Wii Motion Plus (Trad. : Just How Noisy are Accelerometers and Gyros from Nunchuck and Wii Motion Plus?) de
VoidBot Blog (Lang. Anglais)
Sur ce site, le WM+ est analysé dans le cadre de la conception d'un robot(à voir pour plus d'explication sur les données brutes des capteurs)

- Un autre site web à propos de robot et WM+ : PoBot (Lang. : Français)

Voir la vidéo ci-dessous pour plus d'info :

[Wii motion plus : gyroscope pour IMU
From JulienPobot. ]

...à la Wiimote avec le WM+

En définitive, quelques bibliothèques C++ (open sources) some Wimote C++ incluent dès à présent le WM+ :
- WiiYourself v1.13 beta
- Wiimotelib v1.8 beta de Brian Peek <> (Bib. .NET pour Windows)
- CWiid pour Linux
- Wiiuse (ici, temporairement hébergée et pour Windows avant la version officielle et ailleurs inclue dans le kit de developpement de jeux devkitpro)

Autres liens à voir

- SLiDA (Système d'acquisition)
- 王様の耳はロバの耳 (http://ameblo.jp/akihiko) Un blog et un livre en japonais entièrement dédié à la programmation avec la Wii Remote (MotionPlus, etc...)! (Lang. Japonais)

[WiiRemote プログラミング]

- Un autre blog (Kako) traitant, entre autre, du WM+ (Lang. Japonais)
(-- mise à jour 27/11/2009 --)
- Integration de gyroscope (trad.: Integrating MEMS-based motion processing devices) - Article Invensense Inc. juil.2009 / Steve Nasiri, David Sachs, Michael Maia

Suivi de mouvement, quelques études

[version française]

Matériel relativement bon marché et prêt à l'emploi, le capteur infrouge de la wii remote est un outil prisé pour la détermination de position 3D dans l'espace et/ou le suivi de mouvement, dans le cadre d'étude et de présentation sur le suivi de mouvement. La détermination d'une position 3D se fait alors par triangulation avec 2 Wiimotes. Ici sont présentés quelques démonstrations et articles à ce sujet.

1. Holographie palpable
Un des travaux les plus originaux repose sur la fusion d'acquisition de multiples capteurs/actionneurs : affichage holographique, positionnement 3D(2 wiimotes en l'occurence) et synthétiseur d'ultrason :

Objet [Titre] Lieu	Publication – [Holographie palpable (trad. :Touchable Holography)] Université de Tokyo, Japon
WWW	Article : PDF Publication : PDF
Auteur (date)	Takayuki Hoshi, Hiroyuki Shinoda,Daisu Abe, Masafumi Takahashiy, Kei Nakatsumaz (Juillet 2009)	Lang. : Anglais
Résumé	(Traduit de "Ajout de sensation tactile à un hologramme (trad. : AddingTactile reaction to Hologram)") L'article présente un dispositif holographique avec une propriété tactile. Le système est composé de 3 parties : Un affichage holographique, un dispositif de suivi de mouvement de main et un dispositif tactile. Ce dernier dispositif - ou écran tactile - est un matériel original permettant un retour de force sur la paume de la main de l'utilisateur sans contact. L'appareil permet de palper (sensation de la main au contact de la radiation de pression d'un émetteur à ultrason) une image tridimensionnelle flottante.
Commen- -taire	Un système original d'integration de composants multisensoriels. La vidéo, ci-dessous, donne une idée du dispositif et une meilleure comprehension des usages possibles.	Rate wwwww

[Holographie palpable – vidéo YouTube's de shinodalab - 16/07/2009]

2. Technique de poursuite 3D abordable
L'utilisation de, seulement, deux wii controllers permet d'aborder le suivi de mouvement sans s'équiper de couteux systèmes. Le developpement d'applications de suivi 3D devient possible à un prix abordable et avec un matériel relativement courant :

Objet [Titre] Lieu	Publication – [Poursuite Optique à l'aide de matériel abordable (trad. Optical tracking using commodity hardware)] Université de Cambridge, Europe (Royaume-Uni)
WWW	Site web : LINK Publication : PDF
Auteur (date)	Simon Hay, Joseph Newman and Robert Harle (Juillet 2009)	Lang. : Anglais
Résumé	(Traduit de "Suivi Optique avec utilisation de matériel courant - trad. : Optical tracking using commodity hardware") Une méhode utilisant 2 Nintendo Wii controllers pour un système de suivi de mouvement et de capture 3D est décrite dans cet article. Ce type de bien de consommation courantes permet l'obtention de résultats concrets. Ainsi, le suivi optique de mouvement devient abordable là où l'espace et le coût sont des points bloquants. La résolution atteinte, dans un premier temps, est de +/-2mm sur un large volume considéré.
Commen- -taire	Les articles mais aussi les logiciels sont disponibles. Voir aussi la video ci-dessous pour se faire une idée du développement.	Rate wwwww

[Hacking Wiis for 3D tracking – Vidéo de YouTube's sjeh3 - 12/03/2008]

3. Autres références

- (Rapport de projet MoSc) Full Body Tracking Kendo Game de Silviu Dumitrescu - Université de Dublin, Trinity College (Lang. Anglaise) - Europe (Irlande)

- (Project d'étude scolaire) Headtracking using a Wiimote de Kevin Hejn, Jens Peter Rosenkvist - Department d'informatique, Université de Copenhage - Europe (Pays-Bas)

- (Rapport de projet BoSc) Motion Tracking with a wii controller de Alessandro Vagliardo - Department d' Informatique, Université de Zürich - Suisse

- (cours) Advanced Wireless Network - Overview of motion capture - Open course Ware (source ?)

- (Publication) Enhancing Presence in Head-mounted Display Environments by Visual Body Feedback Using Head-mounted Cameras de Gerd Bruder, Frank Steinicke, Kai Rothaus, Klaus Hinrichs - Department d'informatique - Université de Munster - Europe (Allemagne)

- (Publication) Reorientation during Body Turns
G. Bruder 1 , F. Steinicke 1 , K. Hinrichs 1 and M. Lappe 2
1 Groupe de recherche en Visualisation et CAO (VisCG) ,
Department d'informatique, WWU Münster, Allemagne
2 Department de Psychologie II, WWU Münster, Allemagne
(Immersion dans un environnement Virtuel à l'aide du suivi de mouvement de tête)

- (Publication) Navigation in smart environments using mediated reality tools
Jorge Torres-Solis/a,b,c,e, Mei Guan/d, Elaine Biddiss/a,b and Tom Chau/a,b
a Institut de Recherche Bloorview, Bloorview Kids Rehab, Toronto, Canada
b Institut des Biomatériaux et de l'ingéniérie Biomédicale , Université de Toronto, Toronto, Canada
c Edward S. Rogers Sr. Dept. d'Electronique et d'Informatique , Université de Toronto, Toronto,
Canada
d Department de biologie cellulaire, Université de Toronto, Toronto, Canada
e Komodo Openlab

- (presentation) An Asymmetric 2D Pointer / 3D Ray for 3D Interaction within Collaborative Virtual Environments de Thierry Duval and Cédric Fleury - Université de Rennes 1 – INSA de Rennes IRISA - UEB - Europe (France)
(Une comparaison entre différentes techniques de tracking 3D)

fWIIne v0.4 disponible (version francaise)

[version française]

Qu'est ce fWIIne v0.4 ?
fWIIne v0.4 est la quatrième version d'une bibliothèque Open Source permettant l'acquisition des données des capteurs de la Wiimote sous Matlab/Simulink(pour WinXP) ou Scilab(Linux). Elle a été pensée pour le développement, l'expérimentation ainsi qu'à des fins éducatives.
fWIIne vous permet de faire l'acquisition, le traitement et la visualisation des données de la Wii Remote et du Wii Motion Plus avec Matlab et Scilab.

Comment télécharger fWIIne v0.4 ?
Les fichiers sources et binaires sont disponibles dossier @: sourceforge.net/projects/fwiine/ (section "Download")

[fWIIne v0.4 - graphique Matlab représentant l'acquisition des données de l'accéléromètre (Wiimote) et de la vitesse angulaire (WiiMotionPlus)]

Fonctionnalités :
- La version 0.4 est compatible avec la 0.3, 0.2 et la 0.1. (Se référer à la version 0.1 et 0.2 pour les fonctionnalités de base)
- Acquisition de la vitesse angulaire provenant du module Wii Motion Plus (données brutes)

Corrections :
- La version est basée sur la bibliothèque wiiuse et son intégration dans le toolkit devkitpro.

Commentaires :
- Le répertoire CVS n'est pas mis à jour. Se référer à la section "Files" pour télécharger la dernière version à jour.
- fWIIne pour Windows XP et Matlab se base sur Matlab >7.1 (r2007...r2008), la bibliothèque Wiiuse0.12 et le toolkit devkitPro.
- fWIIne v0.4 pour Linux n'est pas encore disponible. (fWIIne v0.2 pour Linux et Scilab se base sur Scilab 4.1.2 et la bibliothèque Wiiuse0.9.)
- Le manuel et le borderau de livraison de la quatrième version viendront bientôt.

--
Wiilliam

Aplanir, percer et autres applications de mesures pour une wii remote

[version française]
Aplanir, percer et autres applications de mesures pour une wii remote

La wii remote demeure un matériel de choix pour nombre de professeurs et de développeurs lorsqu'il s'agit de concevoir toute sorte d'applications à base d'accéléromètre nécessitant d'évaluer l'état d'un moteur/d'un corps (comme pour l'idenfication de la verticale, de conditions de perçage ou de reconnaissance de gestes). Dans un état stabilisé, l'accéléromètre tri-axial permet de remonter à des mesures angulaires par rapport à la gravité. Les états transitoire permettent, eux, la detection de changement de comportement. Enfin, les états maintenus (répétitifs) permettent une identification sous certaines conditions d'acquisition.

1. Mesures d'angles en état stationnaire :
Ici, aucun mouvement n'est appliqué au wii controller. L'information reçue est interprétée comme celle d'un niveau.

Nom/Logo	Description	Comment- aire/Auteur
LevelTool	Wiimote comme niveau La Wii remote est ici utilisée comme un rapporteur d'angle par rapport à la verticale. L'application Leveltool affiche le roulis et le tangage sur un dessin. La simplicité de cette application est évidente mais pourquoi utiliser quelque chose de très compliqué pour réaliser un fil à plomb électronique. [Leveltool]	Lien(Lang. : Anglais) Sources / Binaires S.E. : WinXP Auteur : Alanceil (pseudo) (2008)

2. Détection d'états transitoires :
La détection des changement de comportements d'actionneurs, de rouage et de moteur est souvent utile pour se prémunir des pannes et des pertes d'efficacité :

Nom/Logo	Description	Comment- aire/Auteur
Drilling Lab	Drilling Lab – Une plateforme de capteur et une modélisation à partir d'une grille informatique pour l'analyse vibratoire des forages Université d'Etat de Louisiane, Société des Ingénieurs Pétroliers Cette application établit une compaison de différents modèles de forages de puits (un modèle basé sur l'acquisition à partir de capteur et un modèle géologique simulé) Les erreurs et les pannes de perçage ainsi que les phenomènes de pertes d'efficacité sont identifiés via une plateforme de capteur. Le kit d'application open source Cactus fonctionne par acquisition des données d'accéléromètre ( de la wii remote en l'occurence) via le logiciel d'acquisition Labview . [Drilling Lab]	Lien(Lang. : Anglais) Poster (PDF) S.E. : WinXP Auteurs : Richard Duff, Yaakoub El Khamra (2008)

3. Acquisition des données de la Wiimote - Autres liens remarquables :

Les publications et les applications à base de wiimote sont toujours plus nombreuses. Quelques liens intéressants sont présentés ici :

- Site Web : Analysis Tools from Australian Antartic Data Centre (Trad. : Outils d'analyse du Centre Australien en Antartique - Lang. Anglais)
Le service Australien pour l'Antartique référence une série d'outils utilisant la wii remote avec Matlab. (Merci au passage pour le référence de la bibliothèque fWIIne!)

- Publication : Science in Your pocket de R.F. Wisman et K. Forinash, Université de l'Indiana Souheast, Etats-Unis (Trad. : La Science a portée de main - Lang. Anglais)
De nouveaux accessoires à base d'accéléromètre - comme les téléphones portables ou la wii remote - facilitent les expériences et la diffusion d'outils d'analyse.

- Document : Wiimote Lab an Introduction du programme SKIES de l'Université d'Etat du Colorado, Etats-Unis (Trad.: Un introduction à une utilisation détournée de la wiimote - Lang. Anglais)


- Blog : Posts au sujets d'applications à base d'une wiimote sur nueve años no son nada de Manuel Martin Ortiz, Université Polytechnique de Madrid (Lang. Espagnol)

- Blog : Giimote(Un driver de Wiimote pour concepteur de jeu) de Sam Whited(Lang. Anglais)
Blog à propos de la bib. Giimote incluant un développement d'un wrapper pour Matlab.- Divers : Proposition de stage (ST Microelectronics - Juin 2008) sujet : poursuite basée sur la wiimote (Lang. Italien)

- Divers : Spécification pour proposition de stage (ACTIA MULLER/Université de Valenciennes, France - Janvier 2009 ) sujet : design d'un matériel à bas cout pour diagnostic de parallélisme sur un véhicule.

- Présentation de cours : Informatique ambiante - Chap. 10 Interaction Homme Machine de J.L. Encaranaçao, Graphisch-Interaktive Systeme, Université Technique de Darmstad, Allemagne (Lang. Allemand)
Exemple d'une application de reconnaissance de mouvement pour visionneuse d'image.