Robot humanoïde Nina

Grenoble Images Parole Signal Automatique (GIPSA-lab)

ST MARTIN D HERES CEDEX

GIPSA-lab develops theoretical and applied researches on control, signal and images processing, speech, cognition, robotics and artifical intelligence. Multidisciplinary and at the interface between the human, physical and digital worlds, its work is based on mathematical and computational theories for the development of models and algorithms, validated by hardware and software implementations.

20230013_0003
Open media modal

Mise en place de marqueurs réfléchissants sur un grimpeur. Des caméras, disposées autour d'un prototype de mur d'escalade de vitesse miniaturisé, enregistrent la position de chaque marqueur et la restituent dans un modèle 3D. Ce dernier, permet de mesurer les mouvements du sportif et d'analyser ses performances en puissance et en force. Cette étude biomécanique, effectuée dans le cadre du projet PerfAnalytics (PPR), contribue à apporter une précision scientifique à l'analyse de la force, du…

Photo
20230013_0003
Mise en place de marqueurs réfléchissants sur un grimpeur
20230013_0026
Open media modal

Étude du mouvement d'un grimpeur sur un prototype de mur d'escalade de vitesse miniaturisé. Ce mur est équipé de prises avec des capteurs de force, visibles à droite. Des caméras disposées autour du mur d'escalade enregistrent la position de chaque marqueur réfléchissant placé sur le grimpeur et la restituent dans un modèle 3D. La combinaison de ces données permet l'étude de la capacité motrice, de la coordination, du schéma mental et d'appui des grimpeurs. À terme, ce prototype servira de…

Photo
20230013_0026
Étude du mouvement d'un grimpeur sur un prototype de mur d'escalade de vitesse miniaturisé
20230013_0018
Open media modal

Prise équipée de capteurs de force sur un prototype de mur d'escalade de vitesse miniaturisé. Les marqueurs réfléchissants présents sur les gants du grimpeur servent à enregistrer ses mouvements, tandis que cette prise spéciale mesure sa force. La combinaison de ces données permet l'étude de la capacité d'application de la force, de la coordination, du schéma mental et d'appui des grimpeurs. À terme, ce prototype servira de modèle pour l'installation d'une piste équipée des mêmes instruments de…

Photo
20230013_0018
Prise équipée de capteurs de force sur un prototype de mur d'escalade de vitesse miniaturisé
20230013_0009
Open media modal

Mesure des mouvements de traction d'un grimpeur et analyse de sa performance en puissance et en coordination. Les prises horizontales en bois sur lesquelles le grimpeur se suspend à la force de ses bras, permettent de mesurer la puissance musculaire avec laquelle il se propulse en hauteur. Les graduations servent de points de repères pour le grimpeur, afin d'avoir un objectif à atteindre. Des caméras disposées autour du mur d'escalade enregistrent la position de chaque marqueur réfléchissant et…

Photo
20230013_0009
Mesure des mouvements de traction d'un grimpeur et analyse de sa performance
20230013_0023
Open media modal

Étude du mouvement d'une grimpeuse sur un prototype de mur d'escalade de vitesse miniaturisé. Ce mur est équipé de prises avec des capteurs de force. Des caméras disposées autour du mur d'escalade enregistrent la position de chaque marqueur réfléchissant placé sur la sportive et la restituent dans un modèle 3D. La combinaison de ces données permet l'étude de la capacité d'application de la force, de la coordination, du schéma mental et d'appui des grimpeurs. À terme, ce prototype servira de…

Photo
20230013_0023
Étude du mouvement d'une grimpeuse sur un prototype de mur d'escalade de vitesse miniaturisé
20230013_0014
Open media modal

Étude du mouvement d'un grimpeur sur un prototype de mur d'escalade de vitesse miniaturisé. Ce mur est équipé de prises avec des capteurs de force. Des caméras disposées autour enregistrent la position de chaque marqueur réfléchissant placé sur le grimpeur et la restituent dans un modèle 3D. La combinaison de ces données permet l'étude de la capacité motrice, de la coordination, du schéma mental et d'appui des grimpeurs. À terme, ce prototype servira de modèle pour l'installation d'une piste…

Photo
20230013_0014
Étude du mouvement d'un grimpeur sur un prototype de mur d'escalade de vitesse miniaturisé
20230013_0005
Open media modal

Mesure des mouvements de traction d'un grimpeur et analyse de sa performance en puissance et en coordination. Les prises horizontales en bois sur lesquelles le grimpeur se suspend à la force de ses bras, permettent de mesurer la puissance musculaire avec laquelle il se propulse en hauteur. Les graduations servent de points de repères pour le grimpeur, afin d'avoir un objectif à atteindre. Des caméras disposées autour du mur d'escalade enregistrent la position de chaque marqueur réfléchissant et…

Photo
20230013_0005
Mesure des mouvements de traction d'un grimpeur et analyse de sa performance
20230013_0019
Open media modal

Prise sur un prototype de mur d'escalade de vitesse miniaturisé. Les marqueurs réfléchissants présents sur les gants du grimpeur servent à enregistrer ses mouvements : des caméras disposées autour du mur enregistrent leur position et la restituent dans un modèle 3D. Ces données permettent de mesurer les mouvements du sportif et d'analyser ses performances en puissance et en force. Cette étude biomécanique, effectuée dans le cadre du projet PerfAnalytics (PPR), contribue à apporter une précision…

Photo
20230013_0019
Prise sur un prototype de mur d'escalade de vitesse miniaturisé
20230013_0010
Open media modal

Mesure des mouvements de traction d'un grimpeur et analyse de sa performance en puissance et en coordination. Les prises horizontales en bois sur lesquelles le grimpeur se suspend à la force de ses bras, permettent de mesurer la puissance musculaire avec laquelle il se propulse en hauteur. Les graduations servent de points de repères pour le grimpeur, afin d'avoir un objectif à atteindre. Des caméras disposées autour du mur d'escalade enregistrent la position de chaque marqueur réfléchissant et…

Photo
20230013_0010
Mesure des mouvements de traction d'un grimpeur et analyse de sa performance
20230013_0024
Open media modal

Étude du mouvement d'une grimpeuse sur un prototype de mur d'escalade de vitesse miniaturisé. Ce mur est équipé de prises avec des capteurs de force. Des caméras disposées autour du mur d'escalade enregistrent la position de chaque marqueur réfléchissant placé sur la sportive et la restituent dans un modèle 3D. La combinaison de ces données permet l'étude de la capacité d'application de la force, de la coordination, du schéma mental et d'appui des grimpeurs. À terme, ce prototype servira de…

Photo
20230013_0024
Étude du mouvement d'une grimpeuse sur un prototype de mur d'escalade de vitesse miniaturisé
20230013_0015
Open media modal

Étude du mouvement d'un grimpeur sur un prototype de mur d'escalade de vitesse miniaturisé. Ce mur est équipé de prises avec des capteurs de force, visibles à droite. Des caméras disposées autour du mur d'escalade enregistrent la position de chaque marqueur réfléchissant placé sur le grimpeur et la restituent dans un modèle 3D. La combinaison de ces données permet l'étude de la capacité motrice, de la coordination, du schéma mental et d'appui des grimpeurs. À terme, ce prototype servira de…

Photo
20230013_0015
Étude du mouvement d'un grimpeur sur un prototype de mur d'escalade de vitesse miniaturisé
20230013_0006
Open media modal

Mesure des mouvements de traction d'un grimpeur et analyse de sa performance en puissance et en coordination. Les prises horizontales en bois sur lesquelles le grimpeur se suspend à la force de ses bras, permettent de mesurer la puissance musculaire avec laquelle il se propulse en hauteur. Les graduations servent de points de repères pour le grimpeur, afin d'avoir un objectif à atteindre. Des caméras disposées autour du mur d'escalade enregistrent la position de chaque marqueur réfléchissant et…

Photo
20230013_0006
Mesure des mouvements de traction d'un grimpeur et analyse de sa performance
20230013_0020
Open media modal

Étude du mouvement d'un grimpeur sur un prototype de mur d'escalade de vitesse miniaturisé. Ce mur est équipé de prises avec des capteurs de force, dont l'une d'elles est ici tenue par la main droite du sportif. Des caméras disposées autour enregistrent la position de chaque marqueur réfléchissant placé sur le grimpeur et la restituent dans un modèle 3D. La combinaison de ces données permet l'étude de la capacité d'application de la force, de la coordination, du schéma mental et d'appui des…

Photo
20230013_0020
Étude du mouvement d'un grimpeur sur un prototype de mur d'escalade de vitesse miniaturisé
20230013_0011
Open media modal

Mesure des mouvements de traction d'un grimpeur et analyse de sa performance en puissance et en coordination. Les prises horizontales en bois sur lesquelles le grimpeur se suspend à la force de ses bras, permettent de mesurer la puissance musculaire avec laquelle il se propulse en hauteur. Les graduations servent de points de repères pour le grimpeur, afin d'avoir un objectif à atteindre. Des caméras disposées autour du mur d'escalade enregistrent la position de chaque marqueur réfléchissant et…

Photo
20230013_0011
Mesure des mouvements de traction d'un grimpeur et analyse de sa performance
20230013_0001
Open media modal

Mise en place de marqueurs réfléchissants sur un grimpeur. Des caméras, disposées autour d'un prototype de mur d'escalade de vitesse miniaturisé, enregistrent la position de chaque marqueur et la restituent dans un modèle 3D. Ce dernier, permet de mesurer les mouvements du sportif et d'analyser ses performances en puissance et en force. Cette étude biomécanique, effectuée dans le cadre du projet PerfAnalytics (PPR), contribue à apporter une précision scientifique à l'analyse de la force, du…

Photo
20230013_0001
Mise en place de marqueurs réfléchissants sur un grimpeur
20230013_0025
Open media modal

Étude du mouvement d'une grimpeuse sur un prototype de mur d'escalade de vitesse miniaturisé. Ce mur est équipé de prises avec des capteurs de force. Des caméras disposées autour du mur d'escalade enregistrent la position de chaque marqueur réfléchissant placé sur la sportive et la restituent dans un modèle 3D. La combinaison de ces données permet l'étude de la capacité d'application de la force, de la coordination, du schéma mental et d'appui des grimpeurs. À terme, ce prototype servira de…

Photo
20230013_0025
Étude du mouvement d'une grimpeuse sur un prototype de mur d'escalade de vitesse miniaturisé
20230013_0016
Open media modal

Étude du mouvement d'un grimpeur sur un prototype de mur d'escalade de vitesse miniaturisé. Ce mur est équipé de prises avec des capteurs de force. Des caméras disposées autour enregistrent la position de chaque marqueur réfléchissant placé sur le grimpeur et la restituent dans un modèle 3D. La combinaison de ces données permet l'étude de la capacité motrice, de la coordination, du schéma mental et d'appui des grimpeurs. À terme, ce prototype servira de modèle pour l'installation d'une piste…

Photo
20230013_0016
Étude du mouvement d'un grimpeur sur un prototype de mur d'escalade de vitesse miniaturisé
20230013_0007
Open media modal

Mesure des mouvements de traction d'un grimpeur et analyse de sa performance en puissance et en coordination. Les prises horizontales en bois sur lesquelles le grimpeur se suspend à la force de ses bras, permettent de mesurer la puissance musculaire avec laquelle il se propulse en hauteur. Les graduations servent de points de repères pour le grimpeur, afin d'avoir un objectif à atteindre. Des caméras disposées autour du mur d'escalade enregistrent la position de chaque marqueur réfléchissant et…

Photo
20230013_0007
Mesure des mouvements de traction d'un grimpeur et analyse de sa performance
20230013_0021
Open media modal

Étude du mouvement d'un grimpeur sur un prototype de mur d'escalade de vitesse miniaturisé. Ce mur est équipé de prises avec des capteurs de force, dont l'une d'elles est ici tenue par la main droite du sportif. Des caméras disposées autour enregistrent la position de chaque marqueur réfléchissant placé sur le grimpeur et la restituent dans un modèle 3D. La combinaison de ces données permet l'étude de la capacité d'application de la force, de la coordination, du schéma mental et d'appui des…

Photo
20230013_0021
Étude du mouvement d'un grimpeur sur un prototype de mur d'escalade de vitesse miniaturisé
20230013_0012
Open media modal

Étude du mouvement d'un grimpeur sur un prototype de mur d'escalade de vitesse miniaturisé. Ce mur est équipé de prises avec des capteurs de force, visibles à droite. Des caméras disposées autour du mur d'escalade enregistrent la position de chaque marqueur réfléchissant placé sur le grimpeur et la restituent dans un modèle 3D. La combinaison de ces données permet l'étude de la capacité motrice, de la coordination, du schéma mental et d'appui des grimpeurs. À terme, ce prototype servira de…

Photo
20230013_0012
Étude du mouvement d'un grimpeur sur un prototype de mur d'escalade de vitesse miniaturisé
20230013_0002
Open media modal

Mise en place de marqueurs réfléchissants sur un grimpeur. Des caméras, disposées autour d'un prototype de mur d'escalade de vitesse miniaturisé, enregistrent la position de chaque marqueur et la restituent dans un modèle 3D. Ce dernier, permet de mesurer les mouvements du sportif et d'analyser ses performances en puissance et en force. Cette étude biomécanique, effectuée dans le cadre du projet PerfAnalytics (PPR), contribue à apporter une précision scientifique à l'analyse de la force, du…

Photo
20230013_0002
Mise en place de marqueurs réfléchissants sur un grimpeur
20230013_0004
Open media modal

Mesure des mouvements de traction d'un grimpeur et analyse de sa performance en puissance et en coordination. Les prises horizontales en bois sur lesquelles le grimpeur se suspend à la force de ses bras, permettent de mesurer la puissance musculaire avec laquelle il se propulse en hauteur. Les graduations servent de points de repères pour le grimpeur, afin d'avoir un objectif à atteindre. Des caméras disposées autour du mur d'escalade enregistrent la position de chaque marqueur réfléchissant et…

Photo
20230013_0004
Mesure des mouvements de traction d'un grimpeur et analyse de sa performance
20230013_0017
Open media modal

Étude du mouvement d'un grimpeur sur un prototype de mur d'escalade de vitesse miniaturisé. Ce mur est équipé de prises avec des capteurs de force, visibles à droite. Des caméras disposées autour du mur d'escalade enregistrent la position de chaque marqueur réfléchissant placé sur le grimpeur et la restituent dans un modèle 3D. La combinaison de ces données permet l'étude de la capacité motrice, de la coordination, du schéma mental et d'appui des grimpeurs. À terme, ce prototype servira de…

Photo
20230013_0017
Étude du mouvement d'un grimpeur sur un prototype de mur d'escalade de vitesse miniaturisé
20230013_0008
Open media modal

Mesure des mouvements de traction d'un grimpeur et analyse de sa performance en puissance et en coordination. Les prises horizontales en bois sur lesquelles le grimpeur se suspend à la force de ses bras, permettent de mesurer la puissance musculaire avec laquelle il se propulse en hauteur. Les graduations servent de points de repères pour le grimpeur, afin d'avoir un objectif à atteindre. Des caméras disposées autour du mur d'escalade enregistrent la position de chaque marqueur réfléchissant et…

Photo
20230013_0008
Mesure des mouvements de traction d'un grimpeur et analyse de sa performance
20230013_0022
Open media modal

Étude du mouvement d'une grimpeuse sur un prototype de mur d'escalade de vitesse miniaturisé. Ce mur est équipé de prises avec des capteurs de force. Des caméras disposées autour du mur d'escalade enregistrent la position de chaque marqueur réfléchissant placé sur la sportive et la restituent dans un modèle 3D. La combinaison de ces données permet l'étude de la capacité d'application de la force, de la coordination, du schéma mental et d'appui des grimpeurs. À terme, ce prototype servira de…

Photo
20230013_0022
Étude du mouvement d'une grimpeuse sur un prototype de mur d'escalade de vitesse miniaturisé
20230013_0013
Open media modal

Étude du mouvement d'un grimpeur sur un prototype de mur d'escalade de vitesse miniaturisé. Ce mur est équipé de prises avec des capteurs de force, visibles à droite. Des caméras disposées autour du mur d'escalade enregistrent la position de chaque marqueur réfléchissant placé sur le grimpeur et la restituent dans un modèle 3D. La combinaison de ces données permet l'étude de la capacité motrice, de la coordination, du schéma mental et d'appui des grimpeurs. À terme, ce prototype servira de…

Photo
20230013_0013
Étude du mouvement d'un grimpeur sur un prototype de mur d'escalade de vitesse miniaturisé
Open media modal

Only available for non-commercial distribution

Pas de cession par extrait

Episode 33: Even though confined, like all French people, the Zeste de Science team is mobilising to continue its mission of popularising science (and entertainment!) in this particularly difficult period for our loyal subscribers. In this special video made in accordance with the confinement measures, we discuss drones, which may soon no longer need us to fly around...

Video
6996
Drones : Independence Day ZdS#33
Open media modal

Only available for non-commercial distribution

From the research lab... to the game room! A team of robotics scientists has developed powerful algorithms that secure drone flights so well that anyone can fly them without risking a crash. The tech startup Drone Interactive tapped into the basic science led at the GIPSA-Lab in the French Alps where researchers and engineers are working hard on creating the future of flying robots.

Video
6840
Flying Robots
Open media modal

Only available for non-commercial distribution

If we are to one day communicate naturally with robots, they will need to master not only speech, but also the subtle yet essential rules of non-verbal communication such as posture and eye movement. A team of researchers is using machine-learning techniques to teach those skills to Nina, their humanoid robot.

Video
6585
Through Nina's eyes
Open media modal

Portrait de Pierre Comon lauréat de la Médaille d'Argent 2018 du CNRS. Directeur de recherche au sein du GIPSA-Lab (Délégation Alpes), il est spécialiste en conception d'outils théoriques et en développement d'algorithmes pour extraire des informations cachées dans des données. En 2013, il obtient une bourse ERC Advanced Grant pour le projet DECODA consacré au développement de méthodes tensorielles pour la science des données, et leurs applications à la santé et l'environnement.

Video
6595
Médaille d'Argent 2018 : Pierre Comon, chercheur CNRS en science de données
20170135_0037
Open media modal

Commande à distance du robot Nina. Le chercheur est doté d'un casque de réalité virtuelle muni de capteurs de mouvements du regard et de la tête. Ce casque est associé à des capteurs de mouvements labiaux et à un dispositif composé d'un microphone et de caméras dédiées à la capture de mouvement, au premier plan de l'image. Le chercheur commande ainsi à distance les actions du robot Nina, placé dans une autre pièce. Il voit en stéréo à travers les yeux du robot, équipés de caméras et entend en…

Photo
20170135_0037
Commande à distance du robot Nina
20170135_0017
Open media modal

Drones pilotés en immersion par des expérimentateurs dotés de lunettes vidéo. Grâce aux caméras placées sur ces drones, les expérimentateurs visualisent l'équivalent du poste de pilotage. Ils dirigent le drone via une manette et de manière intuitive grâce à un algorithme permettant de simplifier les commandes. Cet algorithme corrige également la trajectoire pour éviter les collisions et maintenir le drone dans l’espace autorisé.

Photo
20170135_0017
Drones pilotés en immersion
20170135_0049
Open media modal

Robot Humanoïde Nina capable d'interagir manière naturelle et socialement acceptable. Le robot est tout d'abord piloté à distance par un chercheur, qui, muni de divers capteurs et d'un microphone lui dicte le comportement à adopter et les phrases à prononcer, jusqu'à l'articulation des mots. Le petit robot de 1,02 mètres reproduit ainsi en temps réel l'ensemble des actions de la personne le contrôlant. En plus de sa possible utilisation en télé-présence immersive, cette phase de pilotage,…

Photo
20170135_0049
Robot Humanoïde Nina
20170135_0031
Open media modal

Soudure de composants électroniques CMS à l'aide d'une loupe binoculaire, au sein du pôle mécatronique du Gipsa-lab. Ce dernier assure la conception, la réalisation et la maintenance des plateformes expérimentales du laboratoire, ainsi que de certaines plateformes d’enseignement recherche de l’ENSE3-Grenoble-INP. Il est composé de personnes présentant des compétences en mécanique, électronique, électrotechnique, prototypage rapide et instrumentation. Ce pôle assure enfin une mission de support…

Photo
20170135_0031
Soudure de composants électroniques CMS à l'aide d'une loupe binoculaire
20170135_0039
Open media modal

Robot Humanoïde Nina, piloté par un chercheur depuis une autre salle. Ce dernier est équipé d'un casque de réalité virtuelle, de capteurs autour de la bouche mais aussi de capteurs du regard et des mouvements de tête. Il parle face à un microphone et des caméras dédiées à la capture de mouvement. Le chercheur voit en stéréo à travers les yeux du robot, équipés de caméras et entend en stéréo grâce aux microphones dans les oreilles de Nina. Le petit robot reproduit ainsi en temps réel tous les…

Photo
20170135_0039
Robot Humanoïde Nina, piloté par un chercheur depuis une autre salle
20170135_0003
Open media modal

Installation d'un casque muni d'électrodes utilisé au sein de l’interface cerveau-machine Brain Invaders. Le joueur pilote le programme par "butinage attentionnel", sans manette, par la pensée. Doté d'un casque dont les électrodes sont principalement situées au niveau du cortex visuel et central pariétal, il doit se concentrer sur l’objet qui émet des flashs lumineux afin de l'éliminer. Le signal cérébral correspondant à la perception du flash (stimuli) généré dans le jeu est une onde…

Photo
20170135_0003
Installation d'un casque muni d'électrodes

CNRS Images,

Our work is guided by the way scientists question the world around them and we translate their research into images to help people to understand the world better and to awaken their curiosity and wonderment.