PEN SEE KIT DE PRESSE - Nataliya KOSMYNA
←
→
Transcription du contenu de la page
Si votre navigateur ne rend pas la page correctement, lisez s'il vous plaît le contenu de la page ci-dessous
PILOTAGE DE DRONE PAR LA
PENSEE
Nataliya KOSMYNA
natalie@kosmina.eu www.kosmina.eu @nataliyakosmyna
KIT DE PRESSELES INTERFACES CERVEAU ORDINATEUR
Imaginez que vous puissiez contrôler n’importe quel objet
avec votre cerveau? Eh bien de nos jours c’est une réalité
qui est rendue possible par les Interfaces Cerveau
Ordinateur (ICO).
Les ICO permettent à une personne d’interagir avec un
système informatique par l’intermédiaire de l’activité
cérébrale. Le type d’interface le plus courant mesure
l’activité du cerveau par Électroencéphalographie ou
EEG grâce à des électrodes placées sur le scalpe.
Le principe est d’enregistrer les signaux d’une personne à
qui l’on a demandé de réaliser plusieurs actions mentales
(imaginer un mouvement de la main, visualiser un objet)
et d’ensuite entraîner un algorithme de classification à
reconnaitre les actions mentales correspondantes en
temps réel et a leur associer une action déclenchée sur
un système informatique.
Il est également possible de détecter d’autres
phénomènes dans le cerveau, par exemple le fait
d’entendre une phrase ou un terme sémantiquement
inattendu (“Je veux un café au chat” au lieu de “Je veux
un café au lait”) ou encore les mensonges.
2/53PILOTAGE DE DRONE PAR UNE INTERFACE CERVEAU
ORDINATEUR
Les Interfaces Cerveau Ordinateur permettent d’associer
un concept ou une image visualisée par un utilisateur à
une action réalisée par une ordinateur.
L’AR Drone étant un drone commandé par Wi-Fi, on peut
aisément lui envoyer des commandes depuis un
ordinateur à portée. Il est donc possible d’utiliser les
commandes générées par l’Interface Cerveau
Ordinateur pour le contrôler.
Il y a deux moyens de contrôler le drone. Le premier est
par mouvement imaginé, où il faut imaginer qu’on bouge
ces pieds ou mains pour contrôler le drone. L’autre est
l’imagination de concepts où l’on doit imaginer/visualiser
des objets évoquant des concepts qui correspondent à
des actions du drone.
Un contrôle complet du drone est possible : tourner à
gauche/droite, se déplacer latéralement à
droite/gauche, aller en avant/arrière, monter/descendre.
3/53PILOTAGE DE DRONE PAR UNE INTERFACE CERVEAU
ORDINATEUR
IMAGINATION CONCEPTUELLE
Imaginez le ciel pour décoller
Imaginez le sol pour atterrir
Restez dans un état neutre
pour avancer
4/53PILOTAGE DE DRONE PAR UNE INTERFACE CERVEAU
ORDINATEUR
MOUVEMENTS IMAGINES
Imaginez que vous bougez vos deux mains
pour décoller
Imaginez que vous bougez vos deux pieds
pour atterrir
Imaginez que vous bougez votre main
droite pour tourner à droite
Imaginez que vous bougez votre main
gauche pour tourner à gauche
5/53INSTALLATION
L’installation de la démonstration est simple : elle
nécessite uniquement une table, deux chaises, une prise
de courant ainsi que de quoi délimiter une zone d’à peu
près 5 mètres sur 5 mètres. Un des côtés de la clôture peut
être réservée pour garantir un accès facile aux caméras
et photographes.
6/53POINT BIO
Les démonstrations sont issues du travail de Nataliya
KOSMYNA. Elle a obtenu le grade de docteur en
informatique à l’Université Grenoble Alpes au sein de
l’équipe IIHM du Laboratoire d’informatique de Grenoble.
Elle travaille actuellement à Inria Rennes dans
l’équipe Hybrid.
Elle est boursière L’Oréal-UNESCO 2016 pour les Femmes
et la Science.
Elle est lauréate du Prix de thèse 2016 de la
communauté Université Grenoble Alpes.
Pour plus d’informations : consulter www.kosmina.eu
9/53MEET-UP « NOUVELLES INTELLIGENCES »
DE DASSAULT SYSTEMS
J’ai participé au Meet-Up « Nouvelles Intelligences » de
Dassault Systems le 07/07/2016. J’ai donné un exposé et
une démo de pilotage d’un drone par la pensée en
direct.
10/53TEDXVANNES, JUILLET 2016
J’ai donné un exposé sur les interfaces cerveau-
ordinateur à TEDxVannes, le 09/07/2016.
11/53TEDXFHKUFSTEIN, JUIN 2016
J’ai donné un exposé sur les interfaces cerveau-
ordinateur à TEDxFHKufstein ainsi q’une démo d’un droide
BB8 par la force de la pensée, le 24/06/2016.
12/53DEMONSTRATION POUR TEDXRENNES, JUIN 2016
Une démonstration du drone cérébral a été organisée le
04/06/2016 à TEDxRennes:
13/53DEMONSTRATIONS POUR LA SEMAINE DU SERVEAU 2016 AU
PALAIS DE LA DECOUVERTE
Une démonstration du drone cérébral pour les classes de
collège et lycée ainsi que tous publics a été organisée du
15 au 20 mars 2016 au Palais de la Découverte à Paris:
Crédit photos : N.Bogdanovska
14/53Crédit photos : N.Bogdanovska
15/53DEMONSTRATION POUR FOIRE DE PARIS 2016
Une démonstration du drone cérébral a été organisée du
30 avril au 01 mai 2016 à la Foire de Paris:
16/53DEMONSTRATION POUR « TROPHEES FUTUREMAG (ARTE) »
J’ai participé aux « Trophées de l’innovation » à
l’occasion de deux ans de FutureMag sur ARTE le 17
Février 2016. J’ai donné un exposé et une démo de
pilotage d’un drone par la pensée en direct.
http://www.arte.tv/magazine/futuremag/fr/nataliya-
kosmyna-pilote-des-objets-par-la-pensee-futuremag
17/53DEMONSTRATIONS POUR LA SEMAINE DU CERVEAU 2015
Nous avons organisé trois démonstrations à l’occasion de
la Semaine du Cerveau 2015 à Grenoble :
• Dans le hall Vercors de l’Hôpital Michalon
• Dans E.V.E. sur le domaine universitaire
• Dans le hall de l’hôpital couple enfant
Programme:
http://www.semaineducerveau.fr/2015/Villes/villes.php?vil
le=13.
Plus de 40 personnes on pris part à la démonstration et
plus de 300 spectateurs sont venus regarder. Les
démonstrations ont été couvertes par TéléGrenoble,
France 3 Alpes, France 3 Rhône Alpes, Le Dauphiné
Libéré, TéleMatin, Radio France Bleu Isère.
Pour plus d’informations et de photos :
http://www.kosmina.eu/brainy-drone/
À cette occasion nous avons préparé une affiche, un
prospectus ainsi qu’un patron de cerveau illustrant les
zones du cerveau à plier. Vous trouverez sur les pages
suivantes une version électronique de chacun des
éléments.
18/53DEMONSTRATION FESTIVAL REMUE MENINGES
Trois démonstrations on eu lieu lors du festival « Remue
Méninges 2015 » sur le thème « Pour les enfants : une
approche multithématique de la science », organisé du
07 au 10 Avril 2015 à la Salle des Fêtes d’Échirolles :
http://remuemeningesisere.free.fr
19/5320/53
DÉMONSTRATION “SHOW AND TELL DE PROJETS MAKERS”
Une démonstration du drone cérébral pour 300 managers
d’un groupement d’assurance le 26/01/2016 à Paris a été
organisée:
(Crédit photos : Makery France)
21/53DÉMONSTRATION TECHSHOP PARIS
Durant les portes ouvertes de TechShop Paris du 30
Octobre au 1 Novembre 2015, une démonstration du
drone cérébral a été organisée:
https://www.techshoplm.fr
22/53DÉMONSTRATION IMAGINASCIENCE ANNECY
Durant les rencontres de l’image scientifique pour la
jeunesse du 14 au 15 Octobre 2015, une démonstration
du drone cérébral a été organisée:
http://imaginascience.strikingly.com
23/53DÉMONSTRATION GRENOBLE MINI MAKER FAIRE
Durant les deux jours de la Mini Maker Faire de Grenoble
les 3 et 4 Octobre 2015, une démonstration du drone
cérébral a été organisée:
http://makerfairegrenoble.com/
24/5325/53
BRAIN HAT-vecto-HD.pdf 1 04/03/2015 21:59
26/53
C
M
J
CM
MJ
CJ
CMJ
N27/53
Affiche-ICO-Vecto-HD.pdf 1 04/03/2015 21:37
28/53
C
M
J
CM
MJ
CJ
CMJ
NDEMONSTRATION A LA CONFERENCE CHI 2014 A TORONTO
Dans le cadre de cette conférence internationale à la
pointe de l’innovation en terme d’Interaction Homme
Machine, le pilotage de drone a été présenté à un large
public de scientifiques, industriels et particuliers.
Une 40 aine de personnes ont pris part à la
démonstration, y compris la célèbre écrivaine de science
fiction, Margaret Atwood. Il y a eu des centaines de
spectateurs.
Plus de photos :
http://www.kosmina.eu/chi-interactivity-demonstration-
april-26th-to-may-1st-in-toronto/
À cette occasion une affiche de promotion fut proposée,
que vous trouverez ci-joint.
29/5330/53
DEMONSTRATION A LA CONFERENCE UBICOMP 2014 A
SEATTLE
À l’occasion de cette conférence annuelle mondiale de
premier ordre axée sur l’interaction omniprésente, nous
avons de nouveau présenté la démonstration drone.
Une 30 aine de personnes on pris part à la démonstration
et une 100 aine de spectateurs se sont rassemblés pour la
regarder.
Pour plus d’informations :
http://www.kosmina.eu/brainy-drone/
Nous avons réalisés un prospectus à cette occasion, que
vous trouverez sur la page suivante.
31/5332/53
33/53
PUBLICATIONS SCIENTIFIQUES
Les démonstrations ont nécessité un travail en amont qui
a mené à la publication d’articles scientifiques que ce
soit sur les mécanismes sous-jacent ou sur l’organisation
des démonstrations :
▪ N. Kosmyna, F. Tarpin-Bernard, and B. Rivet. 2015. Brains, computers,
and drones: think and control! ACM Interactions 22, 4 (June 2015),
44-47. DOI=10.1145/2782758
▪ N. Kosmyna, F. Tarpin-Bernard and B. Rivet. Towards Brain Computer
Interfaces for Recreational Activities: Piloting a Drone. 15th IFIP
TC.13 International Conference on Human-Computer Interaction
– INTERACT 2015 (à paraitre) Springer Berlin Heidelberg (2015).
Conférence de rang A+ (Classement CORE).
▪ N. Kosmyna, F. Tarpin-Bernard and B. Rivet. Adding Human Learning in
Brain Computer Interfaces (BCIs): Towards a Practical Control
Modality. ACM Trans. Comput.-Hum. Interact. (TOCHI) 22, 3,
Article 12 (May 2015), 37 pages. DOI=10.1145/2723162. Facteur
d’Impact: 1.37
▪ N. Kosmyna, F. Tarpin-Bernard and B. Rivet. Drone, Your Brain, Ring
Course: Accept the Challenge and Prevail! UBICOMP’14
ADJUNCT. 2014. 243-246. Conférence de rang A+ (Classement
CORE).
▪ N. Kosmyna, F. Tarpin-Bernard and B. Rivet. Bidirectional Feedback in
Motor Imagery BCIs: Learn to Control a Drone within 5 Minutes.
CHI’14 Extended Abstracts on Human Factors in Computing
Systems. 2014. 479-482.
Conférence de rang A+ (Classement CORE).
34/53COUVERTURE MEDIATIQUE
35/5336/53
Pour des informations détaillées et pour visionner des
extraits de presse voir :
http://www.kosmina.eu/fr/press-cover/
• « Le pouvoir du mental » à lire dans la version papier
du Quebec Science, décembre 2016.
• Un article de l’Agence France Presse sur mes travaux
est paru dans Le Parisien, Le Direct Matin, Sciences et
Avenir, TV5Monde 02/12/2016.
• « Diriger les objets par la pensée » en replay sur
France 3 Bretagne ici, novembre 2016.
• La force de la pensée sur mes sujets de recherches
au JT de M6 du 12/10/2016 en replay ici.
• Comment on contrôle les objets par la pensée à lire
dans 20 minutes par ici.
• Comment on contrôle un objet par la pensée en replay
sur E=M6 ici.
• Le journal “Capital” Hors-Série: est-q’on peut piloter
les objets par la pensée? 07/2016-08/2016
• L’interview avec moi sur France Inter le 04/07/2016:
“Agir par la pensée sur un objet connecté”
• Paris Match Hors-Série: « La révolution du
cerveau » on parle du contrôle d’un drone et d’un
droide BB8 par la pensée, 07/2016
37/53• Dans @01netMag on parle du contrôle d’un drone et
d’un droide BB8 par la pensée, le 01/06/2016-
10/06/2016
• Mon projet sur le pilotage d’un drone par la pensée
est expliqué au Petit JT (LCI TF1) le 26/03/2016
• L’interview avec moi sur France Inter le 19/03/2016:
Faire décoller un drone avec sa pensée
• « Piloter une machine par la pensée ». Mon projet est
expliqué sur iTELE le 17/03/2016
• L’interview avec moi en direct sur Radio Nova le
17/03/2016: Magie Blanche informatique
• « Piloter un drone par la pensée, ça n’est pas de la
science-fiction ». Mon projet est expliqué sur France 3
Paris IDF le 15/03/2016
• L’interview avec moi sur France Inter le 22 Février
2016: “Agir par la pensée sur un objet connecté”
• Article dans Ouest France, « L’edition du soir » du
19/01/2016 et en version papier du Ouest France du
20/01/2016
• Interview et Reportage « Nataliya Kosmyna pilote des
objets par la pensée » dans FutureMag – ARTE le 9
Janvier 2016
38/53• Interview sur TV5Monde dans le « JT des Nouvelles
Technos » : le contrôle des objets par la pensée, le
13 /12/2015
• Interview et Reportage sur la CAP Info de
TéléGrenoble le 9 Avril 2015
• Portrait d’Isére sur France Bleu Isère le 3 Avril 2015
• Reportage et Interview dans le Dauphiné Libéré le 20
Mars 2015
• Reportage sur France 3 Alpes le 18 Mars 2015
• Direct sur France 3 Rhône-Alpes le 17 Mars 2015
• Interview et Reportage sur la CAP Info de
TéléGrenoble le 13 Mars 2015
39/53EXTRAIT DE PRESSE : 20 MINUTES, OCTOBRE 2016
40/53EXTRAIT DE PRESSE : PARIS MATCH HORS-SERIE, JUILLET 2016
41/53EXTRAIT DE PRESSE : 01NETMAG, JUIN 2016
42/53EXTRAIT DE PRESSE : LA DAUPHINE LIBERE, MARS 2015
43/53EXTRAIT DE PRESSE : OUEST FRANCE, JANVIER 2016
44/53EXTRAIT DE PRESSE : MON QUOTIDIEN (10-14ANS), 2016
45/53LES ENDROITS
46/53AUTRES DEMONSTRATIONS : CONTROLE DE MAISON
INTELLIGENTE, PROTOTYPE « MINIKIT »
Pour InnoRobo 2015, un salon industriel annuel sur la
robotique à Lyon en France, J’ai fait une démonstration
de mon Interface Cerveau Ordinateur dans un nouveau
contexte: le contrôle d’un prototype “minikit” de maison
intelligente.
Le prototype comprenait une porte miniature, un
ventilateur et une lampe connectés à un boitier
openHab. Les utilisateurs pouvaient ouvrir/fermer la porte
et éteindre allumer le ventilateur et la lampe en
visualisant les concepts associés dans leurs têtes.
47/53AUTRES DEMONSTRATIONS : CONTROLE D’UN DROIDE BB-8
PAR LA FORCE DE LA PENSEE
Vous pourrez désormais utiliser la force de votre pensée
pour contrôler BB-8.
Vous devrez plus particulièrement imaginer différents
personnages de la saga ou des mouvements des
mains/pieds afin de contrôler le BB-8. Par exemple,
imaginez Poe Dameron pour faire venir le BB-8 vers vous.
Les pensées nécessaires au contrôle sont adaptés en
fonction que vous choisissez d’être du coté obscur ou du
côté de la lumière. Il est même possible d’y jouer à deux
dans un affrontement entre la lumière et le côté obscur
afin de gagner le contrôle sur l’autre. Si vous êtes curieux
sur le fonctionnement de tout cela, apprenez-en plus ici:
http://www.kosmina.eu/bb-8-demo/
48/53LES APPLICATIONS : DOOM3 PAR LA PENSEE ? OUI !
49/53LES APPLICATIONS : CONTROLE DE LA MAISON
INTELLIGENTE PAR LA PENSEE
50/53LES APPLICATIONS: LA REALITE VIRTUELLE
La force de vos pensées est en vous! Venez et déchaînez
la force de vos pensées pour contrôler le mythique
Millennium Falcon! Montez à bord, imaginez les
commandes et le Falcon vous obéis. Une expérience
immersive depuis l’intérieur du Falcon grace au casque
de réalité virtuelle Oculus Rift.
51/53LES APPLICATIONS: JOUEZ AU FOOT PAR LA PENSEE !
Il suffit une minute d’entraînement pour devenir un jouer
du foot qui se joue par la pensée! Imaginez un ballon de
foot pour le faire avancer. Imaginez un carton rouge pour
l’arrêter.
52/53Site principal : http://kosmina.eu
Le projet BRAINI : http://brainifr.com
53/53Vous pouvez aussi lire