Lodestar

Visuel de casque en réalité augmentée mixte

R&D / collaborative projects

LODESTAR (Live Operational Data Enhancement for Situational Awareness Through Augmented Reality) est un système soldat qui vise à donner au soldat des informations sur tout son environnement grâce à une panoplie de capteurs. Il évalue également l’état physiologique de l’utilisateur. Enfin, il a un objectif C4ISR qui consiste à informer le commandant du déroulement d’une mission en direct.

Il est constitué de 4 parties :

Zone tête : AR (réalité augmentée) HMSD-OST (helmet Mounted Sight Display – Optical See Through) avec caméras, IMU, LiDaR, écrans, capteurs physiologiques, casques, etc.
Zone torse : un nano calculateur porté sur le corps pour le traitement d’images, l’enregistrement, le streaming, le SLAM, le GNSS, la batterie, la radio, l’IHM, la reconnaissance de formes, de personnes, de mines, etc. grâce à l’IA.
Zone arme : optique, caméra, IMU, connectée sans fil à la zone torse (Ultra Wide Band (UWB))
Zone externe : drone avec système VSA (Visual Situation Awareness), connecté au soldat

Plus d’informations sur le fonds Européen de défense

Site dédié

Ce projet a été financé par le Fonds européen de défense (FED) dans le cadre de l’accord de subvention n° 101102526.

CHALLENGES

AR HMSD-OST (respectant les conditions SWaP) : la visière elle-même pour les affichages et l’optique restant furtive.
Rassembler le tout dans un seul calculateur (pour ne pas avoir différentes radios, différents calculateurs, etc.) Le tout dans une mini-boîte (pour éviter au soldat de transporter trop de composants)
Suivi du regard
Suivi de la tête en condition extérieure (pas de références fixes)
SLAM

PRINCIPALES CARACTERISTIQUES TECHNIQUES

Écran optique 8K à couleurs AR monté sur le casque (50pix/°)
Champ de vision ultra large (100° FoV)
Spatialisation de la voix (son 3D)
Lunette de tir thermique en coin
Contrôle de l’UAV/UGV compagnon
Processeur de vision IA haute performance pour la connaissance de la situation
Capteur de vision nocturne couleur HD (niveau 5 de l’OTAN)
Capteur d’image infrarouge thermique
Surveillance de la santé du soldat (cardio, activité cérébrale/stress/fatigue, transpiration, température)
Capteurs CBRN/environnement et navigation
Suivi du regard/suivi de la tête pour le contrôle et le ciblage à main levée