Microsoft HoloLens - Microsoft HoloLens
 | |
 L'HoloLens
| |
| Aussi connu sous le nom | Projet Baraboo (en développement) |
|---|---|
| Développeur | Microsoft |
| Fabricant | Microsoft |
| Famille de produits | Windows 10 |
| Taper | Réalité mixte réalité augmentée visiocasque smartglasses |
| Génération | 2 |
| Date de sortie | |
| Prix de lancement | 3 000 $ 5 000 $ (Suite commerciale) |
| Système opérateur | Réalité mixte Windows |
| CPU | Intel 32 bits (1 GHz ) |
| Mémoire | |
| Espace de rangement | 64 Go ( mémoire flash ) |
| Affichage | 2,3 mégapixels grand écran visiocasque |
| Sonner | Technologie sonore spatiale |
| Saisir | |
| Entrée du contrôleur | Commandes gestuelles via capteurs et HPU |
| Caméra | 2,4 MP |
| Pavé tactile | Panneau latéral. |
| Connectivité | |
| Plate-forme | Windows 10 |
| Masse | 579 g (1,28 lb ) |
| Successeur | HoloLens 2 |
| Site Internet | Site officiel |
Microsoft HoloLens , connu sous le nom de Project Baraboo , est une paire de lunettes intelligentes à réalité mixte développée et fabriquée par Microsoft . HoloLens a été le premier visiocasque exécutant la plate-forme Windows Mixed Reality sous le système d'exploitation Windows 10 . La technologie de suivi utilisée dans HoloLens peut retracer sa lignée jusqu'à Kinect , un module complémentaire pour la console de jeu Xbox de Microsoft qui a été introduit en 2010.
La version de pré-production d'HoloLens, l'édition de développement, a été expédiée le 30 mars 2016 et s'adresse aux développeurs aux États-Unis et au Canada pour un prix catalogue de 3 000 $. Samsung et Asus ont étendu une offre à Microsoft pour les aider à produire leurs propres produits de réalité mixte, en collaboration avec Microsoft, basés sur le concept et le matériel sur HoloLens. Le 12 octobre 2016, Microsoft a annoncé l'expansion mondiale de HoloLens et a annoncé que HoloLens serait disponible en précommande en Australie, en Irlande, en France, en Allemagne, en Nouvelle-Zélande et au Royaume-Uni. Il existe également une suite commerciale (similaire à une édition professionnelle de Windows), avec des fonctionnalités d'entreprise, telles que la sécurité BitLocker. En mai 2017, The Suite s'est vendu pour 5 000 $ US. Microsoft a décidé de louer les Hololens sans que les clients ne fassent l'intégralité de l'investissement. Microsoft s'associe à une société appelée Abcomrents pour offrir le service de location Hololens.
HoloLens 2 a été annoncé lors du Mobile World Congress (MWC) à Barcelone, en Espagne, le 24 février 2019 et était disponible en précommande à 3 500 $ US.
La description
Les HoloLens est un affichage monté sur la tête unité connectée à un réglage, arceau intérieur rembourré, qui peut basculer HoloLens de haut en bas, ainsi que vers l' avant et vers l' arrière. Pour porter l'appareil, l'utilisateur ajuste l'HoloLens sur sa tête, à l'aide d'une molette de réglage à l'arrière du bandeau pour le fixer autour de la couronne, soutenant et répartissant le poids de l'appareil de manière égale pour plus de confort, avant d'incliner la visière vers l'avant des yeux.
L'avant de l'unité abrite de nombreux capteurs et le matériel connexe, y compris les processeurs, les caméras et les objectifs de projection. La visière est teintée ; enfermée dans la pièce de visière se trouve une paire de lentilles de combinaison transparentes , dans lesquelles les images projetées sont affichées dans la moitié inférieure. L'HoloLens doit être calibré en fonction de la distance interpupillaire (IPD) ou de la vision habituelle de l'utilisateur.
Le long des bords inférieurs du côté, situés près des oreilles de l'utilisateur, se trouvent une paire de petits haut-parleurs audio 3D rouges . Les haut-parleurs, en concurrence avec les systèmes audio classiques, n'obstruent pas les sons externes, permettant à l'utilisateur d'entendre les sons virtuels, ainsi que l'environnement. En utilisant des fonctions de transfert liées à la tête , l'HoloLens génère un son binaural , qui peut simuler des effets spatiaux ; ce qui signifie que l'utilisateur, virtuellement, peut percevoir et localiser un son, comme s'il provenait d'un point ou d'un emplacement virtuel.
Sur le bord supérieur se trouvent deux paires de boutons : les boutons de luminosité de l'écran au-dessus de l'oreille gauche et les boutons de volume au-dessus de l'oreille droite. Les boutons adjacents sont de forme différente - un concave, un convexe - afin que l'utilisateur puisse les distinguer au toucher.
À l'extrémité du bras gauche se trouve un bouton d'alimentation et une rangée de cinq petits nœuds LED individuels, utilisés pour indiquer l'état du système, ainsi que pour la gestion de l'alimentation , indiquant le niveau de la batterie et définissant le mode d' alimentation/ veille . Une prise USB 2.0 micro-B est située le long du bord inférieur. Une prise audio de 3,5 mm est située le long du bord inférieur du bras droit.
Matériel
L'HoloLens comprend une unité de mesure inertielle (IMU) (qui comprend un accéléromètre , un gyroscope et un magnétomètre ), quatre capteurs de « compréhension de l'environnement » (deux de chaque côté), une caméra de profondeur écoénergétique avec un angle de 120 x 120 ° view , une caméra vidéo photographique de 2,4 mégapixels, un réseau de quatre microphones et un capteur de lumière ambiante .
En plus d'un SoC Intel Cherry Trail contenant le CPU et le GPU , HoloLens dispose d'une unité de traitement holographique (HPU) Microsoft sur mesure, un coprocesseur fabriqué spécifiquement pour HoloLens par Microsoft. Le SoC et le HPU ont chacun 1 Go de LPDDR3 et partagent 8 Mo de SRAM , le SoC contrôlant également 64 Go d' eMMC et exécutant le système d'exploitation Windows 10 . Le HPU utilise 28 personnalisés DSPs de Tensilica à traiter et intégrer les données provenant des capteurs, ainsi que les tâches de manipulation telles que la cartographie spatiale, la reconnaissance des gestes et la voix et la reconnaissance vocale . Selon Alex Kipman , le HPU traite « des téraoctets d'informations », un participant a estimé que le champ de vision d'affichage des unités de démonstration était de 30° × 17,5°. Dans une interview à l' Electronic Entertainment Expo 2015 en juin, le vice-président de Microsoft Next-Gen Experiences, Kudo Tsunoda, a indiqué qu'il est peu probable que le champ de vision soit significativement différent lors de la sortie de la version actuelle.
Le HoloLens contient une batterie interne rechargeable, avec une durée de vie moyenne évaluée à 2 à 3 heures d'utilisation active, ou 2 semaines en veille. Le HoloLens peut être utilisé pendant la charge.
HoloLens est doté d' une connectivité sans fil IEEE 802.11ac Wi-Fi et Bluetooth 4.1 Low Energy (LE). Le casque utilise Bluetooth LE pour s'associer au Clicker inclus, un périphérique d'entrée de la taille d'un pouce qui peut être utilisé pour le défilement et la sélection de l' interface . Le Clicker dispose d'une surface cliquable pour la sélection et d'un capteur d'orientation qui permet des fonctions de défilement via l'inclinaison et le panoramique de l'unité. Le Clicker dispose d'une boucle élastique pour tenir l'appareil et d'une prise USB 2.0 micro-B pour charger sa batterie interne.
Applications
En 2016, un certain nombre d'applications de réalité augmentée ont été annoncées ou présentées pour Microsoft HoloLens. Une collection d'applications sera fournie gratuitement aux développeurs qui achètent Microsoft HoloLens Developer Edition. Les applications disponibles au lancement incluent :
- Cortana , l'assistant virtuel de Microsoft.
- Hologrammes, un catalogue d'une variété d'objets 3D que les utilisateurs peuvent placer et mettre à l'échelle autour d'eux ; allant des tigres et des chats aux navettes spatiales et aux planètes.
- HoloStudio, une application de modélisation 3D à grande échelle de Microsoft avec compatibilité d'impression 3D.
- CAE VimedixAR est une application commerciale de la technologie Microsoft HoloLens qui permet une formation immersive basée sur la simulation en échographie et en éducation anatomique grâce à la réalité augmentée pour une sécurité accrue des patients et un apprentissage amélioré.
- Une implémentation de l' application de télécommunications Skype par Microsoft. Tout utilisateur avec Skype sur ses appareils habituels comme un PC, un mobile, etc. peut appeler l'utilisateur sur HoloLens et communiquer entre eux. Avec l'appel vidéo activé, l'utilisateur sur PC verra la vue que l'utilisateur HoloLens voit et l'utilisateur HoloLens verra la vue capturée par la caméra de l'utilisateur du PC / appareil mobile.
- HoloTour, un développeur d'applications audiovisuelles de tourisme virtuel en trois dimensions par Microsoft et Asobo Studio.
- Fragments, un jeu d'aventure policier high-tech développé par Microsoft et Asobo Studio , dans lequel le joueur s'engage dans la résolution de crimes.
- Young Conker , un jeu de plateforme développé par Microsoft et Asobo Studio, mettant en scène une jeune version de Conker the Squirrel .
- RoboRaid (auparavant nom de code "Project X-Ray"), un jeu de tir à la première personne en réalité augmentée de Microsoft dans lequel le joueur se défend contre une invasion de robots, vise l'arme par le regard et tire via le bouton Clicker ou un air robinet.
- Actiongram, une application de mise en scène et d'enregistrement de courts clips vidéo de présentations simples en réalité mixte utilisant des ressources virtuelles 3D prédéfinies, sortira à l'été 2016 aux États-Unis et au Canada.
- En novembre 2018, Microsoft a annoncé qu'il préparait HoloLens pour le combat. La société a remporté un contrat militaire de 480 millions de dollars avec le gouvernement américain pour intégrer la technologie des casques AR dans le répertoire d'armes des soldats américains.
Les autres applications annoncées ou présentées pour HoloLens incluent :
- Un programme interactif numérique d' anatomie humaine et de neuroanatomie de la Case Western Reserve University et de la Cleveland Clinic
- Outils de conception de logiciels d' ingénierie architecturale , SketchUp Viewer de Trimble Navigation a été la première application HoloLens disponible dans le commerce
- Une version du jeu vidéo Mojang Minecraft
- Fonctionnalité étendue pour l' application de création Autodesk Maya 3D
- OnSight et Sidekick , projets logiciels développés par une collaboration entre la NASA et Microsoft pour explorer des applications de réalité mixte dans l'exploration spatiale Développé en collaboration avec JPL, OnSight intègre les données du rover Curiosity dans une simulation 3D de l'environnement martien, que les scientifiques du monde entier peuvent visualiser, interagir avec et collaborer ensemble à l'aide d'appareils HoloLens. OnSight peut être utilisé dans la planification de mission, les utilisateurs pouvant programmer les activités du rover en regardant une cible dans la simulation et en utilisant des gestes pour afficher et sélectionner des commandes de menu. Le JPL prévoit de déployer OnSight dans les opérations de la mission Curiosity , en l'utilisant pour contrôler les activités du rover d'ici juillet 2015.
- FreeForm, un projet conjoint entre Autodesk et Microsoft intégrant HoloLens avec l' application de développement 3D basée sur le cloud Autodesk Fusion 360
- Galaxy Explorer , une application éducative sur la Voie Lactée en développement par Microsoft Studios , pitchée et choisie par la communauté des développeurs via la campagne Share Your Idea , et qui sera open source une fois terminée
- Une application de conception/visualisation de vaisseau spatial en cours de développement par le Jet Propulsion Laboratory (JPL) de la NASA
- En novembre 2015, Volvo et Microsoft ont exposé une version prototype du système HoloLens au siège de Microsoft à Redmond en utilisant la berline de luxe S90 comme sujet.
- CAE VimedixAR, le premier simulateur de formation aux ultrasons intégré à HoloLens qui permet aux apprenants en soins de santé d'interagir avec des hologrammes 3D de structures humaines internes et d'acquérir des compétences en anatomie.
- Holoportation , un nouveau type de technologie de capture 3D qui permet de reconstruire , compresser et transmettre des modèles 3D de personnes de haute qualité partout dans le monde en temps réel. Lorsqu'elle est combinée avec des écrans de réalité mixte tels que Hololens, cette technologie permet à l'utilisateur de voir, d'entendre et d'interagir avec des participants distants en 3D comme s'ils étaient réellement présents dans le même espace physique. Communiquer et interagir avec des utilisateurs distants devient aussi naturel que la communication en face à face.
- HoloSurg, en avril 2017, une équipe de chirurgiens en Espagne, a utilisé l' outil de réalité mixte pour opérer un patient atteint d'une tumeur musculaire maligne, en utilisant le casque pour visualiser les informations d'IRM et de radiographie pendant la chirurgie.
- Assistance à distance Microsoft Dynamics 365 ; peut être combiné avec Microsoft Teams pour envoyer un flux vidéo en direct sécurisé sur un écran d'ordinateur dans une pièce à proximité
- Dawn Chorus par l'artiste Sarah Meyohas. Une expérience de réalité mixte combinant numériquement rendus oiseaux et arrangement musical algorithmique Dawn Chœur fusionne les technologies de HoloLens avec le Disklavier Yamaha piano ,
Interface
HoloLens, grâce à l'utilisation du HPU, utilise des commandes d'interface sensuelles et naturelles - regard, geste et voix - parfois appelées entrées "GGV". Les commandes de regard, telles que le suivi de la tête, permettent à l'utilisateur d'orienter l'application vers tout ce que l'utilisateur perçoit. Les « éléments » – ou toute application ou bouton virtuel – sont sélectionnés à l'aide d'une méthode de prise d'air, similaire au clic d'une souris d'ordinateur imaginaire . Le robinet peut être maintenu pour une simulation de glissement pour déplacer un élément, ainsi que des commandes vocales pour certaines commandes et actions.
Le shell HoloLens reprend et adapte de nombreux éléments de l' environnement de bureau Windows . Un geste "bloom" pour accéder à la coque (remplir une fonction similaire à celle d'appuyer sur une touche Windows sur un clavier ou une tablette Windows, ou le bouton Xbox sur une manette Xbox One ) est effectué en ouvrant la main, les doigts écartés avec la paume vers le haut . Les fenêtres peuvent être déplacées vers une position particulière, ainsi que redimensionnées. Des éléments virtuels tels que des fenêtres ou des menus peuvent être « épinglés » à des emplacements, des structures physiques ou des objets dans l'environnement ; ou peut être "porté" ou fixé par rapport à l'utilisateur, suivant l'utilisateur dans ses déplacements. Les barres de titre des fenêtres d'application ont un titre à gauche et des boutons pour les fonctions de gestion des fenêtres à droite.
En avril 2016, Microsoft a créé l'application Microsoft HoloLens pour les PC Windows 10 et les appareils Windows 10 Mobile , qui permet aux développeurs d'exécuter des applications, d'utiliser leur téléphone ou le clavier de leur PC pour taper du texte, afficher un flux en direct du point de vue de l'utilisateur HoloLens, et capturez à distance des photos et des vidéos de réalité mixte.
Développement d'applications pour HoloLens
Microsoft Visual Studio est un IDE qui peut être utilisé pour développer des applications (à la fois 2D et 3D) pour HoloLens. Les applications peuvent être testées à l'aide de l'émulateur HoloLens (inclus dans Visual Studio 2015 IDE) ou HoloLens Development Edition.
Applications 2D
HoloLens peut exécuter presque toutes les applications de la plate-forme Windows universelle . Ces applications apparaissent sous forme de projections 2D. Toutes les API Windows 10 ne sont actuellement pas prises en charge par HoloLens, mais dans la plupart des cas, la même application est capable de s'exécuter sur tous les appareils Windows 10 (y compris HoloLens), et les mêmes outils qui sont utilisés pour développer des applications pour Windows PC ou Windows Phone peuvent être utilisé pour développer une application HoloLens.
applications 3D
Les applications 3D, ou applications « holographiques », utilisent les API holographiques de Windows. Microsoft recommande le moteur Unity et Vuforia pour créer des applications 3D pour HoloLens, mais il est également possible pour un développeur de créer son propre moteur à l'aide des API DirectX et Windows .
Critique
En novembre 2018, Microsoft a obtenu un contrat pour la fourniture de 100 000 lunettes HoloLens MR, d'une valeur de 479 millions de dollars, à l'armée américaine. Les lunettes MR sont destinées à fournir « une létalité, une mobilité et une connaissance de la situation accrues nécessaires pour obtenir une surmatch contre [...] les adversaires actuels et futurs ».
Juste avant l'ouverture de l'une des plus grandes conférences technologiques internationales - le GSMA Mobile World Congress 2019 à Barcelone - cinquante employés de Microsoft ont écrit une lettre à leur PDG Satya Nadella et au président Brad Smith déclarant qu'ils "refusaient de développer des technologies pour la guerre et l'oppression". . Ils ont exigé que la direction de l'entreprise résilie le contrat.
Voir également
Remarques
Les références
Liens externes
- Site officiel
- Signer, Beat & Curtin, Timothy J. (2017). Tangible Holograms: Towards Mobile Physical Augmentation of Virtual Objects , Rapport technique WISE Lab, WISE-2017-01, mars 2017.