6G Matrix

AR & metaverse

Augmented reality legt een digitale laag over de straat: Apple schrijft dat de Vision Pro digitale inhoud mengt met de fysieke ruimte, Meta noemt Orion een prototype van zo’n bril.

In het kort

De Internationale Telecommunicatie-unie koppelt die laag aan netwerkwaarneming en digitale tweelingen. Meta levert één avatarsysteem over meerdere apps; andere diensten bouwen uit chatlogs een gesprekspartner die blijft praten na overlijden.

Apple Vision Pro “seamlessly blends digital content with your physical space”; Meta Orion noemt zich first true augmented reality glasses (product prototype). US 11,493,993 B2 (2022) noemt een pols-/onderarmband als bron van control information voor een augmented-reality-systeem. US 10,921,764 B2 (2021) stuurt een fysiek object — een IoT-apparaat — via neuromusculaire sensors, direct of via AR/XR. Next-gen Meta Avatars zijn één lichaam- en gezichtslaag over meerdere apps. Replika-achtige apps maken een praatbare kopie uit chat; hun voorwaarden claimen ruime licenties op die tekst. Project December en VR-rouwprojecten gebruiken dezelfde logs nadat iemand is overleden.

8 onderbouwingen
01 · FEIT

Houding, gebaar, voetganger

In §3 van Recommendation ITU-R M.2160-0 (november 2023), onder het gebruiksscenario Integrated Sensing and Communication, somt de ITU typische use cases op: navigatiehulp, activity detection and movement tracking (houding/gebaar, val, voertuig/voetganger), milieumonitoring, en sensing-data voor AI, XR en digital twins. Dat is een ontwerpvisie, geen uitgerolde meetplicht op elke mast.

«Typical use cases include IMT-2030 assisted navigation, activity detection and movement tracking (e.g. posture/gesture recognition, fall detection, vehicle/pedestrian detection), environmental monitoring (e.g. rain/pollution detection), and provision of sensing data/information on surroundings for AI, XR and digital twin applications.»
02 · FEIT

Een laag over de wereld

Apple Vision Pro en Meta’s AR-roadmap plaatsen een renderlaag tussen oog en straat. Wie de laag beheert, beheert wat zichtbaar blijft.

«Vision Pro seamlessly blends digital content with your physical space.»
03 · FEIT

Apple 2023: Vision Pro als spatial computer

Apple noemt Vision Pro in het newsroom-bericht van 5 juni 2023 de eerste spatial computer van het bedrijf: een apparaat dat digitale inhoud met de fysieke wereld mengt terwijl de gebruiker aanwezig en verbonden blijft. Spatial computing is hier hun productnaam voor rekenen in de ruimte om je heen, niet een wettelijke term. Dat is een productlancering, geen EU-definitie van de metaverse.

«Apple today unveiled Apple Vision Pro, a revolutionary spatial computer that seamlessly blends digital content with the physical world, while allowing users to stay present and connected to others.»
04 · IN ONTWIKKELING

Orion: bril als interface

Meta toont Orion als bril die de wereld van labels voorziet. De hyperscaler wordt de lens.

«Introducing Orion, Our First True Augmented Reality Glasses»
05 · FEIT

Meta-grant: neuromusculaire input via wearable polsband

Meta Platforms Technologies’ verleende patent US11493993B2 (Active, 8 nov 2022) beschrijft een computer-implemented method en wearable met neuromusculaire sensors die signalen van de gebruiker interpreteren als inputcommando’s t.o.v. een sensory cue in de UI — expliciet o.a. een pols-/onderarmband met zestien EMG-sensors, sturing van augmented reality, en (claim 15) IoT-apparaten. Geen implantaat in deze primary.

«The disclosed computer-implemented method may include presenting, via a user interface, a sensory cue, and receiving, from neuromuscular sensors of a wearable device, various neuromuscular signals generated by a user wearing the wearable device, where the user generates the neuromuscular signals in response to the sensory cue being presented to the user via the user interface. The method may also include interpreting the received neuromuscular signals as input commands with respect to the sensory cue provided by the user interface, such that the input commands initiate performance of specified tasks within the user interface. The method may also include performing the specified tasks within the user interface according to the interpreted input commands.»
06 · FEIT

CTRL-Labs/Meta-grant: spiersignaal stuurt fysieke objecten

Verleend patent US10921764B2 (Active, 16 feb 2021; CTRL-Labs → Facebook/Meta) beschrijft neuromusculaire sturing van operaties van een fysiek object (expliciet IoT) in de omgeving van de gebruiker via wearable neuromuscular sensors, direct of via een AR/XR-systeem.

«Some embodiments are directed to techniques for providing neuromuscular control of one or more operations of a physical object (e.g., an IoT device) in a user's environment. As described in more detail below, one or more wearable devices having neuromuscular sensors are configured to detect and/or record a plurality of neuromuscular signals. The detected and/or recorded neuromuscular signals are interpreted by one or more computer processors to provide for selection of an object in the user's environment and/or to control an operation of an object in the user's environment subsequent to its selection.»
07 · FEIT

Commissie 2023: virtuele werelden als persistente XR-omgevingen

In de mededeling COM(2023) 442 van 11 juli 2023, An EU initiative on Web 4.0 and virtual worlds, definieert de Europese Commissie virtuele werelden als persistente, meeslepende omgevingen op basis van onder meer 3D en extended reality, XR: een verzamelnaam voor augmented, mixed en virtual reality. Die omgevingen moeten fysieke en digitale werelden in realtime kunnen mengen, voor ontwerp, simulatie, samenwerking, leren, socialiseren, transacties of vermaak. Dat is een beleidsdefinitie, geen productclaim van één platform.

«Virtual worlds are persistent, immersive environments, based on technologies including 3D and extended reality (XR), which make it possible to blend physical and digital worlds in real-time, for a variety of purposes such as designing, making simulations, collaborating, learning, socialising, carrying out transactions or providing entertainment.»
08 · FEIT

Parlement 2024: ‘metaverse’ heeft nog geen vaste definitie

Het Europees Parlement stelt in resolutie P9_TA(2024)0029 van 17 januari 2024 dat de begrippen ‘metaverse’ en ‘virtual world’ nog geen geconsolideerde definities hebben. Het verwelkomt vervolgens de definitie uit de Commissie-mededeling over persistente, meeslepende omgevingen. Een resolutie, geen wet: het Parlement stelt een lacune vast en wijst naar de Commissie-tekst.

«Notes that the concepts of ‘metaverse’ and ‘virtual world’ currently lack consolidated definitions;»
Stemmen
Spiegels
01 · SPIEGEL

Fahrenheit 451 (1966)

Regie: François Truffaut

«There must be something in books, things we can't imagine.»
Bronnen

Apple · 2

ITU · 2

USPTO · 2

Meta

Europese Commissie

Europees Parlement