本文件定义了一个用于表示和控制MAR场景中的单个LAE或多个LAE的参考模型和基本构成，定义了概念、参考模型、系统框架、功能以及如何集成2D/3D虚拟世界和LAEs以及它们之间的接口，以便为MAR应用程序提供LAEs的接口，还定义了在基于LAE的MAR应用程序之间传输和存储LAE相关数据所需的交换格式。 本文件具体说明了以下功能： a)　MAR中LAE的定义； b)　LAE的表示； c)　LAE属性的表示； d)　LAE在物理世界的感知； e)　将LAE集成到2D/3D虚拟场景中； f)　在2D/3D虚拟场景中LAE与对象之间的交互； g)　在MAR场景中传输与LAE相关的信息。 本文件定义了一种基于LAE表示的MAR应用的参考模型，用于MAR场景中2D/3D虚拟场景中的LAE相关的数据的表示和交换。它没有定义操作LAE所必需的特定物理接口，也就是说，它没有定义特定应用程序如何在MAR场景中实现特定LAE的方式，而是定义了用于表示能在MAR应用程序之间互换使用LAE的通用功能接口。

ICS35.240
CCS L81
中华人民共和国国家标准
GB/T44020—2024/IS0/IEC18040:2019信息技术
数据表示
计算机图形图像处理和环境
混合与增强现实中实时人物
肖像和实体的表示
InformationtechnologyComputer graphics,imageprocessing andenvironmental data representationLive actor and entity representationinmixed andaugmented reality(MAR)(ISO/IEC18040:2019IDT)
2024-04-25发布
国家市场监督管理总局
国家标准化管理委员会
2024-11-01实施
规范性引用文件
术语和定义、缩略语
术语和定义
缩略语
MAR中LAE表示的概念
5LAE捕获器和传感器
计算视图
信息视图·
LAE的追踪器和空间映射器
计算视图…
信息视图…
MAR中LAE跟踪和空间映射的实例7LAE的识别器和事件映射器
识别器
事件映射器
事件执行：
在MAR中的LAE识别和事件映射的实例7.5
8LAE场景表示
场景描述
染器·
计算视图·
信息视图
显示器与用户界面
GB/T44020—2024/ISO/IEC18040:201910
GB/T44020—2024/ISO/IEC18040:201911
虚拟演员和实体的扩展
系统性能
安全性
一致性
附录A（资料性）
用例样例.
3D虚拟工作室
在MAR场景中LAE的事件映射
通过LAE动作对MAR场景中的虚拟对象进行交互式控制用特殊效果增强对象
3D虚拟会议
参考文献
本文件按照GB/T1.1一2020《标准化工作导则起草。
GB/T44020—2024/ISO/IEC18040:2019第1部分：标准化文件的结构和起草规则》的规定本文件等同采用ISO/IEC18040：2019《信息技术计算机图形图像处理和环境数据表示混合与增强现实中实时人物肖像和实体的表示》。请注意本文件的某些内容可能涉及专利。本文件的发布机构不承担识别专利的责任。本文件由全国信息技术标准化技术委员会（SAC/TC28)提出并归口。本文件起草单位：中国电子技术标准化研究院、江南大学、深圳赛西信息技术有限公司、浙江商汤科技开发有限公司、南昌虚拟现实研究院股份有限公司、之江实验室、小米通讯技术有限公司、重庆大学、无锡车联天下信息技术有限公司、深圳市8K超高清视频产业协作联盟。本文件主要起草人：赵洪良、王映辉、耿一丹、梁炎兴、邱薄业、张少杰、朱博成、梁继允、冯南飞，蒋慧、孙其民、罗志平、刘彦林、李亚健、豆子飞、李国盛、李婧欣、曹策、曹霖、向涛、肖宏飞、陈健华、黄剑榕、杨坤华、乐鹏辉、陈琪康、李士骥、杨嘉欣。GB/T44020—2024/ISO/IEC18040:2019引言
本文件定义了包含在混合与增强现实（MAR）世界中的实时人物肖像和实体（LAE）的表示模型的范围和关键概念。相关术语、定义以及一个通用的系统架构共同构成作为MAR应用、构件、系统、服务和规范的参考模型。本文件定义了在MAR场景中LAE的表示和道染，以及LAE和MAR场景中对象之间的交互接口，为LAE定义了一组适用于所有当前和未来的MAR标准的原则、概念和功能。该参考模型规定了所必需的功能模块、基本功能要求、相关的信息内容以及应由兼容的MAR系统提供和(或）支持的信息模型。包括(但不限于)以下内容：混合与增强现实标准领域和概念的介绍；MAR场景中LAE的表示模型；
-MAR场景中LAE的3D建模、谊染和仿真；-MAR场景中LAE的属性；
-MAR场景中LAE的传感表示；
MAR场景中用于控制LAE的接口表示；-MAR场景中用于控制LAE的功能和基本构件；-LAE和MAR场景之间的交互接口；一与其他MAR构件的接口；
一与其他标准的关系；
用例。
本文件的目标如下：
一为基于LAE表示的MAR应用提供参考模型；一在MAR环境中利用LAE的属性对其进行管理和控制；在MAR场景中将LAE集成到的2D和（或)3D虚拟场景中；一在MAR场景中实现LAE与2D和（或）3D虚拟场景的交互；提供（基于LAE的)MAR应用程序之间传输和存储数据所需的交换格式。本文档具有以下文档结构：
一第4章描述了MAR中表示的基于LAE的系统的概念；一第5章说明了传感器如何在物理世界和虚拟世界中捕获LAE；第6章描述了跟踪LAE位置的机制，并规定了物理空间和MAR空间之间的空间映射器的作用；
第7章描述了识别LAE行为的机制，并规定了LAE的MAR事件与MAR内容创建者指定的条件之间的关联或事件；
一第8章描述了一个面向LAE的场景，它由虚拟场景、传感数据、空间场景、事件、目标等组成；一第9章描述了MAR场景系统如何煊染场景、LAE映射、事件等，以便在给定的显示设备上进行呈现输出；
第10章描述了显示器的类型，包括监视器、头戴式显示器、投影仪、触觉设备和声音输出设备，用于在MAR场景中显示LAE；第11章识别并描述虚拟LAE，例如虚拟3D模型（虚拟化身）和虚拟LAE（例如MAR系统中的真实人体模型）；
GB/T44020—2024/IS0/IEC18040:2019一第12章针对MAR中LAE的任何与系统性能有关的问题进行声明；一第13章针对MAR中LAE的任何与操作安全相关的问题进行声明；一第14章针对MAR中LAE的任何与一致性相关的问题进行声明；一附录A给出了MAR中具有代表性的LAE表示系统的实例。V
1范围
GB/T44020—2024/IS0/IEC18040:2019信息技术计算机图形图像处理和环境数据表示
混合与增强现实中实时人物
肖像和实体的表示
本文件定义了二个用于表示和控制MAR场景中的单个LAE或多个LAE的参考模型和基本构成，定义了概念、参考模型、系统框架、功能以及如何集成2D/3D虚拟世界和LAEs以及它们之间的接口，以便为MAR应用程序提供LAEs的接口，还定义了在基于LAE的MAR应用程序之间传输和存储LAE相关数据所需的交换格式。本文件具体说明了以下功能：
a）MAR中LAE的定义；
b）LAE的表示；
c）LAE属性的表示；
LAE在物理世界的感知；
将LAE集成到2D/3D虚拟场景中；在2D/3D虚拟场景中LAE与对象之间的交互；f）
g）在MAR场景中传输与LAE相关的信息。本文件定义了一种基于LAE表示的MAR应用的参考模型，用于MAR场景中2D/3D虚拟场景中的LAE相关的数据的表示和交换。它没有定义操作LAE所必需的特定物理接口，也就是说，它没有定义特定应用程序如何在MAR场景中实现特定LAE的方式，而是定义了用于表示能在MAR应用程序之间互换使用LAE的通用功能接口。2
规范性引用文件
下列文件中的内容通过文中的规范性引用而构成本文件必不可少的条款。其中，注日期的引用文件，仅该日期对应的版本适用于本文件；不注日期的引用文件，其最新版本（包括所有的修改单）适用于本文件。
ISO/IEC18039信息技术计算机图形、图像处理和环境数据表示混合与增强现实（MAR)参考模型[InformationtechnologyComputergraphics，imageprocessingand environmental datarepresentation-Mixedand augmented reality(MAR)referencemodel)3术语和定义、缩略语
3.1术语和定义
ISO/IEC18039界定的以及下列术语和定义适用于本文件。3.1.1
增强对象
augmented object
增强的对象。
GB/T44020—2024/ISO/IEC18040:20193.1.2
地理坐标系geographiccoordinatesystem由传感器设备提供的用于确定LAE（3.1.4)位置的坐标系。3.1.3
头戴式显示器headmounteddisplay；HMD显示虚拟现实立体视图的设备
注：它有两个小显示屏，带透镜和半透明镜，能适应左右眼3.1.4
实时人物肖像和实体
live actor and entity;LAE
在MAR内容或系统中对有生命的物理对象或真实对象的表示，例如人类、动物或鸟类等。注：通过从相机捕获手势动作，实时人物肖像能在MAR场景中与虚拟对象进行动画、移动与交互：实体是指MAR内容中存在的3D对象和实体
LAErecognizer
LAE识别器
识别LAE捕获器（3.1.6）和LAE传感器的输出，然后根据内容创建者指示的条件生成MAR事件的MAR构件。
LAEcapturer
LAE捕获器
在虚拟世界和物理世界中捕获LAE（3.1.4)的MAR构件，包括深度相机、通用相机、360°相机等。注：LAE的信息能由LAE识别器和LAE追踪器处理，以提取背景或骨架。3.1.7
LAE追踪器
LAEtracker
分析来自LAE捕获器（3.1.6）和传感器的信号，以及提供被跟踪LAE（3.1.4)的一些特性（例如位置、方向、振幅、轮廓）的MAR构件（包括硬件和软件）。3.1.8Www.bzxZ.net
物理相机坐标系
physical camera coordinate system由相机提供的用于捕获物理世界中LAE(3.1.4)的坐标系。3.1.9
physical coordinate system
物理坐标系
能够定位LAE(3.1.4)并由地理空间坐标系传感设备控制的坐标系。3.1.10
虚拟演员和实体
virtual actorandentity;VAE
LAE（3.1.4)的虚拟现实表示。
注：虚拟演员和实体是通过3D捕获技术获得的，能在MAR场景中进行重建、传输或压缩。虚拟演员和实体能在本地捕获，也能使用全息技术实时传输到另一个地方。3.1.11
worldcoordinatesystem
世界坐标系
在计算机图形学中，允许模型坐标系相互交互的通用系统。3.2
缩略语
下列缩略语适用于本文件。
DDR：劲舞革命（dancedancerevolution）EID：事件标识符（eventidentifier）FOV：视场角（fieldofview）
GB/T44020—2024/ISO/IEC18040:2019GNSS：全球导航卫星系统（globalnavigationsatellitesystem）LAE-MAR：混合与增强现实（MAR）中的实时人物肖像和实体表示（liveactorandentityrepresen-tation in mixed and augmented reality)RGB：红、绿、蓝（red，green，blue）SDK：软件开发工具包（softwaredevelopmentkit）SID：传感器标识符（sensoridentifier）Ul：用户界面（userinterface）UTM：通用横轴墨卡托投影（universaltransversemercator）VR：虚拟现实（virtualreality）4MAR中LAE表示的概念
4.1概述
如ISO/IEC18039中所示，MAR代表了一个连续体，它涵盖了作为其主要表示媒介的现实（例如，实时视频)和虚拟表示（例如，计算机图形对象或场景）的组合1:21的所有域或系统。根据图1所示，MAR是根据现实和虚拟的混合表示进行定义的，不包括纯真实环境和LAE视角的纯虚拟环境。真实环境是指LAE和物理对象所在的物理世界环境。虚拟环境通常是指虚拟现实，即计算机生成的真实图像和复制真实环境的假想世界。增强现实是指真实世界环境的视图，其要素包括LAE和能通过计算机生成的感官增强的对象，而增强虚拟是一种虚拟环境，在其中物理世界元素（包括LAE）能进行映射和交互。在图1中，LAE佩戴了HMD设备来观察虚拟世界，并直接与虚拟对象进行交互。混合增强现实
真实环境
增强现实
增强虑拟
图1混合与增强现实（MAR）
魔拟环境
本章基于ISO/IEC18039的MAR参考模型（MAR-RM）描述了MAR场景中LAE表示的概念，包括在MAR场景中LAE表示系统的目标、嵌人、交互和功能。通常，演员是在表演中扮演角色的个人。在这个例子中，演员代表了由深度相机或通用相机拍摄的人，他（她）能执行动作并嵌入到MAR场景中。存在于MAR场景中并能与实时人物肖像进行交互的3D对象称为实体。实体能通过事件映射器移动或与演员的动作交互。在本文件中，LAE被定义为MAR内容或系统中对实时人物肖像和对象的表示。例如，在MAR场景中，人物、鸟和动物都被表示为LAE。图2显示了MAR场景中的LAE表示的示例，MAR场景由2D虚拟世界和3D虚拟世界组成，能描述如下：
图2a)显示了一个集成到2D虚拟世界中的LAE，该虚拟世界是真实或虚拟图像。LAE能从通用相机和（或）深度相机传感器捕获。此子图显示了一个真实的动作，其中一个人被绿屏工作室中的相机3
小提示：此标准内容仅展示完整标准里的部分截取内容，若需要完整标准请到上方自行免费下载完整标准文档。