(19)国家知识产权局 (12)发明 专利 (10)授权公告 号 (45)授权公告日 (21)申请 号 202210207225.9 (22)申请日 2022.03.04 (65)同一申请的已公布的文献号 申请公布号 CN 114363557 A (43)申请公布日 2022.04.15 (73)专利权人 西安电子科技大 学 地址 710071 陕西省西安市雁塔区太白南 路2号 (72)发明人 高大化　杨旻曦　石光明　刘丹华　 (74)专利代理 机构 西安嘉思特知识产权代理事 务所(普通 合伙) 6123 0 专利代理师 刘长春 (51)Int.Cl. G06F 40/30(2020.01) H04L 12/18(2006.01) H04N 7/15(2006.01) G06N 5/02(2006.01) G06F 16/31(2019.01) G06V 20/20(2022.01)G06V 40/10(2022.01) G06V 10/80(2022.01) G06F 3/01(2006.01) G06F 3/16(2006.01) G06T 19/00(2011.01) G06K 9/62(2022.01) (56)对比文件 CN 113315972 A,2021.08.27 CN 103888714 A,2014.0 6.25 CN 102170 361 A,201 1.08.31 US 2021383127 A1,2021.12.09 US 2016378861 A1,2016.12.2 9 CN 103678569 A,2014.0 3.26 US 2014184 496 A1,2014.07.0 3 US 2019340825 A1,2019.1 1.07 纪连恩等.虚拟环境下基 于语义的三维交 互 技术. 《软件学报》 .20 06,(第07期), (续) 审查员 王亚娜 (54)发明名称 一种面向语义保真的虚拟会议方法及三维 虚拟会议系统 (57)摘要 本发明涉及一种面向语义保真的虚拟会议 方法及三维虚拟会议系统， 方法包括： 根据语义 概念树形语义架构； 为树形语义架构中不同层级 的每个语义概念， 设置与之对应的默认信号； 从 多模态信号中提取参会者所处场景的语义描述 并更新私有层级语义库； 利用私有层级语义库更 新公有层 级语义库； 服务器端向所有用户端发送 公有层级语义库中的全部内容组成的层级语义 描述， 根据全部内容组成的层 级语义描述在每个 用户端更新对应的私有层级语义库； 生成参会者 视角中的虚拟 会议场景； 生 成会议进行过程中参 会者视角中的虚拟会议场景。 本发 明的方法解决 了虚拟形象表情动作粗糙、 会议场景不真实、 人与场景难互动的问题， 增加虚拟会议规模， 提升 参会的真实 感。 [转续页] 权利要求书3页 说明书9页 附图2页 CN 114363557 B 2022.06.24 CN 114363557 B (56)对比文件 Pierluigi Zama Ramirez等.Sho oting Labels: 3D Semantic Label ing by Vir tual Reality. 《2020 IE EE Internati onal Conference o n Artificial I ntelligence and Virtual Real ity》 .2021,Zhongqiang Zhang等.S ³Net: Spectral – Spatial–Semantic Netw ork for Hyperspectral Ima ge Classificati on With the Multi way Attention Mechanism. 《 IEEE Transacti ons on Geoscience and Remote Sensing》 .2021,2/2 页 2[接上页] CN 114363557 B1.一种面向语义保真的虚拟会议方法， 其特征在于， 所述面向语义保真的虚拟会议方 法包括： 步骤1、 根据至少包括参会者在内的每种语义概念构建不少于两个层级的树形语义架 构， 其中， 所述树形语义架构的各个层级的节点由语义概念及其属性组成， 且所述树形语义 架构的最底层为不具有属性的信号， 所述语义概念是指虚拟会议场景中需要展现的对象类 型； 步骤2、 为所述 树形语义架构中不同层级的每 个语义概念， 设置与之对应的默认信号； 步骤3、 根据参会者所处场景的多模态信号， 从所述多模态信号中分层级提取参会者所 处场景的语义描述并对应更新私有层级语义库， 其中， 每个所述私有层级语义库对应一用 户端， 所述私有层级语义库用于存储所述用户端的数据， 所述语义描述是场景中的所有语 义实例构成的通信消息； 步骤4、 利用所述私有层级语义库更新公有层级语义库， 其中， 所述公有层级语义库用 于存储所有数据， 以实现数据共享； 步骤5、 服务器端利用通信链路， 向所有用户端发送所述公有层级语义库中的全部内容 组成的层级语义描述， 并根据所述全部内容组成的层级语义描述在每个用户端更新对应的 私有层级语义库； 步骤6、 会议开始， 用户端根据步骤5所更新的私有层级语义库生成参会者视角中的虚 拟会议场景并显示所述虚拟会议场景； 步骤7、 在步骤6之后， 生成会议进行过程中参会者视角中的虚拟会议场景并显示所述 虚拟会议场景； 所述步骤3包括： 步骤3.1、 获取参会者所处场景的多模态信号； 步骤3.2、 基于所述树形语义架构， 从所述多模态信号中分层级提取参会者所处场景的 语义描述并对应更新所述私有层级语义库； 所述步骤3.2包括： 步骤3.21、 识别参会者； 步骤3.22、 实例化预定义参会者的树形语义架构得到第一语义对象， 从高到低地识别 所述第一语义对象的语义概念并记录其属性， 且在所述树形语义架构的最底层直接记录其 原始信号， 并用所述第一语义对象对所述私有层级语义库进行 更新； 步骤3.23、 识别与参会者有交 互且预定义了树形语义架构的物体； 步骤3.24、 实例化预定义物体的树形语义架构得到第二语义对象， 从高到低地识别所 述第二语义对 象的语义概念并记录其属 性， 且在所述树形语义架构直接记录其原始信号， 并用所述第二语义对象对所述私有层级语义库进行 更新； 所述步骤6包括： 步骤6.1、 将所述私有层级语义库中的语义对象用最底层的默认信号表示； 步骤6.2、 将所有用所述默认信号表示的语义对象布置在虚拟会场中； 步骤6.3、 根据 所述私有层级语义库 得到该用户端所属的参会者的姿态， 并生成参会者 视角中的虚拟会议场景； 步骤6.4、 通过用户端的显示模块显示 参会者视角中的虚拟会议场景；权　利　要　求　书 1/3 页 2 CN 114363557 B 3