一种交互式vr影像的处理方法

文档序号:1802459 发布日期:2021-11-05 浏览:13次 >En<

阅读说明:本技术 一种交互式vr影像的处理方法 (Processing method of interactive VR image ) 是由 毕顺军 朱万吉 马如鹏 游昱 李仁明 王燕萍 于 2021-08-14 设计创作,主要内容包括:本发明提供一种交互式VR影像的处理方法,所述交互式VR影像的处理方法为:通过教师影像采集模块分别采集教师影像的场景信息、头部姿态信息以及对应的语音信息;传递至处理模块,处理模块处理后根据学生的视角生成相应的教师VR影像,并传递至学生的VR眼镜内;通过学生影像采集模块分别采集学生影像的场景信息、头部姿态信息以及对应的语音信息;传递至处理模块,处理模块处理后根据教师的视角生成相应的学生VR影像,并传递至教师的VR眼镜内。本发明通过分别采集教师的影像信息和学生的影响信息通过处理模块生成相应的VR影像,使得学生和老师在在线教育时有一种身临其境的体验感,使得学生能够更好的接受教育。(The invention provides a processing method of an interactive VR image, which comprises the following steps: respectively acquiring scene information, head posture information and corresponding voice information of a teacher image through a teacher image acquisition module; the images are transmitted to a processing module, and the processing module generates corresponding teacher VR images according to the visual angles of the students after processing, and transmits the images to VR glasses of the students; respectively acquiring scene information, head posture information and corresponding voice information of the student image through a student image acquisition module; and the images are transmitted to a processing module, and the processing module generates corresponding student VR images according to the visual angle of the teacher after processing and transmits the images to VR glasses of the teacher. According to the invention, the image information of the teacher and the influence information of the students are respectively collected, and the corresponding VR images are generated through the processing module, so that the students and the teachers have an experience feeling of being personally on the scene during online education, and the students can better receive education.)

一种交互式VR影像的处理方法

技术领域

本发明属交互式VR影像的处理技术领域,尤其涉及一种交互式VR影像的处理方法。

背景技术

VR(VirtualReality,虚拟现实)是由计算机生成的虚拟空间,是通过三维视觉效果赋予现实感的空间,用于实现虚拟现实的技术作为通过实时处理用户的输入来使人感觉置身于现实世界中的感觉的技术,是超越多媒体的下一代技术。

虚拟现实环境对用户提供逼真的专注感,从而不仅能够模拟实际存在的物体,还可以使用户体验实际上不存在的物体或状况。这种虚拟现实环境可适用于多种领域。例如,已广泛应用于从汽车设计或模拟实验等的工学领域到医疗领域、文化领域等的多种领域。

现有的VR在线教育中无法还原老师与学生的互动,用户体验度低。

发明内容

为了解决上述技术问题,本发明提供一种交互式VR影像的处理方法,包括教师影像采集模块、学生影像采集模块以及处理模块,所述教师影像采集模块和学生影像采集模块内均包含场景采集单元、头部姿态采集单元以及语音采集单元,所述交互式VR影像的处理方法为:

S1:通过教师影像采集模块分别采集教师影像的场景信息、头部姿态信息以及对应的语音信息;

S2:将教师的场景信息、头部姿态信息以及语音信息传递至处理模块,处理模块处理后根据学生的视角生成相应的教师VR影像,并传递至学生的VR眼镜内;

S3:通过学生影像采集模块分别采集学生影像的场景信息、头部姿态信息以及对应的语音信息;

S4:将学生的场景信息、头部姿态信息以及语音信息传递至处理模块,处理模块处理后根据教师的视角生成相应的学生VR影像,并传递至教师的VR眼镜内。

优选的,所述处理模块能够在接收的场景信息的基础上叠加头部姿态信息和语音信息,再经图像色彩及光亮度调整后生成VR图像。

优选的,所述学生的视角包括学生的左眼视角和学生的右眼视角。

优选的,所述教师的视角包括教师的左眼视角和教师的右眼视角。

优选的,所述头部姿态信息采集方法包括:

获取采集的影像数据中的教师或学生头部图像;识别头部部位并获取多个部位的二维位置信息;

将多个所述部位的二维位置信息与预设标准位置信息进行比对,并得出比对结果;

根据所述比对结果判断并得到姿态信息。

优选的,所述识别头部部位并获取多个部位的二维位置信息包括:

获取人体轮廓站姿的先验知识,确定头部的大致区域;根据头部测量的目标,确定人体头部待分段的关键目标;

利用otsu、canny、sobel、膨胀腐蚀、顺序搜索得到头部各部位分段;

通过对分割出来的图像区域进行二值化,识别头部的整体轮廓,然后根据不同部位的特征确认不同的关键部分。

进一步,所述生成相应的VR影像包括:

获取相应的头部姿态信息,并从VR头部模板中提取出与所述头部姿态相关的目标VR头部区域模型;

对头部分割处理得到与所述头部姿态相关的多个头部碎片,将多个头部碎片覆盖在所述目标VR头部区域模型上,得到头部VR模型并放入VR头部模板中目标VR头部区域模型的位置;

同时将所述目标VR头部区域模型与场景信息相融合,并添加语音音轨,即可得到VR影像。

本发明的另一目的在于提供一种应用于所述交互式VR影像的处理方法的交互式VR影像的处理系统,所述交互式VR影像的处理系统包括:

教师影像采集模块,用于采集教师影像的场景信息、头部姿态信息以及对应的语音信息;

学生影像采集模块,用于采集学生影像的场景信息、头部姿态信息以及对应的语音信息;

通信模块,用于进行数据、信息的传输;

处理模块,用于基于采集的相应信息,根据学生的视角生成相应的教师VR影像或根据教师的视角生成相应的学生VR影像;

VR眼镜,用于进行VR影像的展示。

本发明的另一目的在于提供一种存储在计算机可读介质上的计算机程序产品,包括计算机可读程序,供于电子装置上执行时,提供用户输入接口以实施所述交互式VR影像的处理方法。

本发明的另一目的在于提供一种计算机可读存储介质,储存有指令,当所述指令在计算机上运行时,使得计算机执行所述交互式VR影像的处理方法。

与现有技术相比,本发明的有益效果是:本发明通过分别采集教师的影像信息和学生的影响信息通过处理模块生成相应的VR影像,使得学生和老师在在线教育时有一种身临其境的体验感,使得学生能够更好的接受教育。

附图说明

图1是本发明的步骤图。

图2是本发明实施例提供的头部姿态信息采集方法的流程图。

图3是本发明实施例提供的识别头部部位并获取多个部位的二维位置信息方法的流程图。

图4是本发明实施例提供的生成相应的VR影像方法的流程图。

图5是本发明实施例提供的交互式VR影像的处理系统结构示意图;

图中:1、教师影像采集模块;2、学生影像采集模块;3、通信模块;4、处理模块;5、VR眼镜。

具体实施方式

下面将结合本发明实施例的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。

以下对本发明做进一步描述:

实施例:

如附图1所示,一种交互式VR影像的处理方法,包括教师影像采集模块、学生影像采集模块以及处理模块,所述教师影像采集模块内包含场景采集单元、头部姿态采集单元以及语音采集单元,所述学生影像采集模块内也包含场景采集单元、头部姿态采集单元以及语音采集单元,所述交互式VR影像的处理方法为:

(1)通过教师影像采集模块中的场景采集单元、头部姿态采集单元以及语音采集单元分别采集教师影像的场景信息、头部姿态信息以及对应的语音信息;

(2)将教师的场景信息、头部姿态信息以及语音信息传递至处理模块,处理模块在接收的教师场景信息的基础上叠加教师头部姿态信息和语音信息,再经图像色彩及光亮度调整后,分别根据学生的左眼视角和右眼视角生成相应的对应的教师VR影像,生成图像后并传递至学生的VR眼镜内,使得学生能够更好的接受教育内容;

(3)通过血汗俄国影像采集模块中的场景采集单元、头部姿态采集单元以及语音采集单元分别采集学生影像的场景信息、头部姿态信息以及对应的语音信息;

(4)将学生的场景信息、头部姿态信息以及语音信息传递至处理模块,处理模块在接收的教师场景信息的基础上叠加学生头部姿态信息和语音信息,再经图像色彩及光亮度调整后,分别根据教师的左眼视角和右眼视角生成相应的对应的学生VR影像,生成图像后并传递至教师的VR眼镜内,使得教师能够身临其境的得到学生的学习反馈。

如图2所示,本发明实施例提供的头部姿态信息采集方法包括:

S101,获取采集的影像数据中的教师或学生头部图像;识别头部部位并获取多个部位的二维位置信息;

S102,将多个所述部位的二维位置信息与预设标准位置信息进行比对,并得出比对结果;

S103,根据所述比对结果判断并得到姿态信息。

如图3所示,本发明实施例提供的识别头部部位并获取多个部位的二维位置信息包括:

S201,获取人体轮廓站姿的先验知识,确定头部的大致区域;根据头部测量的目标,确定人体头部待分段的关键目标;

S202,利用otsu、canny、sobel、膨胀腐蚀、顺序搜索得到头部各部位分段;

S203,通过对分割出来的图像区域进行二值化,识别头部的整体轮廓,然后根据不同部位的特征确认不同的关键部分。

如图4所示,本发明实施例提供的生成相应的VR影像包括:

S301,获取相应的头部姿态信息,并从VR头部模板中提取出与所述头部姿态相关的目标VR头部区域模型;

S302,对头部分割处理得到与所述头部姿态相关的多个头部碎片,将多个头部碎片覆盖在所述目标VR头部区域模型上,得到头部VR模型并放入VR头部模板中目标VR头部区域模型的位置;

S303,将所述目标VR头部区域模型与场景信息相融合,并添加语音音轨,即可得到VR影像。

如图5所示,本发明实施例提供的交互式VR影像的处理系统包括:

教师影像采集模块1,用于采集教师影像的场景信息、头部姿态信息以及对应的语音信息;

学生影像采集模块2,用于采集学生影像的场景信息、头部姿态信息以及对应的语音信息;

通信模块3,用于进行数据、信息的传输;

处理模块4,用于基于采集的相应信息,根据学生的视角生成相应的教师VR影像或根据教师的视角生成相应的学生VR影像;

VR眼镜5,用于进行VR影像的展示。

要说明的是,在本文中,而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。

尽管已经示出和描述了本发明的实施例,对于本领域的普通技术人员而言,可以理解在不脱离本发明的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型,本发明的范围由所附权利要求及其等同物限定。

10页详细技术资料下载
上一篇:一种医用注射器针头装配设备
下一篇:一种基于在线运维系统的现场运维管理系统

网友询问留言

已有0条留言

还没有人留言评论。精彩留言会获得点赞!

精彩留言,会给你点赞!

技术分类