具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。通常在此处附图中描述和出示的本发明实施例的组件可以以各种不同的配置来布置和设计。

因此，以下对在附图中提供的本发明的实施例的详细描述并非旨在限制要求保护的本发明的范围，而是仅仅表示本发明的选定实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步定义和解释。此外，术语“第一”、“第二”等仅用于区分描述，而不能理解为指示或暗示相对重要性。

在本发明实施方式的描述中，需要说明的是，术语“内”、“外”、“上”等指示的方位或位置关系为基于附图所示的方位或位置关系，或者是该发明产品使用时惯常摆放的方位或位置关系，仅是为了便于描述本发明和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明的限制。

如图1所示，一种基于XR的密室和剧本杀用的线上线下结合系统，包括用户XR终端1、用户控制终端2、云端模组3以及线下模组4，云端模组3包括推送模块31，线下模组4包括移动摄像模块41，用户XR终端1包括虚拟显示模块11和实景显示模块12；其中，虚拟显示模块11用于显示预设虚拟场景信息，虚拟显示模块11还用于插入第一视频，当虚拟显示模块11显示第一视频时，用户控制终端2用于发出与第一视频对应的第一控制指令，推送模块31用于根据第一控制指令推送对应的录制视频信息，虚拟显示模块11用于根据录制视频信息生成第二视频并将第一视频替换为第二视频；实景显示模块12用于显示预设实时场景信息，线下模组4设置在预设实时场景内，实景显示模块12还用于插入第三视频，当实景显示模块12显示第三视频时，用户控制终端2用于发出与第三视频对应的第二控制指令，移动摄像模块41用于根据第二控制指令在预设实时场景内进行移动，移动摄像模块41还用于在实景内进行全景摄像并获取直播视频信息，实景显示模块12用于根据直播视频信息生成第四视频并将第三视频替换为第四视频。

在本实施方式中，需要说明的是，整个结合系统中，用户XR终端1和用户控制终端2通过“XR硬件定制+XR应用程序+XR内容”组合的方式，并在云端模组3和线下模组4的作用下，提供一套完整的线上线下结合方案，通过提供沉浸式体验，成本低，适用性行业广；其中，用户XR终端1包括XR设备的外观、设备包装、一体机laucher界面，用户控制终端2可针对各种用户定制XR应用程序,形式包括VR一体机安卓程序、H5页面、安卓和苹果系统的移动端APP程序、AR应用程序等；XR内容包括以PGC和UGC为形式生产的内容，同时对于用户XR终端1和用户控制终端2提供一人一机一码的保护。整个结合系统在使用时，用户对具体密室、剧本杀或其他沉浸式模式进行选择，选择完成后，一般情况下用户根据体验要求来选择实景显示模块12或虚拟显示模块11中的一个开始体验：当用户选择虚拟显示模块11时，虚拟显示模块11中会出现完全虚拟构建的预设虚拟场景信息，并开始插入第一视频，此时第一视频可以是与体验内容无关的视频，用户利用用户控制终端2来与体验内容进行交互，当发出第一控制指令后，代表用户参与体验内容并对体验内容进行了剧情推进，此时推送模块31会根据第一控制指令的内容，来推送与其对应的录制视频信息，并通过虚拟显示模块11根据录制视频信息生成第二视频，由于第二视频替换了第一视频，此时用户能够体验到第二视频的内容，从而进行了剧情推进或场景切换等等，进一步地，用户再利用用户控制终端2来继续与体验内容进行交互，再循环进行上述过程，最后由新的视频替换上述第二视频，从而最终完成整个体验内容；当用户选择实景显示模块12时，线下门店能够形成具体的预设实时场景，并通过在其内安装移动摄像模块41，根据移动摄像模块41的全景摄像和实景显示模块12来显示出预设实时场景信息，并开始插入第三视频，同样的，此时第三视频可以是与体验内容无关的视频，用户利用用户控制终端2来与体验内容进行交互，当发出第二控制指令后，代表用户参与体验内容并对体验内容进行了剧情推进，此时移动摄像模块41用于根据第二控制指令在预设实时场景内进行移动，并在移动的同时在实景内进行全景摄像并获取直播视频信息，并实时通过实景显示模块12根据直播视频信息生成第四视频，由于第四视频替换了第三视频，此时用户能够体验到第四视频的内容，以此进行了剧情推进或场景切换等等，进一步地，用户再利用用户控制终端2来继续与体验内容进行交互，再循环进行上述过程，最后由新的视频替换上述第四视频，在不断的循环体验过程中，最终完成整个体验内容。综上，整个结合系统利用网络通信和XR视频为载体，通过XR技术沉浸体验感强的特点，应用在剧本杀和密室逃脱这两种对沉浸式体验要求较高的技术领域，并利用用户XR终端1、用户控制终端2、云端模组3以及线下模组4打通线上与线下的体验壁垒，将传统的剧本杀密室形态包装形成一种新的产品形态；进一步地，在利用用户XR终端1提高沉浸感的同时，基于线上和线下相结合的方式，提供多种体验模式，解决当前剧本杀和密室行业投资者产出回报率低的痛点，利用线下实体店的玩家与线上用户通过互动等方式，共同完成产品体验，以双向打通传统演艺剧情IP和剧本杀、密室文化剧情IP的内容输出地为目标，为这种新的体验方式提供相对应的产品及平台服务；进一步地，能够在5G时代中，将线下的传统行业，包括且不限于演艺、地产、文旅等行业，与线上消费娱乐进行融合。

具体地，如图1和图2所示，还包括用户选取模组5，用户选取模组5包括剧本模块51和人物模块52；其中，剧本模块51用于获取预设剧本信息，预设剧本信息包括预设虚拟场景信息和预设实时场景信息；人物模块52用于获取剧本模块51所选预设剧本信息中的任意一个人物信息，不同人物信息分别对应了不同移动摄像模块41。

在本实施方式中，需要说明的是，整个结合系统将合作剧院、剧本杀、密室IP版权方加入演出内容矩阵，选择矩阵中授权部分的演出内容进行节目包装和制作，结合泛剧本杀、沉浸密室产品中的互动元素，以及音乐剧、话剧、舞台剧等剧本元素内容。其中，使用者通过用户选取模组5中的剧本模块51来任意选择预设剧本信息，每个预设剧本信息对应了不同的预设虚拟场景信息和预设实时场景信息，同时也包含了一种或多种的人物信息，使用者继续通过人物模块52来选择任意一个人物信息，以此开始进行剧本杀；当存在多个人物信息，需要在预设实时场景中设置多个移动摄像模块41，每个移动摄像模块41代表了一个人物信息，从而有效保证使用者的参与度和游戏体验。

具体地，如图1和图2所示，用户选取模组5还包括节点模块53，节点模块53用于根据预设剧本信息和人物信息得到多个不同推进节点531；其中，第一控制指令包括第一推进节点531，推送模块31用于根据第一推进节点531推送对应的录制视频信息；第二控制指令包括第二推进节点531，移动摄像模块41用于根据第二推进节点531在预设实时场景内进行移动。

在本实施方式中，需要说明的是，当预设剧本信息和人物信息确认后，即可获取整个完整的体验内容，整个体验内容是由多个录制视频信息或多个直播视频信息组成，而在前后两个相邻视频中存在一个推进节点531，整个完整的体验内容存在多个不同的推进节点531，而每个录制视频信息的开始和结束分别对应了一个不同的推进节点531；进一步地，当虚拟显示模块11中显示第一视频结束时，用户通过用户控制终端2生成第一控制指令，第一控制指令中包含了与第一视频结束时对应的第一推进节点531，此时推送模块31即可快速推送出与第一推送节点对应的录制视频信息；进一步地，当实景显示模块12中显示第三视频结束时，用户通过用户控制终端2生成第二控制指令，第二控制指令中包含了与第三视频结束时对应的第二推进节点531，此时移动摄像模块41根据第二推进节点531在预设实时场景内进行快速移动；综上，通过设置节点模块53，能够提高虚拟显示模块11对体验内容的推进灵敏度，也能够提高实景显示模块12对体验内容的推进可靠性，同时防止体验内容发展进度紊乱，保证用户的良好体验。

具体地，如图1至图3所示，推送模块31包括存储单元311、节点解析单元312、推送单元313；其中，存储单元311用于存储与不同推进节点531一一对应的多个录制视频信息；节点解析单元312用于获得第一推进节点531并在存储单元311中获取与第一推进节点531对应的录制视频信息；推送单元313用于推送节点解析单元312获取的录制视频信息。

在本实施方式中，需要说明的是，每个推进节点531均对应了一个唯一的录制视频信息，当用户通过用户控制终端2生成含有不同推进节点531的控制指令时，能够通过节点解析单元312和推送单元313快速获得上述推进节点531对应的视频录制信息，保证了虚拟显示模块11对体验内容的推进灵敏度。

具体地，如图1至图4所示，移动摄像模块41包括移动单元411和摄像单元412；其中，移动单元411用于根据第二推送节点生成控制信号，并按控制信号在预设实时场景内进行移动；摄像单元412还用于在实景内进行全景摄像并获取直播视频信息。

在本实施方式中，需要说明的是，移动单元411可以是安装在线下门店内部或演出场地上的自动化移动设备，而摄像单元412设置在上述自动化移动设备上；移动单元411也可以安装在线下门店的工作人员或演出场地上的演出人员服装或其他位置处，工作人员和演出人员根据生成的控制信号在规定范围内进行移动。

具体地，如图1至图6所示，摄像单元412包括第一人称模式4121和第三人称模式4122；其中，第一人称模式4121用于在与人物信息对应的第一人称视角下进行全景摄像，并生成第一人称视频信息；第三人称模式4122用于在与人物信息对应的第三人称视角下进行全景摄像，并生成第三人称视频信息；实景显示模块12用于根据第一人称视频信息或第三人称视频信息生成第四视频。

具体地，如图1至图6所示，实景显示模块12包括切换单元121，切换单元121用于将根据第一人称视频信息生成的第四视频切换为根据第三人称视频信息生成的第四视频，切换单元121还用于将根据第三人称视频信息生成的第四视频切换为根据第一人称视频信息生成的第四视频。

在本实施方式中，需要说明的是，在录制视频信息中也存在第一人称角度下的录制视频信息和第三人称角度下的录制视频信息。切换单元121的设置，能够对第一人称视频信息和第三人称视频信息进行快速切换，从而使第四视频中呈现的体验内容进行更换。

具体地，如图1至图5所示，用户控制终端2包括控件生成模块21；其中，控件生成模块21用于在虚拟显示模块11插入视频时，显示出与上述视频对应的多个第一操作控件211，多个第一操作控件211分别与不同推进节点531对应，第一操作控件211用于在触碰后生成第一控制指令；控件生成模块21还用于在实景显示模块12插入视频时，显示出与上述视频对应的多个第二操作控件212，多个第二操作控件212分别与不同推进节点531对应，第二操作控件212用于在触碰后生成第二控制指令。

在本实施方式中，需要说明的是，在虚拟显示模块11插入视频时，控件生成模块21会出现多个第一操作控件211，通过将第一操作控件211与不同推进节点531对应，实现用户对第一操作控件211的选择，即对应了用户对后续推送模块31推送的录制视频信息的选择，代表用户对体验内容的主观选择性推进；同样的，在实景显示模块12插入视频时，控件生成模块21会出现多个第二操作控件212，通过将第二操作控件212与不同推进节点531对应，实现用户对第二操作控件212的选择，即对应了用户对后续直播视频信息的选择，同样代表用户对体验内容的主观选择性推进。

具体地，如图1至图7所示，线下模组4包括通信模块42，通信模块42用于将直播视频信息传输至实景显示模块12。

在本实施方式中，需要说明的是，通信模块42先将直播视频信息传输至云端，再将云端中的直播视频信息传输至用户XR终端1中。

具体地，如图1至图8所示，还包括拓展显示模组6，拓展显示模组6包括识别模块61与拓展模块62；其中，识别模块61用于获取预设虚拟场景信息或预设实时场景信息中的标志物信息；拓展模块62用于根据标志物信息生成拓展内容，并将上述拓展内容插入至虚拟显示模块11或实景显示模块12。

在本实施方式中，需要说明的是，可以将预设虚拟场景信息或预设实时场景信息中加入一些标志物信息，比如在实时场景中加入指示牌、道具等互动元素，用户通过拓展模块62根据不同标志物信息生成不同拓展内容，再将上述拓展内容插入至虚拟显示模块11或实景显示模块12，如：通过AR技术看到物品的说明、角色的身份说明等拓展内容，从而提高用户的体验。

在一个优选方案中，整个结合系统可以在音乐剧、话剧、舞台剧等包含剧本元素的现场表演中进行使用，通过实景显示模块12显示出具体演出场地的预设实时场景信息，同时移动摄像模块41安装在某些自动化设备或演出人员服装道具上，用户可以根据切换单元121，随时选择并切换演出节目中各演员的视角，用户在观看体验中仿佛与表演者融为一体，可观察到表演者视角内720度的画面内容并进行沉浸式观看，体验角色和剧情；或者用户根据切换单元121，以第三人称观察者的视角观看整场直播演出，可选择舞台超近距离甚至在舞台中的视角中观看；进一步地，通过存储模块可以存储不同的录制视频信息，录制视频信息包含了所有角色的各个视角下的演出视频，同时上述演出视频构成了剧本的完整世界观和完整剧情，每个演出视频可以通过用户下达第一控制指令，再利用推送模块31根据第一控制指令进行推送，最后由虚拟显示模块11播放出来。

在进一步优选方案中，用户在基于密室类门店的消费环节中，可以在线上通过直播或者点播的方式，以单人体验的方式或与其他用户/陪玩组队的方式完成沉浸式密室体验。从最终呈现在用户面前的场景形态上，分为如下两种模式：以虚拟显示模块11为主要技术手段，展现出的线上沉浸式密室体验，用户可在虚拟显示模块11的完全虚拟构建的场景中体验到线下实体店中难以实现的包含且不限于密室、冒险等主题的世界观场景，用户可选择通过单人或者组队的方式完成包含且不限于密室、冒险等主题的内容，需要说明的是，此模式可仅通过虚拟显示模块11、用户控制终端2和云端模组3来进行实现。

在进一步优选方案中，基于线下门店的真实布景，运用直播拍摄或者通过交互视频技术包装制作完成。其中，用户在线上通过实景显示模块12与线下实体店共同完成包含且不限于密室、冒险等主题的体验内容，其中移动摄像模块41可以装配在工作人员上、线下门店的用户上或其他自动化设备上，并通过上述的视频替换过程，全程以第一人称视角与线下门店真实环境中的各类机关和NPC进行互动体验；用户还可以在线上通过虚拟显示模块11，与其他线上用户共同完成包含且不限于密室、冒险等主题的体验内容，用于与NPC以及真实场景交互的互动视频片段，需提前进行录制，并在存储模块中生成录制视频信息，通过上述虚拟显示模块11的视频替换过程进行体验。

在进一步优选方案中，用户可通过虚拟显示模块11和实景显示模块12，在纯线上环境中完成剧情、场景互动或直播演出的剧情内容体验；用户还可以通过佩戴用户XR终端1，并操作用户控制终端2，并同时与线下剧本杀门店、密室门店、演出单元进行双向通信，用户在线上体验沉浸式的本发明产品内容。用户可在线上直接与线下的元素进行互动，如：与线下本发明用户一同完成本发明冒险、剧情选择、互动交流；线上云剧场用户的选择将决定线下剧场/院演出的分支走向。

在进一步优选方案中，结合系统还包括陪玩平台和陪玩养成模块，陪玩平台用于给用户提供不同陪玩角色，用户可选择与陪玩角色一同进行并完成PVE或PVP体验内容；而陪玩养成模块包括个体单元、主播单元和线下门店工作人员单元，个体单元、主播单元和线下门店工作人员单元分别代表各种类型陪玩角色。

在进一步优选方案中，通过改变移动摄像模块位置，配合实景显示模块可以实现远程选座观看和参与互动演出或演唱会等。

在进一步优选方案中，云端模组还包括虚拟人物模块，虚拟人物模块用于通过计算机算法在用户XR终端中实时呈现出的虚拟人偶，每个虚拟人偶均可在预设算法下呈现至连接云端模组的多个用户XR终端中；进一步地，虚拟人偶的动作、表情和语言等，均可以由预设算法实现，优选地，可以获取用户的表情、动作和语言等信息，再利用预设算法由虚拟人偶相应地呈现。

最后应说明的是：以上各实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述各实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的范围，其均应涵盖在本发明的权利要求和说明书的范围当中。