查询公式
一种缩短时间戳网络解决多事件视频问答系统、方法、计算机及存储介质
本发明提出一种缩短时间戳网络解决多事件视频问答系统、方法、计算机及存储介质,属于计算机视觉和自然语言处理交叉领域。将视频和字幕提取为多级的事件嵌入,并提取问题和候选答案的特征。利用问题导向的注意力获取不同事件的注意力权重,并利用模糊理论中的截距阵提取视频中的关键事件嵌入。利用问题和答案分别关注不同模态的关键事件嵌入,生成具有问题导向和具有答案导向的上下文信息。自适应地融合问题导向和答案导向的上下文,生成答案。相比于一般视频问答方案,本发明从视频中提取多个事件的多模态嵌入,并利用模糊数学中的截距阵等理论筛选出关键事件,通过去除冗余信息提高了回答的准确性。本发明在视频问答中的效果比于传统方法更好。

2021-11-02

访问量:19

一种视频定位方法及装置、模型训练方法及设备
本发明公开了一种视频定位方法及装置、模型训练方法及设备。所述视频定位方法包括:使用多尺度的时间滑动窗口,对待定位视频进行片段划分;对每个视频片段以及查询语句的每个单词进行特征提取;动态获取视频模态与文本模态之间的注意力流;基于所述视频模态与文本模态之间的注意力流,对每个视频片段的特征和每个单词的特征进行更新;动态获取视频模态内的注意力流以及文本模态内的注意力流,对每个视频片段的特征和每个单词特征;计算所述每个视频片段与所述查询语句的相似度分数;选取相似度分数最高的视频片段作为视频定位的结果。本发明不依赖于时间标签,且可以更深入的挖掘模态间交互信息,具有更好的普适性。

2021-11-02

访问量:21

确定搜索字符的方法及显示设备
本申请公开了一种确定搜索字符的方法及显示设备,属于数据处理领域。在本申请中,响应于接收到搜索指令,显示搜索页面后,接收输入的第一指令,其中,第一指令是指控制设备触发的针对目标字符控件的确认指令。在当前时间与显示设备开始显示搜索页面的时间之间的差值大于参考响应时长时,在搜索栏控件显示目标字符控件对应的字符,在差值小于参考响应时长时,则不将所述目标字符控件对应的字符显示在搜索栏控件中。这样,可以避免在接收到用户由于惯性操作而触发的第一指令时,将选择器默认位置处对应的字符显示在搜索栏控件中,从而避免了用户需要执行其他操作来删除该搜索字符,提高了用户通过显示设备搜索媒资的效率。

2021-10-29

访问量:17

信息处理方法、装置、服务器、设备、系统及存储介质
本公开关于一种信息处理方法、装置、服务器、设备、系统及存储介质,涉及数据处理技术领域,至少解决相关技术中的查询卡片业务方的耗时显著增加,严重影响卡片推荐效果的问题。方法包括:接收客户端发送的卡片获取请求,卡片获取请求包括当前业务场景的内容参数;并行向至少两个卡片业务方发送卡片查询请求,卡片查询请求包括内容参数;卡片查询请求用于指示每一个卡片业务方确定与内容参数表征的内容对应的待推荐卡片;接收卡片业务方发送的待推荐卡片的卡片信息;待推荐卡片的卡片信息包括卡片业务方的业务优先级;根据卡片业务方的业务优先级,确定待推荐卡片队列;向客户端发送待推荐卡片队列,以供客户端显示待推荐卡片队列中的待推荐卡片。

2021-10-29

访问量:25

一种动静态资料的匹配方法、计算机装置和可读存储介质
本发明提供一种动静态资料的匹配方法、计算机装置和可读存储介质,包括用户静态资料获取步骤、动态资料分析获取步骤和匹配步骤,动态资料分析获取步骤包括:接收动态资料,动态资料由企业用户或个人用户发出,动态资料包括动态视频、动态图片和动态信息;提取多个动态资料的关键帧;分析多个关键帧,获取动态特征资料;保存动态特征资料,匹配步骤包括:将企业用户静态资料、个人用户静态资料和动态特征资料进行匹配关联;向匹配关联的企业用户和个人用户推送配对信息。结合个人和企业的静态资料,继而作出相对于的匹配,后续进行主动式相互推荐,建立交流渠道,继而实现对信息高效匹配。

2021-10-26

访问量:29

一种基于动作捕捉的注意力网络的视频问答方法
本发明公开了一种基于动作捕捉的注意力网络的视频问答方法,先提取将待处理视频和待处理的提问的特征,然后基于这些特征,通过物体动作注意力机制提取动作信息,通过物体关系注意力机制提取待处理视频的全局物体关系信息,通过全局动作注意力机制提取待处理视频的全局动作信息;接着对三种注意力机制下提取的信息进行融合,提取整个视频的全局特征向量;最后基于全局特征向量根据提问的格式输出不同类型答案。

2021-10-22

访问量:14

一种多媒体资源的推荐方法及相关设备
本申请公开了一种多媒体资源的推荐方法及相关设备,所述的推荐方法包括获取目标视频的播放进度,并根据播放进度确定目标视频对应的热门片段,基于所述热门片段及经过训练的视频理解模型,确定所述目标视频对应的推荐维度,根据推荐维度确定所述目标视频对应的推荐资源,并推荐确定的推荐资源。本申请实施例通过基于正在播放的目标视频的播放进行来确定目标视频中的热门片段,在通过经过训练的视频理解模型对热门片段进行识别理解,最后基于识别得到的推荐维度来确定推荐视频,这样可以提高推荐视频的视频内容与目标视频的视频内容的相关性,从而可以提高推荐视频的准确度,从而提高视频推荐效果。

2021-10-22

访问量:29

视频搜索的方法、装置、电子设备及存储介质
本公开公开了一种视频搜索方法、装置、电子设备及存储介质,涉及计算机技术领域,具体涉及大数据、智能搜索和深度学习等人工智能领域。具体实现方案为:响应于检测到视频搜索事件,获取待搜索视频信息;对待搜索视频信息进行解析,以获取目标视频;获取目标视频之中的每一帧图像中的i个像素点信息,其中,i为正整数;根据i个像素点信息,从视频数据库中获取目标视频的相关视频;以及将相关视频发送至客户端,其中,客户端将相关视频展示给用户。由此,能够实现以视频搜索视频,且实现的成本和门槛较低。

2021-10-22

访问量:24

一种自适应视频修复方法
本发明公开了一种自适应视频修复方法,包括:构建视频格式库,所述视频格式库包含多种视频文件的封装格式;对待修复视频进行样本视频截取,将截取的视频段作为样本视频;将视频格式库装入链表,迭代链表,得到样本视频对应的封装格式;根据封装格式对样本视频进行解析、修复,修复完成后将当前修复的视频存入缓存空间;将缓存空间内的视频进行可播放性检测;若评测结果为可正常播放,将待修复视频按照样本视频对应的封装格式进行解析、修复,得到修复后的完整视频;否则将截取的视频段拆分为两段,将拆分后长度大于最小值的视频作为样本视频,继续解析、修复。解决了现有技术中存在的无法修复未知封装格式的破损视频的问题。

2021-10-15

访问量:17

一种视频新闻的检索方法及系统
本申请涉及一种视频新闻的检索方法及系统,视频新闻的检索方法包括:接收用户输入的查询信息;若查询信息为文字信息,从预先构建的视频新闻数据库中检测是否存在匹配的文字索引信息;若存在,根据匹配的文字索引信息确定对应的视频新闻数据,将视频新闻数据作为第一检索结果输出;若查询信息为图像信息,对图像信息进行特征提取得到图像特征信息;根据图像特征信息,从视频新闻数据中检测是否存在匹配的特征索引信息;若存在,根据匹配的特征索引信息确定对应的视频新闻数据,将确定的视频新闻数据作为第二检索结果输出。如此,既可以实现基于文字的检索,也可以基于实现图像的检索,提高了检索效率和检索精度,满足用户更个性化的检索需求。

2021-10-15

访问量:28

技术分类