一种基于ar智能眼镜的图像识别系统

文档序号:1966114 发布日期:2021-12-14 浏览:9次 >En<

阅读说明:本技术 一种基于ar智能眼镜的图像识别系统 (Image recognition system based on AR intelligent glasses ) 是由 张晓峰 王青峰 邱小锋 夏志龙 于 2021-09-17 设计创作,主要内容包括:本发明公开了一种基于AR智能眼镜的图像识别系统,属于AR智能领域,包括红外捕捉模块、图像获取模块、图像预处理模块、第一特征获取模块、第二特征获取模块、存储模块、数据库、对比模块、搜索导入模块、GPS定位模块、线路规划模块、尺寸获取模块、判断模块、画面生成模块和显示模块,其中,所述GPS定位模块与线路规划模块通讯连接;所述红外捕捉模块与图像获取模块通讯连接,本发明能够快速识别图像,降低了AR智能眼镜的卡顿,提高了用户的使用体感,且能够精确用户位置,并清晰直观的指引用户。(The invention discloses an image recognition system based on AR intelligent glasses, which belongs to the field of AR intelligence and comprises an infrared capture module, an image acquisition module, an image preprocessing module, a first characteristic acquisition module, a second characteristic acquisition module, a storage module, a database, a comparison module, a search import module, a GPS positioning module, a line planning module, a size acquisition module, a judgment module, a picture generation module and a display module, wherein the GPS positioning module is in communication connection with the line planning module; the infrared capturing module is in communication connection with the image acquisition module, so that the image can be quickly identified, the blocking of AR intelligent glasses is reduced, the use feeling of a user is improved, the position of the user can be accurately obtained, and the user can be clearly and intuitively guided.)

一种基于AR智能眼镜的图像识别系统

技术领域

本发明涉及AR智能领域,尤其涉及一种基于AR智能眼镜的图像识别系统。

背景技术

图像识别,是指利用计算机对图像进行处理、分析和理解,以识别各种不同模式的目标和对象的技术,一般分为人脸识别与物品识别两大模块,而AR智能眼镜是利用增强现实技术将虚拟物体应用到现实场景中智能设备。

经检索,中国专利号CN202110004483.2公开了一种基于AR智能眼镜的图像识别系统,虽然解决了一些图像识别的问题,但是其图像识别的速率仍然较慢,从而导致AR智能眼镜的卡顿,降低了AR智能眼镜的使用体感,且一般的AR智能眼镜不具有导航的功能,而一般的导航软件对用户位置的定位不够准确,也无法清晰直观的指引用户,因此AR智能眼镜的导航功能十分迫切,带来了系统缺陷的问题。

发明内容

本发明的目的是为了解决现有技术中存在的缺陷,而提出的一种基于AR智能眼镜的图像识别系统。

为了实现上述目的,本发明采用了如下技术方案:

一种基于AR智能眼镜的图像识别系统,包括红外捕捉模块、图像获取模块、图像预处理模块、第一特征获取模块、第二特征获取模块、存储模块、数据库、对比模块、搜索导入模块、GPS定位模块、线路规划模块、尺寸获取模块、判断模块、画面生成模块和显示模块;

其中,所述GPS定位模块与线路规划模块通讯连接;所述红外捕捉模块与图像获取模块通讯连接。

进一步地,所述红外捕捉模块用于捕捉用户的瞳孔缩放程度,生成真实注视点,并发送至图像获取模块;所述图像获取模块用于获取景深影像,并发送至图像预处理模块和尺寸获取模块;所述图像预处理模块用于处理景深影像;其中,所述处理景深影像的具体操作为:

S1、通过模数转换器将景深影像转化为图像帧数据;

S2、对图像帧数据进行标号,形成标号帧数据;

S3、在步骤S2进行的过程中,标号完毕的标号帧数据将立即判断标号是否为奇数,若为奇数,则将标号帧数据发送至第一特征获取模块,若不为奇数,则将标号帧数据发送至第二特征获取模块;

所述第一特征获取模块用于获取标号帧数据内的特殊事物,并发送至存储模块;所述第二特征获取模块用于获取标号帧数据内的特殊事物,并发送至存储模块。

进一步地,所述特殊事物包括地标建筑和道路名称;所述生成真实注视点是采用眼球追踪技术;所述获取景深影像是采用景深摄像装置拍摄得到。

进一步地,所述存储模块用于存储特殊事物,并发送至对比模块;所述数据库用于存储地图数据,并发送至对比模块;所述对比模块用于对比特殊事物和地图数据,并生成实际位置;其中,生成实际位置的具体操作为:

SS1、计算特殊事物与地图数据的关联度值,记为a1、a2、a3……an

SS2、判断关联度值是否合格,具体为:

A、若关联度值<90%,则不合格,记为E;

B、若关联度值≥90%,则合格,记为F;

SS3、保留F所对应的地图数据,记为实际位置,并发送至线路规划模块。

进一步地,所述a1+a2+a3+……+an=E+F,所述关联度值的计算方法采用相似性度量算法,即ROST SEAT算法。

进一步地,所述搜索导入模块用于导入搜索地名称,并发送至GPS定位模块;所述GPS定位模块用于定位搜索地,生成目标位置,并发送至线路规划模块;所述线路规划模块用于规划行进路线,并生成虚拟指向标;其中,所述生成虚拟指向标的具体过程为:

SSS1、在地图上标注实际位置和目标位置;

SSS2、规避建筑物连线目标位置和实际位置,生成预备行进路线;

SSS3、根据预备行进路线的长度,按从小到达排序,选择其中的最小值,最小值所对应的预备行进路线即为行进路线;

SSS4、根据行进路线生成指向标方向,进而生成虚拟指向标,并将虚拟指向标发送至尺寸获取模块。

进一步地,所述尺寸获取模块用于获取虚拟指向标尺寸,同时获取景深影像中实际物尺寸,并将虚拟指向标尺寸和实际物尺寸发送至判断模块;所述判断模块用于判断虚拟指向标尺寸和实际物尺寸的相似度,并依据相似度标记实际物;所述画面生成模块依据虚拟指向标替换标记后的实际物,生成播放画面,并发送至显示模块;所述显示模块用于显示播放画面。

相比于现有技术,本发明的有益效果在于:

1、本发明通过红外捕捉模块获取用户眼镜的真实注视点,并依据真实注视点拍摄景深影像,再由图像预处理模块处理景深影像,使得景深影像先分解成图像帧数据,再标号图像帧数据,形成标号帧数据,最后判断标号帧数据内的标号是否为奇数,若为奇数,则将标号帧数据发送至第一特征获取模块,若不为奇数,则将标号帧数据发送至第二特征获取模块,此过程中,标号图像帧数据和判断标号帧数据的过程同步进行,从而达到快速识别图像的目的,降低了AR智能眼镜的卡顿,提高了用户的使用体感。

2、本发明通过对比模块得到实际位置,达到精确用户位置的目的,再通过搜索导入模块导入搜索地名称,并由GPS定位模块确定目的位置,当实际位置与目标位置全部确定后,线路规划模块确定用户的行进路线,并生成虚拟指向标,再由尺寸获取模块确定景深影像中待覆盖的实际物,并用虚拟指向标覆盖,覆盖后的景深影像交由画面生成模块生成播放画面,最终由显示模块显示,达到指引用户的目的,使得指引清晰直观。

附图说明

附图用来提供对本发明的进一步理解,并且构成说明书的一部分,与本发明的实施例一起用于解释本发明,并不构成对本发明的限制。

图1为本发明提出的一种基于AR智能眼镜的图像识别系统的模块运行示意图。

具体实施方式

下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。

在本发明的描述中,需要理解的是,术语“上”、“下”、“前”、“后”、“左”、“右”、“顶”、“底”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本发明和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本发明的限制。

实施例1:

请参阅图1,本发明提供一种技术方案:一种基于AR智能眼镜的图像识别系统,包括红外捕捉模块、图像获取模块、图像预处理模块、第一特征获取模块、第二特征获取模块、存储模块、数据库、对比模块、搜索导入模块、GPS定位模块、线路规划模块、尺寸获取模块、判断模块、画面生成模块和显示模块;

其中,GPS定位模块与线路规划模块通讯连接;红外捕捉模块与图像获取模块通讯连接,红外捕捉模块用于捕捉用户的瞳孔缩放程度,生成真实注视点,并发送至图像获取模块;图像获取模块用于获取景深影像,并发送至图像预处理模块和尺寸获取模块;图像预处理模块用于处理景深影像;其中,处理景深影像的具体操作为:

首先,通过模数转换器将景深影像转化为图像帧数据;其次,对图像帧数据进行标号,形成标号帧数据;最后,标号完毕的标号帧数据将立即判断标号是否为奇数,若为奇数,则将标号帧数据发送至第一特征获取模块,若不为奇数,则将标号帧数据发送至第二特征获取模块;

第一特征获取模块用于获取标号帧数据内的特殊事物,并发送至存储模块;第二特征获取模块用于获取标号帧数据内的特殊事物,并发送至存储模块,特殊事物包括地标建筑和道路名称;生成真实注视点是采用眼球追踪技术;获取景深影像是采用景深摄像装置拍摄得到。

具体的,在识别图像的过程中,红外捕捉模块通过眼球追踪技术获取用户眼镜的真实注视点,而图像获取模块内的景深摄像装置依据真实注视点拍摄景深影像,再由图像预处理模块处理景深影像,使得景深影像先分解成图像帧数据,再标号图像帧数据,形成标号帧数据,最后判断标号帧数据内的标号是否为奇数,若为奇数,则将标号帧数据发送至第一特征获取模块,若不为奇数,则将标号帧数据发送至第二特征获取模块,此过程中,标号图像帧数据和判断标号帧数据的过程同步进行,从而达到快速识别图像的目的,降低了AR智能眼镜的卡顿,提高了用户的使用体感。

实施例2:

请参阅图1,存储模块用于存储特殊事物,并发送至对比模块;数据库用于存储地图数据,并发送至对比模块;对比模块用于对比特殊事物和地图数据,并生成实际位置;其中,生成实际位置的具体操作为:

SS1、计算特殊事物与地图数据的关联度值,记为a1、a2、a3……an

SS2、判断关联度值是否合格,具体为:

A、若关联度值<90%,则不合格,记为E;

B、若关联度值≥90%,则合格,记为F;

SS3、保留F所对应的地图数据,记为实际位置,并发送至线路规划模块,a1+a2+a3+……+an=E+F,关联度值的计算方法采用相似性度量算法,即ROST SEAT算法,搜索导入模块用于导入搜索地名称,并发送至GPS定位模块;GPS定位模块用于定位搜索地,

生成目标位置,并发送至线路规划模块;线路规划模块用于规划行进路线,并生成虚拟指向标;其中,生成虚拟指向标的具体过程为:在地图上标注实际位置和目标位置;规避建筑物连线目标位置和实际位置,生成预备行进路线;根据预备行进路线的长度,按从小到达排序,选择其中的最小值,最小值所对应的预备行进路线即为行进路线;根据行进路线生成指向标方向,进而生成虚拟指向标,并将虚拟指向标发送至尺寸获取模块,尺寸获取模块用于获取虚拟指向标尺寸,同时获取景深影像中实际物尺寸,并将虚拟指向标尺寸和实际物尺寸发送至判断模块;判断模块用于判断虚拟指向标尺寸和实际物尺寸的相似度,并依据相似度标记实际物;画面生成模块依据虚拟指向标替换标记后的实际物,生成播放画面,并发送至显示模块;显示模块用于显示播放画面。

具体的,在指引用户的过程中,第一特征获取模块和第二特征获取模块分别获取标号帧数据内的特殊事物,并将特殊事物存储于存储模块内,再由对比模块依据数据库内的地图数据对比特殊事物,从而得到实际位置,达到精确用户位置的目的,用户再通过搜索导入模块导入搜索地名称,并通过GPS定位模块确定目的位置,当实际位置与目标位置全部确定后,线路规划模块确定用户的行进路线,并生成虚拟指向标,再由尺寸获取模块确定景深影像中待覆盖的实际物,并用虚拟指向标覆盖,覆盖后的景深影像交由画面生成模块生成播放画面,最终由显示模块显示,达到指引用户的目的,使得指引清晰直观。

本发明的工作原理及使用流程:用户使用AR智能眼镜时,红外捕捉模块通过眼球追踪技术获取用户眼镜的真实注视点,而图像获取模块内的景深摄像装置依据真实注视点拍摄景深影像,再由图像预处理模块处理景深影像,使得景深影像先分解成图像帧数据,再标号图像帧数据,形成标号帧数据,最后判断标号帧数据内的标号是否为奇数,若为奇数,则将标号帧数据发送至第一特征获取模块,若不为奇数,则将标号帧数据发送至第二特征获取模块,此过程中,标号图像帧数据和判断标号帧数据的过程同步进行,从而达到快速识别图像的目的,降低了AR智能眼镜的卡顿,提高了用户的使用体感,而第一特征获取模块和第二特征获取模块分别获取标号帧数据内的特殊事物,并将特殊事物存储于存储模块内,再由对比模块依据数据库内的地图数据对比特殊事物,从而得到实际位置,达到精确用户位置的目的,用户再通过搜索导入模块导入搜索地名称,并通过GPS定位模块确定目的位置,当实际位置与目标位置全部确定后,线路规划模块确定用户的行进路线,并生成虚拟指向标,再由尺寸获取模块确定景深影像中待覆盖的实际物,并用虚拟指向标覆盖,覆盖后的景深影像交由画面生成模块生成播放画面,最终由显示模块显示,达到指引用户的目的,使得指引清晰直观,完成操作。

以上所述,仅为本发明较佳的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,根据本发明的技术方案及其发明构思加以等同替换或改变,都应涵盖在本发明的保护范围之内。

8页详细技术资料下载
上一篇:一种医用注射器针头装配设备
下一篇:一种多摄像机拍摄视频的质量评估方法

网友询问留言

已有0条留言

还没有人留言评论。精彩留言会获得点赞!

精彩留言,会给你点赞!

技术分类