一种智能设备

文档序号:55812 发布日期:2021-10-01 浏览:38次 >En<

阅读说明:本技术 一种智能设备 (Intelligent device ) 是由 李广琴 朱琳清 赵启东 黄利 刘晓潇 杨斌 于 2020-06-02 设计创作,主要内容包括:本发明公开了一种智能设备,通过对连续的多帧参考图像进行识别分析,可以确定用户是否正在化妆。从而可以在用户正在化妆时,根据用户的当前化妆区域,确定出与当前化妆区域对应的化妆用品,并控制显示器显示所述化妆用品,从而可以直接向用户推荐与当前化妆区域对应的化妆用品。这样可以结合用户的化妆过程,推荐所需的化妆用品,从而可以在用户需要化妆用品时,直接从显示器上显示的化妆用品中进行选择,进而可以降低用户搜索所需的化妆用户的时间,提高用户的体验。(The invention discloses intelligent equipment which can determine whether a user is making up or not by identifying and analyzing continuous multi-frame reference images. Therefore, when the user is making up, the cosmetic products corresponding to the current makeup area are determined according to the current makeup area of the user, and the display is controlled to display the cosmetic products, so that the cosmetic products corresponding to the current makeup area can be directly recommended to the user. Therefore, the required cosmetics can be recommended in combination with the makeup process of the user, so that when the user needs the cosmetics, the user can directly select from the cosmetics displayed on the display, the time for the user to search for the required cosmetics can be reduced, and the user experience is improved.)

一种智能设备

技术领域

本发明涉及智能家居

技术领域

,尤指一种智能设备。

背景技术

通常,市面上的化妆用品的种类繁多,不同人所需要的化妆用品的种类也不同。并且,人们在日常化妆或基于化妆教学视频学习化妆时,没有对应的化妆用品或化妆用品用完了,此时,一般是到实体店购买或第三方购物平台购买。这样导致人们需要花费较多的时间才能买到所需的化妆用品,存在耗时较长的问题。

发明内容

本发明实施例提供一种智能设备及数据处理方法,用以降低耗时。

第一方面,本发明实施例提供了一种智能设备,包括:

显示器,被配置为显示画面;

图像采集器,被配置为采集包含用户人脸的参考图像;

处理器,被配置为:

接收连续的多帧所述参考图像;

根据接收到的多帧所述参考图像,判断所述用户是否正在化妆;

若是,则根据所述用户的当前化妆区域,确定出与所述当前化妆区域对应的化妆用品,并控制所述显示器显示所述化妆用品。

本发明有益效果如下:

本发明实施例提供的一种智能设备,通过对连续的多帧参考图像进行识别分析,可以确定用户是否正在化妆。从而可以在用户正在化妆时,根据用户的当前化妆区域,确定出与当前化妆区域对应的化妆用品,并控制显示器显示所述化妆用品,从而可以直接向用户推荐与当前化妆区域对应的化妆用品。这样可以结合用户的化妆过程,推荐所需的化妆用品,从而可以在用户需要化妆用品时,直接从显示器上显示的化妆用品中进行选择,进而可以降低用户搜索所需的化妆用户的时间,提高用户的体验。

附图说明

图1为本发明实施例中的一些智能设备的结构示意图;

图2为本发明实施例中的又一些智能设备的结构示意图;

图3为本发明实施例中的智能设备的一些显示界面的示意图;

图4a为本发明实施例中未持物化妆的示意图;

图4b为本发明实施例中持物化妆的示意图;

图5为本发明实施例中脸部区域的示意图;

图6为本发明实施例中的智能设备的又一些显示界面的示意图;

图7为本发明实施例中的智能设备的又一些显示界面的示意图;

图8为本发明实施例中的智能设备的又一些显示界面的示意图;

图9为本发明实施例中的智能设备的又一些显示界面的示意图;

图10为本发明实施例中提供的又一些智能设备的结构示意图;

图11为本发明实施例中提供的一些数据处理方法的流程图;

图12为本发明实施例中提供的一种实施例的流程图;

图13为本发明实施例中提供的另一种实施例的流程图;

图14为本发明实施例中提供的又一种实施例的流程图;

图15为本发明实施例中提供的又一种实施例的流程图。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例的附图,对本发明实施例的技术方案进行清楚、完整地描述。显然,所描述的实施例是本发明的一部分实施例,而不是全部的实施例。并且在不冲突的情况下,本发明中的实施例及实施例中的特征可以相互组合。基于所描述的本发明的实施例,本领域普通技术人员在无需创造性劳动的前提下所获得的所有其他实施例,都属于本发明保护的范围。

除非另外定义,本发明使用的技术术语或者科学术语应当为本发明所属领域内具有一般技能的人士所理解的通常意义。本发明中使用的“第一”、“第二”以及类似的词语并不表示任何顺序、数量或者重要性,而只是用来区分不同的组成部分。“包括”或者“包含”等类似的词语意指出现该词前面的元件或者物件涵盖出现在该词后面列举的元件或者物件及其等同,而不排除其他元件或者物件。“连接”或者“相连”等类似的词语并非限定于物理的或者机械的连接,而是可以包括电性的连接,不管是直接的还是间接的。

需要注意的是,附图中各图形的尺寸和形妆不反映真实比例,目的只是示意说明本发明内容。并且自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。

本发明实施例提供一种智能设备,如图1所示,可以包括:

显示器10,被配置为显示画面;

图像采集器20,被配置为采集包含用户人脸的参考图像。

并且,如图11所示,处理器30,被配置为执行如下步骤:

S100、接收连续的多帧参考图像;

S200、根据接收到的多帧参考图像,判断用户是否正在化妆;若是,则执行S300;若否,则重复步骤S100;

S300、根据用户的当前化妆区域,确定出与当前化妆区域对应的化妆用品,并控制显示器显示确定出的化妆用品。

本发明实施例提供上述智能设备,通过对连续的多帧参考图像进行识别分析,可以确定用户是否正在化妆。从而可以在用户正在化妆时,根据用户的当前化妆区域,确定出与当前化妆区域对应的化妆用品,并控制显示器显示化妆用品,从而可以直接向用户推荐与当前化妆区域对应的化妆用品。这样可以结合用户的化妆过程,推荐所需的化妆用品,从而可以在用户需要化妆用品时,直接从显示器上显示的化妆用品中进行选择,进而可以降低用户搜索所需的化妆用户的时间,提高用户的体验。

通常,人们会采用化妆品(例如,口红、眼影、隔离霜、粉底、腮红、散粉等)进行不同妆容的化妆,以提升皮肤气色。并且在化妆的过程中,还会使用到一些化妆工具(例如,唇刷、眼影刷、腮红刷、散粉刷等),以使化妆品可以均匀的涂抹在皮肤上。例如,在进行眼影妆容时,通过使用眼影刷将眼影涂抹到皮肤上或直接用手将眼影涂抹到皮肤上。在进行唇部妆容时,可以直接将口红涂抹到嘴唇上,或采用唇刷将口红涂抹到嘴唇上。在具体实施时,本发明实施例中的化妆用品可以包括化妆品和化妆工具中的至少一种。

其中,处理器获取到的多帧参考图像是连续的,从而可以使这多帧参考图像表示一个连续的动态过程。因此,可以采用深度学习算法对这多帧参考图像进行识别,从而可以对用户是否正在化妆进行判断。需要说明的是,采用深度学习算法判断用户是否正在化妆的过程可以与相关技术中的基本相同,在此不作赘述。

需要说明的是,在本发明实施例中,显示器还可以具有镜面功能,使得用户可以通过显示器实现照镜子功能,以便于通过镜子完成上妆;同时,通过显示器还可以显示画面,以便于显示确定出的化妆用品。

并且,本发明实施例中的智能设备,可以为具有显示功能的镜子(如图2所示,且图中未示出处理器)、或具有镜面功能的显示设备,且该显示设备可以为移动终端或电视等具有显示功能的设备,在此并不限定。

其中,在智能设备为具有显示功能和镜面功能且非移动终端的设备时,以美妆镜为例,由于美妆镜所应用的场景具有固定性因素,使得购物(后面内容中有介绍)、分享交流(后面内容中有介绍)、以及个人信息(后面内容中有介绍)等不能实时的查阅。因此,为了使用户不受地理位置的限制,可以将处理器中用于实现交流分享功能的模块、以及用于实现个人信息设置的模块,设置在移动终端(例如但不限于手机、平板电脑等)一侧,且移动终端的显示界面可以与美妆镜的显示界面设计类似,以使得移动终端与美妆镜进行适配,从而使得移动终端的数据可以通过网络与美妆镜的后台数据相关联,实现同步内容更新。

此外,图像采集器可以为摄像头等图像采集结构,只要能够实现图像采集即可,具体实现结构在此并不做具体限定。

并且,智能设备还可以包括语音采集器,用于采集用户发出的语音信息,以便于实现人机交互、以及语音控制等功能。其中,语音采集器可以但不限于为麦克风阵列。

在具体实施时,在本发明实施例中,结合图3所示,对于显示器的显示界面而言,可以按照以下方式进行设置:

显示器包括显示区域,显示区域包括:镜面区域(如Q1)和常规显示区域(如Q2);常规显示区域至少用于显示化妆用品。示例性地,常规显示区域用于还可以显示功能按钮,功能按钮可以包括与实现不同功能(例如拍照、化妆辅助教程)对应的功能按钮;

镜面区域用于为用户提供镜面功能;

其中,处理器推荐的化妆用品可以在镜面区域和/或常规显示区域进行显示。

例如,如图3所示,在镜面区域(如Q1),用户可以在该区域照镜子,且对着镜子进行化妆;在常规显示区域(如Q2,且图3中用虚线框仅标出了部分常规显示区域),可以显示画面,包括功能按钮等。

说明一点,镜面区域和常规显示区域的面积比例是可调的,可以通过手动拖动虚线L0(如图3所示)或语音控制的方式来实现,以便于适用不同功能的需求。

如此,不仅可以实现照镜子,还可以同时显示画面,并且为用户在照镜子化妆时提供辅助信息,以辅助指导用户化妆,以化出符合用户自身特点的妆容,满足不用客户的需求。

当然,显示器的显示界面的设计并不限于图3所示,还可以是其他可以实现上述功能的设计方式,在此并不限定。

可选地,在本发明实施例中,如图3所示,智能设备还包括:用于对脸部上妆进行补光的补光结构40;

镜面区域Q1和常规显示区域Q2沿第一方向(如Y方向)排列;

显示区域具有两个相对设置且平行于第一方向的第一侧边,补光结构40靠近至少一个第一侧边设置。

如此,在用户通过镜面区域进行照镜子,且处于环境光线较暗的区域时,可以通过补光结构为用户进行补光或打光,不仅可以使得用户在照镜子时可以看得更加清楚,还可以在拍摄(后面内容有介绍)时得到较好的拍摄效果。

可选地,在本发明实施例中,如图3所示,显示器还包括围绕显示区域(如Q1和Q2所在区域)的边框区域Q3,补光结构40位于边框区域Q3内。

如此,可以避免补光结构对显示区域内的结构造成影响,提高显示区域的显示效果。

下面对智能设备的各功能进行分类介绍。

1、推荐功能。

具体地,在本发明实施例中,确定出与当前化妆区域对应的化妆用品,可以为用户正在进行化妆的妆容所需的化妆用品,例如,可以为用户正在进行化妆的妆容所需的化妆品和化妆工具中的至少一种。这样可以向用户直接推荐正在化妆的妆容所需的化妆品和化妆工具中的至少一种。

在化妆的过程中,有些妆容可以采用手直接上妆,也可以采用化妆工具进行上妆,并且用手直接上妆与采用化妆工具上妆的妆态特征之间的区域是比较明显的。例如,图4a示意出了用手直接上妆时的参考图像。图4b示意出了手持化妆工具上妆时的参考图像。因此,可以通过检测用户用手上妆还是采用化妆工具上妆。其中,在用户用手直接对脸上的部位所在的化妆区域上妆时,可以推荐适合该部位的妆容的化妆品和/或化妆工具。在用户采用化妆工具对脸上的部位所在的化妆区域上妆时,也可以推荐适合该部位的妆容的化妆品和/或化妆工具。

可选地,在本发明实施例中,如图12所示,处理器,进一步被配置为执行如下步骤:

S310、根据多帧参考图像,判断用户是否采用化妆工具进行化妆;若是,则执行步骤S320;若否,则执行步骤S330;

S320、根据化妆工具与化妆工具处于的当前化妆区域,确定出化妆工具处于的化妆区域对应的化妆用品;

S330、根据用户的手指处于的当前化妆区域,确定出手指处于的当前化妆区域对应的化妆用品。

示例性地,可以将化妆过程的样本图片标注手指所在的位置区域以及手持化妆工具与未手持化妆工具两种类别进行网络训练,即可训练得到检测识别网络。这样可以采用训练好的检测识别网络,对连续的多帧参考图像进行检测,即可判断用户是否采用化妆工具进行化妆,进而可以根据用户的手是否采用化妆工具进行化妆以进行相应的护肤品和/或护肤工具的推荐。

推荐方式1:未采用化妆工具化妆的推荐方式。

可选地,在本发明实施例中,如图13所示,处理器,进一步被配置为执行如下步骤:

S321、根据多帧参考图像,确定手指在参考图像中连续的第一移动区域与脸部关键位置区域的重合度;其中,脸部关键位置区域包括:眉部关键区域、眼部关键区域、颧骨关键区域以及唇部关键区域;

S322、在重合度大于重合度阈值时,根据多帧参考图像中,手指与眼部关键区域、颧骨关键区域以及唇部关键区域的位置关系,确定出用户的手指处于的当前化妆区域。

S323、在重合度不大于重合度阈值时,根据当前季节的气候特征推荐化妆用品。

示例性地,如图5所示,人脸的脸部区域中具有眉毛、眼睛、嘴唇、颧骨等一些相对较明显部位。可选地,在具体实施时,脸部关键位置区域可以包括:眉部关键区域S1、眼部关键区域S2、颧骨关键区域S3以及唇部关键区域S4。

如图4a所示,采用手直接上妆的用户,一般是采用手指部位将化妆品均匀涂抹于人脸对应部位中。在实际应用中,可以采用手来上妆的部位的妆容,例如为,眼部关键区域的眼影妆容、脸部区域的底妆妆容、颧骨关键区域处的腮红妆容、唇部关键区域处的唇部妆容。因此,可以通过连续的多帧参考图像,判断用户的手指在参考图像中连续的第一移动区域与脸部关键位置区域之间的重合度与重合度阈值之间的大小关系,可以确定手指是与脸部区域是具有关联性的,即可以说明用户直接用手进行化妆。并且,可以根据手指与眼部关键区域、颧骨关键区域以及唇部关键区域的位置关系,确定出用户的手指处于的当前化妆区域,从而可以确定出用户当前正在化妆的妆容属于哪个脸部区域中的哪个部位的妆容。进而可以根据确定出的妆容,确定需要向用户推荐的化妆品及化妆工具。

示例性地,结合图5与图4a所示,重合度可以为手部所在的位置区域(例如WS1标示的虚线矩形框)与脸部关键位置区域(眉部关键区域S1、眼部关键区域S2、颧骨关键区域S3以及唇部关键区域S4)的交并比IOU,即IOU=(A∩B)/(A∪B)。当然,在实际应用中,重合度还可以为其他实施方式,在此不作限定。

示例性地,重合度阈值可以为根据经验确定的数值,或者也可以为根据实际应用环境的需求确定的数值,例如,重合度阈值可以为0.8,在此不作限定。

示例性地,在确定多帧参考图像中,手指位于眼部关键区域、颧骨关键区域以及唇部关键区域中的至少两个关键区域时,将底妆化妆区域作为用户的手指处于的当前化妆区域。例如,当手指所在的位置区域与脸部关键位置区域具有关联性时,在连续多帧参考图像中,若手指位于眼部关键区域、颧骨关键区域以及唇部关键区域中的至少两个关键区域时,可以说明手指不固定于眉部关键区域、眼部关键区域、颧骨关键区域以及唇部关键区域中的任一个关键区域,即说明用户的手指所在的位置区域分布于全脸,则可以说明用户正在进行底妆妆容的上妆过程。这样可以将底妆化妆区域作为用户的手指处于的当前化妆区域,以推荐底妆所需的化妆品。例如,推荐底妆所需的隔离霜、粉底液、散粉等。

示例性地,在确定多帧参考图像中,手指均位于眼部关键区域时,将眼影妆化妆区域作为用户的手指处于的当前化妆区域。例如,当手指所在的位置区域与脸部关键位置区域关联时,在连续多帧参考图像中,若手指均位于眼部关键区域S2,则可以确定手指的活动范围固定于眼部关键区域S2,即用户的手指所在的位置区域分布于眼部关键区域S2,则可以说明用户正在进行眼影妆容的上妆过程,这样可以将眼部关键区域S2作为用户的手部正在化妆的当前化妆区域,以推荐眼影妆容所需的化妆用品。例如,推荐眼影妆容所需的化妆品:眼影。推荐眼影妆容所需的化妆工具:眼影刷。

示例性地,在确定多帧参考图像中,手指均位于唇部关键区域时,将唇妆化妆区域作为用户的手指处于的当前化妆区域。例如,当手指所在的位置区域与脸部关键位置区域关联时,在连续多帧参考图像中,若手指均位于唇部关键区域S4,则可以确定手指的活动范围固定于唇部关键区域S4,即用户的手指所在的位置区域分布于唇部关键区域S4,则可以说明用户正在进行唇部妆容的上妆过程,这样可以将唇部关键区域S4作为用户的手部正在化妆的当前化妆区域,以推荐唇部妆容所需的化妆用品。例如,推荐唇部妆容所需的化妆品:口红。推荐唇部妆容所需的化妆工具:口红刷。

示例性地,在确定多帧参考图像中,手指均位于颧骨关键区域时,将腮红妆化妆区域作为用户的手指处于的当前化妆区域。例如,当手指所在的位置区域与脸部关键位置区域关联时,在连续多帧参考图像中,若手指均位于颧骨关键区域S3,则可以确定手指的活动范围固定于颧骨关键区域S3,即说明用户的手指所在的位置区域分布于颧骨关键区域S3,则可以说明用户正在进行与颧骨关键区域S3相关的妆容的上妆过程。例如,正在进行腮红妆容的上妆过程,这样可以将颧骨关键区域S3作为用户的手部正在化妆的当前化妆区域,以推荐腮红妆容所需的化妆用品。例如,推荐腮红妆容所需的化妆品:腮红。推荐唇部妆容所需的化妆工具:腮红刷。

示例性地,在判断重合度不大于重合度阈值时,则说明手指所在的位置区域与脸部关键位置区域关联性较低,此时可以根据当前季节的气候特征推荐化妆用品。例如,一般春季或秋季的气候比较凉爽和干燥,夏季较潮湿和闷热,若当前季节为春季或秋季,可以推荐保湿性能较好的化妆品。若当前季节为夏季,可以推荐清爽性能较好的化妆品。

推荐方式2:采用化妆工具化妆的推荐方式。

采用化妆工具化妆过程中,主要是对化妆品及化妆工具的物品信息进行识别,从而推荐相应的化妆品及化妆工具。一般用户正在用的化妆品及化妆工具是用户基于自己的皮肤妆态和喜好进行选取的,因此通过对用户正在拿的化妆品及化妆工具的识别,了解到用户对化妆品及化妆工具的部分偏好信息。从而可以使推荐的化妆品及化妆工具可以更符合用户的需求。进一步降低用户的选购时间,提高用户体验。

可选地,在本发明实施例中,如图14所示,处理器,进一步被配置为执行如下步骤:

S331、根据多帧参考图像,识别化妆工具的物品信息;其中,物品信息包括:化妆工具的种类和化妆工具涂抹的化妆品的色号;

S332、根据识别出的物品信息,确定出化妆工具处于的化妆区域对应的化妆用品。

示例性地,可以采用各种化妆工具与化妆品的样本图片,对深度学习网络进行训练,从而可以获得化妆品及化妆工具的种类识别网络。在具体实施时,可以根据训练好的种类识别网络,检测出多帧参考图像中手拿的化妆工具所在的区域(例如,图4b所示的虚线框WS2),从而对检测出的手拿的化妆工具所在的区域WS2进行识别,以识别出手拿的化妆工具的具体种类。例如,可以识别出图4b中手拿的化妆工具的种类为腮红刷。例如,可以识别出手拿的化妆工具的种类为口红刷。例如,可以识别出手拿的化妆工具的种类为眼影刷。

示例性地,物品信息还包括:化妆工具的品牌信息。例如,品牌信息可以包括品牌名称。一般,化妆品或化妆工具上,标识有商品的品牌名字和/或品牌标识(logo)。通过对用户正在拿着的化妆品及化妆工具的品牌进行识别,可以确定用户喜好的化妆品品牌名称。从而可以基于用户喜好的化妆品品牌进行相应推荐,进一步降低搜索所需的化妆品及化妆工具所需的时间,进一步提高用户体验。当然,也有的化妆品或化妆工具上,不会标识商品的品牌名字和/或品牌标识,针对这些化妆品及化妆工具,可以采用识别出的种类和上妆色号进行推荐。

可选地,可以采用市面上的化妆品品牌的名字图片、标识(logo)图片,对深度学习网络进行训练,从而可以获得化妆品及化妆工具的品牌的识别网络。在具体实施时,可以根据训练好的品牌识别网络,对检测出的手拿的化妆工具所在的区域WS2进行识别,以识别出用户正在拿着的工具的品牌名称。

不同的人对不同化妆品的需求不同,这样使得不同化妆品的色号也不同。例如,口红有多种色号,眼影也有多种色号,腮红也有多种色号。口红的色号、眼影的色号、腮红的色号又各自不同。并且,在化妆时,可以采用唇刷将口红涂抹到嘴唇上,可以采用眼影刷将眼影涂抹到嘴唇上,可以采用腮红刷将腮红涂抹到脸部的颧骨位置处。示例性地,化妆工具涂抹的化妆品的色号可以同涂抹到人脸中的脸部关键区域中的色号进行确定。例如,化妆工具的种类识别为腮红刷时,化妆工具涂抹的化妆品的色号可以为将腮红涂抹到脸部的颧骨关键位置区域的色号。例如,化妆工具的种类识别为口红刷时,化妆工具涂抹的化妆品的色号可以为将口红涂抹到唇部关键位置区域的色号。例如,化妆工具的种类识别为眼影刷时,化妆工具涂抹的化妆品的色号可以为将眼影涂抹到眼部关键位置区域的色号。例如,化妆工具的种类识别为眉笔时,化妆工具涂抹的化妆品的色号可以为将眉笔涂抹到眉部关键位置区域的色号。

为了使妆容均匀,用户在化妆过程中,并不是仅在一个位置进行涂抹上妆,而是在一个区域内进行涂抹上妆。例如,图4b所示,用户采用腮红刷对颧骨关键区域进行腮红上妆。化妆工具所在的第二移动区域可以为化妆工具上妆的涂抹区域。例如,化妆工具所在的第二移动区域可以为颧骨关键区域,或者也可以比颧骨关键区域大(例如图4b所示的区域WS3);或者也可以比颧骨关键区域小,在此不作限定。

并且,通过确定出的手拿的化妆工具的种类和手拿的化妆工具所在的第二移动区域,可以确定出第二移动区域中的颜色的色号。从而可以根据第二移动区域中的颜色的色号,确定出要推荐的化妆品的色号。例如,确定出了手拿的化妆工具为腮红刷,以及腮红刷所在的第二移动区域,则可以确定出腮红刷在第二移动区域中刷出来的颜色的色号。进而可以根据腮红刷在第二移动区域中刷出来的颜色的色号,确定推荐的化妆品的色号,从而可以根据对应的手拿的化妆工具的种类和化妆工具涂抹的化妆品色号进行推荐相应的化妆品和化妆工具。

可选地,在本发明实施例中,如图15所示,处理器,进一步被配置为执行如下步骤:

S3311、根据多帧参考图像,确定化妆工具的种类和化妆工具在参考图像中连续的第二移动区域;

S3312、根据确定出的化妆工具的种类,确定化妆用品中的化妆品和/或化妆工具的种类;

S3313、根据第二移动区域中的化妆品的色号,确定化妆用品中的化妆品的色号。

可选地,可以具有以下几种推荐模式。

模式1:化妆显示模式。

示例性地,在化妆显示模式时,控制显示器的常规显示区域显示化妆用品,以及控制镜面区域为用户提供镜面功能。例如,如图6所示,镜面区域Q1出现用户化妆的画面,常规显示区域Q2还包括购物显示区域(如Q21所示),购物显示区域Q21用于:显示处理器推荐的化妆用品。

这样在用户通过镜面区域Q1进行化妆时,直接在购物显示区域Q21显示出当前上妆的妆容所需的化妆品及化妆工具,以向用户推荐需要的化妆商品。例如,用户通过镜面区域Q1对眉部妆容进行化妆时,可以在购物显示区域Q21显示出处理器推荐的眉笔、眉粉等化妆品,还可以在购物显示区域Q21显示出处理器推荐的眼眉刷等化妆工具。用户可以根据需要从中进行选择,之后,处理器可以根据用户的商品进行交易处理。

可选地,在本发明实施例中,处理器进一步被配置为:

在控制显示器显示推荐的化妆用品之后,且在用户从显示器显示的化妆用品中选择出目标产品时,确定用于购买目标产品的交易信息,并对交易信息进行交易处理。这样在用户有购物需求时,可以通过该功能进行购物,从而可以为用户提供更加便捷的购物方式,降低用户搜索所需的化妆品及化妆工具的时间。

模式2:全屏显示模式。

示例性地,在全屏显示模式时,控制显示器的常规显示区域显示化妆用品,并调整常规显示区域和镜面区域的面积比例,使得显示区域仅包括常规显示区域。例如,如图7所示,可以将显示区域整体作为常规显示区域Q2。示例性地,常规显示区域Q2可以显示功能按钮(例如,“首页”的功能按钮G1、“美妆商城”的功能按钮G2、“美丽圈”的功能按钮G3、“我的”功能按钮G4)。还可以显示“美妆商城”的界面MM0。这样可以使得显示区域中较大的面积作为常规显示区域Q2,以显示处理器推荐的化妆用品。例性地,结合图7所示,用户在选择“美妆商城”的功能按钮G2时,镜面区域Q1不在出现用户化妆的画面,而是由用户化妆的画面切换为“美妆商城”的界面MM0。即此时显示器的显示界面调整镜面区域的面积,使得整个显示区域A仅包括常规显示区域Q2。这样可以在“美妆商城”的界面MM0中,为用户提供正在进行的妆容所需的化妆品及化妆工具的名称、上妆色号、价格等。

示例性地,示例性地,不同用户可以通过“美丽圈”的功能按钮G3进入“美丽圈”功能。从而可以通过“美丽圈”功能进行分享交流。例如,用户选择“美丽圈”这一按钮(如G3所示)时,表示用户选择了分享交流功能按钮,此时显示器的显示界面调整镜面区域的面积,使得整个显示区域A仅包括常规显示区域Q2,如图8所示,其中,常规显示区域Q2可以包括分享交流区域,在分享交流区域内,用户可以浏览其他用户和自己分享的内容,同时还可以对分享的内容进行点赞、评论或转发等操作,从而实现不同用户之间的分享和交流。并且,不同用户分享的内容可以上传到服务器中进行存储。例如,可以将分享的化妆品及化妆工具的图片上传到服务器中。示例性地,处理器进一步被配置为:获取多帧用户上传到服务器中分享的化妆品及化妆工具的分享图片,对每一个分享图片进行识别,从而找到要推荐的化妆品及化妆工具的分享图片,进而根据找到的分享图片进行推荐。并且,在推荐时,还标上推荐的化妆品及化妆工具的名称、上妆色号、价格等。

可选地,在本发明实施例中,处理器进一步被配置为:

在控制显示器显示推荐的化妆用品之后,且在用户从显示器显示的化妆用品中选择出目标产品时,确定用于购买目标产品的交易信息,并对交易信息进行交易处理。这样在用户有购物需求时,可以通过该功能进行购物,从而可以为用户提供更加便捷的购物方式,降低用户搜索所需的化妆品及化妆工具的时间。

2、辅助功能,或者称之为化妆操作指导功能。

具体地,在本发明实施例中,辅助操作为:辅助用户对脸部进行上妆的操作,辅助信息包括辅助线、辅助点和/或文字指导信息,辅助功能包括显示辅助信息;

辅助信息在镜面区域进行显示;

镜面区域的面积大于常规显示区域的面积。

例如,如图9所示,以用户化眉部妆容为例,用户可以点击眉形辅助按钮(如G1),处理器可以根据采集到的参考图像,确定出用户的眉形特点,然后确定与用户眉形特点对应的辅助线(未示出)或辅助点(如F1内所示),在显示在用户的眉毛所在位置,即辅助线或辅助点叠加在用户的眉毛之上,使得用户可以根据显示的辅助线或辅助点,完成眉部妆容的上妆。

由于该辅助信息为辅助和指导用户进行上妆的,所以该辅助信息需要现在镜面区域,并叠加在需要上妆的部位,以便于为用户提供辅助和指导。

3、辅助功能,或者称之为同步教学功能。

具体地,在本发明实施例中,辅助操作为:为用户对脸部进行上妆提供教学视频的操作,辅助信息包括教学视频,辅助功能包括显示教学视频;

常规显示区域包括按钮区域和视频播放区域,功能按钮在按钮区域内显示,教学视频在视频播放区域内进行显示。

例如,处理器可以确定出与用户的脸部特点相关的教学视频,并在视频播放区域进行显示;此时,用户在观看教学视频的同时,在镜面区域Q1进行同步学习,实现“边看边学”的效果。

如此,可以为用户学习化妆提供教学指导,同时实现“边看边学”的效果,满足了学习化妆的要求。

在实际情况中,推荐的教学视频可能是针对全脸化妆的视频,但是有时用户并不需要学习全脸化妆的技术,可能只是对某些部位感兴趣,例如眉毛、嘴唇、眼睛等,此时:

需要说明的是,对于辅助和指导用户进行上妆时,除了可以在镜面区域显示辅助线、辅助点或文字信息之外,还可以通过语音的方式提供辅助功能,以便于为用户提供多方位且全面的辅助和指导,提高用户的体验感受。

4、登录注册功能。

为了提高智能设备使用的安全性,可以设置登录账户,使得每个用户只能登录自己的账户,且仅能看到自己账户中的内容,以保护用户的隐私安全。

因此,可选地,在本发明实施例中,常规显示区域还包括用户显示区域,如图3中的Q25区域所示,在用户区域Q25内,可以显示当前已经登录的用户信息(如头像、用户名、用户昵称、手机号或邮箱等表示用户身份的信息)。

其中,在用户第一次登录智能设备时,在注册过程中,可以通过图像采集器采集包括用户的脸部信息的参考图像,确定出脸部的关键点信息,然后再确定出用户的脸部特征,并对确定出的脸部特征进行保存。

在完成注册之后且用户在之后登录智能设备时,图像采集器继续采集当前用户的脸部信息,并进行人脸识别,确定是否与已经保存的用户相匹配,若匹配,则可以直接自动登录,跳过填写账户和密码的过程,从而实现人脸识别登录。

当然,在注册和登录时,除了可以实现人脸识别登录之外,还可以通过指纹识别登录、账户密码登录等方式,具体实现过程与上述人脸识别登录过程相似,均是在注册之后保存注册信息,并在之后登录时自动识别,以提高登录效率,减少登录时间。

说明一点,具体的登录和注册过程,可以参见现有技术,在此不再详述。

上述只是针对六大功能进行了介绍,在具体实施时,智能设备还可以包括除上述六大功能之外且与化妆相关的其他功能。

例如,参见图3所示,还包括护肤提醒功能,也即在常规显示区域可以包括信息提示区域(如Q26所示),在信息提示区域Q26可以显示天气信息、护肤信息、地址信息(未示出)等,为用户在护肤保养方面提供辅助和指导。

又例如,参见图3所示,还包括音乐播放功能,也即在常规显示区域可以包括音乐播放区域(如Q27所示),在音乐播放区域Q27,可以显示当前正在播放的音乐名称、音量控制按键、下一首和上一首的控制按键、以及暂停按键和开始按键等与音乐控制和显示相关的信息,以便于用户在练习化妆的过程中播放音乐,以缓解枯燥。

再例如,还可以包括连接功能,其中,可以通过连接模块连接无线网络、或者通过连接模块实现与移动终端的蓝牙连接等,以实现数据的上传和分享。

再例如,还可以包括时间显示功能,为用户提供时间参考,以便于用户在化妆时给予时间提醒,提高用户的体验感受。

如此,可以满足用户在各个方面的需求,同时满足不同用户的需求,使得该智能设备具有广泛的适用性。

总之,结合上述功能的介绍,在具体实施时,在本发明实施例中,为了实现上述功能,如图10所示,智能设备可以包括以下几部分:

一、输入传感器部分。

具体地,该部分包括:具有镜面功能和显示功能的显示器、图像采集器(例如但不限于摄像头)、语音采集器(例如但不限于播放器、麦克风阵列)。

其中,显示器、图像采集器、语音采集器的具体工作原理可以参见现有技术,在此不再详述。

二、识别部分。

具体地,该部分可以包括:语音识别模块、手势识别模块、人脸识别模块、视频内容分析识别模块。

其中,该识别部分中各模块的功能可以通过处理器来实现。

三、数据部分。

具体地,该部分可以包括:与移动终端同步的至少部分数据、数据库。

其中,数据库中可以包括:人脸数据、个人信息数据、教学视频数据、家庭账户数据等。

并且,处理器在工作时,可以根据需要读取数据库中的相关数据,再对读取到的相关数据进行对应处理。

显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。

26页详细技术资料下载
上一篇:一种医用注射器针头装配设备
下一篇:提拉线

网友询问留言

已有0条留言

还没有人留言评论。精彩留言会获得点赞!

精彩留言,会给你点赞!