阅读说明：本技术 一种自动售货机及售货系统 (Automatic vending machine and vending system ) 是由 黄屹峰 韩雪峰 王渊 刘坤 于 2020-05-28 设计创作，主要内容包括：本申请提供了一种自动售货机及售货系统,通过语音识别模块从用户的语音信息中识别出语音指令,并将语音指令发送至提示信息生成模块以及第一订单生成模块；提示信息生成模块可以根据接收到的语音指令生成相应的提示信息,并将生成的提示信息反馈给用户；第一订单生成模块根据接收到的语音指令生成用户的物品订单；最后,订单执行模块根据第一面部识别模块确定出的用户的第一面部特征信息以及第一订单生成模块生成的物品订单,对用户的订购信息进行支付验证,并在确定用户完成对物品订单的支付后,将物品订单中的物品提供给用户,从而可以降低用户选购物品的复杂程度,有助于降低自动售货机的损坏概率,因而,可以避免不必要的经济损失。(The application provides a vending machine and a vending system, wherein a voice instruction is recognized from voice information of a user through a voice recognition module, and the voice instruction is sent to a prompt information generation module and a first order generation module; the prompt information generation module can generate corresponding prompt information according to the received voice instruction and feed the generated prompt information back to the user; the first order generation module generates an article order of the user according to the received voice instruction; finally, the order execution module performs payment verification on the order information of the user according to the first face characteristic information of the user determined by the first face identification module and the article order generated by the first order generation module, and provides the article in the article order to the user after determining that the user completes payment of the article order, so that the complexity of purchasing the article by the user can be reduced, the damage probability of the vending machine is reduced, and unnecessary economic loss can be avoided.)

一种自动售货机及售货系统

技术领域

本申请涉及人机交互技术领域，尤其是涉及一种自动售货机及售货系统。

背景技术

随着科学技术的发展，自动售货机已经逐渐进入人们的生活之中，应用于越来越多的公共场合，当人们需要订购物品时，可以到自动售货机处订购所需的物品，因此，自动售货机为人们的生活带来了许多便利。

目前，自动售货机大多设置于公共场所中，人们在获取物品的时候通常是通过设置于自动售货机上的按钮或者显示屏选择自己想要的物品，操作过程过于复杂，且随着自动售货机的使用次数的增多，自动售货机上的按钮或者显示屏会变得不够灵敏，自动售货机的损坏频率过高，进而造成了不必要的经济损失。

发明内容

有鉴于此，本申请的目的在于提供一种自动售货机及售货系统，能够根据用户的语音信息为用户提供需要的物品，可以降低用户选购物品的复杂程度，有助于降低自动售货机的损坏概率，因而，可以避免不必要的经济损失。

本申请实施例提供了一种自动售货机，所述自动售货机包括语音识别模块、第一面部识别模块、提示信息生成模块、第一订单生成模块以及订单执行模块；

所述语音识别模块，用于将采集到的用户的语音信息转换为相应的语音指令，并将所述语音指令发送至所述提示信息生成模块以及所述第一订单生成模块；

所述第一面部识别模块，用于将采集到的所述用户的第一面部图像转换为相应的第一面部特征信息，并将所述第一面部特征信息发送至订单执行模块；

所述提示信息生成模块，用于基于接收到的所述语音指令确定出反馈给所述用户的提示信息，并将所述提示信息反馈给所述用户；

所述第一订单生成模块，用于从接收到的所述语音指令中识别出订单信息，基于所述订单信息生成所述用户对应的物品订单，将所述物品订单反馈给所述用户，以及将所述物品订单发送至所述订单执行模块；

所述订单执行模块，用于基于所述第一面部特征信息以及所述物品订单，对所述用户进行支付验证，并在确定所述用户支付完成后，将所述物品订单中相应的物品提供给所述用户。

在一些实施例中，所述自动售货机还包括指纹识别模块；

所述指纹识别模块，用于采集所述用户的指纹信息，并将所述指纹信息发送至所述订单执行模块。

所述订单执行模块还用于，基于所述指纹信息以及所述物品订单或基于所述第一面部特征信息、所述指纹信息以及所述物品订单，对所述用户进行支付验证，并在确定所述用户支付完成后，将所述物品订单中相应的物品提供给所述用户。

在一些实施例中，所述自动售货机还包括体征识别模块以及建议生成模块；

所述体征识别模块，用于采集所述用户的全身图像，基于所述全身图像中确定出所述用户对应的体征信息，并将所述体征信息发送至所述建议生成模块；

所述建议生成模块，用于基于所述体征信息以及预设体征参照表，确定出所述用户对应的建议信息，并将所述建议信息反馈给所述用户。

在一些实施例中，所述自动售货机还包括手势识别模块；

所述手势识别模块，用于采集所述用户的手势图像，基于所述手势图像生成相应的订购指令，将所述订购指令发送至所述第一订单生成模块；

所述第一订单生成模块还用于，从接收到的所述订购指令中识别出订单信息，基于所述订单信息生成所述用户对应的物品订单，并将所述物品订单发送至所述订单执行模块。

在一些实施例中，所述自动售货机还包括显示模块；

所述自动售货机通过所述显示模块将所述提示信息、所述物品订单以及所述建议信息反馈给所述用户。

在一些实施例中，所述自动售货机还包括声音提示模块；

所述自动售货机通过所述声音提示模块将所述提示信息以及所述物品订单反馈给所述用户。

在一些实施例中，所述自动售货机还包括唤醒模块；

所述唤醒模块，用于从所述语音指令中确定出唤醒指令，响应于所述唤醒指令唤醒所述自动售货机，并向所述用户反馈所述唤醒指令相应的提示信息。

在一些实施例中，所述自动售货机还包括操作结束模块；

所述操作结束模块，用于从所述语音指令中确定出操作结束指令，响应于所述操作结束指令终止所述自动售货机与所述用户之间的交互操作，并向所述用户反馈所述操作结束指令相应的提示信息。

本申请实施例还提供了一种售货系统，包括上述的自动售货机、终端设备，所述自动售货机与所述终端设备之间通信连接；

所述终端设备包括第二面部识别模块以及第二订单生成模块；

所述第二面部识别模块，用于采集所述用户的第二面部图像，将所述第二面部图像转换为相应的第二面部特征信息，并将所述第二面部特征信息发送至所述第二订单生成模块；

所述第二订单生成模块，用于从所述用户的订购操作中确定出订单信息，基于所述第二面部特征信息以及所述订单信息，生成所述用户对应的物品订单，并将所述物品订单发送至所述自动售货机中的订单执行模块。

在一些实施例中，所述售货系统还包括虚拟现实设备，所述虚拟现实设备与所述自动售货机之间通信连接；

所述虚拟现实设备佩戴于所述用户的头部，用于根据所述用户的选择操作，生成相应的订单信息，并将所述订单信息发送至所述自动售货机中的第一订单生成模块。

本申请实施例提供的自动售货机及售货系统，所述自动售货机包括语音识别模块、第一面部识别模块、提示信息生成模块、第一订单生成模块以及订单执行模块；所述语音识别模块，用于将采集到的用户的语音信息转换为相应的语音指令，并将所述语音指令发送至所述提示信息生成模块以及所述第一订单生成模块；所述第一面部识别模块，用于将采集到的所述用户的第一面部图像转换为相应的第一面部特征信息，并将所述第一面部特征信息发送至订单执行模块；所述提示信息生成模块，用于基于接收到的所述语音指令确定出反馈给所述用户的提示信息，并将所述提示信息反馈给所述用户；所述第一订单生成模块，用于从接收到的所述语音指令中识别出订单信息，基于所述订单信息生成所述用户对应的物品订单，将所述物品订单反馈给所述用户，以及将所述物品订单发送至所述订单执行模块；所述订单执行模块，用于基于所述第一面部特征信息以及所述物品订单，对所述用户进行支付验证，并在确定所述用户支付完成后，将所述物品订单中相应的物品提供给所述用户。

这样，本申请能够从用户的语音信息中识别出语音指令，根据语音指令生成用户相应的物品订单，并通过从采集到的用户的第一面部图像中确定出的第一面部特征信息以及生成的物品订单，对用户的订购信息进行支付验证，并在确定用户完成对物品订单的支付后，将物品订单中的物品提供给用户，从而仅根据用户的语音信息便可以向用户提供需要的物品，可以降低用户选购物品的复杂程度，有助于降低自动售货机的损坏概率，进而，可以避免不必要的经济损失。

为使本申请的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。

附图说明

为了更清楚地说明本申请实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本申请的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。

图1为本申请实施例所提供的一种售货系统的结构示意图；

图2为图1中所示的自动售货机的结构示意图之一；

图3为图1中所示的自动售货机的结构示意图之二；

图4为图1中所示的终端设备的结构示意图。

图标：100-售货系统；110-自动售货机；1101-语音识别模块；1102-第一面部识别模块；1103-提示信息生成模块；1104-第一订单生成模块；1105-订单执行模块；1106-指纹识别模块；1107-体征识别模块；1108-建议生成模块；1109-手势识别模块；1110-显示模块；1111-声音提示模块；1112-唤醒模块；1113-操作结束模块；120-终端设备；1201-第二面部识别模块；1202-第二订单生成模块；130-虚拟现实设备。

具体实施方式

为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合本申请实施例中附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本申请实施例的组件可以以各种不同的配置来布置和设计。因此，以下对在附图中提供的本申请的实施例的详细描述并非旨在限制要求保护的本申请的范围，而是仅仅表示本申请的选定实施例。基于本申请的实施例，本领域技术人员在没有做出创造性劳动的前提下所获得的每个其他实施例，都属于本申请保护的范围。

经研究发现，目前，自动售货机大多设置于公共场所中，人们在获取物品的时候通常是通过设置于自动售货机上的按钮或者显示屏选择自己想要的物品，操作过程过于复杂，且随着自动售货机的使用次数的增多，自动售货机上的按钮或者显示屏会变得不够灵敏，自动售货机的损坏频率过高，进而造成了不必要的经济损失。

基于此，本申请实施例提供了一种自动售货机及售货系统，能够根据用户的语音信息为用户提供需要的物品，可以降低用户选购物品的复杂程度，有助于降低自动售货机的损坏概率，进而，可以避免不必要的经济损失。

首先，对本申请所公开的一种售货系统100进行介绍。

请参阅图1，图1为本申请实施例所提供的一种售货系统100的结构示意图。售货系统100包括自动售货机110、终端设备120以及虚拟现实设备130。

其中，自动售货机110分别与终端设备120以及虚拟现实设备130通信连接。

请参阅图2，图2为图1中所示的自动售货机110的结构示意图之一。自动售货机110包括语音识别模块1101、第一面部识别模块1102、提示信息生成模块1103、第一订单生成模块1104以及订单执行模块1105。

其中，语音识别模块1101可以采集用户在自动售货机110前发出的语音信息，并将采集到的语音信息转换为提示信息生成模块1103以及第一订单生成模块1104能够识别的语音指令，并将转换得到的语音指令发送至提示信息生成模块1103以及第一订单生成模块1104。

语音识别模块1101可以为收音装置、话筒等能够采集声音的装置。当用户在自动售货机110前说话时，能够采集到用户的语音信息，并根据语音信息得到语音指令。

第一面部识别模块1102可以采集用户的第一面部图像，并将采集到的第一面部图像转换为订单执行模块1105可以识别的第一面部特征信息，并将第一面部特征信息发送至订单执行模块1105。

其中，第一面部识别模块1102可以为摄像机等，设置于自动售货机110上。当用户站在自动售货机110前面时，设置在自动售货机110上的第一面部识别模块1102便能够对用户的面部进行图像采集，得到用户的第一面部图像，同时，还可以从第一面部图像中确定出第一面部特征信息。

提示信息生成模块1103可以根据接收到的语音指令，确定出反馈给用户的提示信息，并将确定出的提示信息反馈给用户，以提示用户进行下一步的操作。

第一订单生成模块1104可以从接收到的语音指令中识别出订单信息，并基于识别出的订单信息生成对应的物品订单，并将生成的物品订单反馈给相应的用户，以供用户进行查看，同时，将生成的物品订单发送至订单执行模块1105。

示例性的，当用户说“购买汉堡和可乐”时，第一订单生成模块1104能够识别出用户想要的订单信息“汉堡”以及“可乐”，然后，第一订单生成模块1104就会根据订单信息“汉堡”以及“可乐”生成物品订单，并将生成的物品订单反馈给用户。

订单执行模块1105可以根据接收到的第一面部识别模块1102发送的第一面部特征信息以及第一订单生成模块1104发送的物品订单，对用户进行支付验证，即验证用户是否可以对该物品订单进行支付，并在确定该用户完成对该物品订单的支付后，将物品订单中的相应物品提供给该用户。

具体的，基于第一面部特征信息以及物品订单，从用户相应的支付账户中获取相应的消费资源，用于支付用户的此次订购操作，并在确定该用户完成支付操作后，将物品订单中的物品提供给用户。

进一步的，请参阅图3，图3为本申请实施例所提供的一种自动售货机110的结构示意图之二。如图3中所示，自动售货机110还包括指纹识别模块1106。

其中，指纹识别模块1106可以采集用户的指纹信息，并将采集到的指纹信息发送给订单执行模块1105。

具体的，可以在自动售货机110上设置一个指纹扫描仪，当用户把手指放在指纹扫描仪上时，通过扫描用户的手指得到用户的指纹信息。

当订单执行模块1105接收到指纹识别模块1106发送的指纹信息时，可以基于指纹信息以及第一订单生成模块1104发送的物品订单，对用户的物品订单进行支付验证，即验证用户是否可以对该物品订单进行支付，并在确定该用户完成对该物品订单的支付后，将物品订单中的相应物品提供给该用户。

具体的，基于指纹信息以及物品订单，从用户相应的支付账户中获取相应的消费资源，用于支付用户的此次订购操作，并在确定该用户完成支付操作后，将物品订单中的物品提供给用户。

另外，当订单执行模块1105接收到指纹识别模块1106发送的指纹信息时，可以基于第一面部特征信息、指纹信息以及第一订单生成模块1104发送的物品订单，对用户的物品订单进行支付验证，即验证用户是否可以对该物品订单进行支付，并在确定该用户完成对该物品订单的支付后，将物品订单中的相应物品提供给该用户。

具体的，基于第一面部特征信息、指纹信息以及物品订单，从用户相应的支付账户中获取相应的消费资源，用于支付用户的此次订购操作，并在确定该用户完成支付操作后，将物品订单中的物品提供给用户。

进一步的，如图3所示，自动售货机110还包括体征识别模块1107以及建议生成模块1108。

体征识别模块1107可以采集用户的全身图像，并从全身图像中确定出用户的体征信息，并将确定出的体征信息发送至建议生成模块1108，以供建议生成模块1108根据体征信息生成给用户的建议信息。

其中，体征信息包括身高、体重以及体态等。

建议生成模块1108可以根据接收到的体征识别模块1107发送的体征信息以及预设体征参照表，确定出给用户的建议信息，并将建议信息反馈给相应的用户，以供用户进行参考。

具体的，可以根据用户的体征信息确定出适合该用户的物品，示例性的，当用户的体重较重时，建议用户不要吃“汉堡”以及“可乐”等高热量的食物，并为用户提供低糖、低热量的食物，为用户提供参考。

进一步的，如图3所示，自动售货机110还包括手势识别模块1109。

手势识别模块1109可以采集用户的手势图像，从手势图像中识别出相应的手势动作，并根据手势动作生成相应的订购指令，并将订购指令发送至第一订单生成模块1104。

当第一订单生成模块1104接收到手势识别模块1109发送的订购指令之后，可以根据订购指令识别出订单信息，并基于识别出的订单信息生成用户对应的物品订单，并将生成的物品订单发送至订单执行模块1105。

进一步的，如图3所示，所述自动售货机110还包括显示模块1110。

自动售货机110可以通过显示模块1110将提示信息、物品订单以及建议信息反馈给用户。

其中，显示模块1110可以为显示屏等显示装置，即通过显示模块1110将提示信息、物品订单以及建议信息展示给用户。

例如，可以在显示屏上显示用户已经选择的商品名称、类别等；还可以将提供给用户的建议信息显示在屏幕中的特定位置处，以供用户进行查看等。

进一步的，如图3所示，自动售货机还包括声音提示模块1111。

自动售货机110还可以通过声音提示模块1111将提示信息、物品订单反馈给用户。

声音提示模块1111可以为扬声器等装置，即通过声音提示模块1111将提示信息以及物品订单信息播放给用户。

例如，可以询问用户选购的商品名称、种类等；还可以与用户核对物品订单信息中的物品是否正确等。

进一步的，如图3所示，自动售货机110还包括唤醒模块1112。

唤醒模块1112可以从接收到的语音指令中识别出唤醒指令，响应于识别出的唤醒指令唤醒自动售货机110，并向用户反馈与唤醒指令相应的提示信息。

示例性的，当从用户的语音指令中识别出唤醒指令“开机”时唤醒自动售货机110，并将与“开始”指令对应的提示信息“欢迎光临”反馈给用户，以提醒用户可以进行物品的订购操作。

进一步的，如图3所示，自动售货机110还包括操作结束模块1113。

操作结束模块1113可以从接收到的语音指令中识别出操作结束指令，响应于操作结束指令终止自动售货机110与用户之间的交互操作，并向用户反馈操作结束指令对应的提示信息。

示例性的，当从用户的语音指令中识别出操作结束指令“结束订购”时终止自动售货机110与用户之间的交互操作，并将与“结束订购”指令对应的提示信息“谢谢光临”反馈给用户，以提醒用户可以结束此次订购操作。

本申请实施例提供的自动售货机，所述自动售货机包括语音识别模块、第一面部识别模块、提示信息生成模块、第一订单生成模块以及订单执行模块；所述语音识别模块，用于将采集到的用户的语音信息转换为相应的语音指令，并将所述语音指令发送至所述提示信息生成模块以及所述第一订单生成模块；所述第一面部识别模块，用于将采集到的所述用户的第一面部图像转换为相应的第一面部特征信息，并将所述第一面部特征信息发送至订单执行模块；所述提示信息生成模块，用于基于接收到的所述语音指令确定出反馈给所述用户的提示信息，并将所述提示信息反馈给所述用户；所述第一订单生成模块，用于从接收到的所述语音指令中识别出订单信息，基于所述订单信息生成所述用户对应的物品订单，将所述物品订单反馈给所述用户，以及将所述物品订单发送至所述订单执行模块；所述订单执行模块，用于基于所述第一面部特征信息以及所述物品订单，对所述用户进行支付验证，并在确定所述用户支付完成后，将所述物品订单中相应的物品提供给所述用户。

这样，本申请能够从用户的语音信息中识别出语音指令，根据语音指令生成用户相应的物品订单，并通过从采集到的用户的第一面部图像中确定出的第一面部特征信息以及生成的物品订单，对用户的订购信息进行支付验证，并在确定用户完成对物品订单的支付后，将物品订单中的物品提供给用户，从而仅根据用户的语音信息便可以用户提供需要的物品，可以降低用户选购物品的复杂程度，有助于降低自动售货机的损坏概率，进而，可以避免不必要的经济损失。

另外，如图4所示，图4为图1中所示的终端设备120的结构示意图。

终端设备120包括第二面部识别模块1201以及第二订单生成模块1202。

第二面部识别模块1201可以采集用户的第二面部图像，并将采集到的第二面部图像转换为第二订单生成模块1202能够识别的第二面部特征信息，并将第二面部特征信息发送至第二订单生成模块1202。

第二订单生成模块1202可以从用户的订购操作中确定出订单信息，然后，基于订单信息以及第二面部特征信息生成用户对应的物品订单，并将生成的物品订单发送至自动售货机110中的订单执行模块1105。

具体的，用户可以通过在终端设备120上施加选择操作或者输入操作等订购操作确定想要的商品，终端设备120中的第二订单生成模块1202可以在订购操作中识别出相应的订单信息，进而，根据订单信息以及第二面部特征信息生成物品订单。

此时，订单执行模块1105在基于第一面部特征信息以及物品订单对用户进行支付验证之前，首先，比对第一面部特征信息与第二面部特征之间的相似度，当相似度达到预设阈值后，再基于第一面部特征信息以及物品订单对用户进行支付验证，并在确定用户完成支付后将物品订单中相应的物品提供给用户。

进一步的，如图1所示，售货系统100中的虚拟现实设备130佩戴于用户的头部，可以根据用户的选择操作，生成相应的订单信息，并将生成的订单信息发送至自动售货机110中的第一订单生成模块1104。

此时，第一订单生成模块1104便可以根据接收到的订单信息生成对应的物品订单。

其中，虚拟现实设备130能够使得用户在家中便可以体验到身处商场的感觉，为用户营造一个良好的购物环境。

所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统、装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

在本申请所提供的几个实施例中，应该理解到，所揭露的系统、装置和方法，可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，又例如，多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本申请各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。

所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个处理器可执行的非易失的计算机可读取存储介质中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(Read-OnlyMemory，ROM)、随机存取存储器(Random Access Memory，RAM)、磁碟或者光盘等各种可以存储程序代码的介质。

最后应说明的是：以上所述实施例，仅为本申请的具体实施方式，用以说明本申请的技术方案，而非对其限制，本申请的保护范围并不局限于此，尽管参照前述实施例对本申请进行了详细的说明，本领域的普通技术人员应当理解：任何熟悉本技术领域的技术人员在本申请揭露的技术范围内，其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化，或者对其中部分技术特征进行等同替换；而这些修改、变化或者替换，并不使相应技术方案的本质脱离本申请实施例技术方案的精神和范围，都应涵盖在本申请的保护范围之内。因此，本申请的保护范围应以权利要求的保护范围为准。