阅读说明：本技术 基于智能识别与语音提示的垃圾收纳系统与方法 (Garbage storage system and method based on intelligent recognition and voice prompt ) 是由 王俊茜 徐勇 于 2019-10-31 设计创作，主要内容包括：本发明提供了一种基于智能识别与语音提示的垃圾收纳系统,包括多个制造为不同单色颜色的箱体,并印刷上醒目的文字说明；每个箱体顶端设计为双页闭合式的箱体盖,所述箱体盖上方安装可见光摄像头与低功率红外摄像头,同时安装低功率LED照明灯,当有物体靠近所述箱体盖时,根据可见光摄像头采集到的可见光图像与低功率红外摄像头采集到的红外图像,进行物体类别的判识,并根据判识结果生成语音提示,以提醒人们将物体投掷进相应的箱体。本发明还提供了一种基于智能识别与语音提示的垃圾收纳方法。本发明的有益效果是：同时利用可见光图像与红外图像两类图像,有助于提升垃圾分类辨识的准确率,避免投错位置。(The invention provides a garbage storage system based on intelligent recognition and voice prompt, which comprises a plurality of boxes which are manufactured into different monochromatic colors, and are printed with striking written descriptions; the top end of each box body is designed into a double-page closed box body cover, a visible light camera and a low-power infrared camera are arranged above the box body cover, a low-power LED illuminating lamp is arranged at the same time, when an object is close to the box body cover, judgment of object categories is carried out according to visible light images collected by the visible light camera and infrared images collected by the low-power infrared camera, and voice prompt is generated according to judgment results to remind people to throw the object into the corresponding box body. The invention also provides a garbage collection method based on intelligent recognition and voice prompt. The invention has the beneficial effects that: meanwhile, the two types of images, namely visible light images and infrared images, are utilized, the accuracy of garbage classification and identification is improved, and the wrong position is avoided.)

基于智能识别与语音提示的垃圾收纳系统与方法

技术领域

本发明涉及垃圾收纳，尤其涉及一种基于智能识别与语音提示的垃圾收纳系统与方法。

背景技术

垃圾分类具有重要的应用价值，对环境保护与资源循环利用意义重大，也正因为如此，目前政府和各级部门自上而下大力提倡实施垃圾分类。然而，普通人由于缺乏相关知识而不能正确的对垃圾进行归类是实施垃圾分类的一大现实问题。此外，由于垃圾箱的文字提示不够直观，即使人们有垃圾分类的意识与基本垃圾辨别能力，在匆忙的垃圾投递过程中也可能会投错位置。

发明内容

为了解决现有技术中的问题，本发明提供了一种基于智能识别与语音提示的垃圾收纳系统与方法。

本发明提供了一种基于智能识别与语音提示的垃圾收纳系统，包括多个制造为不同单色颜色的箱体，并印刷上醒目的文字说明，所述箱体的个数等于需要分类的垃圾类别数；每个箱体顶端设计为双页闭合式的箱体盖，所述箱体盖上方安装可见光摄像头与低功率红外摄像头,同时安装低功率LED照明灯，当有物体靠近所述箱体盖时，根据可见光摄像头采集到的可见光图像与低功率红外摄像头采集到的红外图像，进行物体类别的判识，并根据判识结果生成语音提示，以提醒人们将物体投掷进相应的箱体。

本发明还提供了一种基于智能识别与语音提示的垃圾收纳方法，采用所述的基于智能识别与语音提示的垃圾收纳系统，进行以下步骤：

S1、箱体盖通过可见光摄像头采集可见光图像，箱体盖通过低功率红外摄像头采集红外图像；

S2、基于可见光图像和红外图像进行可见光目标和红外目标的分割与检测；

S3、得到可见光目标和红外目标的垃圾分类得分及排序；

S4、得到垃圾分类结果并进行语音提示；

S5、与垃圾分类结果相应的箱体打开，守成垃圾投掷。

作为本发明的进一步改进，在步骤S3中，依据相似度得分与垃圾“有害程度”双排序的垃圾最终分类方法进行可见光目标和红外目标的垃圾分类得分及排序，相似度得分与垃圾“有害程度”双排序的垃圾最终分类方法包括：假设垃圾被定义为c个类别，从可见光成像出发，计算出可见光目标与c个垃圾类别间的相似度，即分类得分p₁，…,p_c；同样，计算出红外目标与c个垃圾类别间的相似度q₁，…,q_c。并令s_i＝p_i+γq_i，0<γ<1；此后，首先将s_i(i＝1...c)按照从大到小的顺序进行排序，并令排序结果为

其中k₁,...,k_c的取值范围为1到c之间，其意义如下：假如k₁＝3，目标为第三类垃圾的概率最大，因此，上述排序结果说明目标属于第k₁类垃圾的概率最大，属于第k₂类垃圾的概率第二大，属于其他类垃圾的概率相对小，当垃圾类别的得分

大于阈值t₁且k₁与k₂类别的得分差值绝对值即

大于阈值t₂时进行如下处理：由于不同垃圾的“有害程度”不同，且一般情况下自动分别辨识存在一定的错误率，所以第二次排序如下：假如第k₁类垃圾的“有害程度”高于第k₂类，则不改变垃圾的排序结果，并最终将目标判识为第k₁类垃圾；相反，假如第k₂类垃圾的“有害程度”高于第k₁类，则将第k₂类排序为最大概率的类别，并最终将目标判识为第k₂类垃圾。

作为本发明的进一步改进，当垃圾类别的得分

不大于阈值t₁且k₁与k₂类别的得分差值绝对值即

不大于阈值t₂时进行如下处理：所述垃圾收纳方法还设计了一种“容错”工作方式，以方便人们在系统辨识可靠度不佳或者图像采集不成功情况下自行进行垃圾投递；即系统此时放弃自动判别和语音提示，所有箱体都切换至允许投递的状态，让人们自动选择投放垃圾的箱体；系统辨识可靠度不佳包括如下两种情况：一、是最终目标判识结果得出的垃圾类别的得分小于阈值t₁；二、是最终目标判识结果得出k₁与k₂类别的得分差值绝对值小于阈值t₂。

作为本发明的进一步改进，在步骤S2中，目标分割与检测包括：对箱体盖获取的图像根据空间位置关系与皮肤颜色检测去除人手及人手位置以上的部分，然后对其余部分进行图像分割，将分割得出的最大目标块作为待辨识目标，并将其特征与主要的垃圾类别的特征进行比较，如果其与其中一个类别的差异度小于阈值，则认为待辨识目标为垃圾，系统进行后续的处理流程。

本发明的有益效果是：通过上述方案，同时利用可见光图像与红外图像两类图像，有助于提升垃圾分类辨识的准确率，避免投错位置。

附图说明

图1是本发明一种基于智能识别与语音提示的垃圾收纳方法的流程图。

具体实施方式

下面结合附图说明及具体实施方式对本发明作进一步说明。

一种基于智能识别与语音提示的垃圾收纳系统，系统的主体为并列的多箱体形式，以便于不同垃圾的分类收纳，即单个箱体的个数等于需要分类的垃圾类别数；箱体制造为不同单色颜色，并印刷上醒目的文字说明；每个箱体顶端设计为双页闭合式的箱体盖，箱体盖上方安装一个可见光摄像头与一个低功率红外摄像头,同时安装低功率LED照明灯。当有物体靠近箱体盖时，系统根据采集到的可见光图像与红外图像，进行物体类别的判识，并根据判识结果生成语音提示，以提醒人们将物体投掷进相应的箱体。同时利用可见光图像与红外图像的合理性在于：两类图像的同时利用有助于提升辨识的准确率。

如图1所示，一种基于智能识别与语音提示的垃圾收纳方法，采用所述的基于智能识别与语音提示的垃圾收纳系统，进行以下步骤：

S1、箱体盖通过可见光摄像头采集可见光图像，箱体盖通过低功率红外摄像头采集红外图像；

S2、基于可见光图像和红外图像进行可见光目标和红外目标的分割与检测；

S3、得到可见光目标和红外目标的垃圾分类得分及排序；

S4、得到垃圾分类结果并进行语音提示；

S5、与垃圾分类结果相应的箱体打开，守成垃圾投掷。

本发明设计了一种依据相似度得分与垃圾“有害程度”双排序的垃圾最终分类方法。具体算法如下：假设垃圾被定义为c个类别。从可见光成像出发，可以计算出可见光目标与c个垃圾类别间的相似度(即分类得分)p₁，…,p_c。同样，可计算出红外目标与c个垃圾类别间的相似度q₁，…,q_c。并令s_i＝p_i+γq_i(0<γ<1)。0<γ<1的合理性在于一般情况下，得出的可见光目标的相似度的可靠程度高于红外目标的相似度。此后，首先将s_i(i＝1...c)按照从大到小的顺序进行排序，并令排序结果为

其中k₁,...,k_c的取值范围为1到c之间，其意义如下：假如k₁＝3，目标为第三类垃圾的概率最大。因此，上述排序结果说明目标属于第k₁类垃圾的概率最大，属于第k₂类垃圾的概率第二大，属于其他类垃圾的概率相对小。当垃圾类别的得分

大于阈值t₁且k₁与k₂类别的得分差值绝对值即

大于阈值t₂时进行如下处理(否则转为后文的“容错”工作方式)：由于不同垃圾的“有害程度”不同(例如，电池的危害程度大于黑色金属，果皮等食物垃圾基本无害)，且一般情况下自动分别辨识存在一定的错误率，所以本发明提出的第二次排序如下：假如第k₁类垃圾的“有害程度”高于第k₂类，则不改变垃圾的排序结果，并最终将目标判识为第k₁类垃圾。相反，假如第k₂类垃圾的“有害程度”高于第k₁类，则将第k₂类排序为最大概率的类别，并最终将目标判识为第k₂类垃圾。得出最终目标判识结果后，系统合成相应的语音提示，以提醒人们将物体投掷进对应的箱体；语音提示可采用“请将垃圾投入**颜色的垃圾箱”。

本发明还设计了一种“容错”工作方式，以方便人们在系统辨识可靠度不佳或者图像采集不成功情况下自行进行垃圾投递；即系统此时放弃自动判别和语音提示，所有箱体都切换至允许投递的状态，让人们自动选择投放垃圾的箱体。系统辨识可靠度不佳包括如下两种情况：一是最终目标判识结果得出的垃圾类别的得分小于阈值t₁；二是最终目标判识结果得出k₁与k₂类别的得分差值绝对值小于阈值t₂，因为得分差值绝对值较小意味着两个类别的区分性小，此时做出的自动判识不一定正确。

本发明设计的目标分割与检测方案如下：对箱体盖获取的图像根据空间位置关系与皮肤颜色检测去除人手及人手位置以上的部分，然后对其余部分进行图像分割，将分割得出的最大目标块作为待辨识目标，并将其特征与主要的垃圾类别的特征进行比较，如果其与其中一个类别的差异度小于阈值，则认为待辨识目标为垃圾，系统进行后续的处理流程。

本发明提出了一种“可编程”的垃圾类别定义方法，以满足不同地区或不同场景下实际的垃圾分拣需求和多样性应用需求。换言之，系统存储了多种常用的垃圾类别模式，不同模式下有不同的分类规则，垃圾收纳系统的使用方通过模式选择实现不同垃圾类别定义规则下的垃圾投放提示功能。

本发明提出了一种双方案的垃圾收纳系统软件升级方法，以达到不定期进行系统技术上的升级迭代与提供更好的用户体验的目的，或适应政府和社会对垃圾投放的新要求。其中“标配”方案为本地化的软件升级方案，即垃圾收纳系统的使用方通过优盘直接对垃圾收纳系统进行软件升级版本的安装。“高配”方案则对垃圾收纳系统同时提供USB接口与无线通讯接口，以允许使用方既可以优盘直接对垃圾收纳系统进行软件升级版本的安装，又可通过云端对垃圾收纳系统进行软件升级版本的安装。

以上内容是结合具体的优选实施方式对本发明所作的进一步详细说明，不能认定本发明的具体实施只局限于这些说明。对于本发明所属技术领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干简单推演或替换，都应当视为属于本发明的保护范围。