一种药品识别方法、装置和用于药品识别的装置

文档序号:1738168 发布日期:2019-12-20 浏览:3次 >En<

阅读说明:本技术 一种药品识别方法、装置和用于药品识别的装置 (Medicine identification method and device for medicine identification ) 是由 张婷婷 于 2019-08-15 设计创作,主要内容包括:本发明实施例提供了一种药品识别方法、装置和用于药品识别的装置。其中的方法具体包括:通过摄像头,获取目标药品的药盒图像;对所述药盒图像进行文本识别,以得到所述药盒图像中的药品名称;将所述药品名称作为检索词,搜索得到所述药品名称对应的药品相关信息;所述药品相关信息至少包括如下任意一项:主治病症、服用方法、说明书、不良反应、饮食禁忌;输出所述药品名称和药品相关信息。本发明实施例可以提高查找药品的效率。(The embodiment of the invention provides a medicine identification method and device and a device for medicine identification. The method specifically comprises the following steps: acquiring a medicine box image of a target medicine through a camera; performing text recognition on the medicine box image to obtain a medicine name in the medicine box image; searching to obtain medicine related information corresponding to the medicine name by taking the medicine name as a search word; the related information of the medicine at least comprises any one of the following items: indications, administration methods, instructions, adverse reactions, dietary contraindications; and outputting the medicine name and the medicine related information. The embodiment of the invention can improve the efficiency of searching for the medicine.)

一种药品识别方法、装置和用于药品识别的装置

技术领域

本发明涉及计算机技术领域,尤其涉及一种药品识别方法、装置和用于药品识别的装置。

背景技术

随着药学产业的飞速发展,市面上的药品种类繁多,其中相同药品的不同品规、不同剂量又有多种形式。

日常生活中,用户家中通常保存有大量日常所需的各种药品。用户在患病时,需要在家中所有的药品中查找到当前所需的药品,如果用户对药品不熟悉,则需要逐个翻看每一个药盒上的药品说明,以查找到所需的药品,导致查找效率较低。

此外,对于年龄较大或者识字不多的患者,更是增加了查找药品的难度,还有可能出现拿错药的情况发生,不仅可能影响患者的治疗效果,而且可能对患者的身体造成其它损伤。

发明内容

本发明实施例提供一种药品识别方法、装置和用于药品识别的装置,可以提高查找药品的效率。

为了解决上述问题,本发明实施例公开了一种药品识别方法,所述方法包括:

通过摄像头,获取目标药品的药盒图像;

对所述药盒图像进行文本识别,以得到所述药盒图像中的药品名称;

将所述药品名称作为检索词,搜索得到所述药品名称对应的药品相关信息;所述药品相关信息至少包括如下任意一项:主治病症、服用方法、说明书、不良反应、饮食禁忌;

输出所述药品名称和药品相关信息。

另一方面,本发明实施例公开了一种药品识别装置,所述装置包括:

图像获取模块,用于通过摄像头,获取目标药品的药盒图像;

文本识别模块,用于对所述药盒图像进行文本识别,以得到所述药盒图像中的药品名称;

信息检索模块,用于将所述药品名称作为检索词,搜索得到所述药品名称对应的药品相关信息;所述药品相关信息至少包括如下任意一项:主治病症、服用方法、说明书、不良反应、饮食禁忌;

信息输出模块,用于输出所述药品名称和药品相关信息。

再一方面,本发明实施例公开了一种用于药品识别的装置,包括有存储器,以及一个或者一个以上的程序,其中一个或者一个以上程序存储于存储器中,且经配置以由一个或者一个以上处理器执行所述一个或者一个以上程序包含用于进行以下操作的指令:

通过摄像头,获取目标药品的药盒图像;

对所述药盒图像进行文本识别,以得到所述药盒图像中的药品名称;

将所述药品名称作为检索词,搜索得到所述药品名称对应的药品相关信息;所述药品相关信息至少包括如下任意一项:主治病症、服用方法、说明书、不良反应、饮食禁忌;

输出所述药品名称和药品相关信息。

又一方面,本发明实施例公开了一种机器可读介质,其上存储有指令,当由一个或多个处理器执行时,使得装置执行如前述一个或多个所述的药品识别方法。

本发明实施例包括以下优点:

本发明实施例通过摄像头实时获取目标药品的药盒图像,对所述药盒图像进行文本识别,以得到所述药盒图像中的药品名称;并且将所述药品名称作为检索词,搜索得到所述药品名称对应的药品相关信息;所述药品相关信息至少包括如下任意一项:主治病症、服用方法、说明书、不良反应、饮食禁忌;最后输出所述药品名称和药品相关信息。通过本发明实施例,只需要通过智能终端的摄像头扫一下目标药品,即可自动识别并输出目标药品的药品名称以及药品相关信息。可以避免用户查看药盒上的药品说明的操作过程,进而可以帮助用户快速查找到所需的药品,提高用户获取药品信息以及查找药品的效率。此外,对于年龄较大或者识字不多的患者,降低了药品识别以及查找药品的难度,可以避免出现拿错药的情况发生,帮助用户安全用药。

附图说明

为了更清楚地说明本发明实施例的技术方案,下面将对本发明实施例的描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。

图1是本发明的一种药品识别方法实施例的步骤流程图;

图2是本发明的一种药品识别装置实施例的结构框图;

图3是本发明的一种用于药品识别的装置800的框图;及

图4是本发明的一些实施例中服务器的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。

方法实施例

参照图1,示出了本发明的一种药品识别方法实施例的步骤流程图,具体可以包括如下步骤:

步骤101、通过摄像头,获取目标药品的药盒图像;

步骤102、对所述药盒图像进行文本识别,以得到所述药盒图像中的药品名称;

步骤103、将所述药品名称作为检索词,搜索得到所述药品名称对应的药品相关信息;所述药品相关信息至少包括如下任意一项:主治病症、服用方法、说明书、不良反应、饮食禁忌;

步骤104、输出所述药品名称和药品相关信息。

本发明实施例提供的药品识别方法可以但不限于应用于医药相关网站、医药相关APP(应用程序,Application)等具有药品识别功能的应用程序中,还可以但不限于应用于搜索APP中。本发明实施例提供的药品识别方法可应用于客户端与服务器对应的应用环境中,其中,客户端与服务器可以位于有线或无线网络中,通过该有线或无线网络,客户端与服务器可以进行数据交互。

具体地,客户端可以运行在智能终端上,所述智能终端具体可以包括但不限于:智能手机、平板电脑、电子书阅读器、MP3(动态影像专家压缩标准音频层面3,MovingPictureExperts Group Audio Layer III)播放器、MP4(动态影像专家压缩标准音频层面4,MovingPicture Experts Group Audio Layer IV)播放器、膝上型便携计算机、车载电脑、台式计算机、机顶盒、智能电视机、可穿戴设备等等。

在本发明实施例中,用户可以通过客户端提供的预置接口触发药品识别功能。例如,通过触发APP中的“药品识别”按钮,可以生成药品识别请求,响应于药品识别请求,客户端可以启动智能终端的摄像头,通过摄像头实时获取目标药品的药盒图像,例如可以拍摄包含目标药品的药盒图像的照片或者视频。或者,本发明实施例还可以在检测到摄像头已启动的情况下,自动执行本发明实施例的药品识别方法。例如,可以实时检测摄像头获取的画面中是否包含药盒图像,如果包含,则确定该药盒图像为待识别的目标药品的药盒图像,可以执行后续的识别操作。可以理解的是,本发明实施例可以对摄像头拍摄的药盒图像的照片或者视频进行识别,从照片或者视频包含的药盒图像中提取药品名称,或者,还可以在摄像头获取到药盒图像的情况下,无需拍摄照片或者视频,直接对摄像头获取的药盒图像进行实时识别,提取其中的药品名称。

具体地,在获取药盒图像之后,可以对所述药盒图像进行文本识别,以得到所述药盒图像中的药品名称。在本发明的一种可选实施例中,步骤S102对所述药盒图像进行文本识别,以得到所述药盒图像中的药品名称,具体可以包括:

步骤S11、对所述药盒图像进行文本区域检测,以确定所述药盒图像中的文本区域;

步骤S12、通过光学字符识别(Optical Character Recognition,OCR)技术,识别所述文本区域中的文本信息;

步骤S13、对所述文本信息的排版以及语义进行分析,从所述文本信息中提取得到药品名称。

在具体应用中,由于药盒上通常包含图画信息和文本信息,文本信息中一般包括有药品名称、厂家、批号、服用方法等。其中,药品名称通常位于药盒中较为醒目的区域,单独占据一行,且字体比例较大。

根据药品名称在药盒中的上述显示特征,本发明实施例首先对所述药盒图像进行文本区域检测,以确定所述药盒图像中的文本区域,然后通过OCR技术,识别所述文本区域中的文本信息,并且对文本信息的排版以及语义进行分析,从所述文本信息中提取得到药品名称。例如,对于提取的多个文本区域,分析每一个文本区域在药盒中的位置,以及文本区域中的文字大小,将位于药盒相对中间位置、且字体相对较大的文本区域中的文本信息作为药品名称。

可以理解,本发明实施例对确定药盒图像中的文本区域的具体方式不加以限制。例如,可以对所述药盒图像进行阈值化处理,以确定药盒图像中的文本区域。具体地,所述阈值化处理可根据实际情况选取不同的阈值化方法,如固定阈值化方法、自适应阈值化方法、大津法、迭代法等。或者,还可以根据卷积神经网络确定药盒图像中的文本区域。

可选地,本发明实施例还可以对识别得到的药品名称进行检索,以判断识别的药品名称是否准确,若检索结果中不存在该药品名称对应的药品信息,则可以对药盒图像重新进行识别,以重新识别其中的药品名称。

在识别得到目标药品的药品名称之后,可以将所述药品名称作为检索词,搜索得到所述药品名称对应的药品相关信息。例如,可以结合医疗信息检索系统,检索该药品名称对应的药品相关信息,如常用名称、药品成分、用药分类、主治病症、用法用量、说明书等。可选地,本发明实施例还可以根据药品名称,从搜索到的药品说明书、医生问答、权威文章等医疗相关信息中,获取服用药品时的注意事项以及不良反应等。例如,有些药品可能会刺激肠胃等,需要饭后服用,而有些药品可能适合饭前服用,本发明实施例的药品相关信息还可以包括服用药品时的注意信息等,例如,饭前还是饭后服用。

其中,用药分类可以为根据药品的功能进行分类,如内分泌用药、降压药等;还可以按照是否为处方药进行分类,如处方药、非处方药;或者,还可以按照中药或者西药进行分类等。

上述相关信息,通常需要用户自行查看说明书或者进行相关检索进行了解,而本发明实施例可以根据识别的药品名称自动搜索获取药品的相关信息,并反馈给用户,可以节省用户查看说明书以及检索的时间。

在本发明的一种可选实施例中,还可以将识别得到的药品名称输入GIS(Geographic Information System,地理信息系统)进行搜索,以搜索附近可以购买该药品名称对应药品的药店信息,并且在识别界面提供用于触发显示所述药店信息的按钮,在接收到用户针对该按钮的触发操作的情况下,显示附近可以购买该药品的药店的名称和地址等信息。

在获取目标药品的药品名称和药品相关信息之后,可以通过语音或者文本等方式输出所述药品名称和药品相关信息。

在本发明的一种可选实施例中,所述输出所述药品名称和药品相关信息,具体可以包括:

通过语音播报的方式,输出所述药品名称和药品相关信息对应的语音信息;和/或

按照预置倍数,对所述药品名称和药品相关信息对应的文本信息进行放大显示。

对于识别得到的药品名称以及药品相关信息,本发明实施例可以在识别完成之后,通过语音和/或文本等任意形式输出,以展现给用户。对于语音播报时没有听清楚的用户,可以查看文本形式的药品名称和药品相关信息,以满足用户多样化的需求。

可选地,所述药品名称和药品相关信息的文本信息,可以显示在目标药品的药盒图片的显示界面中。例如,可以对智能终端的显示屏进行分屏,得到第一屏幕和第二屏幕,在第一屏幕中显示药盒图像,在第二屏幕中显示该药盒图像对应的药品名称和药品相关信息,进而可以直观地向用户展示药品名称和药品相关信息与目标药品之间的对应关系。

此外,本发明实施例还可以按照预置倍数,对药品名称和药品相关信息对应的文本信息进行放大显示,对于视力不好的老年用户,可以更加清晰地了解药品的相关信息。可以理解,所述预置倍数可以通过用户的设置操作设置得到,在具体实现时,所述预置倍数还可以通过用户的缩放手势进行调整。

在本发明的一种可选实施例中,所述目标药品的数目可以大于1;所述对所述药盒图像进行文本识别,以得到所述药盒图像中的药品名称,具体可以包括:

对至少两个目标药品分别对应的药盒图像进行文本识别,以得到每一个药盒图像中的药品名称,作为该药盒图像对应目标药品的药品名称;

在得到每一个药盒图像对应目标药品的药品名称之后,所述方法还可以包括:

步骤S21、对所述至少两个目标药品的药品名称进行冲突检测,以确定所述至少两个目标药品之间的同服禁忌信息;

步骤S22、输出所述至少两个目标药品之间的同服禁忌信息。

在具体应用中,可能存在用户在同一时间需要服用多种药品的情况,然而,有些药品之间可能存在互斥的情况,例如中成药和西药不能同时服用,溴新斯的明与青霉素类不能同时服用、感冒类药不能同时服用等。如果同时服用互斥的药品,可能会对用户身体带来伤害,或者影响药品的服用效果。

为了解决上述问题,本发明实施例可以获取至少两个目标药品对应的药盒图像,并且对至少两个目标药品中每一个目标药品对应药盒的药盒图像进行文本识别,以得到每一个药盒图像中的药品名称,作为该药盒图像对应目标药品的药品名称。进而可以对该至少两个目标品进行冲突检测,例如,可以根据该至少两个目标药品的药品名称,结合搜索技术,判断这些药品之间是否存在同服禁忌,如果存在同服禁忌,则可以输出同服禁忌信息,以提示用户这些药品不适合同时服用,帮助用户安全用药。其中,所述同服禁忌信息可以包括:存在同服禁忌的药品名称,以及同时服用这些药品可能产生哪些不良影响、同服这些药品的安全方法等。

在本发明的一种可选实施例中,所述方法还可以包括:

步骤S31、响应于针对所述药盒图像的标记操作,在所述药盒图像上显示所述标记操作对应的标记信息;

步骤S32、保存标记后的药盒图像。

对于用户拍摄的目标药品的药盒图像,本发明实施例还可以在所述药盒图像上显示所述标记操作对应的标记信息。例如,本发明实施例可以在显示药品名称和药品相关信息的识别界面中,显示用于触发执行标记操作的按钮,在接收到用户针对该按钮的触发操作时,可以对当前识别界面中显示的药盒图像进行标记。或者,用户还可以从相册中选择已保存的药盒图像进行标记等。

所述标记信息可以为在获取目标药品的药盒图像之后,根据用户执行的标记操作,用户手动增加的。或者,所述标记信息还可以为对所述目标药品的药盒图像进行识别之后,根据识别内容自动添加的。其中,识别内容可以包括识别的药盒图像中的药品名称、该药品名称对应的药品相关信息等。

可以理解,本发明实施例对所述标记信息的内容和形式不加以限制,例如,所述标记信息还可以包括目标药品的过期时间等信息。所述标记信息可以为文本、图形、图片等任意形式。

本发明实施例通过AR(Augmented Reality,增强现实)技术将药品的标记信息贴到药盒图像上,同时将标记后的药盒图像保存到本地相册,方便用户日后查看,例如,对于药品名称为二甲双胍的药品,在该药品对应的药盒图像上可以增加如下标记信息:降血压药(禁忌空腹服用)。

在本发明的一种可选实施例中,在搜索得到所述药品名称对应的药品相关信息之后,所述方法还可以包括:

步骤S41、根据所述药品名称对应的服用方法,确定所述药品名称对应的服用信息,所述服用信息包括:服用时间、服用剂量;

步骤S42、根据所述服用信息,生成服药清单;所述服药清单中包括:药品名称、服用时间、以及服用剂量之间的对应关系;

步骤S43、在所述服药清单中的服用时间到达的情况下,发出提示消息。

在具体应用中,对于身体有多种疾病的患者,可能需要同时服用多种药物,然而,由于不同药物的服用时间、服用剂量不同,经常出现未按时服药、服药过量或服错药等情况。

为解决上述问题,本发明实施例还可以根据用户拍摄的多个目标药品的药盒图像,生成服药清单,用户通过查看服药清单可以清楚了解到自己需要服用的药品、以及服用方法,不用每次都查看药盒上的说明,为用户带来便利。此外,本发明实施例还可以根据服药清单中各项药品的服用时间,自动发出提示消息,以提醒用户按时服药,避免用户忘记服药的情况发生。

可以理解,本发明实施例对服药清单的显示形式不加以限制,例如,可以按照列表或者表格的形式,显示服药清单。参照表1,示出了本发明的一种服药清单的具体示意。

表1

药品名称 服用时间 服用剂量
白加黑 早上 白片1片
优甲乐 早上 0.5片
白加黑 中午 白片1片
白加黑 晚上 黑片1片
新斯的明 晚上 1片

在所述服药清单中的服用时间到达的情况下,客户端可以发出提示消息,以提醒用户按时服药。在本发明实施例中,可以根据药品的服用时间自动生成用于发出提示消息的默认的提醒时间。例如,如果服用时间为早上,可以设置默认的提醒时间为早上8点,如果服用时间为中午,可以设置默认的提醒时间为中午12点,如果服用时间为晚上,可以设置默认的提醒时间为晚上8点。

可选地,本发明实施例还可以向用户提供用于设置各项药品提醒时间的设置界面,通过该设置界面,用户可以修改默认的提醒时间。参照表2,示出了本发明的另一种服药清单的具体示意。如表2所示,该服药清单中设置了提醒时间,对于设置提醒时间的服药清单,可以在提醒时间到达时,发出提示消息。

表2

药品名称 服用时间 提醒时间 服用剂量
白加黑 早上 7:00 白片1片
优甲乐 早上 7:30 0.5片
白加黑 中午 12:00 白片1片
白加黑 晚上 8:00 黑片1片
新斯的明 晚上 8:30 1片

可选地,在服用时间或者提醒时间到达时,客户端可以响起预置的铃声,提醒用户服药时间到,同时,还可以通过文本和/或语音播报的形式输出提示信息,所述提示信息至少可以包括如下任意一项:所述服药清单中服用时间到达的药品名称、所述服药清单中服用时间到达的药品名称对应的药品相关信息、所述服药清单中服用时间到达的药品名称对应的药盒图像、所述服药清单。

例如,可以语音播报所述服药清单中服用时间到达的药品名称,还可以语音播报该药品名称对应的药品相关信息,如服用方法、服用剂量等,还可以语音播报该药品名称对应的服药注意事项,如服用头孢类药品不能喝酒等。

此外,本发明实施例还可以将所述服药清单中服用时间到达的药品名称对应的药盒图像作为提示信息,展示给用户,方便用户通过该药盒图像可以快速找到所要服用的药品。

可选地,本发明实施例还可以自定义语音播报的声音模板、语句模板等,如:“吃药时间到了,请服用白加黑白片一片,按时吃药才能早日康复哦!”。可以理解,本发明实施例对所述提示消息的具体提示方式不加以限制。可选地,在语音提醒的基础上,还可以增加弹窗提醒,在弹窗中展现当前需要服用的药品信息。

可选地,本发明实施例可以在显示药品名称和药品相关信息的识别界面中,显示用于触发执行添加服药清单操作的按钮,在接收到用户针对该按钮的触发操作的情况下,可以从当前识别界面中的药品相关信息中提取药品的服用时间以及服用剂量等信息,进而可以将当前识别界面中的药品名称、该药品名称对应的服用时间以及服用剂量,增加至已有的服药清单中。

可选地,本发明实施例在接收到用户拍摄的目标药品对应的药盒图像之后,可以询问用户是否将当前拍摄的药盒图像添加至已有的服药清单中,如果用户选择添加,则可以识别当前拍摄的药盒图像中的药品名称以及服用信息,与已有的服药清单进行合并,得到合并后的服药清单,以使用户通过一个服药清单可以管理多个需要服用的药品信息,为用户提供更多的便利。

在本发明的一种可选实施例中,在发出提示消息之后,所述方法还可以包括:

步骤S51、在发出提示消息之后的预设时间段内,检测是否接收到针对所述提示消息返回的药品已服用消息;

步骤S52、根据接收到的药品已服用消息,记录所述服药清单中各项药品的服用状态。

本发明实施例还可以提供药品服用记录功能,在每次发出提示消息之后的预设时间段内,检测是否接收到用户针对所述提示消息返回的药品已服用消息,如果接收到,则可以记录该提示消息对应的药品的服用状态为已服用,并且记录已服用时间,否则,可以记录该提示消息对应的药品的服用状态为未服用,以及记录未服用时间。通过记录用户在一段时间对服药清单中各项药品的服用状态,可以生成服药记录单,以帮助用户了解自己的服药情况。

综上,本发明实施例通过智能终端的摄像头,获取目标药品的药盒图像,对所述药盒图像进行文本识别,以得到所述药盒图像中的药品名称;并且将所述药品名称作为检索词,搜索得到所述药品名称对应的药品相关信息;所述药品相关信息至少包括如下任意一项:主治病症、服用方法、说明书、不良反应、饮食禁忌;最后输出所述药品名称和药品相关信息。通过本发明实施例,只需要通过智能终端的摄像头扫一下目标药品,即可自动识别并输出目标药品的药品名称以及药品相关信息。可以避免用户查看药盒上的药品说明的操作过程,进而可以帮助用户快速查找到所需的药品,提高用户获取药品信息以及查找药品的效率。此外,对于年龄较大或者识字不多的患者,降低了药品识别以及查找药品的难度,可以避免出现拿错药的情况发生,帮助用户安全用药。

需要说明的是,对于方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明实施例并不受所描述的动作顺序的限制,因为依据本发明实施例,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作并不一定是本发明实施例所必须的。

装置实施例

参照图2,示出了本发明的一种药品识别装置实施例的结构框图,所述装置具体可以包括:

图像获取模块201,用于通过摄像头,获取目标药品的药盒图像;

文本识别模块202,用于对所述药盒图像进行文本识别,以得到所述药盒图像中的药品名称;

信息检索模块203,用于将所述药品名称作为检索词,搜索得到所述药品名称对应的药品相关信息;所述药品相关信息至少包括如下任意一项:主治病症、服用方法、说明书、不良反应、饮食禁忌;

信息输出模块204,用于输出所述药品名称和药品相关信息。

可选地,所述文本识别模块202,具体可以包括:

区域检测子模块,用于对所述药盒图像进行文本区域检测,以确定所述药盒图像中的文本区域;

文本识别子模块,用于通过光学字符识别技术,识别所述文本区域中的文本信息;

名称提取子模块,用于对所述文本信息的排版以及语义进行分析,从所述文本信息中提取得到药品名称。

可选地,所述装置还可以包括:

标记模块,用于响应于针对所述药盒图像的标记操作,在所述药盒图像上显示所述标记操作对应的标记信息;

保存模块,用于保存标记后的药盒图像。

可选地,所述装置还可以包括:

信息提取模块,用于根据所述药品名称对应的服用方法,确定所述药品名称对应的服用信息,所述服用信息包括:服用时间、服用剂量;

清单生成模块,用于根据所述服用信息,生成服药清单;所述服药清单中包括:药品名称、服用时间、以及服用剂量之间的对应关系;

消息提示模块,用于在所述服药清单中的服用时间到达的情况下,发出提示消息。

可选地,所述装置还可以包括:

消息检测模块,用于在发出提示消息之后的预设时间段内,检测是否接收到针对所述提示消息返回的药品已服用消息;

状态记录模块,用于根据接收到的药品已服用消息,记录所述服药清单中各项药品的服用状态。

可选地,所述目标药品的数目大于1;所述文本识别模块,具体可以用于对至少两个目标药品分别对应的药盒图像进行文本识别,以得到每一个药盒图像中的药品名称,作为该药盒图像对应目标药品的药品名称;

所述装置还可以包括:

冲突检测模块,用于对所述至少两个目标药品的药品名称进行冲突检测,以确定所述至少两个目标药品之间的同服禁忌信息;

禁忌输出模块,用于输出所述至少两个目标药品之间的同服禁忌信息。

可选地,所述信息输出模块204,具体可以包括:

第一输出子模块,用于通过语音播报的方式,输出所述药品名称和药品相关信息对应的语音信息;和/或

第二输出子模块,用于按照预置倍数,对所述药品名称和药品相关信息对应的文本信息进行放大显示。

对于装置实施例而言,由于其与方法实施例基本相似,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。

本说明书中的各个实施例均采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似的部分互相参见即可。

关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。

本发明实施例提供了一种用于药品识别的装置,包括有存储器,以及一个或者一个以上的程序,其中一个或者一个以上程序存储于存储器中,且经配置以由一个或者一个以上处理器执行所述一个或者一个以上程序包含用于进行以下操作的指令:通过摄像头,获取目标药品的药盒图像;对所述药盒图像进行文本识别,以得到所述药盒图像中的药品名称;将所述药品名称作为检索词,搜索得到所述药品名称对应的药品相关信息;所述药品相关信息至少包括如下任意一项:主治病症、服用方法、说明书、不良反应、饮食禁忌;输出所述药品名称和药品相关信息。

图3是根据一示例性实施例示出的一种用于药品识别的装置800的框图。例如,装置800可以是移动电话,计算机,数字广播终端,消息收发设备,游戏控制台,平板设备,医疗设备,健身设备,个人数字助理等。

参照图3,装置800可以包括以下一个或多个组件:处理组件802,存储器804,电源组件806,多媒体组件808,音频组件810,输入/输出(I/O)的接口812,传感器组件814,以及通信组件816。

处理组件802通常控制装置800的整体操作,诸如与显示,电话呼叫,数据通信,相机操作和记录操作相关联的操作。处理元件802可以包括一个或多个处理器820来执行指令,以完成上述的方法的全部或部分步骤。此外,处理组件802可以包括一个或多个模块,便于处理组件802和其他组件之间的交互。例如,处理组件802可以包括多媒体模块,以方便多媒体组件808和处理组件802之间的交互。

存储器804被配置为存储各种类型的数据以支持在设备800的操作。这些数据的示例包括用于在装置800上操作的任何应用程序或方法的指令,联系人数据,电话簿数据,消息,图片,视频等。存储器804可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。

电源组件806为装置800的各种组件提供电力。电源组件806可以包括电源管理系统,一个或多个电源,及其他与为装置800生成、管理和分配电力相关联的组件。

多媒体组件808包括在所述装置800和用户之间的提供一个输出接口的屏幕。在一些实施例中,屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中,多媒体组件808包括一个前置摄像头和/或后置摄像头。当设备800处于操作模式,如拍摄模式或视频模式时,前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。

音频组件810被配置为输出和/或输入音频信号。例如,音频组件810包括一个麦克风(MIC),当装置800处于操作模式,如呼叫模式、记录模式和语音信息处理模式时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器804或经由通信组件816发送。在一些实施例中,音频组件810还包括一个扬声器,用于输出音频信号。

I/O接口812为处理组件802和***接口模块之间提供接口,上述***接口模块可以是键盘,点击轮,按钮等。这些按钮可包括但不限于:主页按钮、音量按钮、启动按钮和锁定按钮。

传感器组件814包括一个或多个传感器,用于为装置800提供各个方面的状态评估。例如,传感器组件814可以检测到设备800的打开/关闭状态,组件的相对定位,例如所述组件为装置800的显示器和小键盘,传感器组件814还可以检测装置800或装置800一个组件的位置改变,用户与装置800接触的存在或不存在,装置800方位或加速/减速和装置800的温度变化。传感器组件814可以包括接近传感器,被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件814还可以包括光传感器,如CMOS或CCD图像传感器,用于在成像应用中使用。在一些实施例中,该传感器组件814还可以包括加速度传感器,陀螺仪传感器,磁传感器,压力传感器或温度传感器。

通信组件816被配置为便于装置800和其他设备之间有线或无线方式的通信。装置800可以接入基于通信标准的无线网络,如WiFi,2G或3G,或它们的组合。在一个示例性实施例中,通信组件816经由广播信道接收来自外部广播管理系统的广播信号或广播药品相关信息。在一个示例性实施例中,所述通信组件816还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频信息处理(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。

在示例性实施例中,装置800可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于执行上述方法。

在示例性实施例中,还提供了一种包括指令的非临时性计算机可读存储介质,例如包括指令的存储器804,上述指令可由装置800的处理器820执行以完成上述方法。例如,所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。

图4是本发明的一些实施例中服务器的结构示意图。该服务器1900可因配置或性能不同而产生比较大的差异,可以包括一个或一个以***处理器(central processingunits,CPU)1922(例如,一个或一个以上处理器)和存储器1932,一个或一个以上存储应用程序1942或数据1944的存储介质1930(例如一个或一个以上海量存储设备)。其中,存储器1932和存储介质1930可以是短暂存储或持久存储。存储在存储介质1930的程序可以包括一个或一个以上模块(图示没标出),每个模块可以包括对服务器中的一系列指令操作。更进一步地,中央处理器1922可以设置为与存储介质1930通信,在服务器1900上执行存储介质1930中的一系列指令操作。

服务器1900还可以包括一个或一个以上电源1926,一个或一个以上有线或无线网络接口1950,一个或一个以上输入输出接口1958,一个或一个以上键盘1956,和/或,一个或一个以上操作系统1941,例如Windows ServerTM,Mac OS XTM,UnixTM,LinuxTM,FreeBSDTM等等。

一种非临时性计算机可读存储介质,当所述存储介质中的指令由装置(服务器或者终端)的处理器执行时,使得装置能够执行图1所示的药品识别方法。

一种非临时性计算机可读存储介质,当所述存储介质中的指令由装置(服务器或者终端)的处理器执行时,使得装置能够执行一种药品识别方法,所述方法包括:通过摄像头,获取目标药品的药盒图像;对所述药盒图像进行文本识别,以得到所述药盒图像中的药品名称;将所述药品名称作为检索词,搜索得到所述药品名称对应的药品相关信息;所述药品相关信息至少包括如下任意一项:主治病症、服用方法、说明书、不良反应、饮食禁忌;输出所述药品名称和药品相关信息。

本发明实施例公开了A1、一种药品识别方法,包括:

通过摄像头,获取目标药品的药盒图像;

对所述药盒图像进行文本识别,以得到所述药盒图像中的药品名称;

将所述药品名称作为检索词,搜索得到所述药品名称对应的药品相关信息;所述药品相关信息至少包括如下任意一项:主治病症、服用方法、说明书、不良反应、饮食禁忌;

输出所述药品名称和药品相关信息。

A2、根据A1所述的方法,所述对所述药盒图像进行文本识别,以得到所述药盒图像中的药品名称,包括:

对所述药盒图像进行文本区域检测,以确定所述药盒图像中的文本区域;

通过光学字符识别技术,识别所述文本区域中的文本信息;

对所述文本信息的排版以及语义进行分析,从所述文本信息中提取得到药品名称。

A3、根据A1所述的方法,所述方法还包括:

响应于针对所述药盒图像的标记操作,在所述药盒图像上显示所述标记操作对应的标记信息;

保存标记后的药盒图像。

A4、根据A1所述的方法,在搜索得到所述药品名称对应的药品相关信息之后,所述方法还包括:

根据所述药品名称对应的服用方法,确定所述药品名称对应的服用信息,所述服用信息包括:服用时间、服用剂量;

根据所述服用信息,生成服药清单;所述服药清单中包括:药品名称、服用时间、以及服用剂量之间的对应关系;

在所述服药清单中的服用时间到达的情况下,发出提示消息。

A5、根据A4所述的方法,在发出提示消息之后,所述方法还包括:

在发出提示消息之后的预设时间段内,检测是否接收到针对所述提示消息返回的药品已服用消息;

根据接收到的药品已服用消息,记录所述服药清单中各项药品的服用状态。

A6、根据A1所述的方法,所述目标药品的数目大于1;所述对所述药盒图像进行文本识别,以得到所述药盒图像中的药品名称,包括:

对至少两个目标药品分别对应的药盒图像进行文本识别,以得到每一个药盒图像中的药品名称,作为该药盒图像对应目标药品的药品名称;

在得到每一个药盒图像对应目标药品的药品名称之后,所述方法还包括:

对所述至少两个目标药品的药品名称进行冲突检测,以确定所述至少两个目标药品之间的同服禁忌信息;

输出所述至少两个目标药品之间的同服禁忌信息。

A7、根据A1所述的方法,所述输出所述药品名称和药品相关信息,包括:

通过语音播报的方式,输出所述药品名称和药品相关信息对应的语音信息;和/或

按照预置倍数,对所述药品名称和药品相关信息对应的文本信息进行放大显示。

本发明实施例公开了B8、一种药品识别装置,所述装置包括:

图像获取模块,用于通过摄像头,获取目标药品的药盒图像;

文本识别模块,用于对所述药盒图像进行文本识别,以得到所述药盒图像中的药品名称;

信息检索模块,用于将所述药品名称作为检索词,搜索得到所述药品名称对应的药品相关信息;所述药品相关信息至少包括如下任意一项:主治病症、服用方法、说明书、不良反应、饮食禁忌;

信息输出模块,用于输出所述药品名称和药品相关信息。

B9、根据B8所述的装置,所述文本识别模块,包括:

区域检测子模块,用于对所述药盒图像进行文本区域检测,以确定所述药盒图像中的文本区域;

文本识别子模块,用于通过光学字符识别技术,识别所述文本区域中的文本信息;

名称提取子模块,用于对所述文本信息的排版以及语义进行分析,从所述文本信息中提取得到药品名称。

B10、根据B8所述的装置,所述装置还包括:

标记模块,用于响应于针对所述药盒图像的标记操作,在所述药盒图像上显示所述标记操作对应的标记信息;

保存模块,用于保存标记后的药盒图像。

B11、根据B8所述的装置,所述装置还包括:

信息提取模块,用于根据所述药品名称对应的服用方法,确定所述药品名称对应的服用信息,所述服用信息包括:服用时间、服用剂量;

清单生成模块,用于根据所述服用信息,生成服药清单;所述服药清单中包括:药品名称、服用时间、以及服用剂量之间的对应关系;

消息提示模块,用于在所述服药清单中的服用时间到达的情况下,发出提示消息。

B12、根据B11所述的装置,所述装置还包括:

消息检测模块,用于在发出提示消息之后的预设时间段内,检测是否接收到针对所述提示消息返回的药品已服用消息;

状态记录模块,用于根据接收到的药品已服用消息,记录所述服药清单中各项药品的服用状态。

B13、根据B8所述的装置,所述目标药品的数目大于1;所述文本识别模块,具体用于对至少两个目标药品分别对应的药盒图像进行文本识别,以得到每一个药盒图像中的药品名称,作为该药盒图像对应目标药品的药品名称;

所述装置还包括:

冲突检测模块,用于对所述至少两个目标药品的药品名称进行冲突检测,以确定所述至少两个目标药品之间的同服禁忌信息;

禁忌输出模块,用于输出所述至少两个目标药品之间的同服禁忌信息。

B14、根据B8所述的装置,所述信息输出模块,包括:

第一输出子模块,用于通过语音播报的方式,输出所述药品名称和药品相关信息对应的语音信息;和/或

第二输出子模块,用于按照预置倍数,对所述药品名称和药品相关信息对应的文本信息进行放大显示。

本发明实施例公开了C15、一种用于药品识别的装置,包括有存储器,以及一个或者一个以上的程序,其中一个或者一个以上程序存储于存储器中,且经配置以由一个或者一个以上处理器执行所述一个或者一个以上程序包含用于进行以下操作的指令:

通过摄像头,获取目标药品的药盒图像;

对所述药盒图像进行文本识别,以得到所述药盒图像中的药品名称;

将所述药品名称作为检索词,搜索得到所述药品名称对应的药品相关信息;所述药品相关信息至少包括如下任意一项:主治病症、服用方法、说明书、不良反应、饮食禁忌;

输出所述药品名称和药品相关信息。

C16、根据C15所述的装置,所述对所述药盒图像进行文本识别,以得到所述药盒图像中的药品名称,包括:

对所述药盒图像进行文本区域检测,以确定所述药盒图像中的文本区域;

通过光学字符识别技术,识别所述文本区域中的文本信息;

对所述文本信息的排版以及语义进行分析,从所述文本信息中提取得到药品名称。

C17、根据C15所述的装置,所述装置还经配置以由一个或者一个以上处理器执行所述一个或者一个以上程序包含用于进行以下操作的指令:

响应于针对所述药盒图像的标记操作,在所述药盒图像上显示所述标记操作对应的标记信息;

保存标记后的药盒图像。

C18、根据C15所述的装置,所述装置还经配置以由一个或者一个以上处理器执行所述一个或者一个以上程序包含用于进行以下操作的指令:

根据所述药品名称对应的服用方法,确定所述药品名称对应的服用信息,所述服用信息包括:服用时间、服用剂量;

根据所述服用信息,生成服药清单;所述服药清单中包括:药品名称、服用时间、以及服用剂量之间的对应关系;

在所述服药清单中的服用时间到达的情况下,发出提示消息。

C19、根据C18所述的装置,所述装置还经配置以由一个或者一个以上处理器执行所述一个或者一个以上程序包含用于进行以下操作的指令:

在发出提示消息之后的预设时间段内,检测是否接收到针对所述提示消息返回的药品已服用消息;

根据接收到的药品已服用消息,记录所述服药清单中各项药品的服用状态。

C20、根据C15所述的装置,所述目标药品的数目大于1;所述对所述药盒图像进行文本识别,以得到所述药盒图像中的药品名称,包括:

对至少两个目标药品分别对应的药盒图像进行文本识别,以得到每一个药盒图像中的药品名称,作为该药盒图像对应目标药品的药品名称;

在得到每一个药盒图像中的药品名称之后,所述方法还包括:

对所述至少两个目标药品的药品名称进行冲突检测,以确定所述至少两个目标药品之间的同服禁忌信息;

输出所述至少两个目标药品之间的同服禁忌信息。

C21、根据C15所述的装置,所述输出所述药品名称和药品相关信息,包括:

通过语音播报的方式,输出所述药品名称和药品相关信息对应的语音信息;和/或

按照预置倍数,对所述药品名称和药品相关信息对应的文本信息进行放大显示。

本发明实施例公开了D22、一种机器可读介质,其上存储有指令,当由一个或多个处理器执行时,使得装置执行如A1至A7中一个或多个所述的药品识别方法。

本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本发明的其它实施方案。本发明旨在涵盖本发明的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本发明的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本发明的真正范围和精神由下面的权利要求指出。

应当理解的是,本发明并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本发明的范围仅由所附的权利要求来限制。

以上所述仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

以上对本发明所提供的一种药品识别方法、一种药品识别装置和一种用于药品识别的装置,进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。

21页详细技术资料下载
上一篇:一种医用注射器针头装配设备
下一篇:医学图像扫描定位方法、医学图像扫描方法和计算机设备

网友询问留言

已有0条留言

还没有人留言评论。精彩留言会获得点赞!

精彩留言,会给你点赞!