具体实施方式

以下，一边参照附图，一边对本发明涉及的对象物对照装置以及对象物对照方法的实施方式详细地进行说明。

＜第1实施方式＞

图1是表示本发明的第1实施方式涉及的片剂确定装置10(对象物对照装置、片剂确定装置)的结构的图。片剂确定装置10具备处理部100、存储部300、显示部400、操作部500和搬运机构240，在处理部100连接有照明部200、照相机210(第1图像获取部)、照相机220(第1图像获取部)以及处方笺读取器230。

照相机210以及照相机220通过数码相机构成。如图2所示，在分包袋702(药包)连续地构成的药包带700的铅垂上侧(图3的+Z侧)配置有照相机210，在药包带700的铅垂下侧(图3的-Z侧)配置有照相机220，从上下(多个不同的方向)对分包成分包袋702的片剂800(片剂，对象物)进行拍摄，并针对表面以及背面获取图像(第1拍摄图像)。分包袋702(药包带700)由搬运机构240在图2的+X方向上(沿着药包带700的长边方向的轴；图2的箭头方向)搬运，在拍摄时，照明部200具有的多个的光源202从4个方向对分包袋702进行照明。在图3中，多个的光源202分别与照相机210、220的拍摄光轴1001的间隔(d1、d2、d3、d4)相同。即，多个的光源202与拍摄光轴1001为等间隔(d1＝d2＝d3＝d4)。

处方笺读取器230读取处方笺信息。例如，通过OCR(Optical CharacterRecognition，光学字符识别)，从记载在纸上的处方笺读取患者姓名、所开的药物以及其数量等信息。在指示与所开的药物相关的信息的条形码等存储于处方笺的情况下，也可以从条形码读取所开的药物以及其数量等信息。此外，医师、药剂师等用户也可以读取处方笺，并通过操作部500的键盘510和/或鼠标520等输入装置输入处方笺信息(处方数据)。

＜处理部的结构＞

处理部100基于由照相机210、220拍摄到的图像以及由处方笺读取器230读取的信息等，进行分包成分包袋702的药物的确定。如图5所示，处理部100具备处方数据获取部100A(处方数据获取部)、图像获取部100B(图像获取部、第1图像获取部)、主图像获取部100C(主图像获取部、第2图像获取部)、片剂判断部100D(片剂判断部、分割判定部)、图像生成部100E(图像生成部)、片剂确定部100F(片剂确定部)、显示控制部100G(显示控制部)、完整片剂确定部100H(完整片剂确定部)以及预处理部100I(预处理部、对照部)。此外，处理部100具备CPU110(CPU：Central Processing Unit，中央处理单元)、ROM120(ROM：Read OnlyMemory，只读存储器)以及RAM130(RAM：Random Access Memory，随机存取存储器)。

上述的处理部100的功能能够使用各种处理器(processor)来实现。在各种处理器中，例如包括作为执行软件(程序)而实现各种功能的通用的处理器的CPU(CentralProcessing Unit，中央处理单元)。此外，在上述的各种处理器中，还包括作为专用于图像处理的处理器的GPU(Graphics Processing Unit，图像处理单元)、FPGA(FieldProgrammable Gate Array，可编程门阵列)等作为能够在制造后变更电路结构的处理器的可编程逻辑器件(Programmable Logic Device：PLD)。进一步地，具有为了执行ASIC(Application Specific Integrated Circuit，专用集成电路)等的特定的处理而专用地设计的电路结构的处理器即专用电气电路等也包括于上述的各种处理器。

各部的功能既可以由1个处理器实现，也可以利用同种或不同种的多个处理器(例如，多个FPGA、或者CPU和FPGA的组合、或CPU和GPU的组合)来实现。此外，也可以利用1个处理器来实现多个功能。作为利用1个处理器来构成多个功能的例子，第1，有如计算机所代表的那样，利用1个以上的CPU和软件的组合来构成1个处理器，从而该处理器作为多个功能来实现的方式。第2，有如片上系统(System On Chip：SoC)等所代表那样，使用利用1个IC(Integrated Circuit)芯片来实现系统整体的功能的处理器的方式。像这样，各种功能可作为硬件的构造而使用1个以上的上述的各种处理器构成。进一步地，关于这些各种处理器的硬件的构造，更具体地是组合半导体元件等电路元件得到的电气电路(circuitry)。这些电气电路也可以是使用逻辑或、逻辑与、逻辑非、逻辑异或以及组合这些的逻辑运算来实现上述的功能的电气电路。

在上述的处理器或者电气电路执行软件(程序)时，将执行的软件的处理器(计算机)可读的代码存储在ROM120(ROM：Read Only Memory，只读存储器)等非暂时性存储介质，处理器参照该软件。存储在非暂时性存储介质的软件包括用于执行本发明涉及的对象物对照方法、后述的片剂确定方法的程序。也可以将代码存储在各种光磁存储装置、半导体存储器等非暂时性存储介质而非ROM。在进行使用软件的处理时，例如RAM130(RAM：RandomAccess Memory)作为暂时的存储区域而使用，此外例如能够参照存储在未图示的EEPROM(Electronically Erasable and Programmable Read Only Memory，电可擦除可编程只读存储器)的数据。这些处理器或者电气电路进行的处理由CPU110归总。

＜存储部的结构＞

存储部300通过CD(Compact Disk，压缩盘)、DVD(Digital Versatile Disk，数字通用光盘)、硬盘(Hard Disk)、各种半导体存储器等非暂时性存储介质以及其控制部构成，图6所示的信息被互相关联地存储。处方数据300A是由处方笺读取器230读取的处方笺的信息或用户基于处方笺而进行了输入、编辑等的信息。关于处方数据300A，例如也可以进行基于记载于处方笺的药物的一般名称而输入特定的药物的名称、或者将原研医药品和仿制医药品相互变更等。拍摄图像300B(第1拍摄图像)是由照相机210、220拍摄到的药物的图像，包括针对药物的表面以及背面的图像。在拍摄图像中包括多个药物(片剂)的情况下，也可以将从拍摄图像提取针对单一的药物的区域得到的图像作为拍摄图像300B。匹配用图像300C(基于第1拍摄图像的第1匹配用图像)是针对判断为是分割片剂的片剂的包括根据拍摄图像生成的片剂区域的图像，在与主图像的模板匹配中使用。掩模图像300D包括作为片剂区域提取用掩模图像的第1掩模图像和作为刻印和/或印字区域提取用掩模图像的第2掩模图像。也可以对这些掩模图像进行2值化。主图像300E(基于第2拍摄图像的第2匹配用图像)是针对未被分割的状态的片剂(对象物)的表面以及背面的图像，是成为模板匹配时的基准的图像。确定结果300F是匹配用图像所示的片剂的种类以及面的确定结果。

＜显示部以及操作部的结构＞

显示部400具备显示器410(显示装置)，能够显示输入的图像、处理结果、存储在存储部300的信息等。操作部500包括作为输入装置和/或指向装置的键盘510以及鼠标520，用户能够经由这些装置以及显示器410的画面，进行图像的拍摄指示、片剂的确定指示、显示方式(第1显示处理或第2显示处理)的选择等本发明涉及的对象物对照方法、后述的片剂确定方法的执行所需要的操作(将在后面叙述)。另外，也可以通过触摸屏构成显示器410，并经由该触摸屏而进行操作。

＜片剂确定方法的处理＞

一边参照图7的流程图，一边对由上述的结构的片剂确定装置10进行的对象物对照方法(片剂确定方法)的处理进行说明。

处方数据获取部100A经由处方笺读取器230输入处方笺信息(步骤S100：处方数据获取工序)。既可以直接获取输入的处方笺信息作为处方数据，也可以获取用户基于处方笺并经由操作部500进行了输入、编辑等的信息作为处方数据。此外，处方数据获取部100A也可以根据用户的操作，作为关联信息而输入用户通过目视等识别的药物的特征(例如，片剂的种类、形状、颜色等)、或者记载在所谓的“药记事本”等记事本的药物名称、数量、服用方法等信息，并追加到处方数据，或取代其而使用。

图像获取部100B控制照相机210、220，以获取从多个不同的方向(图2、3的±Z方向；铅垂上下方向)对分包成分包袋702的药物(片剂)进行拍摄得到的拍摄图像(第1拍摄图像)(步骤S110：图像获取工序，第1图像获取工序)。此时，通过照明部200以及光源202对分包袋702进行照明。

主图像获取部100C基于获取到的处方数据，获取针对未被分割的状态的片剂(对象物)的表面以及背面的主图像(步骤S120：主图像获取工序，第2图像获取工序)。主图像获取部100C既可以获取存储在存储部300的主图像300E，也可以经由未图示的通信线路从外部的服务器、数据库等获取主图像。此外，主图像获取部100C也可以经由照相机210、照相机220以及图像获取部100B，针对未被分割的状态的片剂(对象物)拍摄图像(第2拍摄图像)，并对拍摄到的图像实施需要的图像处理，从而作为主图像来获取。

＜分割片剂的判定＞

片剂判断部100D(分割判定部)判断(判定)拍摄图像(第1拍摄图像)中拍射到的片剂(对象物)是否是分割片剂(是否已被分割)(步骤S130：片剂判断工序，分割判定工序)。该判断例如能够通过以下的手法1、2来进行，片剂判断部100D能够通过这些手法，将未被确定为“完整片剂”的片剂以及被判断为“不明”的片剂判断为“是分割片剂”。另外，在第1实施方式中，片剂是“可分割的医疗用物品”的一种形态。

＜手法1：基于拍摄图像以及主图像的确定＞

完整片剂确定部100H(分割判定部)基于拍摄图像以及主图像来确定未被分割的片剂(完整片剂)的种类。具体地，通过拍摄图像和主图像的模板匹配来确定完整片剂。模板匹配能够通过公知的手法(例如日本特开2014-67342号所述的方法)来进行。

＜手法2：基于掩模图像的判断＞

片剂判断部100D(分割判定部)能够基于以下那样的掩模图像中的像素分布的对称性(非对称性)来进行判断。完整片剂多在(在水平或垂直地使朝向一致的状态下)水平方向、垂直方向上均对称，但考虑分割片剂如以下所示具有非对称性。图8是表示使用通过机器学习构建的分层型网络(例如，区域提取用神经网络；第1分层型网络)，生成拍摄图像所拍摄到的片剂的2值化掩模图像，根据与掩模图像外切的矩形的朝向推定旋转角，并使矩形旋转了与该旋转角相应的量的状态的图。具体地，图8的(a)部分、(b)部分分别是表示与针对分割片剂(完整片剂的1/2)、立锭(切截面与载置面接触的状态的片剂)的2值化掩模图像的片剂区域(像素值255的区域)外切的矩形的图。在该状态下，能够如图9所示，将矩形的区域分割成多个(例如在水平方向上分割为2个，并在垂直方向上分割成2个，合计4个)，计算各区域的白像素(像素值255的像素)的比例，并基于像素值的分布进行上述的判断。具体地，分割片剂(半锭)的情况如图9的(a)部分所示在+X侧和-X侧为非对称，在+Y侧和-Y侧为对称，立锭的情况如图9的(b)部分所示，在+X侧和-X侧、+Y侧和-Y侧均变得大致对称。因此，片剂判断部100D能够如果在+X侧和-X侧为非对称则判断为分割片剂(半锭)，如果为对称则判断为立锭(除判断为整片的片剂以外)。即，在片剂(对象物)的外形是预先规定的形状的(具有上述的对称性的)情况下，将片剂判定为已被分割。另外，上述的区域提取用神经网络能够通过将另外制作的掩模图像作为训练数据而提供的带条件的GAN等机器学习(GAN：Generative Adversarial Networks，生成式对抗网络)构成。

＜匹配处理的概要＞

对片剂确定装置10中的匹配处理(第1匹配用图像与作为主图像的第2匹配用图像的对照)的概要进行说明。图10的(a)部分是拍摄到了分割片剂的拍摄图像的例子，针对这样的拍摄图像，使用区域提取用神经网络(第1分层型网络)生成2值化掩模图像(该图的(b)部分)。然后，对拍摄图像和2值化掩模图像进行乘法运算，并实施预处理(刻印提取、2值化、翻转等)，以生成匹配用图像(该图的(c)部分)。然后，一边使匹配用图像和主图像相对地旋转，一边计算匹配得分，求出得分变得最大的旋转角度(该图的(d)部分)，使片剂区域图像逆旋转该旋转角度，使印字或者刻印的朝向与主图像一致(该图的(e)部分；第2显示处理的情况)。以下对这样的匹配处理详细地进行说明。

＜匹配用图像的生成＞

图像生成部100E(第1图像获取部)针对拍摄图像(第1拍摄图像)所包括的分割片剂，生成匹配用图像(第1匹配用图像)(步骤S140：图像生成工序，第1图像获取工序)。为了确定片剂的表面以及背面，图像生成部100E分别针对利用照相机210、220从上下方向拍摄到的图像，生成匹配用图像并进行对应。以下，对匹配用图像的生成进行说明。

图像生成部100E通过区域提取用神经网络(第1分层型网络)生成掩模用图像，并对生成的掩模图像实施2值化，基于闭合(Closing)的整形等预处理。区域提取用神经网络能够使用上述的分割片剂的判断中使用的区域提取用神经网络。然后，图像生成部100E对预处理后的掩模图像和拍摄图像进行乘法运算以提取片剂区域，并进行噪声的去除等。进一步地，图像生成部100E求出包括片剂区域的矩形(例如，与片剂区域外切的矩形)，并从拍摄图像切出包括该矩形的正方形的范围以作为匹配用图像。另外，优选为，关于矩形，计算旋转角并使其竖立。图11是表示像这样生成的分割片剂区域、矩形以及匹配用图像(分割片剂区域830、矩形832、匹配用图像834)的关系的例子的图。

＜针对匹配用图像的预处理＞

预处理部100I(对照部)针对匹配用图像和/或主图像，将提取区域放大处理、2值化处理、图像翻转处理、印字和/或刻印的区域(包括识别信息的一部分的区域)的处理、对印字和/或刻印进行强调的处理中的至少1者作为预处理而实施(步骤S150：预处理工序、对照工序)。另外，关于是否进行2值化处理、图像翻转处理、提取印字和/或刻印的区域的处理、对印字和/或刻印进行强调的处理(对识别信息进行强调的处理)，优选在匹配用图像和主图像中一致。此外，优选为通过图像的放大或缩小使匹配用图像和主图像的大小一致。

＜区域放大＞

在作为预处理的区域放大中，预处理部100I对区域进行放大，使得匹配用图像包括片剂区域的外切圆。例如，在图12的(a)部分所示的区域放大前的匹配用图像834的边的长度为“a”的情况下，有如图12的(b)部分所示片剂区域的外切圆835的一部分超出到匹配用图像834之外的情况。因此，如该图的(c)部分所示，如果分别对两侧放大0.25a，将边的长度设为“1.5a”，则能够对区域进行放大，使得包括外切圆，从而获得图12的(d)部分所示的匹配用图像836。另外，图12的(e)部分是表示实施了刻印部分提取的预处理的主图像的例子(主图像838)的图。

预处理部100I也可以从匹配用图像836切出在外切圆835中考虑了空白区域的正方形的范围，并进行放大或缩小，使大小与主图像一致，从而作为匹配用图像。该空白区域例如能够相对于外切圆设为从(1/10)×a到(1/12)×a程度(“a”是包括上述的旋转矩形的正方形的一条边的长度)。确保空白区域的是考虑到倾斜误差等而扩大的区域。

预处理部100I也可以除上述的区域放大之外或取代区域放大，对匹配用图像实施2值化处理、图像翻转处理、刻印提取处理。刻印提取能够通过与使用刻印提取用神经网络(第2分层型网络)生成的掩模图像的乘法运算来进行。片剂确定部100F使用这样的预处理后的匹配用图像836和主图像进行模板匹配。第2分层型网络能够将提取印字和/或刻印得到的图像作为训练数据而提供并进行机器学习而构成。

＜片剂区域图像、掩模图像以及刻印提取结果的例子＞

图13是表示片剂区域图像、区域提取用以及刻印提取用的掩模图像、刻印等的提取结果的例子的图。参照符号810的列表示从拍摄图像切出上述的矩形(相当于图11的矩形832)的部分得到的图像(片剂的表面或背面)，参照符号812的列表示参照符号810的列所示的图像的相反侧的面(片剂的背面或表面)。参照符号814、816的列表示刻印提取用的2值化掩模图像(表面或背面；对应于参照符号810、812的图像)，参照符号818、820的列表示片剂区域提取用的2值化掩模图像(表面或背面；对应于参照符号810、812的图像)。为了排除起因于倾斜的侧面、截面的反射的影响，刻印提取用掩模图像变得小于片剂区域提取用的掩模图像。参照符号822、824的列表示从参照符号810、812的列所示的图像提取刻印而得到的结果(表面或背面)。在这些图像中，相同行的图像是针对相同片剂的图像。

＜匹配得分的计算＞

片剂确定部100F(对照部)一边使匹配用图像(第1匹配用图像)和主图像(第2匹配用图像)相对地旋转，一边计算匹配得分，并且一边改变旋转角度一边重复进行匹配得分的计算(步骤S160：片剂确定工序，对照工序)。图14是表示对针对拍摄图像的表面以及背面的匹配用图像和针对片剂的表面以及背面的主图像的匹配得分进行计算的情形的概念图。图像802A、802B表示分割片剂的图像，一个是表面，另一个是背面。主图像804A、804B分别是针对表面、背面的主图像。在这样的状况下，片剂确定部100F在各旋转角度下，计算匹配得分S10～S40。匹配得分S10、S20分别是针对图像802A、802B(匹配用图像)和主图像804A(表面)的匹配得分，匹配得分S30、S40分别是针对图像802A、802B(匹配用图像)和主图像804B(背面)的匹配得分。

在匹配得分的计算中，(a)既可以在使匹配用图像和主图像的中心一致的状态下，一边使这些图像相对地一点一点旋转，一边计算匹配得分，(b)也可以制作多个旋转角度不同的图像并使各图像移动，从而计算匹配得分。此外，能够使旋转角度的变化较小(例如，使用旋转角度分别为1度(deg)的不同的360张图像)，能够进行正确的匹配，但有在处理中需要时间的情况。在该情况下，制作少数使旋转角度的变化较大的图像并进行粗匹配(例如，使用旋转角度分别为10度的不同的36枚的图像)，接下来在粗匹配的结果得分变大的角度的附近，使用使变化较小的图像来进行匹配(例如，使用旋转角度分别为1度的不同的10枚的图像)，由此能够将处理高速化。

＜考虑到分割片剂的特性的匹配得分的计算＞

在通常的模板匹配中，一般使用相关得分值(已进行了标准化)。然而，如果考虑分割片剂的特性，优选使用以下那样的匹配得分(修正得分)。具体地，片剂确定部100F优选计算(模板匹配中的相关得分值(已进行了标准化))×(匹配用图像的表示印字和/或刻印的图像的像素数)×(主图像的表示印字和/或刻印部分的图像的像素数)以作为匹配得分，并基于该匹配得分，确定片剂的种类以及面。将“相关得分值(已进行了标准化)”乘以“匹配用图像的表示印字和/或刻印的图像的像素数”以及“主图像的表示印字和/或刻印部分的图像的像素数”，是为了使得印字和/或刻印的面积越大则得分变得越大，此外即使“相关得分值(已进行了标准化)”相同，也能够针对复杂的印字和/或刻印进行加权，以提高匹配的准确度。另外，在这样的修正得分的计算中，作为“表示印字和/或刻印部分的图像的像素数”，例如能够使用图13的参照符号822、824的列所示的图像(分割片剂的表示印字和/或刻印部分的图像)中的白色像素的像素数、图12的(e)部分(主图像的表示印字和/或刻印部分的图像)中的白色像素的像素数。此外，也可以针对主图像，在求出“表示印字和/或刻印部分的图像的像素数”时将割线部分的像素数除外。

＜片剂的种类的确定＞

由于多个种类的分割片剂被分包为1个分包袋的情况较少，因而通常只要针对1种主图像进行匹配即可，但在包括多个种类的分割片剂的情况下，片剂确定部100F能够对针对各个主图像的匹配得分的最大值彼此进行比较，并确定“匹配用图像表示与匹配得分的最大值变得最大的主图像相同的片剂”。

＜旋转角度的确定＞

片剂确定部100F将匹配得分变得最大的角度确定为片剂的旋转角度。

＜表面以及背面的确定＞

片剂确定部100F例如基于以下的基准来确定片剂的面(表面或背面)。

(1)如果(匹配得分S10的最大值)＞(匹配得分S30的最大值)，并且(匹配得分S20的最大值)≤(匹配得分S40的最大值)，则图像802A表示表面，并且图像802B表示背面。

(2)如果(匹配得分S20的最大值)＞(匹配得分S40的最大值)，并且(匹配得分S10的最大值)≤(匹配得分S30的最大值)，则图像802A表示背面，图像802B表示表面。

片剂确定部100F判断针对所有分割片剂的处理是否结束(步骤S170)，到判断被肯定为止，重复进行从步骤S140到S160的处理。如果步骤S170的判断被肯定，则结束针对1个分包袋的处理，并前进到步骤S180，到针对所有分包袋的处理结束为止(到步骤S180的判断被肯定为止)重复进行步骤S110～S170的处理。如果步骤S170的判断被肯定，则前进到步骤S190。

＜显示处理＞

显示控制部100G基于片剂的种类以及面的确定的结果，使主图像和被确定与主图像表示相同的片剂以及相同的面的匹配用图像(判断为拍摄到了第1匹配用图像中的相同种类的片剂(对象物)的显示用图像)显示在显示器410(显示装置)(步骤S190：显示控制工序)。在步骤S190中，进行使分割片剂的直线部分的弦的朝向一致而显示的第1显示处理、或使分割片剂的印字和/或刻印的朝向一致而显示的第2显示处理。显示控制部100G既可以根据用户的指示进行任意显示处理，也可以与用户的指示无关地进行任意显示处理。另外，在第1、第2显示处理中，也可以显示拍摄图像、片剂区域图像而非匹配用图像。此外，在显示匹配用图像的情况下，既可以使用未实施预处理的图像，也可以使用实施了预处理的图像。

＜第1显示处理＞

在第1显示处理中，使匹配用图像中的弦的朝向(对象物的外形的朝向的一个例子)一致而显示。片剂的弦是由于作为对象物的片剂的分割而生成的分割线的一个例子，在对片剂实施了割线的情况下，割线附近变为分割线的情况较多。显示控制部100G例如能够将在匹配用图像或者掩模图像中曲率较小的边、较短的边、靠近外切圆的中心的边等判断为弦。在弦的朝向的计算中，显示控制部100G如图24所示，确定与分割片剂(半锭)外切的矩形840(外切矩形)的顶点坐标以及从外切矩形的X轴(水平方向)起的旋转角θ。然后，显示控制部100G将外切矩形旋转(90度-θ度)从而使外切矩形竖立，以获得分割片剂竖立的图像(图25的矩形841或矩形842的状态的任一者)。显示控制部100G调查竖立的分割片剂的像素分布，确定是如矩形841那样在右侧一半亮的像素较多，还是如矩形842那样在右侧一半亮的像素较多(能够基于“分割片剂的判定”的手法2中描述的那样的掩模图像中的白像素的分布来确定)。只要是矩形841的状态，则顺时针地旋转90度，只要是矩形842的状态则逆时针地旋转90度，由此能够使弦的朝向在水平方向上一致。另外，显示时，也可以使弦的朝向在垂直方向上或者倾斜地一致，而不是在水平方向上一致。此外，在针多个的片剂进行显示的情况下，除各片剂的弦的朝向之外，也可以使弓(分割片剂的曲线部分)的朝向(对象物的外形的朝向的一个例子)一致而进行显示(参照图16)。

＜第2显示处理＞

在第2显示处理中，使匹配用图像中的印字和/或刻印(赋予给对象物的识别信息的一个例子)的朝向一致而显示。显示控制部100G使匹配用图像逆旋转与通过上述的处理而确定的旋转角度的量相应的量，由此能够使印字和/或刻印的朝向一致。

＜显示处理的具体例＞

对上述的第1、第2显示处理的具体例进行说明。作为对象的片剂是图15所示的“巴尔沙坦片(Valsartan Tablet)80mg FFP”。图15的(a)部分是片剂的主视图(表面)，实施了印字以及割线。该图的(b)部分是侧视图。割线和印字的方向的关系根据片剂而不同，也有相对于印字在水平方向或者垂直方向上实施割线的情况。此外，图15的(c)部分以及(d)部分是背面图(背面)。与表面同样地也在背面实施了印字，但表面和背面中印字的方向不固定。例如，相对于图15的(a)部分所示的表面，既有背面变为如(c)部分那样(表面和印字的方向相同)的情况，也有变为(d)部分那样的(表面和印字的方向不同)情况。

将针对上述的片剂的第1显示处理的例子示于图16。该图的(a)部分是针对主图像的表面(白线的左侧的区域)以及匹配用图像的表面(白线的右侧的区域)的显示，该图的(b)部分是针对主图像的背面(白线的左侧的区域)以及匹配用图像的背面(白线的右侧的区域)的显示。在图16中，(a)部分和(b)部分中存在于相同的位置处的图像表示相同的片剂。此外，将第2显示处理的例子示于图17。该图的(a)部分是针对主图像的表面(白线的左侧的区域)以及匹配用图像的表面(白线的右侧的区域)的显示，该图的(b)部分是针对主图像的背面(白线的左侧的区域)以及匹配用图像的背面(白线的右侧的区域)的显示。在图17中，(a)部分和(b)部分中存在于相同位置处的图像也表示相同的片剂。另外，在第1、第2显示处理时，显示控制部100G选择针对片剂(对象物)的表面和/或背面的匹配用图像(第1匹配用图像)，并使其显示在显示器410(显示装置)。也可以仅显示表面的图像或者仅显示背面的图像，也可以显示这两者的图像。此外，既可以一起显示主图像，也可以省略显示。

如以上说明的那样，根据第1实施方式，能够以良好的精度对分割片剂进行匹配，此外能够通过第1、第2显示处理容易地确认匹配结果。

＜对椭圆片剂进行了分割的情况下的匹配＞

针对对椭圆型的片剂被分割了的情况下的匹配，进行说明。图18是椭圆片剂的主图像的例子，该图的(a)部分表示片剂的表面。在表面的左右，分别实施了“A”、“B”的刻印(或印字)。此外，该图的(b)部分表示片剂的背面。在背面的左右，分别实施了“C”、“D”的刻印(或印字)。在该片剂，在中央带有割线。将对图18的片剂进行了分割的状态示于图19。图19的(a1)、(a2)部分分别表示表面的左侧、右侧，该图的(b1)、(b2)部分分别表示背面的左侧、右侧。在这样的椭圆型的片剂中，存在表面与背面的对应关系不同(如上述的巴尔沙坦片那样，表面和背面中刻印的朝向不同)的片剂。例如，有如图20的(a1)、(a2)部分所示，表面和背面中刻印的朝向(上下方向)一致的情况、和如该图的(b1)、(b2)部分所示，刻印的朝向不同的情况。

＜椭圆片剂的情况下的匹配得分的计算＞

图21是表示图18～20所示的椭圆片剂的匹配的情形的图。图21中记载为“上”的是例如通过照相机210从上方拍摄到的图像，记载为“下”的是例如通过照相机220从下方拍摄到的图像。在拍摄图像中，刻印有A、B、C、D中的任一者，图21所示的拍摄图像的刻印是例示。在这样的状况下，片剂确定部100F计算以下的匹配得分S1～S8(图7的步骤S160，相当于片剂确定工序)。此时，与上述的修正得分值同样地，优选计算一同考虑了分割片剂的特性的匹配得分。另外，在以下的说明中，有将“匹配得分S1”记载为“S1”的情况(对于匹配得分S2～S8也是同样的)。

匹配得分S1：针对拍摄图像(从上方拍摄)和主图像(表面的左侧)的匹配得分

匹配得分S2：针对拍摄图像(从上方拍摄)和主图像(表面的右侧)的匹配得分

匹配得分S3：针地拍摄图像(从上方拍摄)和主图像(背面的左侧)的匹配得分

匹配得分S4：针对拍摄图像(从上方拍摄)和主图像(背面的右侧)的匹配得分

匹配得分S5：针对拍摄图像(从下方拍摄)和主图像(表面的左侧)的匹配得分

匹配得分S6：针对拍摄图像(从下方拍摄)和主图像(表面的右侧)的匹配得分

匹配得分S7：针对拍摄图像(从下方拍摄)和主图像(背面的左侧)的匹配得分

匹配得分S8：针对拍摄图像(从下方拍摄)和主图像(背面的右侧)的匹配得分

另外，例如匹配得分S1表示相对于拍摄图像(从上方拍摄)，使主图像(表面的左侧)在旋转角度0度～359度的范围内旋转并进行模板匹配得到的得分值中的得分变得最大的旋转角下的得分值。

作为匹配得分彼此的对应关系，可以有(S1，S7)、(S1，S8)、(S2，S7)、(S2，S8)、(S3，S5)、(S3，S6)、(S4，S5)、(S4，S6)。在此，例如(S1，S7)意味着“从上方拍摄到的图像表示表面的左侧，从下方拍摄到的图像表示背面的左侧”。

＜面的确定＞

在上述的状况下，片剂确定部100F通过以下的第1、第2方式来确定椭圆型的分割片剂的面。由此，能够以良好的精度对椭圆型的分割片剂进行匹配，并确定片剂的面。另外，片剂的种类设为另外确定的信息(包括在处方数据或者分包袋的拍摄图像中分割片剂仅为1个种类的情况)。

(第1方式)

片剂确定部100F计算得分T1＝S1+S2+S7+S8、得分T2＝S3+S4+S5+S6，并比较得分T1、T2的大小。其结果是，如果得分T1＞T2，则片剂确定部100F确定“从上方拍摄到的图像是表面，从下方拍摄到图像是背面”。另一方面，如果得分T1＜T2，则片剂确定部100F确定“从上方拍摄到的图像是背面，从下方拍摄到的图像是表面”。

(第2方式)

片剂确定部100F计算得分T1＝S1+S7、得分T2＝S1+S8、得分T2＝S2+S7、得分T4＝S2+S8、得分T5＝S3+S5、得分T6＝S3+S6、得分T7＝S4+S5、得分T8＝S4+S6，并确定得分T1～T8中的最大得分。其结果是，在最大得分为得分T1、T2、T7、T8中的任意得分的情况下，片剂确定部100F确定“从上方拍摄到的图像是表面，从下方拍摄到的图像是背面”。另一方面，在最大得分是得分T3、T4、T5、T6中的任意得分的情况下，片剂确定部100F确定“从上方拍摄到的图像是背面，从下方拍摄到的图像是表面”。

＜显示处理＞

在上述的椭圆型的片剂的情况下，显示控制部100G也能够进行使作为分割片剂的直线部分的弦的朝向一致而显示的第1显示处理、或使分割片剂的印字和/或刻印的朝向一致而显示的第2显示处理，并如图16、17那样使结果显示在显示器410(显示装置)。由此，能够容易地确认匹配结果。

＜药物的鉴别的情况＞

在上述的实施方式中，对主要作为药物监查支援而进行的分包药物的确定进行了说明，但本发明的对象物对照装置(片剂确定装置)以及对象物对照方法(片剂确定方法)也能够应用于患者在医院、药店等自备的药物的鉴别。在进行鉴别的情况下，如图22的侧视图所示，取代分包袋，将片剂800放入浅底碟等的容器710而进行拍摄。图23是图22所示的状态的俯视图。在进行鉴别的情况下的其他结构与上述的片剂确定装置10同样。片剂的确定处理也能够与上述的方式同样地进行，但在进行自备药的鉴别的情况下有处方笺不能够确认的情况。在该情况下，处方数据获取部100A也可以根据用户的操作作为关联信息而输入通过目视等识别的药物的特征(例如，片剂的种类、形状、颜色等)、或者记载在所谓的“药记事本”等记事本的药物名称、数量、服用方法等信息，并取代处方数据而使用。

在进行药物的鉴别的情况下，也能够通过本发明的对象物对照装置(片剂确定装置)以及对象物对照方法(片剂确定方法)以良好的精度对分割片剂(作为可分割的医疗用物品的对象物)进行匹配，此外，也能够通过第1、第2显示处理容易地确认匹配结果。

＜针对收纳有片剂或胶囊型药物的包装体的对照＞

在上述的例子中，对针对片剂进行对照的情况进行了说明，但本发明涉及的对象物对照装置以及对象物对照方法也能够应用于收纳有片剂的包装体、收纳有胶囊型药物的包装体。例如，所谓的PTP包装片材(PTP：press through pack，挤压包装)是用塑料和铝箔夹着片剂、胶囊而收纳的片状的包装体，能够通过使劲地按压配合片剂或者胶囊型药物的形状而立体地形成的塑料部分，从而使铝箔破裂，从而逐片地取出其中的片剂等。此外，一般在PTP包装片材带有多个穿孔，能够沿着该穿孔进行分割。即，PTP包装片材是可分割的医疗用物品的另一例子。

图26是从表面侧观察作为收纳有片剂的PTP包装片材的片材900(未被分割的状态)的立体图，图27是主视图。片材900能够通过文字、数字在端部902以及主体部904对药物的名称、有效成分量等进行印字(识别信息的一个例子；在背面也印字有同样的信息)，此外沿着穿孔904B切下(分割)主体部904，由此调节片剂部904A的数量，从而获得需要的数量的片剂910。另外，为了便于说明，图26、27中的识别信息是记载的信息，不是正确地再现实际的产品的显示的信息。图28是表示切下主体部904的一部分的状态的片材900的例子的图。在通过处方内容进行分割并向患者提供的情况、将切下了片剂的部分切下的情况变为这样的状态。

＜针对片剂的包装体的对照＞

针对这样的片材900，也能够与上述的片剂的情况同样地进行对照。具体的地，如图26、27所示，针对未被分割的状态的片材900(对象物)的表面以及背面，通过照相机210、照相机220、图像获取部100B、主图像获取部100C获取主图像(基于第2拍摄图像的第2匹配用图像)，针对对照对象的片材900(未被分割的状态或已分割的状态)的表面以及背面获取基于第1拍摄图像的第1匹配用图像。之后的处理能够与片剂的情况同样地按照图7所示的流程图来执行。

＜针对包装体的显示例＞

图29是表示对分割了的片材900进行了第1显示处理的状态的例子。在该例子中，能够使作为分割线的穿孔904B的朝向(以及针对分割线的对象物的朝向)一致而使片材900的外形的朝向一致。另外，图29是对于表面的显示例，但对于背面也能够同样地显示(参照图16的例子)。另一方面，图30是表示对分割了的片材900进行了第2显示处理的状态的例子。片材900不一定限于通过穿孔904B切分，有通过剪子等在与穿孔904B正交的方向上切分的情况，在该情况下即使片剂的数量相同，分割后的片材900的形状也不限于变为相同。在这样的情况下，能够进行使赋予给片材900的识别信息(在该情况下药物的名称等印字)的朝向一致而显示的第2显示处理。另外图30是对于表面的显示例，但对于背面也能够同样地显示(参照图17的例子)。

以上，一边参照图26～30，一边对收纳有片剂的包装体(PTP片材)的情况进行了说明，在收纳有胶囊型药物的片材的情况下也能够同样地进行对照，并能够通过第1、第2显示处理进行显示。另外，对于个别地收纳片剂的袋状的收纳部连续地形成片状的类型的包装体，也能够同样地进行对照以及显示处理。

在收纳有片剂的包装体、收纳有胶囊型药物的包装体的情况下，也能够与片剂的情况同样地以良好的精度对包装体进行匹配，此外也能够通过第1、第2显示处理容易地确认匹配结果。

(附记)

除上述的实施方式的各方式之外，以下所述的结构也包括于本发明的范围。

(附记1)

附记1涉及的片剂确定装置具备：图像获取部，获取从多个不同的方向对片剂进行拍摄得到的拍摄图像；主图像获取部，获取针对未被分割的片剂的表面以及背面的主图像；片剂判断部，判断拍摄图像中拍摄到的片剂是否是分割了的分割片剂；图像生成部，根据针对被判断为是分割片剂的片剂的拍摄图像，生成包括片剂区域的匹配用图像；片剂确定部，通过匹配用图像和主图像的模板匹配来确定匹配用图像表示的片剂的种类以及面；和显示控制部，是基于确定的结果，使主图像和被确定与主图像表示相同的片剂以及相同的面的匹配用图像显示在显示装置的显示控制部，并进行使作为分割片剂的直线部分的弦的朝向一致而显示的第1显示处理、或使分割片剂的印字和/或刻印的朝向一致而显示的第2显示处理。

在附记1的结构中，关于分割片剂，能够进行使作为分割片剂的直线部分的弦的朝向一致而显示的第1显示处理、或使分割片剂的印字和/或刻印的朝向一致而显示的第2显示处理，从而使匹配结果显示，因而用户能够通过视觉容易地掌握片剂的种类以及面的确定结果(匹配结果)。此外，在附记1的结构中，使用针对未被分割的片剂的主图像来进行模板匹配，因而能够降低由于图像仅部分之间一致而导致被错误地匹配的可能性，并进行正确的匹配。像这样，根据附记1的结构，能够以良好的精度对分割片剂进行匹配，此外能够容易地确认匹配结果。

在附记1的结构中，优选为，图像获取部获取从多个对置的方向拍摄到的图像。进一步优选为，获取从铅垂上下方向等对片剂的表面以及背面进行拍摄而得到的图像。此外，主图像也可以基于处方数据(记载于处方笺的药物的信息以及医师、药剂师等基于该信息输入的信息)来获取。另外，片剂的“确定”能够在药物的监查、自备药等的鉴别等中进行。

(附记2)

附记2涉及的片剂确定装置在附记1的结构中，显示控制部针对片剂的表面以及背面，使主图像以及匹配用图像显示。根据附记2的结构，能够更加容易地掌握确定结果(匹配结果)。另外，在附记2的结构中，优选为，确定结果针对每个主图像以及匹配用图像的表面以及针对每个背面而一并地显示。

(附记3)

附记3涉及的片剂确定装置在附记1或附记2的结构中，还具备：完整片剂确定部，基于拍摄图像以及主图像来确定未被分割的片剂的种类，片剂判断部针对未由完整片剂确定部确定出种类的片剂进行判断。根据附记3的结构，针对未由完整片剂确定部确定出种类的片剂，判断是否是分割片剂，由此能够高效地进行处理。

(附记4)

附记4涉及的片剂确定装置在附记1至附记3的结构中的任一项中，片剂判断部根据拍摄图像生成包括片剂区域的掩模图像，并基于掩模图像中的像素值的分布进行判断。未被分割的片剂一般是圆形、椭圆形等对称的形状，但由于分割而产生非对称的方向。因此，在附记4的结构中，基于掩模图像中的像素值的分布(例如非对称性)来判断是否是分割片剂。另外，能够从拍摄图像去除噪声等无用的部分，并将包括片剂区域的图像作为掩模图像，也可以进行2值化。此外，掩模图像的范围例如能够设为与片剂区域外切的矩形，但不限定于这样的方式。此外，对于立起的片剂(分割面或者切截面与片剂的载置面接触的状态；所谓的“立锭”)，也能够基于像素值的分布进行判断。

(附记5)

附记5涉及的片剂确定装置在附记4的结构中，片剂判断部使用通过机器学习构建的第1分层型网络来生成掩模图像。第1分层型网络能够设为神经网络，例如能够通过使用CNN(Convolutional Neural Network；卷积神经网络)等，将掩模图像作为训练数据而提供，从而进行深度学习等机器学习而构成。

(附记6)

附记6涉及的片剂确定装置在附记5的结构中，图像生成部针对每个像素而对拍摄图像的像素值和掩模图像的像素值进行乘法运算，以生成匹配用图像。附记6的结构作为规定匹配用图像生成处理的具体的方式的结构，能够通过与掩模图像的乘法运算，生成去除了无用的部分的匹配用图像。

(附记7)

附记7涉及的片剂确定装置在附记1至附记6的结构中的任一项中，还具备：预处理部，针对匹配用图像和/或主图像，将区域放大处理、2值化处理、图像翻转处理、提取印字和/或刻印的区域的处理、对印字和/或刻印进行强调的处理中的至少1者作为预处理而实施，片剂确定部使用实施了预处理的匹配用图像和/或主图像来进行模板匹配。在附记7的结构中，能够通过上述的预处理进一步正确地进行匹配。这些预处理既可以根据用户的指示来决定实施的处理的种类和/或程度，也可以由片剂确定装置与用户的指示无关地决定。另外，关于是否进行作为预处理的2值化处理、图像翻转处理、提取印字和/或刻印的区域的处理、对印字和/或刻印进行强调的处理，优选为在匹配用图像和主图像中一致。

(附记8)

附记8涉及的片剂确定装置在附记7的结构中，预处理部利用通过机器学习构建的第2分层型网络实施提取印字和/或刻印的处理。第2分层型网络能够设为神经网络，例如能够通过使用CNN(Convolutional Neural Network；卷积神经网络)等，将提取印字和/或刻印得到的图像作为训练数据而提供，并进行深度学习等机器学习而构成。

(附记9)

附记9涉及的片剂确定装置在附记1至附记8的结构中的任一项中，片剂确定部一边使匹配用图像和主图像相对地旋转，一边计算匹配得分，并基于匹配得分进行确定。在附记9的结构中，能够针对分别针对多个方向的匹配用图像和主图像的表面以及背面而计算匹配得分，并基于该结果，确定片剂的种类以及面。另外，既可以在使匹配用图像中的片剂区域的外切圆的中心和主图像的中心一致的状态下图像旋转，也可以一边使预先旋转了的图像移动一边进行匹配。此外，在匹配中也可以有图像的相对的移动(平行移动)。

(附记10)

附记10所涉及的片剂确定装置在附记9的结构中，显示控制部在第2显示处理中，针对确定的面，计算匹配得分最大的旋转的角度，使匹配用图像仅逆旋转角度，从而使匹配用图像中的印字和/或刻印的方向与主图像一致。附记10的结构是具体地规定在第2显示处理中，使匹配用图像中的印字和/或刻印的方向与主图像一致的处理的结构。

(附记11)

附记11涉及的片剂确定装置在附记9或附记10的结构中，片剂确定部使用匹配用图像和主图像的相关得分值、表示印字和/或刻印的图像的像素数、以及表示主图像的印字和/或刻印的图像的像素数来计算匹配得分。附记11的结构是对用于考虑分割片剂的特性而正确地进行匹配的得分的计算进行规定的结构。

(附记12)

附记12涉及的片剂确定方法具有：图像获取工序，获取从多个不同的方向对片剂进行拍摄得到的拍摄图像；主图像获取工序，获取针对未被分割的片剂的表面以及背面的主图像；片剂判断工序，判断拍摄图像中拍摄到的片剂是否是分割了的分割片剂；图像生成工序，根据针对被判断为是分割片剂的片剂的拍摄图像，生成包括片剂区域的匹配用图像；片剂确定工序，通过匹配用图像和主图像的模板匹配来确定匹配用图像表示的片剂的种类以及面；和显示控制工序，是基于确定的结果，使主图像和被确定为与主图像表示相同的片剂以及相同的面的匹配用图像显示在显示装置的显示控制工序，并进行使作为分割片剂的直线部分的弦的朝向一致而显示的第1显示处理、或使分割片剂的印字和/或刻印的朝向一致而显示的第2显示处理。

根据附记12的结构，能够与附记1的结构同样地以良好的精度对分割片剂进行匹配，此外能够容易地确认匹配结果。

另外，相对于附记12涉及的片剂确定方法，也可以还包括与附记2至附记11同样的结构。此外，使这些方式的片剂确定方法由片剂确定装置或者计算机执行的程序以及存储有该程序的计算机可读的代码的非暂时性存储介质也能够作为本发明的方式而举出。

以上，关于本发明的实施方式以及其他方式而进行了说明，但本发明不限定于上述，在不脱离本发明的精神的范围内能够进行各种变形。

-符号说明-

10：片剂确定装置；

100：处理部；

100A：处方数据获取部；

100B：图像获取部；

100C：主图像获取部；

100D：片剂判断部；

100E：图像生成部；

100F：片剂确定部；

100G：显示控制部；

100H：完整片剂确定部；

100I：预处理部；

110：CPU；

120：ROM；

130：RAM；

200：照明部；

202：光源；

210：照相机；

220：照相机；

230：处方笺读取器；

240：搬运机构；

300：存储部；

300A：处方数据；

300B：拍摄图像；

300C：匹配用图像；

300D：掩模图像；

300E：主图像；

300F：确定结果；

400：显示部；

410：显示器；

500：操作部；

510：键盘；

520：鼠标；

700：药包带；

702：分包袋；

710：容器；

800：片剂；

802A：图像；

802B：图像；

804A：主图像；

804B：主图像；

830：分割片剂区域；

832：矩形；

834：匹配用图像；

835：外切圆；

836：匹配用图像；

838：主图像；

840：矩形；

841：矩形；

842：矩形；

900：片；

902：端部；

904：主体部；

904A：片剂部；

904B：穿孔；

910：片剂；

1001：拍摄光轴；

θ：旋转角；

S1：匹配得分；

S2：匹配得分；

S3：匹配得分；

S4：匹配得分；

S5：匹配得分；

S6：匹配得分；

S7：匹配得分；

S8：匹配得分；

S10：匹配得分；

S20：匹配得分；

S30：匹配得分；

S40：匹配得分；

S100～S190：片剂确定方法的各步骤；

T1：得分；

T2：得分；

T3：得分；

T4：得分；

T5：得分；

T6：得分；

T7：得分；

T8：得分。