信息处理终端、程序、信息处理系统及颜色校正方法

文档序号:12617 发布日期:2021-09-17 浏览:36次 >En<

阅读说明:本技术 信息处理终端、程序、信息处理系统及颜色校正方法 (Information processing terminal, program, information processing system, and color correction method ) 是由 越野诚也 于 2020-01-15 设计创作,主要内容包括:一种信息处理终端,具有对显示图像进行显示的显示部、以及能够对正在注视所述显示部的状态的用户的脸部进行拍摄的拍摄部,所述信息处理终端具有:显示控制单元,使所述显示部显示包含1种颜色以上的颜色的显示图像;拍摄控制单元,在显示所述显示图像的状态下使所述拍摄部进行拍摄;显示图像提取单元,从拍摄图像中提取所述显示图像的反射光;以及颜色校正单元,根据提取的所述显示图像的反射光,对拍摄的图像进行颜色校正。(An information processing terminal having a display unit for displaying a display image and an imaging unit capable of imaging a face of a user looking at the display unit, the information processing terminal comprising: a display control unit that causes the display unit to display a display image including 1 or more colors; an imaging control unit that causes the imaging unit to perform imaging in a state where the display image is displayed; a display image extraction unit that extracts reflected light of the display image from a captured image; and a color correction unit that performs color correction on the captured image based on the extracted reflected light of the display image.)

信息处理终端、程序、信息处理系统及颜色校正方法

技术领域

本发明涉及一种信息处理终端、程序、信息处理系统及颜色校正方法。

背景技术

使用摄像头等拍摄装置进行拍摄时,拍摄的图像的颜色会根据周围的照明环境或拍摄装置的设定等而变化。因此,为了根据拍摄的图像对颜色准确地进行再现,需要进行颜色的校正。

传统上,已知一种技术,其通过准备比色图表(color chart),并对比色图表进行拍摄,从而对颜色进行校正。(专利文献1)

现有技术文献

专利文献

专利文献1:日本特开2005-045438号公报

发明内容

本发明要解决的问题

然而,在传统技术中,为了进行颜色校正,必须准备比色图表。另外,由于在拍摄场景中需要包含在比色图表中,因此需要防止在比色图表的部分映照到其他物体,能够拍摄的范围受到限制。另外,比色图表本身也会映照在拍摄的图像中。

本发明的一个实施方式的目的在于提供一种信息处理终端,其能够在不使用比色图表的情况下对拍摄的图像进行颜色校正。

用于解决问题的手段

公开的信息处理终端具有对显示图像进行显示的显示部、以及能够对正在注视所述显示部的状态的用户的脸部进行拍摄的拍摄部,所述信息处理终端具有:显示控制单元,使所述显示部显示包含1种颜色以上的颜色的显示图像;拍摄控制单元,在显示所述显示图像的状态下使所述拍摄部进行拍摄;显示图像提取单元,从拍摄图像中提取所述显示图像的反射光;以及颜色校正单元,根据提取的所述显示图像的反射光,对拍摄的图像进行颜色校正。

发明的效果

能够在不使用比色图表的情况下对使用信息处理终端拍摄的图像进行颜色校正。

附图说明

图1是根据本实施方式的信息处理终端的一个示例的正面图。

图2是根据本实施方式的信息处理终端的一个示例的硬件构成图。

图3是根据本实施方式的信息处理终端的一个示例的处理框图。

图4是根据本实施方式的使用信息处理终端的颜色校正方法的整体处理的一个示例的流程图。

图5是根据本实施方式的信息处理终端中的颜色校正图像提取处理的流程图。

图6是根据本实施方式的信息处理终端中的校正系数计算处理的流程图。

图7是根据本实施方式的信息处理终端中的颜色校正处理的流程图。

图8是示出利用根据本实施方式的信息处理终端的显示部显示的显示图像的一个示例的图。

图9是用于对根据本实施方式的信息处理终端的颜色校正图像的提取进行说明的图。

图10是用于对由根据本实施方式的信息处理终端进行的颜色校正处理的处理示例进行说明的图。

图11是根据本实施方式的信息处理终端和服务器装置的一个示例的构成图。

图12A是示出根据本实施方式的信息处理终端的显示图像的变形例的图。

图12B是示出根据本实施方式的信息处理终端的显示图像的变形例的图。

图12C是示出根据本实施方式的信息处理终端的显示图像的变形例的图。

图12D是示出根据本实施方式的信息处理终端的显示图像的变形例的图。

具体实施方式

以下,参照附图对本实施方式进行说明。

<硬件构成>

<<信息处理终端1>>

图1是根据本实施方式的信息处理终端1的正面图。作为信息处理终端1,可以是手机或智能手机等通信终端、或者便携式个人计算机、平板式计算机等信息终端。在此,作为本实施方式的信息处理终端1,以智能手机为例进行说明。在信息处理终端1的正面侧,具备显示部100和拍摄部200。显示部100是所谓的触摸面板。拍摄部200是设置在信息处理终端1的显示部100侧的摄像头,即所谓的内置摄像头。

信息处理终端1例如由图2所示的硬件构成的信息处理终端实现。图2是根据本实施方式的信息处理终端的一个示例的硬件构成图。

图2的信息处理终端1具备CPU(Central Processing Unit:中央处理单元)10、RAM(Random Access Memory:随机存取存储器)20、ROM(Read Only Memory:只读存储器)30、外部I/F(Interface:接口)40、记录介质45、无线I/F50、声音处理部60、显示部100、拍摄部200。其各自通过总线B1连接。

CPU10是将程序(应用程序)从ROM30或记录介质45等存储装置读取到RAM20上并执行处理的运算装置。

RAM20是对程序(应用程序)等进行临时保存的易失性的半导体存储器(存储装置)的一个示例。

ROM30是即使在切断电源时也能够对程序(应用程序)等进行保存的非易失性的半导体存储器(存储装置)的一个示例。在ROM30中,存储有在启动时执行的BIOS(BasicInput/Output System:基本输入/输出系统)等程序、OS(Operating System:操作系统)设定或网络设置等各种设置。

外部I/F40是与记录介质45等外部装置之间的接口。图2的信息处理终端1能够利用外部I/F40进行记录介质45的读取和/或写入。

记录介质45包括SD(Secure Digital:安全数字)存储卡、USB(Universal SerialBus:通用串行总线)存储器等。

无线I/F50是以无线方式连接到无线LAN(Local Area Network:局域网)或互联网等外部网络的接口。无线I/F50具备天线,并使用LTE(Long Term Evolution:长期演进)等移动通信方式、或者无线LAN(Local Area Network:局域网)或Bluetooth(蓝牙(注册商标))等无线通信方式连接到外部网络。信息处理终端1能够利用无线I/F50与外部的服务器装置等进行通信。

声音处理部60是进行声音等的输入输出处理的装置。在声音处理部60上连接有麦克风62和扬声器64,从麦克风62输入声音,并从扬声器64输出声音。

显示部100是附带触摸面板的显示器。显示部100进行稍后说明的显示图像或UI(User Interface:用户界面)、信息等的显示。另外,通过对画面的触摸进行检测,从而进行操作等的输入。

拍摄部200是设置在信息处理终端1的显示部100侧的摄像头,即所谓的内置摄像头。由于拍摄部200如图1所示设置在信息处理终端1的显示部100侧,因此拍摄部200例如能够对用户注视显示部100的状态的用户的脸部进行拍摄。

根据本实施方式的信息处理终端1能够通过在上述的硬件构成中执行程序(应用程序)来实现稍后说明的各种处理。

本实施方式的信息处理终端1使用由拍摄部200拍摄的用户的脸部图像对该拍摄的用户的脸部图像进行颜色校正。具体来说,信息处理终端1在显示部100上显示预定的显示图像。在用户注视显示部100的状态下,信息处理终端1的拍摄部200对用户的脸部进行拍摄。信息处理终端1使用在该拍摄的用户的脸部图像中映出的显示部100的显示图像,计算颜色的校正系数。使用该校正系数进行该拍摄的用户脸部图像的颜色校正。

<软件构成>

以信息处理终端1为例,对本实施方式的软件构成进行说明。图3是根据本实施方式的信息处理终端1的一个示例的处理框图。信息处理终端1具备显示控制单元310、拍摄控制单元320、显示图像提取单元330、校正系数计算单元340、颜色校正单元350、以及控制单元400。

显示控制单元310以在信息处理终端1的显示部100显示预定的图像(例如,稍后说明的显示图像)的方式进行控制。显示部100在显示控制单元310的控制下显示预定的图像。

拍摄控制单元320以在将预定的图像显示于信息处理终端1的显示部100上的状态下,使信息处理终端1的拍摄部200进行拍摄的方式进行控制。拍摄部200在拍摄控制单元320的控制下进行拍摄。

显示图像提取单元330从由拍摄部200拍摄的图像(拍摄图像),提取在用户的眼睛中、特别是在眼睛的所谓的黑眼珠部分(虹膜和瞳孔的部分)中映出的由显示部100显示的图像(显示图像)。

校正系数计算单元340求出由显示图像提取单元330提取的图像的色度值。基于求出的色度值和由显示部100显示的图像(显示图像)的色度值,计算颜色的校正系数。

颜色校正单元350使用由校正系数计算单元340计算出的校正系数,对由拍摄部200拍摄的图像的颜色进行校正。

控制单元400对信息处理终端1的整体进行控制。

<处理>

<<整体处理>>

根据本实施方式的信息处理终端1例如按照图4所示的顺序进行处理。图4是示出根据本实施方式的信息处理终端1的整体处理的一个示例的流程图。在本实施方式中,对显示图像500进行显示并利用拍摄部200对其进行拍摄,使用该拍摄图像计算校正系数,并进行该拍摄图像的颜色校正。

(步骤S10)当由用户执行程序(应用程序)时,信息处理终端1的控制单元400以启动拍摄部200的方式进行控制。拍摄部200在控制单元400的控制下启动。

(步骤S20)信息处理终端1的显示控制单元310以使显示部100对显示图像进行显示的方式进行控制。显示部100在显示控制单元310的控制下对显示图像进行显示。

对由显示部100显示的显示图像的示例进行说明。图8是示出利用根据本实施方式的信息处理终端1的显示部100显示的显示图像的一个示例的图。显示图像500是用白色、红色、绿色、蓝色、灰色在各处进行涂画的5色的图案。针对红色、绿色、蓝色由纯色显示。需要说明的是,在图8中,白色、红色、绿色、蓝色、灰色分别以附带字母W、R、G、B、GY的方式显示。(在图12A、图12B、图12C、图12D中也同样。)

在显示图像500的第1排布置白色和红色,在第2排布置绿色和蓝色,在第3排布置灰色。在本实施方式的显示图像500中,第3排的高度高于第1排、第2排的高度。

(步骤S30)信息处理终端1指示用户将脸部朝向显示部100。具体来说,信息处理终端1的控制单元400通过声音处理部60从扬声器64用声音进行指示“请将脸部朝向画面。”。

需要说明的是,如果需要,信息处理终端1可以在指示用户将脸部朝向显示部100时指示用户摘下眼镜或隐形眼镜。

(步骤S40)信息处理终端1的拍摄控制单元320以使拍摄部200进行拍摄的方式进行控制。拍摄部200受到拍摄控制单元320的控制而进行拍摄。在拍摄部200进行拍摄时,拍摄控制单元320设成在显示部100上显示有显示图像500的状态。

关于拍摄时的定时,例如,可以在用户轻敲显示部100时进行拍摄。另外,可以在用户对快门按钮等按钮进行操作时进行拍摄。此外,可以通过显示部100的显示或来自声音处理部60的扬声器64的声音进行倒计时,并在倒计时结束时进行拍摄。在任何情况下,在由拍摄部200进行拍摄时,拍摄控制单元320设成在显示部100上显示有显示图像500的状态。

需要说明的是,关于步骤S20和步骤S30可以将其顺序颠倒。即,首先,信息处理终端1指示用户将脸部朝向显示部100。然后,信息处理终端1的显示控制单元310以使显示部100显示显示图像的方式进行控制。

此时,代替由声音处理部60从扬声器64用声音指示“请将脸部朝向画面。”,可以在显示部100上用文字显示“请将脸部朝向画面。”。另外,可以在显示部100上显示插图、图标等以指示用户将脸部朝向显示部100。可以显示由拍摄部200拍摄的图像。

另外,在将步骤S20和步骤S30的顺序颠倒的情况下,拍摄控制单元320可以将显示控制单元310设成在即将拍摄之前使显示部100显示显示图像500,并在拍摄之后立即使其不显示显示图像500。即,可以使显示部100如摄像头的闪光灯般,仅在拍摄的定时的短时间段(瞬间)对显示图像500进行显示。

(步骤S50)信息处理终端1的显示图像提取单元330进行颜色校正图像提取处理,该颜色校正图像提取处理用于从由拍摄部200拍摄的图像(拍摄图像)中,提取在用户的眼睛中映出的由显示部100显示的图像(显示图像)。在用户的眼睛中映出的由显示部100显示的图像(显示图像)是拍摄到显示图像的被眼睛反射的反射光的图像。关于颜色校正图像提取处理,将在后面的段落中详细说明。

(步骤S60)信息处理终端1的校正系数计算单元340求出由显示图像提取单元330提取的图像的色度值。基于求出的色度值和由显示部100显示的图像(显示图像)的色度值,进行用于对颜色的校正系数进行计算的校正系数计算处理。关于校正系数计算处理,将在后面的段落中详细说明。

(步骤S70)信息处理终端1的颜色校正单元350使用由校正系数计算单元340计算出的校正系数,进行用于对由拍摄部200拍摄的图像的颜色进行校正的颜色校正处理。在本实施方式中,对拍摄图像进行颜色校正。关于颜色校正处理,将在后面的段落中详细说明。

(步骤S80)信息处理终端1的控制单元400对进行了颜色校正处理的图像进行保存。

<<S50:颜色校正图像提取处理>>

对步骤S50的颜色校正图像提取处理进行说明。图5是颜色校正图像提取处理的一个示例的流程图。在颜色校正图像提取处理中,从拍摄图像中,提取显示图像被眼睛反射而映出的部分。颜色校正图像提取处理的提取显示图像被眼睛反射而映出的部分的处理是提取显示图像的反射光的处理的一个示例。

(步骤S110)信息处理终端1的显示图像提取单元330对由拍摄部200拍摄的图像(拍摄图像)进行脸部识别处理,并识别拍摄图像中包含的脸部。关于脸部识别处理,可以应用公知的技术。

(步骤S120)信息处理终端1的显示图像提取单元330从在步骤S110中进行脸部识别而得到的结果中提取脸部的部分。此外,提取脸部的特征点。在本实施方式的显示图像提取单元330中,提取眼睛的所谓的黑眼珠部分(虹膜和瞳孔的部分)作为特征点。

需要说明的是,考虑到信息处理终端1的显示图像提取单元330在提取脸部的特征点时,有时无法提取到眼睛的所谓的黑眼珠部分(虹膜和瞳孔的部分)。例如,考虑到由于进行眨眼等从而在拍摄时闭上眼睛的情况、或者佩戴眼睛或隐形眼镜的情况。在如此无法提取到眼睛的所谓的黑眼珠部分(虹膜和瞳孔的部分)的情况下,可以再次返回到步骤S20,以再次进行拍摄。

(步骤S130)信息处理终端1的显示图像提取单元330从在步骤S120中提取的眼睛的所谓的黑眼珠部分(虹膜和瞳孔的部分)中,提取由显示部100显示的显示图像500被眼睛反射而映出的显示图像505。图9是示出了在右眼的所谓的黑眼珠部分(虹膜和瞳孔的部分)反射的显示图像505。在步骤S130中,提取在该右眼的所谓的黑眼珠部分(虹膜和瞳孔的部分)反射的显示图像505。

需要说明的是,在本实施方式的信息处理终端1中,虽然从眼睛的所谓的黑眼珠部分(虹膜和瞳孔的部分)中提取了显示图像505,但是用于提取显示图像505的部位不限于黑眼珠部分(虹膜和瞳孔的部分)。只要能够提取出颜色,则也可以提取在眼睛的所谓的白眼珠部分反射的显示图像505。

<<S60:校正系数计算处理>>

对步骤S60的校正系数计算处理进行说明。图6是校正系数计算处理的一个示例的流程图。在校正系数计算处理中,计算用于进行颜色校正所需的校正系数。

(步骤S210)信息处理终端1的校正系数计算单元340针对由显示图像提取单元330提取的在眼睛处反射的显示图像505,取得与显示图像500的各颜色对应的部分的RGB值。显示图像500由白色、红色、绿色、蓝色、灰色5种颜色构成。在此,将白色、红色、绿色、蓝色、灰色分别设为颜色1、颜色2、颜色3、颜色4、颜色5。取得与显示图像500的颜色i(i=1,…,5)的部分对应的显示图像505的部分的RGB值(Ri,Gi,Bi)。

需要说明的是,与显示图像500的颜色i的部分对应的显示图像505的部分的RGB值例如可以是与显示图像500的颜色i的部分对应的显示图像505的部分的RGB值的平均值。另外,例如,可以是与显示图像500的颜色i的部分对应的显示图像505的部分的中心的像素的RGB值或中心附近的像素的RGB值的平均值。

(步骤S220)信息处理终端1的校正系数计算单元340根据在步骤S210中取得的与显示图像500的颜色i(i=1,…,5)对应的部分的RGB值(Ri,Gi,Bi)基于数学式1计算颜色i的XYZ值。将根据RGB值(Ri,Gi,Bi)计算出的XYZ值设为(Xi,Yi,Zi)。

[数学式1]

(步骤S230)信息处理终端1的校正系数计算单元340使用在步骤S220中计算出的各颜色的XYZ值(Xi,Yi,Zi),基于数学式2求出xy值(色度值)。将与XYZ值的Xi、Yi、Zi对应的xy值设为xi、yi

[数学式2]

(步骤S240)信息处理终端1的校正系数计算单元340使用在步骤S230中计算出的各颜色的xy值,基于数学式3求出校正系数Δxi、Δyi。需要说明的是,x0i、y0i是显示图像500的颜色i的xy值。

[数学式3]

Δxi=xi-x0i

Δyi=yi-y0i

在本实施方式的信息处理终端1中,作为显示图像500,以纯色来显示红色、绿色、蓝色。即,显示图像500的红色仅为红色分量,即(R,G,B)=(1,0,0)。同样地,显示图像500的绿色仅为绿色分量,即(R,G,B)=(0,1,0),显示图像500的蓝色仅为蓝色分量,即(R,G,B)=(0,0,1)。因此,显示图像500的红色、绿色、蓝色的xy值(x0i,y0i)为纯色的色度值。

<<S70:颜色校正处理>>

对步骤S70的颜色校正处理进行说明。图7是颜色校正处理的一个示例的流程图。颜色校正处理使用在校正系数计算处理中计算出的校正系数来校正图像的颜色。

(步骤S310)信息处理终端1的颜色校正单元350取得用于进行校正的图像。在本实施方式的信息处理终端1中,其是在步骤S30中拍摄的图像。即,其是在求出颜色校正系数时所使用的图像。

(步骤S320)信息处理终端1的颜色校正单元350将用于校正的图像分割为分别以RGB分量进行分割的红色图像、绿色图像、蓝色图像。在此,对红色图像详细进行说明。针对红色图像的各像素,即用于进行校正的图像的各像素的R值,基于数学式1求出Y值(Yr)。将纯色的红的y值设为yr0。将针对显示图像500的红色求出的校正值设为Δxr、Δyr。基于数学式4,求出XYZ值空间中的校正值ΔXr、ΔZr。接着,基于数学式5,求出RGB空间中的各像素的校正值ΔRr、ΔGr、ΔBr。从红色图像的各像素值中减去求出的RGB空间中的各像素的校正值ΔRr、ΔGr、ΔBr。通过以上处理,对红色图像的各像素进行校正。针对绿色图像、蓝色图像也进行同样的处理。然后,通过对校正后的红色图像、蓝色图像、绿色图像进行例如加法运算等来进行组合,从而生成最终的校正图像。

[数学式4]

[数学式5]

需要说明的是,在本实施方式中,虽然在颜色的校正中针对各颜色使用求出的校正系数进行校正,但是也可以例如针对求出的校正系数进行平均等,并对所有的颜色使用相同的校正系数来进行校正。另外,可以仅对一部分颜色进行校正。在本实施方式中,虽然将校正系数Δx、Δy转换为RGB空间的校正值来进行校正,但是也可以针对待校正的图像,将像素值转换到xy空间,并在xy空间中使用校正系数Δx、Δy进行校正。

被眼睛反射的显示图像是来自显示部的光被眼睛的角膜或晶状体反射的图像。因此,强度会根据眼睛的角膜或晶状体的反射率而产生较大的波动。在本实施方式中,通过使用色度值,从而能够在强度的波动上减少影响以进行颜色的校正。

通过本实施方式的信息处理终端1,即使不准备比色图表,也能够使用信息处理终端1进行颜色校正。另外,由于未使用比色图表,因此无需确保用于拍摄比色图表的空间,并且比色图表本身也不会映射到所拍摄的图像中。

需要说明的是,对于颜色校正后的图像,由于在眼睛中映出的显示图像505较小,因此即使原样保持映出显示图像505,通常也没有问题。然而,如果对显示图像505在意,则也可以进行将该显示图像505设为与周围颜色同色的颜色的修改。

<<处理示例>>

对实际进行处理后的结果进行说明。图10是用于对由根据本实施方式的信息处理终端1进行的颜色校正处理的处理示例进行说明的图。

图10是在CIE1976a*b*坐标上绘制纯色(红色(R)、绿色(G)、蓝色(B))、以及校正前(未处理)的颜色和校正后的颜色的图。对于红色(R)、绿色(G)、蓝色(B)3种颜色(纯色),红色用圆形的标记R0绘制,绿色用四边形的标记G0绘制,蓝色用倒三角形的标记B0绘制。需要说明的是,对于各纯色,改变强度多次进行绘制。需要说明的是,离原点越远,则表示各纯色的强度越强。

另外,将根据校正前的RGB值计算出的值用菱形的标记MR、MG、MR绘制,将根据校正后的RGB值计算出的值用三角形的标记CR、CG、CB绘制。

在图10中,在拍摄的图像的RGB值正确的情况下,例如对于红色,将校正前的RGB值的标记MR绘制在红色的纯色的标记R0上或标记R0之间。需要说明的是,在红色的情况下,在a*b*坐标上,在其位于连接红色的纯色的标记R0的线的上侧的情况下表示包含绿色的分量,在其位于该线的下侧的情况下表示包含蓝色的分量。

同样地,例如对于绿色,在拍摄的图像的RGB值正确的情况下,将校正前的RGB值的标记MG绘制在绿色的纯色的标记G0上或标记G0之间。需要说明的是,在绿色的情况下,在a*b*坐标上,在其位于连接绿色的纯色的标记G0的线的上侧的情况下表示包含红色的分量,在其位于该线的下侧的情况下表示包含蓝色的分量。

同样地,例如对于蓝色,在拍摄的图像的RGB值正确的情况下,将校正前的RGB值的标记MB绘制在蓝色的纯色的标记B0上或标记B0之间。需要说明的是,在蓝色的情况下,在a*b*坐标上,在其位于连接蓝色的纯色的标记B0的线的上侧的情况下表示包含红色的分量,在其位于该线的下侧的情况下表示包含绿色的分量。

对图10的校正前的菱形的标记MR、MG、MB进行分析。对于蓝色,标记MB几乎位于连接蓝色的纯色的标记B0的线上。因此,可以认为:关于蓝色,颜色被再现。对于红色,标记MR被绘制在与红色的纯色的标记R0相比的右侧。因此,可以判断为:其略带蓝色。对于绿色,其被绘制在与纯色的标记G0相比的下侧。因此,可以判断为:其略带蓝色。

对图10的校正后的三角形的标记CR、CG、CB进行分析。可以看出:校正后的结果分别几乎被绘制在纯色的标记R0、G0、B0上或标记R0、G0、B0之间。由此可以看出:各颜色均被校正为正确的颜色。

<变形例>

虽然在本实施方式中由信息处理终端1单独地进行处理,但是可以如图11所示,由将信息处理终端1、以及以能够进行数据通信的方式经由网络4与信息处理终端1连接的服务器装置5(信息处理装置)组合而成的信息处理系统来进行处理。例如,其构成可以如下。首先,由信息处理终端1进行图4的步骤S10~S40的处理。接着,将由信息处理终端1的拍摄部200拍摄的图像发送到服务器装置5。由服务器装置5进行步骤S50~S60的处理。将由服务器装置5计算出的校正系数发送到信息处理终端1。最后,由信息处理终端1进行步骤S70~S80的处理。

另外,可以由服务器装置5进行步骤S50~S70的处理,并将颜色校正后的图像发送到信息处理终端1。在此情况下,不限于发送到进行了拍摄的信息处理终端1,也可以发送到另外的信息处理终端或服务器装置。

在显示部100上显示的显示图像不限于显示图像500。例如,可以对显示图像500的颜色的布置进行替换。例如。可以在显示图像500的第1排布置绿色和蓝色,在第2排布置白色和红色,在第3排布置灰色。需要说明的是,如上所述,在本实施方式的显示图像500中,由于第3排的高度高于第1排、第2排的高度,因此希望在第3排布置灰色,但是也可以布置其他颜色。

显示图像的颜色的数量不限于如图8所示的显示图像500的5种颜色。显示图像包含1种颜色以上的颜色即可。

如图12A、图12B、图12C、图12D所示,可以对颜色的排列本身进行变更。例如,如图12A的显示图像510所示,可以1次仅显示1种颜色,例如,可以依次显示并拍摄白色(W)、灰色(GY)、…的显示图像510并对其进行重复。在此情况下,可以针对各个显示图像510求出校正系数,并针对拍摄的图像中的任意一者或全部进行颜色校正。

另外,可以利用摄像头的连拍功能进行依次对各个颜色的显示图像510进行显示和拍摄的处理。可以对显示的颜色的顺序适当地进行变更。

如图12B的显示图像520所示,可以在1排显示1种颜色。需要说明的是,颜色的布置不限于图12B所示的示例而是可以进行变更。

如图12C的显示图像530所示,可以以多个色阶来显示1种颜色。例如,可以以第1排为浅灰色(GY1),第2排为比第1排深的灰色(GY2),第3排为更深的灰色(GY3)的方式改变非彩色的颜色的色阶来进行显示。需要说明的是,关于颜色,不限于如图12C的示例所示的诸如灰色(GY)的非彩色,而是可以变更为其他的颜色。

如图12D的显示图像540所示,可以并非将颜色的区域显示在显示部100的横向上的所有部分,而是在中间表示为椭圆形状。需要说明的是,关于形状,不限于椭圆,也可以是多边形。另外,背景的颜色可以是灰色(GY),也可以是白色(W)。另外,可以不显示颜色,即,其可以是黑色。

需要说明的是,关于颜色,不限于白色、红色、绿色、蓝色、灰色,也可以使用青色、品红色、黄色等。另外,可以在颜色的组合中包含青色、品红色、黄色等。

通过使用非彩色的图像作为显示图像,从而能够对白平衡进行调整。通过使用红色、绿色、蓝色等纯色的图像作为显示图像,从而能够对各颜色分别进行校正。因此,希望对非彩色和各颜色进行组合。关于组合,可以在相同的显示图像中具备所有的颜色,也可以依次进行显示。例如,可以先显示白色(非彩色)以对白平衡进行调整,再显示红色等纯色以计算各个颜色的校正系数。

作为信息处理终端1,只要是在显示画面侧具备摄像头,即,所谓的内置摄像头便可以应用。例如,可以应用附带内置摄像头的手机、附带内置摄像头的便携式个人计算机(所谓的笔记本式个人计算机或台式计算机)、或平板式计算机。需要说明的是,关于摄像头,可以是外置的摄像头,只要其能够对显示画面侧进行拍摄即可。

在市售的智能手机中,显示部的颜色有时与纯色不同。在此情况下,在本实施方式中计算校正系数时,可以在后处理中根据智能手机的型号信息等对由显示部的显色带来的影响进行校正。

虽然在本实施方式的信息处理终端1中,使用静止图像进行校正,但是也可以使用视频来进行校正。例如,当用户对快门按钮等按钮进行操作时,可以在其前后的时间拍摄视频。

虽然在本实施方式的信息处理终端1中,使用拍摄图像进行校正系数的计算和用于进行该拍摄图像的颜色校正的处理,但是也可以使用计算出的校正系数对除了拍摄图像以外的图像进行颜色校正。

虽然在本实施方式的信息处理终端1中,使用被眼睛反射的显示图像,但是只要能够对反射的显示图像进行拍摄,则显示图像被反射的场所不限于眼睛。例如,可以使用被镜子或眼镜等反射的图像。

虽然在本实施方式的信息处理终端1中,使用被用户(人)的眼睛反射的显示图像,但是也可以使用在动物(例如,狗或猫)的眼睛处反射的显示图像。

以上对实施方式进行了详细说明,然而上述实施方式在各方面均为示例性的,而非限定于上述实施方式。在权利要求书所记载的本发明的实施方式的要旨的范围内,可以对上述实施方式进行各种变形、改变。

本申请以2019年2月14日向日本专利局提交的作为基础申请的日本发明专利申请第2019-024573号作为要求优先权的基础,本申请在此援引其全部内容。

符号说明

1 信息处理终端

100 显示部

200 拍摄部

310 显示控制单元

320 拍摄控制单元

330 显示图像提取单元

340 校正系数计算单元

350 颜色校正单元

28页详细技术资料下载
上一篇:一种医用注射器针头装配设备
下一篇:基于亮度映射与色度缩放的视频或图像编译

网友询问留言

已有0条留言

还没有人留言评论。精彩留言会获得点赞!

精彩留言,会给你点赞!