显示控制装置、摄像装置、显示控制方法及显示控制程序

文档序号:54711 发布日期:2021-09-28 浏览:17次 >En<

阅读说明:本技术 显示控制装置、摄像装置、显示控制方法及显示控制程序 (Display control device, imaging device, display control method, and display control program ) 是由 高桥宏辅 河口武弘 于 2020-02-13 设计创作,主要内容包括:本发明提供一种能够高效地进行用于减少动态图像模糊的特定图像的插入来实现提高显示画质和减少耗电的显示控制装置、摄像装置、显示控制方法及显示控制程序。在从将动态图像数据的第一帧显示于显示部(23)之后到显示该动态图像数据的第一帧之后的第二帧为止的期间,系统控制部(11)进行将动态图像模糊减少用的特定图像显示于显示部(23)的插入控制,并根据该动态图像数据中所包含的运动物体的移动量和显示于显示部(23)的该动态图像数据的(1)像素的观察角度来确定是否执行该插入控制。(The invention provides a display control device, an imaging device, a display control method, and a display control program, which can efficiently insert a specific image for reducing motion blur to improve display quality and reduce power consumption. During a period from display of a first frame of moving image data on a display unit (23) to display of a second frame of the moving image data after the first frame, a system control unit (11) performs insertion control for displaying a specific image for reducing moving image blur on the display unit (23), and determines whether or not to execute the insertion control based on the amount of movement of a moving object included in the moving image data and the observation angle of (1) pixel of the moving image data displayed on the display unit (23).)

显示控制装置、摄像装置、显示控制方法及显示控制程序

技术领域

本发明涉及一种显示控制装置、摄像装置、显示控制方法及显示控制程序。

背景技术

作为减少在显示装置中追踪观察显示图像中所包含的运动物体时产生的动态图像模糊的方法,有在动态图像的帧之间显示黑色图像的黑色插入处理。例如有通过间歇地点亮背光而不是始终点亮背光来在动态图像的帧之间显示黑色图像的方法。通过进行黑色插入处理,能够使如液晶显示装置那样的保持(Hold)型显示器的显示特性接近冲击(Impulse)型显示器的显示特性,能够减少动态图像模糊。专利文献1、2、3公开了黑色插入技术。

以往技术文献

专利文献

专利文献1:日本特开2014-035525号公报

专利文献2:日本特开2014-032412号公报

专利文献3:WO2008/102828号公报

发明内容

发明要解决的技术课题

在黑色插入处理中,黑色图像的插入频度越高,越能够提高动态图像模糊的减少效果。但是,当帧之间的运动物体的移动量为显示装置的显示分辨率以下时,无法得到动态图像模糊的减少效果,仅具有电力增大或显示亮度降低等缺点。在专利文献1、2、3中记载有考虑运动物体的移动而进行黑色插入处理,但没有考虑到显示分辨率。

本发明是鉴于上述情况而完成的,其目的在于提供一种能够高效地进行用于减少动态图像模糊的特定图像的插入来实现提高显示画质和减少耗电的显示控制装置、摄像装置、显示控制方法及显示控制程序。

用于解决技术课题的手段

本发明的显示控制装置为进行动态图像数据的显示控制的显示控制装置,其具备:特定图像插入控制部,在从将上述动态图像数据的第一帧显示于显示部之后到显示上述动态图像数据的上述第一帧之后的第二帧为止的期间,进行将与上述动态图像数据不同的特定图像显示于上述显示部的插入控制;及插入执行控制部,根据上述动态图像数据中所包含的运动物体的移动量和显示于上述显示部的上述动态图像数据的一个像素的观察角度来确定是否执行上述插入控制。

本发明的摄像装置具备上述显示控制装置、上述显示部及摄像元件,上述动态图像数据为由上述摄像元件拍摄的被摄体的即时预览图像。

本发明的显示控制方法为动态图像数据的显示控制方法,其具备:特定图像插入控制步骤,在从将上述动态图像数据的第一帧显示于显示部之后到显示上述动态图像数据的上述第一帧之后的第二帧为止的期间,进行将与上述动态图像数据不同的特定图像显示于上述显示部的插入控制;及插入执行控制步骤,根据上述动态图像数据中所包含的运动物体的移动量和显示于上述显示部的上述动态图像数据的一个像素的观察角度来确定是否执行上述插入控制。

本发明的显示控制程序用于使计算机执行包括以下的处理:根据上述动态图像数据中所包含的运动物体的移动量和显示于上述显示部的所述动态图像数据的一个像素的观察角度,来确定在从将动态图像数据的第一帧显示于显示部之后到显示上述动态图像数据的上述第一帧之后的第二帧为止的期间是否进行将与上述动态图像数据不同的特定图像显示于上述显示部的插入控制。

发明效果

根据本发明,可提供一种能够高效地进行用于减少动态图像模糊的特定图像的插入来实现提高显示画质和减少耗电的显示控制装置、摄像装置、显示控制方法及显示控制程序。

附图说明

图1是表示作为本发明的摄像装置的一实施方式的数码相机100的概略结构的图。

图2是图1所示的数码相机100的系统控制部11的功能块图。

图3是用于说明观察角度的示意图。

图4是用于说明动态图像数据中所包含的运动物体的移动量的示意图。

图5是用于说明由系统控制部11进行的即时预览显示控制或记录动态图像再生控制时的动作的流程图。

图6是用于说明图1所示的系统控制部11的动作的第一变形例的流程图。

图7是用于说明图1所示的系统控制部11的动作的第二变形例的流程图。

图8是表示图2所示的系统控制部11的功能块的变形例的图。

图9是表示作为本发明的摄影装置的一实施方式的智能手机200的外观的图。

图10是表示图9所示的智能手机200的结构的块图。

具体实施方式

以下,参考附图对本发明的实施方式进行说明。

图1是表示作为本发明的摄像装置的一实施方式的数码相机100的概略结构的图。

图1所示的数码相机100具备透镜装置40,该透镜装置40具有摄像透镜1、光圈2、透镜控制部4、透镜驱动部8及光圈驱动部9。

透镜装置40可以可装卸于数码相机100的主体,也可以与数码相机100的主体成为一体。

摄像透镜1和光圈2构成摄像光学系统,摄像透镜1包括能够沿光轴方向移动的聚焦透镜或变焦透镜等。

聚焦透镜为用于调节摄像光学系统的焦点的透镜,由单一透镜或多个透镜构成。通过聚焦透镜沿光轴方向移动,聚焦透镜的主点的位置沿着光轴方向变化而进行被摄体侧的焦点位置的变更。另外,作为聚焦透镜,也可以使用能够通过电控制变更光轴方向的主点的位置来调节焦点的液体透镜。

透镜装置40的透镜控制部4构成为能够以有线或无线方式与数码相机100的系统控制部11进行通信。

透镜控制部4按照来自系统控制部11的指令,通过透镜驱动部8控制摄像透镜1中所包含的聚焦透镜来变更聚焦透镜的主点的位置(变更焦距),或者通过光圈驱动部9控制光圈2的开口量。

数码相机100还具备通过摄像光学系统拍摄被摄体的CCD(Charge Couple dDevice:电荷耦合元件)图像传感器或CMOS(Complementary Metal Oxide Semiconductor:互补型金属氧化物半导体)图像传感器等摄像元件5。

摄像元件5具有以二维状配置有多个像素的摄像面,将通过摄像光学系统成像于该摄像面的被摄体图像利用该多个像素转换为像素信号并进行输出。以下,将从摄像元件5的各像素输出的像素信号的集合也称为摄像图像信号。

集中控制数码相机100的电控系统整体的系统控制部11通过摄像元件驱动部10驱动摄像元件5,并输出通过透镜装置40的摄像光学系统拍摄的被摄体图像作为摄像图像信号。

若数码相机100被设定为拍摄模式,则系统控制部11进行通过摄像元件5开始被摄体的连续拍摄并将即时预览图像显示于显示部23的即时预览显示控制,该即时预览图像基于由通过该连续拍摄从摄像元件5输出的多个摄像图像信号构成的动态图像数据。并且,系统控制部11进行读取存储于存储介质21中的动态图像数据并将基于该动态图像数据的动态图像显示于显示部23的记录动态图像再生控制。

来自利用者的指示信号通过操作部14输入到系统控制部11。系统控制部11集中控制数码相机100整体,硬件结构为执行程序来进行处理的各种处理器。

作为各种处理器,包括执行程序来进行各种处理的通用的处理器即CPU(CentralProsessing Unit:中央处理器)、FPGA(Field Programmable Gate Array:现场可编程阵列)等在制造后能够变更电路结构的处理器即可编程逻辑器件(Programmable LogicDevice:PLD)、或ASIC(Application Specif ic Integrated Circuit:专用集成电路)等具有为了执行特定的处理而专门设计的电路结构的处理器即专用电路等。更具体而言,这些各种处理器的结构为将半导体元件等电路元件组合而成的电路。系统控制部11可以由各种处理器中的一个构成,也可以由相同种类或不同种类的两个以上的处理器的组合(例如,多个FPGA的组合或CPU与FPGA的组合)构成。

另外,该数码相机100的电控系统具备:由RAM(Random Accsess Memor y:随机存取存储器)构成的主存储器16、进行向主存储器16的数据存储及从主存储器16的数据读取的控制的存储器控制部15、对从摄像元件5输出的摄像图像信号进行数字信号处理而生成按照JPEG(Joint Photographic Experts Group)格式等各种格式的摄像图像数据的数字信号处理部17、进行向存储介质21的数据存储及从存储介质21的数据读取的控制的外部存储器控制部20及显示部23。

显示部23例如由液晶显示装置或有机EL(electro-luminescence:电致发光)显示装置等构成。显示部23包括设置于在数码相机100的主体中与透镜装置40侧相反的背面的外部显示装置及内置于省略图示的目镜取景器中的内部显示装置中的一个或两个。

存储介质21为内置于数码相机100中的闪存等半导体存储器或可装卸于数码相机100的移动式半导体存储器等。

存储器控制部15、数字信号处理部17、外部存储器控制部20及显示部23通过控制总线24及数据总线25相互连接,并根据来自系统控制部11的指令受到控制。

图2是图1所示的数码相机100的系统控制部11的功能块图。

系统控制部11通过执行包括显示控制程序的程序而作为特定图像插入控制部11A、插入执行控制部11B及视场角信息获取部11C发挥作用。本说明书中的系统控制部11构成显示控制装置。

在上述即时预览显示控制或记录动态图像再生控制时,在从将成为显示对象的动态图像数据的第一帧显示于显示部23之后到显示该第一帧之后的第二帧为止的期间(以下,将该期间的长度称为一帧时间),特定图像插入控制部11A进行将与显示对象的动态图像数据不同的动态图像模糊减少用的特定图像显示于显示部23的插入控制。

动态图像模糊减少用的特定图像是用于减少人追踪观察运动物体时产生的动态图像模糊的图像,具体而言为黑色图像。作为特定图像,只要是作为显示对象的第一帧以外的图像且不留下该第一帧的残像的程度的亮度的图像即可,除了黑色图像以外,例如也能够采用白色图像、灰色图像、随机噪声图像等。黑色图像的显示例如通过熄灭显示部23的背光等来实现。

插入执行控制部11B根据显示对象的动态图像数据中所包含的运动物体的移动量L和显示对象的动态图像数据的一个像素的观察角度H来确定是否执行上述插入控制。另外,动态图像数据中所包含的运动物体的移动量L中包含作为水平方向的移动分量的移动量L1和作为垂直方向的移动分量的移动量L2。

图3是用于说明观察角度的示意图。图4是用于说明动态图像数据中所包含的运动物体的移动量的示意图。

在图3中示出显示于显示部23的动态图像数据的一个帧23a。若以帧23a的分辨率与显示部23的最大显示分辨率一致为前提,则观察角度H由连接显示部23的各显示像素(或构成帧23a的各像素23p)的水平方向或垂直方向的两端与观察者的眼睛的两条直线所成的角度来定义。例如,观察角度H通过观察者对显示部23的水平视场角(被定义为连接观察者的眼睛与显示部23的显示面的水平方向的两端的线的角度)除以显示部23的水平显示像素数而得到。

另外,观察者对显示部23的视场角可能根据显示部23为第一显示装置和第二显示装置中的哪一个而发生变化。为了对应该使用方式的变化,主存储器16中预先存储有使用第一显示装置的情况的观察者的视场角的信息和使用第二显示装置的情况的观察者的视场角的信息。

在图4中示出显示于显示部23的动态图像数据的一个帧23a和其下一个帧23b。帧23a和帧23b中包含运动物体M。运动物体M的水平方向的移动量L1被定义为观察运动物体M的观察者的一帧期间的视线的水平方向的移动角度。在图4的例子中,运动物体M在两个帧23a、23b之间沿水平方向移动了两个像素。因此,在图4的例子中,移动量L1被计算为观察角度H的2倍的值。

并且,运动物体M的垂直方向的移动量L2被定义为观察运动物体M的观察者的一帧期间的视线的垂直方向的移动角度。在图4的例子中,运动物体M在两个帧23a、23b之间沿垂直方向移动了一个像素。因此,在图4的例子中,移动量L2被计算为观察角度H的1倍的值。

另外,若按照上述定义,则移动量L1、L2的上限值成为将观察角度H设为显示部23的水平或垂直方向的显示像素数倍的值。但是,当运动物体的移动量超出在每一帧时间内人能够追踪观察运动物体的极限值即追踪视觉极限移动量时,人无法识别超出该追踪视觉极限移动量而移动的运动物体的移动。因此,能够设定的移动量L1、L2的上限值优选设为追踪视觉极限移动量。

视场角信息获取部11C从主存储器16获取观察者对显示部23的视场角的信息。插入执行控制部11B根据该信息设定观察角度H,并根据所设定的观察角度H和另外设定的移动量L1、L2来确定由特定图像插入控制部11A进行的插入控制的执行可否。

图5是用于说明由系统控制部11进行的即时预览显示控制或记录动态图像再生控制时的动作的流程图。若生成显示对象的动态图像数据的一帧(以下,称为当前帧),则首先,视场角信息获取部11C判断正在使用第一显示装置和第二显示装置中的哪一个,并对应于所使用的显示装置而获取存储于主存储器16中的观察者的视场角的信息(步骤S1)。

例如,若为观察者的眼睛与省略图示的目镜窗接触的状况,则视场角信息获取部11C判断为正在使用第二显示装置,若为观察者的眼睛未与目镜窗接触的状况,则判断为正在使用第一显示装置。

接着,插入执行控制部11B根据在步骤S1中所获取的视场角的信息来设定观察角度H(步骤S2)。插入执行控制部11B例如根据在步骤S1中所获取的视场角的信息和显示部23的最大显示分辨率的信息,通过运算计算观察角度H,并进行设定。也可以将视场角的信息和观察角度H以建立对应关系的方式预先存储于主存储器16中,插入执行控制部11B从主存储器16中读取与在步骤S1中所获取的视场角的信息相对应的观察角度H,并进行设定。

接着,插入执行控制部11B获取当前帧中所包含的运动物体的移动量,并进行设定(步骤S3)。插入执行控制部11B例如对显示对象的动态图像数据进行运动物体检测处理,通过将所检测出的运动物体的水平方向的移动像素数乘以观察角度H来计算运动物体的水平方向的移动量L1,并通过将所检测出的运动物体的垂直方向的移动像素数乘以观察角度H来计算运动物体的垂直方向的移动量L2,并将它们进行设定。

另外,在只能获取一帧或几帧作为动态图像数据的帧的初期的时间点,无法进行运动物体检测处理。因此,在该初期的时间点,插入执行控制部11B从主存储器16获取上述追踪视觉极限移动量作为移动量L1、L2,并进行设定即可。

接着,插入执行控制部11B获取当前帧的曝光时间的信息,并判定该曝光时间是否为基于显示对象的动态图像数据的帧速率的上述一帧时间(1秒钟除以在该1秒钟内显示的帧数的值)以上(步骤S4)。

当曝光时间为一帧时间以上时,设想动态图像数据的抖动变大,因此基于进行插入控制的模糊减少效果减弱的可能性高。因此,当曝光时间为一帧时间以上时(步骤S4:是),插入执行控制部11B确定不执行特定图像的插入控制(步骤S5)。其结果,成为未进行基于特定图像插入控制部11A的插入控制的状态(在一帧时间内显示当前帧的状态)。

另一方面,当曝光时间小于一帧时间时,根据运动物体的移动量,能够期待基于进行插入控制的模糊减少效果。因此,当曝光时间小于一帧时间时(步骤S4:否),插入执行控制部11B判定移动量L1和移动量L2各自是否为观察角度H以下(步骤S6)。

在移动量L1和移动量L2各自为观察角度H以下的状态下,原理上无法得到基于进行插入控制的动态图像模糊的减少效果。因此,当移动量L1和移动量L2分别为观察角度H以下时(步骤S6:是),插入执行控制部11B将处理转移到步骤S5。

另一方面,在移动量L1和移动量L2中的任一个超出观察角度H的状态下,能够通过进行插入控制来减少动态图像模糊。因此,当移动量L1和移动量L2中的任一个超出观察角度H时(步骤S6:否),插入执行控制部11B确定执行插入控制(步骤S7)。

若在步骤S7中确定进行插入控制,则特定图像插入控制部11A选择在步骤S3中所设定的移动量L1、L2中的较大的一个(若移动量L1、L2为相同的值,则为其中任意一个)。然后,当选择了移动量L1时,特定图像插入控制部11A根据在步骤S2中所设定的观察角度H和移动量L1,通过下述式(A)的运算来确定当前帧的显示时间FT中的特定图像的显示时间BT,当选择了移动量L2时,根据在步骤S2中所设定的观察角度H和移动量L2,通过下述式(B)的运算来确定当前帧的显示时间FT中的特定图像的显示时间BT(步骤S8)。

BT=FT×{1-(H/L1)} (A)

BT=FT×{1-(H/L2)} (B)

在步骤S8中确定显示时间BT之后,特定图像插入控制部11A在从开始当前帧的显示之后经过(FT-BT)的时间后,进行代替当前帧而将特定图像在显示部23显示时间BT的控制(步骤S9)。由此,在应显示当前帧的一帧期间中,显示时间BT的时间显示特定图像,剩余时间则显示当前帧。在步骤S5和步骤S9之后,若生成当前帧的下一个帧,则处理返回到步骤S1。

如上所述,根据数码相机100,仅在移动量L1和移动量L2中的任一个超出观察角度H的情况下,能够进行特定图像的插入控制。换言之,在无法期待动态图像模糊减少效果的状况下,不执行插入控制。因此,若与始终进行插入控制的情况相比,不需要执行进行插入控制的情况的显示图像的亮度提高处理的期间增加,因此能够减少耗电。

另外,在图5中,步骤S4的处理并不是必须的,也可以为在步骤S3的处理之后转移到步骤S6的动作。即使为该动作,也可根据运动物体的移动量L1、L2与观察角度H的关系来确定是否执行插入控制。因此,能够兼顾减少动态图像模糊和低耗电。

本方式中的视场角信息获取部11C也可以在使用第一显示装置作为显示部23的状态下,利用设置于数码相机100的主体背面的距离传感器等来计算显示部23与观察者的面部的距离,并根据该距离计算观察者对显示部23的视场角来获取视场角的信息。在该结构中,视场角信息获取部11C构成视场角计算部。根据该结构,能够使在使用第一显示装置的状态下的观察者的视场角接近准确的值,因此能够使插入控制的执行频度更加最佳。

图6是用于说明图1所示的系统控制部11的动作的第一变形例的流程图。图6所示的流程图除了在步骤S3与步骤S4之间追加有步骤S11这点以外,与图5相同。在图6中,对与图5相同的处理标注相同符号,并省略说明。

在步骤S3之后,插入执行控制部11B根据显示对象的动态图像数据的分辨率和显示部23的最大显示分辨率来校正在步骤S2及步骤S3中所设定的观察角度H和移动量L1、L2(步骤S11)。

例如,设想动态图像数据的分辨率为显示部23的最大显示分辨率的1/4的情况。在该情况下,动态图像数据的各帧的尺寸被放大2倍而显示于显示部23。即,动态图像数据的一个像素被显示为显示部23的4个显示像素。在该情况下,观察者观察动态图像数据的一个像素时的观察角度H成为在步骤S2中所设定的观察角度H的2倍。并且,作为观察者追踪动态图像数据中所包含的运动物体时的视线的移动角度的移动量L1、L2成为在步骤S3中所设定的移动量L1、L2的2倍。

具体而言,在步骤S11中,插入执行控制部11B将显示部23的最大显示分辨率除以动态图像数据的分辨率的值的1/2的值作为校正系数,分别对在步骤S2及步骤S3中所设定的观察角度H、移动量L1及移动量L2乘上该校正系数而对它们进行校正。在步骤S11之后进行的步骤S6或步骤S9中,根据校正后的观察角度H、移动量L1及移动量L2进行处理。

如此,根据动态图像数据的分辨率和显示部23的最大显示分辨率来校正观察角度H、移动量L1及移动量L2,由此能够不依赖于动态图像数据的分辨率而执行高效的插入控制。

图7是用于说明图1所示的系统控制部11的动作的第二变形例的流程图。图7所示的流程图除了在步骤S1之前追加有步骤S21和步骤S22这点以外,与图5相同。在图7中,对与图5相同的处理标注相同符号,并省略说明。

若生成当前帧,则插入执行控制部11B获取该当前帧的对焦评价值(步骤S21)。插入执行控制部11B例如计算当前帧的对比度值,将其作为对焦评价值进行获取。或者,若摄像元件5包含相位差检测用像素,则插入执行控制部11B使用作为当前帧的生成源的摄像图像信号中所包含的相位差检测用像素的信号来运算散焦量,并将该散焦量作为对焦评价值进行获取。

接着,插入执行控制部11B判定对焦评价值是否为预先规定的阈值以下(步骤S22)。当对焦评价值为阈值以下时(步骤S22:是),处理转移到步骤S5。另一方面,当对焦评价值超出阈值时(步骤S22:否),处理转移到步骤S1。

如上所述,在当前帧的对焦评价值成为阈值以下的情况下,确定不执行特定图像的插入控制,而进行在一帧时间内显示当前帧的通常的控制。对焦评价值低的帧表示模糊部分多的图像。因此,在这种情况下,难以得到基于进行插入控制的动态图像模糊减少效果。因此,在这种情况下,省略步骤S1至步骤S4、步骤S6至步骤S9的处理,由此能够降低执行插入控制的可能性来减少耗电。并且,由于不进行步骤S1至步骤S4、步骤S6至步骤S9的处理,因此能够减小系统控制部11的负荷。

图8是表示图2所示的系统控制部11的功能块的变形例的图。图8所示的系统控制部11的功能块除了追加有测定部11D这点以外,与图2相同。测定部11D通过由处理器执行上述显示控制程序来实现。

测定部11D测定显示部23的观察者的上述追踪视觉极限移动量。例如,测定部11D将规定的图案(例如,将3根线隔开间隔配置而成的图案)显示于显示部23,并使该图案以多个阶段的速度(每一帧时间的移动像素数)移动。并且,使用户输入以各速度移动的图案中所包含的3根线能否以不重叠的状态识别,并判定3根线能够以不重叠的状态识别的速度中的最大值。然后,将该最大值的移动量转换为观察者的视线的移动角度,并存储该移动角度作为追踪视觉极限移动量的测定结果。

在图8所示的变形例中,在开始生成动态图像数据的帧的初期的时间点被设定为移动量L1、L2的追踪视觉极限移动量被替换为由测定部11D测定出的追踪视觉极限移动量。并且,被设定为移动量L1、L2的上限值的追踪视觉极限移动量被替换为由测定部11D测定出的追踪视觉极限移动量。

根据该变形例的结构,能够根据观察者的追踪观察能力将追踪视觉极限移动量最佳化,因此能够判断与观察者相对应的插入控制的执行可否。

另外,到此为止,在数码相机100中的即时预览显示控制时或记录动态图像再生控制时进行图5至图8的动作。但是,例如只要为进行用电视再生记录在记录介质中的动态图像数据的情况等,用具有显示部的电子设备进行动态图像数据的再生的情况,则同样能够适用图5至图8的动作。另外,为了用数码相机以外的设备实现图7的动作,只要使对焦评价值的信息对应于记录在记录介质中的动态图像数据的各帧而记录即可。

接着,作为本发明的摄像装置的实施方式,对智能手机的结构进行说明。

图9是表示作为本发明的摄影装置的一实施方式的智能手机200的外观的图。

图9所示的智能手机200具有平板状的壳体201,在壳体201的一个面上具备作为显示部的显示面板202与作为输入部的操作面板203成为一体的显示输入部204。

并且,这种壳体201具备扬声器205、麦克风206、操作部207及相机部208。另外,壳体201的结构并不限定于此,例如也能够采用显示部与输入部独立的结构,或具有折叠结构或滑动机构的结构。

图10是表示图9所示的智能手机200的结构的块图。

如图10所示,作为智能手机主要构成要件,具备无线通信部210、显示输入部204、通话部211、操作部207、相机部208、存储部212、外部输入输出部213、GPS(GlobalPositioning System:全球定位系统)接收部214、动作传感器部215、电源部216及主控制部220。

并且,作为智能手机200的主要功能,具备经由省略图示的移动通信网NW与省略图示的基站装置BS进行移动无线通信的无线通信功能。

无线通信部210按照主控制部220的指示与容纳于移动通信网NW中的基站装置BS进行无线通信。使用该无线通信进行音频数据、图像数据等各种文件数据、电子邮件数据等的收发、网络数据或流数据等的接收。

显示输入部204为通过主控制部220的控制显示图像(静止图像及动态图像)或字符信息等而将信息视觉地传递给用户,并且检测对所显示的信息的用户操作的所谓的触摸面板,其具备显示面板202和操作面板203。

显示面板202将LCD(Liquid Crystal Display:液晶显示器)、OELD(OrganicElectro-Luminescence Display:有机电致发光显示器)等用作显示器件。

操作面板203为载置成能够视觉辨认显示于显示面板202的显示面上的图像,并检测利用用户的手指或笔尖来操作的一个或多个坐标的器件。若利用用户的手指或笔尖操作该器件,则将因操作而产生的检测信号输出到主控制部220。接着,主控制部220根据所接收到的检测信号来检测显示面板202上的操作位置(坐标)。

如图10所示,作为本发明的摄影装置的一实施方式而例示出的智能手机200的显示面板202与操作面板203成为一体而构成显示输入部204,但操作面板203成为完全覆盖显示面板202的配置。

当采用该配置时,操作面板203也可以具备对显示面板202以外的区域也检测用户操作的功能。换言之,操作面板203也可以具备关于与显示面板202重合的重叠部分的检测区域(以下,称为显示区域)和关于除此以外的不与显示面板202重合的外缘部分的检测区域(以下,称为非显示区域)。

另外,也可以使显示区域的大小与显示面板202的大小完全一致,但未必一定要使两者一致。并且,操作面板203也可以具备外缘部分和除此以外的内侧部分这两个感应区域。另外,外缘部分的宽度是根据壳体201的大小等适当设计的。

并且,作为在操作面板203中采用的位置检测方式,可以举出矩阵开关方式、电阻膜方式、表面声波方式、红外线方式、电磁感应方式、静电电容方式等,能够采用任意一种方式。

通话部211具备扬声器205或麦克风206,将通过麦克风206输入的用户的声音转换为能够由主控制部220处理的音频数据并输出到主控制部220,或者对由无线通信部210或外部输入输出部213接收到的音频数据进行解码并从扬声器205输出。

并且,如图9所示,例如能够将扬声器205搭载于与设置有显示输入部204的面相同的面,将麦克风206搭载于壳体201的侧面。

操作部207为使用了键开关等的硬件键,其接收来自用户的指示。例如,如图9所示,操作部207为按钮式的开关,其搭载于智能手机200的壳体201的侧面,在被手指等按下时接通,在手指离开时通过弹簧等的复原力成为断开状态。

存储部212存储主控制部220的控制程序及控制数据、应用软件、将通信对方的名称或电话号码等建立了对应关系的地址数据、收发的电子邮件的数据、通过Web(网络)浏览下载的Web(网络)数据、下载的内容(content s)数据,并且临时存储流数据等。并且,存储部212由智能手机内置的内部存储部217和具有装卸自如的外部存储器插槽的外部存储部218构成。

另外,构成存储部212的各个内部存储部217和外部存储部218使用闪存类型(flash memory type)、硬盘类型(hard disk type)、多型媒体微卡类型(multimedia cardmicro type)、卡类型的存储器(例如,MicroSD(注册商标)存储器等)、RAM(Random AccessMemory:随机存取存储器)、ROM(Read Only Memory:只读存储器)等存储介质来实现。

外部输入输出部213发挥与连结于智能手机200的所有外部设备的接口的作用,用于通过通信等(例如,通用串行总线(USB)、IEEE1394等)或网络(例如,互联网、无线LAN、蓝牙(Bluetooth)(注册商标)、RFID(Radio Frequency Identification:射频识别)、红外线通信(Infrared Data Asso ciation(红外线数据协会):IrDA)(注册商标)、UWB(UltraWideband:超宽带)(注册商标)、紫峰(ZigBee)(注册商标)等)直接地或间接地连接于其他外部设备。

作为连结于智能手机200的外部设备,例如有有/无线头戴式耳机、有/无线外部充电器、有/无线数据端口、经由卡插槽连接的存储卡(Memory car d)、SIM(SubscriberIdentity Module Card:用户识别模块卡)/UIM(Use r Identity Module Card:用户识别模块卡)卡、经由音频/视频I/O(Input/Output:输入/输出)端子连接的外部音频/视频设备、无线连接的外部音频/视频设备、有/无线连接的智能手机、有/无线连接的个人电脑、有/无线连接的个人电脑、耳机等。

外部输入输出部213能够将从这种外部设备接受传送的数据传递到智能手机200的内部的各构成要件,或者将智能手机200的内部的数据传送到外部设备。

GPS接收部214按照主控制部220的指示接收从GPS卫星ST1~STn发送的GPS信号,并执行基于所接收到的多个GPS信号的测位运算处理,检测由智能手机200的纬度、经度、高度构成的位置。GPS接收部214在能够从无线通信部210或外部输入输出部213(例如,无线LAN)获取位置信息时,也能够使用该位置信息来检测位置。

动作传感器部215例如具备3轴的加速度传感器等,按照主控制部220的指示来检测智能手机200的物理移动。通过检测智能手机200的物理移动,检测智能手机200的移动方向或加速度。该检测结果输出到主控制部220。

电源部216按照主控制部220的指示向智能手机200的各部供给积蓄在电池(未图示)中的电力。

主控制部220具备微处理器,按照存储部212所存储的控制程序及控制数据进行动作,并集中控制智能手机200的各部。并且,主控制部220为了通过无线通信部210进行语音通信或数据通信而具备控制通信系统的各部的移动通信控制功能和应用处理功能。

应用处理功能通过由主控制部220按照存储部212所存储的应用软件进行动作来实现。作为应用处理功能,例如有控制外部输入输出部213并与对置设备进行数据通信的红外线通信功能、进行电子邮件的收发的电子邮件功能或阅览网页的网络浏览功能等。

并且,主控制部220具备根据接收数据或下载的流数据等图像数据(静止图像或动态图像的数据)将影像显示于显示输入部204等图像处理功能。

图像处理功能是指由主控制部220对上述图像数据进行解码,并对该解码结果实施图像处理,并且将图像显示于显示输入部204的功能。

另外,主控制部220执行对显示面板202的显示控制和检测通过操作部207、操作面板203的用户操作的操作检测控制。

通过执行显示控制,主控制部220显示用于启动应用软件的图标或滚动条等软件键,或者显示用于制作电子邮件的窗口。

另外,滚动条是指用于关于无法完全收纳在显示面板202的显示区域中的较大图像等,接收使图像的显示部分移动的指示的软件键。

并且,通过执行操作检测控制,主控制部220检测通过操作部207的用户操作,或者通过操作面板203接收对上述图标的操作和对上述窗口的输入栏的字符串的输入,或者接收通过滚动条的显示图像的滚动请求。

另外,通过执行操作检测控制,主控制部220具有如下触摸面板控制功能:判定对操作面板203的操作位置为与显示面板202重合的重叠部分(显示区域),还是除此以外的不与显示面板202重合的外缘部分(非显示区域),并控制操作面板203的感应区域或软件键的显示位置。

并且,主控制部220也能够检测对操作面板203的手势(gesture)操作,并按照所检测出的手势操作来执行预先设定的功能。

手势操作不是以往的单纯的触摸操作,而是指利用手指等描绘轨迹,或者同时指定多个位置,或者将它们进行组合而对于多个位置中的至少一个描绘轨迹的操作。

相机部208包括图1所示的数码相机中的外部存储器控制部20、存储介质21、显示部23及操作部14以外的结构。

由相机部208生成的摄像图像数据能够存储于存储部212中,或者通过外部输入输出部213或无线通信部210输出。

在图9所示的智能手机200中,相机部208搭载于与显示输入部204相同的面,但相机部208的搭载位置并不限于此,也可以搭载于显示输入部204的背面。

并且,相机部208能够用于智能手机200的各种功能。例如,能够在显示面板202上显示由相机部208获取的图像,或者将相机部208的图像用作操作面板203的操作输入之一。

并且,GPS接收部214在检测位置时,也能够参考来自相机部208的图像来检测位置。进而,也能够参考来自相机部208的图像,不使用3轴的加速度传感器或者与3轴的加速度传感器并用,而判断智能手机200的相机部208的光轴方向,或者判断当前的使用环境。当然,也能够在应用软件内利用来自相机部208的图像。

另外,也能够对静止图像或动态图像的图像数据附加由GPS接收部214获取的位置信息、由麦克风206获取的声音信息(也可以通过主控制部等进行声音文本转换而成为文本信息)、由动作传感器部215获取的姿势信息等并存储于存储部212中,或者通过外部输入输出部213或无线通信部210输出。

在如上所述的结构的智能手机200中,也能够使特定图像的插入控制的执行频度最佳化来实现省电化。

如以上所说明,在本说明书中公开有以下事项。

(1)

一种显示控制装置,其进行动态图像数据的显示控制,所述显示控制装置具备:

特定图像插入控制部,在从将上述动态图像数据的第一帧显示于显示部之后到显示上述动态图像数据的上述第一帧之后的第二帧为止的期间,进行将与上述动态图像数据不同的特定图像显示于上述显示部的插入控制;及

插入执行控制部,根据上述动态图像数据中所包含的运动物体的移动量和显示于上述显示部的上述动态图像数据的一个像素的观察角度来确定是否执行上述插入控制。

(2)

根据(1)所述的显示控制装置,其中,

上述移动量为观察上述运动物体的观察者的视线的移动角度,

当上述移动角度为上述观察角度以下时,上述插入执行控制部确定不执行上述插入控制,当上述移动角度超出上述观察角度时,确定执行上述插入控制。

(3)

根据(1)或(2)所述的显示控制装置,其中,

当已确定执行上述插入控制时,上述特定图像插入控制部根据上述移动量和上述观察角度来控制上述期间中的上述特定图像的显示时间。

(4)

根据(3)所述的显示控制装置,其中,

上述移动量为观察上述运动物体的观察者的视线的移动角度,

上述特定图像插入控制部根据上述移动角度与上述观察角度之比来确定上述期间中的上述特定图像的显示时间。

(5)

(4)所述的显示控制装置,其中,

若将上述移动角度设为L且将上述观察角度设为H,则上述特定图像插入控制部将上述期间的1-H/L倍的时间作为上述显示时间。

(6)

根据(1)至(5)中任一项所述的显示控制装置,其中,

上述插入执行控制部还在上述动态图像数据的一帧的曝光时间为基于上述动态图像数据的帧速率的一帧时间以上时确定不执行上述插入控制。

(7)

根据(1)至(6)中任一项所述的显示控制装置,其中,

上述插入执行控制部还在上述动态图像数据的对焦评价值为预先规定的阈值以下时确定不执行上述插入控制。

(8)

根据(1)至(7)中任一项所述的显示控制装置,其中,

上述插入执行控制部设定根据上述动态图像数据计算出的上述运动物体的实际移动量作为上述运动物体的上述移动量。

(9)

根据(1)至(7)中任一项所述的显示控制装置,其中,

上述插入执行控制部设定人的追踪视觉极限移动量作为上述运动物体的上述移动量。

(10)

根据(9)所述的显示控制装置,其中,

上述显示控制装置具备测定部,上述测定部测定上述显示部的观察者的追踪视觉极限移动量,

上述插入执行控制部根据上述测定部的测定结果将多个上述追踪视觉极限移动量中的任一个设定为上述运动物体的上述移动量。

(11)

根据(1)至(10)中任一项所述的显示控制装置,其中,

上述显示控制装置具备视场角计算部,上述视场角计算部计算上述显示部的观察者对上述显示部的视场角,

根据上述视场角来计算上述观察角度和上述移动量。

(12)

根据(1)至(11)中任一项所述的显示控制装置,其中,

根据上述动态图像数据的分辨率、上述显示部的分辨率及上述显示部的观察者对上述显示部的视场角来计算上述观察角度和上述移动量。

(13)

根据(1)至(12)中任一项所述的显示控制装置,其中,

上述特定图像为黑色图像。

(14)

一种摄像装置,其具备:

(1)至(13)中任一项所述的显示控制装置;

上述显示部;及

摄像元件,

上述动态图像数据为由上述摄像元件拍摄的被摄体的即时预览图像。

(15)

一种显示控制方法,其为动态图像数据的显示控制方法,上述显示控制方法具备:

特定图像插入控制步骤,在从将上述动态图像数据的第一帧显示于显示部之后到显示上述动态图像数据的上述第一帧之后的第二帧为止的期间,进行将与上述动态图像数据不同的特定图像显示于上述显示部的插入控制;及

插入执行控制步骤,根据上述动态图像数据中所包含的运动物体的移动量和显示于上述显示部的上述动态图像数据的一个像素的观察角度来确定是否执行上述插入控制。

(16)

根据(15)所述的显示控制方法,其中,

上述移动量为观察上述运动物体的观察者的视线的移动角度,

在上述插入执行控制步骤中,当上述移动角度为上述观察角度以下时,确定不执行上述插入控制,当上述移动角度超出上述观察角度时,确定执行上述插入控制。

(17)

根据(15)或(16)所述的显示控制方法,其中,

在上述特定图像插入控制步骤中,当已确定执行上述插入控制时,

根据上述移动量和上述观察角度来控制上述期间中的上述特定图像的显示时间。

(18)

根据(17)所述的显示控制方法,其中,

上述移动量为观察上述运动物体的观察者的视线的移动角度,

在上述特定图像插入控制步骤中,根据上述移动角度与上述观察角度之比来确定上述期间中的上述特定图像的显示时间。

(19)

根据(18)所述的显示控制方法,其中,

在上述特定图像插入控制步骤中,若将上述移动角度设为L且将上述观察角度设为H,则将上述期间的1-H/L倍的时间作为上述显示时间。

(20)

根据(15)至(19)中任一项所述的显示控制方法,其中,

在上述插入执行控制步骤中,还在上述动态图像数据的一帧的曝光时间为基于上述动态图像数据的帧速率的一帧时间以上时确定不执行上述插入控制。

(21)

根据(15)至(20)中任一项所述的显示控制方法,其中,

在上述插入执行控制步骤中,还在上述动态图像数据的对焦评价值为预先规定的阈值以下时确定不执行上述插入控制。

(22)

根据(15)至(21)中任一项所述的显示控制方法,其中,

在上述插入执行控制步骤中,设定根据上述动态图像数据计算出的上述运动物体的实际移动量作为上述运动物体的上述移动量。

(23)

根据(15)至(21)中任一项所述的显示控制方法,其中,

在上述插入执行控制步骤中,设定人的追踪视觉极限移动量作为上述运动物体的上述移动量。

(24)

根据(23)所述的显示控制方法,其中,

上述显示控制方法具备测定步骤,在上述测定步骤中,测定上述显示部的观察者的追踪视觉极限移动量,

在上述插入执行控制步骤中,按照上述测定部的测定结果将多个上述追踪视觉极限移动量中的任一个设定为上述运动物体的上述移动量。

(25)

根据(15)至(24)中任一项所述的显示控制方法,其中,

上述显示控制装置具备视场角计算步骤,在上述视场角计算步骤中,计算上述显示部的观察者对上述显示部的视场角,

根据上述视场角来计算上述观察角度和上述移动量。

(26)

根据(15)至(25)中任一项所述的显示控制方法,其中,

根据上述动态图像数据的分辨率、上述显示部的分辨率及上述显示部的观察者对上述显示部的视场角来计算上述观察角度和上述移动量。

(27)

根据(15)至(26)中任一项所述的显示控制方法,其中,

上述特定图像为黑色图像。

(28)

一种显示控制程序,其用于使计算机执行动态图像数据的显示控制方法,其中,

上述显示控制方法具备:

特定图像插入控制步骤,在从将上述动态图像数据的第一帧显示于显示部之后到显示上述动态图像数据的上述第一帧之后的第二帧为止的期间,进行将与上述动态图像数据不同的特定图像显示于上述显示部的插入控制;及

插入执行控制步骤,根据上述动态图像数据中所包含的运动物体的移动量和显示于上述显示部的上述动态图像数据的一个像素的观察角度来确定是否执行上述插入控制。

以上,参考附图对各种实施方式进行了说明,但本发明当然并不限定于该例子。显然,若为本领域技术人员,则能够在权利要求书中所记载的范围内想到各种变更例或修正例,应理解这些变更例或修正例理所当然也属于本发明的技术范围内。并且,可以在不脱离发明的宗旨的范围内任意地组合上述实施方式中的各构成要件。

另外,本申请基于2019年2月20日申请的日本专利申请(日本特愿2019-028619),其内容作为参考援用于本申请中。

产业上的可利用性

本发明能够优选适用于数码相机或智能手机等具有摄像功能和显示功能的电子设备。

符号说明

100-数码相机,1-摄像透镜,2-光圈,4-透镜控制部,5-摄像元件,8-透镜驱动部,9-光圈驱动部,10-摄像元件驱动部,11-系统控制部,14-操作部,15-存储器控制部,16-主存储器,17-数字信号处理部,20-外部存储器控制部,21-存储介质,23-显示部,24-控制总线,25-数据总线,40-透镜装置,11A-特定图像插入控制部,11B-插入执行控制部,11C-视场角信息获取部,11D-测定部,23a、23b-帧,23p-像素,H-观察角度,M-运动物体,L1、L2-移动量,200-智能手机,201-壳体,202-显示面板,203-操作面板,204-显示输入部,205-扬声器,206-麦克风,207-操作部,208-相机部,210-无线通信部,211-通话部,212-存储部,213-外部输入输出部,214-GPS接收部,215-动作传感器部,216-电源部,217-内部存储部,218-外部存储部,220-主控制部,ST1~STn-GPS卫星。

28页详细技术资料下载
上一篇:一种医用注射器针头装配设备
下一篇:再现装置、再现方法和程序

网友询问留言

已有0条留言

还没有人留言评论。精彩留言会获得点赞!

精彩留言,会给你点赞!

技术分类