移动设备和通过移动设备配对电子设备的方法

文档序号:1390373 发布日期:2020-02-28 浏览:11次 >En<

阅读说明:本技术 移动设备和通过移动设备配对电子设备的方法 (Mobile device and method for pairing electronic devices through mobile device ) 是由 高在佑 李宰荣 金铉中 于 2015-07-29 设计创作,主要内容包括:一种通过移动设备配对电子设备的方法,所述方法包括:捕获包括至少一个电子设备的图像;经由所述移动设备的显示器从所述移动设备的用户接收输入,所述输入与所述至少一个电子设备和所述移动设备之间的配对相关联;基于经由所述移动设备的显示器的输入,选择所述至少一个电子设备进行配对;以及控制所述至少一个电子设备和所述移动设备相互配对。(A method of pairing electronic devices by a mobile device, the method comprising: capturing an image including at least one electronic device; receiving an input from a user of the mobile device via a display of the mobile device, the input being associated with a pairing between the at least one electronic device and the mobile device; selecting the at least one electronic device for pairing based on input via a display of the mobile device; and controlling the at least one electronic device and the mobile device to pair with each other.)

移动设备和通过移动设备配对电子设备的方法

本案是申请日为2015年7月29日、申请号为201510456032.7、发明名称为“移动设备和将移动设备与电子设备配对的方法”的发明专利申请的分案申请。

相关申请的交叉引用

本申请要求于2014年7月29日提交的韩国专利申请No.10-2014-0096764以及于2015年3月11日提交的韩国专利申请No.10-2015-0034042的权益,其全部公开内容通过引用合并于此。

技术领域

一个或多个实施例涉及用于与电子设备配对的方法和装置。

背景技术

随着技术的发展,电子设备被小型化并且具有各种形状,正在开发要被佩戴在身体上的可佩戴设备。例如,智能手表或智能眼镜正在被开发。智能手表通常是指具有比一般腕表更多改进的功能的嵌入式系统腕表。智能眼镜通常是指包括头戴式显示器(HMD)的可佩戴计算机。可佩戴设备可以被分类为独立设备和互锁设备。独立设备包括:输入/输出单元、处理单元、存储单元以及通信单元,并且可以单独使用。互锁设备指在与诸如智能电话的独立设备互锁之后可以被使用的设备。

发明内容

一个或多个示例性实施例包括与被包括在输入图像中的电子设备配对的方法。

其他方面将部分地在以下说明书中被阐述,并且部分地将从说明书中变得显而易见,或者可以通过实践所呈现的示例性实施例来学习。

根据一个或多个示例性实施例,一种要与电子设备配对的眼镜,所述眼镜包括:存储器,存储关于多个电子设备中的每一个的标识信息和设备信息,设备信息表示用于将所述眼镜与所述多个电子设备配对的信息;图像获取单元,经由被包括在眼镜中的相机来获取至少一个电子设备的图像;标识信息提取单元,提取关于被包括在所获取的图像中的电子设备的标识信息;配对目标选择单元,搜索所存储的标识信息并且选择对应于所提取的标识信息的电子设备;以及无线通信单元,基于所选择的电子设备的设备信息来与所选择的电子设备配对。

根据一个或多个示例性实施例,一种由眼镜执行的与电子设备配对的方法,该方法包括:存储关于多个电子设备中的每一个的标识信息和设备信息,设备信息表示用于将所述眼镜与所述多个电子设备配对的信息;经由被包括在眼镜中的相机来获取至少一个电子设备的图像;提取关于被包括在所获取的图像中的电子设备的标识信息;搜索所存储的标识信息并且选择对应于所提取的标识信息的电子设备;以及基于所选择的电子设备的设备信息来与所选择的电子设备配对。

根据一个或多个示例性实施例,一种通过移动设备配对电子设备的方法,所述方法包括:捕获包括至少一个电子设备的图像;经由所述移动设备的显示器从所述移动设备的用户接收输入,所述输入与所述至少一个电子设备和所述移动设备之间的配对相关联;基于经由所述移动设备的显示器的输入,选择所述至少一个电子设备进行配对;以及控制所述至少一个电子设备和所述移动设备相互配对。

根据一个或多个示例性实施例,一种移动设备,包括:相机,其捕获包括至少一个电子设备的图像;显示器;和处理器,所述处理器被配置为:经由所述显示器从用户接收输入,所述输入与和所述至少一个电子设备的配对相关联,基于经由所述显示器的输入,确定所述至少一个电子设备用于配对,并且控制所述至少一个电子设备与所述移动设备配对。

附图说明

结合附图,这些和/或其他方面从下面对示例性实施例的描述中将变得清楚和明显,在附图中:

图1是用于描述根据实施例的移动设备与电子设备配对的方法的图;

图2是用于描述移动设备与遥控器配对并且控制遥控器的方法的图;

图3是用于描述根据实施例的移动设备控制电子设备的方法的流程图;

图4是用于描述根据实施例的移动设备直接控制TV的方法的图;

图5是用于描述根据实施例的移动设备控制电子设备的方法的流程图;

图6是示出根据实施例的移动设备的配置的图;

图7是示出根据实施例的移动设备的配置的图;

图8是用于根据实施例的智能眼镜获取电子设备的图像的方法的图;

图9是示出根据实施例的智能眼镜的配置的图;

图10是用于描述根据实施例的配对方法的图;

图11是用于描述根据实施例的配对方法的图;

图12是用于描述根据实施例的配对方法的图;

图13是用于描述根据实施例的配对方法的图;

图14A是用于描述根据实施例的移动设备通过广播分组与电子设备配对的方法的图;

图14B是用于描述根据实施例的电子设备通过广播分组与电子设备配对的方法的图;

图15是用于描述根据实施例的移动设备经由广播分组执行配对的方法的图;

图16是用于描述根据实施例的移动设备通过使用输入单元来控制电子设备的方法的图。

图17是用于描述根据实施例的移动设备通过使用应用控制电子设备的方法的图;

图18是用于描述根据实施例的移动设备通过提供在电子设备上显示的屏幕图像来控制电子设备的方法的图;

图19是用于描述根据实施例的移动设备控制音频系统的方法的图;

图20是用于描述根据实施例的移动设备控制空调的方法的图;

图21是用于描述根据实施例的移动设备控制膝上型PC的方法的图;

图22是用于描述根据实施例的移动设备控制冰箱的方法的图;

图23是用于描述根据实施例的移动设备控制可佩戴设备的方法的图;

图24是用于描述根据实施例的移动设备控制移动设备的方法的图;

图25示出了显示单元显示与在另一移动设备处显示的屏幕图像相同的屏幕图像的情况;

图26A和图26B是用于描述移动设备使用电子设备的图像来与电子设备配对的方法的图;

图27是用于描述移动设备经由文本与电子设备配对的方法的图;

图28是用于描述使根据实施例的移动设备登记电子设备的操作的图;

图29是用于描述使根据实施例的移动设备登记应用的操作的图;

图30是用于描述使根据实施例的移动设备登记应用的操作的图;

图31是用于说明使根据实施例的移动设备登记应用的操作的图;

图32是用于说明使根据实施例的移动设备登记控制功能的操作的图;

图33是用于描述使根据实施例的移动设备与电子设备配对的操作的图;

图34是用于描述使根据实施例的移动设备标识对象并且提供相关功能的操作的图;

图35是用于描述使根据实施例的移动设备向所识别的人进行电话呼叫的操作的图;

图36是用于描述使根据实施例的移动设备向所识别的人发送消息的操作的图;

图37是用于描述使根据实施例的移动设备执行对应于所识别的人的应用的操作的图;

图38是用于描述根据实施例的移动设备执行相对于所识别的对象所登记的功能的方法的图;

图39是用于描述根据实施例的移动设备控制传统设备的方法的图;

图40是用于描述根据实施例的眼镜控制电子设备的方法的图;

图41是用于描述根据实施例的无缝回放内容的方法的流程图;

图42是用于描述根据实施例的无缝回放内容的方法的流程图;

图43是用于说明根据实施例的电子设备的图;

图44是用于描述根据实施例的无缝回放方法的图;

图45是用于描述用于在存在多个用户时利用用户定制的书签信息的实施例的图;

图46是用于说明根据实施例的眼镜的图;

图47是用于描述根据实施例的无缝回放内容的方法的流程图;

图48是用于描述根据实施例的配对电子设备的方法的流程图;

图49是用于描述根据实施例的配对方法和无缝内容回放方法的图;

图50是用于描述智能电话与TV配对并且智能电话向TV传送内容的方法的流程图;

图51A和图51B是用于描述确定电子设备无缝地回放内容的方法的图;

图52A和图52B是用于描述确定电子设备无缝地回放内容的方法的图;

图53是用于描述智能电话与TV配对并且智能电话向TV传送内容的方法的流程图;

图54是用于描述使用书签的无缝回放方法的图;

图55是用于描述相对于多个用户的无缝回放方法的图;以及

图56是用于描述从附近电子设备接收内容并且回放该内容的电子设备的示例的图。

具体实施方式

因为本发明的原理允许各种改变和很多实施例,所以在所撰写的说明书中具体描述并且在附图中图示了具体实施例。然而,这并不意在将本发明的原理限制为具体实践模式,并且可以理解,不脱离本发明原理的精神和技术范围的所有的改变、等同物和替代物都被包括在本发明的原理中。在本发明的原理的描述中,在认为其可能不必要地混淆本发明的原理的本质时,省略相关技术的特定具体说明。

尽管可以使用诸如“第一”、“第二”等术语来描述各种组件,但是这样的组件不必限于上述术语。上述术语仅用于使一个组件与其他组件区分。

在本说明书中使用的术语仅仅用于描述具体实施例,并且不意在限制本发明原理。使用单数的表达包括复数的表达,除非其在上下文中具有明显不同的含义。在本说明书中,应当理解,诸如“包括”或“具有”等的术语意在指示存在在本说明书中公开的特征、数字、步骤、动作、组件、部件或其组合,并且不意在排除可以存在或者可以添加一个或多个其他特征、数字、步骤、动作、组件、部件或其组合的可能性。

现在将具体地参考示例性实施例,在附图中图示了其示例,其中相同的附图标记指相似的元件。在这方面,本示例性实施例可以具有不同的形式,而不应被解释为限于在此阐述的描述。因此,通过参考附图,如下描述示例性实施例仅仅用以解释本说明书的各方面。诸如“至少一个”的表达在引导一系列元件时修改整列系列的元件,并且不修改该列表中的单个元件。

图1是用于描述根据实施例的移动设备100与电子设备配对的方法的图。参考图1,用户可以将移动设备1000与附近的电子设备210至230配对。例如,移动设备1000可以是可以识别附近电子设备的设备,如智能眼镜110、智能相机120、可佩戴设备130、和智能电话140,并且可以无线地连接到附近的设备。

移动设备1000识别被包括在输入图像中的电子设备,并且与所识别的电子设备配对。电子设备的识别可以是确定输入图像是否包括电子设备的操作。此外,电子设备的识别可以是确定包括在输入图像中的电子设备的类型的操作。此外,电子设备的识别可以是确定包括在输入图像中的电子设备的名称的操作。

电子设备可以包括可以直接与移动设备1000进行通信的设备和无法直接与移动设备1000进行通信的传统设备。传统设备可以经由贴片(patch)与移动设备1000进行通信。使移动设备1000经由贴片控制传统设备的过程将在下面参考图39来具体描述。

配对是指用于经由有线或无线地将移动设备1000连接到电子设备的操作。此外,配对是指建立移动设备1000的设置以经由有线或无线地向和从电子设备传送和接收数据的操作。

移动设备1000存储用于标识多个电子设备的标识信息。标识信息可以是将相应的电子设备与其他电子设备区分的对电子设备唯一的信息。例如,标识信息包括关于电子设备的外观的信息,诸如电子设备的形状、特征点和图像。此外,标识信息可以包括指示电子设备的名称的文本,即,电子设备的类型或型号名称。此外,标识信息可以包括在人或机器读取电子设备的名称时获取的音频。

移动设备1000可以通过扫描预先布置的代码来识别多个电子设备。预先布置的代码可以是指示用于存储信息的技术的数据,诸如条形码、QR码或色码。条形码通过使用具有不同厚度的垂直线的组合来存储信息。QR码是信息被存储为正方形晶格状图案的二维码。色码是指示用于通过使用固定颜色的组合来存储信息的技术的数据。例如,色码可以通过使用包括红色,绿色和蓝色的颜色来被打印为矩阵状形状。代码可以被打印在电子设备的外部,并且可以包括如下信息,其包括电子设备的名称、类型或序列码。移动设备1000可以通过使用相机来扫描条形码、QR码或色码,并且基于从其读出的信息来识别打印有代码的电子设备。虽然以上例示了条形码、QR码和色码,但是可以使用各种代码中的任何一个来识别电子设备,只要该代码可以通过移动设备1000来扫描以从其读出信息。移动设备1000可以识别各个电子设备的不同特征,基于此来生成标识信息,并且将所生成的标识信息存储在存储器中。移动设备1000可以获取每个类型的电子设备的平均特征,并且将平均特征存储在存储器中。移动设备1000可以存储电子设备的名称、特征和形状以及电子设备的标识符号。

移动设备1000可以存储电子设备的外观的一部分作为特征点。例如,移动设备1000可以从电子设备的外观提取边缘,并且将所提取的边缘存储为关于电子设备的标识信息。例如,当移动设备1000提取相机的特征时,移动设备1000可以仅提取相机的边缘,并且将所提取的边缘存储为关于相机的标识信息,而不存储关于相机的整个外观的信息来作为标识信息。相机包括矩形主体和位于主体中的圆形透镜。移动设备1000提取主体和透镜的边缘,并且将边缘存储为关于相机的标识信息。

移动设备1000不仅可以存储边缘,也可以存储可以从电子设备的外观提取的各种其他特征,并且将该特征存储为关于电子设备的标识信息。此外,为了使移动设备1000分析电子设备的图像和所提取的特征,可以应用包括上述方法的各种技术。

移动设备1000识别被包括在输入图像中的电子设备,提取关于电子设备的标识信息,并且从存储在移动设备1000中的标识信息当中选择对应于所提取的标识信息的标识信息。选择对应于所提取的标识信息的标识信息可以指搜索以设置的百分比或更高的程度与所提取的标识信息相同的标识信息。所提取的标识信息是关于从当前输入图像获取的电子设备的信息,而要搜索的标识信息是关于预先存储在移动设备1000中的电子设备的信息。

移动设备1000通过使用关于所选择的电子设备的设备信息来与所选择的电子设备配对。设备信息指使移动设备1000和电子设备彼此配对所需要的信息。例如,设备信息可以是电子设备的MAC地址或IP地址。移动设备1000通过使用MAC地址或IP地址来与电子设备配对。此外,还可以从服务器(未示出)传送设备信息。

因为传统设备无法直接与移动设备1000配对,所以附连到传统设备的贴片可以与移动设备1000配对。

在配对之后,移动设备1000可以控制电子设备。例如,术语“配对”可以指示移动设备1000可以向电子设备传送数据的状态。控制电子设备可以意味着该电子设备根据从移动设备1000传送的数据进行操作。图1示出了移动设备1000与电子设备或传统设备配对的情况,其中,电子设备诸如遥控器210、音频系统220、和智能电话230,传统设备诸如附连到贴片235a的冰箱235。这里,冰箱235是传统设备。

移动设备1000可以通过使用移动设备1000的输入设备来控制配对的电子设备。例如,移动设备1000可以通过使用移动设备1000的输入设备来调整配对的电子设备的频道和音量。输入设备指能够接收用户的指令的设备。例如,输入设备可以是按钮、触摸面板、相机或鼠标。

用于控制配对的电子设备的屏幕图像可以在移动设备1000的显示单元1400处被显示。用于控制配对的电子设备的屏幕图像可以是显示被包括在电子设备中的功能的屏幕图像。或者,用于控制配对的电子设备的屏幕图像可以是用于将控制信号从移动设备1000传送到电子设备的屏幕图像。

移动设备1000可以根据所识别的电子设备的类型来显示各种类型的控制屏幕图像。电子设备的类型指用于执行不同功能的电子设备的各个组,例如移动设备、可佩戴设备、遥控器、家电等。在图1中,在移动设备1000的显示单元1400处显示用于调整频道或音量的屏幕图像。因此,可以在显示单元1400处显示用于改变频道的按钮和用于改变音量的按钮。移动设备1000接收用户输入,并且确定用户输入选择了哪个按钮。移动设备1000向电子设备传送对应于所选择的按钮的控制信号。例如,移动设备1000可以接收用户的输入,并且向遥控器210、音频系统220、或智能电话230输出用于调整频道或音量的控制信号。

音频系统220或智能电话230可以增加当前正在回放的歌曲的音量,或者根据从移动设备1000接收到的控制信号来改变要回放的歌曲。

基于用户设置的状态,移动设备1000可以或可以不识别包括在输入图像中的电子设备,并且与所识别的电子设备配对。可以在移动设备1000的显示单元1400处显示用于激活或去激活相应功能的用户界面(UI)元素。例如,可以在移动设备1000的显示单元1400处显示用于激活或去激活相应功能的按钮或复选框。用户可以通过触摸按钮或选择复选框来识别被包括在输入图像中的电子设备并且与所识别的电子设备配对。

基于电池中剩余的电力,移动设备1000可以或可以不识别被包括在输入图像中的电子设备,并且与所识别的电子设备配对。移动设备1000可以检查电池中剩余的电力,并且如果功率小于或等于预设值,则移动设备1000可以不执行相应的功能。例如,如果预设值是电池中剩余的电力的10%,则移动设备1000可以不识别被包括在输入图像中的电子设备。或者,移动设备1000可以不与所识别的电子设备配对。如果在电池中剩余多于10%的电力,则移动设备1000可以识别被包括在输入图像中的电子设备并且与所识别的电子设备配对。

图2是用于描述移动设备1000与遥控器210配对并且控制遥控器210的方法的图。遥控器210根据从移动设备1000接收到的控制信号来控制其他电子设备,诸如TV 240。

移动设备1000经由相机获取遥控器210的图像。图像的获取可以包括获取至少一个静止图像。移动设备1000与遥控器210配对。移动设备1000向遥控器210输出用于调整频道或音量的控制信号。遥控器210从移动设备1000接收控制信号,并且向TV 240输出控制信号。TV 240根据接收到的控制信号来进行操作。

图3是用于描述根据实施例的移动设备1000控制电子设备的流程图。参考图3,移动设备1000可以在与电子设备配对之后对其进行控制。

在操作310中,移动设备1000存储关于电子设备的标识信息和设备信息。标识信息包括用于标识电子设备的外观的信息,而设备信息包括用于建立在移动设备1000和电子设备之间的连接的信息。移动设备1000可以经由相机获取电子设备的图像,并且提取关于被包括在所获取的图像中的电子设备的标识信息。移动设备1000存储所提取的标识信息。移动设备1000可以从用户接收设备信息。移动设备1000可以通过接收诸如MAC地址和能力信息的关于电子设备的信息来存储设备信息。能力信息可以是关于可以由电子设备执行的功能的信息。例如,能力信息是指示电子设备是否是能够回放声音或者电子设备是否能够显示图像的信息。或者,移动设备1000可以经由有线或无线地从附近的电子设备接收设备信息,并且存储该设备信息。

在操作320中,移动设备1000经由相机获取电子设备的图像。移动设备1000的相机获取电子设备的图像。

在操作330中,移动设备1000提取关于被包括在所获取的图像中的电子设备的标识信息。移动设备1000通过分析图像来确定该图像是否包括电子设备,并且提取关于该电子设备的标识信息。

在操作340中,移动设备1000从存储在移动设备1000中的标识信息当中搜索对应于所提取的标识信息的标识信息。术语对应于所提取的标识信息的标识信息指以设置的百分比或更高的程度与所提取的标识信息相同的标识信息。

在操作350中,移动设备1000选择要配对的电子设备。移动设备1000搜索对应于所提取的标识信息的标识信息,并且选择对应于搜索到的标识信息的电子设备。

在操作360中,移动设备1000与选择的电子设备配对。

在操作370中,移动设备1000接收来自用户的输入。移动设备1000可以经由按钮、触摸面板或相机来接收来自用户的输入。

在操作380中,移动设备1000基于用户输入控制电子设备。移动设备1000向电子设备传送对应于用户输入的控制信号。

图4是用于描述根据实施例的移动设备1000直接控制TV 240的方法的图。移动设备1000可以经由遥控器210控制TV 240或直接控制TV 240。

移动设备1000经由相机获取包括遥控器210的图像。移动设备1000识别包括在图像中的遥控器210,并且控制由所识别的遥控器210控制的目标。移动设备1000可以基于关于遥控器210的标识信息来确定由遥控器210控制的目标。例如,因为遥控器210可以控制电子设备,诸如TV 240和音频系统220,所以移动设备1000基于关于遥控器210的标识信息来确定由遥控器210控制的电子设备,并且选择由遥控器210控制的目标。

图4中所示的实施例涉及由遥控器210控制的目标是TV 240的情况。移动设备1000可以通过识别遥控器210的形状以及包括在遥控器210中的按钮来选择由遥控器210控制的目标。或者,移动设备1000可以从遥控器210接收关于由遥控器210控制的目标的信息。移动设备1000可以从遥控器210接收关于TV 240的信息,并且与TV 240配对。

移动设备1000直接控制TV 240。如果移动设备1000能够输出用于控制TV 240的信号,则移动设备1000直接向TV 240传送控制信号。例如,移动设备1000可以向TV 240传送用于改变频道的信号或者用于改变音量的信号。

图5是用于描述根据实施例的移动设备控制电子设备的方法的流程图。参考图5,移动设备1000可以通过与B-电子设备配对来控制B-电子设备。

在操作510中,移动设备1000存储关于电子设备的标识信息和设备信息。

在操作520中,移动设备1000经由相机获取A-电子设备的图像。例如,移动设备1000的相机获取A-电子设备的图像。

在操作530中,移动设备1000提取关于被包括在图像中的A-电子设备的标识信息。移动设备1000分析该图像,确定A-电子设备是否被包括在该图像中,并且提取关于A-电子设备的标识信息。

在操作540中,移动设备1000从存储在存储器中的标识信息中搜索对应于所提取的标识信息的标识信息。

在操作550中,移动设备1000选择要配对的电子设备。移动设备1000选择由A-电子设备控制的B-电子设备作为要配对的电子设备。如果移动设备1000能够直接控制B-电子设备,则移动设备1000选择B-电子设备作为要配对的电子设备。如果移动设备1000无法直接控制B-电子设备,则移动设备1000通过使用A-电子设备来控制B-电子设备。

在操作560中,移动设备1000与B-电子设备配对。

在操作570中,移动设备1000接收来自用户的输入。例如,如果B-电子设备是TV 240,则移动设备1000可以从用户接收用于改变频道或改变音量的输入。

在操作580中,移动设备1000基于来自用户的输入来控制B-电子设备。移动设备1000向B电子设备传送对应于来自用户的输入的控制信号。

图6是示出根据实施例的移动设备1000的配置的图。参考图6,移动设备1000包括处理器1100、相机1200、存储器1300、和显示单元1400。

处理器1100分析从照相机1200接收的图像,并且识别电子设备。处理器1100从相机1200接收图像,并且识别被包括在图像中的电子设备。处理器1100可以识别被包括在图像中的对象的形状,并且从所识别的对象中选择具有与电子设备的形状相同形状的对象。

处理器1100从存储在存储器1300中的标识信息当中搜索对应于从图像中提取的标识信息的标识信息。

处理器1100与所识别的电子设备配对。

处理器1100在显示单元1400处显示用于控制电子设备的界面。当移动设备1000连接到所识别的电子设备时,处理器1100在显示单元1400处显示用于接收来自用户的输入的界面。处理器1100向所识别的电子设备传送对应于用户的输入的控制信号。

处理器1100可以改变移动设备1000的输入单元的功能。例如,如果输入单元执行用于改变显示单元1400的亮度的功能,则处理器1100可以改变输入单元以执行用于改变电子设备的音量的功能。因此,即使经由输入单元从用户接收到相同的输入,处理器1100也可以执行不同的功能。

相机1200获取图像并且向处理器110输出图像。移动设备1000包括至少一个相机1200。相机1200可以被布置在移动设备1000的侧表面、前表面或后表面。

存储器1300存储关于多个电子设备的标识信息和设备信息,其中设备信息表示用于与各个电子设备配对的信息。

显示单元1400在处理器1100的控制下显示用于控制电子设备的屏幕图像。显示单元1400可以是用于接收来自用户的输入的触摸面板。

图7是示出根据实施例的移动设备1000的配置的图。参考图7,移动设备1000的处理器1100包括图像获取单元1110、标识信息提取单元1120、配对目标选择单元1130、和无线通信单元1140。

图像获取单元1110从移动设备1000的相机1200获取至少一个电子设备的图像。图像获取单元1110将所获取的图像输出到标识信息提取单元1120。

图像获取单元1110可以提取被包括在由相机1200获取的图像中的边缘,分析边缘的形状,并且识别电子设备。因为电设备的边缘的形状可能彼此不同,所以包括在图像中的电子设备可以通过将所提取的边缘的形状与所存储的边缘的形状作比较来识别。

如果在设置的时间段中经由相机1200输入固定图像,则图像获取单元1110可以识别被包括在输入图像中的电子设备,并且获取电子设备的图像。此外,如果输入由相机1200获取的图像,则图像获取单元1110可以识别被包括在图像中的电子设备,并且获取电子设备的图像。

标识信息提取单元1120提取关于被包括在图像中的电子设备的标识信息。标识信息提取单元1120可以分析该图像,并且识别具有电子设备的形状的对象。例如,标识信息提取单元1120可以提取指示对象的边界的信息来作为标识信息,或者可以提取指示多边形的信息和包括在对象中的文本作为标识信息。

配对目标选择单元1130从存储在存储器中的标识信息当中搜索对应于从图像中提取的标识信息的标识信息,并且选择对应于搜索到的标识信息的电子设备作为要配对的电子设备。

无线通信单元1140通过使用所存储的关于选择的电子设备的设备信息来与所选择的电子设备配对。

图8是用于描述根据实施例的智能眼镜110获取电子设备的图像的方法的图。参考图8,智能眼镜110搜索位于用户观看的方向上的电子设备。图8示出了遥控器210位于用户周围的情况。

眼睛跟踪相机113跟踪用户的眼睛,并且确定用户观看的方向。

前部相机112获取在眼睛跟踪相机113跟踪的方向上的图像。换言之,前部相机112从与用户相同的视点获取图像。图8示出了前部相机112获取遥控器210的图像的情况。

图9是示出根据实施例的智能眼镜110的配置的图。参考图9,智能眼镜110包括前置摄像头112,眼睛跟踪相机113、和处理器114。

处理器114登记关于电子设备的标识信息和设备信息。前部相机112可以获取电子设备的图像,并且处理器114可以分析所获取的图像,并且登记关于被包括在图像中的电子设备的标识信息。例如,处理器114从图像提取电子设备的特征,并且将所提取的特征登记为标识信息。处理器114可以从电子设备接收关于电子设备的设备信息,并且登记该设备信息。或者,处理器114可以存储关于基于所述电子设备的类型来与相应的电子设备进行通信的方法的信息。例如,处理器114可以登记关于由电子设备使用的频率或协议的信息来作为关于电子设备的设备信息。

如果处理器114确定了用户的眼睛在指定的时间段中没有移动,则处理器114分析从前部相机112接收到的图像。处理器114识别包括在图像中的电子设备。处理器114可以检测被包括在图像中的对象的边界,并且提取对象的特征。处理器114将所识别的对象与登记的电子设备作比较,并且确定是否存在与所登记的电子设备中的任何一项相同的识别的设备。

处理器114从眼睛跟踪相机113接收关于由用户观看的方向的信息,并且基于接收到的信息来调整前部相机112的方向。因此,前部相机112的方向与由用户观看的方向同步。当调整前部相机112的方向时,前部相机112向处理器114输出在调整的方向上获得的图像。

处理器114从所登记的电子设备当中确定是否存在与所识别的电子设备相同的电子设备。如果在所登记的电子设备当中存在于所识别的电子设备相同的电子设备,则处理器114与所识别的电子设备配对,并且基于来自用户的输入来控制电子设备。

智能眼镜110可以经由蓝牙或Wi-Fi与电子设备配对。当智能眼镜110与电子设备配对时,智能眼镜110控制电子设备。智能眼镜110可以从用户接收控制相关的输入,并且基于接收到的输入来向电子设备输出控制信号。

智能眼镜110执行应用。应用是在关于电子设备的标识信息或设备信息被登记时被一起登记的程序。应用是用于控制电子设备的程序或者执行与电子设备相同的功能的应用。当执行应用时,智能眼镜110可以向用户提供用于控制电子设备的屏幕图像。或者,智能眼镜110可以执行语音识别程序。

智能眼镜110接收用户的控制。换言之,智能眼镜110接收用户输入。智能眼镜110接收用户的语音或用户的手势。智能眼镜110基于接收到的语音或识别的手势来向电子设备输出用于控制该电子设备的控制信号。可以经由麦克风来接收语音,而可以经由前部相机112来接收手势。

图10是用于描述根据实施例的配对方法的图。参考图10,移动设备1000可以确定用户的意图,并且选择要配对的电子设备。例如,如果智能眼镜110确定了用户在指定的时间段中在同一方向上寻找,则智能眼镜110与位于用户观看的方向上的电子设备配对。此外,如果移动设备1000确定了相机1200***作并且在指定的时间段中输入了相同的图像,则移动设备1000与被包括在输入图像中的电子设备配对。

移动设备1000可以询问用户是否控制所识别的电子设备。图10示出了遥控器210被包括在输入图像中的情况。移动设备1000可以在显示单元1400处显示遥控器210的图像,并且可以从用户接收关于是否与遥控器210配对的输入。如果从用户接收到用于与遥控器配对的输入,则移动设备1000与遥控器210配对。

图11是用于描述根据实施例的配对方法的图。参考图11,移动设备1000可以从被包括在所获取的图像中的电子设备当中选择要配对的电子设备。

如果在移动设备1000准备好配对时获取图像,则移动设备1000分析所获取的图像,并且确定电子设备是否被包括在所获取的图像中。如果以配对模式获取图像,则移动设备1000可以分析电子设备是否被包括在所获取的图像中。移动设备1000可以显示包括在显示单元1400中的电子设备。

图11是示出遥控器210和TV 240被包括在所获得的图像中的情况的图。移动设备1000在显示单元1400处显示遥控器210和TV 240。移动设备1000可以接收来自用户的输入以从遥控器210和电视240之间选择要配对的电子设备。例如,如果经由显示单元1400从用户接收用于与TV 240配对的输入,则移动设备1000与TV 240配对。

图12是用于描述根据实施例的配对方法的图。参考图12,移动设备1000可以基于用户的手势来选择要配对的电子设备。

如果在移动设备1000准备好配对时检测到用户的手势,则移动设备1000分析图像,并且确定电子设备是否被包括在该图像中。当移动设备1000处于配对模式时,在检测用于选择电子设备的用户的手势时,移动设备1000可以在检测到手势的区域中搜索电子设备。图12示出了用于选择TV 240的用户的手势。因此,移动设备与TV 240配对。

图13是用于描述根据实施例的配对方法的图。参考图13,移动设备1000可以从预先登记的电子设备当中选择要配对的电子设备。

移动设备1000在显示单元1400处显示预先登记的电子设备的列表。移动设备1000接收来自用户的输入,并且从所显示的电子设备当中选择要配对的电子设备。图13示出了用户选择TV 240的情况。因此,移动设备1000与TV 240配对。

图14A是用于描述根据实施例的移动设备1000通过广播分组来与电子设备配对的方法的图。参考图14A,移动设备1000可以通过广播用于连接的分组1410来与电子设备配对。

移动设备1000识别被包括在图像中的电子设备的类型。移动设备1000广播用于请求与所识别的类型的电子设备配对的分组1410。移动设备1000接收响应分组,并且与传送了响应分组的电子设备配对。

在图14A中,移动设备1000广播分组1410并且与TV 240配对。如果被包括在图像中的电子设备被确定为TV 240,则移动设备1000广播用于请求与TV 240配对的分组1410。分组1410可以包括用于仅请求TV 240传送响应分组的数据。用于仅请求TV 240传送响应分组的数据可以被包括在广告数据或在单独项中。

TV 240从移动设备1000接收分组1410,并且向移动设备1000传送响应分组。移动设备1000从TV 240接收响应分组,并且基于响应分组来与TV 240配对。

分组1410可以包括诸如前导、广告访问地址、广告报头、广告主地址和广告数据的项。分组1410可以被包括在广播的广告数据中,并且可以包括标识移动设备1000并且指示移动设备1000想要与TV配对的数据。移动设备1000可以传送分组1410,并且向TV 240通知要提供的服务。例如,移动设备1000可以向TV 240传送运动图像或歌曲。

此外,移动设备1000就可以向分组1410添加关于移动设备1000的位置的信息,并且广播该分组1410。

TV 240接收分组1410并且传送响应分组,该响应分组指示TV 240是可用于连接到移动设备1000的TV。TV 240可以对响应分组添加关于用于控制TV 240的必要应用的信息,并且向移动设备1000传送该响应分组。如果分组1410包括仅请求TV 240传送响应分组的数据,则仅电子设备当中的接收到分组1410的TV 240向移动设备1000传送响应分组。

TV 240可以经由例如波束形成方法来与包括在分组1410中的移动设备1000的位置进行通信。在该情况下,TV 240可以向移动设备1000的位置传送响应分组,并且由此可以降低功耗。

图14B是用于描述根据实施例的电子设备通过广播分组来与移动设备1000配对的方法的图。参考图14B,电子设备可以通过广播分组1410来与移动设备1000配对。换言之,如果TV240广播分组1410,则移动设备1000可以通过使用包括在接收到的分组1410中的设备信息来与TV 240配对。

在图14B中,TV 240通过广播分组1410来与移动设备1000配对。由TV 240传送的分组1410包括关于TV 240的设备信息。换言之,由TV 240传送的分组包括指示TV 240是可用于配对的TV的数据以及用于配对的连接信息。

移动设备1000接收从TV 240广播的分组1410,并且通过向传送了分组1410的TV 240传送响应分组来与TV 240配对。

移动设备1000基于从TV 240接收到的分组1410来确定可配对的TV 240在附近,并且存储被包括在分组1410中的设备信息。移动设备1000预先存储关于TV 240的标识信息。移动设备1000提取被包括在所获取的图像中的电子设备的设备信息。移动设备1000将所提取的标识信息与存储的标识信息作比较,并且识别被包括在图像中的电子设备。如果包括在图像中的电子设备被实现为TV 240,则移动设备1000通过使用被包括在TV 240中的分组1410中所包括的设备信息向TV 240传送响应分组来尝试与TV 240配对。

图15是用于描述根据实施例的移动设备1000通过广播分组来与电子设备配对的方法的图。参考图15,在操作1510中,移动设备1000存储关于电子设备的标识信息。移动设备1000可以根据电子设备的类型来存储标识信息。

在操作1520中,移动设备1000经由相机1200获取电子设备的图像。

在操作1530中,移动设备1000识别电子设备的类型。

在操作1540中,移动设备1000广播用于与所识别的类型的电子设备配对的分组。该分组包括关于移动设备1000的信息以及关于要配对的电子设备的类型的信息。

在操作1550中,移动设备1000从电子设备接收响应分组。从移动设备1000接收到分组的电子设备读取关于在分组中指示的电子设备的类型的信息。仅仅当电子设备是在读取的信息中指示的电子设备时,从移动设备1000接收到分组的电子设备向移动设备1000传送响应分组备。响应分组包括关于电子设备的类型的信息、指示该电子设备是否可用于配对的信息、以及用于配对的设备信息。

在操作1560,移动设备1000与电子设备配对。移动设备1000可以通过使用被包括在响应分组中的设备信息来与传送了响应分组的电子设备配对。

图16是用于描述根据实施例的移动设备1000通过使用输入单元来控制电子设备的方法的图。参考图16,智能眼镜110可以通过使用输入单元来控制电子设备。

如果智能眼镜110不控制电子设备,则智能眼镜110的第一和第二输入单元115和116用作用于控制智能眼镜110的操作的输入单元。然而,智能眼镜110控制附近的电子设备,第一和第二输入单元115和116的功能被改变为用于控制附近的电子设备的功能。

智能眼镜110包括第一和第二输入单元115和116。第一和第二输入单元115和116的功能基于所识别的电子设备而改变。例如,如果智能眼镜110识别遥控器210并且控制遥控器210,则第一输入单元115执行用于改变音轨(track)的功能,而第二输入单元116执行用于改变音量的功能。如果智能眼镜110识别TV 240并且控制TV 240,则第一输入单元115执行用于改变频道的功能,而第二输入单元116执行用于改变音量的功能。

图17是用于描述根据实施例的移动设备1000通过使用应用来控制电子设备的方法的图。参考图17,智能电话140可以通过使用应用来控制遥控器210或TV 240。

智能电话140存储用于控制电子设备的应用或程序。智能电话140可以预先存储用于控制电子设备的应用或程序,或者获取用于下载应用或程序的信息,下载应用或程序,并且存储应用或程序。

智能电话140执行对应于所识别的电子设备的应用或程序,并且控制所识别的电子设备。例如,如果智能电话140识别遥控器210并且控制遥控器210,则智能电话140执行对应于遥控器210的应用或程序。此外,如果智能电话140识别TV 240并且控制TV 240,智能电话140执行对应于TV 240的应用或程序。

如果智能电话140执行应用或程序,则在智能电话140处显示用于控制电子设备的功能的屏幕图像。智能电话140可以接收来自用户的触摸输入,并且向电子设备传送用于改变频道的控制信号或者用于改变音量的控制信号。

图18是用于描述根据实施例的移动设备1000通过提供在电子设备处显示的屏幕图像来控制电子设备的方法的图。参考图18,智能电话140可以通过提供在可佩戴设备260处显示的屏幕图像来控制可佩戴设备260。虽然以下描述涉及智能电话140,但是能够显示与在可佩戴设备260处显示的屏幕图像相同的屏幕图像并且接收来自用户的输入的任何电子设备可以通过向用户提供在可佩戴设备260处显示的屏幕图像相同的屏幕图像来控制可佩戴设备260。

当智能电话140与佩戴设备260配对时,智能电话140可以提供与在可佩戴设备260处显示的屏幕图像相同的屏幕图像。智能电话140从可佩戴设备260接收屏幕图像并且显示接收到的屏幕图像。

智能电话140基于来自用户的输入来控制可佩戴设备260。智能电话140基于来自用户的输入的位置和接收到的屏幕图像来向可佩戴设备260传送控制信号。例如,智能电话140可以确定用户触摸的触摸面板上的位置,并且向可佩戴设备260传送控制信号。可佩戴设备260基于控制信号来执行操作,并且向智能电话140传送示出执行操作的结果的屏幕图像。智能电话140在显示单元处显示接收到的屏幕图像。

图19是用于描述根据实施例的移动设备1000控制音频系统200的方法的图。参考图19,移动设备1000与遥控器210配对,并且经由遥控器210控制音频系统220。

移动设备1000与遥控器210配对。移动设备1000识别遥控器210并且与遥控器210配对。

移动设备1000控制遥控器210。显示单元1400显示用于控制遥控器210的屏幕图像。图19示出了在显示单元1400处显示音轨和音量水平的情况。移动设备1000接收来自用户的输入,并且基于接收到的输入来向遥控器210传送控制信号。例如,移动设备1000可以从用户接收用于改变音轨的输入或者用于改变音量的输入。

遥控器210控制音频系统220。遥控器210基于从移动设备1000接收到的控制信号来控制音频系统220。

移动设备1000可以通过直接向音频系统220传送控制信号来控制音频系统220。

图20是用于描述根据实施例的移动设备1000控制空调270的方法的图。参考图20,移动设备1000与遥控器210配对,并且经由控制器210控制空调270。

移动设备1000与遥控器210配对。移动设备1000识别遥控器210并且与遥控器210配对。

移动设备1000控制遥控器210。移动设备1000接收来自用户的输入,并且基于接收到的输入来向遥控器210传送控制信号。例如,移动设备1000可以从用户接收用于改变风量的输入或者用于改变温度的输入。

移动设备1000控制空调270。显示单元1400显示用于控制空调270中的屏幕图像。图20示出了在显示单元1400处显示风量和温度的情况。遥控器210基于从移动设备1000接收到的控制信号来控制空调270。

移动设备1000可以通过直接向空调270传送控制信号来控制空调270。

图21用于描述根据实施例的移动设备1000控制膝上型PC 290的方法的图。参考图21,移动设备1000与鼠标280配对,并且通过使用鼠标280来控制膝上型PC 290。

移动设备1000与膝上型PC 290配对。移动设备1000识别鼠标280并且与鼠标280配对。

移动设备1000控制鼠标280。显示单元1400显示用于控制鼠标280的屏幕图像。图21示出了在显示单元1400上显示移动、点击和双击的情况。移动设备1000接收来自用户的输入,并且基于接收到的输入来向鼠标280传送控制信号。例如,移动设备1000可以从用户接收用于移动光标、点击或双击的命令。

鼠标280控制膝上型PC 290。鼠标280基于从移动设备1000接收到的控制信号来控制膝上型PC 290。

移动设备1000可以通过直接向膝上型PC 290传送控制信号来控制膝上型PC 290。

图22是用于描述根据实施例的移动设备1000控制冰箱295的方法的图。参考图22,移动设备1000与冰箱295配对,并且控制冰箱295。

移动设备1000与冰箱295配对。移动设备1000识别冰箱295并且与冰箱295配对。

移动设备1000控制冰箱295。显示单元1400显示用于控制冰箱295的屏幕图像。图22示出了在显示单元1400处显示温度和列表的情况。移动设备1000接收来自用户的输入,并且基于接收到的输入来向冰箱295传送控制信号。例如,移动设备1000可以从用户接收用于调整冰箱295的温度的命令。

移动设备1000可以从冰箱295接收关于冰箱295的信息并且在显示单元1400处显示该信息。例如,冰箱295可以向移动设备1000传送存储在冰箱295中的内容的列表。移动设备1000在显示单元1400处显示从冰箱295接收到的列表。用户可以参考该列表来调整冰箱295的温度。

图23是用于描述根据实施例的移动设备1000控制可佩戴设备260的方法的图。参考图23,移动设备1000与可佩戴设备260配对,并且控制可佩戴设备260。

移动设备1000与可佩戴设备260配对。移动设备1000识别可佩戴设备260并且与可佩戴设备260配对。

移动设备1000控制可佩戴设备260。显示单元1400显示用于控制可佩戴设备260的屏幕图像。图23示出了显示单元1400显示与在可佩戴设备260处显示的屏幕图像相同的屏幕图像的情况。移动设备1000接收来自用户的输入,并且向可佩戴设备260传送控制信号。

图24是用于描述根据实施例的移动设备1000控制移动设备260的方法的图。参考图24,移动设备1000与另一移动设备260配对,并且控制该另一移动设备260。

移动设备1000与另一移动设备260配对。移动设备1000识别另一移动设备260并且与另一移动设备260配对。

移动设备1000控制该另一移动设备260。显示单元1400显示用于控制另一移动设备260的屏幕图像。图25示出了显示单元1400显示与在另一移动设备260处显示的屏幕图像相同的屏幕图像的情况。移动设备1000接收来自用户的输入,并且向另一移动设备260传送控制信号。

图25是用于描述根据实施例的移动设备1000控制智能电话230的方法的图。参考图25,移动设备1000与智能电话230配对,并且控制智能电话230。

移动设备1000与智能电话230配对。移动设备1000识别智能电话230并且与智能电话230配对。

移动设备1000控制智能电话230。显示单元1400显示用于控制智能电话230的屏幕图像。图25示出了显示单元1400显示与在智能电话230处显示的屏幕图像相同的屏幕图像的情况。移动设备1000接收来自用户的输入,并且向智能电话230传送控制信号。

图26A是用于描述根据实施例的移动设备1000通过使用电子设备的图像来与电子设备配对的方法的图。参考图26A,移动设备1000可以获取电子设备的图像并且选择要配对的电子设备。

在图26A中,在书2600中示出了智能电话140和可佩戴设备130的图像。移动设备1000可以识别书2600中示出的智能电话230和可佩戴设备260,并且在显示单元1400处显示所识别的智能电话230和所识别的可佩戴设备260。

用户从智能电话或可佩戴设备260之前选择要配对的电子设备。

移动设备1000与由用户选择的电子设备配对。移动设备1000确定所选择的电子设备是否在附近,并且通过使用所存储的设备信息来与所选择的电子设备配对。

书中示出的附图或图像可以是在与拍摄所存储的设备信息(即,存储的附图或图像)的角度相比不同的角度绘制或拍摄的附图或图像。在该情况下,移动设备1000可能无法在存储的设备信息中找到书中示出的附图或图像,即使附图和设备信息指示相同的产品。为了解决问题,当移动设备1000存储设备信息时,移动设备1000可以存储以各种角度拍摄的图像或者以不同角度绘制的附图。换言之,所存储的设备信息可以包括关于相同产品的多个图像或多个附图。

图26B是示出存储在移动设备1000中的设备信息的示例的图。参考图26B,示出了智能电话的代表性图像和以各种角度拍摄的智能电话的图像。

如果移动设备1000识别电子设备,则移动设备1000可以将所获取的电子设备的图像与所存储的设备信息中的代表性图像作比较,并且如果所获取的电子设备的图像与所存储的设备信息中的代表性图像不同,则可以将所获取的电子设备的图像与以其他角度拍摄的图像作比较。

移动设备1000可以利用代表性图像和以各种角度拍摄的图像来不仅用于识别书中的附图,也可以识别实际电子设备。

图27是用于描述移动设备1000经由文本与电子设备配对的方法的图。参考图27,移动设备1000可以识别被包括在文本2700中的电子设备的名称,并且选择要配对的电子设备。

在图27中,文本2700包括电子设备的名称。移动设备1000可以识别被包括在文本2700中的名称。移动设备1000分析被包括在输入图像中的文本,并且确定文本2700是否包括电子设备的名称。

移动设备1000识别位于由用户观看的方向上的电子设备的名字。替代地,移动设备1000识别包括在所获取的图像中的电子设备的名称。移动设备1000在显示单元1400处显示对应于所识别的电子设备的名称的电子设备。如果识别了多个电子设备的名称,则可以由用户选择要配对的电子设备。

移动设备1000与所选择的电子设备配对。移动设备1000确定所选的电子设备是否在附近,并且通过使用设备信息来与所选择的电子设备配对。

移动设备1000可以识别经由麦克风接收的电子设备的名称,并且选择要配对的电子设备。如果用户讲出电子设备的名称,则移动设备1000识别经由麦克风由用户发音的电子设备的名称,并且选择要配对的电子设备。

图28是用于描述使根据实施例的移动设备1000登记电子设备的操作的图。参考图28,移动设备1000登记所识别的电子设备。

移动设备1000通过使用经由相机获取的图像来登记电子设备1200。例如,如果用户在指定时间段中看着相同方向,则移动设备1000选择位于用户观看的方向上的电子设备作为要登记的电子设备。或者,移动设备1000可以选择被包括在所获取的图像中的电子设备作为要登记的电子设备。

移动设备1000还可以显示询问是否登记所识别的电子设备的文本。图28示出了用于登记遥控器210的操作,其中,显示单元1400显示询问是否登记遥控器210的文本。

图29是用于描述使根据实施例的移动设备1000登记应用的操作的图。参考图29,移动设备1000登记用于控制所识别的电子设备的应用。应用包括用于控制电子设备的功能。

移动设备1000还可以显示询问是否登记所识别的电子设备的文本。图28示出用于登记“用于控制遥控器的应用”的操作,其中显示单元1400显示询问是否登记应用的文本。

图30是用于描述使根据实施例的移动设备1000登记应用的操作的图。参考图30,移动设备1000登记用于控制所识别的电子设备的多个应用。

移动设备1000可以向用于控制电子设备的不同的时隙指派不同的应用。例如,移动设备1000可以向早晨时隙指派“遥控器控制应用A”,以用于在上午控制遥控器210,并且向下午时隙指派“遥控器控制应用B”,以用于在下午控制遥控器210。

移动设备1000可以显示询问是否登记应用的文本。图30示出了用于登记“遥控器控制应用A”和“遥控器控制应用B”的操作,其中,显示单元1400显示询问是否登记应用的文本。

图31是用于描述使根据实施例的移动设备1000登记应用的操作的图。参考图31,移动设备1000登记用于控制所识别的电子设备的多个应用。

移动设备1000可以向用于控制电子设备的不同位置指派不同的应用。例如,移动设备1000可以向A-位置指派“遥控器控制应用A”,以用于控制A-位置处的遥控器210,并且向B-位置指派“遥控器控制应用B”,以用于控制B-位置处的遥控器210。

移动设备1000可以显示询问是否登记应用的文本。图31示出了用于登记“遥控器控制应用A”和“遥控器控制应用B”的操作,其中,显示单元1400显示询问是否登记应用的文本。

图32是用于描述使根据实施例的移动设备1000登记控制功能的操作的图。参考图32,移动设备1000登记对应于输入单元的控制功能。

移动设备1000登记用于控制电子设备的控制功能。如果可以通过使用输入单元来控制电子设备,则移动设备1000可以将输入单元映射成控制功能。因此,当移动设备1000控制电子设备时,移动设备1000将输入单元的默认功能改变为用于控制电子设备的映射的控制功能。

例如,移动设备1000的第一输入单元可以被映射成遥控器210的频道改变功能,而移动设备1000的第二输入单元可以被映射成遥控器210的音量改变功能。

图33是用于描述使根据实施例的移动设备1000与电子设备配对的操作的图。参考图33,移动设备1000可以与包括在经由相机1200获取的图像中的电子设备配对。

在操作3310中,移动设备1000存储关于多个电子设备的标识信息以及用于与各个电子设备配对的设备信息。移动设备1000存储关于可控制电子设备的标识信息和设备信息。移动设备1000可以获取电子设备的图像,并且从所获取的图像中提取电子设备的特征。移动设备1000可以存储所提取的电子设备的特征作为标识信息。

在另一示例中,移动设备1000可以存储相同类型的电子设备的特征。移动设备1000可以提取和存储遥控器210、TV 240或各种类型的TV 240的特征。移动设备1000可以经由网络接收包括电子设备的特征的数据并且将该数据存储在存储器中。

在操作3320中,移动设备1000经由相机1200获取至少一个电子设备的图像。移动设备1000可以通过使用相机1200来获取图像,并且获取包括在所获取的图像中的电子设备的图像。移动设备1000可以分析经由相机1200输入的图像,并且确定该图像是否包括电子设备。

在操作3330,移动设备1000提取关于被包括在所获取的图像中的电子设备的标识信息。在操作3340中,移动设备1000搜索存储的标识信息并且选择对应于所提取的标识信息的电子设备。如果在存储器中存在对应于所提取的标识信息的标识信息,移动设备1000选择对应于所提取的标识信息的电子设备作为要配对的电子设备。例如,如果所提取的标识信息对应于关于TV 240的标识信息,则移动设备1000选择TV 240作为要配对的电子设备。

在操作3350中,移动设备1000通过使用关于所选择的电子设备的存储的设备信息来与所选择的电子设备配对。

图34是用于描述使根据实施例的移动设备1000识别对象并且提供相关功能的操作的图。参考图34,移动设备1000可以识别人3410、笔3420和橡皮擦3430,并且提供与所识别的对象相关的功能。

移动设备1000可以分析输入图像并且识别包括在图像中的对象。该图像可以包括多个对象。移动设备1000可以提取多个对象的特征,并且基于所提取的特征来识别对象的类型。例如,移动设备1000可以确定对象是人3410、笔3420还是橡皮擦3430。

移动设备1000确定与所识别的对象相同的对象是否被登记。移动设备1000将所识别的对象的特征与预先存储的对象的特征作比较,并且搜索具有匹配所识别的对象的那些特征的对象。

移动设备1000提供关于所识别的对象设置的功能。移动设备1000可以预先设置相对于各个对象的功能。例如,当移动设备识别人3410时,移动设备1000可以设置电话呼叫功能或信使执行功能。

移动设备1000可以基于元件的类型来向元件指派功能。例如,移动设备1000可以向笔3420指派“笔记本”功能。移动设备1000可以向橡皮擦3430指派“擦除”功能。

当识别多个对象时,移动设备1000可以接收来自用户的用于选择功能的输入。移动设备1000可以显示所识别的对象,接收来自用户的输入,并且选择对象中的一个。

移动设备1000提供与所识别的对象相关的功能。例如,如果所识别的对象是特定的人3410,则移动设备1000可以对该人3410进行电话呼叫。或者,如果所识别的对象是笔3420,则移动设备1000可以执行“笔记本”功能。

图35是用于描述使根据实施例的移动设备1000对所识别的人进行电话呼叫的操作的图。参考图35,移动设备1000识别人3410,并且使用登记的电话号码来对所识别的人3410进行电话呼叫。

移动设备1000识别被包括在经由相机1200获取的图像中的人3410。移动设备1000确定所识别的人3410是否是登记的人。如果所识别的人3410是登记的人,则移动设备1000执行相对于登记的人所登记的功能。在图35中,相对于人3410登记的功能是“电话呼叫”功能。登记在移动设备1000中的相对于人3410的电话号码是010-777-7777。因此,移动设备1000使用电话号码010-777-7777来进行电话呼叫。

图36是用于描述使根据实施例的移动设备1000将消息发送到所识别的人的操作的图。参考图36,移动设备1000识别人3410,并且向所识别的人3410传送消息。

移动设备1000识别经由相机1200获取的图像中所包括的人3410。移动设备1000确定所识别的人3410是否是登记的人。如果所识别的人3410是登记的人,则移动设备1000执行相对于所登记的人登记的功能。在图35中,相对于人3410登记的功能是“信使执行”功能。移动设备1000相对于人3410执行信使,并且显示用于向该人3410发送消息的屏幕图像。替代地,移动设备1000可以显示用于向人3410发送消息的屏幕图像。

图37是用于描述使根据实施例的移动设备1000执行对应于所识别的人的应用的操作的图。参考图37,移动设备1000识别人3410,并且执行对应于所识别的人3410的应用3710和3720。

移动设备1000识别包括在经由相机1200获取的图像中的人3410。移动设备1000确定所识别的人3410是否是登记的人。如果所识别的人3410是登记的人,则移动设备1000执行相对于登记的人所登记的功能。在图35中,相对于人3410登记的功能是“应用执行”功能。移动设备1000执行相对于人3410登记的应用。如果相对于单个人3410登记了多个应用3710和3720,则移动设备1000显示第一和第二应用3710和3720,如图37中所示。

如果登记了多个应用3710和3720,则移动设备1000可以从用户接收用于选择要首先执行的应用的输入。移动设备1000可以显示登记的应用3710和3720,接收来自用户的输入,并且选择应用3710和3720中的一个。

图38是用于描述使根据实施例的移动设备1000执行相对于所识别的对象登记的功能的方法的图。参考图38,移动设备1000可以识别对象并且提供相对于所识别的对象登记的功能。

在操作3810中,移动设备1000可以分析输入图像,并且识别包括在图像中的对象。该图像可以包括多个对象。移动设备1000可以提取多个对象的特征,并且基于所提取的特征来识别对象的类型。

在操作3820中,移动设备1000确定与所识别的对象相同的对象是否被登记。移动设备1000将所识别的对象的特性与预先存储的对象的特征作比较,并且搜索具有匹配特征的对象。

在操作3830中,移动设备1000提供相对于所识别的对象设置的功能。移动设备1000可以预先设置相对于各个对象的功能。例如,移动设备1000可以相对于人3410设置“电话呼叫”功能或“信使执行”功能。

移动设备1000可以提供有关事物的功能。例如,移动设备1000可以相对于笔3420登记“笔记本”功能。移动设备1000可以相对于橡皮擦3430登记“擦除”功能。

当识别多个对象时,移动设备1000可以从用户接收用于选择要执行功能的对象的输入。移动设备1000可以显示所识别的对象,接收来自用户的输入,并且选择对象中的一个。

移动设备1000提供与所识别的对象相关的功能。例如,如果所识别的对象是特定的人3410,则移动设备1000可以对该人3410进行电话呼叫。或者,如果所识别的对象是笔3420,则移动设备1000可以执行“笔记本”功能。

图39是用于描述根据实施例的移动设备1000控制传统设备3901的方法的图。参考图39,移动设备1000可以与贴片3903配对,并且经由贴片3903控制传统设备3901。传统设备3901是不具有通信功能的旧式电子设备,并且无法直接连接到移动设备1000。例如,传统设备3901以是具有红外线(IR)通信功能的空调。

贴片3903是附连到传统设备3901的电子设备,并且可以用作通信中继设备。贴片3903可以经由第一类型的通信方法与移动设备1000进行通信,并且经由第二类型的通信方法与传统设备3901进行通信。例如,贴片3903可以经由Wi-Fi与移动设备1000进行通信,并且经由IR通信方法与传统设备3901进行通信。

如果贴片3903与移动设备1000配对,则移动设备1000的显示单元1400显示用于控制传统设备3901的屏幕图像。

用于控制传统设备3901的控制数据可以被存储在贴片3903中。控制数据可以从移动设备1000接收。使移动设备1000获取用于控制传统设备3901的控制数据的操作与使移动设备1000识别电子设备的操作相同。

如果所识别的电子设备被确定为传统设备3901,则移动设备1000可以向附连到传统设备3901的贴片3903传送用于控制传统设备3901的控制数据。移动设备1000可以显示用于控制传统设备3901的屏幕图像。

图39是示出显示单元1400显示传统设备3901的风量和温度的情况的图。用户可以通过使用在移动设备1000的显示单元处显示的虚拟按钮来控制传统设备3901。

例如,移动设备1000控制贴片3903。移动设备1000可以接收用于改变风量的用户输入或用于改变温度的用户输入,并且基于接收到的输入来向贴片3903传送控制数据。贴片3903控制空调。

图40是用于描述根据实施例的眼镜5000控制电子设备的方法的图。参考图40,眼镜5000可以控制TV 6000和智能电话7000以彼此配对。此外,智能电话7000可以无缝地播放用户经由TV 6000正在观看的相同内容。

眼镜5000控制TV 6000和智能电话7000以彼此配对。眼镜5000可以跟踪用户的眼睛,并且确定要彼此配对的电子设备。例如,如果眼镜5000检测到用户看TV 6000,并且然后在智能电话7000处,眼镜5000可以控制TV 6000和智能电话7000彼此配对。TV 6000和智能电话7000彼此配对的表达是指TV 6000和智能电话7000经由有线或无线地彼此连接,并且向和从彼此传送和接收数据。

眼镜5000可以跟踪用户的眼睛。眼镜5000可以跟踪用户的眼球或者检测瞳孔的改变。因此,眼镜5000可以检测到用户正在注视特定方向,并且确定位于该特定方向的电子设备作为要彼此配对的电子设备。

眼镜5000可以识别用户的虹膜。眼镜5000可以提取用户的虹膜的特征点,并且确定佩戴眼镜5000的用户的身份。此外,眼镜5000可以向TV 6000和智能电话7000传送关于所识别的虹膜的信息以进行用户认证。因此,仅登记到眼镜5000、TV 6000、和智能电话7000的用户可以被授权控制眼镜5000、TV 6000和智能电话7000。

如果从眼镜5000接收到的虹膜信息与存储在TV 6000中的虹膜信息相同,则TV 6000可以向眼镜5000传送关于TV 6000的设备信息。眼镜5000可以使用接收到的设备信息来与TV6000配对。

如果从眼镜5000接收到的虹膜信息与存储在智能电话中的虹膜信息相同,则智能电话7000可以向眼镜5000传送关于智能电话7000的设备信息。眼镜5000可以使用接收到的设备信息来与智能电话7000配对。

如果用户在观看TV 6000的同时注视智能电话7000,则眼镜5000可以控制智能电话7000无缝地回放正在TV 6000处回放的内容。眼镜5000可以向智能电话7000传送关于正在TV 6000处回放的内容的信息。智能电话7000可以从TV 6000接收内容并且回放该内容,或者如果智能电话7000存储与正在眼镜5000处回放的内容相同的内容,则智能电话7000可以回放所存储的内容。智能电话7000可以从TV 6000接收书签信息。书签信息是指示在TV6000上回放的内容的回放点的信息。当智能电话7000从TV 6000接收书签信息时,智能电话7000可以基于书签信息来确定内容的回放点。因此,智能电话7000可以无缝地回放在TV6000处正在回放的内容。

图41是用于描述根据实施例的无缝回放内容的方法的流程图。参考图41,智能电话7000可以无缝地回放在TV 6000处正在回放的内容。

在操作4101中,眼镜5000跟踪用户的眼睛,并且确定要配对的电子设备。眼镜5000可以跟踪用户观看的方向并且检测用户的瞳孔大小的改变。眼镜5000可以基于用户的眼睛或瞳孔的改变来确定用户观看的方向。眼镜5000可以确定位于由用户观看的方向上的电子设备作为要配对的电子设备。图41例示了眼镜5000将TV 6000确定为要配对的电子设备的情况。

在操作4102中,眼镜5000识别用户的虹膜。眼镜5000提取用户的虹膜的特征点。

在操作4103中,眼镜5000经由用户的虹膜执行用户认证。用户认证是用于确定佩戴眼镜5000的用户是否被适当授权以控制TV 6000的操作。眼镜5000向TV 6000传送所提取的虹膜的特征点,并且TV 6000通过将所存储的虹膜的特征点与接收到的虹膜的特征点作比较来执行用户认证。当用户认证完成时,眼镜5000和TV 6000可以向和从彼此传送和接收数据,或者眼镜5000可以控制TV 6000。

在操作4104中,TV 6000存储关于用户的使用信息。TV 6000可以存储关于由用户回放的内容的信息。关于内容的信息包括内容的名称、内容的回放点等。TV 6000可以存储关于每个用户的使用信息。因此,如果改变眼镜5000的用户,则TV 6000可以将关于改变的用户的使用信息存储在单独的存储器中。

在操作4105中,眼镜5000跟踪用户的眼睛,并且确定要配对的电子设备。眼镜5000可以跟踪用户观看的方向并且检测用户的瞳孔大小的改变。图41示出了眼镜5000面对的电子设备从TV 6000改变为智能电话7000的情况。因为眼镜5000的用户注视智能电话7000,眼镜5000确定智能电话7000作为要配对的电子设备。

在操作4106中,眼镜5000识别用户的虹膜。眼镜5000提取用户的虹膜的特征点。

在操作4107中,眼镜5000经由用户的虹膜执行用户认证。用户认证是用于确定佩戴眼镜5000的用户是否被适当授权以控制智能电话7000的操作。眼镜5000向智能电话7000传送所提取的特征点,并且智能电话7000通过将所存储的虹膜的特征点与接收到的虹膜的特征点作比较来执行用户认证。当用户认证完成时,眼镜5000和智能电话7000可以向和从彼此传送和接收数据,或者眼镜5000可以控制智能电话7000。

在操作4108中,眼镜5000向智能电话7000传送关于先前电子设备的信息。先前电子设备可以是最近与眼镜5000配对过的电子设备。关于先前电子设备的信息可以包括识别先前电子设备是什么的信息、用于与先前电子设备配对的信息或者关于由先前电子设备回放的内容的信息。在图41中,先前电子设备是TV 6000。因此,眼镜5000向智能电话7000传送关于TV 6000的信息。

在操作4109中,智能电话7000与TV 6000配对。智能电话7000可以基于从眼镜5000接收到的关于TV 6000的信息来与TV 6000配对。智能电话7000请求TV 6000传送内容。

在操作4110中,TV 6000可以向智能电话7000传送正在回放的内容或者最近回放的内容。此外,TV 6000可以向智能电话7000传送指示内容的回放点的信息的书签信息以及内容。

在操作4111中,智能电话7000回放接收到的内容。智能电话7000可以基于书签信息来确定内容的回放点。智能电话7000基于回放点来回放内容。因此,智能电话7000可以无缝地回放在TV 6000处正在回放的内容。

图42是用于描述根据实施例的无缝地回放内容的方法的流程图。图42是用于描述如果智能电话7000存储内容时智能电话7000回放的方法的图。因为智能电话7000存储内容,所以没有必要使智能电话7000从TV 6000接收内容,并且智能电话7000可以基于关于内容的信息来回放内容。

关于图41的操作4101至4107的以上描述也可以应用于操作4201至4207。

在操作4208中,眼镜5000向智能电话7000传送关于用户的使用信息以及关于内容的信息。因为在TV 6000处回放的内容也被存储在智能电话7000中,所以没有必要使眼镜5000向智能电话7000传送正在TV 6000处回放的内容。因此,眼镜5000向智能电话7000传送包括什么内容正被回放以及内容的回放点的内容信息。

在操作4209中,智能电话7000回放存储的内容。智能电话7000基于内容的回放点来回放内容。因此,智能电话7000可以无缝地回放TV 6000处正回放的内容。

图43是用于描述根据实施例的电子设备的图。参考图43,电子设备8000包括通信单元8100、存储器8200、显示单元8300和处理器8400。

通信单元8100从眼镜5000接收关于佩戴眼镜5000的用户的虹膜信息,并且从眼镜5000接收关于由用户使用的先前电子设备的设备信息。例如,虹膜信息可以是关于从用户的虹膜提取的特征点的信息。

通信单元8100从先前电子设备接收内容以及关于内容的书签信息。该内容可以是诸如音乐文件的媒体文件、视频文件、文本文件、图像文件等。

存储器8200存储关于至少一个用户的虹膜信息。

处理器8400通过将接收到的虹膜信息与存储的虹膜信息作比较来识别佩戴眼镜5000的用户,并且通过使用关于先前电子设备的设备信息来与先前电子设备配对。接收到的虹膜信息是指关于佩戴眼镜5000的用户的虹膜的信息,并且所存储的虹膜信息是指存储在电子设备8000的存储器8200中的用户的虹膜信息。处理器8400确定在接收到的虹膜信息和存储的虹膜信息之间的相似性,并且如果该相似性等于或高于设置的临界值,则可以确定接收到的虹膜信息与所存储的虹膜信息相同。仅当接收到的虹膜信息与存储的虹膜信息相同时,处理器8400可以与眼镜5000或另一电子设备配对。

处理器8400基于书签信息来确定内容的回放点,并且控制显示单元8300从回放点回放内容。书签信息指示内容的回放点。处理器8400区分与不同用户相关联的书签信息,并且通过使用关于认证的用户的书签信息来确定内容的回放点。

处理器8400基于书签信息来确定存储在存储器8200中的内容的回放点,并且控制显示单元8300回放该内容。

根据处理器8400的控制,显示单元8300回放在先前电子设备处正在回放的内容。

图44是用于描述根据实施例的无缝回放方法的图。参考图44,TV 6000和智能电话7000可以无缝地回放内容。

眼镜5000可以跟踪用户的眼睛并且确定该用户正在注视的电子设备,并且基于用户的眼睛移动,眼镜5000再次确定用户正在注视的电子设备。例如,如果在用户经由第一电子设备观看内容的同时,用户注视第二电子设备,则第二电子设备无缝地回放在第一电子设备处正在回放的内容。

图44是用于描述在用户A经由TV 6000观看视频的同时用户A注视智能电话7000时,智能电话7000无缝地回放在TV 6000处正回放的视频的方法的图。TV 6000回放视频,并且存储关于用户A的书签A。在视频正在被回放时,书签A被更新。如果用户A注视智能电话7000,则眼镜5000跟踪用户A的眼睛,并且确定用户A所注视的电子设备。眼镜5000控制智能电话7000无缝地回放在TV 6000处正在回放的视频。智能电话7000从眼镜5000和TV 6000接收关于视频的信息。智能电话7000基于接收到的信息从对应于书签A的点回放视频。书签A是从TV 6000或眼镜5000接收的。因此,智能电话7000可以从相应于书签A的点回放视频,并且因此,用户A可以经由智能电话7000无缝地观看在TV 6000上正在回放的视频。

图45是用于描述如果存在多个用户时利用用户定制的书签信息的实施例的图。参考图45,如果用户B佩戴眼镜5000,则TV 6000存储和更新关于用户B的书签B。如果智能电话7000无缝地回放视频,则智能电话7000向TV 6000请求关于用户B书签和视频。TV 6000向智能电话7000传送书签B。智能电话7000基于接收到的书签B回放视频。因此,智能电话7000可以无缝地回放用户B正在观看的视频。

图46是用于描述根据实施例的眼镜5000的图。参考图46,眼镜5000包括眼睛跟踪相机5100、存储器5200、和处理器5300。

眼睛跟踪相机5100获取佩戴眼镜5000的用户的眼睛的图像。眼睛跟踪相机5100向处理器5300传送所获取的图像。

存储器5200存储关于至少一个设备的设备信息。

处理器5300经由所获取的图像跟踪用户的眼睛,并且提取虹膜的特征点。处理器5300可以分析所获取的图像并且检测用户的瞳孔的改变。此外,处理器5300可以分析所获取的图像并且提取虹膜的特征点。

处理器5300基于用户的眼睛来确定要配对的第一电子设备和第二电子设备。第一电子设备是在眼镜5000的控制下正回放内容的电子设备,而第二电子设备是用于无缝地回放正在第一电子设备处回放的内容的电子设备。换言之,第一电子设备和第二电子设备是佩戴眼镜5000的用户依次注视的电子设备。

处理器5300通过使用佩戴眼镜5000的用户的虹膜的特征点来执行与第一和第二电子设备的用户认证。处理器5300执行虹膜认证以确定佩戴眼镜5000的用户被授权以控制第一和第二电子设备。处理器5300可以通过向第一和第二电子设备传送虹膜的特征点来执行虹膜认证。

处理器5300控制第一和第二电子设备以彼此配对。处理器5300控制第一和第二电子设备,使得第二电子设备无缝地回放由第一电子设备正在回放的内容。处理器5300可以向第一电子设备传送关于第二电子设备的设备信息。此外,处理器5300可以向第二电子设备传送关于第一电子设备的设备信息。

图47是用于描述根据实施例的无缝回放内容的方法的流程图。

在操作4710中,电子设备8000接收关于佩戴眼镜5000的用户的虹膜信息并且识别用户。电子设备8000确定是否授权用户控制眼镜5000,并且向眼镜5000传送虹膜认证的结果。

在操作4720中,电子设备8000从眼镜5000接收关于由用户使用的先前电子设备的设备信息。如果用户认证成功,则电子设备8000可以向眼镜5000请求关于先前由用户控制器的先前电子设备的信息。

在操作4730中,电子设备8000通过使用关于先前电子设备的设备信息来与先前电子设备配对。电子设备8000基于关于先前电子设备的设备信息来尝试对先前电子设备的连接。

在操作4740中,电子设备8000回放在先前电子设备处正在回放的内容。电子设备8000可以从先前电子设备接收内容,并且回放接收到的内容。替代地,如果电子设备8000中存储与在先前电子设备处正在回放的内容相同的内容,电子设备8000可以回放所存储的内容。

图48是用于描述根据实施例的配对电子设备的方法的流程图。

在操作4810中,眼镜5000跟踪佩戴眼镜5000的用户的眼睛,并且确定要配对的第一电子设备。

在操作4820中,眼镜5000通过使用用户的虹膜的特征点来执行与第一电子设备的用户认证。如果用户认证成功,则眼镜5000控制第一电子设备。例如,眼镜5000可以控制第一电子设备来回放运动图像或音乐。

在操作4830中,眼镜5000跟踪用户的眼睛的改变,并且确定要配对的第二电子设备。第二电子设备是不同于第一电子设备的电子设备,并且可以连接到与第一电子设备相同的网络。

在操作4840中,眼镜5000通过使用用户的虹膜的特征点来执行与第二电子设备的用户认证。如果用户认证成功,则眼镜5000控制第二电子设备。

在操作4850中,眼镜5000控制第一电子设备和第二电子设备,使得第一电子设备和第二电子设备彼此配对。眼镜5000可以向第二电子设备传送关于第一电子设备的设备信息。第二电子设备可以通过使用关于第一电子设备的设备信息来尝试与第一电子设备配对。

图49是用于描述根据实施例的配对方法和无缝内容回放方法的图。参考图49,智能电话7000可以通过识别用户的虹膜并且跟踪用户的眼睛来与TV 6000配对,其中智能电话7000可以向TV 6000传送内容。此外,TV 6000可以通过识别用户的虹膜并且跟踪用户的眼睛来与智能电话7000配对,其中,TV 6000可以无缝地回放在智能电话7000处正在回放的内容。智能电话7000可以通过识别用户的虹膜来识别用户。智能电话7000可以包括诸如相机的虹膜识别单元,并且经由相机来识别用户的虹膜。智能电话7000可以通过分析通过相机获取的图像来提取用户的虹膜的图像。智能电话7000可以通过将所提取的虹膜图像与存储的虹膜图像作比较来识别用户。智能电话7000可以存储多个用户的虹膜的图像。

智能电话7000可以跟踪用户的眼睛。智能电话7000可以基于通过相机获取的图像的改变来跟踪用户的眼睛。智能电话7000可以通过跟踪用户的眼睛来确定用户观看的方向,并且确定位于由用户观看的方向上的电子设备来作为要配对的电子设备。例如,如果用户注视TV 6000,则智能电话7000可以确定TV 6000来作为要配对的电子设备。

TV 6000可以通过识别用户的虹膜来识别用户。TV 6000可以包括诸如相机的虹膜识别单元,并且经由相机来识别用户的虹膜。TV 6000可以通过分析由相机获取的图像来提取用户的虹膜的图像。TV 6000可以通过将所提取的虹膜图像与存储的虹膜图像作比较来识别用户。TV 6000可以存储多个用户的虹膜的图像。

TV 6000可以跟踪用户的眼睛。TV 6000可以基于由相机获取的图像来跟踪用户的眼睛。TV 6000可以通过跟踪用户的眼睛来确定用户是否正在注视TV 6000,并且如果用户正在注视TV 6000,则TV 6000可以执行虹膜认证。

此外,TV 6000可以确定用户先前使用的电子设备。TV 6000向附近的电子设备传送关于所识别的用户的信息,并且可以从附近的电子设备当中的认证了所识别的用户的电子设备接收用于配对的数据。

TV 6000可以通过使用从附近的电子设备接收到的数据来与附近的电子设备配对。例如,TV 6000可以从附近的电子设备接收MAC地址和设备ID,并且与附近的电子设备配对。例如,如果用户注视TV 6000,则TV 6000可以向附近的电子设备广播用户信息或连接信息。TV6000可以从智能电话7000接收设备信息,并且基于接收到的设备信息来与智能电话7000配对。

图50是用于描述智能电话7000与TV 6000配对并且智能电话7000向TV 6000传送内容的方法的流程图。参考图50,智能电话7000可以跟踪用户的眼睛,并且将内容传送到TV6000。

在操作5010中,智能电话7000执行用户的虹膜的识别和关于用户的用户认证。智能电话7000可以经由相机识别用户的虹膜,并且通过使用所识别的虹膜来执行用户认证。

在操作5020中,智能电话7000回放内容。智能电话7000可以基于来自用户的输入来回放电影、戏剧或音乐。

在操作5030中,智能电话7000跟踪用户的眼睛并且确定要配对的电子设备。智能电话7000可以经由相机跟踪用户的眼睛。基于跟踪用户的眼睛的结果,智能电话7000可以确定用户注视的电子设备作为要配对的电子设备。例如,智能电话7000可以确定TV 6000作为要配对的电子设备。

在操作5040中,智能电话7000与TV 6000配对。智能电话7000可以向TV 6000广播连接信息和虹膜信息。TV 6000还可以识别用户的虹膜,并且确定相应的用户是否与通过智能电话7000认证的用户相同。

在操作5050中,智能电话7000向TV 6000传送内容。如果TV 6000存储相同的内容,则智能电话7000可以向TV 6000传送关于内容的信息。智能电话7000可以向TV 6000传送关于正在回放的内容的信息,并且从TV 6000接收指示相应的内容是否被存储在TV 6000中的信息。智能电话7000可以向TV 6000额外地传送书签信息。

在操作5060中,TV 6000回放从智能电话7000接收到的内容。TV 6000可以基于接收到的书签信息来确定内容的回放点。

因此,用户可以经由智能电话7000和TV 6000无缝地观看内容。

图51A和图51B是用于描述确定电子设备无缝地回放内容的方法的图。参考图51A和图51B,智能电话7000可以跟踪用户的眼睛,并且向TV 6000传送内容以无缝地回放该内容。

在步骤1,在用户经由智能电话7000观看内容的同时,用户注视TV 6000。

在步骤2,智能电话7000显示内容流送(streaming)按钮。因为用户注视TV 6000,所以智能电话7000在内容流送按钮7100处显示对应于TV 6000的图标。如果在用户观看的方向上存在多个电子设备,则智能电话7000显示分别指示多个电子设备的内容流送按钮。智能电话7000可以通过直接跟踪用户的眼睛来确定要在流送按钮7100处显示的电子设备,或者根据来自检测到用户的眼睛的电子设备的请求来在流送按钮7100处显示检测到用户的眼睛的电子设备。

在步骤3,智能电话7000接收来自用户的输入。用户可以通过触摸在智能电话7000处显示的按钮来选择要将内容流送到的电子设备。

在步骤4,智能电话7000将内容流送到所选择的电子设备。例如,智能电话7000可以将内容流送到TV 6000。

图52A和图52B是用于描述确定要无缝地回放内容的电子设备的方法的图。

在步骤1,智能电话7000检测按钮7200上的用户的长按。用户可以长按在智能电话7000的触摸屏上显示的按钮7200,以共享内容。

在步骤2,智能电话7000在用户按压按钮7200的同时跟踪用户的眼睛。在用户按压按钮7200的同时,用户注视要将内容流送到的电子设备。例如,在用户按压智能电话7000的按钮7200的同时,用户注视TV 6000。或者,如果用户保持按压按钮7200,智能电话7000确定附近的电子设备是否检测到用户的眼睛。换言之,如果附近的电子设备检测用户的眼睛,则附近的电子设备可以向智能电话7000传送检测的结果。

在步骤3,如果TV 6000被确定为要将内容流送到的电子设备,则智能电话7000在触摸屏上显示TV 6000,并且生成振动,从而向用户通知确定要将内容流送到的电子设备。智能电话7000可以不仅经由振动而且经由声音或图像来向用户提供反馈。

在步骤4,当用户完成触摸按钮7200时,智能电话7000将内容流送到TV 6000。TV 6000回放流送的内容。

图53是用于描述智能电话7000与TV 6000配对并且智能电话7000向TV 6000传送内容的方法的流程图。参考图53,TV 6000可以检测用户的眼睛,并且从智能电话7000接收内容。

在操作5310中,智能电话7000执行用户的虹膜的识别和关于用户的用户认证。智能电话7000可以经由相机识别用户的虹膜,并且通过使用所识别的虹膜来执行用户认证。

在操作5320中,智能电话7000回放内容。智能电话7000可以基于来自用户的输入来回放电影、戏剧或音乐。

在操作5330,TV 6000执行用户的虹膜的识别和关于用户的用户认证。TV 6000可以经由相机识别用户的虹膜,并且通过使用所识别的虹膜来执行用户认证。

在操作5340中,TV 6000可以向附近的电子设备广播关于所识别的虹膜的信息。TV6000搜索先前由用户使用的电子设备。

在操作5350中,智能电话7000将从TV 6000接收到虹膜信息与经由相机获取的虹膜信息作比较。换言之,智能电话7000确定由智能电话7000获取的虹膜信息是否与由TV 6000获取的虹膜信息相同。

在操作5360中,智能电话7000向TV 6000传送比较的结果。如果通过智能电话7000和TV6000识别相同用户的虹膜,则智能电话7000可以向TV 6000传送用于配对的设备信息。

在操作5370中,TV 6000确定要配对的电子设备。TV 6000确定由用户使用的电子设备作为要配对的电子设备。因为用户经由智能电话7000观看内容,所以TV 6000确定智能电话7000作为要配对的电子设备。

在操作5380中,TV 6000和智能电话7000彼此配对。

在操作5390中,智能电话7000将内容流送到TV 6000。如果智能电话7000不必流送内容,则智能电话7000可以向TV 6000传送仅关于内容的信息。

在操作5395中,TV 6000回放流送的内容。或者,TV 6000可以回放所存储的内容,或者可以回放戏剧或音乐。

图54是用于描述使用书签的无缝回放方法的图。

参考图54,TV 6000和智能电话7000可以通过使用关于用户的书签信息来无缝地回放内容。即使用户不佩戴眼镜,TV 6000和智能电话7000可以识别用户的虹膜或眼睛,并且无缝地回放内容。

TV 6000识别用户的虹膜,并且识别观看TV 6000的用户。例如,用户A可以正观看TV6000。TV 6000生成并且存储关于用户A的书签A。书签A指示关于用户A的内容的回放点。

TV 6000跟踪用户A的眼睛,并且确定用户A是否持续观看内容。如果确定了用户A不再观看内容,则TV 6000存储关于用户A的书签A,并且停止内容的回放。TV 6000生成书签A,书签A指示确定了用户A中止观看内容的回放点。例如,如果没有检测到用户A的眼睛,则TV6000可以确定用户A不再观看内容。

如果确定了用户A再次观看TV 6000,则TV 6000基于书签A回放内容。书签A包括关于用户A正在观看的内容的信息以及指示用户A中止观看内容的回放点的信息。

智能电话7000可以识别用户A的虹膜和眼睛,并且无缝地回放正在TV 6000处回放的内容。智能电话7000跟踪用户A的眼睛,并且确定用户A是否希望观看智能电话7000。智能电话7000识别用户A的虹膜并且识别用户A。

智能电话7000与TV 6000配对。智能电话7000可以从TV 6000接收内容并且回放该内容,回放存储在智能电话7000中的内容,或者从服务器接收内容并回放该内容。

智能电话7000额外从TV 6000接收书签信息。智能电话7000从TV 6000接收关于用户A的书签A,并且确定内容的回放点。智能电话7000可以基于所确定的回放点来回放内容。

图55是用于描述相对于多个用户的无缝回放方法的图。

TV 6000可以跟踪多个用户的眼睛,并且生成关于多个用户的相应书签信息。TV 6000连续跟踪观看TV 6000的用户A和用户B的眼睛。如果确定;用户A不再观看内容,则TV6000TV生成书签A,书签A包括确定了用户A不再观看内容的回放点。TV 6000存储关于用户A的书签A,并且因为用户B连续观看该内容,则连续回放该内容。如果确定了用户B不再观看内容,则TV 6000生成书签B,书签B包括确定了用户B不再观看内容的回放点。如果确定了用户A和用户B都不再观看内容,则TV 6000可以停止内容的回放。

当再次检测到用户A的眼睛时,TV 6000基于书签A回放内容。或者,当再次检测到用户B的眼睛时,TV 6000基于书签B回放内容。

即使用户A或用户B经由除了TV 6000的电子设备观看内容,电子设备也可以从TV 6000接收书签A或书签B,并且无缝地回放内容。

图56是用于描述从附近的电子设备接收内容并且回放内容的电子设备9000的示例的图。参考图56,电子设备9000包括通信单元9100、存储器9200、显示单元9300、相机9400和处理器9500。

通信单元9100可以从附近的电子设备接收关于用户的虹膜信息或设备信息。

通信单元9100从附近的电子设备接收内容和关于该内容的书签信息。该内容可以是诸如音乐文件的媒体文件、视频文件、文本文件、图像文件等。

存储器9200存储关于至少一个用户的虹膜信息。此外,存储器9200还可以存储内容。

显示单元9300在处理器9500的控制下显示内容。显示单元9300可以显示要配对的电子设备或内容流送按钮。

处理器9500获取用户的眼睛的图像。相机9400向处理器9500传送所获取的图像。

处理器9500跟踪用户的眼睛,并且经由通过相机9400获取的图像来提取虹膜的特征点。相机9400基于关于用户的虹膜信息来执行用户认证。

处理器9500确定要配对的电子设备。处理器9500可以通过跟踪用户的眼睛来确定要配对的电子设备。此外,当检测到用户的眼睛时,处理器9500可以向附近的电子设备广播虹膜认证的结果,并且确定要配对的电子设备。

处理器9500可以经由通信单元9100向附近的电子设备传送正在回放的内容。处理器9500向用户正在注视的电子设备传送内容。

处理器9500可以回放从附近的电子设备接收到的内容。处理器9500可以基于接收到的关于内容的信息和接收到的书签信息来回放内容。

根据实施例的电子设备9000可以通过跟踪用户的眼睛来无缝地回放内容。

根据实施例的电子设备9000可以经由虹膜认证来确定是否无缝地回放内容。

如上所述,根据上述示例性实施例中的一个或多个,移动设备可以识别被包括在输入图像中的电子设备,并且与电子设备配对。

根据实施例可的移动设备可以与由所识别的电子设备控制的另一电子设备配对。

根据实施例的移动设备可以跟踪用户的眼睛并且选择要配对的电子设备。

根据实施例的移动设备可以基于用户的选择,来从被包括在所获取的图像中的多个电子设备当中选择要配对的电子设备。

根据实施例的移动设备可以基于用户的手势来选择要配对的电子设备。

本文描述的设备可以包括处理器、用于存储程序数据和执行其的存储器、诸如磁盘驱动器的永久存储单元、用于处理与外部设备的通信的通信端口、以及用户接口设备,包括触摸面板、键、按钮等。当涉及软件模块或算法时,这些软件模块可以在计算机可读介质上被存储为可在处理器上执行的程序指令或计算机可读代码。计算机可读记录介质的示例包括磁存储介质(例如,ROM、软盘、硬盘等)和光学记录介质(例如,CD-ROM或DVD)。计算机可读记录介质还可以分布在网络耦合的计算机系统上,使得计算机可读代码以分布式方式被存储和执行。该介质可以由计算机读取,存储在存储器中,并且由处理器执行。

可以以功能块组件和各种处理步骤的角度来描述本发明原理。这样的功能块可以通过配置为执行指定功能的任何数目的硬件和/或软件组件来实现。例如,本发明原理可以采用各种集成电路(IC)组件,例如存储器元件、处理元件、逻辑元件、查找表等,其可以在一个或多个微处理器或其他控制设备的控制下执行各种功能。类似地,当使用软件编程或软件元件来实现本发明原理的元件时,本发明原理可以通过任何编程或脚本语言利用各种算法来实现,其中,各种编程或脚本语言诸如C、C++、Java和汇编等,各种算法通过数据结构、对象、过程、例程或其他编程元素来实现。各功能方面可以以在一个或多个处理器上执行的算法来实现。此外,本发明原理可以采用任意数目的传统技术来进行电子配置、信号处理和/或控制、数据处理等。词语“机制”、“元件”、“装置”和“配置”被广义地使用,并且不限于机械或物理实现,而是可以包括结合处理器的软件例程等。

本文所示和描述的具体实施方式是本发明原理的说明性示例,并且不意在以其他方式以任何方式限制本发明原理的范围。为简便起见,可以不具体描述传统的电子装置、控制系统、系统的软件开发和其他功能方面。此外,在所呈现的各种附图中示出的连接线或连接器意在表示各种元件之间的示例性功能关系和/或物理或逻辑耦合。应当注意,在实际设备中可以存在许多替代或附加的功能关系、物理连接或逻辑连接。

在描述本发明原理的上下文(特别是在以下权利要求的上下文中)中使用术语“一”和“该”以及类似的引用应当被解释为涵盖单数和复数。此外,本文的值的范围的详述(recitation)仅意在用作单独提及落在该范围的每个单独值的速记(shorthand)方法,除非这里以其他方式指示,并且每个单独值被包含在说明书中,如同其在这里被独立的阐述。而且,这里描述的所有方法步骤可以以任何适当的顺序被执行,除非这里以其他方式指示或者由上下文明确矛盾的。本发明原理不限于所描述的步骤顺序。使用任何和所有示例或这里提供的示例性语言(例如,“诸如”)仅仅意在更好地说明发明原理,并且不对发明原理的范围进行限制,除非另有声明。在不脱离本发明原理的精神和范围的情况下,许多修改和调整对本领域的普通技术人员是显而易见的。

89页详细技术资料下载
上一篇:一种医用注射器针头装配设备
下一篇:头戴式可视设备及用于头戴式可视设备的眼球追踪系统

网友询问留言

已有0条留言

还没有人留言评论。精彩留言会获得点赞!

精彩留言,会给你点赞!