具体实施方式

参考附图描述本发明的实施例。根据本发明实施例的信息处理系统1的配置如图1中所例示的，并且包括诸如家用游戏机或个人计算机(PC)之类的信息处理装置10以及控制器20。在此，可以包括多个控制器20。此外，信息处理系统1还可以包括多个外围装置，每个外围装置都包括声音输入设备(诸如聊天控制器30、头戴式耳机40或头戴式显示器50)，它们可以连接到信息处理装置10。

如图1中所例示的，信息处理装置10包括控制单元11、存储单元12、操作控制单元13、输出控制单元14、声音输入控制单元15和通信单元16。另外，控制器20包括操作单元21、麦克风22、通信单元23、显示单元24和声音输出单元25。另外，聊天控制器30包括操作单元31、麦克风32、通信单元33和显示单元34。

信息处理装置10的控制单元11是诸如中央处理单元(CPU)之类的程序控制设备并且根据存储在存储单元12中的程序进行操作。在本实施例中，假设控制单元11并行执行多个应用程序(执行一般称为多任务过程的过程)。

特别地，在信息处理装置10是家用游戏机的情况下，控制单元11执行各种应用，诸如用于通过网络传送声音信号游戏应用和聊天应用。另外，控制单元11执行系统程序，并且作为系统程序的处理，为每个装置执行用于认证使用相关装置(诸如控制器20或头戴式耳机40)的用户的过程，将用于指定用户的信息(例如，用户名)与用于指定装置(诸如控制器20)的每个信息相关联并且存储相关联的信息。

然后，如果控制单元11从操作控制单元13与用于指定控制器20的信息一起接收操作信息的输入，那么控制单元11从正在被执行的应用当中选择变成操作信息的输出目的地的应用。在此，选择输出目的地的条件以以下方式预先确定就足够了：例如，在运行游戏应用时，原则上选择游戏应用并由系统异常处理预定的操作信息并且根据条件执行选择。

作为操作信息的输出目的地的应用或系统的过程，控制单元11执行使用从操作控制单元13输入的用于指定控制器20的信息以及操作信息的过程。另外，当要混合从多个装置单独接收的多条声音信息时，控制单元11确定每个声音信号的混合的音量。稍后描述控制单元11的操作。

存储单元12是存储器设备、硬盘驱动器等并且保存要由控制单元11执行的程序。另外，存储单元12还作为控制单元11的工作存储器操作。

操作控制单元13通过无线或有线通信连接到控制器20以进行通信，并从控制器20接收代表用户使用控制器20执行的操作的实质的操作信息，以将接收到的操作信息连同用于指定作为操作信息的传输源的控制器20的信息一起输出到控制单元11。

另外，在本实施例中，操作控制单元13根据从控制单元11输入的指令向由该指令指示的控制器20发送出显示控制信号等。

输出控制单元14连接到诸如家用电视机、监视器或头戴式显示器50之类的显示设备，并根据从控制单元11输入的指令向显示设备输出声音、视频等的信号。另外，输出控制单元14可以向彼此不同的装置输出视频和声音信号。例如，可以将视频输出到监视器，并且可以将声音信号输出到控制器20或头戴式耳机40。

声音输入控制单元15从包括诸如声音输入设备的外围装置(诸如控制器20、聊天控制器30、头戴式耳机40和头戴式显示器50)接收声音信号。另外，如图2中所例示的，声音输入控制单元15包括混合器单元151、静音单元152、开关单元153和输出单元154，并通过混合器单元151合成接收到的声音信号当中从除预先确定的装置以外(例如，除聊天控制器30以外)的装置输入的声音信号。

特别地，混合器单元151确定从各个装置(诸如控制器20、头戴式耳机40和头戴式显示器50)接收到的每个声音信号的音量并且合成从具有确定音量的各个装置接收到的声音信号。在本实施例的某个示例中，混合器单元151根据从控制单元11输入的指令确定从每个装置接收到的声音信号的音量。

另外，例如，在控制单元11将来自头戴式耳机40的声音信号的音量设置为“255”并将其它声音信号的音量设置为“0”的情况下，混合器单元151也起到作为选择部件的作用。在这个示例中，混合器单元151选择性地仅从头戴式耳机40输出声音信号。另外，在这种情况下，即使存在从头戴式耳机40以外的控制器20、头戴式显示器50等接收到的声音信号，此类声音信号也不包括在混合器单元151的输出中。

另外，在本实施例的示例中，多个控制器20可能连接到信息处理装置10。而且在这种情况下，混合器单元151根据从控制单元11输入的指令确定从每个控制器20接收到的声音信号的音量。例如，在从控制单元11输入指令以将从用户A使用的控制器20a接收到的声音信号的音量设置为“255”并且将从其他用户B和C使用的控制器20b和20c接收到的声音信号的音量设置为“0”的情况下，混合器单元151选择性地输出从控制器20a接收到的声音信号。

静音单元152根据从控制单元11输入的指令在原样输出或不输出(静音)之间切换从混合器单元151输出的声音信号。当控制单元11输出不静音的指令时，静音单元152原样输出从混合器单元151输出的声音信号。另一方面，当控制单元11输出静音指令时，静音单元152丢弃(静音)从混合器单元151输出的声音信号而不向开关单元153输出该信号。

开关单元153从由信息处理装置10接收的声音信号当中接收来自装置的未输入到混合器单元151的声音信号(这种声音信号在下文中被称为中断声音信号；在此处的示例中，从聊天控制器30接收到的声音信号)的输入。另外，当静音单元152输出声音信号时，开关单元153接收声音信号的输入。开关单元153根据从控制单元11输入的指令选择性地输出从静音单元152接收的声音信号(如果有的话)和中断声音信号(如果有的话)之一。

输出单元154将从开关单元153输出的声音信号输出到控制单元11。以这种方式，根据本实施例的一个示例的声音输入控制单元15从各自包括声音输入设备的外围装置接收声音信号、混合声音信号或选择声音信号之一，并输出结果所得的声音信号以供在控制单元11中处理。

通信单元16是网络接口等，并且根据从控制单元11输入的指令通过网络传输各种信息。另外，通信单元16将通过网络接收到的信息输出到控制单元11。

控制器20的操作单元21包括按钮、操纵杆等，并且接收用户的操作，以向通信单元23输出代表由用户执行的操作的实质的操作信息。同时，麦克风22收集周围的声音并输出代表收集到的声音的数字声音信号。

通信单元23是例如蓝牙(注册商标)的无线通信部件，并且将代表由用户在操作单元21上执行的操作的实质的信息(操作信息)输出到信息处理装置10。另外，通信单元23将从麦克风22输出的声音信号输出到信息处理装置10。另外，通信单元23向显示单元24输出从信息处理装置10输出的显示控制信号。此外，在从信息处理装置10接收到声音信号后，通信单元23将接收到的声音信号输出到声音输出单元25。

显示单元24包括例如发光二极管(LED)等。显示单元24从通信单元23接收显示控制信号的输入并且打开或关闭LED。声音输出单元25是包括振动器的设备(诸如扬声器)并且基于从信息处理装置10接收到的声音信号生成声音。

另外，聊天控制器30是仅当用户给出关于声音输入的指令时才接收并输出声音的输入的一般被称为一键通设备(PTT设备)，并且聊天控制器30的操作单元31包括例如按钮。另外，麦克风32收集周围的声音并将其转换成声音信号并输出声音信号。

通信单元33是例如蓝牙(注册商标)等的无线通信部件，并且在用户按下操作单元31的按钮的同时将从麦克风32输出的声音信号输出到信息处理装置10。另一方面，当用户没有按下操作单元31的按钮时，通信单元33丢弃从麦克风32输出的声音信号而不将声音信号输出到信息处理装置10。此外，通信单元33将从信息处理装置10输出的显示控制信号输出到显示单元34。

显示单元34包括例如LED等。显示单元34从通信单元33接收显示控制信号的输入并且打开或关闭LED。稍后还将描述聊天控制器30的操作。

头戴式耳机40包括例如耳机、麦克风等。头戴式耳机40基于从信息处理装置10输出的声音信号使扬声器生成声音。另外，头戴式耳机40将由麦克风收集的声音信号送出到信息处理装置10。

头戴式显示器50包括显示器、扬声器和麦克风。头戴式显示器50接收从信息处理装置10输出的视频信号和声音信号，以在显示器上显示图像并使扬声器生成声音。另外，头戴式显示器50将由麦克风收集的声音信号送出到信息处理装置10。

在此，描述信息处理装置10的控制单元11的操作。在本实施例中，控制单元11在功能上包括声音输入处理单元111、静音处理单元112、中断处理单元113和显示处理单元114，如图3中系统的处理所例示的。

要注意的是，在本实施例的以下描述中，假设控制单元11预先确定连接到信息处理装置10并且包括声音输入设备的设备之一作为中断装置。

声音输入处理单元111对作为包括声音输入设备的装置的目标装置执行以下处理(在确定中断装置的情况下，中断装置从目标装置中排除)。声音输入处理单元111根据预定规则为连接到信息处理装置10的每个目标装置确定混合的音量。这个预定规则可以是例如诸如如下所述的。特别地，控制单元11预先确定目标装置的优先级次序，并将从与其连接的目标装置当中优先级次序最高的目标装置接收到的声音信号的混合的音量设置为预先确定并且大于0(不包括0)的值。对于这个值，例如可以设置最高值，或者也可以针对每个目标装置设置根据目标装置的类型而不同的不同值；在以下描述中，大于0的值被称为输出值。另外，将从连接的装置当中优先级次序最高的目标装置以外的目标装置接收到的声音信号的混合的音量设置为最低值。这个最低值是表示例如音量“0”的值就足够了。这个最低值在下文中被称为“截止值”。

要注意的是，此处的规则和音量的设置只是示例，并且各种其它方法都可用。例如，控制单元11可以为由用户选择的目标装置将从选择的目标装置接收到的声音信号的混合的音量设置为预先确定的输出值，并且将从任何其它目标装置接收到的声音信号的混合的音量设置为截止值。

另外，考虑其中多个用户使用信息处理装置10的情况，规则可以是诸如下面描述的。特别地，

(1)原则上为每个用户选择一个目标装置；

(2)在为每个用户选择的目标装置是预先确定为包括不太可能收集除相关用户的语音以外的声音的声音输入设备的目标装置的情况下，相关目标装置的混合的音量被设置为输出值；

(3)在为每个用户选择的目标装置不是预先确定为包括不太可能收集除相关用户的语音以外的声音的声音输入设备的装置的目标装置的情况下(为便于描述，这种刚刚描述的目标装置被称为宽范围声音收集装置)，从其选择的目标装置是宽范围声音收集装置的用户当中选择一个用户，并且为所选择的用户选择的目标装置的混合的音量被设置为输出值；以及

(4)其混合中的音量没有被设置为(2)和(3)中的输出值的目标装置的混合的音量被设置为截止值。

根据这个示例，对于使用头戴式耳机40或其中麦克风指向性相对高的类似设备作为声音输入设备的用户，使得由头戴式耳机40收集的声音信号被用在作为应用的处理中。另一方面，对于使用作为其中麦克风指向性相对低的宽范围声音收集装置的控制器20作为声音输入设备的用户，使得仅由由使用控制器20作为声音输入设备的用户之一操作的控制器20收集的声音信号被用在作为应用的处理中。

要注意的是，在这两种情况下，当使用宽范围声音收集装置的用户操作控制器20以发出输入声音信号的请求时，宽范围声音收集装置(诸如用户的控制器20)的混合音量被设置为输出值，并且任何其它宽范围声音收集设备的混合音量被设置为截止值。

当静音处理单元112接收用于静音的操作信息作为从用户操作的控制器20接收的操作信息时，它向声音输入控制单元15输出静音指令。

中断处理单元113可以根据从预先确定的中断装置输入的指令(例如，请求选择的指令)，将选择从中断装置接收到的声音信号的指令输出到声音输入控制单元15。另外，如果从中断装置接收到取消选择的指令，那么控制单元11向声音输入控制单元15输出选择从除中断装置以外的任何装置接收的声音信号的指令。

显示处理单元114响应于从声音输入处理单元111、静音处理单元112和中断处理单元113输出的指令而向装置输出显示控制信号以指示声音信号的输入状态。稍后描述这个显示控制信号的特定示例。

[操作的示例]

本实施例的信息处理系统1基本上包括如上所述的这种配置并且以如下方式操作。下面，将描述三个用户A、B和C玩共享一个信息处理装置10的游戏的示例(图4(a))。

此时，假设用户A、B和C分别通过握持控制器20a、20b和20c进行操作。特别地，信息处理装置10最初对操作控制器20的用户进行认证并且与指定控制器的信息相关联地记录指定经认证的用户的信息。另外，假设作为中断装置的聊天控制器30连接到信息处理装置10。

此时，假设信息处理装置10遵守以下规则作为预先确定的规则。

(1)原则上为每个用户选择一个目标装置；

(2)在为每个用户选择的目标装置是预先确定为包括不太可能收集除相关用户的语音以外的声音的声音输入设备的目标装置的情况下，相关目标装置的混合的音量被设置为输出值(图4中的“255”)；

(3)在为每个用户选择的目标装置不是预先确定为包括不太可能收集除相关用户的语音以外的声音的声音输入设备的装置的目标装置的情况下(为便于描述，这种刚刚描述的目标装置被称为宽范围声音收集装置)，从其选择的目标装置是宽范围声音收集装置的用户当中选择一个用户，并且为所选择的用户选择的目标装置的混合的音量被设置为输出值；以及

(4)其混合中的音量没有被设置为(2)和(3)中的输出值的目标装置的混合的音量被设置为截止值。

因此，将连接到信息处理装置10的控制器20a、20b和20c设置为目标装置，信息处理装置10根据预定规则确定用于每个目标装置的混合的音量。在此，假设控制器20是宽范围声音收集装置。在这个示例中，基于上述预定规则，信息处理装置10例如将首先连接的控制器20(假设这是用户A的控制器20a)的混合的音量设置为输出值，并将从任何其它目标装置输出的声音信号的混合的音量设置为截止值。

因此，在信息处理装置10中，由用户A使用的控制器20a收集并送出到信息处理装置10的声音信号被用在应用的处理中。

例如，如果应用是聊天应用，那么信息处理装置10向聊天伙伴发送出已经由控制器20a收集并送出到信息处理装置10的声音信号。另一方面，信息处理装置10将从伙伴接收到的声音信号输出到通过预定方法确定的输出目的地(例如，此处的控制器20a、20b和20c)。

此时，通过信息处理装置10的声音输入控制单元15的操作，丢弃从控制器20b和20c发送出的声音信号。因此，防止由控制器20a、20b和20c收集的声音被混合，从而避免了语音的消音或回声的生成。

另外，如果用户C在此穿戴头戴式耳机40并且被信息处理装置10认证为头戴式耳机40的用户(图4(b))，那么使用新装置的认证作为触发器，信息处理装置10再次将连接到信息处理装置10的控制器20a、20b和20c和用户C使用的头戴式耳机40设置为目标装置，并根据上面提到的规则确定每个目标装置的混合的音量。

在此，假设头戴式耳机40不是宽范围声音收集装置，那么此处的信息处理装置10首先基于上述预定规则为用户C将头戴式耳机40的混合的音量确定为输出值。另一方面，对于其他用户A和B，信息处理装置10例如首先将连接的控制器20(此处是用户A的控制器20a)的混合的音量确定为输出值，并将从任何其它目标装置(用户B的控制器20b)接收到的声音信号的混合的音量确定为截止值。

此时，由用户C发出的声音被头戴式耳机40收集。然后，由用户A使用的控制器20a收集并送出到信息处理装置10的声音信号和从头戴式耳机40发送出的声音信号被混合并用在应用的处理中。

此时，通过信息处理装置10的声音输入控制单元15的操作，丢弃从控制器20b和20c发送出的声音信号。因此，防止由控制器20a、20b和20c收集的声音被混合，从而避免了语音的消音或回声的生成。要注意的是，由于头戴式耳机40具有相对高的指向性，因此从头戴式耳机40输出的声音信号中包括的用户A的声音足够小。因此，即使通过头戴式耳机40的声音收集获得的声音信号与从控制器20a发送出的声音信号混合，也防止声音信号混合，从而避免语音的消音或回声的生成。

另外，如果用户B在此操作控制器20b以执行用于请求输入声音信号的操作，那么代表操作实质的信息被传输到信息处理装置10。信息处理装置10接收该请求，并将头戴式耳机40的混合的音量维持在用于用户C的输出值。另外，信息处理装置10将已请求输入声音信号的控制器20b的混合的音量设置为输出值，并将从任何其它目标装置(用户A的控制器20a)接收到的声音信号的混合的音量设置为截止值。

此时，通过信息处理装置10的声音输入控制单元15的操作，丢弃从控制器20a和20c发送出的声音信号。因此，防止由控制器20a、20b和20c收集的声音被混合，从而避免了语音的消音或回声的生成。

另外，执行聊天应用的处理的信息处理装置10将从聊天伙伴接收的声音信号输出到每个控制器20，使得声音由控制器20生成。

[静音]

另外，在本实施例的示例中，如果用户之一操作其控制器20以发出静音指令，那么来自包括声音输入设备的每个装置(除中断装置外)的声音信号被静音。简而言之，在本实施例的示例中，如果从控制器20等中的任何一个发出静音指令，那么切断所有声音输入。

特别地，如果用户A、B和C之一操作由用户自己操作的控制器20以发出静音指令，那么表示已执行静音操作的操作信息被送出到信息处理装置10。

信息处理装置10从控制器20接收指示要执行静音的操作信息并且向声音输入控制单元15输出静音指令。此时，无论声音输入控制单元15的混合器单元151正在用哪种音量设置混合从各个装置发送出的声音信号，静音单元152都以使得从混合器单元151输出的声音信号不被输出(静音)的方式执行控制。

因此，静音一般由用户的一次操作来执行，不需要为每个装置设置静音的劳力，并且提高了静音的可操作性。

另外，取决于静音指令的实质(例如，在用于静音指令的按钮被长按等的情况下)，控制单元11可以执行不输出声音信号(全部静音)的这种控制，作为输出控制单元14的过程。由此，也停止从电视机、头戴式耳机和控制器20输出的声音。

[包括声音输入设备的外围装置侧的静音]

在此，在包括声音输入设备的外围装置侧(诸如控制器20)有可能控制是否要发送出声音信号的情况下，当某个用户操作其控制器20以发出静音指令时，信息处理装置10可以指示上述这种外围装置停止发送出声音信号。

[输出模式]

另外，在本实施例中，从声音输入控制单元15接收声音信号的输入的控制单元11通常执行这种控制，使得输入的声音信号可以被控制单元11正在执行的任何应用使用。在下文中，为了便于描述，其中控制单元11执行刚刚描述的这种控制的操作模式被称为共享模式。但是，在本实施例的某个示例中，有时优选的是输入的声音信号仅由特定应用使用。

特别地，来自中断装置的声音信号(在此处的示例中，来自聊天控制器30)可以仅由特定应用使用。

另外，如果即使应用要求声音输入静音状态也有效，那么声音输入被禁用。因此，当响应于来自应用侧的请求而暂时建立可以取消静音的状态时，在暂时取消静音的状态下输入的声音信号应当仅输出到通过其已发出这个请求的应用。

因此，如果在一个应用的处理中声音输入变得必要，那么控制单元11将指示请求声音输入的显示输出到监视器等，并且暂时保留指定应用的信息(可以是应用名称)。

在此，如果用户通过其控制器20执行预定操作以取消静音，那么控制单元11检测到该操作已被执行并控制声音输入控制单元15的混合器单元151使得已为其执行操作的控制器20的混合音量被设为最大(对于其它控制器20等，混合音量被设置为截止值)。要注意的是，当对多个控制器20执行取消静音操作时，可以仅针对最早执行取消静音操作的控制器20将混合音量设置为最大。

然后，控制单元11在一段时间内使用已经从控制器20接收到的声音信号，直到用户随后通过其控制器20执行静音操作或者直到预定时间段经过之后，用于处理由之前暂时保留的信息(暂时取消静音)指定的应用。这个声音信号被设置为对于除由该信息指定的应用以外的任何应用不可用。为了便于描述，将执行这个设置时控制单元11的操作模式称为排他模式。

刚刚描述的这种排他模式的控制类似于众所周知的操作系统的操作，该操作系统在仅特定应用的处理中使用输入的信息，因此在此省略详细描述。

[静音状态等的显示]

现在，描述显示处理单元114的显示控制信号的示例。在本实施例的示例中，控制单元11在各个情况下输出

(1)用于在非静音状态下关闭显示单元24的LED的显示控制信号，

(2)用于在静音状态下开启显示单元24的LED的显示控制信号，以及

(3)用于在全静音状态下使显示单元24的LED闪烁的显示控制信号。

据此，由于从信息处理装置10输出代表静音/取消静音状态的显示控制信号并且控制器20等根据显示控制信号改变显示单元24的显示(改变为关闭、开启或闪烁)从而清楚地指示静音状态有效，因此用户可以容易地识别出有可能输入声音的状态是否有效。

另外，在本实施例中，控制单元11

(4)可以向其混合音量被设置为截止值的设备输出显示控制信号，该显示控制信号以可以区分闪烁与全静音状态下的闪烁的模式使显示单元24的LED闪烁。

在此，可以将闪烁与全静音状态下的闪烁区分开来的模式可以是使得闪烁的周期比全静音状态下更长。据此，可以清楚地指示不能通过用户自己拥有的控制器20执行声音输入的情况作为不同人正在执行声音输入的情况。

另外，虽然在此控制显示单元24的LED，但是显示单元24可以被形成为例如液晶显示单元，使得改变液晶显示单元的背光的颜色或显示内容改变以向用户通知状态。

[附图标记列表]

1：信息处理系统

10：信息处理装置

11：控制单元

12：存储单元

13：操作控制单元

14：输出控制单元

15：声音输入控制单元

16：通信单元

20：控制器

21：操作单元22：麦克风

23：通信单元24：显示单元25：声音输出单元30：聊天控制器31：操作单元32：麦克风

33：通信单元34：显示单元40：头戴式耳机50：头戴式显示器111：声音输入处理单元112：静音处理单元113：中断处理单元114：显示处理单元151：混合器单元152：静音单元153：开关单元154：输出单元。