便携式终端设备及其控制方法和记录控制程序的记录介质

摘要

本发明提供了一种包括相机、扬声器、判断单元和控制单元的便携式终端设备。相机检测图像。扬声器输出通知音。判断单元基于来自所述相机的视频信号、以预定时间间隔来判断所述便携式终端设备周围是否较亮。控制单元在判断单元每一次进行判断之后根据判断结果进行控制，以将所述扬声器的输出音量增大或降低预定值。还公开了便携式终端设备的控制方法以及记录程序的记录介质。

说明书

技术领域

本发明涉及便携式终端设备及其控制方法和记录控制程序的记录介质，具体而言，涉及具有检测图像的相机的便携式终端设备及其控制方法，以及记录控制程序的记录介质。

背景技术

近来的例如蜂窝电话的便携式终端设备配备有照相功能。特别是折叠式便携式终端设备具有两个相机：一个相机装在具有键盘和LCD的前表面上，另一个相机装在次LCD侧的后表面上，即使当便携式终端设备被折叠时，所述后表面也作为外部表面。这些相机可以拍照静止的和移动的图像，类似于数字相机。

在所安装的两个相机中，在后表面上的相机在折叠状态下朝向外部，并且在这种状态下不工作。如果需要，可以使用这个相机的功能，并且便携式终端设备可以在某种程度上掌握其当前情况。

便携式终端设备的用户通常将其放在口袋或包里，并且便携式终端设备常常在口袋或包里发出响铃。当便携式终端设备发出响铃时，用户将其取出并按下通话按钮。在这一系列操作中，对于用户周围的人来说，响铃音在包中时是安静的，但是当便携式终端设备被从包中拿出时就突然变得很大。响铃音变得刺耳。

关于减轻响铃音对便携式终端设备周围人群造成的不舒适度的技术，例如在参考文献1(日本特开No.2000-184013(第2到4页，图1))中公开了一种技术。在参考文献1中，基于来自蜂窝电话相机的图像检测信号，来判断周围的明亮度。响铃音大小在便携式终端设备周围较暗时被设置为开始的大小，而在周围较明亮时被设置为低于最初大小的大小。

但是，需要比上述技术更合适于周围环境的控制，来更加精细地随着时间的变化来控制响铃音大小，并更精确地判断周围的明亮度。

发明内容

本发明被用来克服传统的缺陷，并且其目的为通过进行比响铃音大小的传统控制更适合于周围环境的控制，来进一步减少响铃音对便携式终端设备周围人群的不舒适度。

为了实现上述目的，根据本发明，提供了一种便携式终端设备，其包括：检测图像的相机，用于输出通知音的音频输出装置，用于基于来自所述相机的视频信号、以预定时间间隔来判断所述便携式终端设备周围是否较亮的判断装置，以及用于在所述判断装置每一次进行判断之后根据判断结果进行控制，以将所述音频输出装置的输出音量增大或降低预定值的控制装置。

根据本发明，提供了一种控制便携式终端设备的方法，所述便携式终端设备包括检测图像的相机以及用于输出通知音的音频输出装置，所述方法包括如下步骤：基于来自相机的视频信号、以预定时间间隔来判断所述便携式终端设备周围是否较亮，以及在每一次进行判断之后根据判断结果进行控制，以将所述音频输出装置的输出音量增大或降低预定值。

附图说明

图1A和1B是示出了根据本发明实施例的便携式终端设备的外观的视图，其中，图1A示出了便携式终端设备没有折叠的状态，图1B示出了设备被折叠的状态；

图2是示出了根据本发明实施例的便携式终端设备的配置的框图；

图3是示出了根据本发明实施例的便携式终端设备的操作的流程图；

图4A到4C是用于解释根据本发明实施例进行明亮度的判断的图；

图5是示出了根据本发明实施例的便携式终端设备的另一种操作的流程图；

图6A是示出了形成一帧的处理块的视图；

图6B是示出了一帧中约一半较亮而剩余一半较暗的情况的视图；

图7是示出了对图3的操作的修改的流程图；以及

图8是示出了对图5的操作的修改的流程图。

具体实施方式

下面将参照附图描述本发明的优选实施例。

图1A和1B示出了根据本发明实施例的便携式终端设备的外观。更具体地说，图1A示出了便携式终端设备没有折叠的状态，图1B示出了设备被折叠的状态。

在图1A中，根据本发明实施例的便携式终端设备具有可折叠结构，其中，主体1和翻盖2可以通过铰链3折叠。即，终端设备可以用铰链3作为轴，而以图1A中所示箭头的指示方向被折叠和打开。如图1A所示，主体1包括用于用户操作的操作部分5和麦克风8。翻盖2包括第一显示器6、扬声器9和第一相机10。如图1B所示，第二显示器7和第二相机11被装到翻盖2的与具有第一显示器6的表面相对一侧上的表面。翻盖2还包括发送和接收无线电波的天线4。

图2示出了根据本发明实施例的便携式终端设备的配置。在图2中，与图1A和图1B中相同的标号指示相同的部件。如图2所示，根据本发明实施例的便携式终端设备包括天线4、无线电单元(发送/接收数据处理单元)12、由例如LCD构成的显示器6和7、麦克风8、扬声器(音频输出单元)9、相机10和11、操作部分5、计算单元13、判断单元14、控制单元15、存储器16和接口(I/F)17。

相机10和11是安装在便携式终端设备上的便携式终端相机，并具有将所检测的图像转换为YCBCR数据并输出该数据的功能。从相机10和11输出的视频信号由控制单元15处理。显示器6和7基于被控制单元15处理的视频信号来显示图像。操作部分5作为便携式终端设备的键输入设备，其包括0到9的数字键、光标键、功能键等。在便携式终端设备接收到呼入信号时，扬声器9产生响铃音并通知终端的用户。

计算单元13基于来自第二相机11的视频信号来计算终端设备周围的亮度水平。判断单元14将计算单元13的计算结果与指定值进行比较，并判断终端设备周围的明亮度。控制单元15根据存储在存储器16中的控制程序19工作，并且控制便携式终端设备的各个部件。控制单元15由CPU(计算机)形成。控制程序19以记录在记录介质18上的状态而被提供，所述记录介质18例如为光盘、磁盘或者半导体存储器。当记录介质18被连接到I/F 17时，控制单元15读出记录在记录介质18上的控制程序19，并将控制程序19存储到存储器16中。

将参照附图解释根据本发明实施例的便携式终端设备的操作。图3示出了根据本发明实施例的便携式终端设备的操作。

如图3所示，如果便携式终端设备接收到呼入信号(步骤S101中为“是”)，那么计算单元13基于来自第二相机11的视频信号来计算终端设备周围的亮度水平(步骤S102)。判断单元14将计算单元13的计算结果与指定值进行比较，并判断终端设备周围的明亮度(步骤S103)。

图4A到4C解释了通过将计算单元13所计算的亮度水平与指定值进行比较来判断明亮度。如图4A所示，当计算出的亮度水平高于指定值时判断为是亮的，当计算出的亮度水平等于或低于指定值时判断为是暗的。可以根据需要而改变指定值。如图4B和4C所示，还有可能单独设定在状态从暗的状态变到亮的状态时所使用的指定值，以及在状态从亮的状态变到暗的状态时所使用的指定值。在图4B和4C所示的例子中，从暗状态变为亮状态时所使用的指定值被设定在“亮”侧，而从亮状态变为暗状态时所使用的指定值被设定在“暗”侧。

回到图3，如果周围的亮度水平高于指定值，即在终端设备周围较亮(步骤S103中为“是”)时，控制单元15将使得扬声器9开始以预定的小音量产生响铃音(步骤S104)。如果周围的亮度水平等于或低于指定值，即终端设备周围较暗(步骤S103中为“否”)时，控制单元15将使得扬声器9开始以预定的大音量产生响铃音(步骤S105)。

如果用户通过按下预定键来响应来电(步骤S106中为“是”)，那么在控制单元15的控制下完成语音通信过程(步骤S114和S115)。

如果用户没有响应来电并且在步骤S102和S103的明亮度判断处理之后已经经过一段预定时间(步骤S106和S107)，那么再次执行明亮度判断处理。即，计算单元13类似于步骤S102再次计算周围的亮度水平(步骤S108)，并且判断单元14类似于步骤S103判断终端设备周围是否较亮(步骤S109)。

如果终端设备周围较亮(步骤S109中为“是”)，那么控制单元15进行控制以将从扬声器9中输出的响铃音量降低一个等级(步骤S110)。响应于此，响铃音量降低预定值。如果终端设备周围较暗(步骤S109中为“否”)，那么控制单元15进行控制以将响铃音量增大一个等级(步骤S111)。响应于此，响铃音量增大预定值。

如果用户响应来电(步骤S112中为“是”)，那么停止产生响铃音，并且在控制单元15的控制下完成语音通信过程(步骤S114和S115)。

如果用户没有响应来电并且在步骤S108和S109的明亮度判断处理之后已经经过一段预定时间(步骤S112和S113)，那么再次执行明亮度判断处理。响铃音量根据判断单元14的判断结果而增大或降低一个等级。

在图3所示的操作示例中，通过以预定时间间隔判断明亮度来控制响铃音量。可以根据随时间变化的环境来正确地控制响铃音量。

在上面所述的传统控制中，当设定了多个被用于判断明亮度的参考水平并且响铃音量在多个等级间切换时，响铃音量可能在周围明亮度发生很大变化时发生显著变化。相反地，在图3所示的操作示例中，不管周围明亮度有多大变化，响铃音量都只是增加或降低一个等级。这可以防止响铃音量的很大改变，并进一步减轻了响铃音对便携式终端设备周围人群造成的不舒适度。

在图3所示的操作示例中，当呼入信号到来(步骤S101)时，进行步骤S102和后续步骤中的处理。或者，可以在收到邮件时进行步骤S102和后续步骤中的处理。在这种情况下，步骤S104、S105、S110和S111中的控制目标是用于通知用户收到邮件的邮件接收通知消息的输出音量，并且不进行步骤S115中的语音通信过程。

在图3所示的操作示例中，基于来自装在便携式终端设备后表面上的第二相机11的视频信号来判断明亮度。或者，可以使用第一相机10。例如，当便携式终端设备没有折叠时，可以基于来自第一相机10的视频信号来判断明亮度。

根据判断单元14的判断结果，除了可以控制响铃音量之外，还可以控制第二显示器7的明亮度。例如，当终端设备周围较暗时，稍微降低第二显示器7的明亮度。这是因为在较暗的地方，即使第二显示器7的明亮度稍微低些，用户也可以看到屏幕显示。相反，如果终端设备周围较亮时，增加第二显示器7的明亮度。这是因为在较亮的地方，除非增加第二显示器7的明亮度否则用户不能看到屏幕显示。

将参照附图解释根据判断单元14的判断结果来控制第二显示器7明亮度的操作。图5示出了根据本发明实施例的便携式终端设备的另一种操作。

如图5所示，如果便携式终端设备接收到呼入信号(步骤S201中为“是”)，那么计算单元13基于来自第二相机11的视频信号来计算终端设备周围的亮度水平(步骤S202)。判断单元14将计算单元13的计算结果与指定值进行比较，并判断终端设备周围的明亮度(步骤S203)。

如果终端设备周围较暗(步骤S203中为“是”)时，那么控制单元15控制第二显示器7背光(未示出)的亮度，以降低第二显示器7的明亮度(步骤S204)。如果终端设备周围较亮(步骤S203中为“否”)时，那么控制单元15控制背光的亮度，以增大第二显示器7的明亮度(步骤S205)。

如果用户响应来电(步骤S206中为“是”)，那么背光被关闭，并且在控制单元15的控制下完成语音通信过程(步骤S214和S215)。

如果用户没有响应来电并且在步骤S202和S203的明亮度判断处理之后已经经过一段预定时间(步骤S206和S207)，那么再次执行明亮度判断处理。即，计算单元13类似于步骤S202再次计算周围的亮度水平(步骤S208)，并且判断单元14类似于步骤S203判断终端设备周围是否较亮(步骤S209)。

如果终端设备周围较暗(步骤S209中为“是”)，那么控制单元15控制背光的亮度，以将第二显示器7的明亮度降低一个等级(步骤S210)。如果终端设备周围较亮(步骤S209中为“否”)，那么控制单元15控制背光的亮度，以将第二显示器7的明亮度增大一个等级(步骤S211)。

如果用户响应来电(步骤S212中为“是”)，那么背光被关闭，并且在控制单元15的控制下完成语音通信过程(步骤S214和S215)。

如果用户没有响应来电并且在步骤S208和S209的明亮度判断处理之后已经经过一段预定时间(步骤S212和S213)，那么再次执行明亮度判断处理。显示器7的亮度根据判断单元14的判断结果而增加或降低一个等级。

在图5所示的操作示例中，当呼入信号到来(步骤S201)时，进行步骤S202和后续步骤中的处理。或者，可以在收到邮件时进行步骤S202和后续步骤中的处理。在这种情况下，不进行步骤S215中的语音通信过程。

在图5所示的操作示例中，基于来自装在便携式终端设备后表面上的第二相机11的视频信号来判断明亮度。或者，可以使用第一相机10。例如，当便携式终端设备没有折叠时，可以基于来自第一相机10的视频信号来判断明亮度。

在图5所示的操作示例中，根据判断单元14的判断结果，除了可以控制第二显示器7的明亮度之外，还可以控制第一显示器6的明亮度。例如，当便携式终端设备没有折叠时，可以根据判断单元14的判断结果来控制第一显示器6的明亮度，或者可以控制显示器6和7两者的明亮度。

为了更加精确地判断周围的明亮度，可以按照将参照图6A和6B描述的方式来执行图3和5所示的操作示例中的明亮度处理。图6A示出了形成一帧的处理块，图6B示出了一帧中约一半较亮而剩余一半较暗的情况。

计算单元13为图6A中示出的处理块21处理来自第二相机11的视频信号，从而计算形成一帧的处理块21的亮度。判断单元14将处理块21的亮度与指定值作比较。当其亮度高于预定值的处理块(较亮的块)的数量为形成一帧的处理块21的数量的例如二分之一或更多时，如图6B所示，判断单元14判断终端设备周围较亮。

图7示出了对图3操作的修改。如图7所示，如果便携式终端设备接收到呼入信号(步骤S301中为“是”)，那么计算单元13基于来自第二相机11的视频信号来计算形成一帧的所有处理块21的亮度(步骤S302)。判断单元14将形成一帧的所有处理块21的亮度与指定值进行比较(步骤S303)。

如果较亮的块的数量为形成一帧的处理块21的总数量的例如二分之一或更多(步骤S304中为“是”)，那么判断单元14判断终端设备周围较亮，并且控制单元15使得扬声器9开始以预定的小音量产生响铃音(步骤S305)。如果较亮的块的数量小于形成一帧的处理块21的总数量的二分之一(步骤S304中为“否”)，那么判断单元14判断终端设备周围较暗，并且控制单元15将使得扬声器9开始以预定的大音量产生响铃音(步骤S306)。同样在步骤309到S311中，进行与步骤302到S304相同的处理。

在步骤S307、S308和S312到S317中，所进行的处理与图3中步骤S106、S107和S110到S115的处理相同。除非用户响应来电，否则以预定时间间隔执行明亮度判断处理。可以对每一个帧或者几个帧进行明亮度判断处理。

在这种方式下，计算一个帧的处理块21的亮度，并且判断是否每一个处理块21都是亮的。当判断一个帧中较亮和较暗屏幕的比例时，可以实现更精细的明亮度判断。可以进一步减轻响铃音对便携式终端设备周围人群造成的不舒适度。

图8示出了对图5操作的修改。如图8所示，如果便携式终端设备接收到呼入信号(步骤S401中为“是”)，那么计算单元13基于来自第二相机11的视频信号来计算形成一帧的所有处理块21的亮度(步骤S402)。判断单元14将形成一帧的处理块21的亮度与指定值进行比较(步骤S403)。

如果较亮的块的数量小于形成一帧的处理块21的总数量的例如二分之一(步骤S404中为“是”)，那么判断单元14判断终端设备周围较暗，并且控制单元15降低第二显示器7的明亮度(步骤S405)。如果较亮的块的数量为形成一帧的处理块21的总数量的二分之一或更多(步骤S404中为“否”)，那么判断单元14判断终端设备周围较亮，并且控制单元15增大第二显示器7的明亮度(步骤S406)。同样在步骤409到S411中，进行与步骤402到S404相同的处理。

在步骤S407、S408和S412到S417中，所进行的处理与图5中步骤S206、S207和S210到S215的处理相同。除非用户响应来电，否则以预定时间间隔执行明亮度判断处理。

在图7和图8所示的操作示例中，在明亮度判断处理中计算形成一帧的所有处理块21的亮度。或者，可以只计算一帧中一部分处理块21的亮度。例如，只计算在一帧的四个角处的处理块21的亮度，并且如果两个或更多个块较亮时判断终端设备周围较亮，如果只有一个块是较亮则判断为较暗。

如上所述，实施例通过以预定时间间隔判断明亮度来控制音频输出单元的输出音量。可以根据随时间变化的周围环境来更恰当地控制响铃音量。可以进一步减轻响铃音对便携式终端设备周围人群造成的不舒适度。

在从便携式终端设备的相机中输出的具有不同亮度和颜色的信号中，只对预定数量的处理块21的亮度信号进行处理，以用于计算形成一帧的处理块21的亮度。在这种情况下，可以更精细地判断周围的明亮度，并且可以获得更适合于周围环境的控制。因此，可以进一步减轻响铃音对便携式终端设备周围人群造成的不舒适度。