著录项信息
专利名称 | 便携终端及其图像信息管理方法 |
申请号 | CN200810129483.X | 申请日期 | 2008-07-31 |
法律状态 | 权利终止 | 申报国家 | 暂无 |
公开/公告日 | 2009-02-04 | 公开/公告号 | CN101359334 |
优先权 | 暂无 | 优先权号 | 暂无 |
主分类号 | 暂无 | IPC分类号 | 暂无查看分类表>
|
申请人 | LG电子株式会社 | 申请人地址 | 韩国首尔
变更
专利地址、主体等相关变化,请及时变更,防止失效 |
权利人 | LG电子株式会社 | 当前权利人 | LG电子株式会社 |
发明人 | 崔铉普;马修·德哈默 |
代理机构 | 中原信达知识产权代理有限责任公司 | 代理人 | 孙志湧;陆锦华 |
摘要
一种用于在便携终端中通过使用在静止图像或视频上识别出的面部图像来管理联系人信息,并通过将功能与已识别面部的图像相关联来运行多种功能的方法,以及实现这种方法的便携终端,该便携终端包括:显示模块f,和用于通过使用特定形状的图像来显示在静止图像或视频中捕捉到的所有个体,并根据预置选项来指示是否存在用于每个个体的预置标签信息的控制器,并且所述方法包括:识别在静止图像或视频中捕捉的个体的面部、通过使用特定形状的图像来显示每个已识别面部的个体的面部、搜索是否存在用于每个个体的预置标签信息、并且显示是否存在用于每个个体的预置标签信息。
1.一种用于便携终端的图像信息管理方法,包括:
识别在静止图像或视频中捕捉到的个体的面部;
通过使用特定形状的图像来显示每个已识别面部的个体的面部;
搜索是否存在用于每个个体的信息的预置标签;
显示是否存在用于每个个体的所述预置标签;
确定与用户和每个已识别面部的个体的亲密度,其中通过使用诸如捕捉到的图像或视频的数量、图像捕捉的频率或执行特定功能的次数的信息来对每个个体确定所述亲密度;
将所述每个个体的亲密度显示在特定菜单上;
通过使用数量、百分比、图像的数量或图形来显示每个所述个体的亲密度相关信息;
通过所述亲密度来设置每个个体的优先级;
根据所述优先级,相对更大或更小地显示每个联系人信息,或相对更亮或更暗地显示联系人信息,或相对更清晰或更模糊地显示每个联系人信息;
如果连续触摸特定个体的面部图像超过两次,或者如果触摸所述特定个体的面部图像超过预置的时间段,或者如果通过拖放或点击将所述特定个体的面部图像移动以与特定功能图标或菜单重叠,则执行预置的特定功能,或显示弹出菜单并随后执行在所述弹出菜单中选定的功能。
2.根据权利要求1所述的图像信息管理方法,其中显示每个所述个体的面部的步骤包括:
通过使用具有特定形状的框,来显示在所述静止图像或视频上的每个所述个体的面部,或者
将捕捉每个个体的照片列表显示在分离的屏幕显示上。
3.根据权利要求2所述的图像信息管理方法,还包括:
在接收到用户的键操作、触摸输入或语音输入的其中之一时,选择或取消选择每个所述已识别面部的个体,以及
通过使用所述特定形状来显示每个所述已识别面部的个体的选定或取消选定的状态。
4.根据权利要求2所述的图像信息管理方法,其中所述特定形状是包围每个所述已识别面部的个体的圆形或多边形框,或是包围面部轮廓的形状。
5.根据权利要求1所述的图像信息管理方法,其中所述标签信息是关于所述已识别面部的个体的静止图像或视频的信息,并包括文件名、每个个体被捕捉的位置信息、以及每个个体的联系人信息和姓名信息、电话簿信息、分组信息、日期信息和事件信息的其中至少一个。
6.根据权利要求1所述的图像信息管理方法,还包括:
设置锁定功能,以限制设置到每个个体的面部图像的标签信息的显示,以及限制对选定个体的面部图像所执行的功能。
便携终端及其图像信息管理方法\n技术领域\n[0001] 本发明涉及在便携终端中通过使用在静止图像或视频上识别的面部图像来管理联系人信息,并且通过将功能与已面部识别的图像相关联来操作在便携终端中提供的多种功能的方法,还涉及实现此方法的计算机程序产品和便携终端。\n背景技术\n[0002] 便携终端可被配置来实现多种功能。\n[0003] 功能的实例可包括数据/语音通信、通过照相机捕捉图像或视频、记录声音、通过扬声器系统播放音乐文件、以及显示图像或视频。\n[0004] 一些终端已经配备了支持游戏活动的附加功能,而其它终端已被实现为集成式多媒体播放器。最近,便携终端已经配备了接收广播或多播信号的功能,由此使得用户能够观看视频或电视节目。\n[0005] 正继续努力以支持和增加便携终端的功能性。这些努力包括软件和硬件改进,以及对形成便携终端的结构组件的改变和改进。这些配置的实例包括折叠式、滑动式、条式、摆动式或这些的组合。\n[0006] 另外,相关技术的便携终端已经配备了存储和重现通过照相机捕捉的图片的功能。但是,相关技术的便携终端不具有可通过使用被捕捉为照片的每个人来管理照片,或将已捕捉的照片与在便携终端中提供的多种功能相关联的用户接口。\n发明内容\n[0007] 所以,本发明的一个目的是提供一种方法,其用于识别静止图像(例如照片)或视频上的个体的面部图像,并通过将这些面部图像与原始图像自动分离来存储每个个体的面部图像,还提供了实现这种方法的计算机程序产品和便携终端。\n[0008] 根据本发明的一个方面,提供一种用于便携终端的图像信息管理方法,包括:识别在静止图像或视频中捕捉到的个体的面部;通过使用特定形状的图像来显示每个已识别面部的个体的面部;搜索是否存在用于每个个体的信息的预置标签;显示是否存在用于每个个体的所述预置标签;确定与用户和每个已识别面部的个体的亲密度,其中通过使用诸如捕捉到的图像或视频的数量、图像捕捉的频率或执行特定功能的次数的信息来对每个个体确定所述亲密度;将所述每个个体的亲密度显示在特定菜单上;通过使用数量、百分比、图像的数量或图形来显示每个所述个体的亲密度相关信息;通过所述亲密度来设置每个个体的优先级;根据所述优先级,相对更大或更小地显示每个联系人信息,或相对更亮或更暗地显示联系人信息,或相对更清晰或更模糊地显示每个联系人信息;如果连续触摸特定个体的面部图像超过两次,或者如果触摸所述特定个体的面部图像超过预置的时间段,或者如果通过拖放或点击将所述特定个体的面部图像移动以与特定功能图标或菜单重叠,则执行预置的特定功能,或显示弹出菜单并随后执行在所述弹出菜单中选定的功能。\n[0009] 当结合附图时,从本发明的以下详细描述中,本发明的上述和其它目的、特征、方面和优点将变得更加明显。\n附图说明\n[0010] 当结合附图时,考虑到优选实施例的以下描述,本发明的上述和其它方面、特点、和优点将变得更加明显。\n[0011] 在附图中,\n[0012] 图1是根据本发明的一个实施例的便携终端的示意性框图;\n[0013] 图2是示出根据本发明的示范性便携终端的前透视图;\n[0014] 图3是示出图2的便携终端的后视图;\n[0015] 图4是根据本发明便携终端可以在其中运行的无线电(无线)通信系统的示范性视图;\n[0016] 图5是示出根据本发明的将照片存储在便携终端中的流程图;\n[0017] 图6A和6B是示出根据本发明在便携终端中运行面部识别功能的方法的示范性视图;\n[0018] 图7A到7D是示出根据本发明在便携终端中显示照片中的已面部识别的个体的方法的示范性视图;\n[0019] 图8A和8B是示出根据本发明在便携终端中设定关于已识别个体的面部照片的标签信息的方法的示范性视图,该标签信息是;\n[0020] 图9A和9B是示出根据本发明在便携终端中设定关于已识别个体的面部照片的标签信息的另一方法的示范性视图;\n[0021] 图10A和10B是示出根据本发明的在便携终端中用于将已识别个体的面部照片显示在空闲屏幕显示上的方法的示范性视图;\n[0022] 图11是示出根据本发明的在便携终端中通过选择已识别的个体,来执行终端的特定功能的方法的示范性视图;\n[0023] 图12是示出根据本发明的在便携终端中通过选择已识别的个体的面部照片,来编写照片日记的方法的示范性视图;\n[0024] 图13A和13C是示出根据本发明的在便携终端中显示对于已识别的个体的签列表的方法的示范性视图;以及\n[0025] 图14是示出根据本发明的在便携终端中用于面部识别的个体的标签信息管理的数据库的示意图的示范性视图。\n具体实施方式\n[0026] 在以下详细说明中,将参考附图,附图构成说明的一部分,并以示例的方式示出了本发明的特定实施例。本技术领域的普通技术人员应当理解,可使用其它实施例,可做出结构的、电的、以及过程的改变,而不偏离本发明的范围。在所有可能的情况下,在所有附图中使用相同的标号来指示相同或类似的部分。\n[0027] 图1是根据本发明的一个实施例的便携终端的示意性框图。\n[0028] 本发明中的便携终端可指移动电话、智能电话、笔记本电脑、数字多媒体广播终端、PDA(个人数字助理)、PMP(便携多媒体播放器)、导航仪等。\n[0029] 参照图1,便携终端100可包括无线通信单元110、A/V(音频/视频)输入单元\n120、用户输入单元130、传感单元140、输出单元150、存储器160、接口单元170、控制器\n180、和供电单元190等。图1示出具有各种组件的便携终端100,但是应当理解不是必须实施所有的示出组件。可替代性地实施更多或更少数量的组件。\n[0030] 下面,将更详细地描述移动终端的组件。\n[0031] 无线通信终端110典型地包括允许在便携终端100和便携终端位于其中的无线通信系统或网络之间无线电(无线)通信的一个或多个组件。无线通信单元110可包括广播接收机模块111、移动通信模块112、无线因特网模块113、近程通信模块114、定位模块115等。\n[0032] 广播接收机模块111通过广播信道从外部广播管理服务器接收广播信号和/或广播关联信息。广播信道可包括卫星信道和地面信道。广播管理服务器可指产生和发送广播信号和/或广播关联信息的服务器,或接收先前产生的广播信号和/或广播关联信息并将这些信号和信息发送给终端的服务器。广播关联信息的实例可包括关于广播信道的信息、广播节目、广播服务提供商等。广播信号可以被实施为TV广播信号、无线电广播信号、和数据广播信号等。如果需要,广播信号还可包括组合有TV或无线电广播信号的广播信号。\n[0033] 也可经由移动通信网络来提供广播关联信息,并且在此情形中,可通过移动通信模块112来接收广播关联信息。\n[0034] 广播关联信息可以多种形式存在。例如,其可存在的形式有:数字多媒体广播(DMB)的电子节目指南(EPG)、手持数字视频广播(DVB-H)的电子服务指南(ESG)等。\n[0035] 可将广播接收机模块111配置为使用各种类型的广播系统来接收广播信号。具体说来,广播接收机模块111可使用数字广播系统来接收数字广播信号,例如地面数字多媒体广播(DMB-T)、卫星数字多媒体广播(DMB-S)、手持数字视频广播(DVB-H)、被称为仅媒体前向链路( )的数据广播系统、地面综合业务数字广播(ISDB-T)等。广播接收机模块111被配置为适合于每种提供广播信号的广播系统以及上述数字广播系统。\n[0036] 可将通过广播接收机模块111接收到的广播信号和/或广播关联信息存储在存储器160中。\n[0037] 移动通信模块112将无线电信号发射到移动通信网络中的基站、外部终端和服务器中的至少一个或从其接收无线电信号。根据文本/多媒体消息发射/接收,该无线电信号可包括语音呼叫信号、视频呼叫信号或各种类型的数据。\n[0038] 无线因特网模块113支持用于移动终端的因特网接入。该模块113可从内部或外部连接到终端。\n[0039] 近程通信模块114指支持近程通信的模块。近程通信技术的一些实例包括:蓝牙TM TM\n、射频识别(RFID)、红外数据协会(IrDA)、超宽带(UWB)、ZigBee 等。\n[0040] 定位模块115识别或获取便携终端的位置。如果需要,可使用从多颗人造卫星接收位置信息的全球定位系统(GPS)部件来实现该模块。此处,位置信息可包括由经纬度所表示的坐标信息。例如,GPS模块通过三角测量可准确地计算出终端的当前位置,三角测量从三颗或三颗以上的卫星测量准确的时间和距离并使用3个不同的距离值。GPS模块可使用从三颗卫星获取时间和距离信息的方法并用一颗卫星纠正误差的方法。具体说来,GPS模块可从自卫星接收的位置信息来获取纬度、经度和高度的位置,准确时间信息以及三维速率(速度)信息。\n[0041] A/V输入单元120被配置为输入音频或视频信号。A/V输入单元120可包括照相机121和麦克风122。照相机121对在视频呼叫模式或图像捕捉模式中由图像捕捉设备所获取的静止图片或视频的图像帧进行处理。处理后的图像帧可在显示模块151上显示。\n[0042] 由照相机121处理后的图像帧可存储在存储器160中,或通过无线通信单元110进行发送。根据便携终端的配置,可提供两个或更多的照相机121。\n[0043] 在电话呼叫模式、记录模式、语音识别模式等之中,麦克风122可通过麦克风等来接收外部模拟音频信号(听得见的声音),并将其处理为数字数据。在电话呼叫模式中,可将处理后的音频(语音)数据进行转换,以输出为可经由移动通信模块112发送到移动通信基站的格式。麦克风122可包括各种类型的噪声抵消(或抑制)算法,以抵消(或抑制)在接收和发送音频信号过程中产生的噪声。\n[0044] 用户输入单元130可产生由用户输入的键输入数据,以控制移动终端的各种操作。用户输入单元130可包括键盘、薄膜开关(dome switch)、触摸板(例如检测电阻、压力、电容等变化的触摸敏感部件)、微动滚轮(jog wheel)、微动开关(jog switch)等。特别地,当触摸板以层叠方式覆盖在显示模块151上时,可称之为触摸屏。\n[0045] 传感单元140检测便携终端100的当前情形(或状态),例如便携终端100的打开/关闭状态,便携终端100的位置,是否存在与便携终端100的用户接触等,并生成用于控制便携终端100的操作的命令或信号。例如,当便携终端100是滑动型移动电话时,传感单元140可感知滑动电话是打开还是关闭。另外,传感单元140可检测供电单元190是否供电或接口单元170是否连接到外部设备。\n[0046] 接口单元170作用为与连接到便携终端100的至少一个外部设备的接口。例如,外部设备可包括有线/无线头戴式耳机端口、外部电源充电器端口、有线/无线数据端口、卡插口,例如,存储卡端口、用于连接具有标识模块的设备的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等。\n[0047] 此处,标识模块指存储认证便携终端100的使用授权的多种信息的芯片,并可包括用户标识模块(UIM)卡、订户标识模块(SIM)卡、通用用户标识模块(USIM)卡等。另外,可用智能卡的形式来实施具有标识模块的设备(此后,称为“标识设备”)。相应地,标识设备可经由端口连接到终端100。接口单元170可用于从外部设备接收输入(例如,数据、信息、电源等),并将已接收的输入转发到便携终端100内的一个或多个单元,或可用于将数据从便携终端转发到外部设备。\n[0048] 输出单元150被配置为以视觉、听觉、和/或触觉方式(例如,音频信号、视频信号、警报信号等)来提供输出。输出单元150可包括显示模块151、音频输出模块152、警报输出模块153等。\n[0049] 显示模块151可输出在便携终端100中处理的信息。例如,当便携终端100处于电话呼叫模式时,显示模块151可将与呼叫或其它通信相关联的用户界面(UI)或图形用户界面(GUI)显示在其屏幕显示上。当便携终端100处于视频呼叫模式或图像捕捉模式时,显示模块151可将捕捉到和/或接收到的图像、UI、GUI等显示在其屏幕显示上。\n[0050] 其间,当显示模块151和触摸板以层叠方式相重叠而形成触摸屏时,显示模块\n151可作用为输入设备和输出设备。显示模块151可包括液晶显示(LCD)板、薄膜晶体管-LCD(TFT-LCD)板、有机发光二极管(OLED)显示器、柔性显示屏幕、三维(3D)显示屏幕等之中的至少一个。根据便携终端100期望的实施,其可包括两个或更多的显示模块(或其它显示装置)151。例如,便携终端100可包括外部显示单元(未示出)和内部显示单元(未示出)。\n[0051] 在呼叫信号接收模式、呼叫模式、记录模式、语音识别模式、广播接收模式等之中,音频输出模块152可将从无线通信单元110接收的或存储在存储器160中的音频数据输出。并且,音频输出模块152可提供与便携终端100所执行的特定功能相关的可听输出(例如,呼叫信号接收声音、消息接收声音等)。音频输出模块152可包括扬声器、蜂鸣器等。\n[0052] 警报输出模块153可提供输出以通知便携终端100事件的发生。典型的事件可包括呼叫信号接收、消息接收、键信号输入等。除了音频或视频输出以外,警报输出模块153可以用不同的方式来提供输出,以通知事件的发生。例如,警报输出模块153可以用振动的形式(或其它触觉装置)来提供输出。当接收到呼叫信号、消息、或某些其它呼入通信时,警报输出模块153可提供触觉输出(即振动)来通知用户。通过提供触觉输出,用户可识别出各种事件的发生。也可通过显示模块151或音频输出模块152来提供通知事件的发生的输出。\n[0053] 存储器160可存储用于由控制器180执行的处理和控制的软件程序等,或可暂时存储已输入/已输出的数据(例如,电话簿、消息、静止图像、视频等)。\n[0054] 存储器160可包括至少一种类型的存储介质,包括:闪存型、硬盘型、微型多媒体卡、卡式存储器(例如SD或XD存储器等)、随机存取存储器(RAM)、静态随机存取存储器(SRAM)、只读存储器(ROM)、电可擦写可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁存储器、磁盘、光盘等。并且,便携终端100可与远程执行存储器160的存储功能的因特网上的web存储设备协作。\n[0055] 控制器180典型地控制移动终端的总体操作。例如,控制器180执行与语音呼叫、数据通信、视频呼叫等相关联的控制和处理。另外,控制器180可包括用于重现多媒体数据的多媒体模块181。多媒体模块181可被集成地实现在控制器180内,或通过在其中执行的软件来实现,或可以被配置为与控制器180分离。供电单元190接收外部或内部电源,并在控制器180控制之下供给各个单元的运行所需的电源。\n[0056] 可以使用诸如计算机软件、硬件或软件和硬件任何组合以计算机可读介质实现此处描述的各种功能。\n[0057] 对于硬件实现,此处描述的功能可以通过使用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理器件(DSPD)、可编程逻辑器件(PLD)、场可编程门阵列(FPGA)、处理器、控制器、微控制器、微处理器、和被设计来执行此处描述功能的电子单元之中的至少一个来实现。在某些情形中,可以通过控制器180来实现这些功能。\n[0058] 对于软件实现,诸如操作过程或功能的功能性可以与分离的软件模块一起实现,该软件模块允许执行至少一个功能或操作。软件代码可以通过用任何合适的程序语言所写成的软件应用程序来实现。软件代码可以存储在存储器160中,并由控制器180来执行。\n[0059] 至此为止,已从便携终端功能的角度对其进行了描述。下面,将参照图2和3从功能角度来描述便携终端的外部单元。可以用多种不同的结构来实现便携终端。这些结构的实例包括折叠式、条式、摆动式、滑动式、或这些的组合。为了简洁起见,以下描述将主要涉及滑动型便携终端。但是这些教导也同样适用于其它类型的便携终端。\n[0060] 图2是根据本发明的便携终端的前透视图。\n[0061] 根据本发明的便携终端包括被设置为沿着至少一个方向相对另一个可滑动移动的第一主体200和第二主体205。\n[0062] 如图所示,可将第一主体200被设置为重叠于或覆盖第二主体205的状态称为“闭合结构”,可将第一主体200与第二主体205被相互设置为露出至少一部分第二主体205的状态称为“打开结构”。在闭合结构中,便携终端主要运行于待机模式(空闲模式),并且可根据用户的操作来释放待机模式。在打开结构中,便携终端主要运行于呼叫模式或类似模式,并且在经过用户操作或特定时间段流逝之后可变为待机模式。\n[0063] 组成第一主体200的外部表面的机壳(壳体、外壳、盖子等)由第一前机壳220和第一后机壳225所组成。各种电子元件安装在第一前机壳220和第一后机壳225之间的空间中。一个或多个中间机壳可被附加地安装在第一前机壳220和第一后机壳225之间。\n[0064] 机壳可以由注模合成树脂形成,或可以由诸如不锈钢(STS)或钛(Ti)等的金属材料所制成。\n[0065] 显示模块151、第一音频输出模块152-1、第一照相机模块121-1或第一用户输入单元130-1可以位于第一主体200之上,具体而言,在第一主体200的第一前机壳200上。\n[0066] 显示模块151可包括视觉上显示信息的LCD(液晶显示器)、OLED(有机发光二极管)显示器等。\n[0067] 触摸板可以层叠模式覆盖在显示模块151的屏幕上,以允许显示模块151作用为能通过用户触摸来输入信息的触摸屏。\n[0068] 可以用接收机(receiver)或扬声器的形式来实现第一音频输出模块152-1。\n[0069] 可以将第一照相机模块121-1实现为适于捕捉与用户等相关的图像或视频等。\n[0070] 与第一主体200类似,组成第二主体205的外表面的机壳由第二前机壳230和第二后机壳235所构成。可以将第二用户输入单元215设置在第二主体205的正面上,具体而言,在第二前机壳230上。\n[0071] 可以将第三用户输入单元245、麦克风122、和接口单元170设置在第二前机壳230和第二后机壳235的其中至少之一上。\n[0072] 一般可将第一到第三用户输入单元210、215、和245称为操作单元130,并且为了实现该操作单元可以采用多种技术,只要其可以由用户用触摸方式来操作。\n[0073] 例如,可以用薄膜开关或触摸板来实现用户输入单元,其可以根据用户的压、推或触摸来接收用户命令或信息,或可以用滚轮的方式来实现,该滚轮使键、微动单元、游戏杆等旋转。\n[0074] 至于它们的功能,第一用户输入单元210用于输入命令,例如开始、结束、滚动(scroll)等,而第二用户输入单元215用于输入数字、字符、符号等。\n[0075] 而第三用户输入单元245可操作作为用于激活便携终端内特定功能的热键。\n[0076] 麦克风122可以用适于转换用户话音、其它声音等的形式来实现。\n[0077] 可将接口单元170用作为链路(通路或通道),通过该链路便携终端可与外部设备交换数据等。例如,可将接口单元170实现为用于经由有线(固定)或无线装置将耳机连接到便携终端的连接端口、用于近程通信的端口(例如,红外数据协会(IrDA)的端口、TM\nBluetooth 端口、无线LAN端口等)、用于将电源提供给便携终端的电源供给端口等的其中至少之一。\n[0078] 可以使用卡插口(例如,用于连接到外部卡,该外部卡包括订户识别模块(SIM)卡、用户识别模块(UIM)卡、用于信息存储的存储卡)来配置接口单元170。\n[0079] 用于将电源供给到便携终端的供电单元190位于第二后机壳235的侧部。\n[0080] 供电单元190可以是诸如可分离的可再充电电池。\n[0081] 图3是示出图2的便携终端的后视图。\n[0082] 参照图3,可以将第二照相机模块121-2附加地设置在第二主体205的第二后机壳\n235的后表面上。第二照相机模块121-2可具有与第一照相机模块121-1的图像捕捉方向基本相反的图像捕捉方向,并且与第一照相机模块相比,可支持不同的分辨率、图像大小、或像素的数量。\n[0083] 例如,第一照相机模块121-1可以在视频呼叫通信等期间,用相对较低的分辨率来操作以捕捉用户的面部图像,并将该图像发送给另一方,而第二照相机模块121-2可以用相对较高的分辨率来操作以用较高的图片质量捕捉一般对象的图像,不是用于立即发送而是供以后使用或传输给他人。\n[0084] 可以将闪光灯250和镜子255附加地设置于第二照相机模块121-2附近。当将用第二照相机模块121-2捕捉对象的图像时,闪光灯250照亮对象。当用户希望通过使用第二照相机模块121-2来捕捉其自身图像时(自身图像捕捉),镜子255允许用户看到他们自己。\n[0085] 第二后机壳235还可包括第二音频输出模块152-2。\n[0086] 第二音频输出模块152-2可与第一音频输出模块152-1相结合来实现立体声功能,并可用于在扬声器电话模式中发送和接收音频呼叫。\n[0087] 除了支持移动通信的天线以外,可以将广播信号接收天线260设置在第二后机壳\n235的一侧上或第二后机壳235的区域中。可将天线260配置为可从第二主体205伸缩。\n[0088] 可以将滑动地组合第一主体200和第二主体205的滑动模块265的一部分设置在第一主体200的第一后机壳225上。\n[0089] 可将滑动模块265的其余部分设置在第二主体205的第二前机壳230上,如图所示,其可以不暴露于外。\n[0090] 在以上描述中,第二照相机模块121-2等被设置在第二主体205之上,但是这种描述的结构不是意欲进行限定。\n[0091] 例如,可以将在以上描述中被设置在第二后机壳235上的一个或多个单元(例如,\n260、121-2和121-3和250、152-2)安装在第一主体200上,主要是在第一后机壳225上。\n在此情形下,在闭合结构中,那些设置在第一后机壳225上的单元可以由第二主体205所保护(或覆盖)。另外,即使未提供第二照相机模块121-2,也可将第一照相机模块121-1配置来旋转(或者移动)由此允许在多种方向上进行图像捕捉。\n[0092] 可以将在图1到3中示出的便携终端100配置为在通过帧或分组来发送数据的通信系统中操作,包括无线和有线通信系统、和基于卫星的通信系统。\n[0093] 下面,参照图4,将详细给出根据本发明便携终端可以在其中操作的通信系统的说明。\n[0094] 这些通信系统使用不同的空中接口和/或物理层。通信系统所使用的空中接口的实例包括:频分多址(FDMA)、时分多址(TDMA)、码分多址(CDMA)、通用移动电信系统(UMTS)、UMTS的长期演化(LTE)、以及全球移动通信系统(GSM)。通过仅是非限制性的实例,进一步的描述将涉及CDMA通信系统,但是该教导同样适用于其它系统类型。\n[0095] 现在参照图4,CDMA无线通信系统被示出为具有多个便携终端100、多个基站270、基站控制器(BSC)275、移动交换中心(MSC)280。将MSC 280配置为接口到传统的公共交换电话网(PSTN)290。也可将MSC 280配置为接口到BSC 275。BSC 275通过回程线路连接到基站270。可以根据多种已知接口之中的至少一种来配置回程线路,多种接口包括诸如E1/T1、ATM、IP、PPP、帧中继、HDSL、ADSL或xDSL。应当理解,图4所示的系统可包括多个BSC \n275。\n[0096] 每个基站270可包括一个或多个扇区,每个扇区具有全向天线或从基站270向外径向指向特定方向的天线。替代性地,每个扇区可包括用于分集接收的两个或更多个天线。\n可将每个基站270配置为支持多个频率分配,其中每个频率分配具有特定的频谱(例如,\n1.25MHz、5MHz)。\n[0097] 可将扇区和频率分配的交集称为CDMA信道。基站270还可指基站收发机子系统(BTS)。在一些情形中,术语“基站”可用于共同地表示BSC 275和一个或多个基站270。还可将基站表示为“小区站点”。替代性地,给定基站270的各个扇区可以称为小区站点。\n[0098] 如图4所示,广播发射机(BT)295被示出为向在系统中操作的便携终端100进行广播。通常,将如图1所示的广播接收机模块111配置为接收BT 295发射的广播信号。\n[0099] 另外,图4示出多个全球定位系统(GPS)卫星300。这些卫星300便于对一些或所有便携终端100的定位。示出了两颗卫星,但是应当理解,可以用更多或更少的卫星来获取有用的定位信息。通常,将GPS模块115(图1)配置为与卫星300合作,以获取期望的位置信息。应当理解,可替代性地实现其它类型的位置探测技术(即可以使用除GPS定位技术之外的或代替GPS定位技术的定位技术)。如果需要,可替代性地或附加地将至少一颗GPS卫星300配置来提供卫星DMB传输。\n[0100] 在无线通信系统的典型操作期间,基站270从多个便携终端100接收多组反向链路信号。便携终端100参与呼叫、消息、和其它通信。在基站之内处理给定基站270接收到的每个反向链路信号。所产生的数据被转发到关联的BSC 275。BSC 275提供呼叫资源分配和移动性管理功能,包括基站270之间的软切换的编排(orchestration)。BSC 275还将接收到的数据路由到MSC 280,MSC 280提供用于接口到PSTN 290的附加的路由服务。类似地,PSTN 290接口到MSC 280,MSC 280接口到BSC 275,BSC 275反过来控制基站270以将多组正向链路信号发送到便携终端100。\n[0101] 图5是示出根据本发明的将照片信息存储在便携终端中的方法的流程图。\n[0102] 当用户使用设置在便携终端中的照相机121来捕捉照片(S101)时,控制器180被配置为根据预置的设定选项来对已捕捉的照片执行面部识别(S102)。\n[0103] 此处,“面部识别”功能可以应用于由图像捕捉所获取的静止图像以及由视频捕捉和视频呼叫所获取的视频。也就是,视频指连续播放多个静止图像帧,由此被应用于面部识别功能。\n[0104] 面部识别功能可通过在便携终端中提供的面部识别算法(或面部识别系统)来执行,并可通过特征信息,例如眼睛、鼻子之间的距离,嘴巴在脸上的位置,面部形状,来识别在照片中的个体。\n[0105] 可通过使用当前捕捉的图像或通过检索预先存储在照片簿中的照片来操作面部识别功能。另外,也可对捕捉个人的照片和捕捉多个个体的群组照片来操作面部识别功能。\n[0106] 此后,为了解释上的方便,将被检索用于面部识别的照片(静止图像)或视频(或视频的特定帧)称为“原始照片(或原始图像)”,而在原始照片中识别的个体的照片称为“面部照片(或面部图像)”。此处,面部照片并不必意指仅显示面部的照片(图像),而是指至少包括面部以使得用户可识别照片上所示个体的照片(图像)。\n[0107] 当显示原始照片,如果面部识别功能被激活,则控制器180通过预置的面部识别算法来识别原始照片中的面部,并以用户可识别的方式来显示每个个体的面部(S103)。\n[0108] 例如,可将在照片中的已面部识别的个体显示为包括面部的特定图像。特定图像可以是圆形或多边形框的形式,用来将每个人与已识别的面部一起包围起来,或是包括面部轮廓的形状的图像。可以将框的大小、形状、厚度和颜色设置为默认,并可由用户通过设置选项来改变。\n[0109] 控制器180可以以已显示的框形状捕捉原始图像中显示的已识别面部的个体,并检测每个个体的面部的特征信息,由此管理附加的数据库(例如,面部特征信息数据库)。\n也就是说,控制器180可确定在照片中捕捉的对象是否是人的面部,并进一步通过使用每个个体的面部特征信息来将在照片中识别出的个体相互区别开来。\n[0110] 在此期间,如果捕捉到在照片中的个体的面部,那么控制器180可存储每个人的面部照片(S105),并对已捕捉个体的每个面部照片设定标签信息(S106)。\n[0111] 控制器180可通过参考面部特征信息数据库来自动设定标签信息(S107),并且如果是未注册在面部特征信息数据库中的新人的面部,那么可直接从用户接收与新人面部相关的标签信息的输入(S108)。另外,控制器180可将新面部的面部特征信息和其标签信息注册到面部特征信息数据库,由此管理这些信息。\n[0112] 可对原始照片上示出的所有已识别面部的个体的面部照片来设定标签信息,或是仅对用户在原始照片上示出的已识别面部的面部照片之中选定的特定人的面部照片来进行设定。标签信息可包括与原始照片相关的信息(例如原始照片的文件名、在原始照片中的每个人的捕捉位置等)、联系人信息(例如,联系人号码和姓名)和电话簿信息。\n[0113] 控制器180可通过将标签信息注册到分离的数据库(例如标签信息数据库),或通过将标签信息与面部特征信息数据库相关联,来管理用于每个面部照片的标签信息。\n[0114] 图6A和6B是示出根据本发明的在便携终端中操作面部识别功能的方法的示范性视图。\n[0115] 如图6A所示,如果用户通过使用在便携终端中提供的照相机功能来捕捉图像,或检索在照片簿存储的照片,控制器180将照片410显示在显示模块151上。\n[0116] 控制器180通过键操作、触摸或语音直接从用户接收命令输入,并接着操作用于识别照片420上所示的面部的面部识别功能。另外,可以将在显示模块151上显示的面部识别功能的菜单显示为图标421或软件按键,或可显示为软件菜单列表422中的一个。\n[0117] 另外,如果人的面部被包括于被捕捉的照片中,当要存储430照片时,控制器180可根据预置的设置选项来自动操作面部识别功能。也就是说,如果在设置选项中已设定面部识别功能,当操作照相机快门时,控制器180自动操作面部识别算法并存储照片,由此识别并捕捉在已捕捉照片上的面部。如果根据面部特征,有人被确定为与预先存储的人相同,那么控制器180可显示用于对应人的面部照片的标签信息。\n[0118] 如图6B所示,如果那人的面部被包括于捕捉到的照片之中,控制器180可通过语音或文本消息来输出通告消息440,以检查是否应当执行面部识别。当输出通告消息时,如果用户去激活450面部识别功能,控制器180可不识别面部而直接存储460照片。\n[0119] 在输出通告消息之后,如果面部识别功能未在预定的时间段内去激活,控制器180可自动激活470面部识别功能。另外,根据设置选项,可立即开始面部识别而不输出通告消息。\n[0120] 图7A到7D是示出根据本发明的在便携终端中用于显示照片中已识别面部的个体的方法的示范性视图。\n[0121] 如上所述,如果自动或手动激活面部识别功能,那么如图7A所示,控制器180可将显示在照片上的个体的面部510进行识别并显示。\n[0122] 控制器180可将在照片上示出的已识别面部的个体在显示模块151上显示为具有特定大小和形状以包围每张脸的圆形或多边形(例如,矩形、三角形、圆形或符合花或脸的特定形状)的框(或轮廓)511~513。\n[0123] 另外,根据预置的条件,可以区别显示线条的大小、形状、厚度和框511~513的颜色。\n[0124] 例如,绿色的框可用于与预先存储的个体相同的人,而红色的框可用于未被预先存储的新人。用户通过设置选项可随机改变框的颜色、形状和厚度,并且可以自动将框的大小520与面部大小成比例地调整得更大或更小。\n[0125] 如图7B所示,如果与已识别面部的人相同的人被存储在终端中,那么可附加显示诸如联系人号码和姓名(例如,朋友1~朋友4)的联系人信息。\n[0126] 同时,如果通过特定的图像(例如,框、轮廓)来分别显示在照片上示出的已识别面部的个体,那么控制器180可通过用户进行的触摸输入来取消选定特定图像,或再次选择该特定图像。\n[0127] 例如,如图7C所示,如果用户单独触摸用特定图像显示的面部,那么特定图像从屏幕上被移开。如图7D所示,如果用户重新选择未显示特定图像的面部,那么特定图像又被显示在面部上。代表取消选定或选定的面部的图像的透明度或颜色可以被改变,由此允许用户来识别选定或取消选定的面部。在照片上代表已识别面部的个体的特定图像取决于设置为默认的形状,并且还可被配置为允许用户在设置选项中直接改变显示方法。\n[0128] 图8A和8B是示出根据本发明的在便携终端中设置关于已识别的个体的面部照片的标签信息的方法的示范性视图。\n[0129] 如上所述,如果识别出在原始照片中的面部,那么控制器180可通过预置的设置选项或通过由用户输入的命令(例如,通过键操作、触摸或语音所输入的命令),来显示标签信息设置屏幕显示。\n[0130] 参照图8A,标签信息设置屏幕显示可以显示在原始照片中识别出的所有个体的面部照片。如图8B所示,标签信息设置屏幕显示可以仅显示由用户在原始照片选定的个体的面部照片。此处,标签信息设置屏幕显示可包括不存在标签信息的新个体的面部照片,由此允许用户对未预置标签信息的新个体来设置标签信息。\n[0131] 图9A和9B是示出根据本发明的用于在便携终端中设置关于已识别个体的面部照片的标签信息的另一方法的示范性视图。\n[0132] 参照图9A,用户可在标签信息设置屏幕显示上选择特定的个体,以改变用于所选定个体的标签信息,或输入新的标签信息。标签信息可包括姓名信息、分组信息、联系人信息(例如,电话号码、电子邮件地址、邮件地址、主页地址等)以及事件信息(例如,生日、毕业典礼、周年纪念等)。\n[0133] 参照图9B,当存储标签信息时,可以通过使用标签信息来改变面部照片的文件名。\n例如,如果面部照片被自动存储,那么控制器180可根据存储顺序,通过使用数字或字母来自动设置文件名。在本实施例中,可通过包括待存储在标签信息中的个体的姓名信息来设置文件名。也可通过使用包括在标签信息中的所有类型的信息,例如分组信息、数据信息和姓名信息,来设置文件名。\n[0134] 至此,已经详细给出了用于识别从已捕捉照片或从便携终端中的照片簿检索到的照片上的面部,并存储用于每个面部照片的标签信息的方法。\n[0135] 下面,将详细描述用于将具有标签信息的面部照片与在终端中提供的功能相关联并执行功能的各种方法。\n[0136] 图10A和10B是示出根据本发明的在便携终端中将已识别个体的面部照片显示在空闲屏幕显示上的方法的示范性视图。\n[0137] 空闲屏幕显示(待机屏幕显示)指在终端开启或打开之后,在其中不执行任何功能的待机状态中显示的初始屏幕显示。\n[0138] 参照图10A,可将存储上述标签信息的每个个体的面部照片显示在空闲屏幕显示上。可将多个面部照片显示在空闲屏幕显示上,并且将联系人信息作为标签信息设置到每个面部照片,从而选择在空闲屏幕显示上的面部照片,并直接执行对与选定的照片相关联的个体的呼叫连接。此处,除了呼叫连接功能以外,可在空闲屏幕显示上直接执行便携终端的不同功能。\n[0139] 待执行的特定功能可取决于用于触摸已识别面部的个体的方法。例如,如果用户连续触摸特定人的面部照片超过两次,那么他可直接呼叫与该面部照片相关联的人。如果用户触摸了特定人的面部照片超过预置的时间段,并弹出菜单窗口,那么他可以选择一个菜单窗口并执行与选定的菜单项相关联的功能。另外,如果用户选择特定人的面部照片,并接着通过拖放或点击来移动面部照片使得与在屏幕显示上显示的特定功能图标或菜单重叠,那么他可以立即执行与特定功能图标或菜单相关联的功能。\n[0140] 替代性地或附加性地,在触摸了面部时,可以用人声(预先记录的)、用户的声音(预先记录的)或机器产生的声音来说出这人的姓名。替代性地或附加性地,在触摸了面部时,可播放该个体的短影片(预先记录的)。电影可以是个体叙述的例如生日、电子邮件地址等个人特征的电影。\n[0141] 参照图10B,用户可拖放在空闲屏幕显示上显示的面部照片,以改变面部照片的位置。另外,用户可触摸显示在空闲屏幕显示上显示的面部照片,以删除在空闲屏幕显示上的面部照片,或可通过从照片簿检索其它面部照片来将其它面部照片显示在空闲屏幕显示上。\n[0142] 此处,即使删除了在空闲屏幕显示上显示的面部照片,也不意味着把面部照片从最初存储这些照片的存储器160中完全删除。相应地,如果需要的话,可以重新得到从空闲屏幕显示上删除的面部照片,并将其再次显示在空闲屏幕显示上。\n[0143] 图11是示出根据本发明的在便携终端中通过选择已识别的个体来执行终端的特定功能的方法的示范性视图。\n[0144] 可从显示已识别面部的个体的原始照片650或从显示在标签信息设置屏幕660上的个体的面部照片来选择用户期望来执行特定功能的个体。如果用户选择特定个体的面部照片,那么控制器180输出可执行菜单的列表651、661。可执行菜单的列表可包括消息发送、照片发送、时间表注册、会议呼叫连接、照片簿注册等。\n[0145] 例如,控制器180可将短消息全体地发送到所有选定个体,同时连接到所有选定个体进行会议呼叫,或同时将照片或文件发送到所有选定个体。\n[0146] 如果假定“消息发送”功能是从菜单列表中选择的,那么控制器180将与所有选定个体相关的信息670自动输入到接收人列表,并随后将用户输入的消息发送到所有选定个体。如果从菜单列表选择了另一功能,控制器180可将与所有选定个体相关的信息自动输入到选定功能的执行屏幕显示上。\n[0147] 图12是示出根据本发明的在便携终端中通过选择已识别的个体的面部照片,来编写照片日记的方法的示范性视图。\n[0148] “照片日记”功能允许用户存储随机照片以及与照片相关的多种信息,并且即使在日后仍可轻易地搜索与照片相关的信息。对此功能,其它便携终端可具有不同的名称。\n[0149] 在菜单列表651显示在示出已识别面部的个体的原始照片650上之后,如果从菜单列表选择“照片日记”功能,那么控制器180可显示“照片日记”功能的执行屏幕显示680。\n[0150] “照片日记”功能可包括照片的标题681、日期682、内容683、原始照片684、在原始照片上的已识别面部的个体的面部照片列表685。面部照片列表685指从原始照片684选定的个体的面部照片。\n[0151] 如图11所示,通过选择在照片日记的面部照片列表685之上显示的个体可同时执行便携终端的多种功能。\n[0152] 描述至此,已经详细描述了通过将便携终端中提供的各种功能与具有标签信息的面部照片相关联来执行这些功能的方法。\n[0153] 下面,将详细描述通过使用与具有标签信息的面部照片的个体列表(此后称为标签列表)相关联的各种统计数据来显示标签列表的方法,以及通过将标签列表与功能相关联来执行在便携终端中提供的各种功能的方法。\n[0154] 如果已识别面部的人的图像已被捕捉或者相对已识别面部的人执行终端的特定功能(例如,呼叫连接、消息发送、文件发送等),控制器180被配置为对每个已识别面部的个体分别管理照片的数量、图像捕捉的频率或执行功能的次数。也就是说,照片的数量、图像捕捉的频率或执行功能的次数可用于确定在用户和每个个体之间的亲密度。\n[0155] 此处,图像捕捉的频率是用来确定与时间相关的亲密度。相应地,即使两个不同的个体具有相同数量的已捕捉照片,但是具有更多最近捕捉照片的人要比具有更多先前捕捉照片的人具有更高的亲密度。\n[0156] 标签列表可显示在“标签信息设置屏幕显示”上选定的个体,或是从原始照片选定的个体。此处,可分离显示关于每个人或组的亲密度相关信息。可分离显示与用于确定亲密度的每条信息对应的联系人信息。\n[0157] 图13A和13C是示出根据本发明的用于在便携终端中对已识别的个体显示标签列表的方法的示范性视图。\n[0158] 如上所述,控制器180可根据预置的设置选项,对每个人设置亲密度相关信息的优先级。例如,具有高亲密度的人可具有更高的优先级。另外,可根据已设置的优先级,来区别显示与每个人相关联的信息。\n[0159] 参照图13A,每个联系人信息可具有不同大小,以被显示得相对更大或更小710、\n711。每个联系人信息可被显示得相对更亮或更暗。另外,也可以调整每个联系人信息的透明度。也就是说,亲密度越低,联系人信息被显示得越暗淡模糊,而亲密度越高,联系人信息被显示得越清晰。\n[0160] 参照图13B,可对每个人额外显示亲密度相关信息713。可以将亲密度相关信息显示为数字、百分比、图像或图形。此处,可将缩略视图中的面部照片712额外提供为亲密度相关信息。\n[0161] 参照图13C,可以分组显示亲密度相关信息。例如,可以对家庭、朋友、同事或顾客来分别显示亲密度相关信息。\n[0162] 此处,即使当显示照片列表时,控制器180也可对由用户选定的特定个体,来执行在便携终端中提供的多种功能。\n[0163] 已经描述了在移动终端中显示关于已识别面部的个体的亲密度相关信息的照片列表的功能。\n[0164] 可将与每个人的面部照片相关的标签信息设置为具有锁定功能。考虑到标签信息的锁定功能仅对标签信息分别设置,这不同于应用到便携终端的所有设置的锁定功能。如果由此设置标签信息锁定功能,可执行便携终端的除了对于所捕捉图像的面部识别功能以外的所有功能,并且不显示关于已经识别面部的照片的标签信息。也就是说,可以对使用与上述面部识别相关的所有功能(例如,电话簿/原始照片查看/呼叫信息查看/呼叫连接/消息发送/照片发送/文件发送/会议呼叫/照片日记/事件、时间表注册/空闲屏幕设置等)进行限制。用户可通过设置选项来设置标签信息锁定功能。\n[0165] 图14是示出根据本发明的便携终端中的数据库的示意图的示范性视图,该数据库用于已识别面部的个体的标签信息管理。\n[0166] 参照附图,作为用于面部识别功能的数据库,根据本发明的便携终端可包括:第一数据库(161,面部特征信息数据库),用于存储关于每个人的面部特征信息;第二数据库(162,标签信息数据库),用于存储对每个已识别面部的个体的标签信息(例如,与原始照片相关的信息、与在终端中提供的特定功能相关联的信息);与第一和第二数据库相关联的第三数据库(163,电话簿信息数据库),存储并参考关于存储在电话簿中的每个联系人的姓名和联系信息;以及与第一、第二和第三数据库相关联的第四数据库(164,照片数据库),存储包括已识别面部的个体的原始照片和在原始照片中捕捉到的面部照片。\n[0167] 可以将每个数据库161~163存储在存储器160中。\n[0168] 当执行面部识别算法时,控制器180可查阅对应于各个操作的数据库。例如,用户可输入特定命令,以检索预先存储在照片数据库164中的照片,或是对当前捕捉的或视频呼叫期间捕捉的照片/视频运行面部识别功能(S201)。\n[0169] 根据该用户命令,控制器180通过使用存储在存储器160中的面部识别算法来运行面部识别功能(S202)。\n[0170] 控制器180可查阅面部特征信息数据库161来进行面部识别。面部特征信息数据库161与标签信息数据库162和电话簿信息数据库163相关联。相应地,当要显示已识别面部的个体时,控制器180可一并显示已识别面部的个体和个体的标签信息(例如,姓名和联系人信息)(S203)。\n[0171] 用户可对每个已识别面部的个体存储面部照片信息,并且可连续添加和存储关于每个个体的面部照片信息(S204)。另外,可以存储与每个人相关联(例如,原始照片的文件名,存储原始照片的组)的原始照片信息。控制器180可控制照片数据库164和面部特征信息数据库161,以更新照片信息。\n[0172] 另外,当存储面部照片时,可设置用于面部照片的标签信息。为了设置这类标签信息,控制器180搜索预置的标签信息。如果存在用于新联系人的预先存储的标签信息,那么通过使用预先存储的标签信息来自动设置标签信息。如果不存在用于新联系人的预先存储的标签信息,那么用户可手动输入和设置用于新联系人的标签信息(S205)。\n[0173] 执行存储面部照片的操作和设置标签信息的操作的顺序可以改变。\n[0174] 控制器180可将用于新联系人的面部特征信息及其标签信息分别存储在面部特征信息数据库161和标签信息数据库162中,以供日后参考。\n[0175] 另外,可以将用于记录程序的介质实现为可以由计算机读取的代码。可以由计算机读取的介质包括用于存储数据的所有类型的记录设备,例如ROM、RAM、CD-ROM、磁盘、软盘和光数据存储设备。可以将介质实现为载波(例如,经由因特网的数据传输)。计算机可包括便携终端的控制器180。\n[0176] 对本领域的技术人员来说,显然在不偏离本发明的精神或范围的前提下,可以对本发明做出各种修改和变化。因此,本发明意图涵盖处于所附权利要求和其等效权利要求的范围之内的本发明的修改和变化。
法律信息
- 2017-09-15
未缴年费专利权终止
IPC(主分类): G06F 17/30
专利号: ZL 200810129483.X
申请日: 2008.07.31
授权公告日: 2010.09.29
- 2010-09-29
- 2009-04-01
- 2009-02-04
引用专利(该专利引用了哪些专利)
序号 | 公开(公告)号 | 公开(公告)日 | 申请日 | 专利名称 | 申请人 | 该专利没有引用任何外部专利数据! |
被引用专利(该专利被哪些专利引用)
序号 | 公开(公告)号 | 公开(公告)日 | 申请日 | 专利名称 | 申请人 | 该专利没有被任何外部专利所引用! |