使用多媒体用户简档的多媒体检索和浏览方法

1.一种在索引和浏览多媒体对象中产生多媒体用户简档的方法，其特 征在于，该方法包括以下步骤：
组合检索项目的排序标准信息；和
组合关于检索项目排序标准的用户优先级信息，以显示将要按用户首 选的安排来浏览的检索项目，其中，项目排序标准还包括标准类别和优先 级信息，该优先级信息用于表示相关标准类别的优先级。
2.根据权利要求1所述的方法，其特征在于：用户简档包括检索项目 排序标准信息，所述检索项目排序标准信息包括项目类别，该项目类别可 以作为检索和浏览的标准，以便显示根据用户的喜好排列的要浏览的检索 项目。
3.根据权利要求2所述的方法，其特征在于：所述检索项目排序标准 信息还包括项目排序标准，以便决定每一项目类别的检索项目的排序。
4.根据权利要求3所述的方法，其特征在于：项目排序标准包括标准 类别，用于表示排序标准的类别。
5.根据权利要求4所述的方法，其特征在于：其标准类别代表包含在 现有用户简档中的相关项目的优先级，并根据该优先级显示检索项目。
6.一种在索引和浏览多媒体对象中使用多媒体用户简档信息的多媒体 检索和浏览方法，其特征在于该方法包括：
(a)从用户简档识别检索项目的排序标准信息和关于该项目排序标准 的用户优先级信息，其中，项目排序标准还包括标准类别和优先级信息， 该优先级信息用于表示相关标准类别的优先级；
(b)根据用户的优先选择，按照基于项目排序标准的较高用户优先级来 显示检索项目；以及
(c)检索和浏览按照用户优先级显示的检索项目所指示的检索对象。
7.一种在索引和浏览多媒体对象中使用用户简档信息的多媒体检索和 浏览方法，其特征在于该方法包括步骤：
(a)从所述多媒体对象识别作为索引标准的检索项目和说明每一检索 项目的排序标准的排序标准信息，其中，项目排序标准还包括标准类别和 优先级信息，该优先级信息用于表示相关标准类别的优先级；
(b)从所述用户简档识别用于说明可以作为检索和浏览标准的项目的 项目类别和说明每一项目类别中该多媒体对象排序信息优先级的用户优先 级值；
(c)按照每一检索项目中该用户简档的较高优先级值的顺序选择排序 标准信息；
(d)通过使用从用户简档选择的排序标准信息根据所述用户优先级来 显示多媒体项目；以及
(e)检索和浏览用户优先级反映的检索项目所指示的检索对象。

技术领域\n本发明涉及一种产生多媒体用户简档的方法和使用多媒体用户简档的 多媒体检索和浏览方法，特别涉及使用这样一种多媒体用户简档的多媒体 检索和浏览方法：它能够依据用户优先选择来显示检索项目，并且能通过 这些基于用户优先选择显示的检索项目检索和浏览相关的多媒体。\n背景技术\n通常用户可以通过接收由广播站发出的视频信号和音频信号来观看电 视，也可以通过同样的途径在电影院中观看电影。\n然而该用户可能想观看一出戏剧或是一部电影中的某一段，因此，已 经有基于各种视频媒体的相关技术出现，以使用户可以选择戏剧或电影的 某一段。\n例如，用户可以通过一个像LAN(局域网)这样的网络与一个视频提供方 联接，从而有选择性的挑选一出戏剧或一部电影。\n此外，用户还可以有选择性的再现他所选择的戏剧或电影中的某一段 运动画面，该画面显示的可以是该用户想要观看的人物、事件、地方或物 品。\n此外，用户不需要再现全部内容也可以自动的、快速的重现视频内容 的重要部分，这些视频内容可以是新闻节目，体育节目，或是一部电影， 对于表示每一幅运动画面段落的关键帧，用户还可以通过设置并显示这些 关键帧，再现定制的运动画面。\n已经有某些技术来实现上述功能。\n例如，有一种技术，它在一系列的组中表示各种视频内容，如模式组、 索引组、媒体组、段组、对象组、或表示组，显示来自对象组和表示组的 关于人物、物品(对象名称，屏幕上的位置，该对象在此视频内容中的数量 值等)的信息，并且当用户从对象组的表中选择对象时，再现出现该对象的 某个视频片段。\n另外，还有一种技术能够提供一些列表，这些列表是关于视频内容制 作前，制作中或者制作后产生的各种附加信息。\n例如，附加信息列表可以提供视频内容中出现的人物及物体位置的相 关信息，还可以在用户从表中选择一个对象时产生相应场景。\n而且，当所选对象是一件物品时，它将显示物品的相关信息，如制造 商，价格等，并且和物品的制造商或销售代理建立联接。\n另外，还有一种技术可以提供一种含有视频内容每一部分信息的部分 映射。\n换句话说，该部分映射显示了视频内容每一部分的信息(暴力，提示， 价值，人物，职务，困难等)，用户可以通过登记该视频部分映射中各项目 的用户优先级，在视频内容中重现所需的部分，还可以限制无法确认身份 的用户传输某一特定内容。\n另外，还有一种技术能够图示若干运动图像的时间关系图。\n然而，通过只观看该若干运动图像的时间关系图，要理解运动图像内 容的情节发展是有困难的，因为这就如同只使用几幅代表性场景来理解整 个内容。\n上面所述的传统的活动画面检索技术，只是显示一些项目，其简单列 出戏剧或电影中出现的对象的各种信息。并且根据用户的选择执行功能。\n此外，由于用户可以获得一部分与所选项目相关的多媒体，有效的检 索和浏览这些多媒体也是可能的。\n然而，随着多媒体数目的增加，检索或浏览的项目也不得不增加。于 是已经引入根据用户优先选择来选择性地显示检索项目的技术。\n例如，有一种自动设置方法，当用户通过存储一个电视频道，一种音 乐类型，或用户喜爱的音量而动手处理该系统时，该方法可以自动设置系 统并使用存储的信息。\n另一种根据用户优先级检索节目的方法，是通过比较用户优先级表和 存储在节目特征表中的诸如人物，节目类型，体育类别，体育团队等等一 类的信息，来检索节目。\n还有一种方法可以根据用户的需求，通过比较商品已经存储的特征(尺 寸，价格，功能等)和用户要求的特征来检索产品。\n还有一种方法能通过了解用户的优先选择，自动设置视频显示单元的 参数，如音量，亮度。\n还有一种方法，用户无论何时查看电子邮件(E-mail)时，都能根据用 户的喜好显示电子邮件。\n还有一种方法能通过了解用户的优先选择提供定制的电子报纸。\n上述多媒体检索和浏览系统存储了需被检索/浏览的检索项目的优先 级，并且根据该优先级检索/浏览多媒体。\n在以上系统中，有一个检索器和一个浏览器为用户显示检索项目(如人 物，地点，事件，物品，关键帧等)，有多种方法向用户显示这些检索项目。\n例如，可根据各种标准显示检索项目，比如字母顺序，显示号码，优 先级，出现顺序等。\n对于这些标准，每一用户可有不同的优先选择，但传统技术并没有考 虑到标准中的这种不同。\n发明内容\n本发明的目的在于提供一种产生多媒体用户简档的方法和使用多媒体 用户简档的多媒体检索和浏览方法，该方法能够依据用户优先选择来显示 检索项目，并且能通过使用这些基于用户优先级显示的检索项目来检索和 浏览相关的多媒体。\n为实现上述目的，本发明提供一种在索引和浏览多媒体对象中产生多 媒体用户简档的方法，该方法包括以下步骤：组合检索项目的排序标准信 息；和组合关于检索项目排序标准的用户优先级信息，以显示将要按用户 首选的安排来浏览的检索项目，其中，项目排序标准还包括标准类别和优 先级信息，该优先级信息用于表示相关标准类的优先级。\n本发明还提供一种在索引和浏览多媒体对象中使用多媒体用户简档信 息的多媒体检索和浏览方法，该方法包括：(a)从用户简档识别检索项目的 排序标准信息和关于该项目排序标准的用户优先级信息，其中，项目排序 标准还包括标准类别和优先级信息，该优先级信息用于表示相关标准类的 优先级；(b)根据用户的优先选择，按照基于项目排序标准的较高用户优先 级来显示检索项目；以及(c)检索和浏览按照用户优先级显示的检索项目所 指示的检索对象。\n本发明还提供一种在索引和浏览多媒体对象中使用用户简档信息的多 媒体检索和浏览方法，该方法包括步骤：(a)从所述多媒体对象识别作为索 引标准的检索项目和说明每一检索项目的排序标准的排序标准信息，其中， 项目排序标准还包括标准类别和优先级信息，该优先级信息用于表示相关 标准类的优先级；(b)从所述用户简档识别用于说明可以作为检索和浏览标 准的项目的项目类和说明每一项目类中该多媒体对象排序信息优先级的用 户优先级值；(c)按照每一检索项目中该用户简档的较高优先级值的顺序选 择排序标准信息；(d)通过使用从用户简档选择的排序标准信息根据所述用 户优先级来显示多媒体项目；以及(e)检索和浏览用户优先级反映的检索项 目所指示的检索对象。\n附图说明\n图1示出本发明实施例中的一个多媒体数据结构。\n图2示出图1所示多媒体数据结构的一实施例。\n图3A-3D示出图1所示多媒体数据结构的另一实施例。\n图4示出本发明检索项目排序标准优先级信息结构。\n图5示出本发明检索项目优先级信息的结构。\n图6示出了本发明检索项目优先级的一实施例。\n图7示出使用图6所示用户优先级的视频浏览器。\n图8A-8D示出按照排序标准信息的一个多媒体对象的排序信息。\n图9示出使用图8所示多媒体对象的检索项目排序标准优先级信息结 构。\n具体实施方式\n图1示出本发明实施例的一个多媒体数据结构。\n如图1所示，多媒体对象101包括一个用于检索和浏览的检索项目102 和一个被检索和浏览的检索对象103。\n检索项目102包括表示该检索项目所属类别的检索项目类104和用于 连接检索对象的检索对象连接信息105。\n当多媒体对象101是运动画面时，检索项目102中包括的项目可以是 一个人物或一个事件。\n检索对象103可以是显示该人物或事件的一段画面，而检索对象连接 信息105可以是用于连接相关人物和事件到相应段的信息。\n图2示出图1所示多媒体数据结构的一实施例。\n首先，一个音频-视频描述方案201，包括一个用于描述显示该多媒体 对象的画面段的DS句法(描述方案)202，和一个用于描述有意义信息的DS 语义(描述方案)203。\n该DS句法(描述方案)202包括一个作为真实运动画面段的段DS(描述 方案)204，一个活动范围DS(描述方案)205和一个段/活动范围关系图206。\n该DS语义(描述方案)203包括一个用于描述诸如人物、地点一类对象 信息的对象DS(描述方案)207，一个用于描述事件的事件DS(描述方案)208 和一个用于描述人物、地点或事件间关系的对象/事件关系图209。\n此处，检索项目102包括段DS(描述方案)204，活动范围DS(描述方 案)205，段/活动范围关系图206，对象DS(描述方案)207，事件DS(描述方 案)208，对象/事件关系图209，而项目类104识别上述检索项目。\n图3A-3D示出图1所示多媒体数据结构的另一实施例。\n换句话说，图3A-3D示出了图1所示多媒体对象101的项目类104和 检索对象103的示例，图3A-3D是对图1的细节描述。\n首先，项目类104可以是所有的检索项目，如人物，关键帧，地点， 男/女演员，物品，关键字，音乐等。\n检索对象103可以是一段显示人物的运动画面段，由关键帧代表的运 动画面段，一出显有某一男/女演员的电影或戏剧，包括某一关键字的文档， 或者是一段记载了和特定曲调相似的曲调的音频节奏等。\n图3A示出一个普通文本文档项目，该文本文档是项目类104中的一个 关键字，检索项目102可以是关键字1，关键字2，关键字3，...，关键字 N。\n检索对象103可以是文档1，文档2，文档3，...，文档N。\n图3B示出运动画面项目类，该项目类是人物，该检索项目可以是人物 1，人物2，人物3，...，人物N。\n另外，该检索对象103可以是出现相关人物的外形段N。\n图3C示出运动画面项目类的另一个例子，该项目类104是关键帧，该 检索项目102可以是关键帧1，关键帧2，关键帧3，...，关键帧N。\n该检索对象103可以是外形段1，外形段2，外形段3，...，外形段N。\n图3D示出运动画面项目类的另一个例子，该项目类104是演员名字， 检索项目102可以是演员1，演员2，演员3，...，演员N。\n该检索对象103可以是出现相关演员的电影1，电影2，电影3，...，电 影N。\n图4示出本发明检索项目排序标准优先级信息的结构。\n换句话说，它描述了一个用户简档信息结构，该结构包括检索项目排 序标准的优先级。该优先级反应一个如图1或图3所示的多媒体对象体结 构的用户优先级，以下将作更详细的描述。\n首先，检索项目排序标准信息401包括一个检索项目类402，和一个根 据该项目类决定检索项目排序的项目排序标准403。\n该项目排序标准403包括一个标准类别404，和一个关于每个标准类别 的优先级值405。\n因此，图1或图3中的多媒体对象，可以考虑检索项目排序标准通过 使用图4中用户简档信息来检索。\n另外，在浏览该多媒体对象时，检索项目可以通过按照用户优先选择 得出的检索项目排序标准来显示。\n据此，当用户检索和浏览某一对象时，检索装置为用户显示检索项目。 检索项目的排序是根据例如图4中所述用户简档信息中的项目排序标准403 来实现的。\n例如，当要检索和浏览运动画面中的一个人物时，该项目排序标准403 可以是该人物的出现次数或是该人物的年龄，而当此检索和浏览是通过使 用该运动画面的关键帧来实现时，项目排序标准403可以是由关键帧代表 的运动画面的时间排序，关键帧的亮度，或是关键帧图像的色彩。\n另外，该项目排序标准403的优先级值405是用户存储的信息。\n当用户选择了首选的标准，在项目排序标准403中存储该标准，并且 使用检索装置进行检索和浏览时，该检索装置会基于用户关于该项目排序 标准的优先级值进行显示。\n图5示出本发明中检索项目优先级信息结构。\n如图5所述，检索项目优先级501包括一个检索项目502，一个项目类 别503，一个项目优先级504，和一个优先级值505。\n项目类别503可以是上文描述的人物，地点，和关键帧。\n当项目类别是人物时，检索项目502可以是人物1，...，人物N。\n项目优先级504描述了项目类中某一检索项目如人物，地点，关键帧 等的用户优先级，其值为优先级值505。\n图6示出了本发明中检索项目优先级的实施例。\n如图6所述，当检索类别是人物时，用户优先级被描述为每一个人物(人 物1，...，N)的每一个检索项目的特定值。\n例如，象人物1的优先级‘100’，人物3的优先级‘46’，优先级值显 示在每一检索项目(人物)上。\n换句话说，多媒体检索和浏览装置可以从带有该优先级信息的用户简 档中显示人物如人物1，人物2，人物3，...，人物N。\n另外，用户通过观看按用户优先选择顺序(优先级)显示的检索项目， 可以很容易的检索/浏览相关人物出现的片段。\n图7示出使用图6中用户优先选择的视频浏览器。\n换句话说，它描述了基于人物显示的运动画面浏览器。\n如图7所示，检索项目从人物1到人物N(N＝4)按照用户优先选择的顺 序，在一个人物屏幕701上显示。\n于此，当用户选择人物1时，相应于人物1出现的运动画面(检索对象) 的关键帧被显示在一个主要场景屏幕702上。这里，当用户选择场景3时， 主屏幕703重现相关的运动画面段。\n图8A-8B按照排序标准信息示出一个多媒体对象的排序信息。\n图8A示出一个用于对象DS的包括三个排序标准信息(优先权，年龄， 名字)的结构。\n图8B示出基于三个排序标准信息(优先权，年龄，名字)的排序信息。\n换句话说，当对象DS(描述方案)801是图2所述多媒体结构中的一个 人物，对象DS(描述方案)包括表示对象类型和对象名称的语义信息802， 和显示排序标准信息和排序关键字的排序信息803。\n这里，对象DS(描述方案)显示基于三个排序标准信息(如优先权，年龄， 姓名)的排序信息。\n如图8B所示，人物A1，T2，T1，B2，...，是根据优先权显示的，人 物B2，A1，B2，...，是根据年龄显示的，而人物A1，A2，A3，B1，...， 是根据姓名显示的。\n图9示出使用图8中多媒体对象的检索项目排序标准优先级信息的结 构。\n如图9所示，检索项目排序标准优先级901包括一个关键项目902和 一个排序优先级903。\n排序优先级903包括一个标准参考904和一个优先级值905。\n标准参考904指示的是多媒体对象上显示的排序标准信息。而优先级 值905表示这些参考排序标准的优先级。\n因此，通过参考从图9的用户简档信息识别的图8中的多媒体对象， 基于用户优先级的检索项目的排序和使用该检索项目的排序的多媒体检索 和浏览是可能的。\n换言之，基于排序标准优先级值905的标准参考904通过使用用户简 档中描述的检索项目排序标准优先级901，在图8所示多媒体对象数据结构 的排序标准信息的基础上显示该多媒体对象的检索项目。\n之后，从显示信息中实现关于相关多媒体对象的检索和浏览。\n如上所述，当与多媒体有关的检索项目显示后，通过按照用户优先选 择在检索项目排序标准中选择一个标准后显示该检索项目，本发明能有效 实现多媒体对象的检索和浏览。\n另外，本发明可以应用于多媒体业务系统中，如VTR(录像机)，VOD(视 频点播)，AOD(音频点播)，互联网等...\n另外，本发明可以根据用户的优先选择很容易地检索/浏览对象。