CN1288543C - 一种多媒体装置和一种跟随信息显示方法 - Google Patents

Abstract

本发明涉及多媒体装置，它检测由多媒体装置处理过的音频/视频数据流中的至少一项信息项目，保存作为信息项目出现时间和至少一个选择标准组成的加权的函数的检测过的信息项目，在多媒体装置的输出单元上显示与用户选择的信息项目相关的跟随信息。

Description

一种多媒体装置和一种跟随信息显示方法

技术领域

本发明涉及允许多媒体装置用户获得更多有关在音频和/或视频数据流中出现的他/她不熟悉的信息项目的信息的方法。

背景技术

美国专利US-5973685的说明书公开了呈现给数字式传输媒体的用户的补充信息或线索(Pointers)的发送方法。补充信息和线索与数据流中的用户数据一起发送。该方法提出，用多帧形式把补充信息嵌入音频/视频数据流中，由此，在相关的帧基上发送信息。用户可用多路复用从数据流提取的信息中选择，因此，不需要发送信息的附加信道。辅助信息存在于指示分开的多个信道中发送的信息的线索。

发明内容

本发明的目的是，给用户提供有关用多媒体装置收到的消息的宽信息基。

用上述的多媒体装置实现发明目的，其中，检测在多媒体装置处理过的音频和/或视频数据流中的至少一项信息，

检测过的信息项目保存在包括在信息项目出现时间加权功能，和作为至少一个选择标准的功能。

与用户选择的信息项目相关的跟随信息显示在多媒体装置的输出单元上。

多媒体用户选择获得关于电视广播或音频或视频记录内容的补充信息。用现有的诸如Closed Caption in the USA and Teletext Subtitles in Europe的已知方法能有效检测多条信息项目的出现，和/或用语音识别补充检测，即语句中的字或单个字的自动识别方法。智能单元存在于信息项目中以传递意图，(即某些重要特征的概括)。有意义的缩写或一个字或多个字可构成一条信息。用光符读法(OCR)检测和记录广播中在字条或目录中以图形出现的信息项目。

过去的时段中电视广播中所述的已检测的信息项目和估计是稀有的信息项目保留在目录表中。目录表中的信息项目按选择标准，如出现的概率(ranty)和出现的时间函数，进行分类，使用户可选他/她感兴趣的信息项目。

用在多媒体装置的屏幕上显示的信息项目的目录表，用先进先出(FIFO)原理，或用更详细说明的目录表的信息项目，通过在多媒体装置上输入，用户能获得跟随信息。有序的目录表显示给用户，在包括出现时间和出现概率加权之后，多条信息项目列在目录表中。用户可进入数据流中信息项目出现概率的限定值，之后，有低出现概率的信息项目记录和显示在目录表中。

信息项目选择后，用户在此基础上要求补充信息，补充信息出现在多媒体装置的屏幕上。因此，用户作出选择，并查询他/她没有具体确定的信息，获得关于他/她的单个问题的信息。从网页，字表条目，短视频页或图文电视页以PiP(Program in Program)形式，或以屏幕上暂停电视广播的形式显示信息。

检测信息项目后，在现存的语言数据基础上从广播内容中筛选出显示的信息项目，和从信息项目产生第1目录表。记录信息项目出现的概率，和从语音数据中只去除那些出现概率没有达到预先设定的限定值的信息项目。出现概率的限定值可由用户自己设定。

拟定包括能提供信息的信息源上包含信息项目的第2目录表，并与第1目录表对准。从语音数据中进行同样的检测(筛选)和剔除不能提供跟随信息的多媒体装置的信息源的信息项目。

要求用户选择有关跟随信息的信息项目。如果多媒体装置在首选信息源中没有找到任何信息，则可以再访问信息源。

如果多媒体装置是专用数字式网络的构成部分，那么，有足够存储能力的要求的装置也可以存储例如晚上拟定的目录表。为了减少通信费用和工作，可用互联网源进行检索，或者，按稀有的/选择标准进行信息项目的特别严格的过滤，拉提是把收集在诸如CD/DVD的存储媒体上的信息项目中的必要信息项目进行充分的扩充。当用户经互联网检索工具提出询问后，最后的信息允许作为搜索引擎结果。

根据信息源用各种方式收集跟随信息。多媒体装置的信息源可包括诸如数字式多用透光盘(DVD)。光盘(CD)，互联网或其它装置的存储媒体。从诸如DVD，CD，允许互联网供应者更新数据时数据库或用可存取的互联网源检索和装载的信息。可以在用户没有实际使用多媒体装置时更新数据库。

允许存在与按信息源选择的信息项目相关的信息。如果跟随信息包括视盘或数字式多用途盘(DVD)的影片片段，按PiP显示的信息显示在多媒体装置的屏幕上。如果说明信息是由外部网页产生的，那么会出现互联网搜索引擎。

多媒体装置的用户对获得他/她想要的具体信息作出选择。按用户要求采取信息提供措施。系统通过杂找合适的信息源来提供符合用户知识水平的信息，以提高可用性。由于跟随信息不在广播发送的音频/视频数据流中发送，所以不必与发送数据供应者合作。用互联网作为信息源可以得到特别新的信息。由于信息项目出现在多媒体装置的屏幕上的渐变目录表中，所以用户不需知道信息项目的准确拼写，以请求跟随信息。

本发明涉及关于用多媒体装置处理过的音频/视频流中至少一条信息项目的跟随信息的显示方法。按包括信息项目出现时间和选择标准的加权，保存用发明方法检测过的信息项目，与用户选择的信息项目相关的跟随信息显示在多媒体装置的输出单元上。

附图说明

将参见附图所示的实施例进一步描述发明，但是，发明不限于这些实施例，附图中：

图1是存取信息源期间的多媒体装置；

图2是存取信息源期间的流程度。

具体实施方式

图1所示多媒体装置1是专用数字式网络的构成部分，它与其它装置链接一起在私人网络上。多媒体装置1可用遥控器5，语音命令或其它输入机构控制。例如DVD播放装置的存储媒体用作多媒体装置的信息源2。由多媒体装置1拟定的目录表3包含在音频和/或视频数据流中出现的项作为信息项目。多媒体装置处理音频和/或视频数据流，并发回用户想要的跟随信息的内容。第2目录表4包含可以返回到存储媒体2上的在跟随信息上的项目。

专用网络的用户在多媒体装置的屏幕上看电视广播(音频和视频数据流)，会喜欢广播中所述的关于图像的跟随信息。

第1目录表3包含从广播的音频数据流，(例如“Camel driver”)视频数据流，(例如“Algiers”)和付标题流，(例如“Corscors”)提取的最新信息项。它与第2目录4由与允许在DVD回放装置2的数字式多用途盘DVD上的跟随信息相关的项组成，并按要求显示给用户。操作遥控器5的按钮，目录表6包括按用户的选择标准，在加权的广播中出现的项。用户从该目录表中选择他/她感兴趣的项，例如(例如“Couscous”)。之后，多媒体装置1收回存储在DVD回放装置的数字式多用途光盘DVD上的与该项相关的信息。跟随信息，(例如食谱和传说，)以PiP形式在多媒体装置的屏幕上的节目中显示给用户。

以下将参见图2中的流程图列出和说明负责控制和管理功能的控制器在上述情况中处理过的程序单元。详细地说，输入流6，屏幕7，查询12和输入15和说明存储器18，与在控制器中执行后面的处理步骤的检测器8，初步滤波器9，项滤波器10，项目录表11，两个询问13和16，项选择发生14和说明显示17一起组成流程。

检测和滤波数据流中出现的项

输入的音频和视频流6不仅显示在屏幕7上，还传送到检测器8，用各种机构(例如，用光符读出图像中出现的字，用音频信号的语音识别或对图文电视会标题的简单处理)，提出输入流6的项。检测器8输出按该方式检测过的全部项。为了进一频简化处理，在控制器中局部显示的信息基础上，剔除用户最不感兴趣的项，使初步滤波器9中生成的项流减少。在最简单的情况下，这可以由包括频繁出现在相应语言中的项(例如，“和”，“或”…)的“停止字”目录表组成。

数据流中检测的项(字)与包括在字目录表中的项相比，如果项没出现在字目录表中，项则由以下程序单元返回：

串滤波器1(Word:string)

{

如果(NOT word INWortliste)

之后返回word;

否则返回0;

}

项滤波器10中，全部术语被从不含任何跟随信息的项存储器(即本例中的DVD)上生成的项流中剔除。为此，必需存取控制器外的信息(例如DVD上出现索引。以后的程序单元只返回那些其上能得到跟随信息的项。

串滤波器2(Word:string)

{

如果(Datenspeicher.index.contains(word))

之后,返回word;

否则,回0;

}

项滤波器10可测试与项相关的信息的几个数据存储器，其中，项数据库不需静态，也可是动态的其它程序。

通过设定项出现概率(频率)的限定值(截止电平)，可在程序中的这一点适应用户的知识水平，当出现概率高于设定的限定值时，用户对有关项不感兴趣，因此程序单元不返回术语。

串滤波器2(word:string,benutzer:person)

{

float schnittlevel=benutzer.praeferenzen.haeufigkeitsschnittlevel;

如果(Haeufigkeitsliste.getHaeufigkei(word)<schnittlevel)

之后,返回word;

否则,回0;

}

与初步滤波器相反，由于频率目录表的规模而使这里的频率目录表装在说明存储器18中。

相关项存储

初频滤波器9和项滤波器10没剔除的项(字)存在项目录表11中。目录表根据FIFO(先进先出)原理拟定操作，它只包括最近出现的项。以下的程序单元存储整个目录表中相应的项和它的出现时间。

    Woid intoList(word:String)

    {

    Time zeit=System.getTime();

    ListEntry wortUndZeit;

    WortUndZeit.word=word;

    WortUndZeit.time=zeit;

    Fifo.append(wortUndZeit);

    If(fifo.length＞Preferences.fifolength)
        <!-- SIPO <DP n="5"> -->
        <dp n="d5"/>
    Fifo.popFirst();

    }

按用户的查询12，例如操作遥控器按钮查询，询问器13正面回答，用项选择发生器14按FIFO原理从程序单元中拟定的目录表为用户产生排序合理的目录表。为了达到高的使用效率，不能对出现的目录表用出现时间进行简单分类，但选择标准对目录表有额外的影响。

以下的程序单元中，选择标准对应项出现频率。这里可变量N表示要显示的目录表的长度，W1或W2表示出现频率和出现时间中存储的项加权。

    OrderedSet set;

    SetEntry wortUndRating;

    LisEntry wortUndZeit;

    Float rating;

    While(NOT list.empty)

    {

    wortUndZeit=list.getHead();

    list.removeHead();

    rating=(wortUndZeit.time-current Time)*W1

    +Haeutigkeisliste.getHaeufigkeit(woetUndZeit.wort)*W2;

    wortUndRating.wort=wortUndZeit.wort;

    wortUndRating.rating=rating;

    set.insertOrdered(wortUndRating)

    }

    for(ing I=1 to N)

    {

    ergebnis[i]=set.getTopmostItem().wort;

    set.removeTopmostItem();

    }

    return ergebnis;

    }

该目录表显示在屏幕上，因此，给用户提供了选择项的时机(例如，用遥控器上的数字按钮选择)。一旦用户作出选择，关于所选的项经输入15传输到询问16。询问16正面回答，用说明显示器17从说明存储器18提取相关的跟随信息，(例如，视频数据流或文本)和显示在屏幕7上。

以下简要描述关于按本发明的多媒体装置上的多种情况。

发送足球赛无线电多媒体上时，用户可根据语言识别检测到的运动员的名字从适当的信息源请求多媒体装置1的输出单元上的运动员的图像和/或传记。

该情况下用语音识别操作检测器8。说明存储器18包括例如，用运动杂志，提供的CD，或存储在一个以上的网站上的数据，(例如，属于足球俱乐部的网站所存储的数据)，这些数据的索引已拟定并存储存储器中。项滤波器10只把索引中包括的那些项供给FIFO目录表。如图1所示的详细例中所示，经附加的可用的屏幕显示出对跟随信息的要求(查询12)，但也可以受语音识别限制，和合并到高频(hi-fi)设备的输入/输出概率中。

用户听外语广播时，多媒体装置变得特别有用。用DVD字典作信息源，用户可选择不熟悉的外语单词的翻译。

详细例中已指示出处理步骤。但是，由于它能用于不同的语言初步滤波器9要设有DVD上的目录表(即，图2中的流程图)，它对应说明存储器18。如果CVD同时供给语言课程，那么，在项的总频率分布的基础上，项滤波器10的处理不足，但用户不再国有中列出的那些字，或者只读语言课程。

远程用户通过教育广播，用与教育广播匹配存储在DVD上的课本学习课程，通过并行信息源(教育广播和提供的课本)，以有效地理解主题。

按指示重新处理各处理步骤，但是，像上述例一样，可选择设置项滤波器9的参数，使其与用户在他/她的学习过程匹配。

共享信息的互联网基数(internet-based)供应者使光符识别(OCR)可用于用户，它允许用户在广播中从文字组成的广西字条和在屏幕上滚动的短信中检测项，从互联网提取信息更新文本字条的相关内容(如股票行情)。

用户有可能廉价访问价格共享的信息，同时提供各公司共享的扩充的背景信息。OCR在屏幕上的限定区上进行检测处理。所提供的要受检测器8控制的区域可充分限制在彩带条(ticker strip)上。而不用初步滤波器。若信息供应者另外还要保证有全部短信跟随信息的文本条出现，也可以不同项滤波器10。该情况下，按用户要求，说明存储器18是信息供应者的网站，说明显示器17由此收回跟随信息。

制造商以例如压缩光盘(CD)形式向用户供应数据包。竟争者推销广播时，用户可向多媒体装置询问，获得存储在CD上的有关制造商的产口范围的信息，并用该信息与销售广播期间出现在屏幕上的全部产品比较。

CD包含产品信息和产品能达到的索引，因此不必按特定的频率目录表进行滤波。项滤波器只选择出现在CD上的用于储存在FIFO目录表中的全部项。可选择地抑制(查询12)接收用户输入，说到竟争者的产品时，信息自动显示。

Claims (4)

1.一种多媒体装置，用于检测由多媒体装置处理过的音频和/或视频数据流中的至少一个信息项目，

有至少一个存储器，用于保存作为信息项目出现时间和至少一个选择标准组成的加权的函数的检测过的信息项目，

有输出单元，用于呈献与用户选择的多媒体装置信息项目相关的跟随信息，其中拟定音频和/或视频数据流中检测过的信息项目的第1目录表(3)和与跟随信息相关的信息项目的第2目录表(4)，并使它们相互对准，以及第1目录表(3)包含多条信息项目，这些信息项目的出现概率不低于上述的限定值，和在音频和/或视频数据流中记录信息项目出现的时间。

2.按权利要求1的多媒体装置，其特征是，检索至少一个信息源(2)中的跟随信息；和

在第1信息源中没找到跟随信息时，检索另一信息源。

3.按权利要求2的多媒体装置，其特征是，跟随信息按信息源显示给用户。

4.一种跟随信息显示方法，其中，检测由多媒体装置处理过的音频和/视频数据流中的至少一项目信息项目，

检测过的信息项目作为信息项目出现时间和至少一个选择标准组成的加权的函数保存，

与用户选择的信息项目相关的跟随信息显示在多媒体装置的输出单元上，其中拟定音频和/或视频数据流中检测过的信息项目的第1目录表(3)和与跟随信息相关的信息项目的第2目录表(4)，并使它们相互对准，以及第1目录表(3)包含多条信息项目，这些信息项目的出现概率不低于上述的限定值，和在音频和/或视频数据流中记录信息项目出现的时间。

Images