CN103377268A - 运用后设数据来进行目标识别与事件重现的系统 - Google Patents

Abstract

本发明揭示一种运用后设数据来进行目标识别与事件重现的系统。该目标识别与事件重现系统，包括：一伺服器，以及一广播者，耦接至该伺服器。回应于该广播者所发出的一请求，该伺服器送出一事件后设数据与一识别数据。根据该事件后设数据与该识别数据，该广播者同时进行一即时影像广播与一即时目标识别。如果该广播者识别出一目标的话，该广播者将一识别结果回传至该伺服器。

Description

运用后设数据来进行目标识别与事件重现的系统

技术领域

本发明一种运用后设数据(metadata)来进行目标识别与事件重现的系统。 

背景技术

计算机科技及多媒体应用已成为现代人生活中重心之一。以娱乐而言，喜爱球赛的人可能会进场观看现场比赛，以为球队/球员加油打气，来抒发心中压力。 

不过，以目前而言，即便是在现场观看球赛，使用者的观看角度可能受限于其座位与观看角度，而无法了解球场上可能有其他事件在发生。 

对于无法/不方便进球场观看现场比赛的人而言，其可选择在电视上看球赛转播。然而，坐在电视前面观看电视转播的观众可能更加无法了解球场上所发生其他事件(假如转播单位的镜头无法带到这些突发事件的话)，也无法得知目前球场上的气氛。 

故而，本发明揭示一种运用后设数据来进行目标识别与事件重现的系统，其能通过在场观众所收集的事件相关信息，让其他使用者得到即时统计信息，以让使用者(不论是否在球场上)更加溶入现场气氛。 

发明内容

本揭示实施例是有关于一种运用后设数据来进行目标识别与事件重现的系统，其能通过在场观众所收集的事件相关信息，让其他使用者得到即时统计信息。 

根据本揭示的一示范性实施例，提出一种目标识别与事件重现系统，包括：一伺服器，以及一广播者，耦接至该伺服器。回应于该广播者所发出的一请求，该伺服器送出一事件后设数据与一识别数据。根据该事件后设数据与该识别数据，该广播者同时进行一即时影像广播与一即时目标识别。如果 该广播者识别出一目标的话，该广播者将一识别结果回传至该伺服器。 

为了对本发明的上述及其他方面有更佳的了解，下文特举实施例，并结合附图详细说明如下。 

附图说明

图1显示根据本发明一实施例的运用后设数据来进行目标识别与事件重现的系统图。 

图2显示根据本发明实施例的广播者120的硬件架构功能方块图。 

图3显示根据本发明实施例中，广播者从伺服器得到事件后设数据来进行目标识别的示意图。 

图4显示根据本发明实施例中，伺服器与广播者间的信号流程示意图。 

图5A显示根据本发明实施例中，利用图像化/视觉化来呈现广播者于现场地图界面的一例。 

图5B显示根据本发明实施例中，将广播者所回传的识别结果利用即时统计数据来重现的一例。 

图6A~图6C显示根据本发明实施例的媒合的一例。 

图7显示根据本发明实施例的广播者的广播流程图。 

图8显示根据本发明实施例中，如何建立新的事件后设数据。 

图9显示根据本发明实施例的伺服器建立识别数据的流程。 

图10显示根据本发明实施例中，广播者A加入另一广播者B的广播，成为其观看者。 

附图符号说明 

100：目标识别与事件重现系统 

110：伺服器 

120：广播者 

130：观看者 

140：现场地图界面 

150：网络和/或其他事件信息来源 

111：处理单元 

210：处理单元 

215：储存单元 

220：显示单元 

225：网络存取模块 

230：影像撷取模块 

235：声音撷取模块 

240：定位感测器 

245：定方向感测器 

S310~S330、S410~S460、SS710~S755、S810~S840、S910~S930：步骤 

510：图像 

805：识别数据库 

具体实施方式

现请参考图1，其显示根据本发明一实施例的运用后设数据来进行目标识别与事件重现的系统图。如图1，目标识别与事件重现系统100包括：伺服器110、至少一广播者(broadcaster)120与至少一观看者(viewer)130。广播者120并不受限为转播单位。伺服器110包括处理单元111，其耦接至事件数据库(显示于其他图中)与识别数据库(显示于其他图中)。广播者120与观看者130比如是在球赛现场观看比赛的使用者所持有的电子装置。在下文中，广播者120与观看者130也可能是指使用者而言。 

大体来说，本发明实施例的运作方式如下。以球赛转播为例，广播者120可从伺服器110中的事件数据库下载「事件后设数据」。在此以进行目标识别为例做说明。在下载「事件后设数据」后，广播者120据以来对球场上的球员/人物进行识别，并将识别结果回传给伺服器110，广播者120所回传的识别结果可成为伺服器110中的事件数据库的一部份。所谓的「后设数据」是指用以描述数据的数据，其细节将于底下说明的。 

在进行识别时，使用者得要先要有待识别目标的照片、影像、声音等。以现有技术而言，这些照片、影像、声音得要由欲进行识别的使用者先行准备好，于进行识别时，将所撷取的影像与这些照片进行比对，以确认是否识别成功。所以，以目前技术而言，对使用者而言，其得要准备大量的待识别目标的数据(如照片、影像、声音)，对使用者而言非常麻烦又不方便。故而，在本发明实施例中，待识别目标的数据是由伺服器来准备，使用者对伺服器 发出请求后，伺服器会将待识别目标的数据与其后设数据传给使用者，方便使用者进行目标识别。 

如果观看者130对于广播者120所撷取的现场影音画面有兴趣的话，观看者130在取得广播者120的同意后，观看者130可通过现场地图界面(live map interface)140来即时观看广播者120所撷取的现场影音画面。在此，现场地图界面140比如以网页形态或是以应用程序(application,APP)形态。 

更进一步地说，如果现场地图界面140以网页形态的话，则观看者130可通过如浏览器等软件来连线至伺服器110，以即时观看广播者120所撷取的现场影音画面。如果现场地图界面140以应用程序形态的话，则此应用程序会即时主动地将广播者120所撷取的现场影音画面会传送至观看者130的装置(比如是手机、笔记型计算机、计算机、平板计算机等)。 

此外，对于广播者120所要求的后设数据，伺服器110还可连线至网络和/或其他事件信息来源150，以取得更多的相关后设数据。 

此外，广播者120安装应用程序，以致能事件后设数据与影像识别功能。比如，此应用程序可安装于储存单元215内。 

图2显示根据本发明实施例的广播者120的硬件架构功能方块图。如图2所示，广播者120包括：处理单元(如中央处理器CPU)210、储存单元215、显示单元220、网络存取模块225、影像撷取模块230、声音撷取模块235、定位感测器240与定方向感测器245。广播者120的操作系统并不受限。 

处理单元210用以进行运算，比如，进行脸部识别相关运算。储存单元215用以储存数据，比如由伺服器110所传的事件后设数据等。显示单元220用以显示影像，比如，其可显示广播者210目前撷取的影像。广播者120可通过网络存取模块225而上网以连线至伺服器110，比如是有线连线或无线连线。影像撷取模块230与声音撷取模块235用以撷取影像与声音，比如，可撷取待识别目标的影像与声音，以进行识别。定位感测器240(比如是全球定位系统GPS)用以定位出广播者210的位置，比如，其可定位出广播者210的经纬度。定方向感测器245(比如是电子罗盘(digital compass))可定出广播者210目前的方向(亦即，比如是广播者210的装置所指向的方向)。广播者210可将其位置与方向传送给伺服器110。 

相似地，观看者130的功能方块原则上可相同或相似于广播者120，不过，观看者130可以选择性包括影像撷取单元、声音撷取单元、定位感测器 与定方向感测器。观看者130的操作系统也不受限。 

现请参考图3，其显示根据本发明实施例中，广播者从伺服器得到事件后设数据来进行目标识别的示意图。如图3所示，在进行目标识别与影像广播之前，于步骤S310中，广播者120会向伺服器110发出请求，请求伺服器110送出事件后设数据。而且，广播者120会送出其本身的事件相关讯息，比如其位置，时间等，给伺服器110。于收到此请求后，伺服器110会从事件数据库115中找出相关的事件后设数据(甚至可能从网络和/或其他事件信息来源150搜寻相关的事件后设数据)，以送给广播者120。 

在收到事件后设数据后，于步骤S320中，广播者120进行影像广播。并且，广播者120根据后设数据来分析所撷取的影像，以即时进行目标识别。 

如果广播者120识别出目标的话，于步骤S330中，广播者120将识别结果回传至伺服器110，伺服器110将广播者所产生的后设数据当成事件数据库的一部份，以便于在未来供更多使用者运用。 

由上述描述可知，在本发明实施例中，广播者120在进行目标识别时，其并非毫无目的地乱识别。广播者120接收到由伺服器110所传来的后设数据。当广播者120在撷取场上球员的脸部影像后，其会根据这些后设数据来识别这位球员是否为目标球员。故而，对于广播者而言，其要识别的范围大为缩小，不需要针对所撷取的球员进行大范围识别，而是根据后设数据识别。如此一来，广播者的识别成功率及识别硬件资源负担大为降低。 

相比之下，在现有技术中，由于广播者没有接收到后设数据，所以，广播者要先行下载大量脸部识别数据库至其内部储存单元中，再进行脸部识别。这样的话，对广播者的硬件资源负担较大，且其花在识别的时间也可能会大幅增加。 

图4显示根据本发明实施例中，伺服器与广播者间的信号流程示意图。如图4所示，在步骤S410中，于影像广播开始前，广播者120向伺服器110请求事件后设数据。 

于步骤S415中，伺服器110收集事件相关信息，比如从网络和/或其他事件信息来源150，并将所收集到的信息转换成事件后设数据格式。 

于步骤S420中，回应于广播者120的请求，伺服器110送出事件后设数据。于步骤S425中，广播者120接收到伺服器110所送出的事件后设数据。步骤S410~S425是伺服器110与广播者120进行影像广播之前所进行的 动作。 

于步骤S430中，依据所接收到的事件后设数据，广播者120进行目标识别，并将识别结果回传给伺服器110。于步骤S435中，伺服器110收集由(至少一个)广播者120所回传的识别结果，并给予重现，比如，利用即时统计数据或是以即时图像化/视觉化效果加以重现。 

图5A显示根据本发明实施例中，利用图像化/视觉化来呈现广播者120于现场地图界面140的一例。假设广播者120的拍摄位置与拍摄方向如图5A的左半边所示。在伺服器110接收到广播者120所送出的拍摄位置信息与拍摄方向信息后，伺服器110将之结合于球场的真实3D架构，如此一来，在现场地图界面140上，图像(icon)510可用以代表此广播者120。也就是说，观看者可由现场地图界面140上了解到广播者120的拍摄位置与拍摄方向。藉由此图像化/视觉化，可让观看者130更快速与直觉地找出目前有哪些广播者120，并让观看者从中选择他所想要的广播者120。当然，如果广播者120的拍摄位置与/或拍摄方向有所变动的话，则其相对应的图像510的位置与方向也会有所变动。 

图5B显示根据本发明实施例中，将广播者120所回传的识别结果利用即时统计数据来重现的一例。由图5B可看出，所重现的即时统计数据比如包括最多笔记录信息与最多人观看信息。最多笔记录信息是指，比如，「啦啦队(9999笔记录)」所代表的意思是，在伺服器110接收到由广播者120所回传的识别结果中，总共有9999笔记录显示出广播者120识别出啦啦队。至于最多人观看信息所代表的意思是指，比如，「啦啦队(5418笔观看记录)」是指，伺服器110统计出，观看者130向伺服器110要求观看啦啦队的记录总共有5418笔。故而，在本发明实施例中，藉由即时统计信息，广播者120和/或观看者130可即时了解，目前在球场上，哪些对象是受到大众所瞩目的。如此可以让在球场上的使用者更加溶入于球赛气氛之中。 

于步骤S440中，广播者120将其本身的方位信息与方向信息送至伺服器。如上述那样，广播者的定位感测器可定位出广播者120目前的位置，而定方向感测器则可定位出广播者120的目前指向方向。伺服器110接收到广播者120的方位信息与方向信息后，可将广播者120以图像化/视觉化方式呈现于现场地图界面140上，如步骤S445。 

于步骤S450中，如果有需要的话，广播者120可以建立新的识别目标(也 就是说，此新的识别目标并未出现在伺服器110所送出的事件后设信息中)，并将所识别出的数据与结果回传给伺服器110。于步骤S455中，伺服器110可以根据广播者的回传结果与观看者130的行为而来更新其事件数据库。如此一来，事件数据库内的数据可以更加反应出广播者120与观看者130的行为。 

于步骤S460中，伺服器110媒合广播者120与观看者130。也就是说，在现场地图界面140上，如果观看者130发现有某一位广播者120的拍摄位置与拍摄方向是他有兴趣的，则观看者130可发出请求给伺服器110，伺服器110将此请求传送给广播者120。如果广播者120同意的话，则观看者130可以在其装置上即时地看到该位广播者120目前正在撷取的影像与声音等。 

图6A~图6C显示根据本发明实施例的媒合的一例。如图6A所示，于现场地图界面140上，观看者130对广播者(约翰)的拍摄位置与拍摄方向有兴趣，则观看者可向伺服器110发出请求，要求加入广播者(约翰)的广播。在图6B中，伺服器110会将此「广播加入请求」显示于广播者(约翰)的装置上，以等待广播者(约翰)是否同意让观看者加入其广播。在图6C中，如果广播者(约翰)同意的话，则观看者可以看到广播者(约翰)的即时影像广播，而在广播者(约翰)的装置上会显示出「观看者：安德森」的图像。 

此外，请注意，在本发明实施例中，步骤S430~S460的执行顺序并不受上述描述顺序所限制。 

此外，于本发明实施例中，伺服器110还可以收集所有事件后设数据(其包括由广播者所回传的更新数据)与由广播者所回传的影像。之后，如果有使用者想要(非即时)观看这场球赛的话，则使用者除了看到比赛内容外，还可以看到更多的统计信息等，也可以看到有哪些观看者曾加入其影像广播，让使用者的观看充满更多乐趣。 

图7显示根据本发明实施例的广播者的广播流程图。如步骤S710所示，广播者120开始影像广播。于步骤S715中，广播者可以决定是否致能事件后设数据功能，来收集事件相关信息。如果广播者不致能此功能的话，则广播者120进行一般的影像广播，如步骤S720。 

如果广播者致能的话，则广播者120向伺服器110请求事件后设数据，如步骤S725。于步骤S730中，伺服器110检查其内部数据库是否有相关的事件后设数据。如果其内部数据库没有相关的事件后设数据的话，则根据使 用者时间、位置与事件，伺服器110建立事件后设数据数据库，如步骤S735。 

如果伺服器110的内部数据库有相关的事件后设数据的话，则伺服器110将事件后设数据送至广播者，如步骤S740。如步骤S745，广播者接收到事件后设数据，并将此广播与此事件链结起来。 

如步骤S750，广播者可以同时进行影像广播与目标识别。如步骤S755，广播者将识别结果送回至伺服器的事件后设数据数据库。通过图7的流程，广播者可以完成根据本发明实施例的广播与目标识别。 

现请参考图8，其显示根据本发明实施例中，如何建立新的事件后设数据。如步骤S810，伺服器接收到由广播者所发出的事件后设数据请求。如步骤S815，伺服器从广播者装置得知时间与位置数据等。请注意，这里的「时间」是指事件发生时间(比如是球赛的比赛时间)。如步骤S820，伺服器搜寻并搜集符合于时间与位置的相关事件。比如，伺服器可从网络和/或其他事件信息来源150搜寻信息。如步骤S825，伺服器判断是否有更多相关信息。如果是的话，则于步骤S830中，伺服器搜集所有相关数据(包括要识别的人物与相关识别数据)。于本发明实施例中，伺服器可从识别数据库805来搜集所需要的相关识别数据。如果伺服器目前并没有这种「识别数据库」的话，则伺服器可以建立「识别数据库」，其细节将于下面说明。「识别数据库」可能包括待识别目标的照片、影像、声音等。识别数据库805耦接至伺服器110的处理单元111。 

于步骤S835中，伺服器将这些数据组织成符合规格的事件后设数据。比如，在本发明实施例中，事件后设数据的规格可能以标签(tag)方式如下： 

Event Type:Baseball game 

Event Tag:<Baseball_20111121_Linkoh_Wang> 

People:(王建民)(包括其脸部影像、声音频谱与识别数据) 

Place:林口大巨蛋(包括地理位置、球场座向、经纬度等) 

Time:2011/11/21 13:00-18:00 

于步骤S835中，伺服器将事件后设数据送至广播者。 

此外，如上述般，广播者可将其识别结果回传给伺服器，对于广播者所回传的识别结果，伺服器所整理出的事件后设数据可能以标签的方式如下： 

<Pitcher,Wang,1344>(<Type,Name,Count>)。其中，参数“Type”代表此球员的类型，而参数“Name”则是此球员的名字，而参数“Count”则是此球员 被识别出的次数。 

当然，上述所举的标签的例子只是用以说明本发明实施例的做法，其并非用于限制本发明。 

现请参考图9，其显示根据本发明实施例的伺服器建立识别数据的流程。于步骤S910中，如果在事件相关信息有相关的待识别目标的数据的话，伺服器检查是否已有待识别目标的识别数据。如果有的话，于步骤S915中，则伺服器将的搜集至事件后设数据内。如果没有的话，于步骤S920中，伺服器比如从网络和/或其他事件来源150搜集含有待识别目标的图片。于步骤S925中，伺服器分析这些图片，并建立识别数据。由此步骤可知，在本发明实施例中，广播者120并不需要分析待识别目标的图片，因为此分析操作可能需要较大量的运算资源。 

于步骤S930中，伺服器将识别数据存至伺服器的识别数据库。 

于本发明实施例中，广播者亦可加入另一广播者的广播，成为其观看者。请参考图10，其显示根据本发明实施例中，广播者A加入另一广播者B的广播，成为其观看者。广播者A与B都正在观看同一球赛。不过，可能因为座位的关系，广播者A无法看清楚投手的动作。故而，广播者A从现场地图界面上，试着寻找是否有其他广播者的位置与方向是否是其有兴趣的。广播者A发现广播者B可能会有他想要的视角与视野。广播者A可在现场地图界面上敲选广播者B的图像，以要求加入广播者B的广播中。如果广播者B答应的话，则广播者A就可以成为广播者B的观看者，来观看广播者B的即时影像广播。也就是说，在本发明实施例中，使用者可能同时身兼广播者与观看者的角色。 

更进一步地说，在观看球赛时，使用者除了其眼睛所能观看的范围外，其更可通过本发明实施例的揭示内容，通过手机等装置来在手机屏幕上看到其他广播者的广播内容，以更增添其观看球赛的乐趣。 

此外，在本发明实施例中，使用者之间还可以通过网络进行电话交谈(即便双方并不知道对方的手机号码)。而一旦电话交谈结束，通话方也无法留下对方的电话号码(除非对方在电话中告知其手机号码)。如此一来，可以让使用者在球赛过程中以电话讨论球赛内容，增添看球乐趣。但在球赛结束后，又不会被通话的对象以手机骚扰，能保证使用者的稳私。 

此外，本发明实施例还可以社群网络结合。比如，使用者可以利用社群 网络的帐号登入现场地图界面，如此一来，使用者可以在现场地图界面上找到同好，并将对方加入为社群网络的好友，增加使用者的交友度。 

此外，在本发明实施例中，可将所收集到的事件后设数据进行后续整理，以更进一步应用于广告、商业行销等。 

此外，在本发明实施例中，使用者在看广播者的即时影像广播时，其影像呈现方式可以有多元化。比如，使用者可以用子母画面的方式来同时观看多个广播者的即时影像广播，让使用者更能一手掌握多元信息。 

综上所述，虽然本发明已以实施例揭示如上，然其并非用以限定本发明。本领域的技术人员，在不脱离本发明的精神和范围的前提下，可作各种的更动与润饰。因此，本发明的保护范围是以本发明的权利要求为准。 

Claims (14)

1.一种目标识别与事件重现系统，包括：

一伺服器，以及

一广播者，耦接至该伺服器，

其中，

回应于该广播者所发出的一请求，该伺服器送出一事件后设数据与一识别数据；

根据该事件后设数据与该识别数据，该广播者同时进行一即时影像广播与一即时目标识别；以及

如果该广播者识别出一目标的话，该广播者将一识别结果回传至该伺服器。

2.如权利要求1所述的目标识别与事件重现系统，其中，

回应于该请求，该伺服器从一内部事件数据库搜寻该事件后设数据，以传给该广播者；

该伺服器还从一网络和/或其他事件信息来源搜集该事件后设数据；以及

回应于该广播者的该识别结果，该伺服器据以更新该内部事件数据库。

3.如权利要求1所述的目标识别与事件重现系统，其中，

该广播者根据所接收的该事件后设数据来分析所撷取的一影像，以进行该即时目标识别。

4.如权利要求2所述的目标识别与事件重现系统，其中，

该伺服器将收集到的一信息转换成一事件后设数据格式。

5.如权利要求2所述的目标识别与事件重现系统，其中，

该伺服器收集由该广播者所回传的一识别结果，以重现事件。

6.如权利要求5所述的目标识别与事件重现系统，其中，

该伺服器利用一即时统计数据或是以一即时广播者图像来重现事件。

7.如权利要求6所述的目标识别与事件重现系统，其中，

该广播者送出一广播者拍摄位置信息与一广播者拍摄方向信息至该伺服器；

该伺服器将该广播者拍摄位置信息与该广播者拍摄方向信息结合于一真实环境架构；以及

在一现场地图界面上，该伺服器以该即时广播者图像来代表该广播者。

8.如权利要求6所述的目标识别与事件重现系统，其中，

该即时统计数据包括一记录信息和/或一观看信息。

9.如权利要求1所述的目标识别与事件重现系统，其中，

该广播者建立一新识别目标，该新识别目标并未出现在该伺服器所送出的该事件后设信息；以及

该广播者识别新识别目标，并将一新识别目标结果回传给该伺服器，以使得该伺服器据以更新该事件数据库。

10.如权利要求7所述的目标识别与事件重现系统，还包括：

一观看者，耦接于该伺服器与该广播者，

在该观看者取得该广播者的同意后，通过该伺服器的媒合，该观看者在该现场地图界面上即时观看该广播者的该即时影像广播。

11.如权利要求10所述的目标识别与事件重现系统，其中，

该伺服器根据该观看者的一行为而来更新该事件数据库。

12.如权利要求10所述的目标识别与事件重现系统，其中，

如果该现场地图界面以一网页形态呈现的话，该观看者通过一浏览器软件来连线至该伺服器，以即时观看该广播者的该即时影像广播。

13.如权利要求10所述的目标识别与事件重现系统，其中，

如果该现场地图界面以一应用程序形态呈现的话，该现场地图界面即时主动地将该广播者的该即时影像广播传送至该观看者。

14.如权利要求7所述的目标识别与事件重现系统，还包括另一广播者，其中，在该另一广播者取得该广播者的同意后，通过该伺服器的媒合，该另一广播者在该现场地图界面上即时观看该广播者的该即时影像广播。

Images