CN1892564A - 标签信息显示控制设备及方法、信息处理设备和显示设备 - Google Patents
标签信息显示控制设备及方法、信息处理设备和显示设备 Download PDFInfo
- Publication number
- CN1892564A CN1892564A CNA2006101031619A CN200610103161A CN1892564A CN 1892564 A CN1892564 A CN 1892564A CN A2006101031619 A CNA2006101031619 A CN A2006101031619A CN 200610103161 A CN200610103161 A CN 200610103161A CN 1892564 A CN1892564 A CN 1892564A
- Authority
- CN
- China
- Prior art keywords
- information
- master image
- critical area
- pointer
- key images
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 28
- 230000010365 information processing Effects 0.000 title description 2
- 230000002123 temporal effect Effects 0.000 claims description 25
- 230000008859 change Effects 0.000 claims description 24
- 230000006870 function Effects 0.000 description 55
- 238000012545 processing Methods 0.000 description 49
- 238000010586 diagram Methods 0.000 description 21
- 238000005516 engineering process Methods 0.000 description 19
- 230000004044 response Effects 0.000 description 9
- 238000000605 extraction Methods 0.000 description 8
- 230000008569 process Effects 0.000 description 7
- 239000000284 extract Substances 0.000 description 5
- 238000009825 accumulation Methods 0.000 description 4
- 238000004891 communication Methods 0.000 description 4
- 230000006835 compression Effects 0.000 description 4
- 238000007906 compression Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 230000002441 reversible effect Effects 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 3
- 241001269238 Data Species 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 2
- 230000000712 assembly Effects 0.000 description 2
- 238000000429 assembly Methods 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 230000002427 irreversible effect Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- GOLXNESZZPUPJE-UHFFFAOYSA-N spiromesifen Chemical compound CC1=CC(C)=CC(C)=C1C(C(O1)=O)=C(OC(=O)CC(C)(C)C)C11CCCC1 GOLXNESZZPUPJE-UHFFFAOYSA-N 0.000 description 2
- 241001465754 Metazoa Species 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 230000006866 deterioration Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000008676 import Effects 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 230000007935 neutral effect Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
- H04N21/234318—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into objects, e.g. MPEG-4 objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
- H04N21/4314—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for fitting data in a restricted space on the screen, e.g. EPG data in a rectangular grid
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
- H04N21/47205—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
- H04N21/4728—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for selecting a Region Of Interest [ROI], e.g. for requesting a higher resolution version of a selected region
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/485—End-user interface for client configuration
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/845—Structuring of content, e.g. decomposing content into time segments
- H04N21/8455—Structuring of content, e.g. decomposing content into time segments involving pointers to the content, e.g. pointers to the I-frames of the video stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/85—Assembly of content; Generation of multimedia applications
- H04N21/858—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot
- H04N21/8586—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot by using a URL
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Databases & Information Systems (AREA)
- User Interface Of Digital Computer (AREA)
- Processing Or Creating Images (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
所公开的标签信息显示控制设备允许只通过点击部分区域而在屏幕上显示关于移动图片中特定部分区域的信息。接收主图像的观察者在屏幕中所进行的指针移动,并且获取屏幕中指针的位置。参照与主图像同步再现的关键图像,以判定指针是否位于关键区域内。当指针位于关键区域内时,读出关于关键区域设定的区域标识信息。根据区域标识信息以及关键图像的时间信息,参照带有链接信息的索引信息,以读出对应的链接信息。从链接信息所指定的链接目标中获取相关信息,并显示其。
Description
相关申请的交叉引用
本发明包含的主题与2005年7月6日向日本专利局提交的日本专利申请JP2005-198173相关,其全部内容在此引作参考。
技术领域
本发明涉及一种标签信息显示控制设备,其可以响应于点击操作其中嵌入标签信息的部分区域而在屏幕上显示与该部分区域相关联的信息。本发明进一步涉及一种信息处理设备和一种包括标签信息显示控制设备的显示设备。本发明也涉及一种实施所提到的功能的方法以及一种其中记录有用于实施该功能的程序的记录介质。
背景技术
随着近些年通信基础构架的建立和记录容量的增加,需要将迄今为止所提出的各种业务投入实际使用。例如在日本专利公开No.Hei7-231308中披露了所述技术。
发明内容
然而,还没有建立一种能够仅仅通过点击部分区域来在屏幕上显示移动图片中关于特定部分区域的信息的技术。
本发明的发明人提出一种能够仅仅通过点击部分区域来在屏幕上显示移动图片中关于特定部分区域的信息的技术,该技术包括:
(a1)配置用来与主图像同步地再现关键(key)图像的处理功能;
(a2)配置用来读出带有与主图像和关键图像关联的链接信息的索引信息的处理功能;
(a3)配置用来接收主图像的观察者(viewer)在屏幕中进行的指针移动的处理功能;
(a4)配置用来获取指针在屏幕中的位置的处理功能;
(a5)配置用来参照与主图像同步再现的关键图像,以判定指针的位置是否在关键区域范围之内的处理功能;
(a6)配置用来当指针的位置处于关键区域的范围之内时,读出所设定的关于关键区域的区域标识信息的处理功能;
(a7)配置用来根据所读出的区域标识信息以及所参照的关键图像的时间信息,参照带有链接信息的索引信息,以读出对应于该区域标识信息的链接信息的处理功能;
(a8)配置用来从由所读出的链接信息所指定的链接目标中获取相关信息,并显示所获取的相关信息的处理功能。
在其中包括上述技术的设备中,如果观察者将指针移动到主图像上的任意部分区域,则将指针的位置与关键图像彼此相互进行比较。于是,如果指针的位置处于关键图像的范围之内,则根据关键区域的相应区域标识信息读出链接信息。然后从由所读出的链接信息所指定的链接目标中获取相关信息,并将其显示。
在通过这种方式采用上述技术的地方,可以在主图像的屏幕上确认可以关于由观察者用指针所指定的部分区域(在标签信息嵌入在该部分区域中的条件下)主观地确认的相关信息。
结合附图,从下面的描述以及所附的权利要求书中可以清楚本发明的上述及其它目的、特征和优点,其中相同的部件或元件通过相同的附图标记表示。
附图说明
图1所示为线性编辑系统的结构范例的方框图;
图2A至2C的示意图所示为工作屏幕的显示范例与所产生的关键图像之间的对应关系;
图3的方框图所示为标签信息产生设备的功能结构的范例;
图4的说明图所述为关键图像与描述标签信息的关键信息之间的对应关系;
图5类似的说明图所述为索引信息与定义标签信息的关键信息之间的对应关系;
图6的视图所述为索引信息的范例;
图7的流程图所述为标记操作与响应于该标记操作所执行的内部处理之间的对应关系;
图8的流程图所述为要安装到关键信息输入设备中的程序的处理内容的概况;
图9的方框图所示为非线性编辑系统的结构范例;
图10A和10B的示意图所示为其中将主题图像的鞋设定为关键区域的处理图像;
图11的方框图所示为关键区域设定部分的内部结构范例,其根据颜色条件实施关键区域的自动提取功能;
图12的示意图所示为处理图像,其中设定关键区域,以跟踪主题图像的每只鞋的特征量;
图13的方框图所示为关键区域设定部分的内部结构范例,其中其实施关键区域的自动跟踪功能;
图14A和14B的示意图所述为在起始点所选择的工作屏幕上设定的关键区域与在终止点所选择的另一工作屏幕上设定的关键区域之间的位置关系;
图15的示意图所示为主题图像的鞋在两个不同时间点之间线性移动的轨迹;
图16的方框图所示为关键区域设定部分的内部结构的另一范例,其中其实施关键区域的自动跟踪功能;
图17A、17B、18A和18B的示意图所示为以固定形状准备的关键区域的形状范例;
图19A和19B的示意图所述为主图像的尺寸与关键图像的尺寸之间的关系;
图20A和20B的说明图所示为索引信息中链接信息的嵌入图像;
图21的说明图所示为链接信息嵌入部分的内部结构的范例;
图22的视图所述为产生带有链接信息的索引信息的范例;
图23的方框图所示为带有标签信息的图像数据的产生设备的内部结构范例;
图24的流程图所述为与带有标签信息的图像数据的产生设备对应的程序的处理内容的概况;
图25至31B的示意图所述为不同数据输出范例;
图32的方框图所示为图像再现系统的范例;
图33的方框图所示为其中使用计算机实施图像再现系统的结构范例;
图34的流程图所述为观察者的操作与响应于该操作所执行的内部处理之间的对应关系;
图35的流程图所述为与标签信息显示控制功能对应的程序的处理内容的概况;
图36A和36B的示意图所述为在某个时间点指向主图像的指针显示与的对应关键图像之间的对应关系;
图37的示意图所示为相关信息的显示范例;和
图38至41B的示意图所示为通过引导功能进行的不同显示范例。
具体实施方式
下面,结合标签信息的产生、分配和再现阶段描述本发明的优选实施例。
要注意的是,对于附图中没有示出或者在本说明书中没有描述的细节,应用相关技术领域中的现有技术。
进一步,下面所描述的实施例只是本发明的范例,并且本发明并不限于具体实施例。
A、标签信息产生设备
下面,描述可以通过实际的工作量产生标签信息的标签信息产生设备。
A-1、线性编辑系统
标签信息产生设备可以被实施为线性编辑系统。
a、系统结构
图1所示为线性编辑系统的结构范例。
参照图1,所示的线性编辑系统包括主图像再现设备1、集成输出设备3、关键信息输入设备5、显示设备7、关键图案产生设备9、以及关键图像记录设备11。
主图像再现设备1再现记录在磁带上的主图像。主图像再现设备1例如可以由VTR(磁带录像机:Video Tape Recorder)形成。由主图像再现设备1所再现的主图像被输出到集成输出设备3。同时再现的时间码被输出到关键信息输入设备5中。要注意的是,时间码是一种提供主图像的时间位置的时间信息。
集成输出设备3将提供标签信息嵌入信息的关键图案与输入到其中的主图像集成。集成输出设备3例如由字符产生器形成。关键图案由集成输出设备3根据从关键信息输入设备5所提供的关键区域信息而产生。关键区域信息被给定作为与关键图案在屏幕和选择范围内的位置相关的信息。集成图像被输出到显示设备7。
图2A至2C所示为显示设备7的显示屏幕。特别地,图2A所示为被选择作为标签信息嵌入屏幕的屏幕范例(工作屏幕的范例)。工作屏幕被给定作为当主图像再现设备1的再现操作被临时停止时所输出的主图像。
图2B所示为其中将集成输出设备3所产生的关键图案21和23与主图像集成的工作屏幕的范例。在本范例的情况下,关键图案21具有这样的位置和范围,使得其环绕屏幕右侧上所显示的整个车辆。同时,关键图案23具有这样的位置和范围,使得其分别环绕屏幕左下侧上所显示的两只鞋。
关键图案的形状可以通过任何方法确定,诸如其中通过集成输出设备3对其进行自动选择的方法、其中通过关键信息输入设备5选择形状的另一种方法、或者其中使用画图工具-诸如套绳-任意指定形状的其它方法。在图2A至2C的情况下,通过关键信息输入设备5选择方形和圆形。
由操作者通过确认显示设备7的集成屏幕来确定每一关键图案21和23要位于其上或其中的位置和范围。
下面,单个关键图案位于其上或其中的屏幕上的位置和范围被称作为“关键区域”。
关键信息输入设备5用来输入用于定义标签信息的关键信息。
在本说明书中,“标签信息”表示嵌入在任意指定的部分区域中的信息。
在线性编辑系统中,产生“关键图像”和“索引信息”作为标签信息。
这里,“关键图像”表示与主图像结对并且表示标签信息的嵌入位置的图像。同时,“索引信息”是表示关键区域与关于该关键图像每一时间点的该关键区域的标识信息之间对应关系的信息。
同时,“定义标签信息的关键信息”表示产生关键区域和索引信息所必需的信息,例如位置、范围、时间和区域等的标识信息。然而,在本范例的情况下,时间信息被给定作为来自主图像再现设备1的时间码。
关键信息输入设备5例如可以由视频编辑机或计算机形成。在图1中表示了关键信息输入设备5由计算机形成。
关键图案的位置和范围通过输入设备5A输入,输入设备5A可以是鼠标等。同时,使用键盘的键操作、鼠标的点击操作等输入用于标识关键图案的信息。
要注意的是,对于关键图案的位置和范围,可以给出要标记的部分区域的大概位置和大概范围。相应地,不需要严格的定位。因此,可以在实际工作量的范围内实现关键区域的设定。例如,可以通过与普通编辑操作-插入大写字母所需要的工作量类似的工作量来实现这种设定。
在本范例的情况下,灰度级值(光亮度值)被用作一种标识关键图案的信息。在给定灰度级值的地方,即使关键区域的设定部分的亮度发生变化,也可以确认设定部分。然而,标签信息可能在其分配的时候进行压缩处理。相应地,灰度级值优选地是由这样的等级隔开的值,使得即使在这种压缩处理之后也可以对其进行区分。例如,输入值“20”用于与车辆对应的关键图案21,并且输入另一值“40”用于与鞋对应的关键图案23。
关键信息输入设备5将用于产生关键图像的关键区域信息和区域标识信息输出到关键图案产生设备9,并且将时间码输出到关键图像记录设备11。进一步,关键信息输入设备5输出索引信息,其是关键区域和区域标识信息与工作屏幕的时间信息的组合。
关键图案产生设备9根据为工作屏幕所设定的关键区域信息和区域标识信息产生关键图案。关键图案产生设备9例如可以由关键产生器或字符产生器形成。图2C所示的屏幕范例包括关键图案21和23。
要注意的是,关键图案产生设备9接续地产生相同的关键图案,直至接收到新的关键区域信息和新的区域标识信息。这表明不需要为所有帧输入关键信息。由此,大大地减少了工作量。
然而,如果关键图案的产生位置固定,则在标签信息嵌入位置与目标对象(主题图像)之间出现一些偏差。相应地,操作者确认显示设备7的屏幕,并且适当地修改或重新设定关键图案的位置和范围。
将由关键图案产生设备9所产生的关键图案连同时间码一起提供给关键图像记录设备11,由关键图像记录设备11将其记录为时间长度与主图像时间长度相等的关键图像。
要注意的是,由于设备被形成为线性编辑系统,所以使用磁带作为关键图像记录设备11的记录介质。
b、作为标签信息产生设备的功能结构
现在描述作为标签信息产生设备的线性编辑系统的功能结构。要注意的是,下面描述的索引信息包括时间信息、区域标识信息以及对象标识信息。
图3所示为作为标签信息产生设备的功能结构。参照图3,标签信息产生设备包括时间信息获取部分31、关键区域设定部分33、标识信息应用部分35、对象标识信息应用部分36、关键图像产生部分37和索引信息产生部分39。
在这些组件中,通过关键信息输入设备5实施时间信息获取部分31、关键区域设定部分33、标识信息应用部分35、对象标识信息应用部分36和索引信息产生部分39。同时,通过关键图案产生设备9和关键图像记录设备11实施关键图像产生部分37。
时间信息获取部分31实施获取为工作屏幕所选择的主图像的时间信息的处理功能。
关键区域设定部分33实施将关键区域设定到与操作者任意指定的主图像中部分区域对应的位置的处理功能。
标识信息应用部分35实施将能够区分关键区域与周边区域的区域标识信息应用到设定关键区域的功能。
对象标识信息应用部分36实施提供能够标识由设定关键区域所指定的对象的标识信息的功能。在本范例的情况下,虽然区域标识信息被给定为数值,但是对象标识信息被给定为字符。因此,可以更容易使用对象标识信息执行确认操作。要注意的是,对象标识信息也可以被给定为数值。
关键图像产生部分37是实施产生向其加入与主图像的时间信息相同的时间信息的关键图像的处理功能的功能部分,并且对应于产生关键图像的功能,其中将区域标识信息应用于通过工作屏幕设定的关键区域。图4描述了关键图像与定义标签信息的关键信息之间的对应关系。从图4中可以看出,产生关键图像作为其时间位置与主图像以一一对应关系相对应的图像。
索引信息产生部分39对应于产生索引信息的处理功能,索引信息列出应用于关键区域的区域标识信息、时间信息和对象标识信息之间的对应关系。
图5描述索引信息与定义标签信息的关键信息之间的对应关系。如从图5中可以看到,索引信息被给定为其中记录时间信息、区域标识信息和对象标识信息的文本类型的或者XML文档类型的信息。
图6描述了索引信息的范例。时间码被给定为“小时:分:秒:帧”。相应地,图6表明设定两片标签信息晚于主图像的“00小时,00分,10秒,00帧”。
换言之,图6表明使用“20”和“40”的灰度级值来设定两片标签信息。
在图6中,也记录了对象标识信息,从而操作者可以确认每一片区域标识信息与主图像的哪一对象(主题图像)一致。在插入对象标识信息的地方,其也可以被用来确认区域标识与预计的对象彼此是否一致。
c、标记操作与内部处理之间的关系
图7描述了标记操作与响应于该标记操作所执行的内部处理之间的对应关系。要注意的是,通过关键信息输入设备5的输入设备5A输入标记操作。
当接收到工作屏幕的选择操作时,关键信息输入设备5向主图像再现设备1发出再现主图像的指令。进一步,在接收到工作屏幕的确定操作时,关键信息输入设备5向主图像再现设备1发出临时停止再现操作的指令。
进一步,当在确定工作屏幕之后接收到部分区域的指令输入时,关键信息输入设备5向集成输出设备3提供关键区域信息。此时,在显示设备7的屏幕上显示关键图案与工作屏幕(主图像的静止屏幕)的集成图像。
进一步,当接收到关于所指定的部分区域的区域标识信息的指定输入时,关键信息输入设备5将区域标识信息提供给集成输出设备3,并将区域标识信息输出到关键图案产生设备9。因此,产生关键图像。于是,关键信息输入设备5根据区域标识信息、时间信息和对象标识产生索引信息。
图8描述了要安装到关键信息输入设备5中的程序的处理内容。
参照图8,程序判定是否确定了工作屏幕(S1)。如果确定了工作屏幕,则程序获取时间码作为时间信息(S2)。然后,程序接收关键区域的设定(S3)。在设定关键区域之后,程序接收要与关键区域一致的区域标识信息的设定(S4)。
此后,程序判定标记是否结束(S5),并重复新关键区域的设定处理,直至判定这种结束。
然后,在标记结束之后,程序发出指令,以输出最终确定的索引信息和关键图像(S6)。
通过执行如上所述的这种处理程序的关键信息输入设备5来实施标签信息产生处理。
d、效果
通过将主图像再现设备1、集成输出设备3、关键图案产生设备9以及关键图像记录设备11连接到具有上述处理功能的关键信息输入设备5来构建线性编辑处理,可以实施可以通过实际工作量记录标签信息的系统。
换言之,可以不通过输入基于文本的数据、诸如元数据,而通过区域的简单可视化指定来设置关键区域。进一步,根据主图像的内容,大多数上述工作可以自动完成。
进一步,一次设定的关键区域也继续用于后继帧,直至关于新的选择屏幕设定了新的关键区域(也包括其中使用相同对象的情况)。因此,可以实现输入工作量的减少。
进一步,由于采用灰度级值作为区域标识信息,所以可以简单地并且可视化地从光亮度的不同来确认不同的关键区域。
进一步,由于自动地产生列出时间信息与各个关键区域的信息之间对应关系的索引信息,所以当相比于通过手工输入时,可以高效地执行信息与各个关键区域的协调(coordinating)操作。
A-2、非线性编辑系统
标签信息产生设备也可以被实施为非线性编辑系统。
a、系统结构
图9所示为非线性编辑系统的结构范例。非线性编辑系统基本上由计算机本身形成。
参照图9,所示非线性编辑系统包括CPU(中央处理单元)(处理器)41、输入设备43、显示设备45、硬盘驱动设备47和主存储器49。
特别地,图1中线性编辑系统的主图像再现设备1和关键图像记录设备11被硬盘驱动设备47替代。同时,集成输出设备3和关键图案产生设备9通过由使用主存储器49作为工作区域的CPU41所执行的程序实施。
自然,关键信息输入设备5也通过由使用主存储器49作为工作区域的CPU41所执行的程序实施。
例如,当确定工作屏幕时,从硬盘驱动设备47中读出的主图像通过主存储器49输出到显示设备45。
进一步,当设定关键区域时,通过来自输入设备43的操作所产生的关键图案与主图像被集成在主存储器49中,并被输出到显示设备45。于是,通过输入设备43所输入的索引信息被反映到关键图案上。
要注意的是,通过硬盘驱动设备47记录在主存储器49中所产生的关键图案(图2C和4)和索引信息(图5)。
b、效果
在非线性编辑系统的情况下,也可以实施与线性编辑系统的效果类似的效果。换言之,可以实施可以通过实际工作量记录标签信息的系统。
A-3、关键区域输入辅助功能
a、根据色彩条件的区域提取
在前面的描述中,通过人工操作设定关键区域。
这里,描述从工作屏幕内指定的部分区域中将满足操作者预先所指定的色彩条件的区域设置为关键区域的技术。
图10A和10B所示为处理图像。特别地,图10A和10B描述了其中将主题图像的鞋设定为关键区域的范例。要注意的是,主题图像的鞋的颜色是红色。
在该例子中,指定包括鞋的宽区域51,如图10A中所示。此时,如果确定特定的色彩条件(例如,红色级在从色调值XX至另一色调值YY的范围内)作为关键区域的提取条件,则可以精确地只提取对应于鞋的部分区域53。要注意的是,可以在指定区域之前或之后登记提取条件。
图11所示为关键区域设定部分33(图3)的内部结构范例,其中其根据色彩条件实施关键区域的自动提取功能。
参照图11,关键区域设定部分33包括指定区域保持部分61、区域提取部分63和提取条件保持部分65。在所提到的这些组件中,指定区域保持部分61是用于存储通过输入设备所指定的区域51的存储区域。换言之,指定区域保持部分61是用于保持提供提取处理范围的区域的存储区域。
区域提取部分63是信号处理部分,其从主图像内所指定的区域51中提取满足色彩条件的部分区域。
提取条件保持部分65是用于保持提取条件的存储区域。在本范例中,提取条件保持部分65用来保持通过输入设备所指定的色彩条件。
特别是在要被设定作为关键区域的区域与周边区域之间的色调差较大的时候,处理功能比较有效。
要注意的是,提取条件可以不仅包括色彩条件,而且包括特定的形状或图案。在这些情况下,也可以与在基于色彩条件的区域提取的情况下类似地实现人工输入时间量的简化。
b、基于特征量的关键区域的跟踪功能
在前面的描述中,通过人工操作设定关键区域。
这里,描述了存储设定关键区域的特征量并且响应于主图像中主题的移动而自动跟踪关键区域的技术。
图12描述了处理图像。图12也代表其中将主题图像的鞋设定为关键区域的范例。
在采用关键区域跟踪功能的时候,只要为其设定关键图像的主图像仍然在屏幕内,就也可以移动关键区域,从而跟踪主图像中主题图像的移动,如图12中所示。
在引入上述跟踪功能时,可以显著地减少操作者的操作量。
图13所示为关键区域设定部分33(图3)的内部结构,其中其实施关键区域的自动跟踪功能。
参照图13,关键区域设定部分33包括特征量存储部分81和区域跟踪部分83。特征量存储部分81是用于存储与通过输入设备所设定的关键区域对应的主图像的特征量(例如色调、光量度、形状等)的存储区域。
区域跟踪部分83是信号处理部分,其从主图像中提取满足所存储特征量的部分区域,并输出所提取的区域作为关键区域信息。要注意的是,将已知的图像处理技术应用到用于提取部分区域的技术。
要注意的是,虽然在该实施例中假设人工输入关键区域,但是可选地可以与关键区域的设定操作无关地预先登记这种特征量,从而自动地从主图像中提取满足特征量的部分区域,并将其设置到关键区域。
对于特征量,例如可以使用特定的色彩范围、特定色彩的组合、特定的符号或形状或特定的字符串。
使用所述功能能够自动地进行相当多部分的标签信息应用操作。
除此之外,可能将标签信息自动地应用于某些现场广播节目。例如,如果预先登记现场转播体育节目中广告展台的特征,那么可以将出现在屏幕上的广告展台自动地设定为关键区域。换言之,技术上可能在广告展台中自动地嵌入标签信息。
例如,在广告展台的颜色是红色的时候,如果将红色的色彩范围指定为特征量,那么可以将屏幕中红色的部分区域设定为关键区域。要注意的是,根据图像拾取角度,有可能提取满足特征量的另一部分区域,而不是广告展台,诸如播放器或观众。在这种情况下,操作者可以点击广告展台,从而使得从设定对象中排除将任何其它区域作为关键区域。
可选地,例如在广告展台包括蓝色背景上的黄色字符时,如果将该色彩图案设定为特征量,那么可以将包括类似色彩图案的部分区域设定为关键区域。
进一步,例如如果将广告展台的形状或将表示广告展台的特殊符号设定为特征量,那么可以将包括类似形状或符号的部分区域设定为关键区域。
进一步,例如如果将代表出现在广告展台上的企业或商品的名称的字符串指定为特征点,那么可以将包括类似字符串的部分区域设定为关键区域。在这种情况下,可以结合使用字符识别技术。
c、通过插值处理的关键区域跟踪功能
在前面的描述中,描述了基于特征量的关键区域自动跟踪功能。
这里,描述一种技术,当估计被设定为关键区域的主题图像从某个工作屏幕(起点)移动到另一工作屏幕(终点)的轨迹时,其通过插值算法运算,利用设定在两个屏幕上的关键区域的位置信息,在两个屏幕之间自动设定关键区域。
图14A和14B描述了处理图像。图14A和14B也描述了其中将主题图像的车辆设定为关键区域的范例。
特别地,在图14A描述的状态中,关键区域被设定到车辆在被选择作为起点的工作屏幕上所位于的部分区域91。
在图14B描述的另一状态中,关键区域被设定到车辆在被选择作为终点的工作屏幕上所位于的部分区域93。
图15所示为其中主题图像的车辆在两个时间点之间线性移动的轨迹。在这种情况下,估计在两个时间点之间的任意时间点上,标记对象的车辆位于考虑移动加速度的部分区域95。
相应地,如果采用自动地将所估计的部分区域设定作为关键区域的技术,那么预期通过少量工作就可以得到相当精确的区域指定。
进一步,当相比于此前所描述的基于特征量的跟踪处理时,算法运算量减少了。
图16所示为其中其实施关键区域的自动跟踪功能的关键区域设定部分33(图3)的内部结构范例。
参照图16,关键区域设定部分33包括关键区域保持部分101和区域位置插值部分103。关键区域保持部分101是存储器区域,其具有用于存储在被设定为起点的工作屏幕上所设定的关键区域的位置的区域101A和用于存储在被设定为终点的工作屏幕上所设定的关键区域的位置的另一区域101B。
区域位置插值部分103是信号处理部分,其响应于两点之间的时间位置,在起点的关键区域位置与终点的关键区域位置之间插值关键区域的位置。
在移动时的加速度或轨迹可以被参照的时候,区域位置插值部分103参照信息以确定关键区域的位置。
然而在图15的情况下,由于车辆线性地移动,所以将基于两点之间时间比所确定的位置估计作为关键区域的位置。
A-4、变形
这里描述线性编辑系统和非线性编辑系统的变形。
在前面的描述中,在设定关键区域时,输入位置和范围作为关键区域信息。
然而,在假定关键区域具有固定结构(固定范围)的时候只能够输入位置。
同时,关键区域可以具有如图17A中所示的圆形或如图17B中所示的椭圆形。进一步,关键区域可以具有如图18A中所示的方形或如图18B中所示的这种多边形或任何其它多边形。进一步,关键区域可以具有任何任意结构。优选地通过键操作选择性地使用上述用于关键区域的这种图案。
要注意的是,优选地可以选择关键区域的结构随时间自动变化的功能。例如,在将起点的某个关键区域指定为圆形区域并且将终点的某个区域指定为椭圆形的时候,应用将中间点的关键区域的结构从圆形结构逐渐地变形到椭圆形结构的变形功能。变形功能是已知功能。
进一步,虽然在前面的描述中使用时间码作为代表主图像和关键图像再现位置的时间信息,但是也可以使用帧编号。
进一步,虽然在前面的描述中主图像111的尺寸和关键图像113的尺寸相等,如图19A中所示,但是可以将关键图像113的尺寸设定为主图像111的尺寸的一部分,如图19B中所示。关键图像113的尺寸例如可以为主图像113的尺寸的一半(1/2)或四分之一(1/4)。
例如,在主图像的尺寸为1920×1080并且关键图像的尺寸为960×540的时候,关键图像的尺寸在水平和垂直方向上都是主图像的一半。相应地,关键图像上的位置(x,y)=(10,20)被给定为关键图像上的位置(5,10)。
已经在设定关键区域时确认了关键图像与主图像之间的位置关系。因此,即使关键图像的尺寸更小也没有问题。
当然,减少关键图像的尺寸可以减少数据大小。
进一步,虽然在前面的描述中使用灰度级值作为要与关键区域协调一致的区域标识信息,但是可以使用色调值来替代。
例如,即使在使用对应于红、蓝、黄或绿的色调值的时候,也可以利用其来对区域进行标识,而不会有任何问题。另外,而且在可视化地在屏幕上确认多个关键区域的时候,它们可以根据颜色差别容易地被确认。
进一步,虽然在前面的描述中使用“鞋”、“车辆”、“广告展台”等作为主题图像的范例,其是标签信息的嵌入对象(关键区域的设定对象),但是也可以使用诸如表演者或游戏者的人、出现在主图像中的动物或生物等作为标签信息的嵌入对象(关键区域的设定对象)。
B、用于带有链接信息的索引信息的产生设备和用于带有标签信息的图像数据的产生设备
B-1、用于带有链接信息的索引信息的产生设备
这里,描述了用于将链接信息应用于前面所产生的索引信息的设备。换言之,描述了用于带有链接信息的索引信息的产生设备。
如果使用按照上面的描述所产生的索引信息,那么就可以标识相同屏幕中关于主图像所设定的关键区域。然而在这一阶段,业务对象的信息不能被提供给观察者。
于是,本发明的发明人将链接信息应用于前面所产生的索引信息。
图20A和20B所示为链接信息的嵌入图像。
特别地,图20A描述了链接信息的嵌入图像,其中通过链接信息嵌入部分121嵌入URL(统一资源定位器)。
图20B描述了链接信息的另一嵌入图像,其中通过链接信息嵌入部分121嵌入商业消息(CM)标识符(本地地址)。要注意的是,技术上也可能嵌入CM本身作为链接信息。
在通过这种方式将链接信息嵌入索引信息中的时候,可以推断其中嵌入标签信息的部分区域与URL或CM之间的坐标。
图21所示为链接信息嵌入部分121的内部结构的范例。参照图21,链接信息嵌入部分121包括数据库121A和信息嵌入部分121B。
数据库121A是存储应用于在由操作者任意指定的主图像中提供部分区域的关键区域的区域标识信息与用于访问部分区域的相关信息的链接信息之间的对应关系的区域。
换言之,数据库121A是存储对象标识信息与链接信息之间对应关系或区域标识信息与链接信息之间对应关系的区域。要注意的是,预先登记对应关系。可选地,可以每次通过人工操作输入对应关系。
信息嵌入部分121B是信号处理部分,其参照数据库以在列出区域标识信息与应用于关键区域的时间信息之间对应关系的索引信息中嵌入相应的链接信息。
图22描述了产生带有链接信息的索引信息的范例。更具体地,图22描述了其中嵌入URL作为链接信息的范例。
在图22的情况下,为“00小时:14分钟:10秒;00帧”设定两片标签信息。两片标签信息中的一个是对应于一只鞋的区域标识信息“20”,而另一个是对应于一辆车的区域标识信息“40”。
在本范例的情况下,使用区域标识信息“20”、“http:∥www.xxx.com/yy/yy”作为链接信息与部分区域协调一致。
类似地,使用区域标识信息“40”、“http:∥www.zzz.com/yy/yy”作为链接信息与部分区域协调一致。
通过使用链接信息嵌入部分121,只要保证用于标识关键区域的信息(例如区域标识信息或对象标识信息)与链接信息之间对应关系的匹配属性,就可以有效地执行关键区域与链接信息之间的协调工作。
进一步,在通过这种方式将主图像与主图像的相关信息彼此分开地单独处理的时候,由于它们的维持可以彼此分开地单独进行,所以可以期望各种优点。
例如,仅仅对于带有链接信息的索引信息才需要在相关信息站点地址改变时、诸如在取消URL链接时进行维护。因此,可以减少维护或管理所需要的负担。
进一步,而且在与任何广告客户的合约终止时,在重新分配(重新广播)时,只需要从带有链接信息的索引信息中单独地删除相关部分。因此,工作负担减少了。
进一步,例如当要附加地登记关键区域时,虽然需要标记操作,但是要更新的只是关键图像和索引信息(带有链接信息的索引信息)。因此,无需触及主图像。
B-2、用于带有标签信息的图像数据的产生设备
如果所有上述带有链接信息的索引信息、主图像和关键图像都变为可用的,则禁止提供本发明的发明人所打算的业务。换言之,可能使用观察主图像的观察者的点击操作作为触发,以显示相关信息。
另一方面,如果图像和信息分别可以通过其本身进行处理,那么可能只记录或复制主图像。在链接信息是CM的时候,只记录或复制主图像表明失去了广告机会。然而,这妨碍了媒体业的发展,其中CM是主要收入来源。
因此,本发明的发明人提出一种以相互关联关系输出带有链接信息的索引信息、主图像和关键图像的技术。该技术于是可以必然地也将标签信息(带有链接信息的索引信息和关键图像)与主图像一起集成地复制或记录。
特别地,如果在复制或记录主图像中要求所有带有链接信息的索引信息、主图像和关键图像都是可用的作为条件,那么在允许自由娱乐的同时也可以保证广告的机会。
进一步,即使要求所有带有链接信息的索引信息、主图像和关键图像都是可用的作为条件以允许正常地产生主图像,在允许自由娱乐的同时也可以保证广告的机会。
进一步,在将主图像存储到硬盘驱动设备或某个其它随机访问记录介质中并随后欣赏时,该技术也可以作为CM跳转的有效对策。这是因为,与插入在主图像之间间隙中的CM不同,标签信息不产生CM跳转功能的对象。
进一步,在显示CM中,需要观察者的点击操作。因此,观察者就不会出现如其中不顾观察者的意愿而自由弹出这种显示的情况下的心理抗拒。实际上,由于作为观察者对主图像感兴趣的结果,观察者点击主图像中嵌入有标签信息的区域,所以可以得到比将CM包括在连续给出的显示流的情况下更高的广告效果。
a、系统结构
下面描述用于带有标签信息的图像数据的产生设备。
图23所示为用于带有标签信息的图像数据的产生设备的内部结构的范例。参照图23,所示用于带有标签信息的图像数据的产生设备包括链接信息嵌入部分121(图21)和数据输出部分123。
数据输出部分123是信号处理部分,其输出彼此呈相互关联关系的带有链接信息的索引信息、主图像(包括活动图像)和关键图像。
要注意的是,用于带有标签信息的图像数据的产生设备也可以被实施为图24中所述的程序。
特别地,可以通过将链接信息嵌入到索引信息中以产生带有链接信息的索引信息的处理(S11)和输出呈相互关联关系的带有链接信息的索引信息、主图像和关键图像的另一处理(S12)来实施用于带有标签信息的图像数据的该产生设备。
这里,带有相关标签信息的图像数据的输出目的地是传输线或记录介质。在传输目的地是传输线的时候,分配形式例如可以是下载、流式或广播。
b、输出数据格式
下面描述从数据输出部分123所输出的带有标签信息的图像数据的数据输出范例。
b1、数据输出范例1
图25描述了其中一个数据输出范例。参照图25,在所示数据输出范例中,将带有链接信息的索引信息以非压缩形式应用于主图像和关键图像,并与其集成,从而将它们作为单个文件看待。所产生的文件具有应用于其的唯一扩展名“cmov”。其中集成主图像、关键图像和带有链接信息的索引信息的文件此后被称作为“cmo文件”。自然,可能应用某个其它扩展名。例如,可以应用“ocv”(对象点击视频)。
在如本数据输出范例中将主图像、关键图像和带有链接信息的索引信息集成的时候,这有效地防止出现只有主图像被其自身分开和使用的情况。
在将图像数据以文件的形式处理的时候,本数据输出范例例如适合于流式、下载或记录介质形式的分配。
b2、数据输出范例2
图26描述了其中另一数据输出范例。参照图26,在所示数据输出范例中,将带有链接信息的索引信息以压缩编码形式应用于主图像和关键图像,并与其集成,从而将它们作为单个文件处理。在这种情况下,也将唯一扩展名“cmov”应用于所产生的文件。
虽然压缩编码系统不仅应用于本范例,而且应用于其它输出范例,但是其可以是任何可逆压缩编码系统和不可逆压缩编码系统。通常对于分配,使用具有高压缩率的不可逆压缩编码系统。另一方面,对于存储主数据或在编辑阶段,使用可逆压缩编码系统。
要注意的是,虽然在图26中未示出,但是将标题应用于所产生的文件。标题被包括在具有链接信息的索引信息中,或被单独准备。
标题描述带有链接信息的索引信息放置在文件中的位置、主图像和关键图像的顶部位置、帧的数量、图片尺寸(水平和垂直反向上的像素数)、压缩系统、文件中带有链接信息的索引信息/主图像/关键图像的布置信息(地址偏移)等。
而且,本数据输出范例有效地防止出现只有主图像被分开和使用的情况,因为主图像、关键图像和带有链接信息的索引信息彼此相互集成。进一步,由于数据是压缩编码形式,所以数据量较小。进一步,在将图像数据以文件形式看待的时候,本数据输出范例例如也适合于流式、下载或记录介质形式的分配。
进一步,本数据输出范例允许初始地或在任意定时只读出带有链接信息的索引信息。相应地,容易显示相关信息的表格。
b3、数据输出范例3
图27描述再一个数据输出范例。参照图27,在所示数据输出范例中,将主图像和关键图像压缩编码并相互集成,从而将它们作为单个文件看待,类似于此前所述的两个输出范例。在这种情况下,也应用唯一扩展名“cmov”。
本输出范例的唯一特征是,带有链接信息的索引信息被放置在压缩后的关键图像的元数据区域中。元数据是描述与主图像相关的信息的数据。元数据例如包括时间码、版权信息、图像拾取人信息、字符、图像拾取地方等。
而且,本数据输出范例有效地防止出现只有主图像被分开和使用的情况,因为主图像、关键图像和带有链接信息的索引信息彼此相互集成。进一步,由于数据是压缩编码形式,所以数据量较小。进一步,在将图像数据以文件的形式看待的时候,本数据输出范例例如也适合于流式、下载或记录介质形式的分配。
要注意的是,带有链接信息的索引信息可以被放置在压缩后的主图像的元数据区域中。
进一步,在本数据输出范例的情况下,每一片带有链接信息的索引信息都必须只具有关于相应场景(时间段)的标签信息。相应地,可能使得各片带有链接信息的索引信息的尺寸固定或彼此相等。因此,本数据输出范例适合于广播或长时间段的内容。
b4、数据输出范例4
图28描述了再进一步的数据输出范例。参照图28,压缩编码其中将主图像分配给四个数据通道中三个数据通道、并且将关键图像分配给剩余的一个数据通道的图像数据,并且应用带有链接信息的索引信息,以形成文件。
要注意到的是,图28描述了其中将用于R(红色)、G(绿色)和B(蓝色)的三个通道分配给用于主图像的三个数据通道的数据输出范例。自然,这三个数据通道可选地可以用于一个亮度数据和两个色差数据。
在这种情况下,集成的文件也具有应用于其的唯一扩展名“cmov”。
而且在本数据输出范例中,主图像、关键图像和带有链接信息的索引信息被集成,并且这有效地防止出现只有主图像被其自身分开和使用的情况。进一步,由于数据是压缩编码形式,所以数据量较小。而且,在将图像数据以文件形式看待的时候,本数据输出范例例如也适合于流式、下载或记录介质形式的分配。
b5、数据输出范例5
图29描述了还进一步的一个数据输出范例。参照图29,在本数据输出范例中,也压缩编码其中将主图像分配给四个数据通道中三个数据通道、并且将关键图像分配给剩余的一个数据通道的图像数据,并且应用带有链接信息的索引信息,以形成文件。特别地,将唯一扩展名“cmov”应用于所产生的集成文件。
然而,在本输出范例中,带有链接信息的索引信息被放置在关键图像的元数据区域中。
在本输出范例中,用于R(红色)、G(绿色)和B(蓝色)的三个通道也被分配给用于主图像的三个数据通道。然而,一个亮度数据和两个色差数据可选地可以应用于这三个数据通道。
本数据输出范例也有效地防止出现只有主图像被分开和使用的情况,因为主图像、关键图像和带有链接信息的索引信息彼此集成。进一步,由于数据是压缩编码形式,所以数据量较小。进一步,在将图像数据以文件形式看待的时候,本数据输出范例例如也适合于流式、下载或记录介质形式的分配。
要注意到的是,在用于本输出范例的压缩编码处理中,可以将其中向其应用带有链接信息的索引信息的关键图像(一个通道)和主图像(三个通道)被集成的文件进行压缩编码。在这种情况下,可逆编码系统用于压缩编码。这在编辑阶段或对于存储作为主数据是有效的。
b6、数据输出范例6
图30A和30B描述了还进一步的一个数据输出范例。参照图30A和30B,在所示数据输出范例中,主图像被输出到主通道,而关键图像被输出到副通道。因此,带有链接信息的索引信息被放置在主图像或关键图像的元数据区域中。
图30A所示为其中将带有链接信息的索引信息放置在关键图像(副通道)的元数据区域中的范例,而图30B所示为其中将带有链接信息的索引信息放置在主图像(主通道)的元数据区域中的另一范例。
本数据输出范例适合于以广播形式分配图像数据的情况。在采用本数据形式的时候,而且以广播形式进行时,可以实现其中在屏幕上可以显示观察者所指定的部分区域的相关信息的系统。要注意的是,在记录主图像时,如果满足记录要与主通道(主图像)配对的副通道的条件,那么本数据输出范例有效地防止出现只有主图像被分开和使用的情况。
例如,如果主图像以当前任何一种数据输出格式被广播,则这样的应用是可能的,即虽然通过现有调谐器可以以普通方式接收主图像,但是禁止拷贝是有效的,或者置乱功能变为有效地禁止接收主图像。
另一方面,使用与当前数据输出格式兼容的调谐器,可以预期出现这样的应用:当在相同时间接收到关键图像和带有链接信息的索引信息的时候(其中点击功能是有效的),可以取消诸如禁止拷贝或置乱功能的这种限制。
进一步,在存储到硬盘驱动设备等中时,可能出现这样的应用:在文件以cmov文件格式被存储时,可以取消主图像的禁止拷贝、置乱功能。
b7、数据输出范例7
图31A描述了还进一步的一个数据输出范例。参照图31A,本数据输出范例也适合于广播形式。然而,本数据输出范例不使用副通道。换言之,关键图像和带有链接信息的索引信息被放置在主通道中主图像的元数据区域中。
在采用本数据形式的时候,即使以广播形式进行,也可以实现其中在屏幕上可以显示观察者所指定的部分区域的相关信息的系统。进一步,主图像、关键图像和带有链接信息的索引信息彼此集成,并且这有效地防止出现只有主图像被其自身分开和使用的情况。
也有效地记录与带有链接信息的索引信息一起表示元数据区域中链接信息的链接目标的相关信息(例如CM),如图31B中所示。
要注意的是,链接信息被给定作为代表链接目标在相关信息(例如CM)哪一编号的页面上的信息,或对于单个相关信息唯一的标识信息(例如编号)。
在这种情况下,由于集成了链接目标的相关信息,所以不需要通过互联网获取相关信息。相应地,在再现设备没有与互联网连接时,本数据输出形式是有效的。在再现设备与互联网连接时,本数据输出形式在通信带宽不足够或者通信条件不理想时候也是有效的。
要注意的是,通过这种方式将代表链接信息的链接目标的相关信息与主图像集成的方法对于此前所描述的cmov文件格式的文件的数据输出范例也有效。
C、标签信息显示控制设备和信息处理设备(显示设备)
这里,描述当再现带有标签信息的图像数据时的处理操作,也就是由观察者侧的信息处理设备所执行的处理操作。
要注意的是,信息处理设备可以是标签信息显示控制设备或任何商品形式的设备,只要其可以通过软件实施与标签信息显示控制设备等同的功能。
例如,信息处理设备可以是计算机、磁盘设备、光盘播放器、机顶盒、家庭服务器或任何其它大容量存储设备、显示设备、游戏机、数字相机、便携信息终端、便携电话机等。
可以通过两个再现模式来再现图像处理设备的带有标签信息的图像数据。
其中一种再现模式是累积型再现。
累积型再现是从其中全部带有标签信息的图像数据被存储在记录介质上的状态开始的再现。
例如,可以再现通过其中将它们记录在光盘或某些其它大容量介质上的形式分配的带有标签信息的图像数据(cmov文件)。
可选地,例如可以从本地介质再现通过互联网下载的带有标签信息的图像数据(cmov文件)。
当进行这种再现时,主图像和关键图像彼此相互同步地被再现。然而,关键图像不被显示在显示屏幕上。
可选地,例如以广播形式或流式形式所接收的主图像、关键图像和带有链接信息的索引信息可以被从记录介质中再现,其中在记录介质上记录有从主图像、关键图像和带有链接信息的索引信息中重构的带有标签信息的图像数据(cmov文件)。要注意的是,记录介质可以是便携记录介质或者被包括在再现设备中的本地介质。
而另一种再现模式是流式型再现。
流式型再现是按照下载的顺序对流式文件的再现。
要注意的是,在流式型再现中,首先下载带有链接信息的索引信息并将其存储在主存储器中。此后,按照再现顺序下载主图像和关键图像并将其存储在存储器中,然后彼此相互同步地再现主图像和关键图像。
在这种情况下,也不再现关键图像。
C-1、图像再现系统
下面描述一般用于存储型再现和流式型再现的图像再现系统。
a、功能结构
图32所示为图像再现系统的结构范例。
参照图32,所示图像再现系统包括标签信息显示控制设备131、输入设备133、再现设备135、和显示设备137。
首先描述图像再现系统中除了标签信息显示控制设备131之外的组件。
输入设备133用来输入来自欣赏带有标签信息的图像数据的观察者的操作指令。
再现设备135用来从记录区域中再现带有标签信息的图像数据。使用适合于记录介质的再现机构作为再现设备135。要注意的是,大容量记录介质用于累积型再现,而主存储器(半导体存储装置)用于流式型再现。
显示设备137显示主图像。可以将各种显示装置用于显示设备137。例如,可以将CRT显示单元、平板显示单元、或者投影类型显示设备(例如液晶显示面板、或DMD(注册商标)装置)用于显示设备137。
标签信息显示控制设备131是控制单元,其控制上述外围设备,以控制指定区域中主图像的显示和相关信息的显示。标签信息显示控制设备131可以通过任何软件和硬件实施。
这里,描述了标签信息显示控制设备131的功能结构。
标签信息显示控制设备131包括再现控制部分141、索引信息读出部分143、指针移动接收部分145、指针位置获取部分147、和指针位置判定部分149。标签信息显示控制设备131进一步包括标识信息读出部分151、链接信息读出部分153、和相关信息显示控制部分155。
再现控制部分141是控制设备,其当接收到主图像的再现指令时使得同步再现时间信息(例如时间码)与主图像的时间信息相同的关键图像。换言之,再现控制部分141控制主图像和关键图像的同步再现。
索引信息读出部分143是信号处理设备,其读出与主图像和关键图像相关联的具有链接信息的索引信息。
指针移动接收部分145是信号处理设备,其接收由主图像的观察者通过输入设备133在屏幕内对指针的移动。
指针位置获取部分147是信号处理设备,其获取指针在屏幕中的位置。
指针位置判定部分149是信号处理设备,其参照与主图像同步再现的关键图像,以判定指针位置是否在关键区域内。换言之,指针位置判定部分149执行时间位置与当前所显示的主图像的时间位置相同的关键位置与指针之间的匹配判定。
标识信息读出部分151是信号处理设备,其在指针位置处于关键区域内时读出设定到关键区域的区域标识信息。例如,在指针属于与鞋对应的关键区域的时候,读出关键区域的灰度级值。
链接信息读出部分153是信号处理设备,其根据所参照的关键图像的时间信息和所读出的区域标识信息,参照带有链接信息的索引信息,以读出与区域标识信息对应的链接信息。
相关信息显示控制部分155是信号处理设备,其从由所读出的链接信息所指定的链接目标中获取相关信息,并显示所获取的相关信息。
例如,在链接信息被给定为URL的时候,相关信息显示控制部分155从通过未示出的通信功能所访问的网站获取必需的相关信息,并将所获取的相关信息提供给显示设备137。
另一方面,例如在链接信息是与主图像一起被接收或存储的相关信息的标识信息时,相关信息显示控制部分155通过再现设备135获取必需的相关信息,并将所获取的相关信息提供给显示设备137。
b、特别范例
图33所示为其中由计算机实施图像再现系统的结构范例。
参照图33,所示图像再现系统包括CPU(处理器)161、输入设备163、显示设备165、硬盘驱动设备167和主存储器169。
特别地,通过由CPU 161所执行的程序来实施图33中所示标签信息显示控制设备131的处理功能。
例如,通过CPU 161执行判定由观察者所指定的指针的坐标位置是否被包括在关键区域中的判定处理,以及根据应用于指针所位于的关键区域的区域标识信息读出链接信息的读出处理。
要注意的是,构造图33中所示的图像再现系统,以执行累积型再现。换言之,构造图像再现系统,使得将主图像、关键图像和带有标签信息的索引信息从硬盘驱动设备167中读出到主存储器169。
相应地,在构造图像再现系统以执行流式型再现时,处理前进到其中直接将主图像、关键图像和带有标签信息的索引信息存储在主存储器169中的状态。
C-2、观察者的操作与内部处理之间的关系
图34描述了观察者的操作与响应于该操作所执行的内部处理之间的对应关系。要注意的是,通过输入设备163(133)输入观察者的操作。
当接收到用于再现主图像的操作时,CPU 161发出指令,以读取带有链接信息的索引信息和再现(显示)主图像。由此,CPU 161也发出执行同步再现关键图像的指令。进一步,CPU 161启动后面描述的引导功能。引导功能是向观察者通知存在所嵌入的关键区域并且辅助关键区域的适当操作的功能。
另一方面,当CPU 161接收所标记的对象(主题图像)的点击操作时,其检测点击坐标(获取指针位置),并从应用相同时间的关键图像中获取对应于点击坐标的区域标识信息。例如,CPU 161获取灰度级值。
此后,CPU 161通过使用区域标识信息来参照与相同时间或包括该时间的时间间隔协调一致的带有标签信息的索引信息,以从相应链接信息中获取相关信息。在显示设备165的屏幕上显示所获取的相关信息。显示可以是主图像上的叠加显示,或者可以是子屏幕显示。
图35所述为与上述标签信息显示控制功能对应的程序的处理内容。
参照图35,程序从带有标签信息的索引信息的读出处理(S21)开始。然后,程序控制主图像和关键图像的同步再现(S22)。
此后,程序接收在显示设备165的屏幕上所显示的指针移动的输入,并判定指针位置(S23、S24)。
图36A所示为指针171的显示范例。图36A中,指针171位于主题图像的鞋的位置。
然后,程序判定指针位置是否在关键区域内(S25)。在判定处理中,程序参照在与主图像的时间相同的时间处的关键图像。图36B描述了与主图像配对的关键图像。关键图像是用于内部处理,并且不实际显示给观察者。
图36A和36B示出了为“00小时:14分钟:30秒:13帧”所设定的图像范例。在范例中,在对应于车辆的位置设定正方形的关键区域(灰度级值=20),并且在对应于每一只鞋的位置设定圆形的另一关键区域(灰度级值=40)。
根据指针的坐标(X,Y)是否位于关键区域中而执行判定处理。
如果在判定处理中判定指针位置不在任何关键区域内(如果得到否定结果),则程序返回到其中接收指针移动的状态。这是因为指针指定了其中没有嵌入标签信息的区域。
另一方面,如果在判定处理中判定指针位置在关键区域内(如果得到肯定结果),则程序根据关键区域的区域标识信息访问带有链接信息的索引信息,以关于与操作时时间相同的时间读出与相应区域标识信息协调一致的链接信息(S26)。
此后,程序获取由链接信息所给定的相关信息,并控制显示设备165以在屏幕上显示相关信息(S27)。
图37所示为相关信息的显示范例。在图37中,在屏幕上部显示代表相关信息来源的URL地址(http:∥www.xxx.com/yy/yy)。
同时,在屏幕的中央部分,以大屏幕尺寸显示指针所指定的鞋。同时,在屏幕左上端部分显示价格(在所示范例中是“$98”)。
自然,可以通过观察者的操作关闭相关信息的显示窗口。
此后,程序判定主图像的再现是否结束(S28)。如果再现继续(如果得到否定结果),则程序返回到指针位置的输入接收状态,以准备指定进一步的关键区域。
另一方面,如果确认再现结束(如果得到肯定结果),则程序结束标签信息的显示控制功能。
通过CPU 161执行上述这种处理程序,以执行标签信息显示处理。
C-3、引导功能
如上所述,通过再现带有标签信息的图像数据,作为观察者主观操作的结果,可以在屏幕上确认在指针位置所嵌入的相关信息。
这里,描述了适合于辅助观察者指定关键区域的显示功能。
a、引导功能1
虽然关键图像最初只是为判定处理所准备,但是其也可以用来辅助观察者的屏幕操作。
例如,可以包括当关键区域被包括在与主图像同步产生的关键图像中时,以这样的显示模式显示对应于关键区域的主图像的部分区域,使得观察者可以识别该部分区域的功能(关键区域显示控制部分),作为标签信息显示控制设备131的功能。
图38所示为其中采用该显示功能的显示范例。在图38中,在集成状态中显示主图像和关键图像。
在这种情况下,可以使用其改变的亮度来显示其中嵌入标签信息的主图像的部分区域。在将与主图像的原始亮度不同的亮度提供给关键图像时,可以容易地区分其中嵌入标签信息的部分区域。
要注意的是,可以响应于提供给形成关键图像的每个关键区域的区域标识信息(灰度级值或色调值)而提供亮度改变。
可选地,可以将相同亮度改变提供给所有关键区域,而与提供给关键区域的区域标识信息的差无关。这是以为观察者所需要的是标识其中嵌入标签信息的部分区域,而不是标识区域之间的差别。
附带地,不仅可以通过相对于原始亮度级提高亮度,而且也可以通过降低亮度或通过周期性地开启和关闭亮度来执行亮度改变。这里,可以通过主图像的几个百分比级别的亮度提供亮度改变。
要注意的是,均匀地改变其中嵌入标签信息的部分区域中的亮度的方法恶化了主图像的图片质量,并且妨碍欣赏。
相应地,优选地只有当通过操作者选择其中部分区域的亮度发生改变的显示模式时,才执行取决于亮度改变的显示模式。自然,可选地可以正常改变其中嵌入标签信息的区域的亮度。
同时,作为改变其中嵌入标签信息的部分区域的显示模式以通知观察者的技术,还有一种方法,其中改变要用于显示的部分区域的色调。
例如,可以响应于提供给形成关键图像的每个关键区域的区域标识信息(色调值或灰度级值)而提供色调改变。
可选地,可以与提供给关键区域的区域标识信息的差无关地将相同色调改变提供给所有关键区域。例如,对于其中嵌入标签信息的所有整个部分区域,可以提供红颜色或显示红色框架。自然,可以使用任意颜色用于显示。
优选地也只有当通过操作者选择其中部分区域的亮度发生改变的显示模式时,才执行取决于色调改变的显示模式。自然,可选地可以正常改变其中嵌入标签信息的区域的亮度。
b、引导功能2
上面描述的引导功能1不依赖于指针的位置而改变其中嵌入标签信息的部分区域的显示模式。然而,它们可能干扰主图像的欣赏。
因此,可以引入在判定指针位置位于关键区域的范围内或接近关键区域时,以这样的显示模式显示其中嵌入标签信息的主图像的部分区域,使得观察者可以识别该部分区域的功能(标签区域位置告知部分),作为标签信息显示控制设备131的功能。
图39A和39B所示为其中采用该显示功能的显示范例。而且在图39A和39B的情况下,标签信息被嵌入在主题图像的鞋中,与此前所描述的其它范例相似。
特别地,图39A所示为其中指针173不位于关键屏幕上所设定的任何关键区域中的显示范例。此时,在显示屏幕上没有发现改变。
相应地,观察者可以确定在当前指针位置处没有嵌入标签信息。进一步,不会对主图像的欣赏造成障碍。
图39B所示为其中指针173位于关键图像上所设定的关键区域中的显示范例。在这种情况下,对应于鞋的关键区域的显示模式改变。例如,亮度改变或色调改变,与引导功能1的情况中类似。
根据改变,观察者可以可视化地确认标签信息被嵌入在当前指针位置。
要注意的是,在本显示范例中,只在对应于鞋的关键区域中执行主图像的显示模式的改变,但是在对应于车辆的关键区域中并执行。
因此,可以将在显示标签信息时主图像的图片质量的恶化减到最小。特别是在大量区域中嵌入标签信息时,本显示范例是有效的。
c、引导功能3
在前面所描述的两个引导功能中,改变主图像的显示模式。然而,这可能会恶化观察者对主图像的欣赏。
因此,描述了一种技术,其引入当判定指针位置处于关键区域的范围内时,改变要定位在其中嵌入标签信息的主图像的部分区域中的指针的显示模式的功能(指针形状改变部分),作为标签信息显示控制设备131的功能。
图40A、40B和41A、41B所示为其中采用刚才所描述的显示功能的不同显示范例。
特别地,图40A和41A所示为其中指针175不位于关键屏幕上所设定的任何关键区域中的显示范例。在这种情况下,以基本尺寸和基本形状显示指针175。
图40B和41B所示为其中指针175位于关键屏幕上所设定的关键区域中的显示范例。
在图40B中,以相等的尺寸,但是以不同的显示模式、诸如不同的亮度或色度显示指针177。
在图41B中,以相同的亮度和相同的色调、但是以改变的显示模式显示指针179。
在这种显示功能中,由于只有指针的显示模式改变,所以对主图像的图片质量没有影响。
进一步,由于只有指针的显示模式改变,所以数学运算量也较小。而且,由于吸引观察者注意力的指针的显示模式改变,所以观察者可以容易地确认关键区域。
D、其它实施例
a、可以通过网络分配对应于此前所描述的功能的程序,或将其存储在存储介质中或存储在其上面,并连同其一起分配。用于分配的存储介质可以是磁性存储介质、光学记录介质、半导体存储介质或任何其它存储介质。
b、可以在本发明的精神和范围对此前所描述的实施例进行各种变形。而且可以根据本发明的公开,通过创造或组合来进行各种变更和应用。
Claims (13)
1、一种标签信息显示控制设备,包括:
再现控制部分,其被配置用来与主图像同步地再现关键图像;
索引信息读出部分,其被配置用来读出与所述主图像和所述关键图像相关联的具有链接信息的索引信息;
指针移动接收部分,其被配置用来接收所述主图像的观察者在屏幕中所进行的指针移动;
指针位置获取部分,其被配置用来获取所述指针在所述屏幕中的位置;
指针位置判定部分,其被配置用来参照与所述主图像同步再现的关键图像,以判定所述指针的位置是否在关键区域的范围内;
标识信息读出部分,其被配置用来在所述指针的位置位于所述关键区域的范围内时,读出关于所述关键区域所设定的区域标识信息;
链接信息读出部分,其被配置用来基于与所参照的关键图像的时间信息一起读出的区域标识信息,参照所述具有链接信息的索引信息,以读出对应于所述区域标识信息的链接信息;和
相关信息显示控制部分,其被配置用来从由所读出的链接信息所指定的链接目标中获取相关信息,并显示所获取的该相关信息。
2、根据权利要求1的标签信息显示控制设备,其中所述关键区域在其范围内包括在其外边界附近的区域。
3、根据权利要求1的标签信息显示控制设备,进一步包括:
关键区域显示控制部分,其被配置用来在所述关键区域被包括在与所述主图像同步产生的关键图像中时,以这样的显示形式显示对应于所述关键区域的主图像的部分区域,其中在所述显示形式中,观察者可以识别所述部分区域。
4、根据权利要求3的标签信息显示控制设备,其中所述关键区域显示控制部分改变所显示的主图像的其中嵌入标签信息的部分区域的亮度。
5、根据权利要求3的标签信息显示控制设备,其中所述关键区域显示控制部分改变所显示的主图像的其中嵌入标签信息的部分区域的色调。
6、根据权利要求1的标签信息显示控制设备,进一步包括:
标签区域位置告知部分,其被配置用来在判定所述指针的位置位于所述关键区域的范围内时,以这样的显示模式显示其中嵌入标签信息的主图像的部分区域,使得观察者可以识别所述主图像的部分区域。
7、根据权利要求6的标签信息显示控制设备,其中所述标签区域位置告知部分包括指针形状改变部分,其被配置用来在判定所述指针的位置位于所述关键区域的范围内时,改变位于其中嵌入标签信息的主图像的部分区域中的指针的显示模式。
8、根据权利要求1的标签信息显示控制设备,其中所述链接信息作为URL,即统一资源定位器被给出。
9、根据权利要求1的标签信息显示控制设备,其中所述链接信息作为用于标识部分所述主图像的信息或与所述主图像一起被接收或再现的相关信息被给出。
10、一种信息处理设备,包括:
再现控制部分,其被配置用来与主图像同步地再现关键图像;
索引信息读出部分,其被配置用来读出与所述主图像和所述关键图像相关联的具有链接信息的索引信息;
指针移动接收部分,其被配置用来接收所述主图像的观察者在屏幕中所进行的指针移动;
指针位置获取部分,其被配置用来获取所述指针在所述屏幕中的位置;
指针位置判定部分,其被配置用来参照与所述主图像同步再现的关键图像,以判定所述指针的位置是否在关键区域的范围内;
标识信息读出部分,其被配置用来在所述指针的位置位于所述关键区域的范围内时,读出关于所述关键区域所设定的区域标识信息;
链接信息读出部分,其被配置用来基于与所参照的关键图像的时间信息一起读出的区域标识信息,参照所述具有链接信息的索引信息,以读出对应于所述区域标识信息的链接信息;和
相关信息显示控制部分,其被配置用来从由所读出的链接信息所指定的链接目标中获取相关信息,并在所述主图像的部分区域中显示所获取的相关信息。
11、一种显示设备,包括:
再现控制部分,其被配置用来与主图像同步地再现关键图像;
索引信息读出部分,其被配置用来读出与所述主图像和所述关键图像相关联的具有链接信息的索引信息;
指针移动接收部分,其被配置用来接收所述主图像的观察者在屏幕中所进行的指针移动;
指针位置获取部分,其被配置用来获取所述指针在所述屏幕中的位置;
指针位置判定部分,其被配置用来参照与所述主图像同步再现的关键图像,以判定所述指针的位置是否在关键区域的范围内;
标识信息读出部分,其被配置用来在所述指针的位置位于所述关键区域的范围内时,读出关于所述关键区域所设定的区域标识信息;
链接信息读出部分,其被配置用来基于与所参照的关键图像的时间信息一起读出的区域标识信息,参照所述具有链接信息的索引信息,以读出对应于所述区域标识信息的链接信息;
相关信息显示控制部分,其被配置用来从由所读出的链接信息所指定的链接目标中获取相关信息,并显示所获取的相关信息;和
显示装置,其被配置用来显示所述主图像。
12、一种标签信息显示控制方法,包括以下步骤:
与主图像同步地再现关键图像;
读出与所述主图像和所述关键图像相关联的具有链接信息的索引信息;
接收所述主图像的观察者在屏幕中所进行的指针移动;
获取所述指针在所述屏幕中的位置;
参照与所述主图像同步再现的关键图像,以判定所述指针的位置是否在关键区域的范围内;
当所述指针的位置位于所述关键区域的范围内时,读出关于所述关键区域所设定的区域标识信息;
基于与所参照的关键图像的时间信息一起读出的区域标识信息,参照所述具有链接信息的索引信息,以读出对应于所述区域标识信息的链接信息;和
从由所读出的链接信息所指定的链接目标中获取相关信息,并显示所获取的相关信息。
13、一种计算机可读记录介质,其中记录有程序,所述程序包括以下步骤:
与主图像同步地再现关键图像;
读出与所述主图像和所述关键图像相关联的具有链接信息的索引信息;
接收所述主图像的观察者在屏幕中所进行的指针移动;
获取所述指针在所述屏幕中的位置;
参照与所述主图像同步再现的关键图像,以判定所述指针的位置是否在关键区域的范围内;
当所述指针的位置位于所述关键区域的范围内时,读出关于所述关键区域所设定的区域标识信息;
基于与所参照的关键图像的时间信息一起读出的区域标识信息,参照所述具有链接信息的索引信息,以读出对应于所述区域标识信息的链接信息;和
从由所读出的链接信息所指定的链接目标中获取相关信息,并显示所获取的相关信息。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005198173A JP2007019769A (ja) | 2005-07-06 | 2005-07-06 | タグ情報表示制御装置、情報処理装置、表示装置、タグ情報表示制御方法及びプログラム |
JP2005198173 | 2005-07-06 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN1892564A true CN1892564A (zh) | 2007-01-10 |
CN100437453C CN100437453C (zh) | 2008-11-26 |
Family
ID=37597473
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CNB2006101031619A Expired - Fee Related CN100437453C (zh) | 2005-07-06 | 2006-07-06 | 标签信息显示控制设备及方法、信息处理设备和显示设备 |
Country Status (3)
Country | Link |
---|---|
US (1) | US8013833B2 (zh) |
JP (1) | JP2007019769A (zh) |
CN (1) | CN100437453C (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102055861A (zh) * | 2009-10-30 | 2011-05-11 | 沈斌 | 一种实物的图片网络展示方法 |
CN102057350A (zh) * | 2009-02-17 | 2011-05-11 | 松下电器产业株式会社 | 对象选择装置、对象选择程序、用于对象选择装置的集成电路以及对象选择方法 |
CN102214067A (zh) * | 2010-04-09 | 2011-10-12 | 索尼计算机娱乐公司 | 信息处理装置 |
CN103403657A (zh) * | 2011-03-15 | 2013-11-20 | 喀普康有限公司 | 计算机装置、控制方法及存储介质 |
Families Citing this family (21)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009117974A (ja) * | 2007-11-02 | 2009-05-28 | Fujifilm Corp | 興味情報作成方法、装置およびシステム |
JP4932779B2 (ja) * | 2008-04-22 | 2012-05-16 | ヤフー株式会社 | Tv番組と連動した動画対応広告装置及び方法 |
JP2010004465A (ja) * | 2008-06-23 | 2010-01-07 | Fujinon Corp | 立体画像撮影システム |
US20100098074A1 (en) * | 2008-10-22 | 2010-04-22 | Backchannelmedia Inc. | Systems and methods for providing a network link between broadcast content and content located on a computer network |
US9232286B2 (en) * | 2008-12-24 | 2016-01-05 | Lg Electronics Inc. | IPTV receiver and method for controlling an application in the IPTV receiver |
TW201207634A (en) * | 2010-08-09 | 2012-02-16 | Hon Hai Prec Ind Co Ltd | System and method for importing information of images |
US20140176487A1 (en) * | 2011-09-09 | 2014-06-26 | Daisuke Kikuchi | Communication terminal, image displaying system, processing method in a communication terminal, and computer program |
US9565476B2 (en) * | 2011-12-02 | 2017-02-07 | Netzyn, Inc. | Video providing textual content system and method |
JP2013174965A (ja) * | 2012-02-23 | 2013-09-05 | Toshiba Corp | 電子機器、電子機器の制御システム、及びサーバ |
US9899062B2 (en) | 2013-12-09 | 2018-02-20 | Godo Kaisha Ip Bridge 1 | Interface apparatus for designating link destination, interface apparatus for viewer, and computer program |
JP5671671B1 (ja) * | 2013-12-09 | 2015-02-18 | 株式会社Pumo | 視聴者用インタフェース装置及びコンピュータプログラム |
JP5585716B1 (ja) * | 2013-12-09 | 2014-09-10 | 株式会社Pumo | リンク先指定用インタフェース装置、視聴者用インタフェース装置、及びコンピュータプログラム |
CN103888785A (zh) * | 2014-03-10 | 2014-06-25 | 百度在线网络技术(北京)有限公司 | 信息的提供方法和装置 |
JP5585741B1 (ja) * | 2014-04-01 | 2014-09-10 | 株式会社Pumo | リンク先指定用インタフェース装置、視聴者用インタフェース装置、及びコンピュータプログラム |
JP5589208B1 (ja) * | 2014-04-01 | 2014-09-17 | 株式会社Pumo | リンク先指定用インタフェース装置、視聴者用インタフェース装置、及びコンピュータプログラム |
JP6150136B2 (ja) * | 2014-07-07 | 2017-06-21 | 合同会社IP Bridge1号 | 記録装置 |
JP6621595B2 (ja) * | 2015-04-23 | 2019-12-18 | 株式会社Nttドコモ | 情報処理装置、情報処理方法及びプログラム |
WO2017049577A1 (en) | 2015-09-25 | 2017-03-30 | Qualcomm Incorporated | Systems and methods for video processing |
JP2017153129A (ja) * | 2017-04-14 | 2017-08-31 | 日立マクセル株式会社 | 受信装置 |
JPWO2020246237A1 (ja) * | 2019-06-05 | 2021-09-13 | パロニム株式会社 | 情報処理システム |
JP6831027B1 (ja) * | 2020-02-28 | 2021-02-17 | 株式会社ドワンゴ | 配信システム、動画生成装置、および動画生成方法 |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4279905B2 (ja) * | 1994-02-18 | 2009-06-17 | ソニー株式会社 | 放送システムおよび受信端末 |
US5715416A (en) * | 1994-09-30 | 1998-02-03 | Baker; Michelle | User definable pictorial interface for a accessing information in an electronic file system |
JP3158960B2 (ja) * | 1995-05-23 | 2001-04-23 | ヤマハ株式会社 | 通信カラオケシステム |
JPH1195971A (ja) | 1997-09-24 | 1999-04-09 | Sharp Corp | ユーザインタフェースシステム |
US6356924B2 (en) * | 1997-11-26 | 2002-03-12 | International Business Machines Corporation | Configurable disablement of display objects in a browser |
JP4031120B2 (ja) | 1998-09-10 | 2008-01-09 | 株式会社東芝 | オブジェクト強調表示方法及びその装置並びに記憶媒体 |
EP1054321A3 (en) * | 1999-05-21 | 2002-06-19 | Sony Corporation | Information processing method and apparatus |
US6535889B1 (en) * | 1999-09-23 | 2003-03-18 | Peeter Todd Mannik | System and method for obtaining and displaying an interactive electronic representation of a conventional static media object |
KR100747421B1 (ko) * | 1999-10-20 | 2007-08-09 | 코닌클리케 필립스 일렉트로닉스 엔.브이. | 영상 콜렉션을 브라우징하는 장치 및 방법 |
EP1304677A4 (en) * | 2000-06-19 | 2008-08-06 | Shima Seiki Mfg | METHOD FOR DISPLAYING PREVIEW IMAGE, AND DISPLAY DEVICE FOR PRE-DISPLAY IMAGE |
JP2002218433A (ja) | 2001-01-15 | 2002-08-02 | Yoshiki Koura | デジタルビデオシステム、ビデオ画像にリンクされた情報の取得方法、双方向視聴システム、双方向視聴装置、デコード装置、伝達媒体ならびに記録媒体。 |
JP2003099453A (ja) | 2001-09-26 | 2003-04-04 | Hitachi Ltd | 情報提供システムおよびプログラム |
US7574465B2 (en) * | 2005-04-15 | 2009-08-11 | Microsoft Corporation | Displaying variables stored in calculators |
-
2005
- 2005-07-06 JP JP2005198173A patent/JP2007019769A/ja active Pending
-
2006
- 2006-06-28 US US11/427,146 patent/US8013833B2/en not_active Expired - Fee Related
- 2006-07-06 CN CNB2006101031619A patent/CN100437453C/zh not_active Expired - Fee Related
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102057350A (zh) * | 2009-02-17 | 2011-05-11 | 松下电器产业株式会社 | 对象选择装置、对象选择程序、用于对象选择装置的集成电路以及对象选择方法 |
CN102055861A (zh) * | 2009-10-30 | 2011-05-11 | 沈斌 | 一种实物的图片网络展示方法 |
CN102214067A (zh) * | 2010-04-09 | 2011-10-12 | 索尼计算机娱乐公司 | 信息处理装置 |
CN102214067B (zh) * | 2010-04-09 | 2014-05-14 | 索尼计算机娱乐公司 | 信息处理装置 |
CN103403657A (zh) * | 2011-03-15 | 2013-11-20 | 喀普康有限公司 | 计算机装置、控制方法及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
US8013833B2 (en) | 2011-09-06 |
CN100437453C (zh) | 2008-11-26 |
US20070009099A1 (en) | 2007-01-11 |
JP2007019769A (ja) | 2007-01-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN1892564A (zh) | 标签信息显示控制设备及方法、信息处理设备和显示设备 | |
CN1306795C (zh) | 发送设备、接收设备及方法 | |
CN1135488C (zh) | 图像处理设备,图像处理方法 | |
CN1197351C (zh) | 图像合成装置 | |
CN100348023C (zh) | 数据处理设备 | |
CN1192610C (zh) | 记录/回放装置、记录/回放方法和记录媒体 | |
CN1166142C (zh) | 用于媒体数据传输的方法和装置 | |
CN1167265C (zh) | 图像通信系统及其方法 | |
CN1108059C (zh) | 数据变换装置 | |
CN1168010C (zh) | 信息处理设备和方法 | |
CN1126367C (zh) | 活动图象的水印插入装置和水印插入方法 | |
CN1781153A (zh) | 记录介质和方法、再现装置和方法、程序和集成电路 | |
CN1290445A (zh) | 用于媒体数据传输的方法和装置 | |
CN1526115A (zh) | 降低图象处理装置的更新频率的方法和系统 | |
CN1728792A (zh) | 信息处理设备、信息处理方法及其程序 | |
CN1231452A (zh) | 字体共享系统和方法及存储实行该方法的程序的记录媒体 | |
CN1875630A (zh) | 内容分配服务器及内容再现控制终端 | |
CN1816879A (zh) | 视频处理装置、视频处理装置的ic电路、视频处理方法和视频处理程序 | |
CN1717025A (zh) | 信息处理装置,信息处理方法以及信息处理程序 | |
CN1767610A (zh) | 信息处理装置,信息处理方法及其程序 | |
CN1819650A (zh) | 信息处理设备、电子设备、信息处理方法和信息处理媒体 | |
CN101053252A (zh) | 信息信号处理方法和设备以及计算机程序产品 | |
CN1351444A (zh) | 记录和再现设备 | |
CN1894699A (zh) | 内容使用控制设备、记录设备、再现设备、记录介质和内容使用控制方法 | |
CN1934546A (zh) | 记录介质、再生装置、程序、再生方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
C17 | Cessation of patent right | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20081126 Termination date: 20130706 |