CN102866825A - 显示控制装置、显示控制方法和程序 - Google Patents

显示控制装置、显示控制方法和程序 Download PDF

Info

Publication number
CN102866825A
CN102866825A CN2012102003293A CN201210200329A CN102866825A CN 102866825 A CN102866825 A CN 102866825A CN 2012102003293 A CN2012102003293 A CN 2012102003293A CN 201210200329 A CN201210200329 A CN 201210200329A CN 102866825 A CN102866825 A CN 102866825A
Authority
CN
China
Prior art keywords
control unit
real object
program
display control
zone
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2012102003293A
Other languages
English (en)
Inventor
多井坚一郎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN102866825A publication Critical patent/CN102866825A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42224—Touch pad or touch panel provided on the remote control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223—Cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47214—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for content reservation or setting reminders; for requesting event notification, e.g. of sport results or stock market
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/482—End-user interface for program selection
    • H04N21/4821—End-user interface for program selection using a grid, e.g. sorted out by channel and broadcast time

Abstract

提供一种显示控制装置、显示控制方法和程序。该显示控制装置包括将虚拟显示添加到包含与时间关联的区域的真实对象的显示控制单元。显示控制单元可以将虚拟显示添加到该区域。

Description

显示控制装置、显示控制方法和程序
技术领域
本公开涉及一种显示控制装置、显示控制方法和程序。
背景技术
近年来，由于先进的图像识别技术，有可能识别包含在来自成像装置的输入图像中的真实对象（例如，诸如广告牌和建筑物的对象）的位置或姿态。作为该对象识别的应用例子，已知一种增强现实（AR）应用。根据AR应用，与真实对象关联的虚拟对象（例如广告信息、导航信息或用于游戏的信息）可以叠加在包含在真实空间图像中的真实对象上。例如日本专利申请2010-238098号公开了AR应用。
发明内容
如果用户以具有成像功能的移动终端使用AR应用，用户可以通过浏览添加到真实对象的虚拟对象来获得有用信息。然而，如果用户浏览包含区域（例如与时间关联的区域）的真实对象，没有虚拟对象被添加到该区域，因而对用户来说掌握要注意的区域变得困难且降低了便利性。
考虑到以上内容，本公开提出一种能够改进针对用户的便利性的新颖且改进的显示控制装置、显示控制方法和程序。
根据本公开实施例，提供一种包括显示控制单元的显示控制装置，该显示控制单元将虚拟显示添加到包含与时间关联的区域的真实对象。显示控制单元可以将虚拟显示添加到该区域。
根据本公开实施例，提供一种显示控制方法，包括将虚拟显示添加到包含与时间关联的区域的真实对象的区域。
根据本公开的实施例，提供一种程序，该程序使计算机用作显示控制装置，该显示控制装置包括将虚拟显示添加到包含与时间关联的区域的真实对象的显示控制单元。显示控制单元可以将虚拟显示添加到该区域。
如上所述，根据本公开实施例中的显示控制装置、显示控制方法和程序，提高了用户的便利性。
附图说明
图1是示出根据本公开实施例的AR系统的配置的说明图；
图2是示出移动终端的硬件配置的说明图；
图3是示出移动终端的配置的功能框图；
图4是示出区域信息的例子的说明图；
图5是示出配置信息的例子的说明图；
图6是示出识别真实对象的位置和姿态的方法的例子的说明图；
图7是示出虚拟对象的显示例子的说明图；
图8是示出虚拟对象的显示的另一例子的说明图；
图9是示出通过对虚拟对象的用户操作显示的操作屏幕的例子的说明图；
图10是示出通过对虚拟对象的用户操作显示的操作屏幕的另一例子的说明图；
图11是示出通过用户操作显示的操作屏幕的例子的说明图；
图12是示出通过用户操作显示的操作屏幕的另一个例子的说明图；
图13是示出在对真实对象进行成像之前进行的操作的序列图；以及
图14是示出对真实对象进行成像之后的操作的序列图。
具体实施方式
下文中，将参考附图详细描述本公开的优选实施例。注意，在该说明书和附图中，具有基本上相同功能和结构的结构元素标以相同的附图标记，且省略对这些结构元素的重复说明。
此外，在本说明书和附图中，可通过在相同附图标记之后标以不同的字母来区分具有基本上相同功能和结构的多个结构元素。然而，如果不是特别需要区分具有基本上相同功能和结构的多个结构元素中的每个，仅附以相同的附图标记。
在一个实施例中，提供一种显示控制装置，包括：显示控制单元，其将虚拟显示添加到包含与时间关联的区域的真实对象，其中，显示控制单元将虚拟显示添加到区域。
在另一个实施例中，提供一种显示控制方法，包括：将虚拟显示添加到包含与时间关联的区域的真实对象的区域。
在另一个实施例中，一种程序，其使计算机用作这样的显示控制装置，显示控制装置包括：显示控制单元，其将虚拟显示添加到包含与时间关联的区域的真实对象，其中，显示控制单元将虚拟显示添加到区域。
将按照下示项目的顺序来描述“具体实施方式”：
1.AR系统的概览
2.实施例的描述
3.总结
<1.AR系统的概览>
首先，以下参考图1描述根据本公开实施例的AR系统的基本配置。
图1是示出根据本公开实施例的AR系统的配置的说明图。如图1所示，根据本公开实施例的AR系统包含记录装置10和移动终端20。移动终端20捕获真实空间图像，并可将与真实空间图像中包含的真实对象相对应的虚拟对象（下文中也称为“虚拟显示”）添加到真实对象。可以在显示器26中显示虚拟对象。真实对象可以是真实空间图像或真实空间自身。
如果例如真实对象是图1所示的节目表40，则移动终端20可以通过对包含节目表40的真实空间进行成像来将与节目表40相对应的虚拟对象添加到真实对象。虚拟对象可以显示在显示器26中。用户可以通过从视觉上识别这种虚拟对象来掌握从真实空间不可得的信息。
移动终端20还可以根据用户操作控制处理的执行。可以由移动终端20或从移动终端20接收命令的装置（例如记录装置10）执行根据用户操作的处理。如果例如执行指示应该预约节目的记录的用户操作，则移动终端20可以控制节目的记录预约。当执行指示应预约节目的记录的用户操作时，移动终端20将执行节目的记录预约的命令发送到记录装置10，且接收到该命令的记录装置10可以执行节目的记录预约。
当例如通过记录装置10回放记录的节目时，显示装置50可以显示回放的节目。顺便说，对于本公开的实施例，显示装置50不是必需的装置。
在图1中示出了智能电话作为移动终端20的例子，但移动终端20不限于智能电话。例如，移动终端20可以是个人数字助理（PDA）、移动电话、移动音乐播放装置、移动视频处理装置或移动游戏机。此外，移动终端20仅是显示控制装置的例子，且显示控制装置可以是设置在网络侧上的服务器。
在图1中，示出节目表40作为真实对象的例子，然而真实对象不限于节目表40。例如，真实对象可以是像节目表40一样的包含与时间关联的区域的表（例如日历或日程表）。
顺便说，上面的AR应用可以将虚拟对象添加到真实对象。然而，即使在真实对象中包含与时间关联的区域，也难以将虚拟对象添加到该区域。如果虚拟对象被添加到与时间关联的区域，会增加用户便利性。如果例如虚拟对象被添加到节目表40的节目栏，则对用户来说变得更加容易标识应注意的节目。
因此，关注以上情况导致产生本公开的实施例。根据本公开的实施例，可以提高针对用户的移动终端20的便利性。将参考图2描述移动终端20的硬件配置，且然后将详细说明本公开的实施例。
（移动终端的硬件配置）
图2是示出移动终端20的硬件配置的说明图。如图2所示，移动终端20包括中央处理单元（CPU）201、只读存储器（ROM）202、随机存取存储器（RAM）203、输入装置208、输出装置210、存储装置211、驱动器212、成像装置213和通信装置215。
CPU 201用作算术处理单元和控制装置，并根据各种程序控制移动终端20的整体操作。CPU 201还可以是微处理器。ROM 202存储由CPU 201使用的程序和操作参数。RAM 203临时存储CPU 201的执行使用的程序和在其执行期间适当变化的参数。这些元件通过由CPU总线等构成的主机总线互相连接。
输入装置208包括：用户输入信息使用的输入单元，诸如鼠标、键盘、触摸板、按钮、麦克风、开关和控制杆，以及基于用户输入生成输入信号并将输入信号输出到CPU 201的输入控制电路。移动终端20的用户可以将各种数据输入到移动终端20，或通过操作输入单元208指示移动终端20执行处理操作。
输出装置210包括例如显示装置，诸如液晶显示器(LCD)装置、有机发光二极管（OLED）装置和灯。此外，输出装置210包括声音输出装置，诸如扬声器和耳机。例如，显示装置显示被捕获图像或生成的图像。另一方面，声音输出装置将声音数据等转换为声音并输出声音。
存储装置211是作为根据本实施例的移动终端20的存储单元的例子配置的用于数据存储的装置。存储装置211可以包含存储介质、在存储介质中记录数据的记录装置、从存储介质读取数据的读取装置或删除存储介质中记录的数据的删除装置。存储装置211存储CPU 201执行的程序和各种数据。
驱动器212是用于存储介质的读/写器，且其从内部或外部装附到移动终端20。驱动器212读取存储在诸如插入式磁盘、光盘、磁光盘和半导体存储器的可移除存储介质24中的信息，并将该信息输出到RAM 203。驱动器212还可以将数据写入可移除存储介质24中。
成像装置213包括成像光学系统，诸如汇聚光的拍摄镜头、缩放镜头和诸如电荷耦合器件（CCD）和互补金属氧化物半导体（CMOS）的信号转换元件。成像光学系统汇聚从被摄对象发射的光，以在信号转换单元中形成被摄对象图像，且信号转换元件将形成的被摄对象图像转换成电图像信号。
通信装置215例如是要连接到网络的通信设备等配置的网络接口。通信装置215可以是无线局域网（LAN）兼容的通信装置，长期演进（LTE）兼容的通信装置，或通过线路进行通信的有线通信装置。通信装置215可以例如经由网络与记录装置10进行通信。
网络是从连接到网络的装置传输的信息的有线或无线传输路径。网络可以包括例如公共网络，诸如因特网、电话网络、卫星通信网络或各种局域网（LAN）或广域网（WAN）（包括以太网（注册商标））。网络还可以包括租用线路网络，诸如因特网协议-虚拟私人网络（IP-VPN）。
<2.实施例的描述>
在以上，已参考图1和图2描述了根据本公开实施例的AR系统的基本配置。以下将参考图3至图14详细描述根据本公开的实施例。
(移动终端的配置)
图3是示出根据本实施例的移动终端20的配置的功能框图。如图3所示，根据本实施例的移动终端20包括显示器26、触摸板27、成像装置213、识别字典接收单元220、识别字典存储单元222、状态信息接收单元224和区域信息接收单元226。根据本实施例的移动终端20还包括配置信息生成单元228、配置信息存储单元230、识别单元232、区域确定单元234、显示控制单元236、操作检测单元240、执行控制单元244和命令发送单元248。
显示器26是由LCD、OLED等构成的显示模块。显示器26根据显示控制单元236的控制显示各种屏幕。例如，显示器26可以显示添加到真实对象的虚拟对象。如果真实对象是真实空间图像（真实空间静止图像或真实空间运动图像），则也可以显示真实空间图像。真实空间图像可以是当前成像的空间的图像或过去成像的真实空间的图像。
图3示出了显示器26被实施为移动终端20的一部分的例子，然而可以与移动终端20分离地配置显示器26。显示器26还可以是安装在用户头部的头部安装显示器（HMD）。
触摸板27可以层压在显示器26中或设置在远离显示器26的地方。触摸板27可以检测诸如用户手指和触摸笔的操作体的邻近或接触。将触摸板27检测的操作体的邻近或接触作为用户操作通知给操作检测单元240。顺便说，触摸板27可以包含其它操作部件，诸如移动终端20的键盘和按钮。
成像装置213包括成像光学系统和信号转换元件，并通过对真实空间成像来获取被捕获图像（运动图像或静止图像）。成像装置213可以分离地包括运动图像捕获部件和静止图像捕获部件。
识别字典接收单元220从识别字典服务器70接收用于识别真实对象的识别字典。识别字典接收单元220经由网络从例如识别字典服务器70接收识别字典。此处使用的网络可以是与记录装置10连接到的网络相同的网络或不同的网络。更具体地，用于标识每个真实对象的标识信息和每个真实对象的特征量数据在识别字典中关联。特征量数据可以是例如根据SIFT方法或随机蕨方法（Random Ferns method）基于真实对象的学习图像确定的一组特征量。
识别字典存储单元222存储识别字典。识别字典存储单元222可以存储例如由识别字典接收单元220接收的识别字典。然而，存储在识别字典存储单元222中的识别字典不限于由识别字典接收单元220接收的识别字典。例如，识别字典存储单元222可以存储从存储介质读取的识别字典。
状态信息接收单元224从记录装置10接收状态信息。状态信息是指示节目的状态的信息且由例如节目的记录预约状态（例如被预约、被记录、未预约等）指示。记录装置10包括状态信息存储单元110、状态信息发送单元120、命令接收单元130和命令执行单元140。状态信息存储单元110存储状态信息，且状态信息发送单元120经由网络将存储在状态信息存储单元110中的状态信息发送到移动终端20。稍后描述命令接收单元130和命令执行单元140。
区域信息接收单元226从区域信息服务器80接收区域信息。区域信息接收单元226例如经由网络从区域信息服务器80接收区域信息。此处使用的网络可以是与记录装置10连接到的网络相同的网络或不同的网络。此处使用的网络还可以是与识别字典服务器70连接到的网络相同的网络或不同的网络。
将参考图4描述区域信息的例子。图4是示出区域信息的例子的说明图。区域信息是指示真实对象中包含的区域的位置和尺寸的信息。当例如作为参考设置了真实对象的规定点的位置时，可以通过区域的规定点的位置表示该区域的位置。
在图4所示的例子中，真实对象的左上角被设为真实对象的规定点，然而真实对象的规定点不需要是真实对象的左上角。同样在图4所示的例子中，区域的左上角被设为区域的规定点，然而区域的规定点不需要是区域的左上角。此外在图4所示的例子中，真实对象的规定点的位置被表示为（0.0），区域的规定点的位置被表示为（X1.Y1），且区域的尺寸被表示为（W1，H1），然而表示的形式不受具体限制。例如，这些值（X1，Y1，W1，H1）可以以绝对单位（例如与真实对象的实际尺寸相同的单位）来表示或以相对单位（例如当真实对象的水平尺寸或垂直尺寸被设为1时的相对值）来表示。
配置信息生成单元228基于由状态信息接收单元224接收的状态信息和由区域信息接收单元226接收的区域信息生成配置信息。将参考图5描述配置信息的例子。图5是示出区域信息的例子的说明图。例如，如果在由状态信息接收单元224接收的状态信息和由区域信息接收单元226接收的区域信息之间存在相关联的信息，则配置信息生成单元228可以通过使关联信息相关联来生成配置信息。
如果例如节目信息（例如节目的广播小时和节目的频道）被加到由状态信息接收单元224接收的状态信息，且节目信息被加到由区域信息接收单元226接收的区域信息，则将相同的节目信息被添加到的状态信息和区域信息确定为相关联，且通过使该状态信息和区域信息相关联来生成配置信息。如图5所示，除了节目的广播小时和节目的频道之外，节目信息可以包含节目标题。除了节目信息之外，可以使用诸如G码的标识节目的信息。
将返回图3继续描述。配置信息存储单元230存储配置信息。例如，配置信息存储单元230可以存储由配置信息生成单元228生成的配置信息。然而，存储在配置信息存储单元230中的配置信息不限于由配置信息生成单元228生成的配置信息。例如，配置信息存储单元230可以存储从存储介质读取的配置信息。作为替代，配置信息存储单元230还可以存储从预定服务器接收的配置信息。
识别单元232识别由成像装置213捕获的真实空间图像中包含的真实对象，以及真实对象的真实空间图像中的位置和姿态。例如，识别单元232通过针对识别字典存储单元222中包含的每个真实对象的特征量检查从真实空间图像中确定的特征量来识别真实空间图像中包含的真实对象。
更具体地，识别单元232根据特征量确定方法（诸如SIFT方法或随机蕨方法）确定真实空间图像中的真实对象的特征量，并针对识别字典存储单元222中包含的每个真实对象的特征量检查确定的特征量。然后，识别单元232识别与真实空间图像中的真实对象的特征量最匹配的特征量相关联的真实对象的标识信息，以及真实空间图像中的位置和姿态。
顺便说，真实对象的识别不限于这种例子。例如，识别单元232可以通过识别诸如人工标记（例如条形码或QR码）的已知图形或符号或标记或与真实对象相关联的自然标记来间接地识别真实对象。识别单元232还可以识别诸如已知图形或符号或人工标记或自然标记的真实对象来从真实空间图像中真实对象的尺寸和形状估计真实对象的位置和姿态。
以上描述了通过图像处理识别真实空间图像中包含的真实对象的位置和姿态的例子，然而识别真实对象的位置和姿态的方法不限于图像处理。例如，可以基于对成像装置213所指向的方向和移动终端20的当前位置的检测结果来估计真实空间图像中包含的真实对象以及真实空间图像中的真实对象的位置和姿态。
可替代地，识别单元232可以根据针孔相机模型识别真实对象的位置和姿态。针孔相机模型与OpenGL的透视方法（透视图）的投影变换相同，且由透视方法产生的观察点模型CG可以与针孔相机模型相同。
图6是示出识别真实对象的位置和姿态的方法的例子的说明图和示出特别地根据针孔相机模型识别真实对象的位置和姿态的方法的图。以下将描述根据针孔相机模型识别真实对象的位置和姿态的方法。
在针孔相机模型中，可以通过以下等式（1）计算图像帧中特征点的位置：
[数学式1]
&lambda; m ~ = AR w ( M - C w ) &CenterDot; &CenterDot; &CenterDot; &CenterDot; &CenterDot; &CenterDot; ( 1 )
公式（1）是示出被捕获图像平面中包含的对象的点（m）的被捕获图像平面中的像素位置（即通过照相机坐标系表示的位置）和世界坐标系中的对象的三维位置（M）之间的对应关系的公式。被捕获图像平面中的像素位置由照相机坐标系来表示。照相机坐标系是通过将照相机（成像装置213）的焦点设为原点C将被捕获图像平面表示为Xc、Yc的二维平面且将深度表示为Zc的坐标系，且原点C依据照相机的移动而移动。
另一方面，对象的三维位置（M）由具有原点O的三个轴XYZ形成的世界坐标系来表示，原点O不依据照相机的移动而移动。示出对象在这些不同的坐标系中的位置的对应关系的公式被限定为上面的针孔相机模型。
公式中包含的每个值的含义：
λ：归一化参数
A：照相机内部参数
Cw：照相机位置
Rw：照相机旋转矩阵
此外，如图6中所示，
[数学式2]
m ~ = m u m v 1 &CenterDot; &CenterDot; &CenterDot; &CenterDot; &CenterDot; &CenterDot; ( 2 )
是由照相机坐标系表示的被捕获图像平面中的位置。λ是归一化参数且是满足数学式3的第三项的值：
[数学式3]
m ~ &CenterDot; &CenterDot; &CenterDot; &CenterDot; &CenterDot; &CenterDot; ( 3 )
照相机内部参数A包含以下示出的值：
f：焦距
θ：图像轴的正交性（理想是90°）
ku：垂直轴的标度（scale）（从三维位置的标度到二维图像的标度的转换）
kv：水平轴的标度（从三维位置的标度到二维图像的标度的转换）（u0，v0）：图像中心位置
因而，世界坐标系中存在的特征点由位置[M]表示。照相机由位置[Cw]和姿态（旋转矩阵）Rw表示。照相机的焦点位置、图像中心等由照相机内部参数[A]表示。位置[M]、位置[Cw]和照相机内部参数[A]可以由以下公式（4）-（6）来表示。
[数学式4]
M = M x M y M z
[数学式5]
C w = C x C y C z &CenterDot; &CenterDot; &CenterDot; &CenterDot; &CenterDot; &CenterDot; ( 5 )
[数学式6]
A = - f &CenterDot; k u f &CenterDot; k u &CenterDot; cot &theta; u 0 0 - f &CenterDot; k v sin &theta; v 0 0 0 1 &CenterDot; &CenterDot; &CenterDot; &CenterDot; &CenterDot; &CenterDot; ( 6 )
根据这些参数，从“世界坐标系中存在的特征点”到“被捕获图像平面”投影的每个位置都可以由以上公式（1）表示。识别单元232可以通过应用例如以下文献中描述的基于RANSAC的3点算法来计算照相机的位置[Cw]和姿态（旋转矩阵）Rw：
M.A.Fischler和R.C.Bolles，“Random sample consensus:Aparadigm for model fitting with applications to image analysis andautomated cartography”,Communications of the ACM,24卷第6期（1981）。
如果移动终端20装备有能够测量照相机的位置和姿态的传感器，或能够测量照相机的位置和姿态的变化的传感器，则识别单元232可以基于由传感器检测的值获取照相机的位置[Cw]和姿态（旋转矩阵）Rw。
通过应用该方法，识别了真实对象。如果通过识别单元232识别真实对象，则显示控制单元236可以将指示识别了真实对象的显示添加到真实对象。如果用户看到该显示，则用户可以理解通过移动终端20识别了真实对象。指示真实对象被识别的显示不受特别限制。例如，如果程序表40被识别单元232识别为真实对象，则指示真实对象被识别的显示可以是包围程序表40的框（例如绿框）或以透明色填充程序表40的显示。
如果没有真实对象被识别单元232识别，则显示控制单元236可以控制显示器26使得显示指示没有真实对象被识别的显示。如果用户看到该显示，则用户可以理解没有真实对象被移动终端20识别。指示没有真实对象被识别的显示不受特别限制。例如，指示没有真实对象被识别的显示可以是“？”标记。显示控制单元236还可以控制显示器26，使得挨着“？”标记显示没有被识别的对象的缩小的图像。
还可以假定没有通过识别单元232唯一地识别真实对象的情况。在这种情况下，显示控制单元236可以使显示器26显示识别单元232识别的多个真实对象作为候选。然后，如果用户从显示器26显示的多个真实对象中找到期望的真实对象，则用户可以将选择期望对象的操作输入到触摸板27。识别单元232可以基于操作检测单元240检测的操作识别真实对象。
返回图3继续进行说明。区域确定单元234确定被捕获图像中的真实对象中包含的区域。区别确定单元234基于例如存储在配置信息存储单元230中的配置信息确定区域。例如，区域确定单元234可以确定由配置信息中包含的区域信息指示的区域作为真实对象中包含的区域。区域确定单元234还可以基于由识别单元232识别的真实对象的位置和姿态以及配置信息中包含的区域信息来确定区域。
显示控制单元236将虚拟对象添加到包含与时间关联的区域（例如播放小时）的真实对象。显示控制单元236可以将虚拟对象添加到例如真实对象中包含的区域。真实对象中包含的区域可以由区域确定单元234确定。如果例如对每个真实对象存储虚拟对象，则显示控制单元236可以将与真实对象相对应的虚拟对象添加到区域。
操作检测单元240检测来自用户的操作。操作检测单元240可以检测例如到触摸面板27的用户操作输入。然而，还可以通过触摸面板27之外的输入装置接收用户操作的输入。例如，输入装置可以是鼠标、键盘、触摸板、按钮、麦克风、开关或控制杆。
执行控制单元244根据用户操作控制处理的执行。如果例如通过操作检测单元240检测到在虚拟对象上的用户操作，则执行控制单元244控制与虚拟对象对应的处理的执行。该处理可以通过移动终端20或移动终端20之外的装置（例如记录装置10）来执行。
当使记录装置执行处理时，通过移动终端20的命令发送单元240将指示执行处理的命令发送到记录装置10，且通过记录装置10的命令接收单元130接收命令。当通过命令接收单元130接收命令时，记录装置10的命令执行单元140执行通过接收的命令指示的处理。作为由记录装置10执行的处理，可以采用记录的节目的播放或删除、节目的记录预约和节目的取消预约。
将参考图7描述虚拟对象的显示例子。图7是示出虚拟对象的显示例子的说明图。如果如图7所示真实对象是节目表40，则多个区域中的每个与播放小时和频道相关联，且例如显示控制单元236可以将虚拟对象V21、V23、V24添加到真实对象的每个区域。在图7所示的例子中，添加以透明色填充整个区域的虚拟对象。
然而，显示控制单元236不需要将虚拟对象添加到真实对象的整个区域。例如，显示控制单元236可以将虚拟对象添加到真实对象的一部分或将虚拟对象添加到从区域延伸的引导线的顶部。
显示控制单元236可以将同一虚拟对象添加到每个区域，然而还可以将根据节目上所存储信息的虚拟对象添加到与节目相对应的区域。在图7所示的例子中，显示控制单元236将与“被记录”相对应的虚拟对象V11、V12添加到与状态信息是“被记录”的节目相对应的区域。显示控制单元236还将与“未预约”相对应的虚拟对象V13添加到与状态信息“未预约”的节目相对应的区域。显示控制单元236还将与“已预约”相对应的虚拟对象V14添加到与状态信息是“已预约”的节目相对应的区域。
通过例如移动终端20的存储单元来存储由显示控制单元236添加的虚拟对象。如果对每个类型的状态信息存储虚拟对象，则与状态信息相关的显示控制单元236虚拟对象可以被添加到区域。虚拟对象可以是文本形式或图像形式。
在图7所示的例子中，虚拟对象V11由字符“回放”表示，然而可以由“回放”的缩略字符（例如“P”）来表示。虚拟对象V11还可以由指示回放的符号表示。相似地，虚拟对象V12由字符“删除”表示，然而可以由“删除”的缩略字符（例如“D”）来表示。虚拟对象V12还可以由指示删除的符号表示。
类似地，虚拟对象V13由字符“预约以记录”来表示，但是也可以由“预约以记录”的缩略语（例如“R”）来表示。虚拟对象V13还可以由指示记录预约的符号来表示。类似地，虚拟对象V14由字符“取消预约”表示，然而也可以由“取消预约”的缩略字符（例如“C”）来表示。虚拟对象V14还可以由指示取消预约的符号表示。
此外，如图7所示，显示控制单元236可以将当前时间添加到真实对象。例如，移动终端20可以从安装在移动终端20内部或外部的时钟获取当前时间，以将获取的当前时间添加到真实对象。此外，如图7所示，线可以被添加到与真实对象中的当前时间相对应的位置。如果添加了这种信息，则可以容易地识别广播将开始的节目、广播已开始的节目和广播已结束的节目。
在图7所示的例子中，例如，如果通过操作检测单元240检测到对虚拟对象V11的用户操作，则执行控制单元244控制节目的“回放”的执行。如果通过操作检测单元240检测到对虚拟对象V12的用户操作，则执行控制单元244控制节目的“删除”的执行。如果通过操作检测单元240检测到对虚拟对象V13的用户操作，则执行控制单元244控制节目的“记录预约”的执行。如果通过操作检测单元240检测到对虚拟对象V14的用户操作，则执行控制单元244控制节目的“取消预约”的执行。
参考图8描述虚拟对象的显示的另一个例子。图8是示出虚拟对象的显示的另一个例子的说明图。在图8所示的例子中，显示控制单元236将虚拟对象作为与节目相对应的区域的例子添加到节目表40的左边缘中的栏。
显示控制单元236将从节目标题（例如“Ohisama”“我发现了”等）和“已记录”的组合形成的虚拟对象V111、V112添加到与状态信息是“已记录”的节目相对应的区域。显示控制单元236还将从节目标题（例如“歌唱者”等）和“未预约”的组合形成的虚拟对象V141添加到与状态信息为“未预约”的节目相对应的区域。显示控制单元236还将从节目标题（例如“历史”等）和“已预约”的组合形成的虚拟对象V131添加到与状态信息是“已预约”的节目相对应的区域。
将参考图9描述通过对虚拟对象的用户操作显示的操作屏幕的例子。图9是示出通过对虚拟对象的用户操作显示的操作屏幕的例子的说明图。在图9所示的例子中，显示控制单元236没有添加用于对真实对象执行用户操作的虚拟对象。
在图9所示的例子中，替代地，如果由操作检测单元240检测到对虚拟对象V23（添加到与节目标题为“我发现了”的节目相对应的区域的虚拟对象）的用户操作，则显示控制单元236可以实施控制使得显示针对节目的操作屏幕。显示控制单元236可以包含根据操作屏幕中节目的状态信息控制处理的执行的按钮。如果例如节目的状态信息是“已记录”，则显示控制单元236可以包含如图9所示的操作屏幕中的按钮B1、B2和B3。
如果例如由操作检测单元240检测到按钮B1上的用户操作，则执行控制单元244控制节目的“回放”的执行。如果由操作检测单元240检测到按钮B2上的用户操作，则执行控制单元244控制节目的“删除”的执行。如果由操作检测单元240检测到按钮B3上的用户操作，则执行控制单元244实施控制使得返回真实对象的显示。
随后，参考图10描述通过对虚拟对象的用户操作显示的操作屏幕的另一例子。图10是示出通过对虚拟对象的用户操作显示的操作屏幕的另一例子的说明图。在图10所示的例子中，如图9所示的例子一样，显示控制单元236没有将执行用户操作的虚拟对象添加到真实对象。
此外，在图10的例子中，如图9所示的例子一样，如果由操作检测单元240检测到对虚拟对象V23的用户操作，则显示控制单元236可以实施控制，使得显示针对节目的操作屏幕。如果如图9所示的例子那样节目的状态信息是例如“已记录”，则显示控制单元236可以如图10所示包含操作屏幕中的按钮B1、B2和B3。另外，显示控制单元236可以包含操作屏幕中的按钮B11、B12、B13等。
随后，参考图11描述通过用户操作显示的操作屏幕的例子。图11是示出通过用户操作显示的操作屏幕的例子的说明图。在图11所示的例子中，如果由操作检测单元240检测到对其没有添加虚拟对象的区域（与节目标题是“歌唱者”的节目相对应的区域）上的用户操作，则显示控制单元236可以实施控制，使得显示针对节目的操作屏幕。显示控制单元236可以在操作屏幕中包含根据节目的状态信息控制处理的执行的按钮。如果节目的状态信息是“未预约”，则显示控制单元236可以包含如图11所示的操作屏幕中的按钮B4、B3。
如果例如由操作检测单元240检测到对按钮B4的用户操作，则执行控制单元244控制节目的“记录预约”的执行。如果由操作检测单元240检测到对按钮B3的用户操作，则执行控制单元244执行控制，使得返回真实对象的显示。
随后，参考图12描述通过用户操作显示的操作屏幕的另一个例子。图12是示出通过用户操作显示的操作屏幕的另一个例子的说明图。在图12所示的例子中，如图11所示的例子一样，如果由操作检测单元240检测到对其没有添加虚拟对象的区域（与节目标题是“歌唱者”的节目相对应的区域）上的用户操作，则显示控制单元236可以执行控制，使得显示针对节目的操作屏幕。
此外，在图12所示的例子中，如图11所示的例子一样，如果由操作检测单元240检测到没有添加虚拟对象的区域上的用户操作，则显示控制单元236可以实施控制，使得显示针对节目的操作屏幕。如果如图11所示的例子一样节目的状态信息是“已记录”，则显示控制单元236可以包含如图11所示的操作屏幕中的按钮B4、B3。另外，显示控制单元236可以包含操作屏幕中的按钮B11、B12、B13等。
当如上所述用户浏览包含区域（例如与时间关联的区域）的真实对象时，根据本实施例的移动终端20使虚拟对象被添加到该区域。因而，用户可以掌握值得注意的区域，且提高了针对用户的便利性。
（移动终端的操作）
随后，参考图13和图14描述根据本实施例的移动终端20的操作。图13是示出真实对象被成像之前执行的操作的序列图。
在真实对象被成像之前的阶段中，如图13所示，识别字典服务器70发送识别字典（S11）。识别字典接收单元220接收从识别字典服务器70发送的识别字典（S12）且识别字典存储单元222存储由识别字典接收单元220接收的识别字典（S13）。
在S11至S13之后或在S11至S13之前，区域信息服务器80将区域信息发送到移动终端20（S21）。接着，区域信息接收单元226接收从区域信息服务器80发送的区域信息（S22）。在S21和S22之后或在S21和S22之前，记录装置10发送状态信息（S23）。接着，状态信息接收单元224接收从记录装置10发送的状态信息（S24）。配置信息生成单元228基于区域信息和状态信息生成配置信息（S25），且配置信息存储单元230存储由配置信息生成单元228生成的配置信息（S26）。
图14是示出真实对象被成像之后的操作的序列图。在真实对象被成像之后，如图14所示，成像装置213首先对真实对象进行成像（S31）。接着，识别单元232从被捕获图像识别真实对象（S32）且区域确定单元234基于识别单元232的识别结果和配置信息确定真实对象的区域（S33）。显示控制单元236将虚拟显示添加到由区域确定单元234确定的真实对象（S34）。
如果没有由操作检测单元240检测到对虚拟显示的用户操作（S35中为“否”），则执行控制单元244实施控制，使得重复S35中的操作。如果由操作检测单元240检测到对虚拟显示的用户操作（S35中为“是”），则命令发送单元248在执行控制单元244的控制下将与虚拟显示相对应的命令发送到记录装置10（S36）。当记录装置10的命令接收单元130从移动终端20接收命令时（S41），命令执行单元140执行由命令接收单元130接收的命令（S42）。
<3.结论>
如上所述，当用户浏览包含区域（例如与时间相关联的区域）的真实对象时，根据本公开实施例的移动终端20使虚拟对象被添加到区域。因而，用户可以掌握值得注意的区域，且提高了针对用户的便利性。根据本公开实施例中的移动终端20，用户可以通过直观操作快速访问期望的信息。
本领域技术人员应理解取决于设计需求和其它因素可以出现各种修改、组合、子组合和改变，只要其落入权利要求或其等同物的范围内。
例如，以上主要描述了作为由移动终端20拥有的例子的识别真实对象的功能、生成配置信息的功能和确定区域的功能，然而可以替代地该功能可以由服务器拥有。如果例如移动终端20将被捕获图像发送到服务器，代替移动终端20，服务器可以从被捕获图像识别真实对象。此外，代替移动终端20，例如，服务器可以生成配置信息。此外，代替移动终端20，例如，服务器可以确定区域。因此，根据本公开实施例的技术可以应用于云计算。
例如，以上已作为用作转换到静止图像操作模式的触发的用户操作的检测例子描述了由触摸面板27检测的对触摸面板27的操作所检测的移动终端20的移动，然而用户操作不限于该例子。运动传感器的检测和用户的姿态识别可以引用为用户操作的其它检测例子。可以基于成像装置213获取的图像或基于另一成像系统获取的图像识别用户的姿态。成像装置213或其它成像系统可以通过红外照相机、深度照相机等的功能来对用户的姿态进行成像。
在以上实施例中，主要描述了显示控制装置是移动终端20的例子，然而显示控制装置可以是如电视机的装置或相对来说比移动终端20大的显示装置。例如，通过连接或包含从显示控制装置内部对用户成像的成像装置且使用能够显示用户的整个身体的大型显示器，可以将如显示用户的镜这样的功能配置成实现AR应用诸如将虚拟对象叠加到用户上以允许操作虚拟对象。
以上主要描述了通过记录装置10执行来自移动终端20的命令的例子，然而代替记录装置10，可以使用能够执行命令的装置。例如，代替记录装置10，可以使用家用电器（例如成像装置、视频回放装置等）。在这种情况下，命令可以是允许显示内容数据（诸如静止图像、运动图像等）的命令或使内容数据被删除的命令。
以上主要描述了节目表40用作真实对象的例子，然而代替节目表40，可以使用日历、日程表等作为真实对象。日程表可以是公司中使用的出席管理表或雇员日程管理表。
以上主要描述了检测到对虚拟对象的用户操作时移动终端20向记录装置10发送命令的例子，然而命令还可以被发送到显示装置50。在这种情况下，要发送的命令可以是改变到与执行了用户操作的虚拟对象相对应的频道。
移动终端20或记录装置10中的操作的每个步骤在此不需要一定按描述为序列图的时间顺序来处理。例如，移动终端20或记录装置10的操作中的每个步骤可以按照与序列图描述的顺序不同的顺序或并行地处理。
可以产生使包含在移动终端20或记录装置10中的如CPU、ROM和RAM的硬件展现与移动终端20或记录装置10的各部件的功能等同的功能的计算机程序。此外，可以提供使其存储计算机程序的存储介质。
另外，本技术还可以如下配置。
（1）一种显示控制装置，包括：
显示控制单元，其将虚拟显示添加到包含与时间关联的区域的真实对象，
其中，显示控制单元将虚拟显示添加到所述区域。
（2）根据（1）所述的显示控制装置，其中，
真实对象是包含与播放小时和频道相关联的多个区域的节目表。
（3）根据（1）或（2）所述的显示控制装置，其中，
显示控制单元将根据关于节目存储的信息的虚拟显示添加到与节目相对应的区域。
（4）根据（1）-（3）中的任一项所述的显示控制装置，其中，
当关于节目存储的信息指示节目已被记录时，显示控制单元添加用于控制已记录节目的回放的虚拟显示。
（5）根据（1）-（3）中的任一项所述的显示控制装置，其中，
当关于节目存储的信息指示节目已被记录时，显示控制单元添加用于控制已记录节目的删除的虚拟显示。
（6）根据（1）-（3）中的任一项所述的显示控制装置，其中，
当关于节目存储的信息指示节目未预约时，显示控制单元添加用于控制节目的记录预约的虚拟对象。
（7）根据（1）-（3）中的任一项所述的显示控制装置，其中，
当关于节目存储的信息指示节目被预约时，显示控制单元添加用于控制节目的取消预约的虚拟显示。
（8）根据（1）-（7）中的任一项所述的显示控制装置，还包括：
操作检测单元，其检测对虚拟显示的用户操作；以及
执行控制单元，其根据用户操作控制处理的执行。
（9）根据（8）所述的显示控制装置，其中，
执行控制单元还包括：在由操作检测单元检测到对虚拟显示的用户操作时，控制与虚拟显示相对应的处理的执行。
（10）根据（1）-（9）中的任一项所述的显示控制装置，还包括：
识别单元，其从真实对象的被捕获图像中识别真实对象；以及
区域确定单元，其确定被捕获图像中的区域。
（11）一种显示控制方法，包括：将虚拟显示添加到包含与时间关联的区域的真实对象的区域。
（12）一种程序，使计算机用作这样的显示控制装置，显示控制装置包括：
显示控制单元，其将虚拟显示添加到包含与时间关联的区域的真实对象，
其中，显示控制单元将虚拟显示添加到区域。
本公开包含与2011年6月21日提交日本专利局的日本优先权专利申请JP 2011-137181中公开的主题内容有关的主题内容，其全部内容通过引用结合于此。

Claims (13)

1.一种显示控制装置，包括：
显示控制单元，其将虚拟显示添加到包含与时间关联的区域的真实对象，
其中，所述显示控制单元将所述虚拟显示添加到所述区域。
2.根据权利要求1所述的显示控制装置，其中，
所述真实对象是包含与播放小时和频道相关联的多个区域的节目表。
3.根据权利要求2所述的显示控制装置，其中，
所述显示控制单元将根据关于节目存储的信息的虚拟显示添加到与所述节目相对应的所述区域。
4.根据权利要求3所述的显示控制装置，其中，
当关于所述节目存储的信息指示所述节目已被记录时，所述显示控制单元添加用于控制已记录节目的回放的所述虚拟显示。
5.根据权利要求3所述的显示控制装置，其中，
当关于所述节目存储的信息指示所述节目已被记录时，所述显示控制单元添加用于控制已记录节目的删除的所述虚拟显示。
6.根据权利要求3所述的显示控制装置，其中，
当关于所述节目存储的信息指示所述节目未预约时，所述显示控制单元添加用于控制所述节目的记录预约的所述虚拟对象。
7.根据权利要求3所述的显示控制装置，其中，
当关于所述节目存储的信息指示所述节目被预约时，所述显示控制单元添加用于控制所述节目的取消预约的所述虚拟显示。
8.根据权利要求1所述的显示控制装置，还包括：
操作检测单元，其检测对所述虚拟显示的用户操作；以及
执行控制单元，其根据所述用户操作控制处理的执行。
9.根据权利要求8所述的显示控制装置，其中，
所述执行控制单元还包括：在由所述操作检测单元检测到对所述虚拟显示的用户操作时，控制与所述虚拟显示相对应的处理的执行。
10.根据权利要求1所述的显示控制装置，还包括：
识别单元，其从所述真实对象的被捕获图像中识别所述真实对象；以及
区域确定单元，其确定所述被捕获图像中的所述区域。
11.根据权利要求10所述的显示控制装置，其中，
所述识别单元通过针对预先设置的识别字典中包含的每个真实对象的特征量检查从被捕获图像中确定的特征量来识别所述真实对象。
12.一种显示控制方法，包括：将虚拟显示添加到包含与时间关联的区域的真实对象的区域。
13.一种程序，使计算机用作这样的显示控制装置，所述显示控制装置包括：
显示控制单元，其将虚拟显示添加到包含与时间关联的区域的真实对象，
其中，所述显示控制单元将所述虚拟显示添加到所述区域。
CN2012102003293A 2011-06-21 2012-06-14 显示控制装置、显示控制方法和程序 Pending CN102866825A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2011137181A JP2013004001A (ja) 2011-06-21 2011-06-21 表示制御装置、表示制御方法、およびプログラム
JP2011-137181 2011-06-21

Publications (1)

Publication Number Publication Date
CN102866825A true CN102866825A (zh) 2013-01-09

Family

ID=47361428

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2012102003293A Pending CN102866825A (zh) 2011-06-21 2012-06-14 显示控制装置、显示控制方法和程序

Country Status (3)

Country Link
US (1) US20120327118A1 (zh)
JP (1) JP2013004001A (zh)
CN (1) CN102866825A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106997240A (zh) * 2015-10-29 2017-08-01 爱色丽瑞士有限公司 可视化装置
CN110262706A (zh) * 2013-03-29 2019-09-20 索尼公司 信息处理设备、信息处理方法及记录介质

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111033605A (zh) * 2017-05-05 2020-04-17 犹尼蒂知识产权有限公司 混合现实环境中的情境应用
CN108279859B (zh) * 2018-01-29 2021-06-22 深圳市洲明科技股份有限公司 一种大屏幕显示墙的控制系统及其控制方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090119716A1 (en) * 2003-01-30 2009-05-07 United Video Properties, Inc. Interactive television systems with digital video recording and adjustable reminders
CN101561989A (zh) * 2009-05-20 2009-10-21 北京水晶石数字科技有限公司 一种全景图展示方法
US20110138416A1 (en) * 2009-12-04 2011-06-09 Lg Electronics Inc. Augmented remote controller and method for operating the same

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8316450B2 (en) * 2000-10-10 2012-11-20 Addn Click, Inc. System for inserting/overlaying markers, data packets and objects relative to viewable content and enabling live social networking, N-dimensional virtual environments and/or other value derivable from the content
US7325244B2 (en) * 2001-09-20 2008-01-29 Keen Personal Media, Inc. Displaying a program guide responsive to electronic program guide data and program recording indicators
US8763038B2 (en) * 2009-01-26 2014-06-24 Sony Corporation Capture of stylized TV table data via OCR
US8427424B2 (en) * 2008-09-30 2013-04-23 Microsoft Corporation Using physical objects in conjunction with an interactive surface
US9788043B2 (en) * 2008-11-07 2017-10-10 Digimarc Corporation Content interaction methods and systems employing portable devices

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090119716A1 (en) * 2003-01-30 2009-05-07 United Video Properties, Inc. Interactive television systems with digital video recording and adjustable reminders
CN101561989A (zh) * 2009-05-20 2009-10-21 北京水晶石数字科技有限公司 一种全景图展示方法
US20110138416A1 (en) * 2009-12-04 2011-06-09 Lg Electronics Inc. Augmented remote controller and method for operating the same

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110262706A (zh) * 2013-03-29 2019-09-20 索尼公司 信息处理设备、信息处理方法及记录介质
CN110262706B (zh) * 2013-03-29 2023-03-10 索尼公司 信息处理设备、信息处理方法及记录介质
CN106997240A (zh) * 2015-10-29 2017-08-01 爱色丽瑞士有限公司 可视化装置
CN106997240B (zh) * 2015-10-29 2020-06-09 爱色丽瑞士有限公司 可视化装置

Also Published As

Publication number Publication date
JP2013004001A (ja) 2013-01-07
US20120327118A1 (en) 2012-12-27

Similar Documents

Publication Publication Date Title
CN102737228B (zh) 显示控制设备、显示控制方法和程序
CN102884537B (zh) 用于设备定位和通信的方法
EP3410436A1 (en) Portable electronic device and method for controlling the same
US20190333478A1 (en) Adaptive fiducials for image match recognition and tracking
CN104077024A (zh) 信息处理设备、信息处理方法及记录介质
US20120081529A1 (en) Method of generating and reproducing moving image data by using augmented reality and photographing apparatus using the same
JP5948842B2 (ja) 情報処理装置、情報処理方法およびプログラム
EP2405349A1 (en) Apparatus and method for providing augmented reality through generation of a virtual marker
CN105245771A (zh) 移动相机系统
CN106462321A (zh) 用于视频系统的应用程序菜单
CN103189864A (zh) 用于确定个人的共享好友的方法、设备和计算机程序产品
CN105488145B (zh) 网页内容的显示方法、装置及终端
KR20180133743A (ko) 이동 단말기 및 그 제어 방법
KR20170042162A (ko) 이동 단말기 및 이의 제어방법
KR20180020452A (ko) 단말기 및 그 제어 방법
CN112230914A (zh) 小程序的制作方法、装置、终端及存储介质
CN102866825A (zh) 显示控制装置、显示控制方法和程序
KR101747299B1 (ko) 데이터 객체 디스플레이 방법 및 장치와 컴퓨터로 읽을 수 있는 저장 매체
US20160210271A1 (en) Information processing terminal and information processing method
JP2011060254A (ja) 拡張現実システム、拡張現実装置および仮想オブジェクト表示方法
CN105683959A (zh) 信息处理设备、信息处理方法及信息处理系统
US10489491B2 (en) Information processing device and information processing method for presenting a plurality of pieces of link information to a user
Ariffin et al. Enhancing tourism experiences via mobile augmented reality by superimposing virtual information on artefacts
KR20160116752A (ko) 이동단말기 및 그 제어방법
CN112130744B (zh) 用于智能设备的内容输入方法和内容输入装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20130109