CN102710736A - 头戴型显示装置和客户端装置 - Google Patents

头戴型显示装置和客户端装置 Download PDF

Info

Publication number
CN102710736A
CN102710736A CN2012100468578A CN201210046857A CN102710736A CN 102710736 A CN102710736 A CN 102710736A CN 2012100468578 A CN2012100468578 A CN 2012100468578A CN 201210046857 A CN201210046857 A CN 201210046857A CN 102710736 A CN102710736 A CN 102710736A
Authority
CN
China
Prior art keywords
terminal device
client terminal
head
display unit
mounted display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2012100468578A
Other languages
English (en)
Other versions
CN102710736B (zh
Inventor
藤垣勇人
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Corp filed Critical Olympus Corp
Publication of CN102710736A publication Critical patent/CN102710736A/zh
Application granted granted Critical
Publication of CN102710736B publication Critical patent/CN102710736B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/014Head-up displays characterised by optical features comprising information/image processing systems
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00Aspects of data communication
    • G09G2370/02Networking aspects
    • G09G2370/027Arrangements and methods specific for the display of internet documents
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/02Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Optics & Photonics (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Information Transfer Between Computers (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)
  • Controls And Circuits For Display Device (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

头戴型显示装置和客户端装置。本发明的课题是提供根据通过客户端装置上显示的操作画面进行的操作来进行处理,从而与客户端装置协同地工作的头戴型显示装置和客户端装置等。作为解决手段,头戴型显示装置(200)包括:显示部(220),其进行显示图像的显示;通信部(230),其与客户端装置(100)和外部服务器系统(400)进行通信;以及处理部(210),在客户端装置(100)的显示部(120)上显示头戴型显示装置(200)的操作画面、而且通过操作画面的操作从客户端装置(100)向头戴型显示装置(200)发送了HTTP请求的情况下,通信部(230)接收HTTP请求,处理部(210)执行与HTTP请求对应的指令,通信部(230)将指令执行结果作为HTTP响应回送给客户端装置(100)。

Description

头戴型显示装置和客户端装置
技术领域
本发明涉及头戴型显示装置和客户端装置。
背景技术
近年来,作为显示器件使用了HMD(Head Mounted Display,头戴型显示装置)。然而,由于HMD戴在头上的特性,设备变大是不理想的。因此,导致用于操作HMD的操作部(例如操作按钮等)成为简单的结构,难以进行复杂的操作。
并且,作为移动环境中的客户端装置,便携电话等广泛普及。便携电话等通过与网络连接,能够取得大量的内容,然而显示部(显示器)的尺寸有限,存在不能进行充分显示的问题。
【专利文献1】日本特开平10-233772号公报
【专利文献2】日本特开2000-122957号公报
在专利文献1中公开了这样的技术:例如在企业内等的网络中,对与网络连接的各终端进行HTML文件等的群发,共享数据。然而,专利文献1公开的技术是与用于数据共享的群发相关,显示在各终端上的数据是相同数据。因此,在将数据发送到多个终端进行显示的方面与本发明相同,然而不是用于解决显示部尺寸等的问题的技术。
在专利文献2中公开了这样的技术:客户端侧由多个终端构成,在多个终端处协同地显示数据。然而,在专利文献2中,与互联网连接的终端被限定为一个。
并且,专利文献1和专利文献2都没有考虑作为客户端装置的是头戴型显示装置的情形,不是解决与头戴型显示装置的操作部相关的问题的办法。
发明内容
根据本发明的若干方式,可提供通过根据显示在客户端装置上的操作画面的操作进行处理来与客户端装置协同地工作的头戴型显示装置和客户端装置等。
并且,根据本发明的若干方式,可提供通过在头戴型显示装置的显示部和客户端装置的显示部上显示关联的显示数据来进行多个画面的协同显示的头戴型显示装置和客户端装置等。
本发明的一个方式涉及一种头戴型显示装置,该头戴型显示装置包括:显示部,其进行显示图像的显示;通信部,其在客户端装置与外部服务器系统之间进行通信;以及处理部,在所述客户端装置的显示部上显示了用于操作头戴型显示装置的操作画面、而且根据显示在所述客户端装置的所述显示部上的所述操作画面的操作从所述客户端装置向头戴型显示装置发送了HTTP(Hypertext Transfer Protocol,超文本传输协议)请求的情况下,所述通信部接收所发送的所述HTTP请求,所述处理部执行与接收到的所述HTTP请求对应的指令,所述通信部将所述处理部中的所述指令的执行结果作为HTTP响应返回给所述客户端装置。
在本发明的一个方式中,头戴型显示装置根据显示在客户端装置上的操作画面的操作,从客户端装置接收HTTP请求,根据接收到的HTTP请求进行指令处理。然后,将指令的执行结果作为HTTP响应返回给客户端装置。因此,可实现与客户端装置协同地工作的头戴型显示装置、特别是能通过客户端装置操作的头戴型显示装置。
并且,在本发明的一个方式中,在所述客户端装置的所述显示部上显示了所述操作画面、而且在所述操作画面中设定了用于应用执行的参数的情况下,所述通信部可以接收包含所述参数的所述HTTP请求,所述处理部可以进行如下处理:执行根据所述参数进行了参数设定后的所述应用。
由此,能够根据由客户端装置设定的参数,在头戴型显示装置中执行应用。
并且,在本发明的一个方式中,所述处理部可以根据通过执行所述应用而经由所述通信部从所述外部服务器系统所取得的数据,生成头戴型显示装置用显示数据和客户端装置用显示数据,所述显示部可以根据头戴型显示装置用显示数据进行显示,所述通信部可以向所述客户端装置发送所述客户端装置用显示数据作为所述HTTP响应。
由此,可以生成头戴型显示装置用显示数据和客户端装置用显示数据,可在自身的显示部上显示头戴型显示装置用显示数据,可以把客户端装置用显示数据发送到客户端装置。因此,能够进行使用多个显示部的协同显示等。
并且,在本发明的一个方式中,所述处理部可以根据所取得的所述数据,生成第1~第N(N是整数)头戴型显示装置用显示数据和第1~第N客户端装置用显示数据,在所述第1~第N头戴型显示装置用显示数据中的第i(i是满足1≤i≤N的整数)头戴型显示装置用显示数据与所述第1~第N客户端装置用显示数据中的第i客户端装置用显示数据是关联数据的情况下,所述显示部可以以给定的显示间隔依次显示所述第1~第N头戴型显示装置用显示数据,在所述显示部上显示了第i头戴型显示装置用显示数据的情况下,所述通信部可以将所述第1~第N客户端装置用显示数据中的所述第i客户端装置用显示数据发送到所述客户端装置。
由此,在有多个头戴型显示装置用显示数据和客户端装置用显示数据的情况下,显示在头戴型显示装置上的数据和显示在客户端装置上的数据可以是关联的数据。
并且,在本发明的一个方式中,在从所述客户端装置发送了用于执行所述应用的所述参数作为所述HTTP请求的情况下,所述通信部可以向所述客户端装置发送所述客户端装置用显示数据作为与所述HTTP请求对应的所述HTTP响应。
由此,能够使HTTP请求和HTTP响应的对应明确。
并且,在本发明的一个方式中,在来自所述客户端装置的所述HTTP请求是由给定的URL(Uniform Resource Locator,统一资源定位符)指示的内容的显示指示的情况下,所述通信部可以对与所述给定的URL对应的内容进行访问,并接收所述内容,所述显示部可以显示接收到的所述内容。
由此,可以在从客户端装置接收到与URL对应的内容的显示指示作为HTTP请求的情况下显示该内容。
并且,在本发明的一个方式中,在来自所述客户端装置的所述HTTP请求是所述显示图像中的光标的移动指令、由光标指示的内容的选择指令以及返回至前一画面的返回指示指令中的至少1个指令的情况下,所述处理部可以根据所述HTTP请求进行所述指令的执行处理,所述显示部可以根据所述指令的执行处理,更新所述显示图像,并显示更新后的显示图像。
由此,可以在从客户端装置接收到光标移动指令、由光标指示的内容的选择指令以及返回至前一画面的返回指示指令中的至少1个指令作为HTTP请求的情况下执行该指令。
并且,在本发明的一个方式中,所述头戴型显示装置可以包括模板存储部,所述模板存储部存储在所述客户端装置中显示的所述操作画面信息的模板,所述处理部可以通过向存储在所述模板存储部中的所述操作画面信息的所述模板嵌入头戴型显示装置的所述地址信息来生成所述操作画面信息。
由此,可以使用模板来简化操作画面信息的生成处理等。
并且,在本发明的一个方式中,所述模板存储部可以存储在所述头戴型显示装置中执行的应用的模板,所述通信部可以接收在所述客户端装置的所述显示部上显示的所述操作画面中设定的用于执行应用的参数,所述处理部可以通过向存储在所述模板存储部中的所述应用的所述模板嵌入所述通信部接收到的所述参数,生成在头戴型显示装置中执行的所述应用。
由此,可以使用模板来简化应用的生成处理等。
并且,在本发明的一个方式中,所述处理部在所述通信部接收到初始连接请求作为来自所述客户端装置的所述HTTP请求的情况下,可以生成作为用于在所述客户端装置的所述显示部上显示所述操作画面的信息的操作画面信息,所述通信部可以将所述处理部生成的所述操作画面信息作为所述HTTP响应发送到所述客户端装置。
由此,通过在有来自客户端装置的初始连接请求的情况下返回操作画面信息作为响应,能够利用客户端装置进行头戴型显示装置的操作等。
并且,在本发明的一个方式中,所述显示部可以显示头戴型显示装置的地址信息作为所述显示图像,所述通信部可以接收根据显示在所述显示部上的所述地址信息进行的、来自所述客户端装置的使用Web浏览器的请求作为所述初始连接请求,所述处理部可以生成所述操作画面信息,所述通信部可以将所述处理部生成的所述操作画面信息作为所述HTTP响应发送到所述客户端装置。
由此,即使在客户端装置中使用Web浏览器的情况下,也能够进行初始连接请求。
并且,在本发明的一个方式中,所述通信部可以从所述客户端装置接收使用HTML(Hypertext Markup Language,超文本标记语言)记述的画面信息作为所述HTTP响应,所述显示部可以显示根据接收到的使用所述HTML记述的所述画面信息而生成的显示图像。
由此,能够将头戴型显示装置用作客户端装置的辅助显示器等。
并且,本发明的另一方式涉及一种客户端装置,该客户端装置包括:显示部,其进行显示图像的显示;通信部,其在与其它客户端装置和外部服务器系统之间进行通信;以及处理部,在所述其它客户端装置的显示部上显示了用于操作自身的客户端装置的操作画面、而且根据显示在所述其它客户端装置的所述显示部上的所述操作画面的操作从所述其它客户端装置向自身的客户端装置发送了HTTP请求的情况下,所述通信部接收所发送的所述HTTP请求,所述处理部执行与接收到的所述HTTP请求对应的指令,所述通信部将所述处理部中的所述指令的执行结果作为HTTP响应返回给所述其它客户端装置。
附图说明
图1是第1实施方式的系统结构例。
图2是说明第1实施方式的处理的流程图。
图3是显示在头戴型显示装置的显示部上的显示图像的例子。
图4的(A)和(B)是根据模板生成操作画面信息的例子。
图5是头戴型显示装置的显示部和客户端装置的显示部上显示的图像的例子。
图6是第2实施方式的系统结构例。
图7是说明第2实施方式的处理例的图。
图8是说明第2实施方式的处理的流程图。
图9是显示在头戴型显示装置的显示部上的显示图像的另一例子。
图10的(A)和(B)是根据模板生成应用执行用信息的例子。
图11是从外部服务器系统取得的数据的例子。
图12是头戴型显示装置的显示部和客户端装置的显示部上显示的图像的另一例子。
标号说明
10:网络;100:客户端装置;120:显示部;130:通信部;150:操作部;160:位置检测部;200:头戴型显示装置;210:处理部;220:显示部;230:通信部;240:模板存储部;300:网关;400:外部服务器系统。
具体实施方式
以下,说明本实施方式。以下说明的本实施方式不对权利要求中记载的本发明的内容进行不当限定。并且,在本实施方式中说明的全部结构不一定是本发明的必须构成要件。
1.本实施方式的解决方案
首先说明本实施方式的解决方案。近年来,作为显示装置使用的头戴型显示装置(HMD,Head Mounted Display)由于戴在头上的特征而对尺寸等加以限制,结果大多仅具有简单结构的操作部,因此与便携电话等的移动设备相比,操作用的接口不够,存在难以进行复杂操作的问题。
并且,一般的移动设备(例如便携电话等)大多显示部的尺寸较小,难以进行充分的显示。
因此,本申请人提出了一种使位于同一LAN环境内的头戴型显示装置和客户端装置(例如便携电话等)协同的办法。具体地说,头戴型显示装置接收来自客户端装置的HTTP请求,执行与接收到的HTTP请求对应的指令,之后将指令的执行结果作为HTTP响应返回给客户端装置。若作为HTTP请求使用操作指示指令,则能从客户端装置操作头戴型显示装置,可应对头戴型显示装置的操作部的问题。并且,通过进行在各个设备具有的显示部上显示关联数据的处理,进行数据的多画面协同显示,可应对客户端装置(移动设备、便携电话等)的显示部的问题。
以下,说明第1实施方式和第2实施方式。在第1实施方式中,说明使用客户端装置作为头戴型显示装置的操作部(遥控器)的办法。并且在第2实施方式中,以美食应用(餐厅检索应用)作为具体例,说明根据从外部服务器系统取得的数据进行使用头戴型显示装置和客户端装置的显示部的多画面协同显示的办法。
2.第1实施方式
说明使用客户端装置作为头戴型显示装置的操作部(遥控器)的办法。具体地说,在说明了系统结构例之后,使用流程图来说明处理详情。
2.1系统结构例
图1示出了包含本实施方式的头戴型显示装置的系统的结构例。系统包括:客户端装置100,头戴型显示装置200,网关300以及外部服务器系统400。不过,不限于图1的结构,可进行省略其中一部分结构要素、或者追加其它结构要素等的各种变型实施。其中,客户端装置100和头戴型显示装置200由使用者持有。并且,网关300以单体存在,可以由使用者持有,也可以不由使用者持有。并且,客户端装置100或头戴型显示装置200均可内置网关300。
客户端装置100包括操作部150、显示部120及通信部130。操作部150用于进行各种操作,例如由触摸面板或操作键等构成。显示部120进行显示图像的显示。通信部130经由网关300进行与头戴型显示装置200的通信。此外可经由网关300和网络10与外部服务器系统进行通信。
头戴型显示装置200包括处理部210、显示部220、通信部230及模板存储部240。处理部210进行各种处理。例如进行与来自客户端装置的HTTP请求对应的指令的执行处理。显示部220进行显示图像的显示。通信部230经由网关300进行与客户端装置100的通信。此外可经由网关300和网络10进行与外部服务器系统400的通信。模板存储部240存储在客户端装置100的显示部120上显示的内容的模板。例如存储用于操作头戴型显示装置200的操作画面的模板等。
网关300能够使用NAPT(Network Address Port Translation,网路地址端口转换)等将多个终端连接到网络10。并且,可以具有DHCP(Dynamic Host ConfigurationProtocol,动态主机配置协议)服务器的功能,向连接的设备(这里是客户端装置100和头戴型显示装置200)动态地分配专用IP地址。
2.2处理详情
下面,使用图2的流程图来说明处理详情。当该处理开始后,首先接通头戴型显示装置200的电源(S101)。然后,如图3所示,在头戴型显示装置200的显示部220上显示头戴型显示装置200的URL(S102)。然后,根据显示在显示部220上的URL,进行从客户端装置100到头戴型显示装置200的连接(S103)。
在进行了客户端装置100的连接后,头戴型显示装置200的处理部210从模板存储部240中读出操作画面信息的模板,通过向所读出的模板嵌入头戴型显示装置200的URL,生成操作画面信息。
图4(A)和图4(B)示出了具体的模板和嵌入处理的例子。在图4(A)和图4(B)的例子中,作为模板的HTML文件(图4的(A))的一部分有指令,该指令的一部分为{{HMD URL}}之类的标签。根据模板生成的操作画面信息(图4(B))是通过向标签部位内嵌入头戴型显示装置的URL(IP地址)而生成的HTML文件。
然后,通信部230将所生成的操作画面信息发送到客户端装置100(S104),客户端装置100根据接收到的操作画面信息,在显示部120上显示操作画面(S105)。图5示出操作画面的具体例、和显示在通过该操作画面操作的头戴型显示装置200上的画面的具体例。
如图5的A1所示,在客户端装置100的显示部120上显示有例如文本输入区域和移动按钮、十字键和确定按钮以及返回按钮等。在文本输入区域中输入想要连接的站点的URL,,按下移动按钮,从而如图5的A2所示在头戴型显示装置200的显示部220上显示对应的内容。在显示部220上显示了内容的状态下,按下十字键,从而可进行翻页、或者选择内容内的链接。选择内容内的链接的例子由图5的A2的虚线表示。当在选择了链接的状态下按下了确定按钮时,移至对应的链接目的地。另外,通过按下返回按钮,可回到前一显示画面。
另外,以上的S101~S105的处理是以客户端装置100使用Web浏览器进行连接为前提的流程。也就是说,是不能取得同一LAN环境内的其它终端的IP地址的条件下的处理,在使用专用应用而不是Web浏览器的情况下,可简化处理。
例如,可以不进行S102和S103中所示的URL的输入,而使用专用应用(可知道同一LAN环境内的其它终端的IP地址)进行与头戴型显示装置200的连接。在进一步简化的情况下,可省略S101~S105而设置在客户端装置100中生成操作画面信息的步骤。客户端装置100在可知道头戴型显示装置200的IP地址的情况下,可以自己直接生成操作画面信息,并在显示部120上显示操作画面。在该情况下,作为模板的信息需要由客户端装置100保持,而非头戴型显示装置200的模板存储部240。
在显示部120上显示了操作画面之后,客户端装置100根据该操作画面中的操作,向头戴型显示装置200发送指令(S106)。这里发送的指令具体如下。
(1)http://192.168.0.2/?command=open&url=http://news.com
(2)http://192.168.0.2/?command=key&action=up
从(1)和(2)的例子可知,指令是URL的形式,作为HTTP请求而被发送。在字符串“http://”之后记述了头戴型显示装置200的URL(这里是IP地址192.168.0.2),在字符串“/?”之后用“=”连接记述了各参数的名称和值。并且,在有多个参数的情况下,隔着“&”进行记述。
在上述(1)的指令中,将参数command的值设定为open,将参数url的值设定为http://new.com,之后将该信息发送到与192.168.0.2对应的终端。用上述的操作画面的例子来说,是在文本输入区域中输入“http://news.com”,通过按下移动按钮的操作而发送到头戴型显示装置200的指令。
并且,在上述(2)的指令中,将参数command的值设定为key,将参数action的值设定为up。用上述的操作画面的例子来说,是通过按下十字键的向上按钮的操作而发送的指令。并且,当command的值是key(即键操作指令)时,通过变更action的值,可发送与其它键操作对应的指令。例如,可考虑这样的例子:在将action的值设定为down、left、right的情况下,是按下十字键的向下、向左、向右的操作,在设定为enter、back的情况下,是按下选择按钮、返回按钮的操作。
当接收到以上的指令时,头戴型显示装置200首先判定该指令是否是打开指定URL的指令(S107)。具体地说,检查作为HTTP请求的上述指令中的参数command的值,在值是open时判定为“是”,在此外的情况下判定为“否”。在“是”的情况下,经由网关300访问与所指定的URL(作为参数url的值设定的)对应的站点,将内容显示在显示部220上(S108)。
在S107中判定为“否”的情况下,判定随后接收到的指令是否是键操作指令(S109)。具体地说,检查作为HTTP请求的上述指令中的参数command的值,在值是key时判定为“是”,在除此以外的情况下判定为“否”。在“是”的情况下,根据指令(参数action的值)进行翻页或链接选择、移动至链接目的地和返回至前一画面的返回处理中的任一项处理(S110)。在S109判定为“否”的情况下以及S108、S110的处理结束的情况下,转移到S111,将指令的执行结果(成功或失败)作为HTTP响应返回给客户端装置100。
客户端装置100进行接收到的指令执行结果的判定(S112),在成功的情况下,回到S106继续操作,在失败的情况下,转移到S113,在显示部120上表明出错。
在以上的本实施方式中,如图1所示,头戴型显示装置200包括进行显示图像的显示的显示部220、通信部230以及处理部210。通信部230在与客户端装置100和外部服务器系统400之间进行通信。这里,考虑这样的情况:在客户端装置100的显示部120上显示用于操作头戴型显示装置200的操作画面,根据所显示的该操作画面的操作,从客户端装置100向头戴型显示装置200发送HTTP请求。此时,头戴型显示装置200的通信部230接收HTTP请求,处理部210执行与接收到的HTTP请求对应的指令,通信部230将处理部210中的指令执行结果作为HTTP响应返回给客户端装置100。
这里,HTTP(Hypertext Transfer Protocol)请求是指例如在将上述(1)、(2)那样的http开头的字符串输入到Web浏览器并执行的情况下从Web浏览器发送到Web服务器的请求。具体地说包含由方法名、对象内容的URL(http开头的字符串等)、HTTP的版本构成的请求行,例如考虑以下的请求。
GET http://192.168.0.2/?command=key&action=up HTTP/1.1
在上述的例子中,使用了GET方法,然而HTTP此外还规定了POST方法、HEAD方法等。除了上述的请求行以外,有时还记述头部,该头部记述语言或数据形式。并且,在POST方法等中,有时还记述正文部,正文部记述发送到服务器的数据。另外,发送HTTP请求的主体不限于Web浏览器,可以是能使用HTTP的专用应用。
由此,头戴型显示装置200和客户端装置100能够协同地工作。特别是成为这样的形态:头戴型显示装置200针对来自客户端装置的请求(HTTP请求)进行处理,并返回结果(HTTP响应)。因此,作为一例,在HTTP请求是作为客户端装置100的显示部120上显示的操作画面上的操作结果而发送的对头戴型显示装置200的操作请求(操作指令)的情况下,能够使用客户端装置100来操作头戴型显示装置200等。鉴于头戴型显示装置200由于戴在头上的制约而难以具有能进行复杂操作的操作部,从其它设备(作为客户端装置100例如考虑便携电话等)进行操作是非常有用的。在本实施方式中,HTTP请求是对头戴型显示装置200的操作请求,由头戴型显示装置200进行的指令处理是Web访问处理等。并且,HTTP响应是指令处理的结果(成功或失败)。另外,在后述的第2实施方式中,HTTP请求是对头戴型显示装置200的操作请求(特别是应用的参数设定请求),指令处理是应用(Web应用)的执行。并且,HTTP响应是应用执行的结果取得、返回所生成的显示数据等。
在本实施方式中,如上所述作为通信协议使用HTTP。并且作为在客户端侧能利用HTTP的应用,广为公知的是Web浏览器。也就是说,作为利用HTTP的优点,可列举能利用Web浏览器这一方面。鉴于如便携电话等那样在具有通信功能的终端中标准地搭载有Web浏览器(或者能够容易地导入)的现状,可以利用Web浏览器,即作为在本实施方式中使用的客户端装置100,可以使用通用的终端而无需准备专用终端。
另外,以上假定利用的通信协议是HTTP而作了说明,而本发明中的HTTP不仅仅是狭义的HTTP,还包括使HTTP发展后的标准(例如HTTPS等)或基于相同思想的标准。例如,在考虑安全功能的情况下,可以使用HTTPS(Hypertext TransferProtocol over Secure Socket Layer,基于安全套接字层的超文本传输协议)。狭义的HTTP使用明文发送消息,而在HTTPS中进行认证处理或消息的加密处理。因此,通过使用HTTPS,能够防止客户端和服务器之间的通信中的窃听等。例如,在从外部服务器系统400取得数据等时进行使用了用户名和密码的认证处理的情况下,为使该用户名和密码不由第三者滥用,期望使用HTTPS。并且,在热点(hot spot)等的可由不特定多数人使用的状况下进行客户端装置100与头戴型显示装置200经由网关300的连接的情况下,也考虑利用HTTPS。另外,由于Web浏览器支持HTTP以及HTTPS,因而上述的使用HTTP的优点在使用HTTPS的情况下也照样是适用的。
并且,在来自客户端装置100的HTTP请求是由给定的URL指示的内容的显示指示的情况下,通信部230对与给定的URL对应的内容进行访问,并接收内容。然后,显示部220显示接收到的内容。
由此,作为使用了客户端装置100的头戴型显示装置200的操作例,能够进行访问与给定的URL对应的内容的处理。具体地说,在图5的A1所示的操作画面中,在文本输入区域中输入访问对象内容的URL,之后按下了移动按钮的情况下,可将与所输入的URL对应的内容显示在头戴型显示装置200的显示部220上等。
另外考虑这样的情况:来自客户端装置的HTTP请求是显示图像(显示在头戴型显示装置200的显示部220上的图像)中的光标的移动指令、由光标指示的内容的选择指令以及返回至前一画面的返回指示指令中的至少1个指令。此时处理部210根据HTTP请求进行指令执行处理,显示部220根据指令执行结果更新显示图像,并显示更新后的显示图像。
由此,作为使用了客户端装置100的头戴型显示装置200的操作例,能够执行光标移动指令、由光标指示的内容的选择指令以及返回至前一画面的返回指示指令中的至少1个指令。具体地说,在图5的A1所示的操作画面中,通过操作十字键,可使显示图像上的光标(在图5的A2的例子中由覆盖链接周围的虚线显示)移动。并且,既可以通过按下确定按钮来选择由光标指示的内容(例如链接目的地的内容),也可以通过按下返回按钮来使显示图像回到前一状态。不过,可进行的操作不限于此,还可进行画面的滚动处理、显示标签的选择处理(显示画面能进行标签显示的情况等)等的处理。也就是说,通过切换操作画面的形式,或者切换分配给按钮的功能,能够进行任意的操作。
并且,如图1所示,头戴型显示装置200包括存储模板的模板存储部240。这里模板是操作画面信息的模板,是客户端装置100的显示部120所显示的操作画面用的信息。然后,处理部210通过向操作画面信息的模板嵌入头戴型显示装置200的地址信息,可以生成操作画面信息。
由此,能够使用模板来简化操作画面信息的生成处理。在本实施方式中,进行与网络连接的(例如位于同一LAN环境内的)头戴型显示装置200和客户端装置100之间的协同,特别是,利用来自客户端装置100的HTTP请求在头戴型显示装置200中进行处理。由于从客户端装置100发送的HTTP请求当然应发送到头戴型显示装置200,因而向模板嵌入的是头戴型显示装置200的地址信息(例如IP地址)。另外,考虑在本实施方式的系统中使用DHCP(Dynamic Host Configuration Protocol,动态主机配置协议)的情况,此时头戴型显示装置200的IP地址可能动态地变化。上述的对模板进行的地址信息嵌入处理在使用DHCP的情况下特别能发挥效果,通过将头戴型显示装置200的IP地址嵌入模板,即使该IP地址动态变化,也能够对应于该变化而动态地生成操作画面信息。
另外在通信部230接收到初始连接请求作为来自客户端装置100的HTTP请求的情况下,处理部210可生成操作画面信息,通信部230可将处理部210生成的操作画面信息作为HTTP响应发送到客户端装置。
由此,头戴型显示装置200能够针对来自客户端装置100的初始连接请求(例如最初连接时的HTTP请求)生成操作画面信息并发送到客户端装置100。即,当头戴型显示装置200和客户端装置100开始协同工作时,可将操作画面信息发送到客户端装置100,因而作为协同动作的具体例,可实现使用客户端装置100的头戴型显示装置200的操作。
并且如图3所示,显示部220可显示头戴型显示装置200的地址信息作为显示图像,通信部230可接收根据显示部220上显示的地址信息进行的、来自客户端装置的使用Web浏览器的请求作为初始连接请求。
由此,在客户端装置100中使用Web浏览器的情况下,也能够实现头戴型显示装置200和客户端装置100的协同工作。Web浏览器不能取得位于同一LAN环境内的其它终端的地址信息(IP地址)。因此,不能简单地进行从客户端装置100到头戴型显示装置200的最初访问。因此,作为一例有必要采用这样的办法:在头戴型显示装置200(当然可知道自己的IP地址)的显示部220上显示头戴型显示装置200的地址信息,督促操作客户端装置100的用户进行访问。另外,地址信息的显示可以照原样显示字符串,也可以显示与该字符串对应的QR码等。
另外,通信部230可以从客户端装置接收由HTML记述的画面信息作为HTTP请求。并且显示部220显示根据由HTML记述的画面信息而生成的显示图像。
这里发送的HTTP请求例如如下所示。
http://192.168.0.2/?command=display&content=<html><head><title>title</title></head><body><img src=”http://www.a.com/1.jpg”></body></html>
与上述的HTTP请求的例子一样,192.168.0.2是头戴型显示装置200的IP地址。将参数command的值设定为display,将HTML的内容原样记述在参数content的值中。也就是说,客户端装置100发送用HTML记述的画面信息作为参数之一,在参数command的值是display的情况下,头戴型显示装置200原样解释参数content的值并进行显示。
由此,能够使用头戴型显示装置200作为客户端装置100的辅助显示器。具体地说,当作为客户端装置100考虑了便携电话(智能电话)等时,有时通过执行便携电话的应用来接收HTML文件。在该情况下,若将接收到的HTML文件的内容原样作为上述的HTTP请求发送到头戴型显示装置200,则能将便携电话的应用取得的画面信息原样显示在头戴型显示装置200上。便携电话等移动设备的显示部出于便携性的考虑而限定得比较小,因而在便携电话本体的显示部以外还把头戴型显示装置200的显示部用于显示以扩大显示区域是非常有用的。另外,此时的HTTP响应可以返回显示处理的成功/失败等的信息。
另外,以上的本实施方式涉及包括显示部、通信部和处理部的客户端装置。这里考虑多个客户端装置协同的系统。通信部在与其它客户端装置和外部服务器系统之间进行通信。并且考虑这样的情况:在其它客户端装置的显示部上显示用于操作自身的客户端装置的操作画面,根据所显示的该操作画面的操作,从其它客户端装置100向自身的客户端装置发送HTTP请求。此时,自身的客户端装置的通信部接收HTTP请求,处理部执行与接收到的HTTP请求对应的指令,通信部将处理部中的指令执行结果作为HTTP响应返回给其它客户端装置。
由此,能够将本实施方式的方案应用于头戴型显示装置200以外的设备。例如,可应用于例如便携电话、PHS、平板终端等的具有网络功能和显示部的任意客户端装置。
3.第二实施方式
以美食应用(餐厅检索应用)作为具体例,说明这样的方案:根据从外部服务器系统取得的数据,进行使用头戴型显示装置和客户端装置的显示部的多画面协同显示。具体地说,在说明了系统结构之后,使用流程图来说明处理详情。
3.1系统结构例
图6示出了包括本实施方式的头戴型显示装置的系统的结构例。系统包括:客户端装置100、头戴型显示装置200、网关300以及外部服务器系统400。不过,不限于图6的结构,可以进行省略其中一部分结构要素、或者追加其它结构要素等的各种变型实施。
如图6所示,成为这样的结构:除了第1实施方式的结构以外,还向客户端装置100追加了位置检测部160。位置检测部160使用GPS或WiFi等来取得客户端装置100的当前位置的纬度和经度。不过,位置检测部160是在作为应用例的美食应用中使用的,不是必须的构成要件。
另外,作为与第1实施方式的不同,列举了存储在头戴型显示装置200的模板存储部240中的模板是以下2个模板:发送给客户端装置100的操作画面信息用的模板,和设置于头戴型显示装置200中执行的应用执行用模板。操作画面信息用的模板与第1实施方式相同,在与S104对应的步骤即S204中使用。应用执行用模板在S207中使用,详情后述。
另外,外部服务器系统400在第1实施方式中是Web服务器等,不过可以使用例如Mashup服务器等。
使用图7说明本实施方式的一例。在本实施方式中,首先,当从便携设备(广义上是客户端装置100)发送了检索条件时,HMD(头戴型显示装置200)向Mashup服务器(广义上是外部服务器系统400)请求数据,并取得数据((1)~(3))。然后,HMD在自身的显示部上显示概要,并生成便携终端用内容,发送到便携终端((4)~(5))。然后,便携终端如(8)所示显示便携终端用内容(这里是地图信息)。另外,在便携终端用内容如图7所示包含对其它服务器的参照的情况下,如(6)~(7)所示,进行对该服务器的访问。
不过在图7中,为了简化说明,描绘成HMD与Mashup服务器、或者便携终端与地图服务器直接通信,然而严格来说不是这样。如图1所示,在本实施方式中假定这样的系统:客户端装置100和头戴型显示装置200是同一LAN环境内的终端,经由网关300与网络10连接。因此,(2)~(3)或(6)~(7)的在LAN和互联网中往复的访问是经由网关300(在利用例如NAPT等进行了地址和端口号的转换之后)进行的。
3.2处理详情
下面,使用图8的流程图来说明处理详情。该处理开始后,首先进行S201~S205的处理。由于S201~S205的处理与第1实施方式的S101~S105的处理相同,因而省略详细说明。不过,在第1实施方式中,在S104中发送且在S105中显示的操作画面是用于操作头戴型显示装置200,例如是图5的A1所示的画面。需要注意的是,与此相对,在本实施方式中,在S104中发送且在S205中显示的操作画面是用于进行头戴型显示装置200所执行的应用的设定,例如是图9所示的画面。另外,与第1实施方式的S101~S105的处理一样,本实施方式的S201~S205的处理也是使用Web浏览器的情况下的处理,在使用专用应用的情况下可简化。
在显示部120上显示了操作画面之后,客户端装置100根据该操作画面中的操作,向头戴型显示装置200发送HTTP请求(S206)。这里发送的请求具体地说如下所示。
http://192.168.0.2/?app=gourmet&interval=5000&nosmoking=yes&sort=near&latitude=35&longitude=120
在字符串“http://”之后记述了头戴型显示装置200的URL(这里是IP地址192.168.0.2),在字符串“/?”之后用“=”连接记述了各参数的名称和值。另外,在有多个参数的情况下,隔着“&”进行记述。这里,头戴型显示装置200的URL与第1实施方式一样是通过S204中的模板处理来嵌入的。
这里,作为参数设定了app、interval、nosmoking、sort、latitude、longitude。app表示待执行的应用的类别,这里通过取值gourmet来执行美食应用。另外,也可变更app的值来执行其它应用。另外,使用interval设定在头戴型显示装置200的显示部220上显示的信息的更新时间(这里是5000ms),使用nosmoking设定根据无烟席的有无来过滤餐厅信息。sort表示餐厅的排序顺序,这里设定near,按远近顺序进行显示。另外,使用latitude、longitude设定由位置检测部160取得的纬度、经度信息。另外,这里所示的参数是一例,当然可以使用除此以外的参数。
然后,当接收到参数时,处理部210从模板存储部240中读出应用执行用模板,向该应用执行用模板内嵌入接收到的参数,之后进行应用的执行处理(S207)。图10(A)、图10(B)示出了具体例。图10(A)是应用执行用模板的例子,与各参数的值对应的部分为{{SORT}}等。图10(B)是向该模板嵌入接收到的参数而生成的应用。在S207中执行图10(B)的应用。
当执行了应用后,头戴型显示装置200向外部服务器系统400请求数据(S208)。外部服务器系统400根据请求返回数据(S209)。这里,外部服务器系统400返回的数据的形式例如是图11所示的形式。例如,将餐厅的名称、纬度、经度、所在地以及图像的URL作为1件数据,将多件数据汇总发送。具体的数据形式可以使用JSONP来记述,也可以使用XML来记述。另外,数据的要素当然不限定于这里例示的名称、纬度、经度等。
当从外部服务器系统400取得了数据后,头戴型显示装置200根据所取得的数据的一部分生成头戴型显示装置用显示数据,并显示在显示部220上(S210)。再根据数据的一部分生成客户端装置用显示数据,作为HTTP响应返回到客户端装置100。另外,这里的HTTP响应与在S206中作为参数的发送而执行的HTTP响应成对。
客户端装置100根据接收到的客户端装置用显示数据,在显示部120上显示客户端装置用内容。图12示出在客户端装置100的显示部120和头戴型显示装置200的显示部220上显示的画面的例子。考虑以下等:如图12的B2所示,例如由头戴型显示装置200显示餐厅的概要信息,如图12的B1所示,由客户端装置100显示餐厅的地图信息。
然后,当给定的时间经过后,第1件餐厅的显示处理结束,切换到下一餐厅的显示。切换的定时例如由上述的参数interval设定,这里,头戴型显示装置200和客户端装置100等待5000ms(S213、S214)。在等待了给定的时间之后,回到S210,使用第2件数据来生成头戴型显示装置用显示数据并在显示部220上显示概要,在S211中生成并发送客户端装置用显示数据。第3件以后也是相同的处理。
在以上的本实施方式中,在客户端装置100的显示部120上显示了操作画面、而且在操作画面中设定了应用执行用的参数的情况下,头戴型显示装置200的通信部230接收包含参数的HTTP请求,处理部210执行根据参数进行了参数设定后的应用。
这里,参数用上述的例子来说,是app、interval、nosmoking、sort、latitude、longitude等,是表示应用的类别和应用执行条件的参数。另外,上述参数是例示,当然可以使用除此以外的参数。
由此,能够在客户端装置100的显示部120上所显示的操作画面中设定应用执行用的参数。也就是说,可从客户端装置100进行应用执行用的操作。与第1实施方式的相同点是,使用客户端装置100来对往往是简单结构的头戴型显示装置200的操作部进行补充。
另外,处理部210根据通过执行应用而经由通信部230从外部服务器系统400取得的数据,生成头戴型显示装置用显示数据和客户端装置用显示数据。然后,显示部220根据头戴型显示装置用显示数据进行显示,通信部230向客户端装置100发送客户端装置用显示数据作为HTTP响应。
由此,能够生成头戴型显示装置用显示数据和客户端装置用显示数据,由自身的显示部220显示头戴型显示装置用显示数据,之后将客户端装置用显示数据发送到客户端装置100。也就是说,能够进行使用头戴型显示装置200和客户端装置100的显示部的多画面协同显示。具体地说,当取得了图11所示的数据时,根据名称和图像的信息生成与图12的B2的显示例对应的数据作为头戴型显示装置用显示数据,并根据纬度经度的信息生成与图12的B1的显示例对应的数据作为客户端装置用显示数据。结果,能够进行图12的显示,可通过多个显示部显示关联的信息,因而可消除客户端装置100的显示部120小的缺点等。
另外,处理部210根据从外部服务器系统400取得的数据,生成第1~第N头戴型显示装置用显示数据和第1~第N客户端装置用显示数据。假定上述数据中的第i头戴型显示装置用显示数据和第i客户端装置用显示数据是关联的数据。在该情况下,显示部220以给定的显示间隔依次显示第1~第N头戴型显示装置用显示数据,在显示部220上显示了第i头戴型显示装置用显示数据的情况下,通信部230将第i客户端装置用显示数据发送到客户端装置100。
由此,能够进行图8的S210~S215所示的处理。也就是说,当如图11所示汇总取得了多件数据时,作为显示方法,考虑以给定的显示间隔从第1件到第N件自动切换的例子。在该情况下,显示在头戴型显示装置200上的图像和显示在客户端装置100上的图像必须是关联的信息(用美食应用的例子来说是与同一餐厅相关的信息)。因此,头戴型显示装置200的通信部230必须将与显示部220当前显示的头戴型显示装置用显示数据相关联的客户端装置用显示数据发送给客户端装置。
另外,在作为来自客户端装置100的HTTP请求进行了用于执行应用的参数的发送的情况下,头戴型显示装置200的通信部230发送客户端装置用显示数据作为对该HTTP请求的HTTP响应。
由此,能够使HTTP请求和HTTP响应的对应明确。基本上,HTTP请求和HTTP响应成对,在本实施方式中,参数的发送和客户端装置用显示数据的发送成对。
另外,模板存储部240可以存储在头戴型显示装置200中执行的应用的模板。并且通信部230接收在显示于客户端装置100的显示部120上的操作画面中设定的用于执行应用的参数。处理部210通过向应用的模板内嵌入通信部230接收到的参数,生成应用。
由此,能够使用模板来简化应用的生成处理。例如,如图10所示使用JavaScript等记述应用,通过将所设定的参数嵌入{{SORT}}等的标签内来生成应用。也就是说,模板存储部240在本实施方式中,除了在第1实施方式所示的操作画面信息用的模板以外,还保持应用执行用的模板。
以上,说明了应用本发明的2个实施方式1、2,然而本发明并不限于各实施方式1、2,可在实施阶段中在不背离本发明主旨的范围内对构成要素进行变型来具体化。另外,通过将上述各实施方式1、2公开的多个构成要素适当组合,可形成各种发明。例如,可以从各实施方式1、2记载的全部构成要素中删除若干构成要素。而且,可以将在不同实施方式中说明的构成要素适当组合。这样,能够在不背离发明主旨的范围内进行各种变型和应用。

Claims (13)

1.一种头戴型显示装置,其特征在于,该头戴型显示装置包括:
显示部,其进行显示图像的显示;
通信部,其与客户端装置和外部服务器系统之间进行通信;以及
处理部,
在所述客户端装置的显示部上显示了用于操作头戴型显示装置的操作画面、而且根据显示在所述客户端装置的所述显示部上的所述操作画面的操作从所述客户端装置向头戴型显示装置发送了超文本传输协议HTTP请求的情况下,所述通信部接收所发送的所述HTTP请求,
所述处理部执行与接收到的所述HTTP请求对应的指令,
所述通信部将所述处理部中的所述指令的执行结果作为HTTP响应返回给所述客户端装置。
2.根据权利要求1所述的头戴型显示装置,其特征在于,
在所述客户端装置的所述显示部上显示了所述操作画面、而且在所述操作画面中设定了用于应用执行的参数的情况下,所述通信部接收包含所述参数的所述HTTP请求,
所述处理部进行如下处理:执行根据所述参数进行了参数设定后的所述应用。
3.根据权利要求2所述的头戴型显示装置,其特征在于,
所述处理部根据通过执行所述应用而经由所述通信部从所述外部服务器系统取得的数据,生成头戴型显示装置用显示数据和客户端装置用显示数据,
所述显示部根据头戴型显示装置用显示数据进行显示,
所述通信部向所述客户端装置发送所述客户端装置用显示数据作为所述HTTP响应。
4.根据权利要求3所述的头戴型显示装置,其特征在于,
所述处理部根据所取得的所述数据,生成第1~第N头戴型显示装置用显示数据和第1~第N客户端装置用显示数据,其中N是整数,
在所述第1~第N头戴型显示装置用显示数据中的第i头戴型显示装置用显示数据、和所述第1~第N客户端装置用显示数据中的第i客户端装置用显示数据是相关联的数据的情况下,所述显示部以给定的显示间隔依次显示所述第1~第N头戴型显示装置用显示数据,其中i是满足1≤i≤N的整数,
在所述显示部上显示了第i头戴型显示装置用显示数据的情况下,所述通信部将所述第1~第N客户端装置用显示数据中的所述第i客户端装置用显示数据发送到所述客户端装置。
5.根据权利要求3所述的头戴型显示装置,其特征在于,在作为所述HTTP请求从所述客户端装置发送了用于执行所述应用的所述参数的情况下,所述通信部向所述客户端装置发送所述客户端装置用显示数据作为与所述HTTP请求对应的所述HTTP响应。
6.根据权利要求1所述的头戴型显示装置,其特征在于,
在来自所述客户端装置的所述HTTP请求是给定的统一资源定位符URL所指示的内容的显示指示的情况下,所述通信部对与所述给定的URL对应的内容进行访问,并接收所述内容,
所述显示部显示接收到的所述内容。
7.根据权利要求1所述的头戴型显示装置,其特征在于,
在来自所述客户端装置的所述HTTP请求是所述显示图像中的光标的移动指令、由光标指示的内容的选择指令以及返回至前一画面的返回指示指令中的至少1个指令的情况下,所述处理部根据所述HTTP请求进行所述指令的执行处理,
所述显示部根据所述指令的执行处理,更新所述显示图像,并显示更新后的显示图像。
8.根据权利要求1所述的头戴型显示装置,其特征在于,
该头戴型显示装置包括模板存储部,该模板存储部存储操作画面信息的模板,该操作画面信息的模板是用于在所述客户端装置的所述显示部上显示所述操作画面的信息,
所述处理部通过向存储在所述模板存储部中的所述操作画面信息的所述模板嵌入头戴型显示装置的所述地址信息来生成所述操作画面信息。
9.根据权利要求8所述的头戴型显示装置,其特征在于,
所述模板存储部存储在所述头戴型显示装置中执行的应用的模板,
所述通信部接收在所述客户端装置的所述显示部上显示的所述操作画面中设定的用于执行应用的参数,
所述处理部通过向存储在所述模板存储部中的所述应用的所述模板嵌入所述通信部接收到的所述参数,生成在头戴型显示装置中执行的所述应用。
10.根据权利要求1所述的头戴型显示装置,其特征在于,
所述处理部在所述通信部接收到初始连接请求作为来自所述客户端装置的所述HTTP请求的情况下,生成作为用于在所述客户端装置的所述显示部上显示所述操作画面的信息的操作画面信息,
所述通信部将所述处理部生成的所述操作画面信息作为所述HTTP响应发送到所述客户端装置。
11.根据权利要求10所述的头戴型显示装置,其特征在于,
所述显示部显示头戴型显示装置的地址信息作为所述显示图像,
所述通信部接收根据显示在所述显示部上的所述地址信息进行的、来自所述客户端装置的使用Web浏览器的请求,作为所述初始连接请求,
所述处理部生成所述操作画面信息,
所述通信部将所述处理部生成的所述操作画面信息作为所述HTTP响应发送到所述客户端装置。
12.根据权利要求1所述的头戴型显示装置,其特征在于,
所述通信部从所述客户端装置接收利用超文本标记语言HTML记述的画面信息作为所述HTTP请求,
所述显示部显示根据接收到的利用所述HTML记述的所述画面信息而生成的显示图像。
13.一种客户端装置,其特征在于,该客户端装置包括:
显示部,其进行显示图像的显示;
通信部,其与其它客户端装置和外部服务器系统之间进行通信;以及
处理部,
在所述其它客户端装置的显示部上显示了用于操作自身的客户端装置的操作画面、而且根据所述其它客户端装置的所述显示部上显示的所述操作画面的操作从所述其它客户端装置向自身的客户端装置发送了HTTP请求的情况下,所述通信部接收所发送的所述HTTP请求,
所述处理部执行与接收到的所述HTTP请求对应的指令,
所述通信部将所述处理部中的所述指令的执行结果作为HTTP响应返回给所述其它客户端装置。
CN201210046857.8A 2011-02-28 2012-02-27 头戴型显示装置和客户端装置 Active CN102710736B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2011-041314 2011-02-28
JP2011041314A JP5757750B2 (ja) 2011-02-28 2011-02-28 頭部装着型表示装置及びクライアント装置

Publications (2)

Publication Number Publication Date
CN102710736A true CN102710736A (zh) 2012-10-03
CN102710736B CN102710736B (zh) 2017-06-13

Family

ID=46718631

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210046857.8A Active CN102710736B (zh) 2011-02-28 2012-02-27 头戴型显示装置和客户端装置

Country Status (3)

Country Link
US (1) US20120218171A1 (zh)
JP (1) JP5757750B2 (zh)
CN (1) CN102710736B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103823548A (zh) * 2012-11-19 2014-05-28 联想(北京)有限公司 电子设备、穿戴式设备、控制系统和方法
CN105378691B (zh) * 2013-07-10 2018-10-19 Lg电子株式会社 移动装置、头戴式显示器及其控制方法

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5874443B2 (ja) * 2012-03-01 2016-03-02 ソニー株式会社 通信装置、通信システム、および、これらの制御方法ならびに当該方法をコンピュータに実行させるためのプログラム
US9311281B2 (en) * 2012-09-10 2016-04-12 Usablenet Inc. Methods for facilitating web page image hotspots and devices thereof
KR102065407B1 (ko) 2013-07-11 2020-01-13 엘지전자 주식회사 디지털 디바이스 및 그 제어 방법
CN104238752B (zh) * 2014-09-18 2022-07-26 联想(北京)有限公司 一种信息处理方法及第一可穿戴式设备
JP2017040687A (ja) * 2015-08-17 2017-02-23 株式会社リコー 画像表示システム、情報処理装置、画像表示方法及びプログラム
JP2017040686A (ja) * 2015-08-17 2017-02-23 株式会社リコー 画像表示システム、情報処理装置、画像表示方法及びプログラム
JP2017107293A (ja) * 2015-12-07 2017-06-15 株式会社電通 情報処理システム、プログラム及び情報処理方法
JP6940702B2 (ja) * 2018-06-25 2021-09-29 マクセル株式会社 ヘッドマウントディスプレイ、ヘッドマウントディスプレイ連携システム及びその方法
JP7243193B2 (ja) * 2019-01-10 2023-03-22 セイコーエプソン株式会社 表示システム、表示システムの制御方法、情報処理装置、及び情報処理装置の制御プログラム
US10890992B2 (en) 2019-03-14 2021-01-12 Ebay Inc. Synchronizing augmented or virtual reality (AR/VR) applications with companion device interfaces
US11150788B2 (en) * 2019-03-14 2021-10-19 Ebay Inc. Augmented or virtual reality (AR/VR) companion device techniques
WO2024034011A1 (ja) * 2022-08-09 2024-02-15 マクセル株式会社 連係表示システム及び連係表示方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1149157A (zh) * 1995-10-02 1997-05-07 齐伯瑙特有限公司 不需要用手的便携式计算机及系统
CN1231447A (zh) * 1998-02-09 1999-10-13 株式会社半导体能源研究所 信息处理设备
US20030001823A1 (en) * 2001-06-27 2003-01-02 Takashi Oya Portable information terminal, information viewing method, and program
US20090055801A1 (en) * 2007-03-27 2009-02-26 Fujitsu Limited Computer readable storage medium that stores a test specifications creating program, test specifications creating apparatus and test specifications creating method
CN101609660A (zh) * 2008-06-18 2009-12-23 奥林巴斯株式会社 数字相框、信息处理系统和控制方法

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003015974A (ja) * 2001-07-04 2003-01-17 Matsushita Electric Ind Co Ltd 通信システム
JP4164741B2 (ja) * 2002-10-11 2008-10-15 ソニー株式会社 電子機器操作システム及び電子機器
JP3892802B2 (ja) * 2002-12-17 2007-03-14 株式会社リコー 情報処理装置
JP2005128279A (ja) * 2003-10-24 2005-05-19 Matsushita Electric Ind Co Ltd 遠隔操作システム
JP2006155327A (ja) * 2004-11-30 2006-06-15 Hitachi Systems & Services Ltd コンピュータの遠隔操作システム
US20060190992A1 (en) * 2005-02-24 2006-08-24 Microsoft Corporation Facilitating Bi-directional communications between clients in heterogeneous network environments
JP2007286683A (ja) * 2006-04-12 2007-11-01 Canon Inc リモート操作端末装置及びui操作画面構築方法
JP2009042967A (ja) * 2007-08-08 2009-02-26 Nikon Corp 情報入力表示システム、情報端末および表示装置
JP2009258954A (ja) * 2008-04-16 2009-11-05 Japan Society For The Promotion Of Machine Industry ハンズフリー型コンピュータ装置及びコンピュータシステム
JP2010035055A (ja) * 2008-07-30 2010-02-12 Panasonic Corp 遠隔操作装置、ネット家電、遠隔操作システム、および遠隔操作方法
JP2010287004A (ja) * 2009-06-11 2010-12-24 Nikon Corp 頭部装着型映像表示装置
US8738711B2 (en) * 2009-11-03 2014-05-27 Oto Technologies, Llc System and method for redirecting client-side storage operations
US8908043B2 (en) * 2010-04-12 2014-12-09 Symbol Technologies, Inc. System and method for location-based operation of a head mounted display

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1149157A (zh) * 1995-10-02 1997-05-07 齐伯瑙特有限公司 不需要用手的便携式计算机及系统
CN1231447A (zh) * 1998-02-09 1999-10-13 株式会社半导体能源研究所 信息处理设备
US20030001823A1 (en) * 2001-06-27 2003-01-02 Takashi Oya Portable information terminal, information viewing method, and program
US20090055801A1 (en) * 2007-03-27 2009-02-26 Fujitsu Limited Computer readable storage medium that stores a test specifications creating program, test specifications creating apparatus and test specifications creating method
CN101609660A (zh) * 2008-06-18 2009-12-23 奥林巴斯株式会社 数字相框、信息处理系统和控制方法

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103823548A (zh) * 2012-11-19 2014-05-28 联想(北京)有限公司 电子设备、穿戴式设备、控制系统和方法
CN103823548B (zh) * 2012-11-19 2019-07-26 联想(北京)有限公司 电子设备、穿戴式设备、控制系统和方法
CN105378691B (zh) * 2013-07-10 2018-10-19 Lg电子株式会社 移动装置、头戴式显示器及其控制方法

Also Published As

Publication number Publication date
US20120218171A1 (en) 2012-08-30
JP5757750B2 (ja) 2015-07-29
CN102710736B (zh) 2017-06-13
JP2012178097A (ja) 2012-09-13

Similar Documents

Publication Publication Date Title
CN102710736A (zh) 头戴型显示装置和客户端装置
CA2892614C (en) System and method for managing several mobile devices simultaneously
CN102710591A (zh) 服务器系统以及客户端装置的控制方法
JP6595526B2 (ja) コミュニケーション支援装置、方法、及びコンピュータプログラム
KR101425491B1 (ko) 웹 투 앱 연동 콜 서비스 시스템, 방법 및 컴퓨터 판독 가능한 기록 매체
CN103001926A (zh) 一种订阅通知的方法、装置和系统
CN103595759B (zh) 基于云端的桌面展示方法
CN103391278A (zh) 终端连接服务器的方法和系统
CN104268611A (zh) 网页同步方法及装置
JP2005323093A (ja) Webサーバを利用した遠隔操作制御プログラム
CN109918168A (zh) 显示图形码的方法、电子设备和计算机可读介质
WO2014030487A1 (ja) プロキシ・サーバならびにその動作制御方法およびその動作制御プログラム
JP6293611B2 (ja) 端末間で同一ページを同期して表示させるページ同期方法及びプログラム
Korhonen et al. mtag-architecture for discovering location specific mobile web services using RFID and its evaluation with two case studies
KR20070027996A (ko) 이동 통신 단말, 게이트웨이 및 무선 인터넷 서비스 제공방법
JP2002009868A (ja) 情報伝送システム、情報管理装置、および設定情報配信方法
JP2014178983A (ja) 端末装置、端末制御プログラム及び端末制御方法
CN105100066A (zh) 一种WiFi风险展示方法及装置
JP2008523497A (ja) 情報をアプリケーションサービスにルーティングする方法および装置
JP4819589B2 (ja) 認証システムおよび認証方法
JP2001282652A (ja) 投影装置、表示装置、表示システム、投影プログラムを記憶した記憶媒体及び表示プログラムを記憶した記憶媒体
CN113691438B (zh) 即时消息的处理方法、装置、设备及存储介质
JP2002312320A (ja) アクセス制御システム及びアクセス制御方法
US20230188485A1 (en) Method and system for providing interoperability for rich communication suite (rcs) information sharing using plural channels
JP7210983B2 (ja) 情報処理システム、情報処理装置、情報処理方法及びプログラム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant