CN103329087A - Gui生成装置、集成电路、gui生成方法、gui生成程序 - Google Patents

Gui生成装置、集成电路、gui生成方法、gui生成程序 Download PDF

Info

Publication number
CN103329087A
CN103329087A CN201280006438XA CN201280006438A CN103329087A CN 103329087 A CN103329087 A CN 103329087A CN 201280006438X A CN201280006438X A CN 201280006438XA CN 201280006438 A CN201280006438 A CN 201280006438A CN 103329087 A CN103329087 A CN 103329087A
Authority
CN
China
Prior art keywords
equipment
gui
parts
function
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201280006438XA
Other languages
English (en)
Inventor
阿曾光洋
秦秀彦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Corp of America
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Publication of CN103329087A publication Critical patent/CN103329087A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43076Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of the same content streams on multiple devices, e.g. when family members are watching the same movie on different devices
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0486Drag-and-drop
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/52Program synchronisation; Mutual exclusion, e.g. by means of semaphores
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/01Social networking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/02Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • H04L67/025Protocols based on web technology, e.g. hypertext transfer protocol [HTTP] for remote control or remote monitoring of applications
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L9/00Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols
    • H04L9/40Network security protocols
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M3/00Automatic or semi-automatic exchanges
    • H04M3/42Systems providing special services or facilities to subscribers
    • H04M3/56Arrangements for connecting several subscribers to a common circuit, i.e. affording conference facilities
    • H04M3/568Arrangements for connecting several subscribers to a common circuit, i.e. affording conference facilities audio processing specific to telephonic conferencing, e.g. spatial distribution, mixing of participants
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M7/00Arrangements for interconnection between switching centres
    • H04M7/006Networks other than PSTN/ISDN providing telephone service, e.g. Voice over Internet Protocol (VoIP), including next generation networks with a packet-switched transport layer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4108Peripherals receiving signals from specially adapted client devices characterised by an identification number or address, e.g. local network address
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/426Internal components of the client ; Characteristics thereof
    • H04N21/42684Client identification by a unique number or address, e.g. serial number, MAC address, socket ID
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L2012/2847Home automation networks characterised by the type of home appliance used
    • H04L2012/2849Audio/video appliances
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M3/00Automatic or semi-automatic exchanges
    • H04M3/42Systems providing special services or facilities to subscribers
    • H04M3/56Arrangements for connecting several subscribers to a common circuit, i.e. affording conference facilities
    • H04M3/567Multimedia conference systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Business, Economics & Management (AREA)
  • Software Systems (AREA)
  • Human Resources & Organizations (AREA)
  • Power Engineering (AREA)
  • Health & Medical Sciences (AREA)
  • Economics (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Security & Cryptography (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • Tourism & Hospitality (AREA)
  • General Business, Economics & Management (AREA)
  • Computing Systems (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

信息终端(1t)具有:设备信息管理部(101),取得用于确定被连接于网络的第1及第2设备的设备信息;设备协作服务信息管理部(103),取得用于确定利用所述第1设备具有的第1功能和所述第2设备具有的第2功能实现的协作动作的协作信息;以及GUI生成描绘部(105),将表示利用所述设备信息确定的所述第1及第2设备的第1及第2GUI部件、和表示利用所述协作信息确定的所述协作动作的第3GUI部件关联起来进行描绘。

Description

GUI生成装置、集成电路、GUI生成方法、GUI生成程序
技术领域
本发明涉及GUI生成装置,该GUI生成装置具有:设备信息取得部,取得用于确定设备的设备信息;以及GUI描绘部,描绘GUI(Graphical UserInterface:图形用户界面)部件。
背景技术
过去有例如平板电脑终端、智能电话等GUI生成装置(例如,参照专利文献1),该GUI生成装置具有:设备信息取得部,取得用于确定设备的设备信息;以及GUI描绘部,描绘GUI(Graphical User Interface)部件。
现有技术文献
专利文献
专利文献1:日本特开2008-305103号公报
发明概要
发明要解决的问题
但是,不能实现容易利用由第1及第2设备进行的协作动作所需要的描绘,预计难以利用协作动作。
发明内容
本发明的目的在于,提供一种能够容易利用协作动作的信息终端。
用于解决问题的手段
为了达到上述目的,本发明的一个方式的GUI生成装置具有:设备信息取得部,取得用于确定被连接于网络的第1及第2设备的设备信息;协作信息取得部,取得用于确定利用所述第1设备具有的第1功能和所述第2设备具有的第2功能实现的协作动作的协作信息;以及GUI描绘部,将表示利用所述设备信息确定的所述第1及第2设备的第1及第2GUI(GraphicalUser Interface)部件、和表示利用所述协作信息确定的所述协作动作的第3GUI部件关联起来进行描绘。
另外,本发明的全盘的或者具体的方式也可以以系统、方法、集成电路、计算机程序或者存储介质的方式来实现,还可以以系统、方法、集成电路、计算机程序及存储介质的任意组合方式来实现。
发明效果
本发明能够提供容易利用协作动作的信息终端。
附图说明
图1是具有本发明的实施方式的设备协作服务显示装置的信息终端的结构图。
图2是表示本发明的实施方式的设备信息表的一例的图。
图3A是表示本发明的实施方式的设备协作服务信息表的一例的图。
图3B是表示照片浏览服务的执行动作定义文件的一例的图。
图3C是表示电源管理服务的执行动作定义文件的一例的图。
图4是表示本发明的实施方式的GUI的一例的图,该GUI用于显示设备协作服务和执行设备协作服务的设备的关系。
图5是表示本发明的实施方式的设备协作服务显示装置的GUI描绘处理的一例的流程图。
图6是表示用户操作本发明的实施方式的GUI时的、GUI控制部的处理的一例的流程图。
图7A是表示本发明的实施方式的GUI的一例的图,该GUI用于显示服务和设备的关系。
图7B是表示本发明的实施方式的GUI的一例的图,该GUI用于显示服务和设备的关系。
图8A是表示本发明的实施方式的GUI的另一例的图,该GUI用于显示服务和设备的关系。
图8B是表示本发明的实施方式的GUI的另一例的图,该GUI用于显示服务和设备的关系。
图9A是表示GUI的图。
图9B是表示GUI的图。
图10是表示履历信息存储部等的图。
图11是表示GUI的图。
图12是表示用户信息存储部等的图。
图13A是表示GUI的图。
图13B是表示GUI的图。
图13C是表示GUI的图。
图14是表示第1、第2房间的图。
图15是表示本系统的图。
图16是表示GUI的图。
图17是表示GUI的图。
图18是表示信息终端的图。
具体实施方式
(作为本发明的基础的见解)
在本技术中,以容易理解的方式对用户提供通过将连接于网络的各种设备的功能相结合而实现的各种设备协作服务。由此,提供用户能够容易选择并执行设备的功能的图形用户界面(GUI:Graphical User Interface)技术。
发明者们在进行平板电脑终端等信息终端的研究开发的过程中,发现有可能产生如下所述的问题。
即,近年来将电视机或录制设备等AV(Audio Visual:音频视频)设备、平板电脑或智能电话等便携式信息终端、个人电脑或打印机等各种数字设备相互进行网络连接。并且,提出了通过使这些各种设备的功能相互协作而实现的设备协作服务。
例如,在规定设备的相互连接方式的DLNA(Digital Living NetworkAlliance:数字生活网络联盟)标准中,利用网络连接的便携式信息终端选择在录制设备中保存的动态图像内容。并且,能够利用通过网络连接的TV再现所选择的动态图像内容。
但是,在这种设备协作服务中是多台设备协作进行动作。因此,这多台设备之间的关系变复杂,设备协作服务提供的功能增多。因此,对于用户而言有时难以容易地理解所能够利用的功能。
因此,期望实现能够以容易理解的方式对用户提供设备协作服务、而且用户能够容易利用设备协作服务的新型GUI。
与此相对,作为现有技术的情况,具有:内容显示区域,用于显示设备保存的内容的信息;操作显示区域,用于显示对内容执行的操作的信息;以及设备显示区域,用于显示执行操作的对象的信息。并且,使用设备控制终端的操作部选择在各显示区域显示的信息。在进行该选择时,由通过广域网而连接的设备提供的服务作为候选对象被显示于设备显示区域。存在以上述内容为特征的现有技术(例如,参照专利文献1)。
但是,在前述的现有技术中,仅限于在三台设备进行协作的情况下,以容易理解的方式对用户提供用于操作设备具有的内容的设备协作服务。因此,难以应对不仅是对内容进行操作、而且是从其它设备利用某台设备的功能、或者四台以上设备进行协作动作时的设备协作服务。
例如,未来可以考虑到不仅AV设备,而且新型的空调机或电冰箱等白色家电产品也要连接网络。因此,可以预计到设备间的协作将更加复杂、设备协作服务的类型增多。但是,在现有技术的GUI中,很难以容易理解的方式对用户提供未来增加的这种设备协作服务,而且难以容易利用。
为了解决这种问题,本发明的一个方式的GUI生成装置(参照后述的图1所示的信息终端1t)具有:设备信息取得部(设备信息管理部101),取得用于确定被连接于网络的第1及第2设备的设备信息(图2的设备信息表200);协作信息取得部(设备协作服务信息管理部103),取得用于确定利用所述第1设备具有的第1功能和所述第2设备具有的第2功能实现的协作动作的协作信息(图3A的设备协作服务信息表300);以及GUI描绘部(GUI生成描绘部105),将表示利用所述设备信息确定的所述第1及第2设备的第1及第2GUI(Graphical User Interface)部件(图4的节点型GUI部件402、403)、和表示利用所述协作信息确定的所述协作动作的第3GUI部件(分组节点型GUI部件401)关联起来进行描绘。
由此,在所描绘并显示的各GUI部件中包含被相互关联起来的第1GUI部件~第3GUI部件。由此,能够进行使协作动作容易被利用所需要的显示,并且使容易利用协作动作。
另外,例如所述协作信息(设备协作服务信息表300)确定用于实现所述协作动作的所述第1及第2功能,所述第1及第2设备是指利用所述设备信息来表示具有所确定的所述第1功能的设备(例如图2的录制设备)、和利用所述设备信息来表示具有所确定的所述第2功能的设备(电视机)。
由此,即使是存在具有第1及第2功能的一方的两台设备和具有相同的第1及第2功能的另一方的两台设备时,也能够进行恰当的动作。即,对于任意两台设备,都能够描绘出这两台设备中的第1设备的第1GUI部件、第2设备的第2GUI部件、和与这些第1及第2GUI部件相关联的第3GUI部件。因此,对于任意两台设备都能够进行恰当的描绘,并且可靠地进行恰当的描绘。
例如,也可以是,GUI生成装置具有:显示装置(显示装置106),显示包含由所述GUI描绘部描绘出的所述第1~第3GUI部件的GUI(参照GUI4001);输入装置(输入装置107),受理用户对包含于所述GUI中的GUI部件进行的操作;以及GUI控制部(GUI控制部108),按照通过所述输入装置而受理的所述操作,执行与所述用户选择的所述GUI部件相关联的GUI动作。
由此,通过进行操作,执行用于使进行上述的协作动作的GUI动作,并进行协作动作。因此,通过这种简单的GUI生成装置的操作即可实现进行协作动作所需要的操作,所需要的操作是通过简单的操作来完成的。
例如,也可以是,所述GUI描绘部描绘将所述第1GUI部件和所述第2GUI部件连接的直线或者曲线的线(参照图4的线8L、图16的线16043等)。
因此,通过描绘并显示上述的线,能够表示出对应关系,并且对应关系比较容易理解。
例如,也可以是,所述GUI描绘部描绘表示被实施了所述输入装置受理的所述操作的所述GUI部件的信息,在受理后,以与受理前描绘该信息的方式不同的方式来描绘该信息。
例如,也可以是,所述GUI描绘部描绘表示所述第1及第2设备的所述第1及第2GUI部件,并且将表示包含这些所述第1及第2GUI部件的组的分组节点型GUI部件,描绘为表示所述协作动作的所述第3GUI部件。
例如,也可以是,在通过所述输入装置受理了用户对所描绘的所述第3GUI部件(图7A的分组节点型GUI部件701)、以及对表示一台设备的第4GUI部件(节点型GUI部件702)进行的拖放操作(操作702m)的情况下,所述GUI控制部将所述第4GUI部件所表示的所述一台设备(客厅的照明)登记为、在执行被实施了所述拖放操作之前的所述第3GUI部件所表示的所述协作动作(电源管理服务)时进行动作的一台设备。
因此,能够容易进行登记。
例如,也可以是,所述GUI生成装置具有履历存储部(履历信息存储部109b),存储用于确定所述协作动作被实施的次数的数据(图10的数据109x),在利用所存储的所述数据确定的所述次数多于阈值的情况下,所述GUI描绘部以适合于进行操作的次数比较多的形式(参照图11的按钮型GUI部件703m)进行描绘,在所述次数少于阈值的情况下,所述GUI描绘部以适合于进行操作的次数比较少的形式(参照按钮型GUI部件703n)进行描绘。
由此,在任何情况下都能够以合适的形式进行描绘,能够可靠地实现合适形式的描绘。
另外,上述的阈值例如可以是通过实验确定的比较合适的值的阈值等。
例如,也可以是,所述GUI生成装置具有存储部(用户信息存储部109b),存储用于确定该GUI生成装置的用户持有的设备的数据(图12的数据109x),当在执行所述协作动作时使用利用所述数据确定的所持有的所述设备具有的功能的情况下,所述GUI描绘部以适合于进行操作的次数比较多的形式进行描绘,在不使用所述功能的情况下,所述GUI描绘部以适合于进行操作的次数比较少的形式进行描绘。
由此,在任何情况下都能够以合适的形式进行描绘,能够可靠地实现合适形式的描绘。
例如,也可以是,所述存储部存储多个所述数据(信息109n),各个所述数据用于确定多个用户中该数据的所述用户持有的设备,所述GUI生成装置具有确定部(用户确定部109a),从所述多个用户中确定所述GUI所提示的用户,所述GUI描绘部根据所确定的所述用户的所述数据,切换适合于所述次数较多的形式和适合于所述次数较少的所述形式。
例如,也可以是,所述设备信息取得部以无线通信与位于该GUI生成装置的附近区域(图14的第1房间1H1a)内的包括所述第1及第2设备的两台以上设备进行通信,所述设备信息用于确定所述附近区域内的这两台以上设备,但不确定位于其它区域(第2房间1H1b)的设备,所述GUI描绘部仅描绘表示所述附近区域内的所述两台以上设备的两个以上的GUI部件,不描绘所述其它区域的所述设备的GUI部件。
例如,也可以是,包含该GUI生成装置的系统(系统1s)包括所述第1及第2设备、和第3设备,所述第1及第2设备设于第1家(图15的第1家1H1)中,所述第3设备设于第2家(第2家1H2)中,所述协作动作是利用所述第1家的所述第1设备和所述第2设备具有的所述第1及第2功能、该第2家的所述第3设备具有的与所述第2功能相同的功能即第3功能实现的,所述GUI描绘部也描绘表示该第3设备的GUI部件,所述GUI控制部使所述第1和第2设备分别执行所述第1和第2动作、并且使所述第3设备执行所述第3动作,作为在受理了所述操作时执行的所述GUI动作。
另外,例如也可以是,第1家的第1及第2设备连接第1家中的第1网络,第2家的第3设备连接另外的第2网络。
另外,也可以是,第1家的第1及第2设备不在远离该GUI生成装置的远程位置,第2家的第3设备位于远程位置。
例如,也可以是,在该GUI生成装置具有所述第2功能的情况下,该GUI生成装置在作为所述第2设备执行所述协作动作时,执行基于所述第2功能的动作。
例如,也可以是,所述第3GUI部件(参照图4的分组节点型GUI部件401等)与将所述第1GUI部件(节点型GUI部件402)和所述第2GUI部件(节点型GUI部件402)连接的所述线(线8L)相关联。
例如,也可以是,所述第3GUI部件(例如GUI部件1603)被描绘在所述线(线1604)上。
也可以是,所述线(线1604)是表示在利用所述第1GUI部件(GUI部件1601)所表示的所述第1设备和利用所述第2GUI部件(GUI部件1602)所表示的所述第2设备之间进行所述协作动作时的、数据的传输方向的箭头线(线1604)。
由此,示出了协作动作中的数据的传输方向,能够实现比较容易理解协作动作的显示。
也可以是,所述第3GUI部件被描绘在所述第1GUI部件(GUI部件1601)和所述第2GUI部件(GUI部件1602)之间。
这样,本技术是解决前述的现有技术问题的技术。即,根据本技术能够提供这样的新型GUI:在多台设备协作实现的设备协作服务中,以容易理解的方式对用户提示设备协作服务、这些设备之间的关系,用户能够容易利用设备协作服务。
另外,为了解决前述的现有问题,本发明的一个方式的GUI生成装置具有:设备信息取得部,取得与被连接于网络的设备相关的设备信息;协作信息取得部,取得用于确定功能的协作信息,该功能用于实现在执行用于实现协作服务的协作动作时所进行的多个动作中的各个动作;以及GUI生成描绘部,将包含利用所取得的该设备的所述设备信息示出具有所确定的各个功能所述的所述设备而构成的两台以上的所述设备、与所述协作服务的关系,描绘为GUI(Graphical User Interface),并且描绘包括表示所述协作服务的节点型GUI部件、以及包含表示所述两台以上设备中的所述各台设备的节点型GUI部件而构成的、表示所述设备的被连接的两个以上的所述节点型GUI部件在内的所述GUI。
即,所描绘的GUI包括表示协作服务的节点型GUI部件和表示设备的两个以上的节点型GUI部件(GUI部件)。并且,例如在表示设备的被连接的两个以上的节点型GUI部件中,在所包含的节点型GUI部件的个数是两个的情况下,这两个GUI部件被连接,在个数是n个、且n≧3的情况下,所连接的n-1个节点型GUI部件中的至少一个GUI部件和剩余的一个GUI部件被连接。
根据这种结构,能够将执行设备协作服务的多台设备与设备协作服务的关系GUI显示为节点型GUI部件之间的关系图。因此,利用设备协作服务的用户能够根据容易理解的GUI显示来确认设备协作服务与相关联的多台设备的关系。由此,能够容易通过节点型GUI部件的操作来执行设备协作服务。
根据本技术的设备协作服务显示装置,用户能够在视觉上将执行设备协作服务的多台设备与设备协作服务的关系确认为节点型GUI部件之间的关系图。在进行了这种确认的基础上,通过操作节点型GUI部件,能够容易执行设备协作服务。
另外,这些全盘的或者具体的方式也可以以系统、方法、集成电路、计算机程序或者存储介质的方式来实现,还可以以系统、方法、集成电路、计算机程序或者存储介质的任意组合方式来实现。
下面,参照附图详细说明本发明的实施方式。
另外,下面说明的实施方式均用于示出本发明的一个具体示例。在下面的实施方式中示出的数值、形状、材料、构成要素、构成要素的配置位置及连接方式、步骤、步骤的顺序等仅是一例,其主旨不是限定本发明。因此,关于下面的实施方式的构成要素中、没有在表示最上位概念的独立权利要求中记载的构成要素,仅是作为任意的构成要素进行说明的。
本GUI生成装置(信息终端1t)具有:设备信息管理部101,取得与被连接于网络(例如图15的网络1n)的设备1e相关的设备信息200s(图1);设备协作服务信息管理部103,取得用于确定功能(图3A的第2行中的照片数据管理功能、照片显示功能等)的协作信息300s(图3A、图1),该功能用于实现在执行用于实现协作服务的协作动作时所进行的多个动作(例如,图15的动作1e1p、1e2p)中的各个动作;以及GUI生成描绘部105,将包含利用所取得的该设备的设备信息200s示出具有所确定的各个所述功能(功能300F)的设备(图15的设备(录制设备)1e1、设备(电视机)1e2)而构成的两台以上设备(设备1e1、1e2)、与协作服务(照片浏览服务)的关系(图4的GUI8x的关系),描绘为GUI(Graphical UserInterface)(GUI8x、GUI(画面)106s),并且描绘包括表示该协作服务的节点型GUI部件(图4的分组节点型GUI部件8M)、以及包含表示所述两台以上设备(设备1e1、1e2)中的各台设备的节点型GUI部件(GUI部件8N)而构成的用线8L连接的两个以上节点型GUI部件8N在内的GUI(GUI8x、GUI(画面)106s)。
即,在表示设备的被连接的两个以上的节点型GUI部件8N中,在所包含的节点型GUI部件的个数是两个的情况下,这两个GUI部件被连接。并且,在个数是n个、且n≧3的情况下,所连接的n-1个节点型GUI部件中的至少一个GUI部件和剩余的一个GUI部件被连接。
另外,例如也可以是,包含该信息终端1t的系统1s(图15)包括分别作为设备1e的第1、第2和第3设备(图15的设备1e1、1e2、1e3)。
也可以是,作为录制设备等的第1设备1e1和作为电视机等的第2设备1e2分别设于第1家1H1中(图15)。
关于作为电视机等的第3设备1e3也可以按照如下所述进行设置。
即,也可以设于第2家1H2中。
另外,也可以是,在第1家1H1的第1设备1e1和第2设备1e2分别进行第1动作1e1p和第2动作1e2p时,该第3设备1e3进行与第2动作1e2p(例如由第1设备1e1输出的影像的显示)相同的动作即第3动作1e3p(相同的影像的显示),由此实现这些第1~第3设备1e1~1e3的协作动作。
也可以是,表示该第3设备1e3的节点型GUI部件8N(图4)是由GUI生成描绘部105描绘出来的,并通过显示装置106进行显示。
另外,也可以是,GUI控制部108使第1和第2设备1e1、1e2分别执行第1和第2动作1e1p、1e2p、并且使第3设备1e3执行前述的第3动作1e3p,作为在受理了用户进行的触摸操作等操作404M(图4)时所执行的GUI动作。
由此,即使是在父母家等第2家1H2中也能够显示相同的影像,无论在哪个家(第1、第2家1H1、1H2)中都能够进行恰当的动作。由此,能够更可靠地进行恰当的动作。
而且,在第2家1H2中不需要父母等进行的操作等,仅在子女家等第1家1H1中利用信息终端1t进行上述的处理即可,能够避免执行困难的操作,所需要的操作通过简单的操作即可完成。
(实施方式)
图1是本发明的实施方式的设备协作服务显示装置(信息终端)的结构图。
在图1中,设备信息管理部101管理在设备信息表102中定义(存储)的设备信息(数据200s),设备协作服务信息管理部103管理在设备协作服务信息管理表104中定义(存储)的设备协作服务信息(数据300s)。
图2是表示作为设备信息表102的一例的设备信息表200的图。
在设备信息表200中,作为设备信息定义了设备ID(Identifier:识别符)、设备的IP(Internet Protocol:互联网协议)地址、设备名称、设备功能(图2的表的第2列~第5列)。
即,也可以是,例如通过设备信息表200存储有两个以上的数据200s(图2的表的第2行~第5行的数据200s、第6行~第8行的数据200s……)。
另外,也可以是,各个数据200s包括该数据200s的设备(例如参照后述的图15的设备1e)的设备ID(第1数据)200a、IP地址(第2数据)200b、设备名称(第3数据)200c、设备功能(第4数据200d)中一项以上的内容。
另外,也可以是,所包含的第4数据200d的个数如图2的第2行~第5行的数据200s、第6行~第8行的数据200s所示,例如是两个以上。
在包含于各个数据200s的这些设备ID等中,设备ID是用于确定被连接于网络的设备(参照图15的设备1e)的唯一的识别符。
另外,上述的网络的一部分或者全部例如是无线LAN(Local AreaNetwork:局域网)、bluetooth(蓝牙)、NFC(Near Field Communication:近场通信)等基于无线通信的网络。
另外,关于设备ID(图2的表的第1列),例如能够使用该设备ID的设备的MAC(Media Access Control:介质访问控制)地址、该设备的按照网络相互连接标准即UPnP(Universal Plug and Play:通用即插即用)标准规定的识别符UUID(Universal Unique Identifier:通用唯一标识符)等。
另外,设备名称(第3列)是指该设备(设备1e)的名字。
另外,例如利用图2的第2~第5行中的设备ID“2001”表示的设备的设备名称是“客厅的录制设备”。
另外,设备功能(第4列)是指用于确定能够通过网络使用的、包含该设备功能的设备信息(数据200s)的设备的功能的数据。
例如,在图2的第2行~第5行利用设备ID“2001”示出的录制设备(客厅的录制设备)的功能中,定义了“录制功能”(第2行)、“动态图像数据管理功能”(第3行)、“照片数据管理功能”(第4行)、“电源控制功能”(第5行)等。
另外,该信息终端(设备协作服务显示装置)1t例如是第9行中的数据200s的设备即“平板电脑”。
图3A是表示作为设备协作服务信息表104的一例的设备协作服务信息表300的图。
在该设备协作服务信息表300中,作为设备协作服务信息(数据300s)定义了服务ID、服务名称、协作关系、服务URI(Uniform Resource Identifier:统一资源标识符)(第1列~第4列)。
即,也可以是,通过设备协作服务信息表300存储有一个以上的数据300s(图3A的表的第2行、第3行……)。
也可以是,各个数据300s包括该数据300s的服务(协作服务、协作动作)中的服务ID(第1数据)300a、服务名称(第2数据)300b、协作关系(第3数据)300c、服务URI(第4数据)300d。
设备协作服务信息表300的服务ID(例如第2行的“3001”)是用于管理包含该服务ID的数据300s(该数据300s的设备协作服务(照片浏览服务))的识别符。
服务名称(第2列)是容易理解地对设备协作服务进行说明的名称。
另外,协作关系(第3列)例如表示为了执行包含该协作关系的数据300s的设备协作服务而需要的两台以上设备的功能之间的连接关系。
例如,利用服务ID“3001”(第2行)定义的“照片浏览服务”的协作关系是“服务执行功能-(照片数据管理功能、照片显示功能)”(“照片显示功能-照片数据管理功能”)。
其中,符号“-”表示具有在该符号“-”的两侧示出的各功能的设备被相互连接。
另外,存在使用符号“()”记述的“服务执行功能-(照片数据管理功能、照片显示功能)”格式、即“功能A-(功能B、功能C)”格式。该格式表示具有功能A的设备与具有功能B和功能C的设备分别连接。
另外,关于协作关系说明了设备的功能的连接关系,但是协作关系的数据除了表示设备的功能的连接关系之外,还能够理解为表示设备的两种以上的功能与基于这些功能的设备协作服务的连接关系。
例如,协作关系的数据也能够表示为“服务执行功能-(照片数据管理服务、照片显示功能)”(第2行)。另外,上述的“照片数据管理服务”在图3中表示“照片数据管理功能”。在这种情况下,服务执行功能是指多台设备相互协作执行的设备协作服务中的一种功能,表示与具有管理照片数据的功能的“照片数据管理服务”等连接之意。
另外,设备协作服务信息管理表300的服务URI(第4列)表示执行动作定义文件的配置位置(http://192.168.1.11/photoService),该执行动作定义文件记述了定义有该服务URI的数据300s的设备协作服务(例如“照片浏览服务”)的具体执行动作。
在此,执行动作定义文件是以具有图2所示的设备功能中的服务执行功能的设备(例如图2的设备ID“2003”(第9行)的平板电脑)所能够解释的形式记述的。
例如,执行动作定义文件是使用XML(Extensible Markup Language:可扩展标记语言)、HTML(HyperText Markup Language:超文本标记语言)等标记语言、或Java(注册商标)Script等程序语言等记述的。
另外,文件的配置位置是以URI(Uniform Resource Identifier)形式记述的。
另外,也可以是,执行动作定义文件例如是在图15所示的9服务器1x中存储的文件1xF。
图3B、图3C分别是表示作为一例的、照片浏览服务和电源管理服务的执行动作定义文件301、302(文件1xF)的图。
在执行动作定义文件301、302中,在Service(服务)标签中定义服务ID和服务名称。并且,在action(动作)标签中定义用于规定执行动作的函数名称(function属性)和功能名称(name属性)。并且,在Script(脚本)标签中定义安装了该函数名称的函数的程序的文件名等。
以上使用图2和图3A~图3C详细说明了设备信息表102和设备协作服务信息管理表104。下面,返回到图1所示的结构的说明。
在图1中,GUI生成描绘部105从设备协作服务信息管理部103取得设备协作服务信息(数据300s)。
并且,GUI生成描绘部105对所取得的每个设备协作服务信息(数据300s)进行如下的处理。即,存在根据该设备协作服务信息的协作关系定义(图3A的第3数据300c)所确定的、为了执行该设备协作服务信息的设备协作服务而需要的两个以上的设备信息(数据200s)。在该处理中,从设备信息管理部101取得这两个以上的设备信息。
然后,GUI生成描绘部105将所取得的设备协作服务信息(数据300s)及设备信息(数据200s),描绘为节点型GUI部件(参照后述的图4的节点型GUI部件8N、分组节点型GUI部件8M)。
另外,更具体地讲,GUI生成描绘部105,对于该设备协作服务信息的设备协作服务和执行该设备协作服务的两台以上设备之间的关系,利用直线或曲线等将多个节点型GUI部件之间连接起来并进行描绘(参照图4的线8L等)。
图4是表示GUI生成描绘部105根据利用图3A的服务ID“3001”示出的设备协作服务信息(第2行的数据300s)而描绘的GUI(GUI4001)的一例的图。
在图4中,表示执行照片浏览服务(图3A的第2行)的设备的设备名称即客厅的TV(图2的第6~8行)的节点型GUI部件402、和表示客厅的录制设备(图2的第2行~第5行)的节点型GUI部件403之间,通过曲线(线8L)被连接起来进行描绘,表述这两台设备之间的连接关系。
另外,表示照片浏览服务的节点(分组节点型GUI部件401)将节点型GUI部件402和节点型GUI部件403分组为一个组。即,利用该分组节点型GUI部件401来表示包含另两个节点型GUI部件402和节点型GUI部件403的组。
另外,以后把这样将节点型GUI部件分组化的节点型GUI部件称为分组节点型GUI部件。
另外,在分组节点型GUI部件401中描绘了用于执行照片浏览服务所提供的功能的按钮型GUI部件404。
在此,对按钮型GUI部件404描绘的字符串“用TV欣赏照片”,是从图3B的执行动作定义文件301的Action标签的name属性取得并设定的。
另外,在用户(参照图15的用户1u1A)选择了按钮型GUI部件404时执行的功能,是利用从图3B的执行动作定义文件301的Action标签的function属性取得的函数名称定义的。
如上所述,GUI生成描绘部105能够将设备协作服务与执行设备协作服务的一台以上设备的关系描绘为节点型GUI部件(参照分组节点型GUI部件401等),并描绘使用户选择设备协作服务所提供的功能并加以执行的按钮型GUI部件(按钮型GUI部件404)。
然后,在图1中,显示装置106在液晶显示器或触摸板式显示器等的画面上显示由GUI生成描绘部105描绘的GUI(该GUI的图像)。
输入装置107是指鼠标、触摸板或键盘等输入装置,将用于操作由GUI生成描绘部105描绘的GUI的用户操作(图4的操作404M等)通知GUI控制部108。
从输入装置107将针对由GUI生成描绘部105描绘的GUI的用户操作通知GUI控制部108。GUI控制部108在接收到该通知后,确定被实施了所通知的操作的GUI部件(节点型GUI部件或按钮型GUI部件),并执行对所确定的GUI分配的功能。
以上说明了本实施方式的设备协作服务显示装置的结构。下面,使用图5和图6说明本实施方式的设备协作服务显示装置的处理流程。
图5是表示本发明的实施方式的设备协作服务显示装置的GUI描绘处理的一例的流程图。
在设备协作服务显示装置的描绘处理开始后,在图5的步骤S501,GUI生成描绘部105从设备协作服务信息管理部103取得设备协作服务信息(参照图3A的数据300s)。
下面,作为说明用的一例,对从由设备协作服务信息管理部103管理的图3A的设备协作服务信息表300取得服务ID“3001”、服务名称“照片浏览服务”的服务信息的情况进行说明。
然后在步骤S502,取得了图3A的服务ID“3001”的服务信息(第2行的数据300s)的GUI生成描绘部105,从设备信息管理部101取得与服务ID“3001”相关的设备信息(参照图2的数据200s)。
此时,设备信息管理部101根据对服务ID“3001”定义的“协作功能”,从图2的设备信息表200中抽取与由GUI生成描绘部105通知的服务ID“3001”相关的设备(该设备的信息),并通知GUI生成描绘部105。
具体地讲,由于作为服务ID“3001”的“协作功能”,示出了服务执行功能、照片数据管理功能、照片数据显示功能,因而从图2的设备信息表200中进行如下的抽取处理。在该抽取中,抽取这些功能中的各个功能被定义为“设备功能”(图2的第4列)的设备ID“2003”(第9行)、设备ID“2001”(第2行~第5行)、设备ID“2002”(第6行~第8行)的设备(设备的数据200s)。并且,将所抽取的各个数据200s通知GUI生成描绘部105。
然后在步骤S503,GUI生成描绘部105根据所取得的设备协作服务信息(数据300s)和设备信息(数据200s),描绘前述的图4所示的GUI。
另外,在图4中,为了将一次描绘的设备的数量限制为最小必要数量,对于具有本实施方式的设备协作服务显示装置的设备(用户直接操作的设备),没有将设备ID“2003”的“平板电脑”显示为节点型GUI部件,但也可以显示为节点型GUI部件。
以上,使用图5说明了本发明的实施方式的设备协作服务显示装置的GUI描绘处理流程。
图6是用户操作了图4的GUI时的、GUI控制部108的处理的流程图。
在图6中,在用户通过输入装置107操作了显示于显示装置106的GUI后,在步骤S601,GUI控制部108确定被实施了该操作的GUI部件。
另外,在此作为说明用的一例,假设显示装置106是包括作为输入装置107的触摸板的触摸板显示器等。
在用户触摸操作该触摸板显示器后,输入装置107将用户触摸过的触摸板上的坐标(X、Y)通知GUI控制部108。GUI控制部108确定由GUI生成描绘部105描绘的GUI中与被通知的坐标(X、Y)重合的GUI部件(节点型GUI部件或按钮型GUI部件)。另外,作为在进行该确定时用于判定重合的信息,需要GUI部件的描绘坐标位置或描绘范围(宽或高)的信息,假设在GUI生成描绘部105描绘GUI时保存了该信息。
在确定出用户操作的GUI部件后,在步骤S602,GUI控制部108执行与所确定的GUI部件相关联的GUI动作。例如,在图4中,作为在用户对按钮型GUI部件404进行了选择操作时,作为与按钮型GUI部件404相关联的GUI动作,执行利用服务ID“3001”(图3A的第2行)的服务URI(第2行第4列)所指定的设备协作服务。
具体地讲,利用服务ID“3001”的服务URI指定的设备协作服务,是利用图3B的执行动作定义文件301定义的。因此,在选择操作按钮型GUI部件404时图3B的执行动作定义文件301的Action标签的function属性为“showPhotoOnTV”的函数的动作,作为GUI动作被执行。
另外,关于GUI动作与GUI部件的关联性,假设在GUI生成描绘部105描绘GUI时保存该关联性的分配关系。
另外,作为与用户选择的GUI部件相关联的GUI动作,不仅仅是设备协作服务的执行动作。例如,也可以是进行指示,以使得仅描绘与所选择的GUI部件相关的信息,或进行强调描绘(改变颜色、或将线条加粗、变更线条类型等进行描绘)。在步骤S602,GUI控制部108对GUI生成描绘部105进行执行该指示的动作等。
另外,用户不仅对节点型GUI部件或分组节点型GUI部件进行选择操作,也能够对分组节点型GUI部件(参照图7A的分组节点型GUI部件701)进行拖放操作(参照操作702m)。
此时,也可以是,在步骤S601,GUI控制部108分别确定被拖拽(drag)的GUI部件(节点型GUI部件702)、和作为放置(drop)目的地的(分组节点型GUI部件701)。由此,GUI控制部108能够执行对作为放置目的地的GUI部件(分组节点型GUI部件701)分配的GUI动作。
在此,能够预先定义对作为放置目的地的GUI部件分配的GUI动作。另外,例如所执行的分组节点型GUI部件701的GUI动作,是指例如追加在包含于该分组节点型GUI部件701的组中的各个节点型GUI部件中、被向该分组节点型GUI部件701拖拽的节点型GUI部件702的动作等。
例如,能够将图3C的执行动作定义文件302的Action标签的function属性为“addDevice”的函数处理分配为被放置时的GUI动作。并且,能够将节点型GUI部件被拖放到分组节点型GUI部件的区域外部时的GUI动作、分配为Action标签的function属性为“removeDevice”的函数处理。
使用图7来说明具体示例。
图7A是表示GUI7001的图。
图7B是表示GUI7002的图。
在图7A、图7B中,分别示出了GUI生成描绘部105描绘了利用设备信息表200示出的电源管理服务(参照图3A的第4行中的服务ID“3003”)和具有电源控制功能的设备(参照图2中的设备ID“2001”、“2002”、“2004”)的状态。
另外,在图7A的GUI7001中,在表示“电源管理服务”的分组节点型GUI部件701中不包含表示“客厅的照明”的节点型GUI部件702。因此,“客厅的照明”不是基于对按钮型GUI部件(703、704)的用户操作的“电源一并接通”或“电源一并断开”的对象。
用户从这种未被包含的位置拖拽节点型GUI部件702并放置在分组节点型GUI部件701的位置(操作702m)。然后,GUI控制部108执行作为放置目的地的分组节点型GUI部件701的GUI动作,使成为图7B的GUI7002的状态。此时,“客厅的照明”成为“电源管理服务”的“电源一并接通”或“电源一并断开”操作的对象。
即,作为电源的接通断开的切换,有在按钮型GUI部件703中向电源断开的切换、和在按钮型GUI部件704中向电源接通的切换。
并且,在描绘图7A的GUI7002时,进行“客厅的TV”和“客厅的录制设备”这两台设备各自的切换。另一方面,在进行了上述的操作702m后,在描绘图7B的GUI7002时,进行这两台设备、以及在操作702m中被拖拽的节点型GUI部件702的“客厅的照明”设备这三台设备各自的切换。
根据如上所述的拖放操作,也能够进行如图8所示的用户操作。
图8A是表示GUI8001的图。
图8B是表示GUI8002的图。
在图8A、图8B的GUI8001和GUI8002的各个GUI中,示出了利用位于自家住宅(参照图15的第1家1H1)的节点型GUI部件702表示的“客厅的TV”设备(参照设备1e2)进行所浏览的照片的显示的服务即“照片浏览服务”(分组节点型GUI部件401)。另外,在各个GUI中,示出了通过因特网(例如图15的网络1n)与信息终端1t连接的设备(参照第2家1H2的设备1e(设备1e3))的“父母家的设备”的节点型GUI部件801。所示出的这些分组节点型GUI部件401和节点型GUI部件801分别被描绘在分组节点型GUI部件中(401、802)。
在此,在图8A的GUI8001中,用户从“父母家的设备”(节点型GUI部件801)所处的、第2家1H2的分组节点型GUI部件802所处的位置进行拖放操作。在该拖放操作中,将利用该节点型GUI部件801表示的TV的显示物(图标等)拖放操作到自家住宅的“照片浏览服务”(分组节点型GUI部件401)的位置(参照图7A的操作702m)。另外,所显示的GUI106S(参照图8A、图8B(图1的GUI106s))成为图8B的GUI8002。由此,能够使父母家(第2家1H2)的TV(设备1e3)参加到在照片浏览服务中利用的各台设备中。即,能够使父母家的TV包含在显示照片的一台以上的设备中。
即,用户在进行了该参加操作后,仅操作按钮型GUI部件404(“用TV欣赏照片”),即可在父母家的“TV”(设备1e3)中显示在自家住宅的“客厅的录制设备”(参照第1家1H1中的设备1e1(图15)、节点型GUI部件403)中保存的照片。
即,例如无论作为第1家1H1的用户1u1A的子女的父母等是否习惯设备1e3的操作,第2家1H2的用户1u2均可如下所示。即,仅通过利用作为子女的用户1u1A的第1家1H1的信息终端1t进行上述的处理,即可利用第2家1H2的设备1e3显示与在第1家1H1中显示的照片相同的照片。由此,能够在更多的家庭中进行显示照片的恰当动作,能够更可靠地进行恰当的动作。
根据这种结构,能够将执行设备协作服务的多台设备与该设备协作服务之间的关系GUI显示为分组节点型GUI部件或节点型GUI部件间的关系图。
因此,利用设备协作服务的用户能够通过容易理解的GUI显示来确认设备协作服务和与该设备协作服务相关的多台设备的关系。并且,能够容易通过按钮型GUI部件的操作来执行设备协作服务。
另外,作为分组节点型GUI部件或用节点型GUI部件表示的属性值,将设备或设备协作服务作为一例进行了说明。另一方面,所示出的属性值在图8A、图8B的图示中可以是设备的“设置位置”,例如表示为“父母家的设备”,也可以是持有设备或服务的“人”等。
例如,如果将设置位置作为分组节点型GUI部件所表示的属性值,则仅通过将未定义设置位置的设备拖放操作到该分组节点型GUI部件中,用户即可定义设置位置。
另外,如果将持有设备或服务的人作为节点型GUI部件所表示的属性值,则通过对该节点型GUI部件的选择操作,即可仅选定利用节点型GUI部件表示的“人”所持有的设备或服务并进行显示。
另外,作为“设置位置”或“人”等的属性值,可以在图2的设备信息表或图3的设备协作服务信息表中定义预先确定的属性值,也可以根据用户操作动态地追加属性值。
另外,在本实施方式中说明了设备协作服务信息管理部103管理的设备协作服务信息、或设备信息管理部101管理的设备信息,被预先保存在设备协作服务信息管理表104或设备信息表102中的情况。另一方面,也可以是,通过从连接于网络的设备中检索设备协作服务信息或设备信息,动态地进行追加管理。
图9A是表示GUI7001a的图。
所描绘的GUI例如也可以是如图9A所示的GUI7001a。
该GUI7001a包括表示设备(“客厅的TV”、“客厅的录制设备”)的两个以上的节点型GUI部件(节点型GUI部件701a、701b)。
也可以对这两个以上的节点型GUI部件分别进行触摸操作(操作7t1、7t2)。
也可以是,在进行各个操作后,描绘包含被实施了这些操作的两个以上的节点型GUI部件(节点型GUI部件701a、701b)的分组节点型GUI部件701。
另外,也可以是,例如判定这两个以上的节点型GUI部件的设备是否是进行协作动作的两台以上的设备,仅在判定为是进行协作动作的两台以上的设备的情况下,进行分组节点型GUI部件701的描绘,在判定为不是进行协作动作的两台以上的设备的情况下,不进行分组节点型GUI部件701的描绘。
图9B是表示GUI7001a的图。
也可以进行用于确定区域7mR的操作7m,该区域7mR包含两个以上的节点型GUI部件(节点型GUI部件701a、701b)的位置。
也可以是,在进行该操作7m后,在通过该操作7m而确定的区域7mR中描绘包含该位置的、并且包含这两个以上的节点型GUI部件的分组节点型GUI部件701。
另外,也可以是,如图9B所示,例如操作7m是使用户1u1A的手指的位置在该区域7mR的外周移动的操作等。
另外,也可以是,上述的分组节点型GUI部件701的描绘仅在如下情况时进行。
即,存在包括该分组节点型GUI部件701中所包含的两个以上的节点型GUI部件(节点型GUI部件701a、701b)各自的设备而构成的设备的组合。上述的描绘也可以仅在该组合是包含利用协作信息300a(图3A)的第3数据300c所确定的各种功能的设备的组合时进行。
图10是表示履历信息存储部109b等的图。
信息终端1t还可以具有履历信息存储部109b。
也可以是,由该履历信息存储部109b存储用于确定协作动作(例如图10中的第1协作动作)的信息109n(包含信息109n的数据109x)。
也可以是,推定为被提示所描绘的GUI(参照图4的GUI8x等)的用户(图15的用户1u1A)执行某个协作动作的概率,高于执行其它协作动作(例如图10中的第4协作动作)的概率。也可以是,所确定的协作动作是概率较高的上述的某个协作动作。
即,所确定的被执行的概率较高的协作动作例如是过去该用户执行过的协作动作等。
也可以是,描绘所确定的协作动作的GUI8x(图4),不描绘其它协作动作的GUI8x。
另外,具体地讲,如前面所述,信息终端1t例如是平板电脑。
即,可以考虑信息终端1t被利用信息终端1t的第1家1H1(图15)的家庭成员中的多个用户1u1(图15)使用。
换言之,信息终端1t例如也可以是仅由一人用户使用的、并非便携电话等信息终端的、信息终端。
也可以是,用户确定部109a(图10)从这多个用户1u1中确定所描绘的GUI8x被提示的当前正在使用该信息终端1t的用户1u1A(图15)。
也可以是,由履历信息存储部109b存储有有关各个用户1u1(参照图10的第1、第2用户)的数据109x。
也可以是,由选择部109c(图10)从多个数据109x中确定出所确定的用户1u1A的数据109x。
另外,也可以是如图10所示,例如该选择部109c是前述的GUI生成描绘部105的一部分等。
也可以是,所确定的数据109x被用作仅描绘上述的利用该数据109x确定的协作动作的GUI8x、不描绘其它协作动作的GUI8x的数据109x。
另外,在图10中的两处分别图示了GUI生成描绘部105。这两处例如是表示GUI生成描绘部105中所包含的第1部分的一处、和表示第2部分的另一处这两处。
图11是表示GUI8xj和GUI8xk等的图。
GUI8xj的按钮型GUI部件703m的外观是第1外观,GUI8xk的按钮型GUI部件703n的外观是与第1外观不同的第2外观。
第1外观例如是被较多地操作的按钮型GUI部件(按钮型GUI部件703m)所具有的合适外观。
即,第1外观例如是具有比较醒目的颜色(例如比黑色醒目的红色、黄色等)的外观、字符被强调显示的外观、字符等不是半透明状的外观等。
另一方面,第2外观是被较少地操作的按钮型GUI部件(按钮型GUI部件703n)所具有的合适外观。
即,第2外观例如是具有不易醒目的颜色(例如黑色)的外观、字符被强调显示的外观、字符等是半透明状的外观等。
也可以是,利用信息109n示出的协作动作的GUI8x是包括适合被较多操作的按钮型GUI部件703m的GUI8xj。
另一方面,也可以是,其它协作动作的GUI8x是包括适合被较少操作的按钮型GUI部件703n的GUI8xk。
图12是表示用户信息存储部109b等的图。
另外,也可以是,利用信息109n确定该信息109n的用户(例如图12的第1用户)持有的设备(例如第1设备)等中、被该用户较多使用的设备。
另外,所谓被较多使用,是指该设备被使用的次数(规定期间内的次数等)多于阈值等。阈值例如是指其它设备(例如第4设备)被使用的次数等。
即,也可以是,利用这种信息109n间接地确定由利用该信息109n确定的设备进行动作的协作动作,由此间接地确定协作动作(参照图10)。
也可以是,前述的GUI8xj的协作动作例如是利用这种数据109x间接地确定的协作动作。
图13A是表示GUI9R1的图。
也可以是,如图所示,描绘包括表示设备的节点型GUI部件9a、表示协作动作(协作服务)的分组节点型GUI部件9b、以及将这些节点型GUI部件9a和分组节点型GUI部件9b连接的线的GUI9R1。
图13B是表示GUI9R2的图。
也可以是,如图所示,描绘包括分别表示设备的节点型GUI部件即节点型GUI部件9c、9d、9e的GUI9R2。
并且,也可以是,如图所示,所描绘的这种GUI9R2还包括将节点型GUI部件9c和节点型GUI部件9d之间连接的线、以及将节点型GUI部件9c和节点型GUI部件9e之间连接的线。
即,也可以是,利用所描绘的GUI9R2表示节点型GUI部件9c是“根”、另两个节点型GUI部件9d、9e分别是“叶”的树的图表。
图13C是表示GUI9R3的图。
即,也可以是,描绘包含分组节点型GUI部件9h和节点型GUI部件9i的GUI9R3。
也可以是,上述的分组节点型GUI部件9h包括分别表示设备的节点型GUI部件即节点型GUI部件9g、9H。
这样,可以描绘出各种GUI(GUI9R1、GUI9R2、GUI9R3)。
图14是表示信息终端1t所处的家(图15的第1家1H1)中的第1房间1H1a、第2房间1H1b的图。
也可以是,存在第1房间1H1a的区域等的第1区域、和第2房间1H1b的区域等的第2区域。
另外,也可以是,第1区域是正房的区域,而第2区域是正房以外的其它部分的区域等。
设备1ea是位于第1区域(第1房间1H1a的区域)中的设备1e。
设备1eb是位于第2区域(第2房间1H1b的区域)中的设备1e。
即,信息终端1t与设备1e之间的通信如前面所述例如是无线通信。
也可以是,信息终端1t在位于第1区域的情况下(参照位于第1区域的信息终端1ta),仅与位于第1区域的设备1ea进行通信,不与位于第2区域的设备1eb进行通信。
例如,也可以是,信息终端1t的设备信息管理部101在信息终端1t位于第1区域的情况下,仅从第1区域的设备1ea取得设备信息(数据)200s,不从第2区域的设备1eb取得设备信息200s。
并且,也可以是,在信息终端1t位于第1区域的情况下,所描绘的GUI(画面)106s(GUI106sa)仅包括位于第1区域的设备1ea的节点型GUI部件。
即,也可以是,在这种情况下,按照包含于GUI106s(GUI106sa)中的分组型节点型GUI部件的协作动作而进行动作的各台设备仅包括位于第1区域的设备1ea。
图15是表示第1、第2家1H1、1H2等的图。
第1家1H1例如是子女夫妇所住的家等。即,在第1家1H1中,用户1u1是青年等,能够比较容易地进行设备1e的操作。
第2家1H2例如是父母亲所住的家等,在第2家1H2中,用户1u2是老人等,不能比较容易地进行设备1e的操作。
也可以是,上述的信息终端1t的处理是在这种系统1s中进行的。
具体地讲,也可以是,在协作动作中,利用第1家1H1中的录制设备等即第1设备1e1,读出在该第1设备1e1具有的记录介质中记录的照片、动态图像等影像。
并且,也可以是,利用作为处于第1家1H1中的电视机等的第2设备1e2取得所读出的影像,并进行显示。
并且,也可以是,当这样在第1家1H1中进行显示的同时,利用第2家1H2中的第3设备1e3显示与在第1家1H1中显示的影像相同的影像。
另外,也可以是,例如第1家1H1的用户1u1即用户1u1A等利用电话等通知第2家1H2的用户1u2将开始同时显示后,进行这种同时显示。
也可以是,在这样进行第1~第3设备1e1~1e3的协作动作时,按照前面所述进行由信息终端1t执行的处理。
另外,也可以是,第3设备1e3是由GUI生成描绘部105等从位于第2家1H2中的多台设备1eA中确定的具有规定的功能的设备1e等。
例如,所确定的设备1e是利用从该设备1e取得的设备信息200s确定的、该设备1e的功能是上述规定的功能的设备。
另外,也可以是,这样从第2家1H2取得设备信息200s例如是通过因特网等网络1n进行的。
另外,上述规定的功能例如是利用所取得的协作信息300s确定的各种功能(参照图3A的第3数据300c)中所包含的功能。
另外,也可以是,存在存储设备信息200s(设备信息表102)的第1存储部102s(参照图1)。
第1存储部102s如图1所示可以是信息终端1t的一部分,也可以位于信息终端1t的外部等。
也可以是,由设备信息管理部101取得的设备信息200s是被存储在该第1存储部102s中,并从该第1存储部102s取得的设备信息200s。
另外,也可以是,利用作为信息终端1t的一部分的第1存储部102s,存储由设备信息管理部101从信息终端1t的外部取得的设备信息200s。
另外,也可以是,同样存在存储协作信息300s的第2存储部104s。
并且,该第2存储部104s与上述第1存储部102s相同地可以是信息终端1t的一部分,也可以位于信息终端1t的外部。
也可以是,由设备协作服务信息管理部103取得的协作信息300s是在该第2存储部104s中存储的协作信息300s。
另外,也可以是,在取得设备的信息时,利用前述的DLNA技术进行取得。
图16是表示GUI1600的图。
在图16中,GUI生成描绘部105描绘表示被连接于网络的两台以上设备的两个以上的节点型GUI部件(节点型GUI部件1601、1602)。并且,GUI生成描绘部105也描绘将这两个以上的节点型GUI部件之间连接的作为直线或者曲线的线(线1604)。
并且,GUI生成描绘部105描绘这两个以上的节点型GUI部件及线,并且还在上述的线上描绘表示基于上述两台以上设备的协作服务(协作动作)的节点型GUI部件(节点型GUI部件1603)。
另外,也可以是,GUI生成描绘部105描绘上述的线之外,还描绘表示协作服务中的上述两台以上设备的数据流或控制流的方向的箭头(箭头1604a)。
另外,也可以是,通过描绘线,也描绘出作为该线的一部分的上述箭头(箭头1604a)。该线例如也可以是包括上述箭头的箭头线。
由此产生如下的效果。即,具有进行协作的两台以上设备(参照节点型GUI部件1601、1602)、和通过按照这两台以上设备的两种以上的功能而执行的协作动作而能够实现的功能(参照节点型GUI部件1603)之间的关系。能够将这种关系比较容易理解地提示给用户。并且,描绘出在上述两台以上设备进行协作动作时产生的、表示数据的通信等的作用的方向即作用方向的箭头。另外,该作用例如是数据流或控制流等的作用。通过进行这种描绘,能够以容易理解的方式将上述两台以上设备的协作动作提示给用户,而且所进行的提示是更加恰当的提示。
另外,这样描绘节点型GUI部件1603的位置例如是上述的线1604的附近范围内的位置。
图17是表示具有三台以上设备时的GUI1600的图。
在图17中,也示出了表示设备的节点型GUI部件1605。另外,该设备例如是数码相机等。并且,在图17中,也示出了将该节点型GUI部件1605和节点型GUI部件1601连接的线1606、以及将该节点型GUI部件1605和节点型GUI部件1602连接的线1607。
如该图17的示例所示,关于设备,也可以存在三台以上的设备(参照三个节点型GUI部件1601、1602、1605)。在这三台以上设备中,包括进行协作动作(在图17的示例中指“用TV欣赏照片”服务的协作动作)的两台以上设备(参照两个节点型GUI部件1601、1602)。在图17的示例中,这两台以上设备是指客厅的录制设备和客厅的TV。
并且,在表示协作信息(“用TV欣赏照片”)的节点型GUI部件1603的位置存在上述的线1604。节点型GUI部件1603也可以将由位于该位置的该线1604而连接起来的两个以上的节点型GUI部件(节点型GUI部件1601、1602)所表示的两台以上设备(录制设备和TV),表示为进行协作动作的两台以上设备。
即,存在由上述的线1606以外的其它线(线1606、1607)连接起来的两台以上的设备(例如,由线1606连接起来的两个节点型GUI部件1601、1605的两台设备)。也可以是,将这两台以上的设备确定为不进行协作动作(“用TV欣赏照片”)的两台以上的设备。
由此,即使是存在三台以上的设备时,进行协作动作的两台以上设备也能够进行容易理解的恰当显示,能够可靠地进行恰当的显示。
另外,也可以是,节点型GUI部件1603的位置与进行协作动作的上述两台以上设备的两个以上的节点型GUI部件(节点型GUI部件1601、1602)的位置比较近。并且,也可以是,节点型GUI部件1603的位置与表示进行协作动作的上述两台以上设备以外的其它设备的节点型GUI部件(例如节点型GUI部件1605)的位置比较远。由此,也可以将位置比较近的两个以上的节点型GUI部件(节点型GUI部件1601、1602)所表示的两台以上设备表示为进行协作动作的两台以上设备。并且,也可以是,将位于距节点型GUI部件1603的位置比较远的位置的节点型GUI部件(节点型GUI部件1605)的设备表示为其它设备。
这样,节点型GUI部件1603可以与线1604相对应。
另外,如这样在上述的箭头1604a的说明中叙述的那样,在协作动作中也可以包括通信流等流。也可以是,在协作动作中通过进行该流的通信等的该流的动作来实现。
另外,例如信息终端1是便于携带的平板电脑终端、智能电话等终端。
图18是表示信息终端1t的图。
例如,也可以是,信息终端1t包括CPU1tA、和存储程序的RAM、ROM、HDD等存储装置1tB。
也可以是,在存储装置1tB中存储有用于实现信息终端1t的上述功能的一部分功能等的程序。也可以是,通过由CPU1tA执行所存储的程序,使该信息终端1t实现上述的一部分功能等。
例如,也可以是,这些一部分功能等包括图1所示的设备协作服务信息管理部103的功能。并且,也可以包括设备信息管理部101的功能。并且,也可以包括GUI生成描绘部105的功能。
另外,上述的一部分功能等例如也可以包括GUI控制部108的功能,也可以包括其它功能。
另一方面,例如图1的输入装置107也可以是例如传感器等,该传感器受理用户对该信息终端1t具有的触摸板等进行的触摸操作等操作,并取得基于该操作的输入。
另一方面,例如图1的显示装置106也可以是作为上述的触摸板的一部分等的显示前述的图17的GUI1600等GUI的显示部。
另外,图1的设备协作服务信息管理表104也可以是由图18所示的上述存储装置1tB等存储装置存储的信息等。并且,同样设备信息表102也可以是由该存储装置存储的信息等。
另外,图1的信息终端1t是权利要求书中的“GUI生成装置”的一例。同样,设备信息管理部101、设备协作服务信息管理部103、GUI生成描绘部105、显示装置106、输入装置107、GUI控制部108分别是权利要求书中的“设备信息取得部”、“协作信息取得部”、“GUI描绘部”、“显示装置”、“输入装置”、“GUI控制部”的一例。
另外,也可以是,这样生成例如确定描绘了GUI部件的GUI的数据,并显示利用该数据所确定的GUI。
另外,上述的本发明的实施方式的设备协作服务显示装置进行的各种处理步骤也可以通过由CPU对在存储装置(ROM、RAM、硬盘等)中存储的能够执行上述处理步骤的规定的程序数据进行解释并执行来实现。在这种情况下,程序数据也可以通过存储介质被导入存储装置中,还可以直接从存储介质上进行执行。另外,存储介质是指ROM或RAM或闪存等半导体存储器、软盘或硬盘等磁盘存储器、CD-ROM或DVD或BD等光盘存储器、以及存储卡等。并且,存储介质是指包括电话线路或传输路径等通信介质的概念。
另外,上述的本发明的实施方式的描绘性能规范(profile)显示装置的各个构成要素分别能够以集成电路即LSI的方式来实现。这些构成要素可以形成为独立的单片,也可以形成为在各个构成要素中包含一部分或者全部的单片。在此是形成为LSI,但根据集成度的不同,有时也被称为IC、系统LSI、超级(super)LSI、特级(ultra)LSI。
另外,集成电路化的方法不限于LSI,也可以利用专用电路或者通用处理器实现。也可以采用在制作LSI后能够编程的现场可编程门阵列(FPGA:Field Programmable Gate Array)、能够重构架LSI内部的电路单元的连接和设定的可重构处理器(reconfigurable processor)。另外,如果伴随半导体技术的发展或利用派生的其他技术替换LSI的集成电路化的技术问世,当然也可以使用该技术进行功能单元的集成化。还存在适用生物技术等的可能性。
另外,也可以采用如下所述的程序。
该程序是GUI生成程序等,用于使计算机执行包括如下步骤的GUI生成方法中的下述各个步骤:设备信息取得步骤,取得用于确定被连接于网络的第1及第2设备的设备信息;协作信息取得步骤,取得用于确定利用所述第1设备具有的第1功能和所述第2设备具有的第2功能实现的协作动作的协作信息;以及GUI描绘步骤,将表示利用所述设备信息确定的所述第1及第2设备的第1及第2GUI(Graphical User Interface)部件、和表示利用所述协作信息确定的所述协作动作的第3GUI部件关联起来进行描绘。
产业上的可利用性
本发明的设备协作服务显示装置能够将多台设备协作进行的设备协作服务描绘为节点型GUI部件之间的关系来提示给用户,因而能够容易理解地提示对于用户而言难以理解的设备协作服务或设备之间的关系。因此,本技术的GUI可以作为能够让用户简单地利用设备协作服务的GUI来说是有用的。
标号说明
1t信息终端;101设备信息管理部;102设备信息表;103设备协作服务信息管理部;104设备协作服务信息表;105GUI生成描绘部;106显示装置;107输入装置;108GUI控制部;200设备信息表;300设备协作服务信息表;301执行动作定义文件;302执行动作定义文件;401分组节点型GUI部件;402节点型GUI部件;403节点型GUI部件;404按钮型GUI部件;701分组节点型GUI部件;702节点型GUI部件;703按钮型GUI部件;704按钮型GUI部件;801节点型GUI部件;802分组节点型GUI部件;1600、7001、7002、8001、8002GUI;1601、1602、1603、1605节点型GUI部件;1604、1606、1607线;1604a箭头。

Claims (20)

1.一种GUI生成装置,
具有:
设备信息取得部,取得用于确定被连接于网络的第1及第2设备的设备信息;
协作信息取得部,取得用于确定利用所述第1设备具有的第1功能和所述第2设备具有的第2功能实现的协作动作的协作信息;以及
GUI描绘部,将表示利用所述设备信息确定的所述第1及第2设备的第1及第2GUI部件、和表示利用所述协作信息确定的所述协作动作的第3GUI部件关联起来进行描绘。
2.根据权利要求1所述的GUI生成装置,
所述协作信息确定用于实现所述协作动作的所述第1及第2功能,
所述第1及第2设备是通过所述设备信息表示具有所确定的所述第1功能的设备、和通过所述设备信息表示具有所确定的所述第2功能的设备。
3.根据权利要求1所述的GUI生成装置,
所述GUI生成装置具有:
显示装置,显示包含由所述GUI描绘部描绘出的所述第1~第3GUI部件的GUI;
输入装置,受理用户对包含于所述GUI中的GUI部件进行的操作;以及
GUI控制部,通过由所述输入装置受理的所述操作,执行与所述用户选择的所述GUI部件相关联的GUI动作。
4.根据权利要求1所述的GUI生成装置,
所述GUI描绘部描绘线,该线是将所述第1GUI部件和所述第2GUI部件连接的直线或者曲线。
5.根据权利要求3所述的GUI生成装置,
所述GUI描绘部描绘表示被实施了所述输入装置受理的所述操作的所述GUI部件的信息,在受理后,以与受理前描绘该信息的方式不同的方式来描绘该信息。
6.根据权利要求1所述的GUI生成装置,
所述GUI描绘部描绘表示所述第1及第2设备的所述第1及第2GUI部件,并且将表示包含这些所述第1及第2GUI部件中的每个GUI部件的组的分组节点型GUI部件,描绘为表示所述协作动作的所述第3GUI部件。
7.根据权利要求3或5所述的GUI生成装置,
在通过所述输入装置受理了用户对表示一台设备的第4GUI部件进行的向所描绘的所述第3GUI部件的拖放操作的情况下,所述GUI控制部将所述第4GUI部件所表示的所述一台设备,登记为在执行作为被实施所述拖放操作的目的地的所述第3GUI部件表示的所述协作动作时进行动作的设备之一。
8.根据权利要求1所述的GUI生成装置,
所述GUI生成装置具有履历存储部,该履历存储部存储用于确定所述协作动作被实施的次数的数据,
在利用所存储的所述数据确定的所述次数多于阈值的情况下,所述GUI描绘部以适合于进行操作的次数比较多的情况的形式进行描绘,在所述次数少于阈值的情况下,所述GUI描绘部以适合于进行操作的次数比较少的情况的形式进行描绘。
9.根据权利要求1所述的GUI生成装置,
所述GUI生成装置具有存储部,该存储部存储用于确定该GUI生成装置的用户持有的设备的数据,
当执行所述协作动作时使用由所述数据确定的所持有的所述设备具有的功能的情况下,所述GUI描绘部以适合于进行操作的次数比较多的情况的形式进行描绘,在执行所述协作动作时不使用该功能的情况下,所述GUI描绘部以适合于进行操作的次数比较少的情况的形式进行描绘。
10.根据权利要求9所述的GUI生成装置,
所述存储部存储多个所述数据,
各个所述数据用于确定多个用户中该数据的所述用户持有的设备,
所述GUI生成装置具有确定部,该确定部从所述多个用户中确定被提示所述GUI的用户,
所述GUI描绘部根据所确定的所述用户的所述数据,以适合于所述次数较多的情况的形式和适合于所述次数较少的情况的所述形式中的一种形式,进行描绘。
11.根据权利要求1所述的GUI生成装置,
所述设备信息取得部通过无线通信,与位于该GUI生成装置的附近区域内的包括所述第1及第2设备的两台以上设备进行通信,
所述设备信息用于确定所述附近区域内的该两台以上的设备,不用于确定位于其它区域内的设备,
所述GUI描绘部仅描绘表示所述附近区域内的所述两台以上设备的两个以上的GUI部件,不描绘所述其它区域的所述设备的GUI部件。
12.根据权利要求3所述的GUI生成装置,
包含该GUI生成装置的系统包括所述第1及第2设备、和第3设备,
所述第1及第2设备设于第1家中,
所述第3设备设于第2家中,
所述协作动作是利用所述第1家的所述第1设备和所述第2设备具有的所述第1及第2功能、该第2家的所述第3设备具有的作为与所述第2功能相同的功能的第3功能实现的,
所述GUI描绘部还描绘表示该第3设备的GUI部件,
所述GUI控制部使所述第1和第2设备分别进行利用所述第1和第2功能的动作、并且使所述第3设备进行利用所述第3功能的动作,作为在受理了所述操作时执行的所述GUI动作。
13.根据权利要求1所述的GUI生成装置,
在该GUI生成装置具有所述第2功能的情况下,该GUI生成装置在作为所述第2设备执行所述协作动作时,进行基于所述第2功能的动作。
14.根据权利要求4所述的GUI生成装置,
所述第3GUI部件与将所述第1GUI部件和所述第2GUI部件连接的所述线相关联。
15.根据权利要求14所述的GUI生成装置,
所述第3GUI部件被描绘在所述线上。
16.根据权利要求3、14、15中任意一项所述的GUI生成装置,
所述线是箭头线,表示在利用所述第1GUI部件所表示的所述第1设备和利用所述第2GUI部件所表示的所述第2设备之间进行所述协作动作时的数据流的方向。
17.根据权利要求1~16中任意一项所述的GUI生成装置,
所述第3GUI部件被描绘在所述第1GUI部件和所述第2GUI部件之间。
18.一种集成电路,
具有:
设备信息取得部,取得用于确定被连接于网络的第1及第2设备的设备信息;
协作信息取得部,取得用于确定利用所述第1设备具有的第1功能和所述第2设备具有的第2功能实现的协作动作的协作信息;以及
GUI描绘部,将表示利用所述设备信息确定的所述第1及第2设备的第1及第2GUI部件、和表示利用所述协作信息确定的所述协作动作的第3GUI部件关联起来进行描绘。
19.一种GUI生成方法,
包括:
设备信息取得步骤,取得用于确定被连接于网络的第1及第2设备的设备信息;
协作信息取得步骤,取得用于确定利用所述第1设备具有的第1功能和所述第2设备具有的第2功能实现的协作动作的协作信息;以及
GUI描绘步骤,将表示利用所述设备信息确定的所述第1及第2设备的第1及第2GUI部件、和表示利用所述协作信息确定的所述协作动作的第3GUI部件关联起来进行描绘。
20.一种GUI生成程序,该GUI生成程序使计算机执行以下步骤:
设备信息取得步骤,取得用于确定被连接于网络的第1及第2设备的设备信息;
协作信息取得步骤,取得用于确定利用所述第1设备具有的第1功能和所述第2设备具有的第2功能实现的协作动作的协作信息;以及
GUI描绘步骤,将表示利用所述设备信息确定的所述第1及第2设备的第1及第2GUI部件、和表示利用所述协作信息确定的所述协作动作的第3GUI部件关联起来进行描绘。
CN201280006438XA 2011-07-28 2012-07-12 Gui生成装置、集成电路、gui生成方法、gui生成程序 Pending CN103329087A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2011-166062 2011-07-28
JP2011166062 2011-07-28
PCT/JP2012/004506 WO2013014874A1 (ja) 2011-07-28 2012-07-12 Gui生成装置、集積回路、gui生成方法、gui生成プログラム

Publications (1)

Publication Number Publication Date
CN103329087A true CN103329087A (zh) 2013-09-25

Family

ID=47600751

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201280006438XA Pending CN103329087A (zh) 2011-07-28 2012-07-12 Gui生成装置、集成电路、gui生成方法、gui生成程序

Country Status (4)

Country Link
US (1) US20130311912A1 (zh)
JP (1) JPWO2013014874A1 (zh)
CN (1) CN103329087A (zh)
WO (1) WO2013014874A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107005750A (zh) * 2014-12-26 2017-08-01 索尼公司 信息处理装置、信息处理方法和程序
CN108885592A (zh) * 2016-03-28 2018-11-23 株式会社索思未来 通信装置、通信方法以及通信程序
CN110581930A (zh) * 2018-06-07 2019-12-17 富士施乐株式会社 信息处理装置、非暂时性计算机可读介质和信息处理方法

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5474238B1 (ja) 2013-06-05 2014-04-16 三菱電機株式会社 レイアウト生成システム、エネルギーマネジメントシステム、端末装置、レイアウト作成方法、および、プログラム
US10303324B2 (en) * 2014-02-10 2019-05-28 Samsung Electronics Co., Ltd. Electronic device configured to display three dimensional (3D) virtual space and method of controlling the electronic device
US11113022B2 (en) * 2015-05-12 2021-09-07 D&M Holdings, Inc. Method, system and interface for controlling a subwoofer in a networked audio system
US11209972B2 (en) 2015-09-02 2021-12-28 D&M Holdings, Inc. Combined tablet screen drag-and-drop interface
JP6611550B2 (ja) * 2015-10-09 2019-11-27 キヤノン株式会社 通信装置、通信装置の制御方法及びプログラム
JP6415779B2 (ja) * 2016-03-02 2018-10-31 三菱電機株式会社 空気調和システム及び連携確認方法
US10921974B2 (en) * 2016-03-30 2021-02-16 Microsoft Technology Licensing, Llc Using drag and drop to apply metadata
JP6327387B2 (ja) * 2017-06-07 2018-05-23 富士ゼロックス株式会社 情報処理装置及びプログラム
JPWO2019064616A1 (ja) * 2017-09-29 2020-09-10 シャープ株式会社 ネットワークシステム
JP7099092B2 (ja) * 2018-07-03 2022-07-12 富士フイルムビジネスイノベーション株式会社 情報処理装置及びプログラム
US11188294B2 (en) 2019-02-28 2021-11-30 Sonos, Inc. Detecting the nearest playback device
WO2020176893A1 (en) 2019-02-28 2020-09-03 Sonos, Inc. Playback transitions between audio devices
WO2022071045A1 (ja) * 2020-10-01 2022-04-07 パナソニックIpマネジメント株式会社 情報処理方法、情報処理装置、および、プログラム

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1848772A (zh) * 2005-04-14 2006-10-18 三洋电机株式会社 本地服务器
US20090066534A1 (en) * 2007-09-07 2009-03-12 Verizon Data Services Inc. Network-based access and control of home automation systems
US20090089353A1 (en) * 2007-09-28 2009-04-02 Fujitsu Limited Computer-readable medium storing relay program, relay device, and relay method
CN101741663A (zh) * 2008-11-10 2010-06-16 索尼株式会社 信息处理设备、信息处理系统、信息处理方法和程序
US20100175010A1 (en) * 2009-01-06 2010-07-08 Mckesson Financial Holdings Limited Graphical Configuration and Management of Interfaces

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4058845B2 (ja) * 1999-06-24 2008-03-12 松下電器産業株式会社 ゲートウェイ装置
JP3927800B2 (ja) * 2001-12-04 2007-06-13 キヤノン株式会社 音声認識装置及び方法、プログラム、並びに記憶媒体
JP2005339174A (ja) * 2004-05-26 2005-12-08 Sony Corp 情報処理システム及び情報処理方法、並びにコンピュータプログラム
JP5172156B2 (ja) * 2007-01-15 2013-03-27 富士通株式会社 情報処理装置,表示方法および表示プログラム
US8880695B2 (en) * 2007-11-22 2014-11-04 Sony Corporation Information processing apparatus and information processing method
US20100077355A1 (en) * 2008-09-24 2010-03-25 Eran Belinsky Browsing of Elements in a Display
US9055077B2 (en) * 2009-08-24 2015-06-09 Apple Inc. Device identity matching
US9396090B2 (en) * 2010-12-28 2016-07-19 Sap Se System overview diagram generator

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1848772A (zh) * 2005-04-14 2006-10-18 三洋电机株式会社 本地服务器
US20090066534A1 (en) * 2007-09-07 2009-03-12 Verizon Data Services Inc. Network-based access and control of home automation systems
US20090089353A1 (en) * 2007-09-28 2009-04-02 Fujitsu Limited Computer-readable medium storing relay program, relay device, and relay method
CN101741663A (zh) * 2008-11-10 2010-06-16 索尼株式会社 信息处理设备、信息处理系统、信息处理方法和程序
US20100175010A1 (en) * 2009-01-06 2010-07-08 Mckesson Financial Holdings Limited Graphical Configuration and Management of Interfaces

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107005750A (zh) * 2014-12-26 2017-08-01 索尼公司 信息处理装置、信息处理方法和程序
US10809903B2 (en) 2014-12-26 2020-10-20 Sony Corporation Information processing apparatus, information processing method, and program for device group management
CN113467670A (zh) * 2014-12-26 2021-10-01 索尼公司 信息处理装置、信息处理方法和程序
CN108885592A (zh) * 2016-03-28 2018-11-23 株式会社索思未来 通信装置、通信方法以及通信程序
CN110581930A (zh) * 2018-06-07 2019-12-17 富士施乐株式会社 信息处理装置、非暂时性计算机可读介质和信息处理方法
CN110581930B (zh) * 2018-06-07 2023-09-26 富士胶片商业创新有限公司 信息处理装置、非暂时性计算机可读介质和信息处理方法

Also Published As

Publication number Publication date
JPWO2013014874A1 (ja) 2015-02-23
WO2013014874A1 (ja) 2013-01-31
US20130311912A1 (en) 2013-11-21

Similar Documents

Publication Publication Date Title
CN103329087A (zh) Gui生成装置、集成电路、gui生成方法、gui生成程序
JP5881847B2 (ja) メタデータをベースとしたインフラストラクチャによる複数のメディアタイプのリアルタイムマッピング及びナビゲーション
US10892955B1 (en) Management of a network via a GUI of user relationships
Hess et al. Jumping between devices and services: towards an integrated concept for social TV
JP5799512B2 (ja) 情報処理装置、および情報処理方法、並びにプログラム
US8825668B2 (en) Method and apparatus for updating song playlists based on received user ratings
RU2710859C2 (ru) Устройство обработки информации, способ обработки информации и программа
CN105247874A (zh) 用于显示节目指南的装置和方法
US11115261B2 (en) System and method of sharing content by using plurality of storages
Hess et al. Understanding and supporting cross-platform usage in the living room
CN103608790A (zh) 信息处理设备、程序、信息处理方法和信息处理系统
Krug et al. Smartcomposition: a component-based approach for creating multi-screen mashups
JP2016517654A (ja) メディア資産推薦を提供する方法および装置
Pfeil et al. Opensensemap-a citizen science platform for publishing and exploring sensor data as open data
CN104978372A (zh) 多媒体信息处理方法、多媒体装置与多媒体网络系统
CN102916999B (zh) 服务器装置和信息处理装置
JP2012514785A (ja) メディアサービス・クエリを交換する方法及び装置
Obrist et al. Connecting TV & PC: an in-situ field evaluation of an unified electronic program guide concept
Wang et al. A new territory of multi-user variable remote control for interactive TV
CN102110133B (zh) 使用通用即插即用显示文档内容的系统和方法
JP2015197553A (ja) 通信端末装置、サーバ装置、プログラム、データ提供方法及びカラオケシステム
TWI528804B (zh) 經由以詮釋資料為基礎之基礎設施之多媒體類型的即時映射和導航技術
Ding et al. Seamless integration of output devices in intelligent environments: Infrastructure, strategies and implementation
JP2008146672A (ja) 情報検索システム及び情報検索プログラム
JP2018110312A (ja) 情報処理装置,情報処理装置の制御方法及び制御プログラム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
ASS Succession or assignment of patent right

Owner name: MATSUSHITA ELECTRIC (AMERICA) INTELLECTUAL PROPERT

Free format text: FORMER OWNER: MATSUSHITA ELECTRIC INDUSTRIAL CO, LTD.

Effective date: 20140926

C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20140926

Address after: Seaman Avenue Torrance in the United States of California No. 2000 room 200

Applicant after: PANASONIC INTELLECTUAL PROPERTY CORPORATION OF AMERICA

Address before: Osaka Japan

Applicant before: Matsushita Electric Industrial Co.,Ltd.

C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20130925