CN103813114A - 信息处理装置、通信系统以及信息处理方法 - Google Patents
信息处理装置、通信系统以及信息处理方法 Download PDFInfo
- Publication number
- CN103813114A CN103813114A CN201310547884.8A CN201310547884A CN103813114A CN 103813114 A CN103813114 A CN 103813114A CN 201310547884 A CN201310547884 A CN 201310547884A CN 103813114 A CN103813114 A CN 103813114A
- Authority
- CN
- China
- Prior art keywords
- information processor
- user
- information
- accepted
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000006854 communication Effects 0.000 title claims abstract description 123
- 238000004891 communication Methods 0.000 title claims abstract description 121
- 230000010365 information processing Effects 0.000 title claims abstract description 45
- 238000003672 processing method Methods 0.000 title claims abstract description 7
- 230000005540 biological transmission Effects 0.000 claims description 63
- 238000000034 method Methods 0.000 claims description 31
- 238000003825 pressing Methods 0.000 claims description 21
- 230000008569 process Effects 0.000 claims description 20
- 230000008859 change Effects 0.000 claims description 11
- 238000001514 detection method Methods 0.000 claims description 11
- 238000005516 engineering process Methods 0.000 description 67
- 238000012545 processing Methods 0.000 description 59
- 230000004048 modification Effects 0.000 description 20
- 238000012986 modification Methods 0.000 description 20
- 238000010586 diagram Methods 0.000 description 6
- 230000001133 acceleration Effects 0.000 description 3
- 238000013459 approach Methods 0.000 description 2
- 230000003139 buffering effect Effects 0.000 description 2
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000004898 kneading Methods 0.000 description 2
- 230000001404 mediated effect Effects 0.000 description 2
- 238000011084 recovery Methods 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 238000005096 rolling process Methods 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 230000004888 barrier function Effects 0.000 description 1
- 238000000205 computational method Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000005401 electroluminescence Methods 0.000 description 1
- 238000005562 fading Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000008267 milk Substances 0.000 description 1
- 210000004080 milk Anatomy 0.000 description 1
- 235000013336 milk Nutrition 0.000 description 1
- 230000001172 regenerating effect Effects 0.000 description 1
- 230000008929 regeneration Effects 0.000 description 1
- 238000011069 regeneration method Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/038—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/12—Synchronisation between the display unit and other units, e.g. other display units, video-disc players
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/14—Display of multiple viewports
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
- H04M1/72409—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
- H04M1/72412—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories using two-way short-range wireless interfaces
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/038—Indexing scheme relating to G06F3/038
- G06F2203/0383—Remote input, i.e. interface arrangements in which the signals generated by a pointing device are transmitted to a PC at a remote location, e.g. to a PC in a LAN
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2340/00—Aspects of display data processing
- G09G2340/02—Handling of images in compressed format, e.g. JPEG, MPEG
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2340/00—Aspects of display data processing
- G09G2340/12—Overlay of images, i.e. displayed pixel being the result of switching between the corresponding input pixels
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2354/00—Aspects of interface with display user
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2370/00—Aspects of data communication
- G09G2370/16—Use of wireless transmission of display information
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M2250/00—Details of telephonic subscriber devices
- H04M2250/22—Details of telephonic subscriber devices including a touch pad, a touch sensor or a touch detector
Abstract
提供了一种信息处理装置、通信系统以及信息处理方法。该信息处理装置包括:操作接受单元,配置成当基于使用近距离无线通信从其他信息处理装置接收的图像数据的图像被显示在显示单元上时,接受与该图像有关的用户操作;以及控制器,配置成以如下方式执行控制:当接受了用户操作时输出用于发出接受了用户操作的通知的通知信息,并且将与用户操作相对应的控制数据传送到其他信息处理装置。
Description
相关申请的交叉引用
本申请要求2012年11月12日提交的日本优先权专利申请JP2012-247981的利益,该日本优先权专利申请的全部内容通过引用并入本文。
技术领域
本技术涉及一种信息处理装置,并且更具体地涉及在其中使用无线通信交换各种类型的信息的一种信息处理装置、通信系统以及信息处理方法。
背景技术
在现有技术中,在其中使用无线通信交换各种类型的数据的无线通信技术是已知的。例如,提出了一种信息交换装置,在该信息交换装置中,经由近距离无线通信在两个无线通信装置之间交换各种类型的数据(例如,参考日本未审查专利申请公布第2008-278388号)。
发明内容
根据现有技术中的上述技术,可以在两个无线通信装置之间经由近距离无线通信交换各种类型的数据,而不使用有线线路。然而,当以这种方式在两个无线通信装置之间交换各种类型的数据时,可能存在由于近距离无线通信所导致的延迟。
关于这点,作为示例,在将基于从传输侧信息处理装置所传送的图像数据的图像显示在显示单元上的接收侧信息处理装置中,假定用户执行用于执行与图像相关的操作的操作输入。在这种情况下,假定以延迟量对在基于反映操作输入的图像数据的图像显示在显示单元上之前的时间进行延迟。以这种方式,当在显示反映操作输入的图像之前的时间变长时,对于用户难以快速地识别操作输入是否正确地被接受,并且因此更可能发生诸如再次执行操作输入的错误操作。
鉴于这样的情形作出了本技术的实施例。用户期望容易地识别用户操作的接受状况。
根据本技术的第一实施例,提供了一种信息处理装置,该信息处理装置包括:操作接受单元,配置成当基于使用近距离无线通信从其他信息处理装置接收的图像数据的图像显示在显示单元上时,接受与该图像有关的用户操作;以及控制器,配置成以如下方式执行控制:当接受了用户操作时输出用于发出接受了用户操作的通知的通知信息,并且将与用户操作相对应的控制数据传送到其他信息处理装置。。作为结果,在基于使用近距离无线通信从其他信息处理装置接收的图像数据的图像显示在显示单元上的情况下,当接受了与图像有关的用户操作时,可以输出用于发出接受了用户操作的通知的通知信息,并且可以将与用户操作相对应的控制数据传送到其他信息处理装置。
此外,根据实施例,控制器可以通过将指示接受了用户操作的附加图像叠加在显示在显示单元上的图像上,使得输出通知信息。作为结果,通过将指示接受了用户操作的附加图像叠加在显示在显示单元上的图像上可以显示该附加图像。
此外,根据实施例,操作接受单元和显示单元可以包括触摸板。用户操作可以是对触摸板的接触操作或接近操作。当接受了对触摸板的接触操作或接近操作时,控制器可以通过使用在触摸板中接受了接触操作或接近操作的位置作为基准,使得显示该附加图像。作为结果,当接受了对触摸板的接触操作或接近操作时,通过使用在触摸板中接受了接触操作或接近操作的位置作为基准可以显示附加图像。
此外,根据实施例,当接受了对在触摸板上的操作图像进行按压的按压操作时,控制器可以使得波纹图像显示作为附加图像,该纹图像以在触摸板中接受了按压操作处的位置为中心。当接受了对在触摸板上的操作图像进行追踪的追踪操作时,控制器可以使得指示在触摸板中的追踪操作的轨迹的图像显示作为附加图像。作为结果,当接受了对在触摸板上的操作图像进行按压的按压操作时,可以显示波纹图像,该纹图像以在触摸板中接受了按压操作处的位置为中心。此外,当接受了对在触摸板上的操作图像进行追踪的追踪操作时,可以显示指示在触摸板中的追踪操作的轨迹的图像。
此外,根据实施例,控制器可以使得以预定的定时擦除附加图像。作为结果,可以以预定的定时擦除附加图像。
此外,根据实施例,控制器可以基于在与其他信息处理装置进行的近距离无线通信中所发生的延迟时间,确定预定的定时。作为结果,可以基于在与其他信息处理装置进行的近距离无线通信中所发生的延迟时间,确定预定的定时。
此外,根据实施例,控制器可以将从其他信息处理装置接收指示接受了控制数据的数据的定时当作预定的定时。作为结果,可以将从其他信息处理装置接收指示接受了控制数据的数据的定时当作预定的定时。
此外,根据实施例,控制器可以将从其他信息处理装置接收与图像数据标识信息相对应的图像数据的定时、或将显示基于图像数据的图像的定时当作预定的定时,图像数据标识信息包括在指示其他信息处理装置接受了控制数据的数据中。作为结果,可以将从其他信息处理装置接收与图像数据标识信息相对应的图像数据的定时、或将显示基于图像数据的图像的定时当作预定的定时,图像数据标识信息包括在指示接受了控制数据的数据中。
此外,根据实施例,信息处理装置还可以包括姿态检测单元,该姿态检测单元配置成检测信息处理装置的姿态。用户操作可以是通过改变信息处理装置的姿态而执行的操作。当改变信息处理装置的姿态时,控制器可以使得输出用于发出接受了基于改变的用户操作的通知的通知信息。作为结果,当改变信息处理装置的姿态时,可以显示用于发出接受了基于改变的用户操作的通知的通知信息。
此外,根据实施例,当改变信息处理装置的姿态时,控制器可以通过将视觉地指示改变的附加图像叠加在显示在显示单元上的图像上而使得输出通知信息。作为结果,当改变信息处理装置的姿态时,可以通过将视觉地指示改变的附加图像叠加在显示在显示单元上的图像上,显示该附加图像。
此外,根据本技术的第二实施例,提供了一种通信系统、该通信系统的信息处理方法以及用于使得计算机执行该方法的程序,该通信系统包括第一信息处理装置以及第二信息处理装置。第一信息处理装置使得基于使用近距离无线通信从第二信息处理装置接收的图像数据的图像显示在第一显示单元上,并且当接受了与该图像有关的用户操作时,将与该用户操作相对应的控制数据传送到第二信息处理装置。第二信息处理装置使用短距离无线通信传送用来将图像显示在第一信息处理装置上的图像数据、同时使得与该图像相同的图像显示在第二显示单元上,并且当从第一信息处理装置接收到控制数据时,将指示接收到控制数据的数据传送到第一信息处理装置。执行第一操作和第二操作中的至少一个,第一操作允许第一信息处理装置将指示接受了用户操作的附加图像叠加在显示在第一显示单元上的图像上,第二操作允许第二信息处理装置将指示接受了控制数据的附加图像叠加在显示在第二显示单元上的图像上。作为结果,可以执行第一操作和第二操作中的至少一个,第一操作允许第一信息处理装置通过将指示接受了用户操作的附加图像叠加在显示在第一显示单元上的图像上使得显示该附加图像,第二操作允许第二信息处理装置通过将指示接受了控制数据的附加图像叠加在显示在第二显示单元上的图像上使得显示该附加图像。
根据本技术的一个或更多个实施例,对于用户可以容易地识别用户操作的接受状况。
附图说明
图1是示出根据本技术的第一实施例的通信系统100的示例性配置的图;
图2是示出根据本技术的第一实施例的信息处理装置200的示例性功能配置的框图;
图3是示出根据本技术的第一实施例的信息处理装置300的示例性功能配置的框图;
图4是示出在用户对根据本技术的第一实施例的信息处理装置300进行操作的情况下,显示单元350的显示转移示例的图;
图5是示出在用户对根据本技术的第一实施例的信息处理装置300进行操作的情况下,显示单元350的显示转移示例的图;
图6是示出在用户对根据本技术的第一实施例的信息处理装置300进行操作的情况下,显示单元350的显示转移示例的图;
图7是示出在用户对根据本技术的第一实施例的信息处理装置300进行操作的情况下,显示单元350的显示转移示例的图;
图8是示出在用户对根据本技术的第一实施例的信息处理装置300进行操作的情况下,显示单元350的显示转移示例的图;
图9是示出在用户对根据本技术的第一实施例的信息处理装置300进行操作的情况下,显示单元350的显示转移示例的图;
图10是示出在构成根据本技术的第一实施例的通信系统100的每个装置中要执行的示例性通信处理的序列图;
图11是示出根据本技术的第一实施例的信息处理装置200要执行的数据通信控制处理的处理过程的示例的流程图;
图12是示出根据本技术的第一实施例的信息处理装置300要执行的数据通信控制处理的处理过程的示例的流程图;
图13是示出在构成根据本技术的第二实施例的通信系统100的每个装置中要执行的示例性通信处理的序列图;
图14是示出根据本技术的第二实施例的信息处理装置200要执行的数据通信控制处理的处理过程的示例的流程图;
图15是示出根据本技术的第二实施例的信息处理装置300要执行的数据通信控制处理的处理过程的示例的流程图;
图16是示出构成根据本技术的第三实施例的通信系统100的每个信息处理装置的示例性显示的图;
图17是示出根据本技术的修改例的信息处理装置201的示例性功能配置的框图;
图18是示出根据本技术的修改例的通信系统700的示例性配置的图;以及
图19是示出根据本技术的修改例的通信系统800的示例性配置的图。
具体实施方式
在下文中,将参照附图详细地描述本公开的优选实施例。注意,在说明书和附图中,采用相同的附图标记表示具有基本上相同的功能和结构的结构性元件,并且省略对这些结构性元件的重复说明。
下面将描述用于实施本技术的实施例(在下文中简称为“实施例”)。另外,将以下面的顺序进行描述。
1.第一实施例(显示控制:当接受了用户操作时显示附加图像并且基于延迟时间擦除附加图像的示例)
2.第二实施例(显示控制:当接受了用户操作时显示附加图像并且基于来自传输侧信息处理装置的数据擦除附加图像的示例)
3.第三实施例(显示控制:在接收侧和传输侧的信息处理装置两者上显示附加图像的示例)
4.修改例
5.修改例
<1.第一实施例>
[通信系统的示例性配置]
图1是示出了根据本技术的第一实施例的通信系统100的示例性配置的图。在图1中,示出了当两个信息处理装置(信息处理装置200和信息处理装置300)以无线方式直接地彼此连接时的系统配置的示例。
通信系统100包括信息处理装置200和300。另外,信息处理装置200和300每个具有近距离无线通信功能。例如这些信息处理装置是基于IEEE(电气与电子工程师协会)802.11标准的无线通信装置。因此,信息处理装置200和300可以使用近距离无线通信功能交换各种类型的信息。
在此,例如,无线LAN(局域网)和Wi-Fi直连可以被用作在通信系统100中要使用的近距离无线通信。另外,例如,TDLS(隧道直接链路建立)和自组网(Ad-hoc)网络可以被用作在通信系统100中要使用的近距离无线通信。额外地,例如,Wi-Fi认证(CERTIFIED)无线显示(Miracast)可以被用作在通信系统100中要使用的近距离无线AV(视听)传输通信。Wi-Fi认证无线显示是一种镜像技术,在该镜像技术中,通过使用Wi-Fi直连或TDLS标准将在一个终端中要再生的音频或视频发送到另一个终端,并且另一个终端也输出音频或视频数据。
此外,作为示例,可以通过将用户接口反向通道(UIBC)应用到Wi-Fi认证无线显示来实现通信系统100。例如,UIBC是在主机PC(主机计算机)与USB(通用串行总线)之间的交换中所使用的协议。在Wi-Fi认证无线显示标准中,在TCP IP(传输控制协议/互联网协议)上实现UIBC。另外,代替Wi-Fi认证无线显示,可以将VNC(虚拟网络计算)应用到通信系统100。
此外,例如,信息处理装置200可以是配备有无线通信功能的显示装置(例如,电视机、个人计算机)或便携式信息处理装置(例如,摄像装置、平板终端、智能电话)。另外,例如,信息处理装置300可以是配备有无线通信功能(例如,平板终端,智能电话)的便携式信息处理装置。
在图1中,示出了在信息处理装置300由用户10的手所持有的情况下,用户10使用通信系统100的情况。作为示例,信息处理装置200可以使用近距离无线通信传送图像数据,并且信息处理装置300可以接收该图像数据以用于输出该图像数据。另外,用户10可以对在其手中所持有的信息处理装置300执行各种操作。
[信息处理装置的示例性配置]
图2是示出根据本技术的第一实施例的信息处理装置200的示例性功能配置的框图。
信息处理装置200包括天线210、无线通信单元220、编码器230、操作接受单元240、显示单元250以及控制器260。
无线通信单元220通过使用近距离无线通信经由天线210执行将各种类型的信息(例如,图像数据)传输到其他信息处理装置(例如,信息处理装置300),或执行从其他信息处理装置(例如,信息处理装置300)接收各种类型的信息(例如,图像数据)。作为示例,当执行传输处理时,编码器230对从控制器260所输出的图像数据(视频数据)进行压缩,并且通过无线通信单元220从天线210传送压缩后的图像数据。
编码器230对要传送的图像数据进行压缩(编码)并且将压缩后的图像数据输出到控制器260。另外,可以通过在软件中执行编码处理实现编码器230或可以通过在硬件中执行编码处理实现编码器230。另外,作为传输对象的图像数据可以作为原始数据被传送而不由编码器230进行编码。
操作接受单元240接受由用户所执行的操作输入,并且将与所接受的操作输入相对应的操作信息输出到控制器260。
显示单元250在控制器260的控制之下显示各种类型的信息(图像、游戏等)。另外,例如,显示单元250可以是显示板,诸如有机EL(电致发光)板、LCD(液晶显示器)板等。另外,操作接受单元240和显示单元250可以集成地配置为触摸板,在该触摸板上用户可以通过使其手指与显示表面接触或接近显示表面而执行操作输入。
控制器260配置成控制信息处理装置200的每个单元。作为示例,控制器260控制将用来显示图像的图像数据传输到信息处理装置300。另外,例如,当从信息处理装置300接收与在信息处理装置300中所接受的用户操作相对应的控制数据时,控制器260基于所接收的控制数据执行处理。
[信息处理装置的示例性配置]
图3是根据本技术的第一实施例的信息处理装置300的示例性功能配置的框图。
信息处理装置300包括天线310、无线通信单元320、解码器330、操作接受单元340、显示单元350、姿态检测单元360、延迟时间计算单元370以及控制器380。
无线通信单元320通过使用近距离无线通信经由天线310执行将各种类型的信息(例如,图像数据)传输到其他信息处理装置(例如,信息处理装置200),或执行从其他信息处理装置(例如,信息处理装置200)接收各种类型的信息(例如,图像数据)。作为示例,当执行接收处理时,解码器330对经由天线310通过无线通信单元320所接收的图像数据进行解码,并且解码后的图像数据被供给到控制器380。然后,控制器380使得显示单元350显示与解码后的图像数据相对应的图像。
解码器330对从信息处理装置200所输出的图像数据进行解码,并且将解码后的图像数据输出到控制器380。另外,可以通过在软件中执行编码处理实现解码器330或可以通过在硬件中执行编码处理实现解码器330。另外,如果从信息处理装置200所传送的图像数据是原始数据,则可以使用原始数据而不由解码器330进行解码。
操作接受单元340接受由用户所执行的操作输入,并且将与所接受的操作输入相对应的操作信息输出到控制器380。作为示例,当基于使用近距离无线通信从信息处理装置200所接收的图像数据的显示画面显示在显示单元350上时,操作接受单元340接受与显示画面有关的用户操作。作为示例,操作接受单元340可以实现为触摸板、键盘、鼠标。
显示单元350配置成在控制器380的控制之下显示各种类型的信息(图像、游戏等)。显示单元350可以显示基于从信息处理装置200所传送的图像数据的图像(例如,图4至9所示的显示画面)。另外,显示单元350可以是显示板,诸如有机EL板、LCD板等。另外,在本技术的实施例中,示出了操作接受单元340和显示单元350集成地配置成触摸板的示例,在该触摸板上用户可以通过使其手指与显示表面接触或接近显示表面而执行操作输入。
姿态检测单元360通过检测信息处理装置300的加速度、运动、倾斜等来检测信息处理装置300的姿态的改变,并且将与所检测到的姿态的改变有关的姿态信息输出到控制器380。优选的是,使用能够检测信息处理装置300中的三个轴(例如,X、Y以及Z轴)的旋转角度的传感器作为姿态检测单元360。例如,姿态检测单元360可以是能够检测加速度的方向的加速度传感器、用于检测装置的倾斜的倾斜传感器、以及能够检测旋转运动的角速度传感器或陀螺仪传感器。
延迟时间计算单元370配置成计算在信息处理装置200与信息处理装置300之间所生成的近距离无线通信的延迟时间。延迟时间计算单元370将所计算出的延迟时间输出到控制器380。另外,将参照图10详细地描述计算延迟时间的方法。
控制器380控制信息处理装置300中的每个单元。作为示例,控制器380控制显示单元350以显示基于从信息处理装置200所接收的图像数据的显示画面。在这种情况下,当将接受用户操作时,控制器380控制显示单元350以显示用于发出接受了用户操作的通知的通知信息。作为通知信息的示例,通过将指示接受了用户操作的附加图像(例如,图4的b中所示的波纹图像402)叠加在显示在显示单元350上的显示画面(基于从信息处理装置200所接收的图像数据的显示画面)来显示该附加图像。另外,当接受了用户操作时,控制器380进行控制以将与用户操作相对应的控制数据传送到信息处理装置200。
此外,例如,控制器380使得以预定的定时擦除显示在显示单元350上的附加图像。作为示例,控制器380可以基于由延迟时间计算单元370所计算出的延迟时间确定预定的定时。
[接收侧信息处理装置的示例性显示]
图4至9是示出在用户对根据本技术的第一实施例的信息处理装置300进行操作的情况下显示单元350的显示转移示例的图。
[当执行按压操作时的示例性显示]
在图4的a中,示出了在内容列表画面400显示在信息处理装置300的显示单元350上的情况下的示例性显示。基于从信息处理装置200所传送的图像数据来显示内容列表画面400。作为示例,对于每个内容,代表内容(例如,运动图像内容或静态图像内容)的代表性图像显示在内容列表画面400上。用户可以通过执行选择与内容列表画面400中的期望内容相对应的代表性图像的操作(例如,用户的触摸操作)来使用期望的内容。
在此,在仅有基于从信息处理装置200所传送的图像数据的显示画面显示在显示单元350上的情况下,假定用户在观看此显示画面的同时执行操作输入(用户操作)。在这种情况下,例如,当对内容列表画面400执行用户操作时,与用户操作相对应的控制数据从信息处理装置300被传送到信息处理装置200。当接收控制数据时,信息处理装置200执行与控制数据相对应的处理并且然后将用来显示执行处理之后的显示画面(在其中反映控制数据的显示画面)的图像数据传送到信息处理装置300。
以这种方式,在内容列表画面400中执行用户操作的情况下,在执行信息处理装置300与信息处理装置200之间的信息交换之后,显示反映控制数据的显示画面。由于这个原因,在显示反映用户操作的显示画面之前可能花费更长的时间。在这种情况下,尽管在内容列表画面400中执行了用户操作,但是对于用户可能不可以快速地识别是否正确地接受了用户操作,并且因此难以确定实际上是否接受了用户操作。此时,很可能发生错误操作,诸如确定未正确地接受用户操作并且因此再次执行操作输入。
因此,在本技术的第一实施例中,当在显示在显示单元350上的显示画面上执行用户操作时,通过将指示正确地接受了用户操作的附加图像(例如,图4的b中所示的波纹图像402)叠加在显示画面上,立即地显示该附加图像。这使得可以快速地向用户通知接受了用户操作。
在图4的b中,示出了紧接在对内容列表画面400执行了用户操作之后的示例性显示。在此示例中,示出了在对内容列表画面400执行用于选择代表性图像401的用户操作的情况下的示例性显示。
如图4的b所示,在内容列表画面400中,在执行用于选择代表性图像401的用户操作(例如,按压操作)的情况下,控制器380使得波纹图像(附加图像)402显示在所选择的代表性图像401附近。控制器380然后将指示选择了代表性图像401的控制数据(包括按压位置和时间)传送到传输侧信息处理装置200。以这种方式,紧接在执行用户操作之后,显示指示正确地接受了用于选择代表性图像401的用户操作的波纹图像402,并且因此对于用户可以容易地并且快速地识别接受了用户自己的操作。
在此,在图4的b中,示出了显示被给予多种颜色的波形图案的波纹图像402作为附加图像的示例。然而,可以显示半透明的波纹图像作为附加图像。另外,可以显示其他形状的图像作为附加图像。
此外,在图4的b中,示出了执行按压操作作为用户操作的示例。然而,即使当执行其他按压操作(例如,长按,双击)时,可以类似地显示波纹图像作为附加图像。在这种情况下,可以根据用户操作的类型改变波纹图像的颜色或形状。另外,例如,当执行长按操作作为用户操作时,可以根据按压时间的长度改变颜色或尺寸。另外,对于其他按压操作,可以显示其他形状的图像作为附加图像。
此外,即使当执行除按压操作之外的每个操作(例如,追踪操作、放大/缩小操作)时也可以类似地显示附加图像。将在图5至7中示出这些显示示例。
[当执行追踪操作时的示例性显示]
在图5的a中,示出了在操作画面410显示在图4中所示的内容列表画面400上的情况下的示例性显示。例如根据预定的定时或用户操作,基于从信息处理装置200所传送的图像数据显示操作画面410。
操作区域图像411和操作指示器412显示在操作画面410上。操作区域图像411用来通过移动操作指示器412执行与内容列表画面400有关的每个处理的设置(例如,显示修改设置)。
可以通过在操作区域图像411中用户的触摸操作或追踪操作移动操作指示器412。例如,在采用用户的手指触摸操作区域图像411中、显示显示指示器412的部分的状态下,用户将其手指移动到操作区域图像411中的期望位置,并且因此可以执行操作指示器412的移动操作(滚动操作)。另外,用户可以通过执行用户采用其手指触摸操作区域图像411中的期望位置的操作(触摸操作),将操作指示器412移动到其手指触摸的位置。
在图5的b中,示出了紧接在执行用户操作之后的操作画面410的示例性显示。在此示例中,示出了在操作区域图像411中执行用于将操作指示器412从左移动到右的用户操作的情况下的示例性显示。
如图5的b中所示,当在操作区域图像411中执行用于将操作指示器412从左移动到右的用户操作(例如,追踪操作)时,控制器380允许显示分别地指示最初和最终位置的波纹图像(附加图像)415和416。另外,控制器380使得显示指示运动的轨迹的轨迹图像(附加图像)417。控制器380将控制数据传送到传输侧信息处理装置200。此控制数据指示执行了用于将操作指示器412从左移动到右的追踪操作(包括其触摸位置和轨迹)。以这种方式,紧接在执行用于将操作指示器412从左移动到右的用户操作之后,显示指示正确地接受了用户操作的附加图像(波纹图像415和416,以及轨迹图像417)。这使得对于用户可以容易地并且快速地识别接受了用户自身的操作。
以与图4的b类似的方式,代替图5的b中所示的每个附加图像,可以显示其他显示形式的图像作为附加图像。
[当执行缩小操作时的示例性显示]
在图6的a中,示出了在显示内容显示画面420的情况下的示例性显示。内容显示画面420是在执行了图4中所示的代表性图像401的选择操作之后显示的显示画面(例如,在其上再生运动或静态图像的画面)。基于从信息处理装置200所传送的图像数据显示内容显示画面420。
在此,如箭头421和422所示,假定执行用于缩小显示在内容显示画面420上的图像的用户操作(例如,采用手20的两个手指捏合图像的操作(捏合))。在这种情况下,如在图6的b中所示,显示根据用户操作的箭头图像(附加图像)425和426。
在图6的b中,示出了紧接在执行用户操作之后的内容显示画面420的示例性显示。在此示例中,示出了在执行图6的a中所示的用户操作的情况下的示例性显示。另外,为了图示的简单和明晰,在图6的b中省略了手20。
如图6的b中所示,当执行用于缩小显示在内容显示画面420上的图像的用户操作时,控制器380使得显示分别地指示图像的最初和最后位置的箭头图像(附加图像)425和426。控制器380将指示执行了用于缩小显示在内容显示画面420上的图像的用户操作的控制数据(包括其两个触摸位置和轨迹)传送到传输侧信息处理装置200。
在此,紧接在对内容显示画面420执行用户操作之后,未从信息处理装置200传送反映了用户操作的图像数据。因此,如图6的b所示,当执行了用户操作时,箭头图像(附加图像)425和426显示在显示画面上。换言之,在执行与用户操作相对应的图像的缩小处理之前的状态中显示箭头图像(附加图像)425和426。在那之后,当从信息处理装置200传送反映用户操作的图像数据时,显示在其上执行与用户操作相对应的缩小处理的显示画面。
以这种方式,紧接在执行用于缩小显示在内容显示画面420上的图像的用户操作之后,显示指示正确地接受了用户操作的箭头图像(附加图像)425和426。因此,对于用户可以容易地并且快速地识别接受了用户自身操作。
[当执行放大操作时的示例性显示]
在图7的a中,示出了在显示内容显示画面420的情况下的示例性显示。在图7的b中,示出了紧接在执行了用于放大显示在内容显示画面420上的图像的用户操作之后的示例性显示。
此外,在图7所示的示例中,代替执行图6中所示的示例中的缩小操作,执行放大操作,并且因此省略了对其的详细说明。换言之,图7的示例示出了如箭头431和432所示地执行用于放大显示在内容显示画面420上的图像的用户操作(例如,采用手20的两个手指捏合图像的操作(捏合))的情况。在这种情况下,如图7的b所示,根据用户操作显示箭头图像(附加图像)435和436。
以这种方式,当在显示单元350的显示表面(触摸板)上接受接触操作(或接近操作)时,控制器380通过使用在显示表面中接受接触操作(或接近操作)的位置作为基准使得显示附加图像。例如,当如图4的b所示,接受了按压代表性图像(操作图像)401的按压操作时,控制器380使得显示以在显示表面中接受按压操作的位置为中心的波纹图像402作为附加图像。另外,作为示例,当如图5至7所示,接受追踪显示表面中的操作图像的处理时,控制器380使得显示指示在显示表面中的追踪操作的轨迹的图像作为附加图像。例如,指示轨迹的图像是图5的b中所示的波纹图像415、416以及轨迹图像41、,图6的b中所示的箭头图像425和426、以及图7的b中所示的箭头图像435和436。
[通过倾斜信息处理装置执行操作时的示例性显示]
在图8的a中,示出了在显示内容显示画面440的情况下的示例性显示。例如,内容显示画面440是基于用户操作显示的显示画面。基于从信息处理装置200所传送的图像数据显示内容显示画面440。例如,内容显示画面440是用于执行如下游戏的画面:该游戏操作车辆441而同时避开路上的障碍物(奶牛、树桩)。作为示例,假定可以通过将信息处理装置300向左倾斜来使车辆441向左转向,并且通过将信息处理装置300向右倾斜来使车辆441向右转向。
在此,假定执行将信息处理装置300向右倾斜的操作(使车辆441向右转向的操作)。在这种情况下,如在图8的b中所示,显示与用户操作相对应的箭头图像(附加图像)442。
在图8的b中,示出了紧接在内容显示画面440中执行用户操作之后的示例性显示。在此示例中,示出了在执行将信息处理装置300向右倾斜的操作(使车辆441向右转向的操作)的情况下的示例性显示。另外,为了图示的简单和明晰,在图8中省略了用户的手。
如图8的b所示,当执行将信息处理装置300向右倾斜的操作(使车辆441向右转向的操作)时,控制器380可以基于从姿态检测单元360所输出的姿态信息(与姿态的改变相关的信息)检测操作。以这种方式,当检测到操作时,控制器380使得显示指示倾斜方向的箭头图像(附加图像)442。然后,控制器380将指示执行了将信息处理装置300向右倾斜的用户操作(使车辆441向右转向的操作)的控制数据(包括倾斜方向和角度)传送到传输侧信息处理装置200。
在此,紧接在内容显示画面440中执行了用户操作之后,未从信息处理装置200传送反映用户操作的图像数据。因此,如图8的b所示,箭头图像(附加图像)442显示在执行用户操作时的图像上。换言之,在根据用户操作移动车辆441之前的状态中显示箭头图像(附加图像)442。在那之后,当从信息处理装置200传送了反映用户操作的图像数据时,显示根据用户操作移动了车辆441的显示画面。
以这种方式,紧接在执行了将信息处理装置300向右倾斜的操作(使车辆441向右转向的操作)之后,显示指示正确地接受了用户操作的箭头图像(附加图像)442。这使得对于用户可以容易地并且快速地识别接受了用户自身的操作。
[通过旋转信息处理装置执行操作时的示例性显示]
在图9的a中,示出了在显示内容显示画面450的情况下的示例性显示。例如,内容显示画面450是基于用户操作显示的显示画面,并且基于从信息处理装置200所传送的图像数据显示内容显示画面450。例如,内容显示画面450是用于再生动画的显示画面。另外,通过使用与显示单元350的显示表面垂直的轴作为旋转轴以90度的角度旋转信息处理装置300,并且因此,假定可以在显示单元350的纵向状态与横向状态之间进行改变。
在此,如箭头451所示,假定执行了通过使用与显示单元350的显示表面垂直的轴作为旋转轴以90度的角度沿顺时针(CW)方向旋转信息处理装置300的操作。在这种情况下,如图9的b所示,根据用户操作显示箭头图像(附加图像)452。
在图9的b中,示出了紧接在内容显示画面450中执行用户操作之后的示例性显示。在此示例中,示出了在执行了以90度的角度沿CW方向旋转信息处理装置300的操作的情况下的示例性显示。另外,为了图示的简单和明晰,在图9中省略了用户的手。
如图9的b所示,当执行了以90度的角度沿CW方向旋转信息处理装置300的操作时,控制器380可以基于从姿态检测单元360所输出的姿态信息(与姿态改变有关的信息)检测操作。以这种方式,当检测到操作时,控制器380使得显示指示旋转的方向的箭头图像(附加图像)452。然后,控制器380将控制数据传送到传输侧信息处理装置200。此控制数据(包括其旋转方向和角度)指示执行了以90度的角度沿CW方向旋转信息处理装置300的操作。
在此,紧接在内容显示画面450中执行用户操作之后,未从信息处理装置200传送反映用户操作的图像数据。因此,如图9的b所示,箭头图像(附加图像)452显示在执行用户操作时的图像上。换言之,在根据用户操作旋转图像之前的状态中显示箭头图像(附加图像)452。在那之后,当从信息处理装置200传送反映用户操作的图像数据时,显示根据用户操作旋转了图像的显示画面。
以这种方式,紧接在执行了以90度的角度沿CW方向旋转信息处理装置300的操作之后,显示指示正确地接受了用户操作的附加图像452。这使得对于用户可以容易地并且快速地识别接受了用户自身的操作。
因此,当改变信息处理装置300的姿态时,控制器380执行输出通知信息的控制,该通知信息用来发出接受了基于改变的用户操作(通过改变信息处理装置300的姿态所执行的操作)的通知。在这种情况下,作为示例,控制器380可以通过将视觉地代表改变的附加图像(图8中所示的箭头图像442和图9中所示的箭头图像452)叠加在显示在显示单元350上的图像上使得显示附加图像,来输出通知信息。
以与图4的b和图5的b类似的方式,代替图6的b、图7的b、图8的b以及图9的b中所示的每个附加图像,可以显示其他显示模式的图像作为附加图像。例如,可以以图像变淡并且闪烁的状态在整个显示画面上显示图8的b和图9的b中所示的箭头图像(附加图像)442和452。
[通信示例]
图10是示出在构成根据本技术的第一实施例的通信系统100的每个装置中所执行的示例性通信处理的序列图。另外,在此示例性通信处理中,示出了在以简化的方式执行用户的操作输入的情况下的通信处理。
最初,在传输侧信息处理装置200与接收侧信息处理装置300之间执行网络连接处理(601和602)。换言之,在传输侧信息处理装置200与接收侧信息处理装置300之间执行连接建立(601和602)。
随后,执行在传输侧信息处理装置200与接收侧信息处理装置300之间的通信中交换能力(capability)的能力交换处理(例如交换编解码器信息和任何其他支持的数据格式的信息的处理)(603和604)。在此能力交换处理中,例如交换了指示图像数据的压缩格式、被用于传送数据的图像的尺寸、以及能够被传送的控制数据的种类的各种信息(603和604)。作为示例,当使用Wi-Fi认证无线显示时,通过使用RTSP(实时流传输协议)分组可以交换上述数据并且可以确定要传送的数据格式。另外,可以预先在装置之间确定要使用的能力,并且可以基于预先确定的能力传送图像数据。在这种情况下,可以省略能力交换处理。
随后,确定在传输侧信息处理装置200和接收侧信息处理装置300中的每个中要使用的编解码器类型(视频编解码器)(605和606)。接下来,传输侧信息处理装置200生成与要显示在接收侧信息处理装置300上的显示画面(UI画面画面)相对应的图像数据(607)。然后,传输侧信息处理装置200对所生成的图像数据进行编码并且将编码后的图像数据传送到接收侧信息处理装置300(608和609)。作为示例,当使用Wi-Fi认证无线显示时,通过使用RTP(实施流传输协议)数据传送图像数据。
当接收到从传输侧信息处理装置200所传送的图像数据时(609),接收侧信息处理装置300对所接收的图像数据进行解码,并且使得显示单元350显示与解码后的图像数据相对应的显示画面(610)。作为示例,图4的a中所示的内容列表画面400显示在显示单元350上。
随后,接收侧信息处理装置300的延迟时间计算单元370计算传输侧信息处理装置200与接收侧信息处理装置300之间的近似延迟时间(611)。作为示例,基于在每个装置之间所交换的分组数据的RTT(往返时间)值或在接收侧信息处理装置300中所包括的缓冲的尺寸来计算延迟时间(611)。在此,分组数据的RTT值是指示从信号的传输到响应的接收的时间的值。另外,例如,可以使用在能力交换处理(603和604)或图像数据的通信处理(608和609)的通信中信息处理装置200与信息处理装置300之间所交换的分组数据的RTT值作为分组数据的RTT值。
在此,下面示出了计算延迟时间(所估计的延迟时间)的计算方法的示例。可以通过使用下面的等式(1)计算延迟时间。
延迟时间=网络延迟+分组到达时间–分组再生时间) (1)
在上面的等式(1)中,通过使用分组数据的RTT值可以获得网络延迟。另外,通过使用在信息处理装置300中所包括的缓冲的尺寸,可以获得(分组到达时间-分组再生时间)。
接收侧信息处理装置300保存所计算出的延迟时间。每当传输或接收分组时可以对延迟时间的值进行更新。另外,延迟时间的值可以是作为固定值的最初计算出的值。
在下面,假定在与从传输侧信息处理装置200所传送的图像数据相对应的显示画面显示在显示单元350上的状态中,用户执行操作输入(用户输入)。当以这种方式执行操作输入时(612),接收侧信息处理装置300在接受了操作输入时,通过将指示接受了操作输入的附加图像(效果图像)叠加在显示在显示单元350上的显示画面上,来显示该附加图像(效果图像)(613)。换言之,通过将指示接受了操作输入的附加图像叠加在与从传输侧信息处理装置200所传送的图像数据相对应的显示画面上,显示该附加图像(重叠显示)。作为示例,如图4的b所示,当接受了按压操作时,波形状的图像(波纹图像402)重叠地显示在显示画面上。另外,如图5的b所示,当接受了滚动操作时,以重叠的方式显示代表其操作内容的附加图像(波纹图像415和416、轨迹图像417)。
随后,接收侧信息处理装置300设置与在其中所保存的延迟时间相对应的计时器(614)。此计时器是用于测量擦除附加图像的定时的计时器。换言之,在计时器被设置为期满之前继续显示附加图像。在当计时器期满时的定时,擦除附加图像。
随后,接收侧信息处理装置300将与操作输入相对应的控制数据(用户输入数据)传送到传输侧信息处理装置200(615和616)。作为示例,使用UIBC协议将与操作输入相对应的控制数据传送到传输侧信息处理装置200(615和616)。
在此示例中,示出了在显示附加图像(613)之后传送控制数据(615和616)的示例。然而,可以在传送控制数据之后显示附加图像。
此外,在一个示例中,当在接收侧信息处理装置300中所保存的延迟时间小于参考值时,可以不显示附加图像。换言之,仅当延迟达到一定程度时,可以显示附加图像并且可以通知用户正确地接受了用户操作。
此外,接收侧信息处理装置300以当设置的计时器(与延迟时间相对应的计时器)期满时的定时来擦除附加图像(617)。换言之,在经过了所计算出的延迟时间之后擦除附加图像(617)。
在此,针对附加图像、根据附加图像的绘图时间可以执行诸如淡出的图像处理。作为示例,可以根据从显示附加图像的定时起所经过的时间来执行允许附件图像变淡的图像处理,并且当达到预定的时间时可以擦除附加图像。
当接收了从接收侧信息处理装置300所传送的控制数据时(616),传输侧信息处理装置200基于所接收的控制数据执行处理(618)。在一个示例中,如图4的b所示,当接受了代表性图像401的按压操作时,执行用于允许将与代表性图像401相对应的内容显示画面420(图6和7中所示)显示在信息处理装置300上的处理作为基于控制数据的处理。
随后,传输侧信息处理装置200生成图像数据(619),该图像数据反映了基于控制数据的处理。接下来,传输侧信息处理装置200对所生成的图像数据进行编码,并且将编码后的数据传送到接收侧信息处理装置300(620和621)。另外,接收侧信息处理装置300对图像数据进行解码,并且使得显示单元350显示与解码后的图像数据相对应的显示画面(622)。
在下面,紧接在执行了用户的操作输入之后,假定未以叠加的方式显示指示接受了操作输入的附加图像。在这种情况下,通过执行基于用户的操作输入的处理所获得的结果将反映当接收侧信息处理装置300接收并且显示反映处理的图像数据的定时。然而,从执行了用户的输入操作到反映通过执行基于操作输入的处理而获得的结果的跨越的时间段(从612到622跨越的时间段)经常依赖于网络延迟、处理延迟等。当该时间段变长时,可能降低可用性(容易使用)。
另一方面,根据本技术的第一实施例,紧接在执行了操作输入之后以叠加的方式显示指示接受了用户的操作输入的附加图像(612和613)。因此,在执行了用户的操作输入时,对于用户可以容易地并且快速地被通知正确地执行了用户操作(命令)。
[信息处理装置的示例性操作]
图11是示出根据本技术的第一实施例的信息处理装置200要执行的数据通信控制处理的处理过程的示例的流程图。另外,在此示例中,示出了在传输侧信息处理装置200与接收侧信息处理装置300之间执行近距离无线通信的示例。
最初,控制器260执行与接收侧信息处理装置300的网络连接处理(步骤S901)。换言之,在传输侧信息处理装置200与接收侧信息处理装置300之间建立连接(步骤S901)。
随后,控制器260执行在与接收侧信息处理装置300的通信中交换能力的能力交换处理(步骤S902)。接下来,控制器260确定在传输侧信息处理装置200与接收侧信息处理装置300之间的近距离无线通信中要使用的编解码器(视频编解码器)(步骤S903)。
随后,控制器260生成与要显示在接收侧信息处理装置300上的显示画面(UI画面)相对应的图像数据(步骤S904)。接下来,编码器230对所生成的图像数据进行编码,并且控制器260将编码后的图像数据传送到接收侧信息处理装置300(步骤S905)。
随后,控制器260确定是否从传输侧信息处理装置200接收了与操作输入相对应的控制数据(步骤S906)。如果确定未接收与操作输入相对应的控制数据(在步骤S906中为否),则处理返回到步骤S904。另一方面,如果确定从传输侧信息处理装置200接收了与操作输入相对应的控制数据(在步骤S906中为是),则控制器260执行基于所接收的控制数据的处理(步骤S907)。
随后,控制器260确定是否接受了终止网络连接的指令(步骤S908)。如果确定接受了终止指令(在步骤S908中为是),则结束数据通信控制处理。另一方面,如果确定未接受终止指令(在步骤S908中为否),则处理返回到步骤S904。然后,控制器260生成与要显示在接收侧信息处理装置300上的显示画面(UI画面)相对应的图像数据(反映基于所接收的控制数据的处理的图像数据)(步骤S904)。
[信息处理装置的示例性操作]
图12是示出根据本技术的第一实施例的信息处理装置300要执行的数据通信控制处理的处理过程的示例。另外,在此示例中,示出了在传输侧信息处理装置200与接收侧信息处理装置300之间执行近距离无线通信的示例。
最初,控制器380在传输侧信息处理装置200与接收侧信息处理装置300之间执行网络连接处理(步骤S911)。换言之,在传输侧信息处理装置200与接收侧信息处理装置300之间建立连接(步骤S911)。
随后,控制器380执行在与传输侧信息处理装置200的通信中交换能力的能力交换处理(步骤S912)。接下来,控制器380确定在传输侧信息处理装置200与接收侧信息处理装置300之间的近距离无线通信中要使用的编解码器(视频编解码器)(步骤S913)。
随后,控制器380确定是否接收到由传输侧信息处理装置200所生成的图像数据(步骤S914)。如果确定未接收到图像数据(在步骤S914中为否),则处理继续到步骤S917。另一方面,如果确定接收到图像数据(在步骤S914中为是),则解码器330对所接收到的图像数据进行解码,并且控制器380使得显示单元350显示与解码后的图像数据相对应的显示画面(步骤S915)。另外,步骤S915对应于在权利要求中所描述的第一过程的示例。
随后,控制器380计算传输侧信息处理装置200与接收侧信息处理装置300之间的近似延迟时间(步骤S916)。控制器380然后保存所计算出的延迟时间。
随后,控制器380确定是否执行用户的操作输入(步骤S917)。如果确定未执行用户的操作输入(在步骤S917中为否),则处理继续到步骤S921。另一方面,如果确定执行了用户的操作输入(在步骤S917中为是),则当接受了操作输入时,控制器380通过将指示接受了操作输入的附加图像叠加在要显示在显示单元350上的显示画面上,来使得显示附加图像(步骤S918)。另外,步骤S918对应于在权利要求中所描述的第二过程的示例。
随后,控制器380设置与所保存的延迟时间相对应的计时器(步骤S919)。接下来,控制器380将与操作输入相对应的控制数据传送到传输侧信息处理装置200(步骤S920)。另外,步骤S920对应于在权利要求中所描述的第三过程。
随后,控制器380确定所设置的计时器(与延迟时间相对应的计时器)是否期满。如果确定所设置的计时器未期满(在步骤S921中为否),则处理继续到步骤S923。另一方面,如果确定所设置的计时器期满(在步骤S921中为是),则控制器380擦除计时器期满的附加图像(步骤S922)。另外,如果执行多个用户操作,则针对多个用户操作中的每个显示附加图像。在这种情况下,针对每个附加图像设置计时器,并且顺序地擦除具有期满的计时器的附加图像。
随后,控制器380确定是否接受了终止网络连接的指令(步骤S923)。如果确定接受了终止指令(在步骤S923中为是),则结束数据通信控制处理。另一方面,如果确定未接受终止指令(在步骤S923中为否),则处理返回到步骤S914。
在此示例中,示出了在显示附加图像(步骤S918)之后传送控制数据(S920)的示例,但是可以在传送控制数据之后显示附加图像。
以这种方式,在本技术的实施例中,当在显示在显示单元350上的显示画面上执行用户操作时,以叠加的方式立即地显示指示正确地接受了用户操作的附加图像(与用户操作相对应的附加图像)。这使得可以快速地通知用户接受了用户操作。
因此,对于用户操作的接受可以提供视觉反馈,并且可以清楚地并且快速地将接受了用户操作通知给用户。因此,可以为用户提供舒适的操作感。另外,可以清楚地并且快速地将接受了用户操作通知给用户,并且因此可以防止无意的操作。
此外,通过根据延迟时间动态地改变显示附加图像的时间段,可以防止附加图像与由基于用户操作的处理所处理的图像重叠。因此,可以防止由基于用户操作的处理所处理的图像可视性降低。因此,在本技术的实施例中,可以允许用户容易地识别用户操作的接受状况,并且可以考虑到由远程操作所引起的延迟而执行用户反馈。
<2.第二实施例>
在本技术的第一实施例中,已经示出了接收侧信息处理装置计算在两个信息处理装置之间的通信中的延迟时间并且基于延迟时间擦除附加图像的示例。然而,接收侧信息处理装置可以基于从传输侧信息处理装置所提供的信息擦除附加图像。
在下面,在本技术的第二实施例中,将示出接收侧信息处理装置可以基于从传输侧信息处理装置所提供的信息擦除附加图像的示例。根据本技术的第二实施例的通信系统(构成通信系统的信息处理装置)具有与图1中所示的通信系统100(信息处理装置200和300)等类似的配置。因此,采用相同的附图标记表示与通信系统100以及信息处理装置200和300中的部件相似的本实施例中的部件,并且将省略对部件的部分描述。
[通信示例]
图13是示出由构成根据本技术的第二实施例的通信系统100的每个装置所执行的示例性通信处理的序列图。另外,图13是图10的修改例。因此,采用相同的附图标记表示与图10的这些部件类似的本实施例中的部件,并且将省略对部件的部分描述。
在此示例中,未执行图10中所示的延迟时间的计算(611)和计时器的设置(614)。
此外,在执行了基于控制数据的处理之后(618),传输侧信息处理装置200将用于所接收到的控制数据的Ack(确认)传送到接收侧信息处理装置300(631和632)。换言之,接受了与所接收的控制数据相对应的操作输入的事实被传送到接收侧信息处理装置300(631和632)。
此外,在接收到用于控制数据的Ack的定时,接收侧信息处理装置300可以擦除(633)附加图像。然而,在传输侧信息处理装置200与接收侧信息处理装置300之间存在延迟,并且因此优选的是在显示反映基于控制数据的处理的图像数据的定时,擦除附加图像。
因此,例如,传输侧信息处理装置200可以将对应于接受控制数据时的图像数据的序列号赋给用于控制数据的Ack分组。当接收侧信息处理装置300接收到与序列号相对应的图像数据时(或,当显示与序列号相对应的图像数据时),接收侧信息处理装置300可以擦除附加图像(633)。在此,通过限定其自身分组可以使用存储序列号的Ack分组。
以这种方式,当信息处理装置200的控制器260从信息处理装置300接收到与信息处理装置300中所接受的用户操作相对应的控制数据时,控制器260进行控制以将指示接收了控制数据的数据传送到信息处理装置300。例如,指示接收了控制数据的数据是图13的631和632所示的Ack。
此外,信息处理装置300的控制器380例如可以将从信息处理装置200接收到指示接受了控制数据的数据的定时当作擦除附加图像的定时。另外,例如控制器380可以将从信息处理装置200接收到与图像数据标识信息相对应的图像数据的定时当作擦除附加图像的定时。图像数据标识信息包括在指示信息处理装置200接受了控制数据的数据中。另外,控制器380例如可以将显示基于与指示信息处理装置200接受了控制数据的数据中所包括的图像数据标识信息相对应的图像数据的图像的定时当作擦除附加图像的定时。注意,图像数据标识信息是例如用于标识图像数据的序列号。
[信息处理装置的示例性操作]
图14是示出根据本技术的第二实施例的信息处理装置200要执行的数据通信控制处理的处理过程的示例的流程图。另外,图14是图11的修改例。因此,采用相同的附图标记表示与图11的部件类似的本实施例中的部件,并且省略对部件的部分描述。
在执行了基于所接收到的控制数据的处理之后(步骤S907),控制器260将用于控制数据的Ack传送到接收侧信息处理装置300(步骤S931)。
[信息处理装置的示例性操作]
图15是示出根据本技术的第二实施例的信息处理装置300要执行的数据通信控制处理的处理过程的示例的流程图。另外,图15是图12的修改例。因此,采用相同的附图标记表示与图12的部件类似的本实施例中的部件,并且省略对部件的部分描述。
在传送了与操作输入相对应的控制数据之后(步骤S920),控制器380确定是否接收到用于控制数据的Ack(步骤S941)。如果确定接收到用于控制数据的Ack(在步骤S941中为是),则控制器380确定是否接收到与用于控制数据Ack分组中所包括的序列号相对应的图像数据(步骤S942)。如果确定接收到了与序列号相对应的图像数据(在步骤S942中为是),则控制器380擦除与Ack相关的附加图像(步骤S943)。
此外,如果确定未接收到用于控制数据的Ack(在步骤S941中为否),则处理继续到步骤S923。另外,在接收到用于控制数据的Ack的情况下,如果确定未接收到与Ack分组中所包括的序列号相对应的图像数据(在步骤S942中为否),则处理继续到步骤S923。
以这种方式,根据本技术的第二实施例,可以正确地擦除附加图像而不计算在两个信息处理装置之间的通信中的延迟时间。
<3.第三实施例>
在本技术的第一和第二实施例中,已经示出了将附加图像显示在接收侧信息处理装置上的示例。然而,可以将附加图像显示在传输侧信息处理装置上。另外,可以将附加图像显示在接收和传输侧的信息处理装置两者上。另外,可以将附加图像显示在接收和传输侧的信息处理装置两者中的任一个上。
在下面,在本技术的第三实施例中,将示出将附加图像显示在接收和传输侧的两个信息处理装置上的示例。根据本技术的第三实施例的通信系统(构成通信系统的信息处理装置)具有与图1中所示的通信系统100(信息处理装置200和300)等基本上相似的配置。因此,采用相同的附图标记表示与通信系统100以及信息处理装置200和300类似的本实施例中的部件,并且省略对部件的部分描述。
[附加图像的示例性显示]
图16是示出构成根据本技术的第三实施例的通信系统100的每个信息处理装置的示例性显示的图。另外,信息处理装置300的示例性显示与图4的b类似。另外,将与显示在信息处理装置300的显示单元350上的显示图像相同的显示画面显示在信息处理装置200的显示单元250上。
在此,传输侧信息处理装置200的控制器260使得将图像(内容列表画面405)显示在显示单元250上。图像(内容列表画面405)与要传送到接收侧信息处理装置300的图像(内容列表画面400)相同。另外,如上所述,在内容列表画面400中,假定执行选择代表性图像401的用户操作(例如,按压操作)。在这种情况下,接收侧信息处理装置300的控制器380使得波纹图像(附加图像)402显示在所选择的代表性图像401附近。然后,控制器380将指示选择了代表性图像401的控制数据传送到传输侧信息处理装置200。另外,当接收到控制数据时,基于控制数据(例如,用户操作的类型和位置)、传输侧信息处理装置200的控制器260使得波纹图像(附加图像)406显示在内容列表画面405上。换言之,以重叠的方式将相同的波纹图像(附加图像)402和406分别地显示在内容列表画面400和405上。
以这种方式,紧接在执行了选择代表性图像401的用户操作之后,显示波纹图像402,并且同时,可以将波纹图像406显示在接收与用户操作有关的控制数据的传输侧信息处理装置200上。因此,通过传输侧信息处理装置200和接收侧信息处理装置300中的任何一个,用户可以清楚地、快速地以及容易地识别接受了其自身的操作。
关于将附加图像显示在在接收和传输侧的两个信息处理装置上或是将附加图像显示在在接收和传输侧的信息处理装置中的任何一个上的确定可以由用户操作设定。
以这种方式,通信系统100可以配置成执行第一操作和第二操作中的至少一个。在此,第一操作是允许信息处理装置300通过将指示接受了用户操作的附加图像叠加在显示在显示单元350上的图像上,来显示该附加图像的操作。另外,第二操作是允许信息处理装置200通过将指示接受了与用户操作有关的控制数据的附加图像叠加在显示在显示单元250上的图像上,来显示该附加图像的操作。
<4.修改例>
已经在图2中示出了包括操作接受单元和显示单元的传输侧信息处理装置的示例。然而,本技术的实施例可以被施加到不包括操作接受单元和/或显示单元的信息处理装置。
在下面,作为修改例,将示出不包括操作接受单元和显示单元的传输侧信息处理装置的示例。
[信息处理装置的示例性配置]
图17是示出根据本技术的修改例的信息处理装置201的示例性功能配置的框图。
信息处理装置201包括天线210、无线通信单元220、编码器230以及控制器260。另外,信息处理装置201是图2中所示的信息处理装置200的修改例。因此,采用相同的附图标记表示与信息处理装置200的这些部件类似的本实施例中的部件,并且省略对部件的部分描述。
以这种方式,即使当不包括操作接受单元和显示单元的信息处理装置201被当作传输侧信息处理装置时,也可以应用本技术的实施例。
<5.修改例>
在本技术的第一至第三实施例中,已经示出了以无线方式彼此直接连接两个信息处理装置(信息处理装置200和300)的示例。然而,其他网络配置是可以的。
下面,在本修改例中,将示出其他网络配置的示例。另外,根据修改例的信息处理装置具有与图2和3中所示出的示例等基本上类似的配置。因此,省略与本技术的第一至第三实施例相同的部件的部分描述。
[通信系统的示例性配置]
图18是示出根据本技术的修改例的通信系统700的示例性配置的图。在图18中,示出了当两个信息处理装置(信息处理装置710和720)经由路由器730彼此无线地连接时的示例性系统配置。
通信系统700包括信息处理装置710、信息处理装置720以及路由器730。另外,信息处理装置710对应于图1中所示的信息处理装置200,并且信息处理装置720对应于图1中所示的信息处理装置300。
此外,尽管图18示出了使用路由器730无线地连接两个信息处理装置(信息处理装置710和720)的示例,但是可以使用其他中继装置彼此连接两个信息处理装置。作为示例,两个信息处理装置(信息处理装置710和720)可以经由接入点(无线LAN接入点)彼此连接。
[通信系统的示例性配置]
图19是示出根据本技术的修改例的通信系统800的示例性配置的图。在图19中,示出了两个信息处理装置(信息处理装置810和820)经由互联网850彼此无线地连接的情况下的系统配置的示例。
通信系统800包括信息处理装置810、信息处理装置820、路由器830和840、以及互联网850。另外,信息处理装置810对应于图1中所示的信息处理装置200,并且信息处理装置820对应于图1中所示的信息处理装置300。
此外,尽管图19示出了两个信息处理装置(信息处理装置810和信息处理装置820)经由互联网850无线地连接的示例,但是两个信息处理装置可以经由其他网络(例如,公共线路网络)无线地彼此连接。
如图19所示,可以经由互联网850控制远程位置中的图像。因此,可以不依赖于控制终端与图像输出终端之间的网络路径来实施本技术的实施例。
此外,在本技术的实施例中,已经示出了视觉地输出用于发出接受了用户操作的通知的通知信息的示例(显示附加图像的示例)。然而,可以输出其他类型的通知信息。例如,可以通过输出用于发出接受了用户操作的通知的声音的听觉方式输出通知信息。另外,例如,可以通过使信息处理装置振动以发出接受了用户操作的通知来输出通知信息。
在本技术的实施例中,尽管已经描述了配备有无线通信功能的便携式信息处理装置或显示装置的示例,但是本技术的实施例可以应用到其他类型的信息处理装置。作为示例,本技术的实施例可以应用到诸如家庭游戏机、便携式视频处理装置、手持游戏控制台、数字静态摄像装置、数字视频摄像装置(例如,集成摄像装置的记录器)、数字相框的信息处理装置。另外,例如,通过附接配备有无线通信功能的无线通信装置,本技术的实施例可以应用到能够执行无线通信的信息处理装置(例如不具有无线通信功能的个人计算机)。
注意,上述的实施例示出了体现本公开的示例,并且在实施例的特征与本公开的各个特征之间存在对应关系。类似地,在本公开的特征与采用相同的附图标记的本公开的实施例的各个特征之间存在对应关系。然而,本公开不限于实施例,并且可以体现为不背离本公开的范围的各种修改。
此外,在上述的实施例中的每个中所描述的过程可以理解为包括这些过程的系列的方法,并且可以理解为用于使得计算机执行这些过程的系列的程序或将这些程序存储在其中的记录介质。作为记录介质,例如,可以使用硬盘、CD(压缩盘)、MD(迷你盘)、DVD(数字通用盘)、存储卡、或蓝光盘(注册商标)。
本领域内技术人员应当理解,依赖于设计需求和其他因素,可以发生各种修改、组合、子组合以及替换,只要这些修改、组合、子组合以及替换在所附的权利要求或其等价物的范围内即可。
另外,本技术还可以如下地配置。
(1)一种信息处理装置,包括:
操作接受单元,配置成当基于使用近距离无线通信从其他信息处理装置接收的图像数据的图像显示在显示单元上时,接受与所述图像有关的用户操作;以及
控制器,配置成以如下方式执行控制:当接受了所述用户操作时输出用于发出接受了所述用户操作的通知的通知信息,并且将与所述用户操作相对应的控制数据传送到所述其他信息处理装置。
(2)根据(1)的信息处理装置,其中,所述控制器通过将指示接受了所述用户操作的附加图像叠加在显示在所述显示单元上的所述图像上,使得输出所述通知信息。
(3)根据(2)的信息处理装置,
其中,所述操作接受单元和所述显示单元包括触摸板,
其中,所述用户操作是对所述触摸板的接触操作或接近操作,以及
其中,当接受了对所述触摸板的接触操作或接近操作时,所述控制器通过使用在所述触摸板中接受了所述接触操作或接近操作的位置作为基准,使得显示所述附加图像。
(4)根据(3)的信息处理装置,其中,当接受了对在所述触摸板上的操作图像进行按压的按压操作时,所述控制器使得波纹图像显示作为所述附加图像,所述波纹图像以在所述触摸板中接受了所述按压操作处的位置为中心,以及
其中,当接受了对在所述触摸板上的操作图像进行追踪的追踪操作时,所述控制器使得指示在所述触摸板中的所述追踪操作的轨迹的图像显示作为所述附加图像。
(5)根据(2)至(4)中的任一项的信息处理装置,其中,所述控制器使得以预定的定时擦除所述附加图像。
(6)根据(5)的信息处理装置,其中,所述控制器基于在与所述其他信息处理装置进行的所述近距离无线通信中所发生的延迟时间,确定所述预定的定时。
(7)根据(5)的信息处理装置,其中,所述控制器将从所述其他信息处理装置接收指示接受了所述控制数据的数据的定时当作所述预定的定时。
(8)根据(5)的信息处理装置,其中,所述控制器将从所述其他信息处理装置接收与图像数据标识信息相对应的图像数据的定时、或将显示基于所述图像数据的图像的定时当作所述预定的定时,所述图像数据标识信息包括在指示所述其他信息处理装置接受了所述控制数据的数据中。
(9)根据(1)或(2)的信息处理装置,还包括:
姿态检测单元,配置成检测所述信息处理装置的姿态,
其中,所述用户操作是通过改变所述信息处理装置的姿态而执行的操作,以及
其中,当改变所述信息处理装置的姿态时,所述控制器使得输出用于发出接受了基于改变的所述用户操作的通知的所述通知信息。
(10)根据(9)的信息处理装置,其中,当改变所述信息处理装置的姿态时,所述控制器通过将视觉地指示所述改变的附加图像叠加在显示在所述显示单元上的图像上,使得输出所述通知信息。
(11)一种通信系统,包括:
第一信息处理装置;以及
第二信息处理装置,
其中,所述第一信息处理装置使得基于使用近距离无线通信从所述第二信息处理装置接收的图像数据的图像显示在第一显示单元上,并且当接受了与所述图像有关的用户操作时,将与所述用户操作相对应的控制数据传送到所述第二信息处理装置,
其中,所述第二信息处理装置使用所述短距离无线通信传送用来将所述图像显示在所述第一信息处理装置上的图像数据、同时使得与所述图像相同的图像显示在第二显示单元上,并且当从所述第一信息处理装置接收到所述控制数据时,将指示接收到所述控制数据的数据传送到所述第一信息处理装置,以及
其中,执行第一操作和第二操作中的至少一个,所述第一操作允许所述第一信息处理装置将指示接受了所述用户操作的附加图像叠加在显示在所述第一显示单元上的所述图像上,所述第二操作允许所述第二信息处理装置将指示接受了所述控制数据的附加图像叠加在显示在所述第二显示单元上的所述图像上。
(12)一种信息处理方法,包括:
第一过程,使得基于使用近距离无线通信从其他信息处理装置接收的图像数据的图像显示在显示单元上;
第二过程,当接受了与显示在所述显示单元上的图像有关的用户操作时,使得输出用于发出接受了所述用户操作的通知的通知信息;以及
第三过程,将与所述用户操作相对应的控制数据传送到所述其他信息处理装置。
Claims (12)
1.一种信息处理装置,包括:
操作接受单元,配置成当基于使用近距离无线通信从其他信息处理装置接收的图像数据的图像显示在显示单元上时,接受与所述图像有关的用户操作;以及
控制器,配置成以如下方式执行控制:当接受了所述用户操作时输出用于发出接受了所述用户操作的通知的通知信息,并且将与所述用户操作相对应的控制数据传送到所述其他信息处理装置。
2.根据权利要求1所述的信息处理装置,其中,所述控制器通过将指示接受了所述用户操作的附加图像叠加在显示在所述显示单元上的图像上,使得输出所述通知信息。
3.根据权利要求2所述的信息处理装置,
其中,所述操作接受单元和所述显示单元包括触摸板,
其中,所述用户操作是对所述触摸板的接触操作或接近操作,以及
其中,当接受了对所述触摸板的接触操作或接近操作时,所述控制器通过使用在所述触摸板中接受了所述接触操作或接近操作的位置作为基准,使得显示所述附加图像。
4.根据权利要求3所述的信息处理装置,其中,当接受了对在所述触摸板上的操作图像进行按压的按压操作时,所述控制器使得波纹图像显示作为所述附加图像,所述波纹图像以在所述触摸板中接受了所述按压操作处的位置为中心,以及
其中,当接受了对在所述触摸板上的操作图像进行追踪的追踪操作时,所述控制器使得指示在所述触摸板中的所述追踪操作的轨迹的图像显示作为所述附加图像。
5.根据权利要求2所述的信息处理装置,其中,所述控制器使得以预定的定时擦除所述附加图像。
6.根据权利要求5所述的信息处理装置,其中,所述控制器基于在与所述其他信息处理装置之间进行的所述近距离无线通信中所发生的延迟时间,确定所述预定的定时。
7.根据权利要求5所述的信息处理装置,其中,所述控制器将从所述其他信息处理装置接收指示接受了所述控制数据的数据的定时当作所述预定的定时。
8.根据权利要求5所述的信息处理装置,其中,所述控制器将从所述其他信息处理装置接收与图像数据标识信息相对应的图像数据的定时、或将显示基于所述图像数据的图像的定时当作所述预定的定时,所述图像数据标识信息包括在指示所述其他信息处理装置接受了所述控制数据的数据中。
9.根据权利要求1所述的信息处理装置,还包括:
姿态检测单元,配置成检测所述信息处理装置的姿态,
其中,所述用户操作是通过改变所述信息处理装置的姿态而执行的操作,以及
其中,当改变所述信息处理装置的姿态时,所述控制器使得输出用于发出接受了基于改变的所述用户操作的通知的所述通知信息。
10.根据权利要求9所述的信息处理装置,其中,当改变所述信息处理装置的姿态时,所述控制器通过将视觉地指示所述改变的附加图像叠加在显示在所述显示单元上的图像上,使得输出所述通知信息。
11.一种通信系统,包括:
第一信息处理装置;以及
第二信息处理装置,
其中,所述第一信息处理装置使得基于使用近距离无线通信从所述第二信息处理装置接收的图像数据的图像显示在第一显示单元上,并且当接受了与所述图像有关的用户操作时,将与所述用户操作相对应的控制数据传送到所述第二信息处理装置,
其中,所述第二信息处理装置使用所述短距离无线通信传送用来将所述图像显示在所述第一信息处理装置上的图像数据、同时使得与所述图像相同的图像显示在第二显示单元上,并且当从所述第一信息处理装置接收到所述控制数据时,将指示接收到所述控制数据的数据传送到所述第一信息处理装置,以及
其中,执行第一操作和第二操作中的至少一个,所述第一操作允许所述第一信息处理装置将指示接受了所述用户操作的附加图像叠加在显示在所述第一显示单元上的所述图像上,所述第二操作允许所述第二信息处理装置将指示接受了所述控制数据的附加图像叠加在显示在所述第二显示单元上的所述图像上。
12.一种信息处理方法,包括:
第一过程,使得基于使用近距离无线通信从其他信息处理装置接收的图像数据的图像显示在显示单元上;
第二过程,当接受了与显示在所述显示单元上的图像有关的用户操作时,使得输出用于发出接受了所述用户操作的通知的通知信息;以及
第三过程,将与所述用户操作相对应的控制数据传送到所述其他信息处理装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710930046.7A CN107688433B (zh) | 2012-11-12 | 2013-11-05 | 信息处理装置、通信系统以及信息处理方法 |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012247981A JP5929719B2 (ja) | 2012-11-12 | 2012-11-12 | 情報処理装置、通信システムおよび情報処理方法 |
JP2012-247981 | 2012-11-12 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710930046.7A Division CN107688433B (zh) | 2012-11-12 | 2013-11-05 | 信息处理装置、通信系统以及信息处理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103813114A true CN103813114A (zh) | 2014-05-21 |
CN103813114B CN103813114B (zh) | 2017-11-07 |
Family
ID=50681228
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201310547884.8A Expired - Fee Related CN103813114B (zh) | 2012-11-12 | 2013-11-05 | 信息处理装置、通信系统以及信息处理方法 |
CN201710930046.7A Expired - Fee Related CN107688433B (zh) | 2012-11-12 | 2013-11-05 | 信息处理装置、通信系统以及信息处理方法 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710930046.7A Expired - Fee Related CN107688433B (zh) | 2012-11-12 | 2013-11-05 | 信息处理装置、通信系统以及信息处理方法 |
Country Status (3)
Country | Link |
---|---|
US (4) | US9875725B2 (zh) |
JP (1) | JP5929719B2 (zh) |
CN (2) | CN103813114B (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107431921A (zh) * | 2015-03-17 | 2017-12-01 | 索尼公司 | 信息处理设备、信息处理方法和程序 |
US10795831B2 (en) | 2015-01-21 | 2020-10-06 | Sony Corporation | Information processing device, communication system, information processing method |
US11106292B2 (en) | 2012-11-12 | 2021-08-31 | Sony Corporation | Information processing device, communication system, and information processing method |
Families Citing this family (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011248768A (ja) * | 2010-05-28 | 2011-12-08 | Sony Corp | 情報処理装置、情報処理システム及びプログラム |
JP2014149610A (ja) * | 2013-01-31 | 2014-08-21 | Toshiba Corp | 情報処理装置、遠隔操作支援方法およびプログラム |
JP6400280B2 (ja) * | 2013-08-12 | 2018-10-03 | 株式会社ソニー・インタラクティブエンタテインメント | 情報処理システムおよび情報処理装置 |
KR101543107B1 (ko) * | 2013-12-11 | 2015-08-07 | 현대자동차주식회사 | 조작장치를 이용한 기능 선택 방법 및 이러한 방법을 이용하는 기능 선택 장치 |
JP5996605B2 (ja) * | 2014-10-21 | 2016-09-21 | 株式会社コロプラ | ヘッドマウントディスプレイとコントローラとを連動させて画面操作するシステム、プログラム、及び方法 |
EP3091747A4 (en) * | 2014-11-27 | 2017-03-08 | Sony Corporation | Information processing device and information processing method |
JP6520242B2 (ja) | 2015-03-12 | 2019-05-29 | ソニー株式会社 | 情報処理装置、通信システム、情報処理方法およびプログラム |
JP7037358B2 (ja) | 2015-04-08 | 2022-03-16 | ソニーグループ株式会社 | 情報処理装置、情報処理方法およびプログラム |
US10095266B2 (en) | 2016-01-28 | 2018-10-09 | Colopl, Inc. | System and method for interfacing between a display and a controller |
JP6690277B2 (ja) | 2016-02-09 | 2020-04-28 | 富士通株式会社 | 画像処理制御方法、画像処理制御プログラムおよび情報処理装置 |
WO2017197636A1 (zh) * | 2016-05-20 | 2017-11-23 | 华为技术有限公司 | 识别误触摸操作的方法和电子设备 |
CN107807775B (zh) * | 2016-09-09 | 2021-08-03 | 佳能株式会社 | 显示控制装置、其控制方法及存储其控制程序的存储介质 |
KR102607214B1 (ko) * | 2019-03-25 | 2023-11-29 | 삼성전자주식회사 | 디스플레이 장치 및 그 제어 방법 |
CN111629339B (zh) * | 2020-06-05 | 2022-02-11 | 上海永力信息科技股份有限公司 | 基于无线射频技术的用户密切接触追踪系统 |
JP7463914B2 (ja) | 2020-08-31 | 2024-04-09 | 富士通株式会社 | 入力受付プログラムおよび入力受付システム |
US11787551B1 (en) | 2022-10-06 | 2023-10-17 | Archer Aviation, Inc. | Vertical takeoff and landing aircraft electric engine configuration |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020132609A1 (en) * | 2001-03-14 | 2002-09-19 | Lewis Allan D. | Scalable and secure messaging system for a wireless network |
US20090303199A1 (en) * | 2008-05-26 | 2009-12-10 | Lg Electronics, Inc. | Mobile terminal using proximity sensor and method of controlling the mobile terminal |
CN101689081A (zh) * | 2007-06-28 | 2010-03-31 | 索尼株式会社 | 图像显示装置、摄像装置、图像显示方法以及程序 |
US20100271390A1 (en) * | 2009-04-22 | 2010-10-28 | Samsung Electronics Co, Ltd. | Video entertainment picture quality adjustment |
CN102449588A (zh) * | 2009-05-29 | 2012-05-09 | 苹果公司 | 放射式菜单 |
CN102484697A (zh) * | 2009-04-28 | 2012-05-30 | 夏普株式会社 | 显示设备、显示方法和用于执行该显示方法的程序 |
CN102591561A (zh) * | 2010-11-11 | 2012-07-18 | 索尼公司 | 信息处理装置、显示控制方法和信息处理系统 |
Family Cites Families (21)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08227341A (ja) * | 1995-02-22 | 1996-09-03 | Mitsubishi Electric Corp | ユーザインターフェース |
US7688306B2 (en) * | 2000-10-02 | 2010-03-30 | Apple Inc. | Methods and apparatuses for operating a portable device based on an accelerometer |
US20040145660A1 (en) * | 2001-06-06 | 2004-07-29 | Yosuke Kusaka | Electronic imaging apparatus and electronic imaging system |
JP4192132B2 (ja) * | 2004-09-28 | 2008-12-03 | クラリオン株式会社 | 車載器及びテレビジョン番組表示方法 |
JP4595789B2 (ja) * | 2005-11-17 | 2010-12-08 | 富士ゼロックス株式会社 | 画像処理装置、画像処理方法、及び画像処理プログラム |
JP2007173952A (ja) * | 2005-12-19 | 2007-07-05 | Sony Corp | コンテンツ再生システム、再生装置および方法、提供装置および提供方法、プログラム、並びに記録媒体 |
JP2008278388A (ja) | 2007-05-07 | 2008-11-13 | Sony Corp | 情報交換装置および情報交換方法 |
US8144232B2 (en) * | 2008-07-03 | 2012-03-27 | Sony Ericsson Mobile Communications Ab | Camera system and method for picture sharing using geotagged pictures |
JP4999909B2 (ja) * | 2009-12-02 | 2012-08-15 | 株式会社スクウェア・エニックス | ユーザインタフェース処理装置、ユーザインタフェース処理方法、およびユーザインタフェース処理プログラム |
US20110199386A1 (en) | 2010-02-12 | 2011-08-18 | Honeywell International Inc. | Overlay feature to provide user assistance in a multi-touch interactive display environment |
CN102158667B (zh) * | 2010-09-21 | 2013-01-02 | 青岛海信传媒网络技术有限公司 | 基于控件原理的图标管理方法及设备 |
US9454341B2 (en) * | 2010-11-18 | 2016-09-27 | Kodak Alaris Inc. | Digital image display device with automatically adjusted image display durations |
JP5703873B2 (ja) * | 2011-03-17 | 2015-04-22 | ソニー株式会社 | 情報処理装置、情報処理方法およびプログラム |
US9076259B2 (en) * | 2011-09-14 | 2015-07-07 | Imagine Communications Corp | Geospatial multiviewer |
JP5879880B2 (ja) * | 2011-09-29 | 2016-03-08 | カシオ計算機株式会社 | タッチパネル式電子機器 |
JP5284448B2 (ja) * | 2011-11-25 | 2013-09-11 | 株式会社東芝 | 情報処理装置および表示制御方法 |
US10282055B2 (en) * | 2012-03-06 | 2019-05-07 | Apple Inc. | Ordered processing of edits for a media editing application |
KR101960306B1 (ko) * | 2012-07-13 | 2019-03-20 | 엘지전자 주식회사 | 이동 단말기 및 이의 제어 방법 |
US9230287B2 (en) * | 2012-08-21 | 2016-01-05 | Google Inc. | Real-time notifications and sharing of photos among users of a social network |
JP5929719B2 (ja) | 2012-11-12 | 2016-06-08 | ソニー株式会社 | 情報処理装置、通信システムおよび情報処理方法 |
US9357357B2 (en) * | 2013-10-22 | 2016-05-31 | Qualcomm Incorporated | Group owner selection for a peer-to-peer group |
-
2012
- 2012-11-12 JP JP2012247981A patent/JP5929719B2/ja not_active Expired - Fee Related
-
2013
- 2013-11-05 CN CN201310547884.8A patent/CN103813114B/zh not_active Expired - Fee Related
- 2013-11-05 CN CN201710930046.7A patent/CN107688433B/zh not_active Expired - Fee Related
- 2013-11-05 US US14/072,347 patent/US9875725B2/en active Active
-
2016
- 2016-07-13 US US15/209,459 patent/US10276132B2/en not_active Expired - Fee Related
-
2019
- 2019-03-11 US US16/298,087 patent/US10679586B2/en active Active
-
2020
- 2020-05-07 US US16/869,036 patent/US11106292B2/en active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020132609A1 (en) * | 2001-03-14 | 2002-09-19 | Lewis Allan D. | Scalable and secure messaging system for a wireless network |
CN101689081A (zh) * | 2007-06-28 | 2010-03-31 | 索尼株式会社 | 图像显示装置、摄像装置、图像显示方法以及程序 |
US20090303199A1 (en) * | 2008-05-26 | 2009-12-10 | Lg Electronics, Inc. | Mobile terminal using proximity sensor and method of controlling the mobile terminal |
US20100271390A1 (en) * | 2009-04-22 | 2010-10-28 | Samsung Electronics Co, Ltd. | Video entertainment picture quality adjustment |
CN102484697A (zh) * | 2009-04-28 | 2012-05-30 | 夏普株式会社 | 显示设备、显示方法和用于执行该显示方法的程序 |
CN102449588A (zh) * | 2009-05-29 | 2012-05-09 | 苹果公司 | 放射式菜单 |
CN102591561A (zh) * | 2010-11-11 | 2012-07-18 | 索尼公司 | 信息处理装置、显示控制方法和信息处理系统 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11106292B2 (en) | 2012-11-12 | 2021-08-31 | Sony Corporation | Information processing device, communication system, and information processing method |
US10795831B2 (en) | 2015-01-21 | 2020-10-06 | Sony Corporation | Information processing device, communication system, information processing method |
CN107431921A (zh) * | 2015-03-17 | 2017-12-01 | 索尼公司 | 信息处理设备、信息处理方法和程序 |
US10979900B2 (en) | 2015-03-17 | 2021-04-13 | Sony Corporation | Information processing device and information processing method |
Also Published As
Publication number | Publication date |
---|---|
US20200265800A1 (en) | 2020-08-20 |
US10679586B2 (en) | 2020-06-09 |
US11106292B2 (en) | 2021-08-31 |
CN103813114B (zh) | 2017-11-07 |
JP5929719B2 (ja) | 2016-06-08 |
JP2014096074A (ja) | 2014-05-22 |
US20140132536A1 (en) | 2014-05-15 |
US9875725B2 (en) | 2018-01-23 |
US20190206366A1 (en) | 2019-07-04 |
US10276132B2 (en) | 2019-04-30 |
CN107688433A (zh) | 2018-02-13 |
US20160322027A1 (en) | 2016-11-03 |
CN107688433B (zh) | 2021-04-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103813114A (zh) | 信息处理装置、通信系统以及信息处理方法 | |
US9913301B2 (en) | Content sharing method and device | |
EP3340030B1 (en) | Image generation device, program, image display system, and image display device | |
US8644757B2 (en) | Method and system for creation and control of virtual rendering devices | |
JP2007049513A (ja) | 車々間通信装置、車々間通信システムおよび動画情報のアプリケーション適用可否判断方法 | |
KR20130127533A (ko) | 대화형 디스플레이 시스템에서의 시각적 페어링 | |
JP6386809B2 (ja) | 情報処理装置およびその制御方法、システム、並びにプログラム | |
KR101751225B1 (ko) | 이동 통신 단말의 원격제어 장치 및 방법 | |
KR20080078973A (ko) | 데이터 서비스의 수신방법 | |
US10097956B2 (en) | Method and device for determining distance between devices | |
WO2017045283A1 (zh) | 终端间屏幕控制的方法、装置和存储介质 | |
US20200259880A1 (en) | Data processing method and apparatus | |
US10856144B2 (en) | Method, server, and terminal for transmitting and receiving data | |
CN105676961B (zh) | 头戴式显示器及其显示控制方法 | |
EP2891945A1 (en) | Display device and method for controlling the same | |
JP6057004B2 (ja) | 情報処理装置、情報処理方法およびプログラム | |
CN112788193A (zh) | 图像传输方法、装置、电子设备及存储介质 | |
CN112491973A (zh) | 设备控制方法及装置、非易失性存储介质 | |
KR101688946B1 (ko) | 신호 처리 장치 및 그 방법 | |
TWI649998B (zh) | 立體影像顯示方法及裝置 | |
KR101092493B1 (ko) | 디스플레이 장치의 입력 장치를 이용한 호스트 제어 시스템 및 방법 | |
WO2015097853A1 (ja) | 情報処理装置、携帯端末、制御方法及びプログラム | |
CN104898997B (zh) | 一种信息处理方法及电子设备 | |
US20130321653A1 (en) | Inclination receiving apparatus and method, inclination transmitting apparatus and method, and inclination communicating system and method | |
KR101476725B1 (ko) | 디스플레이장치 및 디스플레이장치를 이용한 양방향 제어방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20171107 |
|
CF01 | Termination of patent right due to non-payment of annual fee |