CN106464826B - 信息处理装置及方法 - Google Patents

信息处理装置及方法 Download PDF

Info

Publication number
CN106464826B
CN106464826B CN201580033675.9A CN201580033675A CN106464826B CN 106464826 B CN106464826 B CN 106464826B CN 201580033675 A CN201580033675 A CN 201580033675A CN 106464826 B CN106464826 B CN 106464826B
Authority
CN
China
Prior art keywords
information
group
image
unit
information processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201580033675.9A
Other languages
English (en)
Other versions
CN106464826A (zh
Inventor
高桥巨成
小林直树
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN106464826A publication Critical patent/CN106464826A/zh
Application granted granted Critical
Publication of CN106464826B publication Critical patent/CN106464826B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179—Video signal processing therefor
    • H04N9/3188—Scale or resolution adjustment
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G06F3/1446—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display display composed of modules, e.g. video walls
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/001—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/2003—Display of colours
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/38—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory with means for controlling the display position
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4122—Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223—Cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4318—Generation of visual interfaces for content selection or interaction; Content or additional data rendering by altering the content in the rendering process, e.g. blanking, blurring or masking an image region
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3129—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM] scanning a light beam on the display screen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3141—Constructional details thereof
    • H04N9/3147—Multi-projection systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179—Video signal processing therefor
    • H04N9/3182—Colour adjustment, e.g. white balance, shading or gamut
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179—Video signal processing therefor
    • H04N9/3185—Geometric adjustment, e.g. keystone or convergence
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2300/00—Aspects of the constitution of display devices
    • G09G2300/02—Composition of display devices
    • G09G2300/026—Video wall, i.e. juxtaposition of a plurality of screens to create a display screen of bigger dimensions
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/06—Adjustment of display parameters
    • G09G2320/0666—Adjustment of display parameters for control of colour parameters, e.g. colour temperature
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2352/00—Parallel handling of streams of display data
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2356/00—Detection of the display position w.r.t. other display screens
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/02—Networking aspects
    • G09G2370/022—Centralised management of display operation, e.g. in a server instead of locally
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/02—Networking aspects
    • G09G2370/025—LAN communication management
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/04—Exchange of auxiliary data, i.e. other than image data, between monitor and graphics controller
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/16—Use of wireless transmission of display information

Abstract

本技术涉及允许多个投射单元更容易地协作投射图像的信息处理装置及方法。本技术的信息处理装置形成用于与包括用来投射图像的投射单元和用来拍摄被摄体并获得拍摄图像的成像单元的其他信息处理装置协作投射一个内容数据的群组，在属于所述形成群组的信息处理装置之间共享作为与对通过属于所述形成群组的信息处理装置的投射单元投射的图像作出的校正有关的信息的校正信息，并根据通过拍摄作为被摄体通过所述投射单元投射的图像而获得的拍摄图像以及所述的共享校正信息来更新对于所述被摄体信息处理装置的校正信息。本技术例如适用于投影仪或摄像机或包括投影仪和摄像机两者功能的电子设备、控制这些设备的计算机等。

Description

信息处理装置及方法
技术领域
本技术涉及信息处理装置及方法，特别是涉及允许多个投射单元更容易地协作投射图像的信息处理装置及方法。
背景技术
按照惯例，已经存在使用多个投影仪来投射图像的系统(例如，参照非专利文献1)。在这种系统中，连接到计算机的多个投影仪受计算机控制和驱动，以相互协作并投射一个或更多个图像。即，计算机使多个投影仪相互协作。
引文列表
非专利文献
非专利文献1：Ramesh Raskar,Jeroen van Baar,Paul Beardsley,ThomasWillwacher,Srinivas Rao,Clifton Forlines,"iLamps:Geometrically Aware andSelf-Configuring Projectors,"ACM SIGGRAPH 2003 Conference Proceedings
发明内容
技术问题
然而，这种方法不但需要投影仪，而且需要用于控制的计算机、用于感测的摄像机、用于执行系统操作的复杂程序、熟知技术的操作者等。它适合昂贵且大型的系统，但不适合一般用户无需专业知识也可随便享有的简单且比较便宜的系统。
本技术鉴于上述情况而提出，且本技术的目的在于允许多个投射单元更容易地协作投射图像。
技术方案
本技术的一个方面在于一种信息处理装置，该信息处理装置包括：群组形成单元，该群组形成单元形成用于与其他信息处理装置协作投射一个内容数据的群组，所述其他信息处理装置包括用来投射图像的投射单元和用来拍摄被摄体并获得拍摄图像的成像单元；校正信息共享单元，该校正信息共享单元在属于通过所述群组形成单元形成的群组的信息处理装置之间共享校正信息，所述校正信息作为与对通过属于由群组形成单元形成的所述群组的信息处理装置的所述投射单元所投射的图像作出的校正有关的信息；和校正信息更新单元，该校正信息更新单元根据通过拍摄由投射单元投射的图像作为被摄体而获得的拍摄图像以及通过校正信息共享单元共享的校正信息来更新被摄体信息处理装置的校正信息。
校正信息可包括与对图像中的预定表征像素作出的校正有关的信息。
与对表征像素作出的校正有关的信息可包括在对表征像素进行校正之前和之后的坐标、表征像素的各个颜色分量的增益值和偏移值以及表征像素的颜色转换矩阵的系数。
信息处理装置还可包括无线通信单元，该无线通信单元执行无线通信，且群组形成单元可形成包括通过无线通信单元执行无线通信的其他信息处理装置以及被摄体信息处理装置的群组。
群组形成单元可形成包括经由预定通信电缆连接到被摄体信息处理装置的其他信息处理装置以及被摄体信息处理装置的群组。
群组形成单元可生成作为与形成群组有关的信息的群组信息。
群组信息可包括用于识别群组的标识信息以及对于构成与群组信息对应的群组的信息处理装置的校正信息。
群组信息还可包括与过去通过群组投射的内容数据的类型有关的信息。
群组信息还可包括在投射内容数据时通过属于群组的信息处理装置的投射单元投射的图像的布局。
群组信息还可包括与图像所投射到的投射平面有关的信息。
信息处理装置还可包括：群组信息共享单元，该群组信息共享单元允许在属于群组的信息处理装置之间共享群组信息；和群组信息更新单元，该群组信息更新单元更新群组信息。
信息处理装置还可包括投射位置控制单元，该投射位置控制单元根据群组信息和校正信息来控制通过投射单元投射的图像的投射位置。
当通过属于群组的信息处理装置的投射单元投射的图像的位置与根据群组信息和校正信息而判决的位置不同时，投射位置控制单元可投射引导图像，使得图像可投射到所述位置。
信息处理装置还可包括图像剪切单元，该图像剪切单元根据群组信息对包括在将通过投射单元投射的内容数据中的图像的一部分进行剪切。
信息处理装置还可包括图像校正单元，该图像校正单元根据群组信息对包括在将通过投射单元投射的内容数据中的图像的该部分进行校正。
信息处理装置还可包括群组脱离单元，该群组脱离单元在向属于群组的其他信息处理装置通知从通过群组形成单元形成的群组脱离之后从群组脱离。
内容数据可包括图像数据和元数据。
元数据可包括与图像数据的内容、种类、推荐投射图像尺寸、类型和分辨率有关的信息。
内容数据可具有多个图像数据。
此外，本技术的一个方面在于一种信息处理方法，该信息处理方法包括：形成用于与其他信息处理装置协作投射一个内容数据的群组，所述其他信息处理装置包括用来投射图像的投射单元和用来拍摄被摄体并获得拍摄图像的成像单元；在属于形成群组的信息处理装置之间共享校正信息，所述校正信息作为与对通过属于形成群组的信息处理装置的投射单元所投射的图像作出的校正有关的信息；以及根据通过拍摄由投射单元投射的图像作为被摄体而获得的拍摄图像以及共享校正信息来更新对于被摄体信息处理装置的校正信息。
在本技术的一个方面中，形成用于与其他信息处理装置协作投射一个内容数据的群组，所述其他信息处理装置包括用来投射图像的投射单元和用来拍摄被摄体并获得拍摄图像的成像单元，在属于形成群组的信息处理装置之间共享校正信息，所述校正信息作为与对通过属于形成群组的信息处理装置的投射单元所投射的图像作出的校正有关的信息，并根据通过拍摄由投射单元投射的图像作为被摄体而获得的拍摄图像以及共享校正信息来更新对于被摄体信息处理装置的校正信息。
本发明的有益效果如下：
根据本技术，可以处理信息。此外，根据本技术，可以允许多个投射单元更容易地协作投射图像。
附图说明
图1为示意图，示出了投射成像系统的主要构造实例；
图2为协作投射实例的方块图；
图3为示意图，示出了图像校正实例；
图4为示意图，示出了图像校正实例；
图5为示意图，示出了用例；
图6为示意图，示出了投射成像装置的外观实例；
图7为方块图，示出了投射成像装置的主要构造实例；
图8为方块图，示出了投射单元的主要构造实例；
图9为示意图，示出了用激光扫描的实例；
图10为功能块图，示出了通过SOC实现的功能实例；
图11为方块图，示出了内容提供服务器的主要构造实例；
图12为流程图，示出了群组形成处理实例；
图13为示意图，示出了群组信息实例；
图14为示意图，示出了校正信息实例；
图15为示意图，示出了校正信息实例；
图16为示意图，示出了校正信息实例；
图17为示意图，示出了投射位置控制实例；
图18为示意图，示出了投射位置控制实例；
图19为示意图，示出了投射位置控制实例；
图20为流程图，示出了图像投射处理实例；
图21为示意图，示出了图像投射实例；
图22为示意图，示出了元数据实例；
图23为流程图，示出了群组脱离处理实例；
图24为方块图，示出了投射成像装置的主要构造实例；
图25为示意图，示出了投射成像系统的另一个构造实例；
图26为示意图，示出了投射成像系统的又一个构造实例；
图27为示意图，示出了HDMI(注册商标)规范；
图28为示意图，示出了投射成像系统的又一个构造实例；
图29为示意图，示出了投射成像系统的又一个构造实例；
图30为示意图，示出了投射成像系统的又一个构造实例。
具体实施方式
下面将对具体实施方式(以下称为实施例)进行说明。将以下列顺序进行说明：
1.第一实施例(投射成像系统)
<1.第一实施例>
<投射成像装置之间的协作>
近来，具有多个投影仪的投射系统通常被用来在展厅投射图像到横向长圆柱形投射平面上，或执行投射映射到建筑物墙面上。在执行这种投射中，基本上，个人计算机(PC)经由图形处理单元(GPU)板等输出数据给多个投影仪并在大多数情况下使多个投影仪通过PC上的应用软件或设备驱动程序来投射图像。
因此，通过多个投影仪投射所需的各种图像校正也在PC中作出。为了感测投射平面的形状等，基于校正数据的校正图像通常在PC中创建并根据在通过用经由通用串行总线(USB)连接到PC的摄像机拍摄而获得的特定图案中的成像数据从PC输出。
即，这种系统不但需要投影仪，而且需要用于控制的PC、用于感测的摄像机、用于执行系统操作的复杂程序、熟知技术的操作者等。它适合昂贵且大型的系统，但不适合一般用户无需专业知识也可随便享有的简单且比较便宜的系统。因此，在系统中不容易允许多个投影仪相互协作。
根据本技术，形成用于与各自包括用来投射图像的投射单元和用来拍摄被摄体并获得拍摄图像的成像单元的其他信息处理装置协作投射一个内容数据的群组，在属于通过群组形成单元形成的群组的信息处理装置之间共享作为与对通过属于形成群组的信息处理装置的投射单元投射的图像作出的校正有关的信息的校正信息，并根据通过拍摄由投射单元投射的图像作为被摄体而获得的拍摄图像以及共享校正信息来更新对于被摄体信息处理装置的校正信息。
这使得可以允许多个投射单元更容易地协作投射图像。
顺便提及，校正信息可包括与对图像中的预定表征像素作出的校正有关的信息。
与对表征像素作出的校正有关的信息可包括在对表征像素进行校正之前和之后的坐标、表征像素的各个颜色分量的增益值和偏移值以及表征像素的颜色转换矩阵的系数。
此外，信息处理装置还可包括执行无线通信的无线通信单元。此外，群组形成单元可形成包括通过无线通信单元执行无线通信的其他信息处理装置以及被摄体信息处理装置的群组。
此外，群组形成单元可形成包括经由预定通信电缆连接到被摄体信息处理装置的其他信息处理装置以及被摄体信息处理装置的群组。
此外，群组形成单元可生成作为与形成群组有关的信息的群组信息。
此外，群组信息可包括用于识别群组的标识信息以及对于构成与群组信息对应的群组的信息处理装置的校正信息。
此外，群组信息还可包括与过去通过群组投射的内容数据的类型有关的信息。
此外，群组信息还可包括在投射内容数据时通过属于群组的信息处理装置的投射单元投射的图像的布局。
此外，群组信息还可包括与图像所投射到的投射平面有关的信息。
此外，信息处理装置还可包括群组信息共享单元和群组信息更新单元，该群组信息共享单元允许在属于群组的信息处理装置之间共享群组信息，该群组信息更新单元更新群组信息。
此外，信息处理装置还可包括投射位置控制单元，该投射位置控制单元根据群组信息和校正信息来控制通过投射单元投射的图像的投射位置。
当将通过属于群组的信息处理装置的投射单元投射的图像的位置与根据群组信息和校正信息而判决的位置不同时，投射位置控制单元还可投射引导图像，使得图像可投射到所述位置。
还可包括图像剪切单元，该图像剪切单元根据群组信息对包括在将通过投射单元投射的内容数据中的图像的一部分进行剪切。
还可包括图像校正单元，该图像校正单元根据群组信息对包括在将通过投射单元投射的内容数据中的图像的该部分进行校正。
还可包括群组脱离单元，该群组脱离单元在向属于群组的其他信息处理装置通知从通过群组形成单元形成的群组脱离之后从群组脱离。
此外，内容数据可包括图像数据和元数据。
此外，元数据可包括与图像数据的内容、种类、推荐投射图像尺寸、类型和分辨率有关的信息。
此外，内容数据可具有多个图像数据。
<投射成像系统>
图1示出了作为应用本技术的信息处理装置的实施例的投射成像系统的主要构造实例，控制装置应用于该投射成像系统。图1所示的投射成像系统100为投射图像的系统。例如，投射成像系统100可允许多个投射成像装置协作投射运动图像、静止图像等的内容，如上所述。如图1所示，投射成像系统100具有投射成像装置101-1至101-4。
投射成像装置101-1至101-4为投射图像到屏幕102上并拍摄投射在平面102上的图像的装置。投射成像装置101-1至101-4具有相似构造并具有相似功能。在以下说明中，投射成像装置101-1至101-4当无需进行区分时将被称为投射成像装置101。
投射成像装置101例如处于可经由接入点103通过无线通信(诸如无线局域网(LAN))进行彼此通信的状态。此外，投射成像装置101经由接入点103连接到网络104并可与连接到网络104的其他装置进行通信。
接入点103为转播通信的设备，可与投射成像装置101进行无线通信并连接到网络104。接入点103可在投射成像装置101之间转播通信。接入点103还可在投射成像装置101与网络104(连接到网络104的其他通信装置)之间转播通信。
网络104为作为通信介质的通信网络。网络104可为任何通信网络，且可为有线通信网络、无线通信网络或两者。例如，网络104可为有线LAN、无线LAN、公共电话网络、无线移动对象广域通信网络(诸如3G线路或4G线路)、因特网或这些网络的组合。此外，网络104可为单个通信网络或多个通信网络。此外，网络104例如可部分地或全部地由在预定标准下的通信电缆组成，诸如通用串行总线(USB)电缆或高清晰度多媒体接口(HDMI)电缆。
例如，内容提供服务器105、群组信息管理服务器106等连接到网络104。
内容提供服务器105为向投射成像装置101提供包括将通过投射成像装置101投射的图像的内容数据的服务器。内容提供服务器105管理待提供内容数据并回应于来自客户端侧(诸如例如投射成像装置101)的请求，提供内容数据。虽然用于提供内容数据的方法可以任意设定，但是内容数据例如将经由网络104和接入点103而提供。此外，用于提供内容数据的方法可以任意设定，且可为流式传输或下载。此外，提供服务可为收费服务或免费服务。
此外，下文将对内容数据进行详细说明。例如，内容数据包括一个或更多个图像数据、音频数据、包括控制信息的元数据等。这些数据可进行归档并进一步压缩，且可相互独立。
群组信息管理服务器106对作为与通过多个投射成像装置101形成的群组有关的信息的群组信息进行管理。群组信息管理服务器106对由作为客户端的投射成像装置101提供的群组信息进行存储和管理，即，关于过去形成的群组的信息(群组信息的历史)。回应于来自客户端的请求，例如，群组信息管理服务器106从管理群组信息当中提供请求群组信息给作为请求者的客户端。即，投射成像装置101根据群组信息通过进行群组设定可容易地再现与过去形成的群组相似的群组。此外，投射成像装置101通过修改群组信息可更容易地形成新群组。
虽然用于提供群组信息的方法可以任意设定，但是群组信息例如经由网络104和接入点103而提供。这种服务可为收费服务或免费服务。
内容提供服务器105和群组信息管理服务器106可以进行任意构造。例如，内容提供服务器105和群组信息管理服务器106可通过一个服务器107实现，或内容提供服务器105或群组信息管理服务器106或两者都可通过多个服务器实现。例如，这些服务器可作为云服务而提供。
到目前为止已经对内容提供服务和群组信息管理服务进行说明。当然，除这些服务之外的任何服务可提供给投射成像装置101。
屏幕102为平面实例，投射成像装置101投射图像到该平面上(投射平面)。屏幕102可为平坦平面或弧形平面。例如，屏幕102的表面可能有凹凸。此外，屏幕102的颜色可以任意设定。顺便提及，代替屏幕102，预定三维结构(例如，建筑物、墙壁、地板、家具、小对象、活对象等)可被用作投射平面。
顺便提及，将通过投射成像装置101投射的图像的提供源可以任意设定。例如，图像可预先存储在投射成像装置101中或可通过使用记录介质等提供给投射成像装置101。在这种情况下，无需内容提供服务器105和群组信息管理服务器106。同样在这种情况下，也无需网络104。此外，投射成像装置101在无接入点103的情况下可相互通信。此外，通信方法可以任意设定，且可为无线通信或有线通信。在这种情况下，也无需接入点103。
<协作投射>
例如，内容提供服务器105提供包括4K分辨率(例如，4096×2160)和60fps帧速率的逐行扫描图像(4K@60P)的内容数据给各个投射成像装置101。在收到内容数据后，每个投射成像装置101从图像(4K@60P)中切割分配给它的局部图像(例如，全HD分辨率和60fps帧速率的逐行扫描图像(1080@60P))并投射切割图像到屏幕102上。
例如，投射成像装置101以如图2A所示的这种布局投射图像。在图2A所示的实例中，投射成像装置101投射两个纵向排列的图像和两个横向排列的图像(2×2)到屏幕102上。更具体地，投射成像装置101-1投射投射图像111-1到屏幕102的左上方上，投射成像装置101-2投射投射图像111-2到屏幕102的左下方上，投射成像装置101-3投射投射图像111-3到屏幕102的右上方上，以及投射成像装置101-4投射投射图像111-4到屏幕102的右下方上。在以下说明中，投射图像111-1至111-4当无需进行区分时将被称为投射图像111。
如图2A所示，投射图像111-1至111-4部分地相互重叠以形成一个区域。各个投射图像111包括上述局部图像(1080@60P)。在如图2A所示的投射状态下，图像(4K@60P)的投射图像112形成在屏幕102上。更具体地，投射图像111-1包括图像(4K@60P)的左上局部图像，投射图像111-2包括图像(4K@60P)的左下局部图像，投射图像111-3包括图像(4K@60P)的右上局部图像，以及投射图像111-4包括图像(4K@60P)的右下局部图像。如上所述，投射图像111部分地相互重叠，因此，包括在投射图像111中的局部图像可为分辨率比全HD图像更高(即，更宽)的图像。
通过使投射成像装置101-1至101-4相互协作，如上所述，投射成像系统100可投射4K分辨率图像(4K@60P)，而不会降低分辨率(而不会降低图像质量)。
顺便提及，为了实现投射图像112，投射图像111需要进行定位、几何校正等。投射成像装置101包括成像功能，并可使用成像功能来感测通过其自身以及其他装置投射的投射图像，如图2B所示。投射成像装置101根据传感器数据进行各种校正，由此局部图像可以更自然方式组合在屏幕102上以形成一个投射图像112。
图像校正的内容包括投影仪个体差异校正、重叠校正、屏幕形状校正等，如图2B所示。投影仪个体差异校正为例如光亮度、伽马、亮度、对比度、白平衡、色调等校正。重叠校正为对投射图像111相互重叠的重叠区域进行的校正。例如，重叠校正可包括水平校正、失真校正等。屏幕形状校正为屏幕102的形状和姿势的校正。例如，屏幕形状校正可包括投射变换(平面、球面、圆柱面(圆柱形)和多项式曲线)。当然，可以进行除这些校正之外的任何校正。
例如，如图3所示，当屏幕102被定向成相对于投射成像装置101倾斜时，在未校正的情况下，投射图像变得失真。然而，通过投射变换等可以减小失真。此外，当多个图像将投射到弧形平面上时，如在图4实例中，例如，这些图像可通过投射变换等被投射成一个图像。
<使用投射成像系统的实例>
使用投射成像系统100使各种投射模式成为可能。例如，通过对齐多个投射图像，如图5A所示，可以提高整个投射图像的分辨率。此外，如在图5B实例中，根据通过投射成像装置101投射的投射图像(局部图像)的对齐，投射图像(整个图像)的纵横比可以独立于投射成像装置101的规格之外自由设定。
此外，如在图5C实例中，图像可无失真地投射到多个墙壁和天花板(即，定向成多个方向的屏幕(换言之，三维结构))上。此外，在图5D实例中，图像可无失真地投射到包围观众的宽且弧形的屏幕上。
随着投射平面的自由度提高，投射图像在例如提高现实感和清晰度的表现上提高，从而提高娱乐价值和艺术品质。
<投射成像装置的外观>
接着，将对投射成像装置101进行说明。图6示出了投射成像装置101的外观实例。投射成像装置101具有投射功能和成像功能，如上所述。投射成像装置101的壳体具有光学装置，诸如用于投射图像的投射口(透镜机构)和用于对被摄体进行成像的摄像机(透镜机构)。此外，投射成像装置101可为任何尺寸的装置，且可为例如便携式(小型)装置。在这种情况下，如图6所示，投射成像装置101的壳体可具有电池。通过设置电池，投射成像装置101可在无外部电源的情况下进行驱动，从而提高放置位置的自由度。即，多个投射成像装置101可更容易地协作投射图像。
<投射成像装置>
图7为方块图，示出了投射成像装置101的主要构造实例。
如图7所示，投射成像装置101具有片上系统(SOC)151、随机存取存储器(RAM)152、输入单元161、显示单元162A、音频输出单元162B、存储单元163、通信单元164、驱动器165、投射单元181、成像单元182、近场通信(NFC)单元191、传感器单元192和触摸面板193。
SOC 151为具有通过投射成像装置101实现的各种功能的芯片。SOC 151加载程序和数据到RAM 152中并执行程序和数据。
输入单元161例如由外部输入终端(诸如HDMI终端)和输入装置(诸如操作按钮和麦克风)组成。显示单元162A例如具有显示图像和消息的显示装置。音频输出单元162B例如由扬声器等组成。
存储单元163例如由硬盘、RAM磁盘、非易失性存储器等组成。通信单元164例如由网络接口组成。驱动器165例如驱动可移除介质171，诸如磁盘、光盘、磁光盘或半导体存储器，以从可移除介质171读取信息以及写入信息到可移除介质171中。
投射单元181执行与图像投射有关的处理。例如，投射单元181投射由SOC 151提供的图像到投射成像装置101的外部(例如，屏幕102等)上。即，投射单元181实现投射功能。投射单元181使用激光作为光源以执行激光扫描，使用MEMS反光镜来投射图像。当然，投射单元181的光源可以任意设定，且并不限于激光，而是可为发光二极管(LED)、氙气灯等。下文将对投射单元181进行详细说明。
成像单元182在装置外部拍摄被摄体，生成被摄体的拍摄图像，并提供拍摄图像给SOC 151。即，成像单元182实现成像功能。例如，成像单元182拍摄通过投射单元181投射到屏幕102上的投射图像。
NFC单元191与另一个近距离通信设备进行近距离无线通信。例如，NFC单元191通过近场无线通信发送和接收与通过通信单元164建立通信所需的通信设定有关的信息。
传感器单元192具有任意传感器，诸如加速度传感器、光学传感器和温度传感器，并向SOC 151提供与在投射成像装置101外部通过感测(传感器数据)而获得的环境有关的信息。
触摸面板193例如叠加在显示单元162A的屏幕图像显示表面上。触摸面板193接受由根据显示在显示单元162A上的GUI(即，用户输入)而执行的操作表示的信息，并提供接受的用户输入给SOC 151。
SOC 151例如加载存储在存储单元163中的程序到RAM 152中并执行程序以执行各种处理。RAM 152还适当地存储SOC 151执行各种处理所需的数据。
由SOC 151执行的程序例如可记录在作为封装介质的可移除介质171等中，并提供给投射成像装置101。在这种情况下，通过连接可移除介质171到驱动器165，程序可经由SOC151安装到存储单元163中。
此外，程序还可经由有线或无线传输介质(诸如LAN、因特网或数字卫星广播)提供给投射成像装置101。在这种情况下，程序可由通信单元164经由有线或无线传输介质接收并安装在存储单元163中。
此外，程序还可预先安装在SOC 151中的ROM或存储单元163中。
<投射单元>
图8为方块图，示出了投射单元181的主要构造实例。如图8所示，投射单元181具有视频处理器201、激光驱动器202、激光输出单元203-1、激光输出单元203-2、激光输出单元203-3、反光镜204-1、反光镜204-2、反光镜204-3、微机电系统(MEMS)驱动器205和MEMS反光镜206。
视频处理器201保存由SOC 151提供的图像并对图像执行必要图像处理。视频处理器201提供待投射图像给激光驱动器202和MEMS驱动器205。
激光驱动器202控制激光输出单元203-1至203-3以投射由视频处理器201提供的图像。激光输出单元203-1至203-3例如输出红色、蓝色、绿色等不同颜色(波长区域)的激光。即，激光驱动器202控制各个颜色的激光输出以投射由视频处理器201提供的图像。顺便提及，在以下说明中，激光输出单元203-1至203-3当无需进行区分时将被称为激光输出单元203。
反光镜204-1反射从激光输出单元203-1输出的激光并引导激光到MEMS反光镜206。反光镜204-2反射从激光输出单元203-2输出的激光并引导激光到MEMS反光镜206。反光镜204-3反射从激光输出单元203-3输出的激光并引导激光到MEMS反光镜206。顺便提及，在以下说明中，反光镜204-1至204-3当无需进行区分时将被称为反光镜204。
MEMS驱动器205控制MEMS反光镜206的驱动以投射由视频处理器201提供的图像。MEMS反光镜206例如根据MEMS驱动器205的控制来驱动连接到MEMS的反光镜以执行各个颜色的激光扫描，如在图9实例中。激光例如从投射口输出到装置外部，然后施加于屏幕102。因此，从视频处理器201提供的图像投射到屏幕102上。
顺便提及，在图8实例中，设置三个激光输出单元203以输出三个颜色的激光。然而，激光数量(或颜色数量)可以任意设定。例如，激光输出单元203的数量例如可为四个或更多个或两个或更少个。即，从投射成像装置101(投射单元181)输出的激光束的数量可为两个或更少个或四个或更多个。此外，从投射成像装置101(投射单元181)输出的激光的颜色数量也可任意设定，且可为两个或更少个或四个或更多个。此外，反光镜204和MEMS反光镜206的构造可以任意设定，且并不限于图8实例。当然，激光扫描图案可以任意设定。
<功能块>
投射成像装置101的SOC 151执行程序以实现各种功能。图10为功能方块图，示出了通过SOC 151实现的功能实例。
如图10所示，SOC 151实现诸如群组形成单元221、投射位置控制单元222、校正信息共享单元223、校正信息更新单元224、群组信息更新单元225、群组信息共享单元226、图像剪切单元227、图像校正单元228、图像投射控制单元229、群组脱离单元230等的功能块。
群组形成单元221对投射成像装置101执行分组处理。投射位置控制单元222对投射图像的投射位置执行控制处理。校正信息共享单元223对校正信息执行共享处理。校正信息更新单元224对校正信息执行更新处理。群组信息更新单元225对群组信息执行更新处理。群组信息共享单元226对群组信息执行共享处理。图像剪切单元227对待投射图像执行剪切处理。图像校正单元228对待投射图像执行校正处理。图像投射控制单元229对图像的投射执行控制处理。群组脱离单元230对群组进行脱离处理。
此外，这些功能块执行所述处理以在存储单元163中形成存储区域，诸如例如群组信息存储单元241、校正信息存储单元242和传感器数据存储单元243。群组信息存储单元241为用于存储群组信息的存储区域。校正信息存储单元242为用于存储校正信息的存储区域。传感器数据存储单元243为用于存储传感器数据的存储区域。
<内容提供服务器>
接着，将对内容提供服务器的构造进行说明。图11为方块图，示出了内容提供服务器105的主要构造实例。
如图11所示，在内容提供服务器105中，中央处理单元(CPU)301、只读存储器(ROM)302和随机存取存储器(RAM)303经由总线304连接在一起。
输入/输出接口310也连接到总线304。输入单元311、输出单元312、存储单元313、通信单元314和驱动器315连接到输入/输出接口310。
输入单元311由输入装置组成，该输入装置接受外部信息，诸如用户输入。例如，输入单元311包括操作按钮、触摸面板、摄像机、麦克风、输入端子等。此外，输入单元311可包括各种传感器，诸如加速度传感器、光学传感器和温度传感器。
输出单元312由输出装置组成，该输出装置输出信息，诸如图像和音频。例如，输出单元312包括显示器、扬声器、输出端子等。
存储单元313例如由硬盘、RAM磁盘、非易失性存储器等组成。通信单元314例如由网络接口组成。通信单元314例如连接到网络104以与经由网络104连接的另一个装置(例如，投射成像装置101)进行通信。驱动器315例如驱动可移除介质321，诸如磁盘、光盘、磁光盘或半导体存储器。
CPU 301例如经由输入/输出接口310和总线304加载存储在存储单元313中的程序到RAM 303中并执行程序以执行各种处理。RAM 303还适当地存储CPU 301执行各种处理所需的数据。
由CPU 301执行的程序例如可记录在作为封装介质的可移除介质321等中，并提供给内容提供服务器105。在这种情况下，通过连接可移除介质321到驱动器315，程序可经由输入/输出接口310安装到存储单元313中。
此外，程序还可经由有线或无线传输介质(诸如LAN、因特网或数字卫星广播)提供给内容提供服务器105。在这种情况下，程序可由通信单元314经由有线或无线传输介质接收并安装在存储单元313中。
此外，程序还可预先安装在ROM 302或存储单元313中。
顺便提及，群组信息管理服务器106以与内容提供服务器105相似的方式进行构造。即，图11中的说明也适用于群组信息管理服务器106。此外，在提供服务器107的情况下，服务器107也以与内容提供服务器105相似的方式进行构造。即，图11中的说明也适用于服务器107。
<群组形成处理流程>
接着，将对通过在这样构造的投射成像系统100中的装置执行的各种处理的流程进行说明。
首先，将参考图12对群组形成处理流程实例进行说明。图12示出了处理流程实例，通过所述处理流程，投射成像装置101-2至101-4形成群组，且投射成像装置101-1加入该群组。
用于形成群组(加入现有群组)的方法可以任意设定。例如，使投射成像装置101执行近距离无线通信可充当群组形成触发器。下面将对这种情况进行说明。具体地，投射成像装置101-1为新加入群组的装置，投射成像装置101-2为接受投射成像装置101-1加入(与投射成像装置101-1进行近距离无线通信)的装置，以及投射成像装置101-3和101-4为之前已经加入群组的装置。通过投射成像装置101-4执行的处理与通过投射成像装置101-3执行的处理相似并省略其说明。
当投射成像装置101-1接近(接触)投射成像装置101-2时，投射成像装置101-1和101-2的群组形成单元221使用NFC单元191开始近距离无线通信并交换利用通信单元164建立通信所需的信息(步骤S101和S111)。
投射成像装置101-1和101-2的群组形成单元221使用交换通信信息来利用通信单元164建立无线通信。此外，投射成像装置101-1的群组形成单元221也以相似方式与投射成像装置101-3和101-4建立通信。
在建立无线通信后，投射成像装置101-1的群组形成单元221例如利用通信单元164通过无线通信提供与被摄体装置有关的信息给其他投射成像装置101，以请求加入群组。
投射成像装置101-2至101-4的群组形成单元221例如使用来自投射成像装置101-1的信息来更新现有群组信息，并利用通信单元164通过无线通信在投射成像装置101-1至101-4之间共享已更新群组信息(步骤S102、S112和S121)。当未形成群组时，不存在群组信息。因此，投射成像装置101重新生成群组信息并共享群组信息。
此外，群组信息管理服务器106的CPU 301提供由投射成像装置101等经由通信单元314请求关于通过投射成像装置101-1至101-4形成的群组的过去群组信息(历史群组信息)给投射成像装置101-1至101-4(步骤S131)。投射成像装置101例如经由通信单元164通过无线通信接收历史群组信息(步骤S103、S113和S122)，并当它可用时使用接收信息，当它不可用时丢弃接收信息。
图13示出了群组信息实例。如图13所示，例如，群组信息包括群组标识信息(群组ID)、表示属于群组的装置的信息以及由该装置保存的校正信息(装置和校正信息)、表示通过群组投射的内容的类型的信息(内容类型)、表示用于投射内容的投射屏幕的布局的信息(投射屏幕布局)、关于内容所投射到的投射平面(屏幕等)的信息(投射平面)等。当然，群组信息的内容可以任意设定，且群组信息可只包括前述信息的一部分或可包括除前述信息之外的信息。
投射成像装置101的投射位置控制单元222根据群组信息、校正信息(诸如用于图像校正的各个变量的信息)等来控制通过投射单元181投射的图像的位置(步骤S104、S114和S123)。
校正信息可为关于各个像素的信息(指示如何校正各个像素)。例如，校正信息可为关于待投射图像的所有像素的信息，如图14A所示，或可为关于图像中的表征点的信息，如图14B所示。这使得可以减小校正信息量，例如，减小在存储单元163中存储所需的存储容量。在这种情况下，在图像校正时(在使用校正信息时)，关于除表征点之外的像素的校正信息根据关于表征点的校正信息进行插值，如图14C所示。
校正信息的内容可以任意设定，但例如可为几何信息，如在图15实例中。在图15实例的情况下，校正信息包括关于输入图像(图15A)中的各个表征点的几何信息，该几何信息表示在校正之后(图15B)表征点将如何移动。
图16示出了校正信息的具体实例。校正信息例如包括各种参数，如图16所示。在图16实例中，校正信息包括在对目标点进行校正之前和之后的坐标、在校正之前和之后各个颜色的增益值和偏移值以及颜色转换矩阵的系数。
投射成像装置101的校正信息共享单元223例如经由通信单元164通过无线通信相互共享校正信息(步骤S105、S115和S124)。此外，投射成像装置101的校正信息更新单元224更新校正信息，使得投射成像装置101可根据群组信息、投射位置、校正信息等正确地协作投射投射图像(步骤S106、S116和S125)。例如，如在图2A实例中，更新校正信息，使得一个投射图像可由多个投射图像形成。此外，投射成像装置101的校正信息共享单元223例如在校正之后经由通信单元164通过无线通信相互共享校正信息(步骤S107、S117和S126)。
投射成像装置101的投射位置控制单元222根据群组信息、已更新校正信息等来控制通过投射单元181投射的图像的位置(步骤S108、S118和S127)。因此，投射位置处于适当状态(例如，如在图2A实例中，一个投射图像由多个投射图像形成)。
当投射成像装置101协作投射图像时，投射图像的布局可以任意设定。图17示出了实例。
例如，如图17A所示可投射由四个投射图像111形成的一个整体图像401，如图17B所示可投射由三个投射图像111形成的图像401的一部分，如图17C所示可投射由三个投射图像111形成的整个图像401，如图17D所示可投射(不重叠)由投射图像111形成的图像401的一部分，或如图17E所示可投射由两个投射图像111形成的整个图像401以及由两个其他投射图像111形成的图像402和403。即，投射内容数据可包括多个图像。
顺便提及，在投射位置的这种控制下，当投射位置的移动需要用户操作(诸如投射成像装置101的移动)时，因为例如投射图像的位置相距太远等，所以投射位置控制单元222可提供用于引导移动投射图像的指示(引导指示)以及投射图像等。
例如，图像401投射到由投射图像111-1和投射图像111-3形成的区域上，如图18A所示。添加投射图像111-2和投射图像111-4到这个区域可以更大尺寸显示图像401，如图18D所示。
在这种情况下，投射位置控制单元222例如可在由投射图像111-1和111-3形成的区域中显示说“放置在这个区域上”的消息等，如图18B所示。因此，用户可以更容易地识别如何移动投射图像111-2和111-4。
此外，当根据引导指示移动投射图像111-2和111-4时，投射位置控制单元222例如可在由投射图像111-1至111-4形成的区域中显示说“可校正重叠”的消息等，如图18C所示。因此，用户可以更容易地识别投射图像111处于适当位置。
顺便提及，在多个投射成像装置101协作投射图像的情况下，可能不展示投射图像111，使得投射图像重叠并形成一个区域，如在图17A实例中。例如，投射成像装置101可投射图像以免重叠，从而协作显示多个图像，如图17E所示。
因此，投射位置可被控制成不仅使得移动多个投射图像以重叠，如在图18实例中，而且使得移动重叠并形成一个区域(如图19A所示)的投射图像以免重叠，如图19B所示。因此，可同时显示图像401至403，如图19C所示。
投射成像装置101的群组信息更新单元225通过使用已更新校正信息等来更新群组信息。然后，投射成像装置101的群组信息共享单元226例如经由通信单元164通过无线通信在投射成像装置101-1至101-4之间共享已更新群组信息(步骤S109、S119和S128)。
以这种方式，如上所述，形成新群组。因此，容易形成群组并允许多个投射单元协作投射图像。
投射图像的方式(例如，图像的布局、图像的投射尺寸等)例如可通过用户等判决投射图像的位置而判定或可通过内容(内容的元数据)而判定。
例如，如图21A所示，在内容为足球比赛的情况下，内容可由场地的俯拍镜头(图像401)、选手的特写镜头(图像402)、关于选手的数据(图像403)等组成。内容的元数据包括关于各个图像的信息(内容名称、种类、推荐尺寸、类型、尺寸等)，如图22所示。
在这种情况下，根据内容的元数据，一个大区域可由两个投射图像111形成以以大尺寸投射场地的俯拍镜头(图像401)，且不会以如此大尺寸投射的选手的特写镜头(图像402)以及关于选手的数据(图像403)各可由一个投射图像111形成。
另选地，根据由用户设定的投射图像111的布局等，场地的俯拍镜头(图像401)可以大尺寸投射到由投射图像111-1和111-3形成的最大区域上，选手的特写镜头(图像402)以及关于选手的数据(图像403)可投射到其余两个区域上。
图21B示出了内容为赛车游戏的情况。这种情况与足球比赛的情况相似。
根据内容的元数据或投射图像的位置，在各个赛车中从赛车外部看到的图像和从驾驶者眼睛看到的图像可被控制为投射到适当尺寸的区域上和投射在适当位置中。
<图像校正处理流程>
接着，将参考图20的流程图对用于投射图像的处理流程实例进行说明。图20示出了处理流程实例，其中投射成像装置101-1至101-4形成群组，且投射成像装置101协作投射图像。
根据来自投射成像装置101等的请求，例如，内容提供服务器105经由通信单元314提供请求内容数据给投射成像装置101(步骤S181)。投射成像装置101例如经由通信单元164通过无线通信接收内容数据(步骤S151、S161和S171)。
投射成像装置101的图像剪切单元227根据群组信息、包括在内容数据中的元数据等按需从包括在内容数据中的图像中对在分配给它的区域中的局部图像进行剪切(步骤S152、S162和S172)。当投射成像装置101投射整个图像时，省略这些步骤。
投射成像装置101的图像校正单元228根据元数据、群组信息、校正信息等对剪切图像进行校正(步骤S153、S163和S173)。
投射成像装置101的图像投射控制单元229控制投射单元181以投射已校正图像到屏幕102等上(步骤S154、S164和S174)。
如上所述，通过使用群组信息、校正信息、元数据等，每个投射成像装置101可更容易地与其他投射成像装置101协作投射图像。
<群组脱离处理流程>
接着，将参考图23的流程图对群组脱离处理流程实例进行说明。图23示出了处理流程实例，其中投射成像装置101-1至101-4形成群组，且投射成像装置101-1从群组脱离。
例如，从群组脱离的投射成像装置101-1的群组脱离单元230例如经由通信单元164通过无线通信上传当前群组信息到群组信息管理服务器106(步骤S201)。群组信息管理服务器106对群组信息作为历史进行存储和管理(步骤S231)。
投射成像装置101-1的群组脱离单元230例如经由通信单元164通过无线通信向同一个群组中的另一个投射成像装置101(投射成像装置101-2至101-4中的至少一个投射成像装置)通知从群组脱离(步骤S202)。
在收到通知后，投射成像装置101-2至101-4中的至少一个投射成像装置的群组信息更新单元225更新群组信息以排除投射成像装置101-1。然后，投射成像装置101-2至101-4的群组信息共享单元226共享已更新群组信息(步骤S211和S221)。
已经从群组脱离的投射成像装置101-1的群组脱离单元230从群组信息存储单元241中删除关于群组的群组信息(步骤S203)。
此外，留在群组中的投射成像装置101-2至101-4的投射位置控制单元222控制投射，使得这些投射成像装置作为除投射成像装置101-1外的群组相互协作(步骤S212和S222)。
投射成像装置101-2至101-4的校正信息共享单元223例如经由通信单元164通过无线通信相互共享校正信息(步骤S213和S223)。此外，投射成像装置101-2至101-4的校正信息更新单元224更新校正信息，使得投射成像装置101-2至101-4可根据群组信息、投射位置、校正信息等正确地协作投射投射图像(步骤S214和S224)。此外，投射成像装置101-2至101-4的校正信息共享单元223例如经由通信单元164通过无线通信相互共享已校正的校正信息(步骤S215和S225)。
投射成像装置101-2至101-4的投射位置控制单元222根据群组信息、已更新校正信息等来控制通过投射单元181投射的图像的位置(步骤S216和S226)。因此，投射位置进入适当状态。
投射成像装置101-2至101-4的群组信息更新单元225通过使用已更新校正信息等来更新群组信息。此外，投射成像装置101-2至101-4的群组信息共享单元226例如经由通信单元164通过无线通信在投射成像装置101-2至101-4之间共享已更新群组信息(步骤S217和S227)。
以这种方式，如上所述，投射成像装置101可容易地从群组脱离。这使得更容易允许投射成像装置形成群组并允许多个投射单元协作投射图像。
<投射成像装置>
图7为方块图，示出了投射成像装置101的主要构造实例。然而，投射成像装置101的构造实例并不限于这种构造实例。例如，投射成像装置101可被构造为如在图24实例中。
在图24的情况下，投射成像装置101通过视频处理器503对待投射图像执行处理(例如，图像剪切、图像校正等)。经由输入单元161(HDMI电缆等)输入的图像(视频流等)经由输入切换单元501提供给视频处理器503。此外，经由通信单元164获取的图像(图像文件等)经由输入切换单元501从SOC 151提供给视频处理器503。
SOC 151经由控制单元502控制视频处理器503和投射单元181以执行图像处理、图像输出(投射)、音频输出等。待执行处理与在图7构造的情况下的处理相似。然而，在图24构造的情况下，视频处理器503执行图像处理等以减轻SOC 151的负担。
<投射成像系统的另一个构造>
图1示出了投射成像系统100的构造实例，但投射成像系统100的构造实例并不限于这种构造实例。例如，如图25所示，投射成像装置101中的任何一个投射成像装置可以设定为主装置，其他投射成像装置101设定为从装置，使得作为主装置的投射成像装置101执行上述各种处理，诸如群组管理、校正信息管理和图像处理，以及作为从装置的投射成像装置101仅接收并投射已校正图像。
因此，只有作为主装置的投射成像装置101需要具有足够处理能力，这降低了其他投射成像装置101(作为从装置)的所需处理能力。因此，可以实现降低成本。以此方式，投射成像系统100可由不同处理能力的投射成像装置101组成。
此外，投射成像装置101可以有线方式进行相互通信。例如，如图26所示，投射成像装置101可经由通信电缆521(通信电缆521-1至521-4)(诸如HDMI电缆)连接在一起。例如，在使用HDMI电缆作为通信电缆521的情况下，可以经由通信电缆521不仅发送内容数据，而且发送收集数据(诸如传感器数据和校正信息)。
HDMI电缆包括消费类电子控制(CEC)线，如图27A所示。HDMI电缆的CEC线通常用于通过远程控制而操作的命令群组等的通信，诸如用于连接设备之间的电源开/关的指令以及用于运行系统的重放/停止的指令。使用如图27B所示的表还允许其他数据通信。即，可以通过使用CEC来发送收集数据等。
此外，在经由通信电缆来连接投射成像装置101的情况下，投射成像装置101可以菊链模式进行连接，如在图26实例中。另选地，投射成像装置101可通过使用转换盒531进行连接，如图28所示。在这种情况下，诸如图像剪切和校正的图像处理可在转换盒531中执行。在这种情况下，通过投射成像装置101获得的感测数据可通过转换盒531(点线箭头532-1至532-4)而收集。感测数据可通过使用通信电缆521而收集，如上所述，或可通过除通信电缆521之外的新通信电缆而收集，或可通过无线通信而收集。
连接到转换盒531的投射成像装置101的数量在理论上可以任意设定。然而，实际上，现有转换盒都只能够连接几个投射成像装置101。尽管如此，可以连接多个转换盒531以对更多数量的投射成像装置101进行分组，如图29所示。
转换盒531可经由通信电缆521、任何其他通信电缆、无线通信等进行连接。
可使用HDMI分离器541代替转换盒531，如图30所示。HDMI分离器541对输入内容数据简单地进行分支，并提供输入内容数据给多个投射成像装置101。因此，在这种情况下，诸如图像处理以及群组信息和校正信息的管理和控制的各种处理在投射成像装置101中执行，如在图1的情况下。收集数据可经由通信电缆542、无线通信等在投射成像装置101之间共享。
上述一系列处理可通过硬件或软件而执行。在通过软件来执行上述一系列处理的情况下，构成软件的程序从网络或记录介质进行安装。
记录介质例如由可移除介质171或可移除介质321组成，该可移除介质171或可移除介质321记录将分发给用户的程序以与装置自身分开地传输程序，如图7或图11所示。可移除介质171和可移除介质321包括磁盘(包括软盘)和光盘(CD-ROM和DVD)。此外，可移除介质171和可移除介质321还包括磁-光迷你光盘(MD)、半导体存储器光盘等。
在这种情况下，在投射成像装置101中，例如，通过连接可移除介质171到驱动器165，程序可安装到存储单元163中。此外，在内容提供服务器105中，例如，通过连接可移除介质321到驱动器315，程序可安装到存储单元313中。
此外，程序还可经由有线或无线传输介质而提供，诸如局域网、因特网或数字卫星广播。在这种情况下，在投射成像装置101中，例如，程序可通过通信单元164接收并安装到存储单元163中。此外，在内容提供服务器105中，例如，程序可通过通信单元314接收并安装到存储单元313中。
此外，程序还可预先安装在记录单元、ROM等中。在投射成像装置101中，例如，程序可预先安装在存储单元163或SOC 151的ROM中。此外，在内容提供服务器105中，例如，程序可预先安装在存储单元313、ROM 302等中。
顺便提及，将通过计算机执行的程序可为将根据本文所述的顺序按时间顺序处理的程序或可为将并行或必要时处理的程序，诸如在收到调用后。
此外，本文所述对将记录在记录介质中的程序进行说明的步骤不仅包括根据所述顺序按时间顺序执行的处理，而且包括不一定按时间顺序执行而是并行或单独执行的处理。
此外，上述步骤可在上述装置或除上述装置之外的任何装置中执行。在这种情况下，将执行步骤的装置具有执行步骤所需的功能(功能块等)。此外，执行步骤所需的信息被适当地发送给所述装置。
此外，本文所述的系统是指构成元件(装置、模块(部件)等)的总成。然而，构成元件可能并不一定全部在同一个外壳中。因此，该系统可由容纳在单独外壳中并经由网络或一个装置与容纳在一个外壳中的多个模块连接的多个装置组成。
此外，上述作为一个装置(或一个处理单元)的构造可以分成多个装置(或多个处理单元)。相反地，上述多个装置(或多个处理单元)可被共同地构造为一个装置(或一个处理单元)。此外，当然，除上述部件之外的任何部件可添加到所述装置(或所述处理单元)。此外，装置(或处理单元)的一些部件可包括在另一个装置(或另一个处理单元)中，只要整个系统以基本相同的方式进行构造和操作。
到目前为止已经参考附图对本公开的优选实施例进行详细说明。然而，本公开的技术范围并不限于前述实例。显然，本领域一般技术人员可以设想在权利要求中所述的技术思想的范围内的各种另选例或变形例，且这些实例当然被认为包括在本公开的技术范围内。
例如，本技术可被构造为云计算系统，其中经由网络在多个装置之间共享并相互协作执行一个功能。
此外，前述流程图中所述的步骤可由一个装置执行或可由多个装置共享并执行。
此外，当一个步骤包括多个处理时，包括在一个步骤中的多个处理可由一个装置执行或可由多个装置共享并执行。
此外，本技术并不限于前述实例，而可被实现为安装在这种装置或构成系统的装置中的任何部件，例如，作为大规模集成(LSI)系统的处理器、使用多个处理器的模块、使用多个模块的单元、还具有添加到所述单元的其他功能的机组(即，装置的一部分)等。
顺便提及，本技术还可被构造为如下：
(1)一种信息处理装置，包括：
群组形成单元，该群组形成单元形成用于与其他信息处理装置协作投射一个内容数据的群组，所述其他信息处理装置包括用来投射图像的投射单元和用来拍摄被摄体并获得拍摄图像的成像单元；
校正信息共享单元，该校正信息共享单元在属于通过所述群组形成单元形成的所述群组的信息处理装置之间共享校正信息，所述校正信息作为与对通过属于通过所述群组形成单元形成的所述群组的所述信息处理装置的所述投射单元所投射的图像作出的校正有关的信息；和
校正信息更新单元，该校正信息更新单元根据通过拍摄由所述投射单元投射的图像作为被摄体而获得的拍摄图像以及通过所述校正信息共享单元共享的校正信息来更新所述被摄体信息处理装置的校正信息。
(2)根据(1)所述的信息处理装置，其中所述校正信息包括与对所述图像中的预定表征像素作出的校正有关的信息。
(3)根据(2)所述的信息处理装置，其中与对表征像素作出的校正有关的信息包括在对表征像素进行校正之前和之后的坐标、表征像素的各个颜色分量的增益值和偏移值以及表征像素的颜色转换矩阵的系数。
(4)根据(1)至(3)中任一项所述的信息处理装置，还包括无线通信单元，该无线通信单元执行无线通信，其中
所述群组形成单元形成包括通过所述无线通信单元执行无线通信的其他信息处理装置以及所述被摄体信息处理装置的群组。
(5)根据(1)至(3)中任一项所述的信息处理装置，其中所述群组形成单元形成包括经由预定通信电缆连接到所述被摄体信息处理装置的其他信息处理装置以及所述被摄体信息处理装置的群组。
(6)根据(1)至(5)中任一项所述的信息处理装置，其中所述群组形成单元生成作为与所述形成群组有关的信息的群组信息。
(7)根据(6)所述的信息处理装置，其中所述群组信息包括用于识别所述群组的标识信息以及对于构成与所述群组信息对应的所述群组的信息处理装置的校正信息。
(8)根据(7)所述的信息处理装置，其中所述群组信息还包括与过去通过所述群组投射的内容数据的类型有关的信息。
(9)根据(8)所述的信息处理装置，其中所述群组信息还包括在投射内容数据时通过属于所述群组的信息处理装置的投射单元投射的图像的布局。
(10)根据(9)所述的信息处理装置，其中所述群组信息还包括与所述图像所投射到的投射平面有关的信息。
(11)根据(9)和(10)所述的信息处理装置，还包括：
群组信息共享单元，该群组信息共享单元允许在属于所述群组的信息处理装置之间共享所述群组信息；和
群组信息更新单元，该群组信息更新单元更新所述群组信息。
(12)根据(6)至(11)中任一项所述的信息处理装置，还包括投射位置控制单元，该投射位置控制单元根据所述群组信息和所述校正信息来控制通过所述投射单元投射的图像的投射位置。
(13)根据(12)所述的信息处理装置，其中，当通过属于所述群组的信息处理装置的投射单元投射的图像的位置与根据所述群组信息和所述校正信息而判决的位置不同时，所述投射位置控制单元投射引导图像，使得所述图像可投射到所述位置。
(14)根据(6)至(13)中任一项所述的信息处理装置，还包括图像剪切单元，该图像剪切单元根据所述群组信息对包括在所述内容数据中的、将由所述投射单元投射的图像的一部分进行剪切。
(15)根据(6)至(14)中任一项所述的信息处理装置，还包括图像校正单元，该图像校正单元根据所述群组信息对包括在所述内容数据中的、将由所述投射单元投射的图像的该部分进行校正。
(16)根据(1)至(15)中任一项所述的信息处理装置，还包括群组脱离单元，该群组脱离单元在向属于所述群组的其他信息处理装置通知从通过所述群组形成单元形成的所述群组脱离之后从所述群组脱离。
(17)根据(1)至(16)中任一项所述的信息处理装置，其中所述内容数据包括图像数据和元数据。
(18)根据(17)所述的信息处理装置，其中所述元数据包括与所述图像数据的内容、种类、推荐投射图像尺寸、类型和分辨率有关的信息。
(19)根据(17)或(18)所述的信息处理装置，其中所述内容数据具有多个图像数据。
(20)一种信息处理方法，包括：
形成用于与其他信息处理装置协作投射一个内容数据的群组，所述其他信息处理装置包括用来投射图像的投射单元和用来拍摄被摄体并获得拍摄图像的成像单元；
在属于所述形成群组的信息处理装置之间共享校正信息，所述校正信息作为与对通过属于所述形成群组的所述信息处理装置的所述投射单元所投射的图像作出的校正有关的信息；以及
根据通过拍摄由所述投射单元投射的图像作为被摄体而获得的所述拍摄图像以及共享的所述校正信息来更新所述被摄体信息处理装置的校正信息。
附图标记列表
100 投射成像系统
101 投射成像装置
102 屏幕
103 接入点
104 网络
105 内容提供服务器
106 群组信息管理服务器
107 服务器
111 投射图像
112 输入图像
151 片上系统
163 存储单元
181 投射单元
182 成像单元
201 视频处理器
202 激光驱动器
203 激光输出单元
204 反光镜
205 MEMS驱动器
206 MEMS反光镜
221 群组形成单元
222 投射位置控制单元
223 校正信息共享单元
224 校正信息更新单元
225 群组信息更新单元
226 群组信息共享单元
227 图像剪切单元
228 图像校正单元
229 图像投射控制单元
230 群组脱离单元
241 群组信息存储单元
242 校正信息存储单元
243 传感器数据存储单元
301 中央处理单元
501 输入切换单元
502 控制单元
503 视频处理器
521 HDMI电缆
531 转换盒
541 HDMI分离器。

Claims (20)

1.一种信息处理装置，包括：
群组形成单元，所述群组形成单元形成用于与其他信息处理装置协作投射一个内容数据的群组，所述其他信息处理装置包括用来投射图像的投射单元和用来拍摄被摄体并获得拍摄图像的成像单元；
校正信息共享单元，所述校正信息共享单元在属于通过所述群组形成单元形成的所述群组的信息处理装置之间共享校正信息，所述校正信息作为与对通过属于由所述群组形成单元形成的所述群组的所述信息处理装置的所述投射单元所投射的图像作出的校正有关的信息；和
校正信息更新单元，所述校正信息更新单元根据通过拍摄由所述投射单元投射的图像作为被摄体而获得的拍摄图像以及通过所述校正信息共享单元共享的校正信息来更新被摄体信息处理装置的校正信息。
2.根据权利要求1所述的信息处理装置，其中所述校正信息包括与对所述图像中的预定的表征像素而作出的校正有关的信息。
3.根据权利要求2所述的信息处理装置，其中与对所述表征像素作出的校正有关的信息包括在对所述表征像素进行校正之前和之后的坐标、所述表征像素的各个颜色分量的增益值和偏移值以及所述表征像素的颜色转换矩阵的系数。
4.根据权利要求1所述的信息处理装置，还包括无线通信单元，该无线通信单元执行无线通信，其中
所述群组形成单元形成包括通过所述无线通信单元执行无线通信的其他信息处理装置以及所述被摄体信息处理装置的群组。
5.根据权利要求1所述的信息处理装置，其中所述群组形成单元形成包括经由预定通信电缆连接到所述被摄体信息处理装置的其他信息处理装置以及所述被摄体信息处理装置的群组。
6.根据权利要求1所述的信息处理装置，其中所述群组形成单元生成作为与所形成的群组有关的信息的群组信息。
7.根据权利要求6所述的信息处理装置，其中所述群组信息包括用于识别所述群组的标识信息以及构成与所述群组信息对应的群组的信息处理装置的所述校正信息。
8.根据权利要求7所述的信息处理装置，其中所述群组信息还包括与过去通过所述群组投射的内容数据的类型有关的信息。
9.根据权利要求8所述的信息处理装置，其中所述群组信息还包括在投射所述内容数据时通过属于所述群组的所述信息处理装置的所述投射单元投射的图像的布局。
10.根据权利要求9所述的信息处理装置，其中所述群组信息还包括与所述图像所投射到的投射平面有关的信息。
11.根据权利要求9所述的信息处理装置，还包括：
群组信息共享单元，所述群组信息共享单元允许在属于所述群组的所述信息处理装置之间共享所述群组信息；和
群组信息更新单元，所述群组信息更新单元更新所述群组信息。
12.根据权利要求6所述的信息处理装置，还包括投射位置控制单元，该投射位置控制单元根据所述群组信息和所述校正信息来控制由所述投射单元投射的所述图像的投射位置。
13.根据权利要求12所述的信息处理装置，其中，当通过属于所述群组的所述信息处理装置的所述投射单元投射的图像的位置与根据所述群组信息和所述校正信息而判决的位置不同时，所述投射位置控制单元投射引导图像，使得所述投射单元投射的图像可投射到所述判决的位置。
14.根据权利要求6所述的信息处理装置，还包括图像剪切单元，所述图像剪切单元根据所述群组信息对包括在所述内容数据中的、将由所述投射单元投射的图像的一部分进行剪切。
15.根据权利要求6所述的信息处理装置，还包括图像校正单元，所述图像校正单元根据所述群组信息对包括在所述内容数据中的、将由所述投射单元投射的图像的一部分进行校正。
16.根据权利要求1所述的信息处理装置，还包括群组脱离单元，所述群组脱离单元在向属于所述群组的其他信息处理装置通知从由所述群组形成单元形成的所述群组脱离之后从所述群组脱离。
17.根据权利要求1所述的信息处理装置，其中所述内容数据包括图像数据和元数据。
18.根据权利要求17所述的信息处理装置，其中所述元数据包括与所述图像数据的内容、种类、推荐投射图像尺寸、类型和分辨率有关的信息。
19.根据权利要求17所述的信息处理装置，其中所述内容数据具有多个图像数据。
20.一种信息处理方法，包括：
形成用于与其他信息处理装置协作投射一个内容数据的群组，所述其他信息处理装置包括用来投射图像的投射单元和用来拍摄被摄体并获得拍摄图像的成像单元；
在属于所述群组的信息处理装置之间共享校正信息，所述校正信息作为与对通过属于所述群组的所述信息处理装置的所述投射单元所投射的图像作出的校正有关的信息；以及
根据通过拍摄由所述投射单元投射的图像作为被摄体而获得的所述拍摄图像以及共享的所述校正信息来更新被摄体信息处理装置的校正信息。
CN201580033675.9A 2014-07-01 2015-06-17 信息处理装置及方法 Expired - Fee Related CN106464826B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2014135793 2014-07-01
JP2014-135793 2014-07-01
PCT/JP2015/067424 WO2016002512A1 (ja) 2014-07-01 2015-06-17 情報処理装置および方法

Publications (2)

Publication Number Publication Date
CN106464826A CN106464826A (zh) 2017-02-22
CN106464826B true CN106464826B (zh) 2020-02-07

Family

ID=55019059

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201580033675.9A Expired - Fee Related CN106464826B (zh) 2014-07-01 2015-06-17 信息处理装置及方法

Country Status (4)

Country Link
US (1) US9918058B2 (zh)
JP (1) JP6917710B2 (zh)
CN (1) CN106464826B (zh)
WO (1) WO2016002512A1 (zh)

Families Citing this family (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2614650A1 (en) 2010-09-10 2013-07-17 Lemoptix SA A device for projecting an image
EP3062142B1 (en) 2015-02-26 2018-10-03 Nokia Technologies OY Apparatus for a near-eye display
US20170272716A1 (en) * 2016-03-15 2017-09-21 Casio Computer Co., Ltd. Projection apparatus, projection control method, and storage medium
CN107439007B (zh) * 2016-03-28 2019-05-17 麦克赛尔株式会社 投影型影像显示装置
JP2018084751A (ja) * 2016-11-25 2018-05-31 キヤノン株式会社 表示装置
US10650552B2 (en) 2016-12-29 2020-05-12 Magic Leap, Inc. Systems and methods for augmented reality
EP3343267B1 (en) 2016-12-30 2024-01-24 Magic Leap, Inc. Polychromatic light out-coupling apparatus, near-eye displays comprising the same, and method of out-coupling polychromatic light
CN110383828B (zh) * 2017-03-09 2022-02-08 索尼公司 图像处理设备和方法
CN110663068B (zh) * 2017-05-23 2024-02-02 皇家Kpn公司 用于渲染全景场景的坐标映射
CN110709920B (zh) * 2017-06-08 2022-11-08 佳能株式会社 图像处理设备及其控制方法
US10578870B2 (en) 2017-07-26 2020-03-03 Magic Leap, Inc. Exit pupil expander
TWI674441B (zh) * 2017-11-02 2019-10-11 天衍互動股份有限公司 光雕傳媒系統及其方法
EP3721270B1 (en) 2017-12-10 2024-04-10 Magic Leap, Inc. Anti-reflective coatings on optical waveguides
WO2019126331A1 (en) 2017-12-20 2019-06-27 Magic Leap, Inc. Insert for augmented reality viewing device
US10755676B2 (en) 2018-03-15 2020-08-25 Magic Leap, Inc. Image correction due to deformation of components of a viewing device
WO2019231850A1 (en) 2018-05-31 2019-12-05 Magic Leap, Inc. Radar head pose localization
CN108632593B (zh) * 2018-05-31 2020-05-19 歌尔股份有限公司 彩色汇聚误差的修正方法、装置及设备
EP3804306B1 (en) 2018-06-05 2023-12-27 Magic Leap, Inc. Homography transformation matrices based temperature calibration of a viewing system
WO2020010097A1 (en) 2018-07-02 2020-01-09 Magic Leap, Inc. Pixel intensity modulation using modifying gain values
US11856479B2 (en) 2018-07-03 2023-12-26 Magic Leap, Inc. Systems and methods for virtual and augmented reality along a route with markers
US11510027B2 (en) 2018-07-03 2022-11-22 Magic Leap, Inc. Systems and methods for virtual and augmented reality
US11624929B2 (en) 2018-07-24 2023-04-11 Magic Leap, Inc. Viewing device with dust seal integration
EP3827224B1 (en) 2018-07-24 2023-09-06 Magic Leap, Inc. Temperature dependent calibration of movement detection devices
WO2020028834A1 (en) 2018-08-02 2020-02-06 Magic Leap, Inc. A viewing system with interpupillary distance compensation based on head motion
US10795458B2 (en) 2018-08-03 2020-10-06 Magic Leap, Inc. Unfused pose-based drift correction of a fused pose of a totem in a user interaction system
WO2020102412A1 (en) 2018-11-16 2020-05-22 Magic Leap, Inc. Image size triggered clarification to maintain image sharpness
WO2020185405A1 (en) 2019-03-12 2020-09-17 Magic Leap, Inc. Registration of local content between first and second augmented reality viewers
CN112422933A (zh) * 2019-08-21 2021-02-26 台达电子工业股份有限公司 投影装置、投影系统以及运行方法
US11737832B2 (en) 2019-11-15 2023-08-29 Magic Leap, Inc. Viewing system for use in a surgical environment

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006114948A (ja) * 2004-10-12 2006-04-27 Hitachi Ltd 色順次方式投射型映像表示装置
JP2008249906A (ja) * 2007-03-29 2008-10-16 Brother Ind Ltd プロジェクタ及び表示システム
CN101771840A (zh) * 2009-01-07 2010-07-07 佳能株式会社 用于控制投影仪设备的控制设备和方法
WO2010093361A1 (en) * 2009-02-11 2010-08-19 Hewlett-Packard Development Company, Lp Multi-projector system and method
CN103003870A (zh) * 2010-07-21 2013-03-27 佳能株式会社 图像显示系统、图像处理设备及其控制方法

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6834965B2 (en) * 2003-03-21 2004-12-28 Mitsubishi Electric Research Laboratories, Inc. Self-configurable ad-hoc projector cluster
JP5725724B2 (ja) * 2010-04-01 2015-05-27 キヤノン株式会社 投影装置
JP5641820B2 (ja) * 2010-08-25 2014-12-17 キヤノン株式会社 投射型表示システム及び投射型表示装置
EP2614650A1 (en) * 2010-09-10 2013-07-17 Lemoptix SA A device for projecting an image
JP2012118390A (ja) * 2010-12-02 2012-06-21 Sharp Corp 表示装置およびマルチディスプレイシステム

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006114948A (ja) * 2004-10-12 2006-04-27 Hitachi Ltd 色順次方式投射型映像表示装置
JP2008249906A (ja) * 2007-03-29 2008-10-16 Brother Ind Ltd プロジェクタ及び表示システム
CN101771840A (zh) * 2009-01-07 2010-07-07 佳能株式会社 用于控制投影仪设备的控制设备和方法
WO2010093361A1 (en) * 2009-02-11 2010-08-19 Hewlett-Packard Development Company, Lp Multi-projector system and method
CN103003870A (zh) * 2010-07-21 2013-03-27 佳能株式会社 图像显示系统、图像处理设备及其控制方法

Also Published As

Publication number Publication date
US9918058B2 (en) 2018-03-13
JP6917710B2 (ja) 2021-08-11
JPWO2016002512A1 (ja) 2017-04-27
US20170127032A1 (en) 2017-05-04
CN106464826A (zh) 2017-02-22
WO2016002512A1 (ja) 2016-01-07

Similar Documents

Publication Publication Date Title
CN106464826B (zh) 信息处理装置及方法
US11032490B2 (en) Camera array including camera modules
US10665261B2 (en) Camera array including camera modules
JP6768197B2 (ja) 情報処理装置および方法
US10368011B2 (en) Camera array removing lens distortion
US9792712B2 (en) Computational pipeline and architecture for multi-view displays
US20200275079A1 (en) Generating three-dimensional video content from a set of images captured by a camera array
EP3442222B1 (en) System for projecting immersive audiovisual content
US11134230B2 (en) Image processing apparatus and method
CN103543596A (zh) 一种多面投影系统
US10303419B2 (en) Information processing system, display processing apparatus, display processing method, and recording medium
US11108971B2 (en) Camera array removing lens distortion
US10186301B1 (en) Camera array including camera modules
US10129512B2 (en) Self-adjusting portable modular 360-degree projection and recording computer system
US20210185297A1 (en) Multi-spectral volumetric capture
EP3525456A1 (en) Self-adjusting portable modular 360-degree projection and recording computer system
CN114792509A (zh) 色彩纠偏方法、装置、系统和Micro LED显示屏

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20200207