CN113362744A - 显示系统、显示控制装置及计算机可读介质 - Google Patents
显示系统、显示控制装置及计算机可读介质 Download PDFInfo
- Publication number
- CN113362744A CN113362744A CN202010789621.8A CN202010789621A CN113362744A CN 113362744 A CN113362744 A CN 113362744A CN 202010789621 A CN202010789621 A CN 202010789621A CN 113362744 A CN113362744 A CN 113362744A
- Authority
- CN
- China
- Prior art keywords
- person
- image
- directions
- processor
- display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/366—Image reproducers using viewer tracking
- H04N13/368—Image reproducers using viewer tracking for two or more viewers
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
- G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
- G09G3/2007—Display of intermediate tones
- G09G3/2074—Display of intermediate tones using sub-pixels
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/302—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
- H04N13/305—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays using lenticular lenses, e.g. arrangements of cylindrical lenses
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/349—Multi-view displays for displaying three or more geometrical viewpoints without viewer tracking
- H04N13/351—Multi-view displays for displaying three or more geometrical viewpoints without viewer tracking for displaying simultaneously
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/398—Synchronisation thereof; Control thereof
Abstract
本发明涉及显示系统、显示控制装置及计算机可读介质。显示系统具有:多组像素组,其能够朝向多个方向分别显示不同的图像;以及处理器,所述处理器确定能够视觉确认所述像素组的人物的方向,所述处理器在确定了2个以上的所述方向的情况下,使与该各方向对应的所述像素组朝向所确定的各方向分别显示不同的图像。
Description
技术领域
本发明涉及显示系统、显示控制装置及计算机可读介质。
背景技术
作为在日本特开2019-160313号公报中,作为与数字标牌有关的技术,记载了再现终端根据与从便携终端发送的内容数据一起发送的日程数据使显示器进行显示的技术。
例如,存在为了广告而利用了通过显示图像或动态图像或发出声音来示出信息的信息示出装置的所谓的数字标牌(digital signage)被多人视听的情况,但是在示出的信息只有一条的情况下,根据观看者的不同,存在会有人觉得没有兴趣、或者对于随时间序列变化的信息要从中途观看的情况。
发明内容
因此,本发明的目的在于根据示出信息的对象的而使他们接收的信息不同。
根据本发明的第1方案,提供了一种显示系统,具有:多组像素组,其能够朝向多个方向分别显示不同的图像;以及处理器,所述处理器确定能够视觉确认所述像素组的人物的方向,所述处理器在确定了2个以上的所述方向的情况下,使与该各方向对应的所述像素组朝向所确定的各方向分别显示不同的图像。
根据本发明的第2方案,所述处理器对所述方向被确定了的人物进行识别,所述处理器在识别出的人物的方向移动时,使得针对该方向持续显示相同的图像。
根据本发明的第3方案,在确定不到识别出的人物的所述方向之后再次确定到该方向的情况下,所述处理器将在确定不到识别出的人物的所述方向时显示的图像的后续图像朝向再次确定到的所述方向显示。
根据本发明的第4方案,所述处理器根据所述方向被确定了的多个人物的该方向的关系来估计该多个人物彼此之间的人际关系,使得向被估计出具有特定的人际关系的所述多个人物的方向显示相同的图像。
根据本发明的第5方案,所述处理器使与被估计出具有所述特定的人际关系的所述多个人物的人数对应的组数的所述像素组显示所述相同的图像。
根据本发明的第6方案,所述处理器使与被估计出具有所述特定的人际关系的所述多个人物的密集度对应的组数的所述像素组显示所述相同的图像。
根据本发明的第7方案,所述处理器使与所述方向被确定了的人物的特定部位的动作对应的内容的图像朝向该人物的方向显示。
根据本发明的第8方案,所述处理器在最初确定了所述人物的方向的情况下,朝向该方向显示如下图像,该图像是使动态图像从头开始再现的图像。
根据本发明的第9方案,所述处理器与所述方向被确定的人物随身携带的通信终端进行无线通信,向所述人物的方向显示与从所述通信终端取得的信息对应的图像。
根据本发明的第10方案,所述处理器与所述方向被确定的人物随身携带的通信终端进行无线通信,向所述人物的方向显示与从所述通信终端取得的信息对应的图像。
根据本发明的第11方案,所述处理器将表示从具有所述像素组的显示装置的位置到从所述通信终端取得的信息所示的目的地为止的路线的图像作为与所述信息对应的图像而显示出。
根据本发明的第12方案,提供了一种显示控制装置,具有:多组像素组,其能够朝向多个方向分别显示不同的图像;以及处理器,所述处理器确定能够视觉确认所述像素组的人物的方向,所述处理器在确定了2个以上的所述方向的情况下,使与该各方向对应的所述像素组朝向所确定的各方向分别显示不同的图像。
根据本发明的第13方案,提供一种计算机可读介质,其存储有使计算机执行处理的程序,该计算机具有处理器和能够朝向多个方向分别显示不同的图像的多组像素组,所述处理包括:确定能够视觉确认所述像素组的人物的方向;以及在确定了2个以上的所述方向的情况下,使与该各方向对应的所述像素组朝向所确定的各方向分别显示不同的图像。
(效果)
根据上述第1、12或13方案,可以根据示出信息的对象而使他们所接受到的信息不同。
根据上述第2方案,能够使经过显示系统的面前的人物持续观看同一图像。
根据上述第3方案,即使经过从显示系统的面前的人物暂时看不到显示系统,也能够继续观看相同的图像。
根据所述第4方案,可以对特定人际关系的组示出相同内容的图像。
根据上述第5、6方案,能够抑制图像瞬间消失而再次显示的现象,并且能够有效地利用像素组。
根据上述第7方案,图像的视听者可以按照自己的意愿改变图像。
根据所述第8方案,可以避免人从中途观看动画。
根据上述第9方案,可以使方向被确定的每个人听到不同的声音。
根据所述第10方案,可以向人群中的人物示出图像。
根据上述第11方案,即使携带通信终端的人物不指定目的地,也能够提示到该目的地为止的路线。
附图说明
图1是表示实施例的多方向显示系统的整体结构的图
图2是放大地表示柱状透镜板的图
图3是表示图像被显示的方向的一例的图
图4是表示图像处理装置的硬件结构的图
图5是表示图像处理装置所实现的功能结构的图
图6是示出表示人物的方向的角度的一例的图
图7是表示显示处理中的动作步骤的一例的图
图8是表示变形例的多方向显示系统的整体结构的图
图9是表示变形例的图像处理装置所实现的功能结构的图
图10是表示变形例的多方向显示系统所实现的功能结构的图
具体实施方式
[1]实施例
图1表示实施例的多方向显示系统1的整体结构。多方向显示系统1是朝向多个方向分别显示不同的图像的系统,是本发明的“显示系统”的一例。多方向显示系统1具备显示装置10、拍摄装置20和图像处理装置30。
显示装置10是显示图像的装置,具有向多个方向分别显示不同图像的功能。显示装置10包括显示主体11和柱状透镜板12。显示器主体11从排列为平面状的多个像素发出光来显示图像。显示器主体11例如是液晶显示器,但也可以是有机EL(=Electro-Luminescence:场致发光)显示器或等离子显示器等。
柱状透镜板12安装在显示器主体11的显示面111上。这里,在图1中,用X轴、Y轴、Z轴表示三维坐标轴,将沿着显示面111的平面上的坐标轴设为X轴(沿着水平方向的轴)、Y轴(沿着铅垂方向的轴)、Z轴以显示面111的法线的相反方向为正。以下,将各轴的箭头所示的方向称为正方向,将与其相反方向的方向称为负方向。另外,将沿着各轴的方向称为“X轴方向”、“Y轴方向”、“Z轴方向”。
柱状透镜板12是由一部分呈圆筒状形状且细长的凸透镜排列配置而成的板,安装在显示面111的Z轴负方向侧。参照图2说明柱状透镜板12和显示器主体11的像素之间的关系。
图2放大表示柱状透镜板12。图2示意性地示出了从Y轴正方向观察的柱状透镜板12和显示主体11的像素部112。
柱状透镜板12包括透镜部122-1、122-2、122-3、122-4、122-5、122-6…(在下文中,当不需要区分它们时,将它们称为“透镜部122”)。像素部112包括具有像素112-1-1、112-1-2、112-1-3、112-1-4、112-1-5、112-1-6…的像素组112-1。
多个透镜部122如前述那样分别为一部分呈圆筒状形状的细长的凸透镜,沿X轴方向排列配置。即,各透镜部122以各自的长度方向沿着Y轴的方式配置。在图2的例子中,例如在与各透镜部122对置的对置区域123-1、123-2、123-3、123-4、123-5、123-6…(以下在不区分各个对置区域的情况下称为“对置区域123”)于X轴方向上排列配置有4个像素。
另外,在图2中,为了容易观察图,将在各对置区域123中沿X轴方向排列配置的像素的数量设为4个,但设显示器主体11在各对置区域123中具有N个(N为自然数)像素组。本实施例中的N大于4,详情后述。
像素组112-1的各像素均配置在对置区域123的X轴正方向上的端部。从像素组112-1的各像素发出的光向Z轴负方向行进,并且在各透镜部122的X轴正方向上的端部处向相同的方向(以下称为“相同方向”)上折射。因此,从像素组112-1的各像素发出的光到达处于各光被折射的相同方向上的人的眼睛而显示图像。
该方式同样适用于像素组112-1以外的像素组,该像素组是在各对置区域123中配置于相同位置的像素的集合。由于来自各像素组的各像素的光在对应的各透镜部122中向相同方向折射,因此会到达处于与各像素组对应的相同方向上的人的眼睛而显示图像。如此,显示装置10具备可朝向多个(本实施例中为N个)方向分别显示不同图像的多组(本实施例中为N组)像素组。N组像素组沿X轴方向排列。
图3表示图像被显示的方向的一例。图3示出了从Y轴正方向观察的显示装置10(显示器主体11和柱状透镜板12)。显示装置10朝向显示方向D0、D1、D2…D45…D90的91个方向分别显示不同的图像。即,在本实施例中,显示装置10具备91组像素组。
显示方向D45与显示面111的法线方向一致,各显示方向的角度各自相差1度。即,显示方向D0、D90都与显示方向D45之间形成45度的角度。以下,用负值表示显示方向D0侧的角度,用正值表示显示方向D90侧的角度(即,显示方向D0是-45度的方向,显示方向D90是45度的方向)。
拍摄装置20例如是数码相机,安装在显示装置10的铅垂上侧。在拍摄装置20中,透镜所朝向的方向(拍摄方向)为显示面111所朝向的方向,将图3中所示的所有显示方向都包括在视角中而进行拍摄。显示装置10和拍摄装置20通过电缆等与图像处理装置30电连接。另外,该连接也可以通过无线通信进行。
图像处理装置30对显示装置10所显示的图像以及由拍摄装置20拍摄到的图像进行处理。
图4表示图像处理装置30的硬件结构。图像处理装置30是具有处理器31、存储器32、存储器33和设备I/F34的计算机。处理器31例如具有CPU(=Central Processing Unit:中央处理单元)等运算装置、寄存器以及外围电路等。处理器31是本发明“处理器”的一例。
存储器32是处理器31可读取的记录介质,具有RAM(=Random Access Memory:随机存取存储器)和ROM(=Read Only Memory:只读存储器)等。存储器33是处理器31可读取的记录介质,例如具有硬盘驱动器或闪存等。处理器31通过使用RAM作为工作区域执行存储在ROM或存储器33中的程序来控制各硬件的动作。
设备I/F 34是显示装置10和拍摄装置20这2个设备之间的接口(I/F:interface)。在多方向显示系统1中,处理器31执行程序来控制各部分,由此实现以下所述的各功能。各个功能进行的动作也被表示为由实现该功能的装置的处理器31所进行的动作。
图5表示图像处理装置30实现的功能结构。图像处理装置30包括人物方向确定部301、个人识别部302、识别信息存储部303、内容选择部304、内容存储部305和整体渲染部306。人物方向确定部301确定能够视觉确认上述显示装置10所具有的像素组的人物所处的方向(在下文中,可以称为“人物的方向”)。
人物方向确定部301例如获取由拍摄装置20拍摄到的图像,并且使用公知的面部识别技术从取得的图像去识别图像中所示出的人的面部。人物方向确定部301判断为面部被识别出的人物能够识别显示面111(即像素组),根据识别出的面部在图像内的位置,确定该面部的人物的方向。人物方向确定部301例如通过使用将各像素的坐标与实际空间中的方向关联起来的方向表来确定人物的方向。
方向表例如通过多方向显示系统1的提供者在实际空间中的特定方向上设置对象物,通过检查该对象物在拍摄到的图像内的位置来预先生成方向表。在本实施例中,人物的方向例如通过与显示面111的法线方向(与图3所示的显示方向D45相同的方向)所成的角度来表示。具体而言,人物的方向通过在X轴方向上与法线方向所成的角度、和在Y轴方向上与法线方向所成的角度来表示。
在X轴方向上与法线方向所成的角度是指,在将表示人物的方向的矢量投影到包含X轴和Z轴的平面上的情况下,投影得到的矢量与法线方向所成的角度。另外,在Y轴方向上与法线方向所成的角度是指,在将表示人物的方向的矢量投影到包含Y轴和Z轴的平面上的情况下,投影得到的矢量与法线方向所成的角度。参照图6说明这些角度。
图6表示表示人物的方向的角度的一例。在图6中,通过以显示面111的中央为原点的三维坐标系的矢量的坐标(x,y,z)来表示人物的方向D100。在图6的(a)中,示出了将人物的方向D100投影到包含X轴和Z轴的平面上而得的投影方向D100-x(坐标(x,0,z))。投影方向D100-x与显示方向D45(法线方向)所成的角度θ1是人物的方向D100在X轴方向上与法线方向所成的角度。
另外,在图6的(b)中,示出了将人物的方向D100投影到包含Y轴和Z轴的平面上而得的投影方向D100-y坐标(0,y,z))。投影方向D100-y与显示方向D45(法线方向)所成的角度θ2是人物的方向D100在Y轴方向上与法线方向所成的角度。以这种方式,人物方向确定部301通过人物在X轴方向上的角度θ1和在Y轴方向上的角度θ2来确定可以视觉地识别像素组的人物的方向。
人物方向确定部301在确定了人物的方向之后,将表示所确定的方向和在确定时识别出的面部的图像的方向信息提供给个人识别部302。个人识别部302识别通过人物方向确定部301被确定了方向的人物。个人识别部302例如通过由所提供的方向信息所示的面部图像的特征量来识别个人。这里所说的识别不是指对被确定了方向的人物的个人名和住址等进行确定,而是指在其他图像中拍摄到面部的情况下能够确定是同一人物。
个人识别部302在识别出新的人物的情况下,将用于该人物的个人识别的信息(例如面部图像)登记到识别信息存储部303。识别信息存储部303存储由个人识别部302登记的人物的识别信息。个人识别部302在从个人物方向确定部301被提供了方向信息时,参照识别信息存储部303,确认所提供的方向信息所示出的人物的识别信息是否已被登记。
在没有登记的情况下,个人识别部302将所提供的方向信息所示的人物的识别信息作为表示新识别出的个人的信息提供给内容选择部304。另外,在登记过的情况下,个人识别部302从识别信息存储部303读出已登记的该人物的识别信息,作为表示已完成识别的个人的信息提供给内容选择部304。
内容选择部304从内容存储部305所存储中的内容中选择向通过从个人识别部302提供的识别信息而识别出的人示出的内容。内容存储部305存储有多个内容数据,该内容数据表示用于向在多方向显示系统1面前经过的人物示出的内容。内容是通过图像(静态图像或动态图像)以及声音来表示想要向人物示出的信息的内容。
内容选择部304在被提供了表示新识别出的个人的识别信息的情况下,例如重新选择与当前日期和时间对应的内容来作为要示出的内容。另外,内容选择部304可以随机地选择内容,或者可以依次选择多个准备好的内容。无论是哪个情况,在确定了两个以上的人物的方向的情况下,内容选择部304存在选择各自不同的内容的情况(然而,也有选择相同的内容的情况)。
此外,内容选择部304在被提供了表示是已完成识别的个人的识别信息的情况下,则再次选择针对该识别信息而选择过的内容。内容选择部304从内容存储部305读出表示选择过的内容的内容数据,并提供给整体渲染部306。整体渲染部306通过柱状透镜的方式来渲染所提供的内容数据所示的内容的图像。
渲染是指生成显示用的图像数据。所谓柱状透镜方式下的渲染,是指生成如下图像数据,该图像数据用于使与图像显示的方向对应的像素组显示该图像,且示出了全部像素的像素值。例如,当5个方向被确定为人物的方向时,整体渲染部306生成如下图像数据,该图像数据用于使与这些方向对应的像素组显示向各个方向示出的内容的图像。在本实施例中,整体渲染单元306向一个人分配一个像素组。
如上所述,显示装置10具有N组(在本实施例中为91组)像素组,其中还包含与未被确定为人物方向的显示方向对应的像素组。整体渲染部306对于这样的没有人物的显示方向的像素组,不对图像进行渲染,例如生成全部为最小像素值的图像数据。
设为最小的像素值是因为,若像素发出光,则多少会对相邻的像素的光造成影响,因此要尽量减小其影响。像这样,整体渲染部306生成如下图像数据,该图像数据例如使得针对与没有被人物方向确定部301确定为人物的方向的方向对应的像素组,使像素值最小且不显示图像。
整体渲染部306通过如上述那样生成图像数据,在确定了2个以上的人物的方向的情况下,使与各方向对应的像素组显示朝向所确定的各方向而不同的图像。由此,在多方向显示系统1中,尽管从一个显示面示出信息,但根据示出信息的对象,他们所接收到的信息是不同的。
当人物方向确定部301确定了新的人物的方向时,内容选择部304选择新内容。在首先确定了人物的方向并且所选择的内容是动态图像的情况下,整体渲染部306进行渲染,使得朝向所确定的方向显示使动态图像从头开始再现的图像。由此,例如经过显示装置10的面前的人物不用从中途观看动态图像。
此外,在人物已经被识别过的情况下,则内容选择部304针对该人物选择相同的内容。因此,如果所识别出的人物移动从而该人物的方向改变时,则整体渲染部306会针对该方向持续显示相同内容的图像。由此,例如,当存在经过显示装置10的面面的人物时,该人物会持续观看相同内容的图像。
另外,在已经被识别过的人物进行移动时,例如存在隐藏在其他人物后面而暂时无法显示在拍摄装置20所拍摄到的图像中的情况。在这种情况下,当在拍摄图像中再次显示出该人物时,人物方向确定部301确定该人物的方向。在像这样在确定不到识别出的人物的方向之后而再次确定到时,内容选择部304针对已经识别出的该人物选择相同的内容。
因此,整体渲染部306使在确定不到时所显示的图像的后续图像再次朝向确定的方向显示。因此,例如,在存在经过显示器装置10的面前的人物的情况下,即使该人物经过其他人物的后面等而暂时看不到显示器装置10,也会持续观看到相同内容的图像。
多方向显示系统1所具备的各装置通过上述结构来进行对多个方向的人显示不同图像的显示处理。
图7表示显示处理中的动作步骤的一例。首先,拍摄装置20拍摄图像(步骤S11),将拍摄到的图像发送到图像处理装置30(步骤S12)。图像处理装置30(人物方向确定部301)确定在所发送的图像中显示出的人物的方向(步骤S13)。
接着,图像处理装置30(个人识别部302)对方向被确定了的人物进行识别(步骤S14)。然后,图像处理装置30(内容选择部304)确定被识别的人物是否是已经被识别过的人物(步骤S15)。当图像处理装置30(内容选择部304)确定人物是未被识别过的新人物(否)时,图像处理装置30选择新内容(步骤S16)。
图像处理装置30(内容选择部304)在判断为是已识别过的人物(是)的情况下,针对该人物选择与已经选择的内容相同的内容(步骤S17)。在步骤S16或S17之后,图像处理装置30(整体渲染部306)通过柱状透镜的方式渲染所选择出的内容的图像(步骤S18)。
然后,图像处理装置30(整体渲染部306)将通过渲染而生成的用于显示的图像数据发送到显示装置10(步骤S19)。显示装置10使用发送来的图像数据按确定的每个方向显示图像(步骤S20)。当显示装置10在每个人物的方向上显示图像时,重复从步骤S11到S20的操作。
[2]变形例
上述实施例仅仅是本发明的一个实施例,可以进行如下变形。另外,实施例及各变形例也可以根据需要组合实施。
[2-1]人物的方向的确定方法
人物方向确定部301在实施例中通过识别人物的面部来确定人物的方向,但人物的方向的确定方法不限于此。人物方向确定部301例如可以通过从图像中检测人物的眼睛来确定人物的方向,也可以通过检测人物的全身来确定人物的方向。
另外,在人物持有智能手机等具备测位单元(测定自终端的位置的单元)的通信终端的情况下,人物方向确定部301也可以取得表示通信终端测定出的位置的位置信息,根据与预先存储的与显示装置10的位置信息之间的关系来确定人物的方向。在该情况下,即使没有拍摄装置20,也可以确定人物的方向。
[2-2]组
有时,显示装置10所显示的内容的图像由多个人的组观看。组例如是家庭、朋友或情侣。多方向显示系统1可以向属于这些组的人物示出相同内容的图像。在本变形例中,例如,内容选择部304根据方向被指定的多个人物的方向之间的关系来估计该多个人之间的人际关系。
例如,内容选择部304对针对两个人物所确定的两个方向在水平方向上所成的角度在一定时间内的平均值θ11和在铅垂方向上所成的角度在一定时间内的平均值θ12进行计算。内容选择部304在平均值θ11小于阈值Th11并且平均值θ12小于阈值Th21的情况下估计两个人是夫妻或情侣,并且在平均值θ11小于阈值Th12并且平均值θ12小于阈值Th21的情况下估计两个人是朋友。这里,阈值Th12是大于阈值Th11的值。
以这种方式设置阈值的原因在于,虽然夫妻、情侣和朋友都保持一定距离而移动,但是夫妻和情侣的密切程度要高于朋友的密切程度。此外,当平均值θ11小于阈值Th11并且平均值θ12为阈值Th22以上并且小于Th23时,内容选择部304估计2人是母/父子。之所以这样设定阈值,是因为在母/父子的情况下,虽然密切度高,但由于身高的关系,脸部在铅垂方向是分开的。
此外,如果被估计为朋友的两个人物中的一个被估计为和另一个人物是朋友,则内容选择部304将三个人物一起估计为朋友。内容选择部304以相同的方法来估计估计多人的朋友的组。此外,当人数超过预定人数(例如,约10人)时,内容选择部304估计不是朋友的组,而是同学或队友。
当内容选择部304如上述那样估计人际关系时,针对被估计为具有特定人际关系的多个人选择相同的内容。例如,内容选择部304针对被估计为夫妻、情侣或朋友的多个人选择相同的内容。另一方面,内容选择部304针对被估计为父/母子的多个人物选择不同的内容。
作为如上述那样选择内容的结果,整体渲染部306朝向被估计为具有特定人际关系的多个人显示相同内容的图像。因此,相同内容的图像被向具有特定人际关系的组示出。
[2-3]像素组的分配
在实施例中,整体渲染部306对1个人物分配1个像素组,但也可以对1个人物分配2个以上的像素组。分配2个以上的像素组是指,整体渲染部306针对2个以上的像素组生成用于显示相同图像的图像数据,使这2个以上的像素组显示相同图像。
例如,在多个人物被推定为上述变形例中所述的特定的人际关系的情况下,整体渲染部306使与这些多个人物的人数对应的组数的像素组显示相同的图像。特定人际关系际关系是指,例如夫妻、情侣、朋友、朋友组或同学等等。例如多个人物的人数越多,则整体渲染部306分配的像素组的组数越多。
具体地,虽然整体渲染部306是将一组像素组分配给一个人的,但是对于特定人际关系的多个人物例如分配人数的倍数的组数(对于两人为四组,对于三人为六组)的像素组。在对1个人物只分配1组像素组的情况下,如果该人物移动,则在到相邻的像素组显示相同的图像为止会产生时滞(方向的确定、个人的识别、内容的选择所需要的时间),因此会发生图像瞬间消失而再次显示的图像的闪烁现象。
越增加像素组的组数,在人物移动时相邻的像素组也显示相同图像的可能性越高,则越难以产生图像的闪烁现象。另一方面,由于像素组的组数存在限制,因此若无限制地分配给1个人物,则分配给其他人物的像素组会减少。这里,例如,在向如夫妻那样密切度较高的2人以上的人物示出相同的图像的情况下,即使在这两个人之间的方向上显示其他图像,除了这两个人之外的人看到该图像的可能性也很小。
因此,在本变形例中,通过如上述那样增加像素组的组数而进行分配,与使分配的像素组的组数不变的情况相比,能够抑制图像的闪烁现象并且有效地利用像素组。这里所说的有效利用是指,使用对其他人物显示图像的可能性较低的像素组来抑制图像的闪烁现象,不使用在以后对其他人物显示图像的可能性较高的像素组,而是将它们设为随时都可以利用。
另外,在多个人物被估计为特定的人际关系的情况下,整体渲染部306也可以使与这些多个人物的密集度对应的组数的像素组显示相同的图像。整体渲染部306判断为,当平均值θ11(两个方向在水平方向上所成的角度的平均值)和平均值θ12(两个方向在铅垂方向上所成的角度的平均值)越小,则密集度较高。
例如多个人物的密集度越高,则整体渲染部306分配的像素组的组数越多。多个人物的密集度越高,则即使在这些人物之间的方向上显示其他图像,其他人物看到该图像的可能性也越小。因此,在这种情况下,与使要分配的像素组的组数不变的情况相比,可以抑制图像的闪烁现象,并且可以有效地利用像素组。
[2-4]姿态
也可以受理基于观看图像的人物的姿态的图像操作。在本变形例中,例如,人物方向确定部301确定人物的方向,并且确定该人物的特定部位的确定的动作。特定部位的确定的动作例如是举手动作或将手放下的动作。
人物方向确定部301例如通过使用用于识别在图像中拍摄到的人物的骨骼的已知技术(例如,在日本特开2019-211850号公报中公开的技术)来确定手部的确定的动作。另外,在本变形例中,在拍摄装置20中使用立体照相机那样的能够取得三维图像数据的照相机。人物方向确定部301在确定存在特定的部位的确定的动作时,将表示被确定了特定部位的动作的人物的面部图像的动作信息提供给个人识别部302。
个人识别部302读取动作被确定的人物的识别信息,并提供给内容选择部304。内容选择部304选择用于向通过被供给的识别信息而识别出的人示出的新内容。例如,如果针对人物在当前所选择的内容是一系列的,则内容选择部304选择同一系列中的下一内容。
此外,内容选择部304可以选择相同内容的不同语言版本,或者可以随机选择新内容。此外,内容选择部304可以重新再次选择相同的内容。在这种情况下,例如,在为动态图像的内容的情况下,再次从头开始再现内容。
通过如上所述那样选择内容,整体渲染部306将与方向已被确定的人物的特定部位的动作对应的内容的图像向该人物的方向显示。由此,被提示了内容的图像的人物(视听者)可以通过使其自己的特定部位成为确定的动作,而按照自己的意愿来变更内容的图像。
[2-5]方向性的声音
多方向显示系统也可以在显示图像的同时发出声音。
图8表示变形例的多方向显示系统1a的整体结构。多方向显示系统1a包括显示装置10和方向性扬声器40(拍摄装置和图像处理装置的图示省略)。
方向性扬声器40是向从多个方向中选择的方向发出声音的扬声器。设方向性扬声器40向图3所示的显示方向D0、D1、D2…D45…D90这91个方向发出声音。
图9表示本变形例的图像处理装置30a所实现的功能结构。图像处理装置30a除了图5所示的各部分之外还具备声音方向控制部307。
内容选择部304还将表示所选择出的内容的内容数据提供给声音方向控制部307。还从人物方向确定部301向声音方向控制单元307提供表示所指定的人物的方向的方向信息。声音方向控制部307从方向性扬声器40将朝向所提供的方向信息所示的方向,即由人物方向确定部301确定的人物的方向显示的动态图像的声音朝向该方向发出。由此,被确定了方向的各人物会分别听到不同的声音。
[2-6]通信终端
当人携带通信终端时,多方向显示系统可以基于从通信终端获得的信息来确定人物的方向或选择内容。
图10表示本变形例的多方向显示系统1b所实现的功能结构。多方向显示系统1b具备图像处理装置30b和通信终端50(拍摄装置以及图像处理装置省略图示)。
图像处理装置30b除了图5所示的各部分之外还具备终端信息取得部308。通信终端50具备测位部501和属性存储部502。测位部501测定通信终端50的位置。测位部501例如使用RTK(Real Time Kinematic:实时动态)测位技术,以数cm的误差测定本机的位置。测位部501将表示测定出的位置以及识别通信终端50的终端ID的位置信息发送到图像处理装置30b。
图像处理装置30b的终端信息取得部308取得发送来的位置信息作为与人物携带的通信终端50相关的终端信息。终端信息取得部308将所取得的位置信息提供给人物方向确定部301。人物方向确定部301基于所提供的位置信息所示的位置来确定人物的方向。具体地,人物方向确定部301预先存储显示装置10的位置,并且基于所存储的位置和所提供的位置信息所示的位置来确定人物的方向。
通信终端50的属性存储部502存储作为本终端的所有者的人物的属性。属性是例如人的年龄、性别、爱好或者购物历史等信息,包括当确定个人的爱好或想法时可用的信息。属性存储部502将表示所存储的属性和终端ID的属性信息发送到图像处理装置30b。终端信息取得部308取得发送来的属性信息以作为与人物携带的通信终端50相关的终端信息。
终端信息取得部308如上述那样与方向被确定的人物的通信终端进行无线通信而取得终端信息,将取得的终端信息提供给内容选择部304。内容选择部304选择与被提供的属性信息所示的属性对应的内容。内容选择部304使用将属性与内容种类关联起来的内容表来选择内容。
在内容表中,属性与内容的种类彼此对应,例如如果年龄为10多岁,则内容为动画或娱乐节目,如果年龄为20、30岁,则内容为娱乐节目或连续剧,如果年龄为40、50岁,则内容为连续剧或新闻节目。内容选择部304选择在内容表中与属性信息所示的属性相对应的种类的内容。
通过如上述那样选择内容,整体渲染部306将与从通信终端50取得的终端信息对应的图像朝向携带通信终端50的人物的方向显示。由此,例如,即使当人物在人流中从而从拍摄装置20拍摄到的图像无法识别器面部时,也可以将内容的图像呈现给该人物。
[2-7]至目的地为止的路线
在携带通信终端50行走的人物向某个目的地行走的情况下,多方向显示系统可以提示到该目的地为止的路线。在这种情况下,终端信息取得部308取得表示携带通信终端50的人物的目的地的目的地信息作为终端信息。作为目的地信息,例如在通信终端50管理日程的情况下,使用记载在该日程中的表示最接近当前的预定要去的场所的信息。
此外,例如在由通信终端50进行了店铺的检索的情况下,也可以将表示该店铺的信息用作目的地信息。在检索到多个店铺的情况下,只要将表示最后检索到的店铺或打过电话的店铺、或被阅览最长时间的店铺的信息用作目的地信息即可。在取得目的地信息之后,终端信息取得部308将所获取的目的地信息提供给内容选择部304。
内容选择部304选择表示到所提供的目的地信息所表示的目的地为止的路线的图像作为内容。内容选择部304预先存储表示显示装置10的设置场所的信息,利用地图应用的功能来生成表示从设置场所到目的地的路线的图像,选择所生成的图像作为内容,并将该内容提供给整体渲染部306。
通过如上述那样选择内容,整体渲染部306将表示从显示装置10的位置到从通信终端50取得的终端信息所示的目的地为止的路线的图像作为与终端信息对应的图像进行显示。由此,即使携带通信终端50的人物不指定目的地,也能够提示到该目的地为止的路线。
[2-8]柱状透镜板
在实施例中,各柱状透镜板是多个透镜部22沿X轴方向排列配置而成的,该透镜部22是一部分呈圆筒形状的细长的凸透镜,但不限于此。柱状透镜板可以是由具有如下形状的作为凸透镜的透镜部在X轴方向和Y轴方向平面地排列配置成格子状的透镜板,该形状是一部分呈圆筒状的细长的凸透镜正交地重叠的情况下(理论上称为重叠),重叠的部分的形状。
本变形例的显示器主体在各透镜部的对置区域中具有在X轴方向上排列的N个(N为自然数)像素组和在Y轴方向上排列的M个(M为自然数)像素组。由此,显示器主体除了在X轴方向上排列的像素组之外,还具有在Y轴方向上排列的像素组。整体渲染部306通过以柱状透镜的方式对在Y轴方向上排列的像素组进行渲染,使得本变型例的显示装置针对在X轴方向上确定的每个方向且在Y轴方向上确定的每个方向显示图像。由此,例如对视线较高的大人和视线较低的孩子显示不同的图像。
[2-9]功能结构
在多方向显示系统1中实现图5等所示的功能的方法不限于实施例中所述的方法。例如,如果显示装置10具备相当于图4的记载的硬件结构,则显示装置10也可以实现图5等所示的全部功能。此外,显示装置10可以内置拍摄装置20、并且可以内置方向性扬声器40。
在这些情况下,显示装置10的单体是本发明的“显示系统”的示例。如上所述,根据本发明的“显示系统”可以在一个壳体中包括全部的结构要素,也可以在两个以上的壳体中分别包含结构要素。此外,拍摄装置20可以是显示系统的一部分,也可以是外部结构。
另外,例如在上述变形例中,是由内容选择部304估计了多个人物之间的人际关系,但也可以另外设置进行该估计的功能。此外,例如,由内容选择部304和整体渲染部306进行的动作可以由一个功能来执行。总之,作为多方向显示系统1整体,只要实现图5等所示的功能即可,实现各功能的装置的结构和各功能进行的动作的范围可以自由规定。
[2-10]处理器
在上述各实施例中,处理器是指广义的处理器,包括通用的处理器(例如CPU:Central Processing Unit等),专用的处理器(例如GPU:Graphics Processing Unit(图形处理单元),ASIC:Application Specific Integrated Circuit(专用集成电路),FPGA:Field Programmable Gate Array(现场可编程门阵列),可编程逻辑器件等)。
另外,上述各实施例中的处理器的动作不仅可以由一个处理器完成,也可以由存在于物理上分离的位置的多个处理器协作完成。此外,处理器的各动作的顺序不限于上述各实施方式中所记载的顺序,也可以适当变更。
[2-11]公开的类别
本发明除了显示装置(display device)、拍摄装置和图像处理装置之外,还可以理解为包含这些装置的显示系统。另外,本发明可以理解为是用于实现各个装置执行的处理的信息处理方法,并且可以理解为是用于使控制各装置的计算机发挥作用的程序。该程序可以以存储有该程序的光盘等记录介质的形式提供,也可以以如下方式提供:通过因特网等通信线路下载到计算机中,并能够将其安装而加以利用。
Claims (13)
1.一种显示系统,具有:
多组像素组,它们能够朝向多个方向分别显示不同的图像;以及
处理器,
所述处理器确定能够视觉确认所述像素组的人物的方向,
所述处理器在确定了2个以上的所述方向的情况下,使与所确定的各方向对应的所述像素组朝向该各方向分别显示不同的图像。
2.根据权利要求1所述的显示系统,其中,
所述处理器对所述方向被确定了的人物进行识别,
所述处理器在识别出的人物进行移动从而该人物的方向变化时,使得针对该方向持续显示相同的图像。
3.根据权利要求2所述的显示系统,其中,
在确定不到识别出的人物的所述方向之后再次确定到该方向的情况下,所述处理器将在确定不到识别出的人物的所述方向时显示的图像的后续图像朝向再次确定到的所述方向显示。
4.根据权利要求1所述的显示系统,其中,
所述处理器根据所述方向被确定了的多个人物的该方向的关系来估计该多个人物彼此之间的人际关系,使得向被估计出特定的人际关系的所述多个人物的方向显示相同的图像。
5.根据权利要求4所述的显示系统,其中,
所述处理器使与被估计出所述特定的人际关系的所述多个人物的人数对应的组数的所述像素组显示所述相同的图像。
6.根据权利要求4或5所述的显示系统,其中,
所述处理器使与被估计出所述特定的人际关系的多个人物的密集度对应的组数的所述像素组显示所述相同的图像。
7.根据权利要求1至6中的任意一项所述的显示系统,其中,
所述处理器使与所述方向被确定了的人物的特定部位的动作对应的内容的图像朝向该人物的方向显示。
8.根据权利要求1至7中的任意一项所述的显示系统,其中,
所述处理器在最初确定了所述人物的方向的情况下,朝向该方向显示如下图像,该图像是使动态图像从头开始再现的图像。
9.根据权利要求1至8中的任意一项所述的显示系统,其中,
具有朝向从所述多个方向中选择出的方向发出声音的方向性的扬声器,
所述处理器使朝向被确定的所述人物的方向显示的动态图像的声音从所述扬声器朝向该方向发出。
10.根据权利要求1至9中的任意一项所述的显示系统,其中,
所述处理器与所述方向被确定的人物随身携带的通信终端进行无线通信,朝向所述人物的方向显示与从所述通信终端取得的信息对应的图像。
11.根据权利要求10所述的显示系统,其中,
所述处理器将表示从具有所述像素组的显示装置的位置到从所述通信终端取得的信息所示的目的地为止的路线的图像作为与所述信息对应的图像而显示出。
12.一种显示控制装置,具有:
多组像素组,它们能够朝向多个方向分别显示不同的图像;以及
处理器,
所述处理器确定能够视觉确认所述像素组的人物的方向,
所述处理器在确定了2个以上的所述方向的情况下,使与所确定的各方向对应的所述像素组朝向该各方向分别显示不同的图像。
13.一种计算机可读介质,其存储有使计算机执行处理的程序,该计算机具有处理器和能够朝向多个方向分别显示不同的图像的多组像素组,
所述处理包括:
确定能够视觉确认所述像素组的人物的方向;以及
在确定了2个以上的所述方向的情况下,使与所确定的各方向对应的所述像素组朝向该各方向分别显示不同的图像。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020037188A JP7484233B2 (ja) | 2020-03-04 | 表示システム、表示制御装置及びプログラム | |
JP2020-037188 | 2020-03-04 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113362744A true CN113362744A (zh) | 2021-09-07 |
Family
ID=77524474
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010789621.8A Pending CN113362744A (zh) | 2020-03-04 | 2020-08-07 | 显示系统、显示控制装置及计算机可读介质 |
Country Status (2)
Country | Link |
---|---|
US (1) | US20210281823A1 (zh) |
CN (1) | CN113362744A (zh) |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7965365B2 (en) * | 2004-09-03 | 2011-06-21 | Nec Lcd Technologies, Ltd | Image display device, portable terminal, display panel, and lens |
KR100877895B1 (ko) * | 2004-10-27 | 2009-01-12 | 후지쓰 텐 가부시키가이샤 | 표시장치 |
CN101409063B (zh) * | 2004-11-30 | 2012-05-09 | 富士通天株式会社 | 显示装置及显示方法 |
EP1708010A1 (en) * | 2005-03-28 | 2006-10-04 | Kabushiki Kaisha Toshiba | Image display apparatus |
WO2012012555A1 (en) * | 2010-07-20 | 2012-01-26 | SET Corporation | Methods and systems for audience digital monitoring |
JP5710330B2 (ja) * | 2011-03-25 | 2015-04-30 | 株式会社ジャパンディスプレイ | 表示装置 |
CN103021292B (zh) * | 2013-01-11 | 2016-05-04 | 深圳市维尚境界显示技术有限公司 | 一种多视图led显示装置及其系统 |
EP3097689B1 (en) * | 2014-01-23 | 2019-12-25 | Telefonaktiebolaget LM Ericsson (publ) | Multi-view display control for channel selection |
CA2978717C (en) * | 2015-03-03 | 2023-06-20 | Misapplied Sciences, Inc. | System and method for displaying location dependent content |
US10613699B2 (en) * | 2015-06-11 | 2020-04-07 | Misapplied Sciences, Inc. | Multi-view display cueing, prompting, and previewing |
US10353535B2 (en) * | 2016-10-21 | 2019-07-16 | Misapplied Sciences, Inc. | Multi-view display viewing zone layout and content assignment |
KR102597593B1 (ko) * | 2016-11-30 | 2023-11-01 | 엘지디스플레이 주식회사 | 무안경 입체 영상 표시장치 |
US10565616B2 (en) * | 2017-07-13 | 2020-02-18 | Misapplied Sciences, Inc. | Multi-view advertising system and method |
US11025892B1 (en) * | 2018-04-04 | 2021-06-01 | James Andrew Aman | System and method for simultaneously providing public and private images |
-
2020
- 2020-07-07 US US16/922,668 patent/US20210281823A1/en active Pending
- 2020-08-07 CN CN202010789621.8A patent/CN113362744A/zh active Pending
Also Published As
Publication number | Publication date |
---|---|
JP2021141424A (ja) | 2021-09-16 |
US20210281823A1 (en) | 2021-09-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10573062B2 (en) | Method and system for providing a virtual space | |
US8711198B2 (en) | Video conference | |
JP2023509455A (ja) | 輸送ハブ情報システム | |
US11231587B2 (en) | Information processing apparatus and image display method | |
JP2017162309A (ja) | ヘッドマウントディスプレイシステムを制御するための方法、および、プログラム | |
JP6462059B1 (ja) | 情報処理方法、情報処理プログラム、情報処理システム、および情報処理装置 | |
CN108292489A (zh) | 信息处理装置和图像生成方法 | |
CN105324811A (zh) | 语音到文本转换 | |
CN110192386B (zh) | 信息处理设备和信息处理方法 | |
CN108293103A (zh) | 活跃发言者位置检测 | |
CN114365197A (zh) | 在具有多个物理参与者的环境中放置虚拟内容 | |
CN101180653A (zh) | 用于三维呈现的方法和设备 | |
CN105659200A (zh) | 用于显示图形用户界面的方法、设备和系统 | |
CN108174152A (zh) | 一种目标监控方法及目标监控系统 | |
US10634918B2 (en) | Internal edge verification | |
JP2023551727A (ja) | 物理キーボード追跡 | |
US10488949B2 (en) | Visual-field information collection method and system for executing the visual-field information collection method | |
US20220066541A1 (en) | Virtual reality system with posture control | |
US10955911B2 (en) | Gazed virtual object identification module, a system for implementing gaze translucency, and a related method | |
JP2012108793A (ja) | 情報表示システム、装置、方法及びプログラム | |
US11004273B2 (en) | Information processing device and information processing method | |
CN113362744A (zh) | 显示系统、显示控制装置及计算机可读介质 | |
JP2011192220A (ja) | 同一人判定装置、同一人判定方法および同一人判定プログラム | |
JP7484233B2 (ja) | 表示システム、表示制御装置及びプログラム | |
CN113365044A (zh) | 显示系统、显示控制装置以及计算机可读介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |