CN117999791A - 信息处理系统和信息处理方法 - Google Patents

信息处理系统和信息处理方法 Download PDF

Info

Publication number
CN117999791A
CN117999791A CN202280063765.2A CN202280063765A CN117999791A CN 117999791 A CN117999791 A CN 117999791A CN 202280063765 A CN202280063765 A CN 202280063765A CN 117999791 A CN117999791 A CN 117999791A
Authority
CN
China
Prior art keywords
unit
display
imaging
refresh rate
signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202280063765.2A
Other languages
English (en)
Inventor
樱井久夫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Group Corp
Original Assignee
Sony Group Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Group Corp filed Critical Sony Group Corp
Publication of CN117999791A publication Critical patent/CN117999791A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/22Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources
    • G09G3/30Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources using electroluminescent panels
    • G09G3/32Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources using electroluminescent panels semiconductive, e.g. using light-emitting diodes [LED]
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/12Synchronisation between the display unit and other units, e.g. other display units, video-disc players
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/73Circuitry for compensating brightness variation in the scene by influencing the exposure time
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/745Detection of flicker frequency or suppression of flicker wherein the flicker is caused by illumination, e.g. due to fluorescent tube illumination or pulsed LED illumination
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/04Changes in size, position or resolution of an image
    • G09G2340/0407Resolution change, inclusive of the use of different resolutions for different screen areas
    • G09G2340/0435Change or adaptation of the frame rate of the video stream

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Signal Processing (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)
  • Studio Devices (AREA)

Abstract

本技术涉及能够防止在对显示器进行成像时出现黑带的信息处理系统和信息处理方法。在本发明中,控制单元生成用于驱动像素的刷新率命令,使得视频墙的发光周期与用于对视频墙进行成像的摄像机的曝光时间对应,并输出刷新率命令。例如,本技术可应用于用于虚拟产品的再成像系统,其中,在LED显示器上显示的图像被再成像为背景,以及应用于构成再成像系统的PC、视频墙控制器、视频墙、摄像机等。

Description

信息处理系统和信息处理方法
技术领域
本技术涉及信息处理系统和信息处理方法,并且尤其涉及能够防止在对显示器进行成像的情况下出现黑带的信息处理系统和信息处理方法。
背景技术
诸如发光二极管(LED)显示器的直视显示器的市场近来已经增长。例如,其中诸如风景的背景显示在LED显示器上以在内容生产地点再现并且背景和对象由相机成像(再成像)的虚拟生产已经迅速增长。
在这种虚拟生产中,当由相机通过滚动快门系统的图像传感器执行再成像时,由于相机的曝光时间与LED显示器的发光周期之间的非对应关系,在再成像的视频中可能出现为带状亮度不均匀的黑带。黑带是具有比其他区域的亮度低的带状区域,并且黑带的颜色是各种浓度的黑色。
为了降低黑带的可见性,已经设计了缩短LED显示器的发光周期,即,增加在曝光周期中LED发光的次数(例如,参照专利文献1)。
引用列表
专利文献
专利文献1:国际公开2018/164105
发明内容
本发明要解决的问题
然而,在专利文献1中公开的发明中,能够降低黑带的可见性,但是难以防止黑带自身的出现。
鉴于这种情况做出本技术,并且其目的是防止在显示器成像的情况下出现黑带。
问题的解决方案
根据本技术的一个方面的信息处理系统是包括控制单元的信息处理系统,控制单元生成控制信号以驱动像素使得显示器的发光周期和用于对显示器成像的成像单元的曝光时间彼此对应,并且输出控制信号。
根据本技术的一个方面的信息处理方法是一种信息处理方法,包括生成步骤和输出步骤,生成步骤以显示器的发光周期和用于对显示器成像的成像单元的曝光时间彼此对应的方式驱动像素,输出步骤由信息处理系统输出控制信号。
在本技术的一个方面,生成用于以显示器的发光周期和用于使显示器成像的成像单元的曝光时间彼此对应的方式驱动像素的控制信号,并且输出控制信号。
注意,信息处理系统可以是独立设备、合并在另一设备中的模块,并且可以包括多个设备。
通过允许计算机执行程序,可以实现根据本技术的一个方面的信息处理系统。
此外,为了实现根据本技术的一个方面的信息处理系统,可以通过经由传输介质传输或者通过记录在记录介质上来提供由计算机执行的程序。
附图说明
图1是示出应用本技术的再成像系统的第一实施方式的概要的示图。
图2是示出由图1中的摄像机再成像的视频的视图。
图3是示出图1中的再成像系统的配置示例的示图。
图4是示出图3中的摄像机的配置示例的框图。
图5是示出图3中的PC的硬件的配置示例的框图。
图6是示出图5中的CPU的功能配置示例的框图。
图7是示出视频墙控制器的配置示例的框图。
图8是示出显示单元的详细配置示例的框图。
图9是示出LED阵列的配置示例的示图。
图10是示出LED阵列的发光操作的示图。
图11是示出LED阵列的发光周期的示图。
图12是示出黑带的出现原因的示图。
图13是示出出现黑带的再成像的视频的示例的视图。
图14是示出通过控制单元对刷新率的控制的示图。
图15是示出图4中的摄像机的成像处理的流程图。
图16是示出刷新率控制处理的流程图。
图17是示出视频信号处理的流程图。
图18是示出控制信号生成处理的流程图。
图19是示出显示处理的流程图。
图20是示出通过传统方法减小黑带的可见性的再成像系统的示例的示图。
图21是示出出现黑带的再成像的视频的示例的视图。
图22是示出应用本技术的再成像系统的第二实施方式的配置示例的示图。
图23是示出图22中的摄像机的配置示例的框图。
图24是示出图23的设置单元的曝光时间的设置的示图。
图25是示出图23中的摄像机的成像处理的流程图。
图26是示出刷新率传输处理的流程图。
具体实施方式
在下文中,描述用于执行本技术的模式(在下文中,称之为实施方式)。注意,将按照以下顺序进行描述。
1.第一实施方式(控制刷新率的再成像系统的配置示例)
2.第二实施方式(控制曝光时间的再成像系统的配置示例)
另外,在以下的说明所参照的附图中,对相同或类似的部分标注相同或类似的标号。
<第一实施方式>
<再成像系统的概要>
图1是示出了包括应用本技术的信息处理系统的再成像系统的第一实施方式的概要的示图。
如图1所示,例如,再成像系统10是用于虚拟生产的系统,并且包括摄像机11和视频墙12。摄像者21使用摄像机11对作为被摄体的摩托车24逆着视频23再成像,该视频23作为在安装在工作室22中的视频墙12上显示的背景。
<再成像的视频的示例>
图2是示出通过图1中的摄像机11再成像的视频的视图。
如图2所示,由摄像机11再成像的视频30是如同摩托车24存在于视频23被成像的位置中的视频。以这种方式,摄像者21可以通过使用再成像系统10执行再成像来成像视频30,仿佛摩托车24存在于工作室22中的视频23被成像的位置。
<再成像系统的配置示例>
图3是示出了再成像系统10的配置示例的示图。
如图3所示,除了摄像机11和视频墙12之外,再成像系统10(信息处理系统)包括视频服务器61、个人计算机(PC)62和视频墙控制器63。
摄像机11是通过滚动快门系统执行成像的成像装置。摄像机11从摄像者21接收输入,并且设置曝光时间(打开角度)等。另外,摄像机11根据来自摄像者21的成像开始指令,以所设置的曝光时间成像作为背景的视频墙12所显示的视频。应注意,在再成像系统10中,可以使用类似于摄像机11的多个摄像机。
视频墙12(显示器)是大尺寸LED显示器,其中n(n是正整数)个显示单元(机柜)41-1至41-n布置成瓦片形状。图3示出了n是6×24的情况。应注意,在不需要彼此区分显示单元41-1至41-n的情况下,在下文中它们被简称为显示单元41。
显示单元41包括m(m是正整数)个LED阵列51-1至51-m,在每一个LED阵列中,对应于相应像素的LED(未示出)布置成布置成瓦片形状的矩阵(二维阵列)。图3示出了m为4x3的情况。注意,在不需要将LED阵列51-1至51-m彼此区分的情况下,在下文中将它们简称为LED阵列51。
视频墙12的每一个显示单元41连接到视频墙控制器63。视频墙12基于以帧为单位的视频信号和控制从视频墙控制器63提供的视频墙12的显示的显示控制信号,显示与以帧为单位的视频信号对应的视频。具体地,提供给每一个显示单元41的视频信号是对应于显示单元41在视频墙12上的位置的视频信号。当每一个显示单元41根据显示控制信号基于视频信号显示视频时,一帧的视频显示在整个视频墙12上。
视频服务器61包括例如服务器计算机等,并且以视频内容等的帧为单位将视频信号提供至视频墙控制器63。以帧为单位的视频信号可从记录介质(诸如PC和蓝光盘(BD)(注册商标))代替视频服务器61提供到视频墙控制器63。
PC 62(信息处理系统)是通用计算机。PC 62通过产生控制视频墙控制器63的控制命令并将其传输至视频墙控制器63来控制视频墙控制器63。
例如,PC 62获取从摄像机11传输的曝光时间。PC 62以这样的方式确定视频墙12的刷新率:曝光时间对应于视频墙12的LED的发光周期。注意,刷新率是每秒LED发光的次数。PC 62通过向视频墙控制器63传输刷新率命令来控制刷新率,该刷新率命令是指示所确定的刷新率的控制命令。
视频墙控制器63以从视频服务器61提供的帧为单位对视频信号执行预定信号处理。视频墙控制器63根据每一个显示单元41的位置以作为结果获得的帧为单位将视频信号分成n片,并且将其传输至每一个显示单元41。视频墙控制器63还基于从PC 62提供的刷新率命令将指示由刷新率命令指示的刷新率等的显示控制信号传输至每一个显示单元41。
在如上所述配置的再成像系统10中,各个设备通过GenLock信号进行帧同步。因此,例如,摄像机11中的每帧的曝光开始时间与视频墙12中的每帧的显示开始时间同步。
注意,视频墙控制器63和视频墙12可以一体形成,或者可以集成到显示装置中。此外,PC 62、视频墙控制器63和视频墙12可以一体形成,或者可以集成到显示装置中。
<摄像机的配置示例>
图4是示出图3中的摄像机11的配置示例的框图。
图4中的摄像机11包括输入单元81、设置单元82、驱动单元83、光学系统84、成像单元85、信号处理单元86、监视器87、视频输出单元88以及存储器89。
输入单元81从摄像者21接收输入并且生成表示输入内容的输入信号。例如,摄像者21操作输入单元81以考虑到当将光(的强度)转换为成像单元85中的信号电荷(的量)时的动态范围的限制而输入合适的曝光时间。在这种情况下,输入单元81生成表示曝光时间的输入信号并将其提供至设置单元82。在摄像者21操作输入单元81以输入成像开始指令的情况下,输入单元81生成表示成像开始的输入信号并且将其供应至驱动单元83。
设置单元82基于来自输入单元81的输入信号,设置作为诸如由输入信号表示的曝光时间的关于成像的各种信息的成像信息。设置单元82将成像信息提供给驱动单元83,通过同轴电缆等线将成像信息中的曝光时间传输至PC 62。
驱动单元83根据来自设置单元82的成像信息和来自输入单元81的成像开始指令等,生成驱动信号,该驱动信号是对以矩阵状排列的各像素单元进行驱动的控制信号,并输出至成像单元85。
光学系统84包括一个或多个透镜,并且将来自对象等的光(入射光)引导至成像单元85,并且在成像单元85的光接收表面上形成图像。
成像单元85包括互补金属氧化物半导体(CMOS)图像传感器等。成像单元85根据从驱动单元83提供的驱动信号驱动每一个像素单元,并且通过滚动快门系统进行成像。具体地,根据从驱动单元83提供的驱动信号,成像单元85以行为单位输出与积累在每一个像素单元中的电荷对应的电信号。然后,成像单元85开始积累与经由光学系统84以行为单位入射在每一个像素单元上的光对应的电荷。根据从驱动单元83提供的驱动信号,成像单元85以行为单位读取与在由设置单元82设置的曝光时间内累积的电荷对应的电信号,并且以列为单位将其传输给信号处理单元86。如上所述,成像单元85以由设置单元82设置的曝光时间进行成像。
信号处理单元86根据从成像单元85传输的电荷对电信号执行各条信号处理,并且以预定数字视频格式的帧为单位将其转换为视频信号。以帧为单位的视频信号被提供给监视器87和视频输出单元88,或者被提供给存储器89以被存储(记录)。监视器87根据从信号处理单元86供给的帧单位的视频信号,以帧单位显示视频。视频输出单元88将以从信号处理单元86提供的帧为单位的视频信号输出至摄像机11的外部。
<PC的配置示例>
图5是示出图3中的PC 62的硬件的配置示例的框图。
在图5的PC 62中,中央处理单元(CPU)101、只读存储器(ROM)102和随机存取存储器(RAM)103通过总线104彼此相互连接。
输入/输出接口105进一步连接至总线104。输入单元106、输出单元107、存储单元108、通信单元109和驱动器110连接至输入/输出接口105。
输入单元106包括键盘、鼠标、麦克风等。输出单元107包括显示器、扬声器等。存储单元108包括硬盘、非易失性存储器等。通信单元109包括网络接口等。驱动器110驱动诸如磁盘、光盘、磁光盘或半导体存储器的可移除介质111。
在如上所述配置的PC 62中,例如,CPU 101经由输入/输出接口105和总线104将存储在存储单元108中的程序加载到RAM 103中并执行该程序,由此执行各种处理。例如,CPU101进行生成刷新率命令并控制通信单元109向视频墙控制器63传输刷新率的刷新率控制处理。
例如,由PC 62(CPU 101)执行的程序可以记录在作为封装介质等的可移动介质111上以提供。此外,可经由诸如局域网、因特网、或者数字卫星广播等有线或无线传输介质提供程序。
在PC 62中,通过将可移除介质111安装在驱动器110上,可以经由输入/输出接口105将程序安装在存储单元108中。此外,程序可经由有线或无线传输介质由通信单元109接收并安装在存储单元108中。此外,程序可以预先安装在ROM 102或存储单元108中。
应注意,通过PC 62执行的程序可以是其中按照本说明书中描述的顺序按时间序列执行多个处理的程序,或者可以是其中并行或在诸如当进行呼叫时的所需定时执行多个处理的程序。
<刷新率控制单元的配置示例>
图6是示出图5的CPU 101进行刷新率控制处理的情况下的CPU 101的功能配置示例的框图。
在执行刷新率控制处理的情况下,CPU 101用作图6中的刷新率控制单元130。刷新率控制单元130包括获取单元131、控制单元132和传输控制单元133。
获取单元131获取从摄像机11的设置单元82传输并且经由通信单元109接收的曝光时间。获取单元131将曝光时间提供给控制单元132。
控制单元132以从获取单元131供应的曝光时间对应于视频墙12的LED的发光周期的方式确定视频墙12的刷新率。控制单元132通过产生刷新率命令来控制刷新率,刷新率命令是指示刷新率的控制命令(控制信号)。控制单元132将刷新率命令输出至传输控制单元133。
传输控制单元133将从控制单元132提供的刷新率命令提供给通信单元109,并指示通信单元109将刷新率命令传输给视频墙控制器63。因此,通信单元109经由诸如局域网(LAN)电缆的布线将刷新率命令传输(输出)至视频墙控制器63。
<视频墙控制器的配置示例>
图7是示出图3中的视频墙控制器63的配置示例的框图。
视频墙控制器63包括LAN端子151、高清多媒体接口(HDMI)(注册商标)端子152、显示端口(DP)端子153、数字视频接口(DVI)端子154、网络接口(IF)155、微处理器(MPU)156、信号输入IF 157、信号处理单元158、动态随机存取存储器(DRAM)159、分配单元160和信号输出IF161-1至161-n。
LAN端子151是连接到PC 62的通信单元109的LAN电缆所连接的LAN电缆的连接端子。LAN端子151经由LAN电缆接收诸如刷新率命令的控制命令,并且经由网络IF 155将其供应至MPU 156。
MPU 156根据经由网络IF 155提供的刷新率命令来生成显示控制信号。此外,MPU156根据作为与经由网络IF 155提供的视频信号的调整有关的控制命令的视频调整命令,生成发出用于调整视频信号的指令的视频调整信号。MPU 156将显示控制信号和调节信号提供给信号处理单元158。
HDMI端子152、DP端子153和DVI端子154都是视频信号的输入端子。在图7的示例中,视频服务器61和HDMI端子152彼此连接,并且从视频服务器61提供的以帧为单位的视频信号被输入到HDMI端子152作为要由HDMI端子152获取的输入单元。输入到HDMI端子152的以帧为单位的视频信号被提供给信号输入IF 157。
注意,尽管在图7的示例中视频服务器61和HDMI端子152彼此连接,但是HDMI端子152、DP端子153和DVI端子154仅具有不同的标准并且基本上具有类似的功能,并且因此根据需要选择它们中的任一个来连接。
信号输入IF 157将从HDMI端子152提供的以帧为单位的视频信号转换为以预定视频格式的帧为单位的视频信号,并且将其提供给信号处理单元158。
信号处理单元158基于从MPU 156提供的视频调整信号,对经由信号输入IF 157提供的以帧为单位的视频信号执行整个视频墙12所需的信号处理,同时根据需要与DRAM 159交换数据。具体地,信号处理单元158基于视频调整信号来调整视频信号的色温、对比度、亮度等。信号处理单元158以帧为单位将调整的视频信号和从MPU 156提供的显示控制信号提供至分配单元160。
分配单元160将视频信号以帧为单位从信号处理单元158提供给分别连接到显示单元41-1至41-n的信号输出IF161-1至161-n。具体地,分配单元160(划分单元)根据每一个显示单元41的位置将视频信号以帧为单位划分为n片,并将其提供给连接到显示单元41的信号输出IF 161-1至161-n中的任一个。注意,在不需要区分信号输出IF 161-1至161-n的情况下,在下文中将它们简称为信号输出IF 161。分配单元160将从信号处理单元158提供的显示控制信号提供给每一个信号输出IF 161。
信号输出IF 161(输出单元)以帧为单位将视频信号和从分配单元160提供的显示控制信号传输至连接到信号输出IF 161的显示单元41。用于该传输的传输介质可以是有线的,诸如LAN电缆,或者可以是无线的。
注意,这里假定从PC 62自动传输控制命令,但可以响应于来自视频墙控制器63的请求而传输控制命令。
<显示单元的详细配置示例>
图8是示出显示单元41的详细配置示例的框图。
如图8所示,显示单元41包括驱动器控制单元191和LED块192。
驱动器控制单元191包括信号输入IF 211、信号处理单元212、DRAM 213以及信号输出IF 214-1至214-m。
信号输入IF 211接收以帧为单位的视频信号和从视频墙控制器63传输的显示控制信号,以提供给信号处理单元212。
信号处理单元212根据需要在与DRAM 213交换数据的同时,以从信号输入IF 211提供的帧为单位对视频信号执行其自身的显示单元41单独需要的信号处理。具体地,信号处理单元212使用存储在DRAM 213中的颜色矩阵查找表(LUT)等以帧为单位对视频信号执行其自身的显示单元41所需的颜色和亮度的校正。信号处理单元212根据每一个LED阵列51在其自身的显示单元41上的位置,将在信号处理之后的以帧为单位的视频信号分成m个片段。对于每一个LED阵列51,信号处理单元212基于在信号处理之后以帧为单位的视频信号生成用于以帧为单位设置形成LED阵列51的每一个LED的发光强度的显示信号。
分别与LED阵列51-1至51-m对应的信号输出IF 214-1至214-m连接到信号处理单元212。另外,在不需要区分信号输出IF 214-1至214-m的情况下,以下将它们简称为信号输出IF 214。信号处理单元212将每一个LED阵列51的显示信号提供至与LED阵列51对应的信号输出IF 214。信号处理单元212将从信号输入IF 211提供的显示控制信号提供给每一个信号输出IF 214。
信号输出IF 214将从信号处理单元212提供的显示信号和显示控制信号传输至LED块192。
LED块192包括LED驱动器221-1至221-m和LED阵列51-1至51-m。
LED驱动器221-1至221-m分别连接到驱动器控制单元191的信号输出IF 214-1至214-m,并且分别连接到LED阵列51-1至51-m。另外,在不需要对LED驱动器221-1至221-m进行区分的情况下,以下将它们简称为LED驱动器221。
LED驱动器221通过基于显示控制信号和从连接至LED驱动器221的信号输出IF214传输的显示信号对形成连接至LED驱动器221的LED阵列51的每一个LED的发光执行脉冲宽度调制(PWM)控制来驱动每一个LED 241。具体地,LED驱动器221产生作为数字信号的PWM信号,使得LED阵列51的每一个LED在一秒内以基于与LED对应的显示信号的强度以由显示控制信号指示的刷新率发光,并且将PWM信号提供给每一个LED。结果,LED阵列51以从视频服务器61输出的帧为单位显示与视频信号对应的视频中的与LED阵列51的视频墙12上的位置对应的视频。
<LED阵列的配置示例>
图9是示出图8中的LED阵列51的配置示例的示图。
如图9所示,LED阵列51的发光由无源矩阵驱动系统控制。
具体地,LED阵列51包括p×p(p为正数)个LED 241、亮度控制布线(sig线)251以及行选择布线(扫描线)252。LED 241是常用的阴极型LED。p×p个LED 241布置成其中p个LED布置在行方向(纵向方向)上并且p个LED布置在列方向(横向方向)上的矩阵。在图9的示例中,在行方向上的LED 241的数量和在列方向上的LED 241的数量是相同的p,但是在行方向上的LED 241的数量可以不同于在列方向上的LED 241的数量。
亮度控制布线251按每列的LED 241设置,相同的亮度控制布线251与每列的LED241连接。行选择布线252按每列LED 241设置,与每行的LED 241连接相同的行选择布线252。
基于从信号输出IF 214提供的显示控制信号,LED驱动器221控制每行中的LED241的发光定时,使得LED 241在对应于由显示控制信号指示的刷新率的发光周期中为每行发光。
具体地,LED驱动器221以LED 241从上面一行开始以行为单位依次发光并且以与显示控制信号所指示的刷新率对应的间隔执行发光的方式,执行参考时钟的频率的调整或直到下一行的发光的间隔的调整中的至少一个。因此,LED驱动器221在各行的LED 241的发光定时,对与该行对应的行选择布线252施加规定的固定电位。注意,预定的固定电位典型地是但不限于GND电位(0V电位)。
LED驱动器221还基于从信号输出IF 214提供的以帧为单位的显示信号,在每行的LED 241的发光定时,将该行的每一个LED 241的显示信号输入至与LED 241的列对应的亮度控制布线251。
如上所述,在LED阵列51中,在每行的LED 241的发光定时,该行的每一个LED 241基于LED 241的显示信号发出亮度的光。因此,在LED阵列51中,对应于视频信号的视频按照从上一行开始的顺序以行为单位显示,并且该视频以一秒的刷新率被刷新(更新)。
<LED阵列的发光操作的描述>
图10是示出LED阵列51的发光操作的示图。
在图10中的示例中,LED阵列51包括15×15个LED 241。
如图10的A中所示,在LED阵列51中,首先,在LED驱动器221的控制下,从顶部开始的第一行中的LED 241发射具有与显示信号对应的亮度的光。接下来,如图10的B中所示,在来自顶部的第二行中的LED 241在LED驱动器221的控制下发射具有与显示信号对应的亮度的光。此后,类似地,发光的LED 241的行依次下降,并且如图10的C所示,最下行中的LED241在LED驱动器221的控制下发射具有与显示信号对应的亮度的光。因此,LED阵列51显示与一帧的视频信号对应的视频中LED阵列51的视频墙12上的位置对应的视频。在本说明书中,这被称为一次扫描。
在第一扫描之后,通过LED驱动器221的控制,第一行中的LED 241从顶部再次发射具有对应于显示信号的亮度的光,如图10的A中所示。此后,类似地重复以行为单位的LED241的发光,并且在一秒内以刷新率执行扫描。例如,在由显示控制信号指示的刷新率是3840Hz并且视频信号的帧速率是60p(在逐步的系统中是60帧/秒,即,60Hz)的情况下,在单帧区段中的扫描次数是64(=3840Hz/60Hz)。由于刷新率是在1秒内执行的扫描的次数,因此也可以称为扫描速度。
<发光周期的描述>
图11是示出LED阵列51的发光周期的示图。
在图11的示例中,LED阵列51包括15×15个LED 241。在图11的曲线图中,从视频墙12的显示开始所经过的时间沿横坐标绘制,并且LED阵列51的行沿纵坐标绘制。在图11的曲线图中,从LED阵列51的顶部起的第i行被表示为行#i。图11的曲线图中的矩形指示对应于纵向方向上的位置的行中的LED 241在对应于矩形的横向方向上的位置的经过时间发射具有与显示信号对应的亮度的光。
如图11所示,在LED阵列51中,从上一行中的LED 241按顺序以行为单位执行发光。当完成所有行#1至#15的LED 241的发光时,即,当完成一次扫描时,开始下一扫描。一次扫描的周期是LED 241的发光周期,并且是刷新率的倒数。例如,在刷新率为3840Hz的情况下,发光周期为1/3840秒。
<黑带出现的原因的描述>
图12是示出在曝光时间不是LED的发光周期的整数倍的情况下在通过再成像系统再成像的视频中出现黑带的原因的示图。
在图12中,从显示开始起的经过时间沿横坐标绘制,LED的行沿纵坐标绘制,并且在图中的上部位置指示LED的行的位置较高。在图12的示例中,形成LED阵列的LED的行数是15,并且示出了沿行方向(纵向方向)布置的三个LED阵列。在图12中,具有图案的四边形表示在与四边形的长度方向上的位置对应的行中的LED在与四边形的横向方向上的位置对应的经过时间时发光。对于包括以与四边形对应的行为单位的LED的每一个LED阵列,四边形的图案不同。这与稍后将描述的图14相似。
如图12中所示,首先,从每一个LED阵列的顶部开始的第一行中的LED发光。接下来,从每一个LED阵列的顶部起的第二行中的LED发光。此后,类似地,LED从每一个LED阵列的上一行按顺序以行为单位发光,并且当最后一行的LED发光时,每一个LED阵列结束第一扫描。当每一个LED阵列结束第一扫描时,这开始第二扫描。
此后,每一个LED阵列类似地重复扫描,并且每一个LED阵列在单帧区段内执行对应于刷新率的次数的扫描。在图12的示例中,刷新率是帧速率的四倍,并且在单帧区段内执行四次扫描。即,在图12的示例中,在帧速率是60p的情况下,刷新率是240Hz。
相反,摄像机在预定的曝光时间通过滚动快门系统执行成像。因此,从上面一行开始依次进行每行的LED的光曝光,每行的曝光开始时刻不同。应注意,因为再成像系统的每一个设备执行帧同步,所以一个帧的曝光开始时间和显示开始时间同步。
在这种情况下,当摄像机的曝光时间与LED的发光周期(扫描周期)彼此不对应时,即,当曝光时间不是LED的发光周期的整数倍时,出现曝光周期中的扫描次数(LED的发光次数)在每行中不均匀的情况。在图12的示例中,在曝光周期在矩形261的范围内的行中的曝光周期中,LED发光仅一次,但是在曝光周期在矩形261的范围之外的行中的曝光周期中,LED发光两次。因此,曝光时段处于由摄像机再成像的矩形261的范围内的行中的像素的亮度低于曝光时段处于矩形261的范围之外的行中的像素的亮度。结果,在由摄像机再成像的视频中,曝光时段在矩形261的范围内的行的视频变为黑带。
<黑带出现的再成像视频的示例>
图13是示出由于参见图12描述的原因而出现黑带的再成像的视频的示例的视图。
在图13中的示例中,刷新率是3840Hz。在图13中的示例中,摄像机将保持乒乓球拍的人作为被摄体再成像,在视频墙上显示的视频作为背景。在作为结果获得的再成像的视频280中,由于参见图12描述的原因,水平黑带281可能出现为伪影。在虚拟生产中,在再成像的视频中的成像部位处不存在的黑带281的出现劣化了再成像的视频的质量。
<刷新率控制的描述>
图14是示出通过图6中的控制单元132控制刷新率的简图。
如图14所示,控制单元132确定刷新率,使得摄像机11的曝光时间对应于发光周期。具体地,例如,控制单元132使曝光开始时间和扫描开始时间同步,并控制刷新率使得曝光时间变为发光周期的整数倍。
在图14的示例中,控制单元132将刷新率控制为帧速率的4.6倍,使得曝光时间为发光周期的两倍。因此,与图12中的情况相比,扫描速度增加,并且在所有行中在曝光时段中执行两次扫描。因此,在以通过摄像机11再成像的帧为单位的视频信号中,不出现具有低亮度的像素行,并且不出现黑带。
在图14的示例中,刷新率被控制为与图12中的示例相比增加,但是刷新率仅需要被控制为使得曝光时间和发光周期彼此对应,并且与图12中的示例相比可以被控制为减少。
<成像处理的描述>
图15是示出摄像机11的成像处理的流程图。例如,在摄像者21操作输入单元81以输入成像开始指令时,开始该成像处理。
在图15的步骤S10中,输入单元81从摄像者21接收成像开始指令的输入,并且生成表示成像开始的输入信号并且将该输入信号供应至驱动单元83。
在步骤S11中,设置单元82将设置的成像信息的曝光时间传输至PC 62并且将成像信息提供至驱动单元83。摄像者21通过操作输入单元81来输入成像信息,并且通过设置单元82根据输入根据输入单元81生成的输入信号来设置成像信息。
在步骤S12中,驱动单元83根据在步骤S11中从设置单元82提供的成像信息生成驱动信号,并将其提供给成像单元85。
在步骤S13,成像单元85根据在步骤S12从驱动单元83提供的驱动信号通过滚动快门系统执行成像,并且将在每一个像素单元中在曝光时间内累积的电荷传输给信号处理单元86。
在步骤S14中,信号处理单元86对从成像单元85传输的电荷信号执行各条信号处理,并且以预定数字视频格式的帧为单位将其转换为视频信号。
在步骤S15中,信号处理单元86将作为在步骤S14中的处理结果获得的以帧为单位的视频信号提供至监视器87,从而以与视频信号对应的以帧为单位的视频显示视频。此时,信号处理单元86还根据需要将作为步骤S14处的处理结果而获得的以帧为单位的视频信号提供至视频输出单元88,并且允许视频信号输出至摄像机11的外部。
在步骤S16,信号处理单元86将作为步骤S14的处理结果而获得的以帧为单位的视频信号供应至存储器89,从而将视频信号存储在存储器89中。
在步骤S17中,输入单元81判断是否接收到来自摄像者21的成像结束指示。在步骤S17中确定还没有接收到成像结束指令的输入的情况下,处理进入步骤S18。
在步骤S18中,设置单元82判定曝光时间是否变化。具体地,设置单元82确定是否从输入单元81提供表示新曝光时间的输入信号。在从输入单元81提供表示新曝光时间的输入信号的情况下,在步骤S18,设置单元82确定曝光时间改变。然后,设置单元82将曝光时间设置为新的曝光时间,返回到步骤S11,重复以后的处理。
相反,在没有从输入单元81提供表示新曝光时间的输入信号的情况下,在步骤S18中,设置单元82确定曝光时间没有改变。然后,设置单元82将处理返回到步骤S13,重复以后的处理。
在步骤S17中确定接收到成像结束指令的输入的情况下,结束成像处理。
<刷新率控制处理的描述>
图16是示出图6中的刷新率控制单元130的刷新率控制处理的流程图。例如,当通过图15中的步骤S11的处理从摄像机11的设置单元82传输曝光时间时,开始该刷新率控制处理。
在图16的步骤S31中,获取单元131获取从设置单元82传输并且经由通信单元109接收的曝光时间,并且将曝光时间提供给控制单元132。
在步骤S32,控制单元132基于在步骤S31从获取单元131供应的曝光时间以这样的方式确定视频墙12的刷新率:曝光时间对应于LED 241的发光周期。控制单元132产生指示刷新率的刷新率命令,并且将指示刷新率的刷新率命令提供给传输控制单元133。
在步骤S33,传输控制单元133将在步骤S32从控制单元132提供的刷新率命令提供给通信单元109,并指示通信单元109将刷新率命令传输给视频墙控制器63,从而允许将刷新率命令传输给视频墙控制器63。然后,处理结束。
<视频信号处理的描述>
图17是示出视频墙控制器63的视频信号处理的流程图。例如,当从视频服务器61传输以帧为单位的视频信号时,开始该视频信号处理。
在图17的步骤S51中,视频墙控制器63的信号输入IF 157经由HDMI端子152接收从视频服务器61传输的以帧为单位的视频信号。
在步骤S52,信号输入IF 157将在步骤S51提供的以帧为单位的视频信号转换为以预定视频格式的帧为单位的视频信号,并且将其提供给信号处理单元158。
在步骤S53,MPU 156确定是否经由LAN端子151和网络IF 155从PC 62的通信单元109接收到视频调整命令。在步骤S53中确定还没有接收到视频调整命令的情况下,MPU 156待机直到接收到视频调整命令。
相反,在步骤S53中MPU 156确定接收到视频调整命令的情况下,处理进行至步骤S54。在步骤S54,MPU 156根据视频调整命令生成视频调整信号,并将其提供给信号处理单元158。
在步骤S55中,信号处理单元158基于视频调整信号以帧为单位对视频信号执行整个视频墙12所需的信号处理,同时根据需要与DRAM 159交换数据。信号处理单元158以帧为单位将调整的视频信号供应至分配单元160。
在步骤S56中,分配单元160以在步骤S55中从信号处理单元158提供的帧为单位将视频信号分配给每一个信号输出IF 161。
在步骤S57,每一个信号输出IF 161以在步骤S56从分配单元160提供的帧为单位将视频信号传输至与其连接的显示单元41。然后,完成视频信号处理。
<显示控制信号生成处理的描述>
图18是示出视频墙控制器63的显示控制信号生成处理的流程图。例如,当从视频服务器61传输以帧为单位的视频信号时,开始该显示控制信号生成处理。
在图18中的步骤S71中,MPU 156确定是否经由LAN端子151和网络IF 155从PC 62的通信单元109接收到刷新率命令。在步骤S71中确定接收到刷新率命令的情况下,MPU 156允许处理进入步骤S72。
在步骤S72,MPU 156根据所接收的刷新率命令生成显示控制信号,并且经由信号处理单元158将显示控制信号供应至分配单元160。然后,处理进行至步骤S74。
相反,在步骤S71中确定还未接收到刷新率命令的情况下,在步骤S73中,MPU 156生成指示预定刷新率的显示控制信号,并且经由信号处理单元158将显示控制信号供应至分配单元160。然后,处理进行至步骤S74。
在步骤S74,分配单元160将显示控制信号提供到每一个信号输出IF 161。在步骤S75,每一个信号输出IF 161将在步骤S74从分配单元160提供的显示控制信号传输至与其连接的显示单元41。然后,完成显示控制信号生成处理。
<显示处理的描述>
图19是示出每一个显示单元41的显示处理的流程图。例如,当通过在图17中的步骤S57的处理传输视频信号并且通过在图18中的步骤S75的处理传输显示控制信号时,开始该显示处理。
在图19中的步骤S91,信号输入IF 211接收以帧为单位的视频信号和从视频墙控制器63传输的显示控制信号,以提供给信号处理单元212。
在步骤S92,根据需要,信号处理单元212以与DRAM 213交换数据的同时,在步骤S91以从信号输入IF 211提供的帧为单位对视频信号执行其自身的显示单元41单独需要的信号处理。
在步骤S93,信号处理单元212根据每一个LED阵列51在其自身的显示单元41上的位置,将在信号处理之后的以帧为单位的视频信号划分成m片。在步骤S94,对于每一个LED阵列51,信号处理单元212基于在信号处理之后以帧为单位的视频信号来生成以帧为单位的形成LED阵列51的每一个LED的显示信号。
在步骤S95中,信号处理单元212将每一个LED阵列51的显示信号提供给对应于LED阵列51的信号输出IF 214,并且通过步骤S91中的处理将从信号输入IF 211提供的显示控制信号提供给每一个信号输出IF 214。
在步骤S96,每一个信号输出IF 214将视频信号和显示控制信号传输至与其连接的LED驱动器221。
在步骤S97,每一个LED驱动器221接收从与其连接的信号输出IF 214传输的显示信号和显示控制信号。在步骤S98,每一个LED驱动器221通过基于显示信号和显示控制信号对形成连接至其的LED阵列51的每一个LED 241的发光执行PWM控制来驱动每一个LED 241。结果,各LED阵列51以从视频服务器61输出的帧为单位显示与视频信号对应的视频中、与LED阵列51的视频墙12上的位置对应的视频。
如上所述,在再成像系统10中,PC 62以这样的方式控制视频墙12的刷新率,即,使视频墙12成像的摄像机11的曝光时间对应于LED 241的发光周期。因此,能够防止在视频墙12被再成像的情况下出现黑带。
此外,因为PC 62获取曝光时间并且基于曝光时间控制刷新率,所以即使在曝光时间改变的情况下,也可以基于改变之后的曝光时间容易地控制刷新率,并且可以防止黑带的出现。
<再成像系统的示例的描述>
图20是示出了通过传统方法减小黑带的可见性的再成像系统的示例的示图。
在图20的示例中,存在形成LED阵列的四行LED。在图20的曲线图中,从视频墙的显示开始起的经过时间沿横坐标绘制,并且LED阵列的行沿纵坐标绘制。在图20的曲线图中,从LED阵列的顶部起的第i行被表示为行#i。图20的曲线图中的矩形表示与纵向方向上的位置对应的行中的LED在与矩形的横向方向上的位置对应的经过时间时发光。
通过传统方法降低黑带的可见性的再成像系统缩短LED的发光周期,即,增加刷新率,从而降低黑带的可见性。具体地,例如,如图20的下级所示,再成像系统使在图20的上级中示出的刷新率翻倍。
因此,即使在摄像机的曝光时间与LED的发光周期不对应、且各行的曝光周期中的LED的发光次数不均匀的情况下,也能够抑制各行的亮度不均。
例如,在单帧区段中的扫描次数是64的情况下,当某个行与其他行的发光次数的差异是-1时,与其他行的亮度相比,该行的亮度减少了1/64(大约1.56%)。相反,当刷新率加倍并且在单帧区段中的扫描次数是128时,当某个行与其他行的发光次数的差异是-1时,与其他行的亮度相比,该行的亮度仅降低了1/128(大约0.78%)。如上所述,通过增加刷新率,抑制了每行中的亮度不均匀性。
图21是示出了由于参考图20描述的再成像的系统而降低了黑带的可见性的再成像的视频的示例的视图。
在图21中的示例中,刷新率是7680Hz,并且与图13中的被摄体和背景类似的被摄体和背景被再成像。
如图21所示,即使在刷新率为3840Hz的两倍的7680Hz的再成像视频300中,也出现水平黑带301,但是黑带301比图13中的刷新率为3840Hz的再成像视频280中的黑带281更不可见。
然而,在传统方法中,尽管黑带的可见性降低,但是黑带不会消失。此外,为了在维持LED的显示灰度精度的同时提高刷新率,需要提高用于LED驱动器的PWM控制的参考时钟的频率,或者减少一次扫描中发光的LED的行数。
具体地,在PWM控制中,由于通过将参考时钟与计数器积分来生成控制信号,因此,例如,需要增加参考时钟的频率以保持LED的显示灰度精度并且增加刷新率。
参考时钟的频率f[Hz]通过使用刷新率RR[Hz]、显示灰度精度t[bit]、以及在一次扫描中发光的LED的行数L[行]的以下表达式(1)来表示。
f=PR×2t×L...(1)
例如,在刷新率是3840Hz、显示灰度精度是12位并且在一次扫描中发光的LED的行数是16的情况下,参考时钟的频率大约为251.7MHz。与此相对,在刷新率为3840Hz的2倍的7680Hz的情况下,参考时钟的频率也为3840Hz的2倍的503.3MHz左右。如上所述,当LED驱动器的参考时钟的频率(工作频率)增加时,由于LED驱动器的功耗、LED驱动器的制造工艺的改变等,成本增加。
与此相对,在维持参考时钟的频率的同时提高刷新率的情况下,如上述式(1)所示,需要减少一次扫描中发光的LED的行数。为了减少在一次扫描中发光的LED的行数,需要增加LED驱动器的个数。例如,在一次扫描中发光的LED的行数为了使刷新率加倍而减少为1/2的情况下,需要使LED驱动器的数量加倍。因此,成本上升,基板上的元件搭载区域不足。此外,随着LED驱动器的数量增加,暗功率也增加。暗功率是即使当LED不发光时消耗的功率,并且暗功率是主要由LED驱动器、用于驱动LED驱动器的控制电路、电源电路等消耗的功率。
注意,如上述表达式(1)所示,通过降低显示灰度精度(所谓的灰度级),可以在维持参考时钟的频率和在一次扫描中发光的LED的行数的同时增加刷新率。例如,通过将显示灰度精度降低一位可以使刷新率加倍。然而,当显示灰度准确度降低时,再成像的视频的质量劣化。通过稍微增加参考时钟的频率可抑制显示灰度精度的劣化,但是在任一情况下再成像的视频的质量劣化。
相反,在再成像系统10中,可以仅通过基于曝光时间控制刷新率来防止出现黑带。因此,不会发生制造成本的显著增加和显示灰度精度的劣化。
注意,刷新率控制单元130也可以不控制刷新率,而是由用户控制刷新率。在这种情况下,曝光时间不从摄像机11传输,并且用户以这样的方式确定刷新率:曝光时间对应于LED 241的发光周期并且使用输入单元106将刷新率输入至PC 62。然后,PC 62生成指示由用户输入的刷新率等的显示控制信号。
在再成像系统10中,曝光时间从摄像机11传输至PC 62,但是用户可以操作输入单元106来输入摄像机11的曝光时间,并且刷新率控制单元130可以获取曝光时间。
在再成像系统10中,PC 62基于曝光时间控制刷新率,但是摄像机11可以将曝光时间传输至视频墙控制器63和视频墙12,并且视频墙控制器63或视频墙12的至少一部分可以用作刷新率控制单元130。
<第二实施方式>
<再成像系统的配置示例>
图22是示出了包括应用本技术的信息处理系统的再成像系统的第二实施方式的配置示例的示图。
在图22中的再成像系统400中,对应于图3中的再成像系统10的部分的部分由相同的参考符号来表示。因此,将适当地省略这些部分的描述,并且将集中于与再成像系统10的部分不同的部分进行描述。
图22中的再成像系统400与再成像系统10的不同之处在于摄像机11被摄像机401取代,并且PC 62被PC 402取代,并且除此之外与再成像系统10类似地配置。在再成像系统400中,PC 402不基于摄像机401的曝光时间控制刷新率,而是摄像机401基于刷新率控制曝光时间。
具体地,摄像机401(信息处理系统)是通过滚动快门系统成像的成像装置。摄像机401从摄像者21接收成像开始指令,并且需要来自PC 402的刷新率。摄像机401基于响应于该请求从PC 402传输的刷新率来设置曝光时间,使得视频墙12的LED 241的发光周期对应于曝光时间。摄像机401以所设置的曝光时间对在视频墙12上作为背景显示的视频进行成像。应注意,在再成像系统400中,可以使用类似于摄像机401的多个摄像机。
PC 402是通用计算机,并且与图5中的PC 62类似地配置。PC 402响应于来自摄像机401的请求,将当前设置的刷新率传输至摄像机401。该刷新率例如由用户设置。
PC 402通过产生控制命令并将其传输至视频墙控制器63来控制视频墙控制器63。例如,PC 402将指示当前设置的刷新率的刷新率命令传输至视频墙控制器63。
在如上所述配置的再成像系统400中,与再成像系统10相似,各个设备通过GenLock信号进行帧同步。
<摄像机的配置示例>
图23是示出图22中的摄像机401的配置示例的框图。
在图23中的摄像机401中,对应于图4中的摄像机11的那些的部分由相同的参考标号表示。因此,将适当地省略对这些部分的描述,并且将集中于不同于摄像机11的那些部分进行描述。
图23中的摄像机401与摄像机11的不同之处在于输入单元81和设置单元82分别由输入单元421和设置单元423替换,并且获取单元422是新设置的,并且除此之外与摄像机11类似地配置。
输入单元421从摄像者21接收输入并且生成指示输入内容的输入信号。例如,在摄像者21操作输入单元421以输入成像开始指令的情况下,输入单元421生成表示成像开始的输入信号。输入单元421将输入信号提供至驱动单元83和获取单元422。
响应于从输入单元421提供的输入信号,获取单元422需要来自PC 402的刷新率。获取单元422响应于该请求获取从PC 402传输的刷新率,并将该刷新率提供至设置单元423。例如,经由诸如同轴电缆的线路执行获取单元422与PC 402之间的通信。
设置单元423基于从获取单元422供给的刷新率,以与对应于刷新率的LED 241的发光周期对应的方式设置曝光时间。设置单元423根据需要设置曝光时间以外的成像信息。设置单元423将包括曝光时间的成像信息提供给驱动单元83。此处,驱动单元83基于来自设置单元423的成像信息、来自输入单元421的成像开始指令等生成驱动信号,并且将该驱动信号输出至成像单元85。因此,设置单元423和驱动单元83作为控制单元发挥功能,该控制单元以曝光时间和发光周期一致的方式生成驱动信号,并将该驱动信号输出至成像单元85。
<曝光时间的设置的描述>
图24是表示图23的设置单元423的曝光时间的设置的示图。
如图24所示,设置单元423以这样的方式设置曝光时间:摄像机401的曝光时间对应于发光周期。具体而言,例如设置单元423将曝光时间设置为发光周期的整数倍。
在图24的示例中,设置单元423将曝光时间设置为发光周期的2倍。因此,与图12中的情况相比,曝光时间被延长,并且在所有行的曝光周期中执行两次扫描。因此,在以通过摄像机401再成像的帧为单位的视频信号中,不出现具有低亮度的像素行,并且不出现黑带。
在图24的示例中,曝光时间被设置为与图12中的示例相比被延长,但是曝光时间仅需要被设置为与发光周期对应,并且可以被设置为与图12中的示例相比被缩短。
<成像处理的描述>
图25是示出摄像机401的成像处理的流程图。例如,当摄像者21操作输入单元421以输入成像开始指令时,开始该成像处理。
在图25中的步骤S110中,输入单元421从摄像者21接收成像开始指令的输入,并且生成指示成像开始的输入信号。输入单元421将输入信号提供至驱动单元83和获取单元422。
在步骤S111,响应于从输入单元421提供的输入信号,获取单元422需要来自PC402的刷新率。在步骤S112中,获取单元422响应于该请求获取从PC 402传输的刷新率,并且将该刷新率提供至设置单元423。
在步骤S113中,设置单元423基于在步骤S112中获取的刷新率以这样的方式设置曝光时间:曝光时间对应于对应于刷新率的LED 241的发光周期。设置单元423根据需要设置曝光时间以外的成像信息。设置单元423将包括曝光时间的成像信息提供给驱动单元83。
步骤S114至S118的处理与图15的步骤S12至S16的处理相同,因此省略其描述。
在步骤S118的处理之后,在步骤S119中,输入单元421确定是否接收到来自摄像者21的成像结束指令。在步骤S119中确定尚未接收到成像结束指令的输入的情况下,处理进行到步骤S120。
在步骤S120中,获取单元422确定是否从PC 402传输新的刷新率。具体地,在通过用户的指令等改变刷新率的情况下,PC 402将变化的刷新率传输至摄像机401。此时,在步骤S120中,获取单元422确定从PC 402传输了新的刷新率。
在步骤S120中确定从PC 402传输新刷新率的情况下,处理返回至步骤S112并且重复后续处理。
相反,在步骤S120中确定没有从PC 402传输新的刷新率的情况下,即,在刷新率没有改变的情况下,处理返回至步骤S114,并且重复后续处理。
在步骤S119中确定接收到成像结束指令的输入的情况下,获取单元422要求PC402结束传输刷新率,并且成像处理结束。
<刷新率传输处理的描述>
图26是示出PC 402的刷新率传输处理的流程图。
在图26中的步骤S131,PC 402通过图25中的步骤S111的处理,确定是否需要来自摄像机401的获取单元422的刷新率。在步骤S131中判断为不需要刷新率的情况下,待机至需要刷新率。
在步骤S131中确定需要刷新率的情况下,处理进行至步骤S132。在步骤S132,PC402将当前设置的刷新率传输至摄像机401。
在步骤S133,PC 402判断获取单元422是否需要结束传输刷新率。在步骤S133中确定不需要完成刷新率的传输的情况下,处理进行至步骤S134。
在步骤S134中,PC 402确定是否通过用户的指令等改变刷新率。在步骤S134中确定刷新率改变的情况下,处理返回至步骤S132并且重复后续处理。
相反,在步骤S134中确定刷新率没有改变的情况下,处理返回至步骤S133并且重复后续处理。
在步骤S133中判断为需要结束刷新率的传输的情况下,结束刷新率传输处理。
如上所述,在再成像系统400中,摄像机401以如下方式设置曝光时间:曝光时间对应于LED 241的发光周期,该发光周期对应于视频墙12的刷新率。因此,能够防止在视频墙12被再成像的情况下出现黑带。
此外,由于摄像机401获取刷新率并且基于刷新率设置曝光时间,所以即使在刷新率改变的情况下,也可以基于改变之后的刷新率容易地设置曝光时间,并且可以防止黑带的出现。
应注意,在上述再成像系统400中,摄像机401基于刷新率设置曝光时间,可以确定对应于LED 241的发光周期的曝光时间的多个候选。在这种情况下,摄像机401在监视器87等上显示曝光时间的候选,并且摄像者21操作输入单元421以输入从曝光时间的候选中选择期望曝光时间的指令。输入单元421接收输入并且将指示摄像者21的期望曝光时间的选择的输入信号提供至设置单元423,设置单元423基于输入信号设置摄像者21的期望曝光时间。
在再成像系统400中,摄像机401基于刷新率确定曝光时间,但是PC 402可以基于刷新率确定曝光时间并将其传输至摄像机401。在这种情况下,获取单元422获取曝光时间,设置单元423设置曝光时间。
在再成像系统400中,PC 402设置刷新率,但是视频墙控制器63或者视频墙12可以设置刷新率。在这种情况下,刷新率从设置刷新率的视频墙控制器63或视频墙12被传输至摄像机401。
在第一和第二实施方式中,PC 62(402)经由诸如同轴电缆的线与摄像机11(401)交换信号,但是可以通过无线通信交换信号。类似地,PC 62(402)经由诸如LAN电缆的电线与视频墙控制器63交换信号,但可以通过无线通信交换信号。
上述一系列处理可以由硬件或软件执行。
再成像系统10(400)可以设置有多个视频墙控制器63,使得每一个视频墙控制器63划分并控制视频墙12。在视频墙12包括一个显示单元41的情况下,可以不提供视频墙控制器63。在这种情况下,从视频服务器61输出的以帧为单位的视频信号和从PC 62输出的控制命令(402)被直接输入到视频墙12。
在本说明书中,系统旨在意指一组多个部件(装置、模块(零件)、处理等),并且所有部件是否在同一壳体中无关紧要。因此,所有容纳在不同壳体中并且经由网络连接的多个设备、多个模块容纳在一个壳体中的一个设备、以及执行多个处理的处理单元是系统。
本技术的实施方式不限于上述实施方式,并且在不背离本技术的主旨的情况下可以做出各种修改。
例如,可以采用通过组合上述多个实施方式中的全部或一些所获得的模式。
例如,本技术可以具有云计算配置,其中,经由网络通过多个设备协作地共享和处理一个功能。
此外,在上述流程图中描述的每一个步骤可以由一个装置执行或者由多个装置以共享方式执行。
此外,在一个步骤中包括多个处理的情况下,在一个步骤中包括的多个处理可以由一个设备执行或者由多个设备以共享方式执行。
应注意,本说明书中描述的效果仅是示例并且不受限制,并且可以存在除本说明书中描述的那些效果之外的效果。
应注意,本技术可具有以下配置。
(1)
一种信息处理系统,包括:
控制单元,生成用于驱动像素的控制信号,使得显示器的发光周期与用于对显示器进行成像的成像单元的曝光时间彼此对应,并且输出控制信号。
(2)
根据上述(1)的信息处理系统,其中,
控制单元被配置为生成用于驱动像素的控制信号,使得曝光时间变为发光周期的整数倍。
(3)
根据上述(2)的信息处理系统,其中,
控制单元被配置为确定显示器的刷新率,使得显示器的像素的发光周期与用于对显示器进行成像的成像单元的曝光时间对应,并且基于刷新率生成用于驱动显示器的像素的控制信号。
(4)
根据上述(3)的信息处理系统,还包括:
获取单元,获取成像单元的曝光时间。
(5)
根据上述(3)或(4)的信息处理系统,还包括:
输入单元,获取要在包括多个显示单元的显示器上显示的视频信号;
划分单元,将视频信号划分成要在显示器的每一个显示单元上显示的视频信号;以及
输出单元,将指示刷新率的信号和所划分的视频信号输出至显示单元。
(6)
根据上述(5)的信息处理系统,其中,
控制单元设置在第一设备上,
输入单元、划分单元和输出单元设置在与第一设备不同的第二设备上,并且
控制单元被配置为将用于驱动显示器的像素的控制信号输出至第二设备。
(7)
根据上述(5)的信息处理系统,其中,
控制单元、输入单元、划分单元和输出单元设置在同一设备上,并且
控制单元被配置为将用于驱动显示器的像素的控制信号输出至显示单元。
(8)
根据上述(3)至(7)中任一项的信息处理系统,还包括:
显示器被配置为基于刷新率被驱动。
(9)
根据上述(2)的信息处理系统,其中,
控制单元被配置为设置成像单元的曝光时间,使得显示器的发光周期与用于对显示器进行成像的成像单元的曝光时间对应,基于所设置的曝光时间生成用于驱动成像单元的像素的控制信号,并且将用于驱动成像单元的像素的控制信号输出至成像单元。
(10)
根据上述(9)的信息处理系统,还包括:
获取单元,获取显示器的刷新率。
(11)
根据上述(9)或(10)的信息处理系统,其中,
控制单元和成像单元设置在同一设备上。
(12)
根据上述(9)或(10)的信息处理系统,其中,
控制单元和成像单元设置在不同设备上。
(13)
根据上述(1)至(12)中任一项的信息处理系统,其中,
成像单元的曝光开始时间和显示器的显示开始时间被配置为彼此同步。
(14)
根据上述(1)至(13)中任一项的信息处理系统,其中,
显示器被配置为通过无源矩阵驱动系统发光。
(15)
根据上述(1)至(14)中任一项的信息处理系统,其中,
显示器包括以矩阵布置的发光二极管LED的像素。
(16)
根据上述(1)至(15)中任一项的信息处理系统,其中,
成像单元被配置为通过滚动快门系统执行成像。
(17)
一种信息处理方法,包括:
生成步骤,生成用于驱动像素的控制信号,使得显示器的发光周期与用于对显示器进行成像的成像单元的曝光时间彼此对应;以及
输出步骤,通过信息处理系统输出控制信号。
(18)
根据上述(17)的信息处理方法,其中,
在生成步骤的处理中,生成用于驱动像素的控制信号,使得曝光时间变为发光周期的整数倍。
(19)
根据(18)的信息处理方法,其中,
在生成步骤的处理中,确定显示器的刷新率,使得显示器的像素的发光周期与用于对显示器进行成像的成像单元的曝光时间对应,并且基于刷新率生成用于驱动显示器的像素的控制信号。
(20)
根据(18)的信息处理方法,其中,
在生成步骤的处理中,设置成像单元的曝光时间,使得显示器的发光周期与用于对显示器进行成像的成像单元的曝光时间对应,并且基于所设置的曝光时间生成用于驱动成像单元的像素的控制信号,并且
在输出步骤的处理中,将用于驱动成像单元的像素的控制信号输出至成像单元。
参考符号列表
10 再成像系统
11 摄像机
12 视频墙
62PC
63 视频墙控制器
83 驱动单元
132 控制单元
133 传输控制单元
152HDMI端子
153DP端子
154DVI端子
160分配单元
161-1至161-n信号输出IF
241LED
400 再成像系统
401 摄像机
402PC
422 获取单元
423 设置单元

Claims (20)

1.一种信息处理系统,包括:
控制单元,生成用于驱动像素的控制信号,使得显示器的发光周期与用于对所述显示器进行成像的成像单元的曝光时间彼此对应,并且输出所述控制信号。
2.根据权利要求1所述的信息处理系统,其中,
所述控制单元被配置为生成用于驱动所述像素的控制信号,使得所述曝光时间变为所述发光周期的整数倍。
3.根据权利要求2所述的信息处理系统,其中,
所述控制单元被配置为确定所述显示器的刷新率,使得所述显示器的像素的发光周期与用于对所述显示器进行成像的所述成像单元的曝光时间对应,并且基于所述刷新率生成用于驱动所述显示器的像素的控制信号。
4.根据权利要求3所述的信息处理系统,还包括:
获取单元,获取所述成像单元的曝光时间。
5.根据权利要求3所述的信息处理系统,还包括:
输入单元,获取要在包括多个显示单元的显示器上显示的视频信号;
划分单元,将所述视频信号划分成要在所述显示器的每一个显示单元上显示的视频信号;以及
输出单元,将指示所述刷新率的信号和所划分的视频信号输出至所述显示单元。
6.根据权利要求5所述的信息处理系统,其中,
所述控制单元设置在第一设备上,
所述输入单元、所述划分单元和所述输出单元设置在与所述第一设备不同的第二设备上,并且
所述控制单元被配置为将用于驱动所述显示器的像素的所述控制信号输出至所述第二设备。
7.根据权利要求5所述的信息处理系统,其中,
所述控制单元、所述输入单元、所述划分单元和所述输出单元设置在同一设备上,并且
所述控制单元被配置为将用于驱动所述显示器的像素的所述控制信号输出至所述显示单元。
8.根据权利要求3所述的信息处理系统,还包括:
所述显示器被配置为基于所述刷新率被驱动。
9.根据权利要求2所述的信息处理系统,其中,
所述控制单元被配置为设置所述成像单元的曝光时间,使得所述显示器的发光周期与用于对所述显示器进行成像的所述成像单元的曝光时间对应,基于所设置的曝光时间生成用于驱动所述成像单元的像素的控制信号,并且将用于驱动所述成像单元的像素的控制信号输出至所述成像单元。
10.根据权利要求9所述的信息处理系统,还包括:
获取单元,获取所述显示器的刷新率。
11.根据权利要求9所述的信息处理系统,其中,
所述控制单元和所述成像单元设置在同一设备上。
12.根据权利要求9所述的信息处理系统,其中,
所述控制单元和所述成像单元设置在不同设备上。
13.根据权利要求1所述的信息处理系统,其中,
所述成像单元的曝光开始时间和所述显示器的显示开始时间被配置为彼此同步。
14.根据权利要求1所述的信息处理系统,其中,
所述显示器被配置为通过无源矩阵驱动系统发光。
15.根据权利要求1所述的信息处理系统,其中,
所述显示器包括以矩阵布置的发光二极管LED的像素。
16.根据权利要求1所述的信息处理系统,其中,
所述成像单元被配置为通过滚动快门系统执行成像。
17.一种信息处理方法,包括:
生成步骤,生成用于驱动像素的控制信号,使得显示器的发光周期与用于对所述显示器进行成像的成像单元的曝光时间彼此对应;以及
输出步骤,通过信息处理系统输出所述控制信号。
18.根据权利要求17所述的信息处理方法,其中,
在所述生成步骤的处理中,生成用于驱动所述像素的控制信号,使得所述曝光时间变为所述发光周期的整数倍。
19.根据权利要求18所述的信息处理方法,其中,
在所述生成步骤的处理中,确定所述显示器的刷新率,使得所述显示器的像素的发光周期与用于对所述显示器进行成像的所述成像单元的曝光时间对应,并且基于所述刷新率生成用于驱动所述显示器的像素的控制信号。
20.根据权利要求18所述的信息处理方法,其中,
在所述生成步骤的处理中,设置所述成像单元的曝光时间,使得所述显示器的发光周期与用于对所述显示器进行成像的所述成像单元的曝光时间对应,并且基于所设置的曝光时间生成用于驱动所述成像单元的像素的控制信号,并且
在所述输出步骤的处理中,将用于驱动所述成像单元的像素的控制信号输出至所述成像单元。
CN202280063765.2A 2021-09-27 2022-03-11 信息处理系统和信息处理方法 Pending CN117999791A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2021-156597 2021-09-27
JP2021156597 2021-09-27
PCT/JP2022/010845 WO2023047641A1 (ja) 2021-09-27 2022-03-11 情報処理システムおよび情報処理方法

Publications (1)

Publication Number Publication Date
CN117999791A true CN117999791A (zh) 2024-05-07

Family

ID=85720343

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202280063765.2A Pending CN117999791A (zh) 2021-09-27 2022-03-11 信息处理系统和信息处理方法

Country Status (5)

Country Link
EP (1) EP4411705A1 (zh)
JP (1) JPWO2023047641A1 (zh)
CN (1) CN117999791A (zh)
TW (1) TW202334922A (zh)
WO (1) WO2023047641A1 (zh)

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018164105A1 (ja) 2017-03-06 2018-09-13 ソニーセミコンダクタソリューションズ株式会社 駆動装置および表示装置
CN111899680B (zh) * 2020-07-14 2023-04-18 青岛海信医疗设备股份有限公司 一种显示设备及其设置方法
CN112565620A (zh) * 2020-11-26 2021-03-26 京东方科技集团股份有限公司 显示屏幕的光学补偿方法、装置、存储介质及电子设备

Also Published As

Publication number Publication date
JPWO2023047641A1 (zh) 2023-03-30
WO2023047641A1 (ja) 2023-03-30
EP4411705A1 (en) 2024-08-07
TW202334922A (zh) 2023-09-01

Similar Documents

Publication Publication Date Title
US9236027B2 (en) Display system and computer-readable medium
JP5539297B2 (ja) 表示システム、較正方法、コンピュータプログラム、及び記録媒体
US7259734B2 (en) Multi-scanning control process and LED displaying device
US9019189B2 (en) Image display device and driving method thereof that varies driving frequency according to frequency of data received
CN110910805A (zh) 一种显示屏的补偿调节装置及其补偿调节方法
US10043458B2 (en) Display apparatus for changing color distribution of light generated by display and method thereof
US11735104B2 (en) Electronic display board for controlling 4 way dual scanning in which gray scale pixel (GSP) is applied to dynamic image correction technology (DICT)
KR20110051946A (ko) 멀티비전, 멀티 비전 구현 방법 및 이를 적용한 디스플레이장치
CN117999791A (zh) 信息处理系统和信息处理方法
KR20220021712A (ko) 전자 장치, 디스플레이 장치 및 그 제어 방법
KR20120050745A (ko) 멀티비전 시스템 및 그 화면 구현 방법
EP4414974A1 (en) Information processing system and information processing method
KR102558290B1 (ko) 전자 장치 및 그 제어 방법
CA3230108A1 (en) Information processing system and information processing method
JP2008172343A (ja) ホワイトバランス調整システム、ホワイトバランス調整方法およびpdp表示装置
US20240203322A1 (en) Drive Control Device, Drive Control Method, Information Processing System, And Information Processing Method For Information Processing System
KR20220147880A (ko) 디스플레이 장치 및 그의 동작 방법
US11967608B1 (en) Pixel integrate scanning (PIS) distributed type automatic power-saving electronic display board
WO2024053373A1 (ja) 表示制御装置および表示装置
WO2023074383A1 (ja) 情報処理システム、及び、情報処理方法
JP2003345309A (ja) Led駆動システムおよびその制御方法
US20240233658A9 (en) Driving Controlling Device And Driving Controlling Method As Well As Information Processing System
CN118119999A (zh) 微型显示控制系统
CN115547231A (zh) 显示面板的驱动方法、驱动装置及显示装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination