CN114518921A - 透明显示系统及其控制方法与控制装置 - Google Patents

透明显示系统及其控制方法与控制装置 Download PDF

Info

Publication number
CN114518921A
CN114518921A CN202111392198.9A CN202111392198A CN114518921A CN 114518921 A CN114518921 A CN 114518921A CN 202111392198 A CN202111392198 A CN 202111392198A CN 114518921 A CN114518921 A CN 114518921A
Authority
CN
China
Prior art keywords
information
pair
detection
identification information
transparent display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111392198.9A
Other languages
English (en)
Inventor
余姿仪
戴宏明
黄钧彦
苏育萱
施鸿斌
徐雅柔
蔡宇翔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Industrial Technology Research Institute ITRI
Original Assignee
Industrial Technology Research Institute ITRI
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Industrial Technology Research Institute ITRI filed Critical Industrial Technology Research Institute ITRI
Publication of CN114518921A publication Critical patent/CN114518921A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304—Detection arrangements using opto-electronic means
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
    • G09F9/00—Indicating arrangements for variable information in which the information is built-up on a support by selection or combination of individual elements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Software Systems (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Magnetic Resonance Imaging Apparatus (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)
  • Display Devices Of Pinball Game Machines (AREA)
  • Burglar Alarm Systems (AREA)

Abstract

一种透明显示系统及其控制方法与控制装置。透明显示系统包括信息提取组件、透明显示器及控制装置。信息提取组件用以取得至少一检测信息。控制装置包括检测单元、资源配置单元及辨识单元。检测单元用以依据至少一检测信息检测透明显示器前的至少一使用者及透明显示器后的至少一目标物件。资源配置单元用以依据至少一检测信息的检测结果，获得资源配置。信息提取组件依据资源配置取得至少一辨识信息的至少一对内位置信息。辨识单元辨识出至少一使用者的至少一对内位置信息及至少一目标物件的至少一对外位置信息。

Description

透明显示系统及其控制方法与控制装置
技术领域
本公开涉及一种透明显示系统及其控制方法与控制装置。
背景技术
随着显示科技的快速发展，各式显示器不断推陈出新。举例来说，透明显示器可以在透明材质上显示信息，以供使用者可看到透明显示器之后的目标物件以及显示信息。
显示信息可以用来介绍与说明目标物件。使用者或目标物件相对于透明显示器的位置改变时，使用者在透明显示器的视线位置并不会相同。显示信息必须准确地显示在视线位置上。尤其是在大尺寸的透明显示器中，更需要耗费大量处理资源才能够准确地将显示信息显示在视线位置上。
发明内容
本公开涉及一种透明显示系统及其控制方法与控制装置。
根据本公开的另一方面，提出一种透明显示系统。透明显示系统包括信息提取组件、透明显示器及控制装置。信息提取组件用以取得至少一检测信息。控制装置包括检测单元、资源配置单元及辨识单元。检测单元用以依据至少一检测信息检测透明显示器前的至少一使用者及透明显示器后的至少一目标物件。资源配置单元用以依据至少一检测信息的检测结果，获得资源配置。信息提取组件依据资源配置取得至少一辨识信息。辨识单元并依据资源配置辨识出至少一使用者的至少一对内位置信息及至少一目标物件的至少一对外位置信息。
根据本公开的一方面，提出一种透明显示系统的控制方法。透明显示系统的控制方法包括以下步骤。检测透明显示器前的至少一使用者及透明显示器后的至少一目标物件，以取得至少一检测信息。依据至少一检测信息，获得资源配置。依据资源配置取得至少一使用者的至少一对内位置信息及至少一目标物件的至少一对外位置信息。
根据本公开的再一方面，提出一种控制装置。控制装置包括检测单元、资源配置单元及辨识单元。检测单元用以依据至少一检测信息检测透明显示器前的至少一使用者及透明显示器后的至少一目标物件。资源配置单元用以依据至少一检测信息的检测结果，获得资源配置。信息提取组件依据资源配置取得至少一辨识信息。辨识单元并依据资源配置辨识出至少一使用者的至少一对内位置信息及至少一目标物件的至少一对外位置信息。
为了对本公开的上述及其他方面有更佳的了解，下文特举实施例，并配合附图详细说明如下：
附图说明
图1绘示根据一实施例的透明显示系统的示意图。
图2绘示根据一实施例的透明显示系统的控制方法的流程图。
图3绘示根据一实施例的透明显示系统的示意图。
图4绘示根据一实施例的透明显示系统的控制方法的流程图。
图5绘示根据一实施例的透明显示系统的示意图。
图6绘示根据一实施例的透明显示系统的控制方法的流程图。
图7绘示根据一实施例的透明显示系统的示意图。
图8绘示根据一实施例的透明显示系统的控制方法的流程图。
图9绘示根据一实施例的对内辨识信息。
图10绘示根据一实施例的透明显示系统的示意图。
图11绘示根据一实施例的透明显示系统的示意图。
图12绘示根据一实施例的透明显示系统的控制方法的流程图。
图13绘示根据一实施例的透明显示系统的示意图。
图14绘示根据一实施例的透明显示系统的控制方法的流程图。
【符号说明】
100，200，300，400，500，600，700:透明显示系统
110，210，310，410，510，610，710:信息提取组件
120，620，720:透明显示器
130，230，330，430，630:控制装置
131，231，331，431，631，731:检测单元
132，232，332，432，632，732:资源配置单元
133，233，333，433，633，733:辨识单元
134:合并单元
135:融合单元
136:输出单元
137:存储单元
210b，610b:对外图像提取单元
210f，610f:对内图像提取单元
310w:广角图像提取单元
410db，510db，710db:对外检测信息提取单元
410df，510df，710df:对内检测信息提取单元
410rb，510rb，710rb:对外辨识信息提取单元
410rf，510rf，710rf:对内辨识信息提取单元
6331，6332，6333，6334:处理器
DI1:显示信息
DR，DR2，DR3，DR4，DR6，DR7:检测结果
Lb1:对外位置信息
Lb1’:对外相对位置信息
Lf1:对内位置信息
Lf1’:对内相对位置信息
LS1:视线位置
Md:检测信息
Mdb:对外检测信息
Mdf:对内检测信息
Mdw:广角检测信息
Mr:辨识信息
Mrb:对外辨识信息
Mrf:对内辨识信息
Mrw:广角辨识信息
O1:目标物件
P1:使用者
RA，RA2，RA3，RA4，RA6，RA7:资源配置
具体实施方式
请参照图1，其绘示根据一实施例的透明显示系统100的示意图。透明显示系统100包括信息提取组件110、透明显示器120及控制装置130。信息提取组件110由相同/不同解析度、相同/不同类型的至少一个图像提取单元、红外线传感器、雷达传感器所组成。图像提取单元可包括例如是相机、摄影机、红外线传感器或一雷达传感器。透明显示器120为透明或可透光的显示面板。透明显示器120例如是设置在观景台的景观玻璃或水族馆的水槽的玻璃。信息提取组件110例如是设置在透明显示器120的上方或邻近处，以获得透明显示器120前的至少一使用者P1及透明显示器120后的至少一目标物件O1。控制装置130可包括例如是计算机、服务器、云端运算中心、电路板、电路、计算机程序产品、计算机可读取记录介质或芯片等。控制装置130可分析出使用者P1在透明显示器120的视线位置LS1，并在透明显示器120上显示出显示信息DI1。
在本实施例中，透明显示器120可为大尺寸面板或由数个小尺寸面板拼接而成，控制装置130利用资源配置技术来分配信息提取组件110的处理资源、或者利用资源分配技术来分配控制装置130的内部的处理资源，以降低整体处理资源的耗费。
控制装置130包括检测单元131、资源配置单元132、辨识单元133、合并单元134、融合单元135及输出单元136。各项元件的功能概述如下。检测单元131用以进行有无人类或物件的检测。资源配置单元132用以进行资源配置。辨识单元133用以准确地辨识出人类或物件的位置。合并单元134用以合并所辨识出的位置。融合单元135用以进行坐标系统的融合。输出单元136用以输出各种信息。在本实施例中，通过资源配置技术来分配信息提取组件110的处理资源、或者分配控制装置130的内部的处理资源，以降低整体处理资源的耗费。以下更通过流程图详细说明各项元件的运作。
请参照图2，其绘示根据一实施例的透明显示系统100的控制方法的流程图。计算机程序产品可经由计算机载入该计算机程序程序后执行透明显示系统100的控制方法。在步骤S100中，检测单元131自信息提取组件110取得至少一检测信息Md。至少一检测信息Md例如是至少一个朝透明显示器120的前方获得的对内检测信息或朝透明显示器120的后方获得的至少一个对外检测信息。对内检测信息、对外检测信息例如是两张不同的图像。或者，至少一检测信息Md例如是同时朝透明显示器120的前方与后方获得的多个广角检测信息。广角检测信息例如是一张广角图像。后续将以图式分别说明各种不同的实施情况。
接着，在步骤S110中，检测单元131依据检测信息Md检测透明显示器120前的至少一使用者P1及透明显示器120后的至少一目标物件O1。检测单元131主要是检测有无使用者P1和/或目标物件O1。
然后，在步骤S120中，资源配置单元132依据检测信息Md的检测结果DR，获得资源配置RA。资源配置RA例如是设定图像辨识的帧率/信息辨识的频率、设定图像/信息辨识的区域、设定信息提取组件110的启动情况等。后续将以图式分别说明各种不同的实施情况。
接着，在步骤S130中，信息提取组件110依据资源配置RA取得至少一辨识信息Mr，辨识单元133并依据资源配置RA辨识出至少一使用者P1的至少一对内位置信息Lf1及至少一目标物件O1的至少一对外位置信息Lb1。至少一辨识信息Mr例如是至少一个朝透明显示器120的前方获得的对内辨识信息或朝透明显示器120的后方获得的至少一个对外辨识信息。或者，至少一辨识信息Mr可例如是同时包含透明显示器120的前方与后方获得的多个广角辨识信息。辨识信息Mr与检测信息Md例如是由同一图像提取单元所提取；或者，辨识信息Mr与检测信息Md例如是由不同图像提取单元或不同类型装置所提取。后续将以图式分别说明各种不同的实施情况。对内位置信息Lf1为辨识信息Mr中的位置，尚未对应于整个透明显示器120的位置；对外位置信息Lb1为辨识信息Mr中的位置，尚未对应于整个透明显示器120的位置。
然后，在步骤S140中，合并单元134分别整合多个对内位置信息Lf1及多个对外位置信息Lb1，以分别获得多个对内相对位置信息Lf1’及多个对外相对位置信息Lb1’。对内相对位置信息Lf1’已对应于整个透明显示器120的位置；对外相对位置信息Lb1’已对应于整个透明显示器120的位置。
在一实施例中，使用者P1和/或目标物件O1位于单一图像提取单元、红外线传感器或雷达传感器等信息提取组件110的处理范围内，则可省略步骤S140。意即，无须整合，此时的对内位置信息Lf1和/或对外位置信息Lb1已对应于整个透明显示器120的位置。
接着，在步骤S150中，融合单元135融合至少一对内相对位置信息Lf1’与至少一对外相对位置信息Lb1’，以获得至少一视线位置LS1。融合单元135将两者的坐标系统进行融合，以依据对内相对位置信息Lf1’与对外相对位置信息Lb1’的连线，分析出透明显示器120上的视线位置LS1。
然后，在步骤S160中，输出单元136依据至少一视线位置LS1，输出至少一显示信息DI1至透明显示器120。在一实施例中，可还包括存储单元137，存储单元137用以存储各种信息，例如显示信息DI1可存储在存储单元137中。
在上述步骤S120中，资源配置RA例如是设定图像辨识的帧率/信息辨识的频率、设定图像/信息辨识的区域、设定信息提取组件110的启动情况等。后续将以图式分别说明各种不同的实施情况。
请参照图3，其绘示根据一实施例的透明显示系统200的示意图。在图3的实施例中，透明显示系统200的信息提取组件210包括数个对内图像提取单元210f及数个对外图像提取单元210b。这些对内图像提取单元210f可用以提取对内检测信息Mdf及对内辨识信息Mrf。这些对外图像提取单元210b用以提取对外检测信息Mdb及对外辨识信息Mrb。
请参照图4，其绘示根据一实施例的透明显示系统200的控制方法的流程图。在步骤S200中，控制装置230的检测单元231自信息提取组件210取得对内检测信息Mdf及对外检测信息Mdb。
接着，在步骤S210中，检测单元231依据对内检测信息Mdf及对外检测信息Mdb检测透明显示器120前的至少一使用者P1及透明显示器120后的至少一目标物件O1。
然后，在步骤S220中，资源配置单元232依据对内检测信息Mdf及对外检测信息Mdb的一检测结果DR2，获得一资源配置RA2。资源配置RA2包括控制对内图像提取单元210f以不同帧率取得对内辨识信息Mrf、控制对外图像提取单元210b以不同帧率取得对外辨识信息Mrb。
接着，在步骤S230中，信息提取组件210依据资源配置RA2以不同帧率取得对内辨识信息Mrf，并以不同帧率取得对外辨识信息Mrb，辨识单元233并辨识出至少一使用者P1的至少一对内位置信息Lf1及至少一目标物件O1的至少一对外位置信息Lb1。举例来说，如图3所示，在左侧起算第一个对内检测信息Mdf中有检测到使用者P1，故左侧起算第一个对内图像提取单元210f以较高的帧率取得对内辨识信息Mrf，其余的对内图像提取单元210f则以较低的帧率取得对内辨识信息Mrf。如图3所示，在左侧起算第三个对外检测信息Mdb中有检测到目标物件O1，故左侧起算第三个对外图像提取单元210b以较高的帧率取得对外辨识信息Mrb，其余的对外图像提取单元210b则以较低的帧率取得对外辨识信息Mrb。
然后，进入步骤S140。后续步骤S140～S160同前述图2的内容，在此不在重复叙述。
请参照图5，其绘示根据一实施例的透明显示系统300的示意图。在图5的实施例中，透明显示系统300的信息提取组件310包括至少一个广角图像提取单元310w。广角图像提取单元310w用以提取广角检测信息Mdw及广角辨识信息Mrw。广角检测信息Mdw的检测范围涵盖到透明显示器120的前方与透明显示器120的后方。广角辨识信息Mrw的取像范围涵盖到透明显示器120的前方与透明显示器120的后方。
请参照图6，其绘示根据一实施例的透明显示系统300的控制方法的流程图。在步骤S300中，控制装置330的检测单元331自信息提取组件310取得广角检测信息Mdw。
接着，在步骤S310中，检测单元331依据广角检测信息Mdw检测透明显示器120前的至少一使用者P1及透明显示器120后的至少一目标物件O1。
然后，在步骤S320中，资源配置单元332依据广角检测信息Mdw的检测结果DR3，获得资源配置RA3。资源配置RA3包括控制广角图像提取单元310w以不同帧率取得广角辨识信息Mrw。
接着，在步骤S330中，信息提取组件310依据资源配置RA3以不同帧率取得广角辨识信息Mrw，辨识单元333并辨识出至少一使用者P1的至少一对内位置信息Lf1及至少一目标物件O1的至少一对外位置信息Lb1。举例来说，如图5所示，在左侧起算第一个广角检测信息Mdw中有检测到使用者P1，在左侧起算第三个广角检测信息Mdw中有检测到目标物件O1，故左侧起算第一个广角图像提取单元310w及第三个广角图像提取单元310w以较高的帧率取得广角辨识信息Mrw，其余的广角图像提取单元310w则以较低的帧率取得广角辨识信息Mrw。
然后，进入步骤S140。后续步骤S140～S160同前述图2的内容，在此不在重复叙述。
请参照图7，其绘示根据一实施例的透明显示系统400的示意图。在图7的实施例中，透明显示系统400的信息提取组件410包括对内检测信息提取单元410df、对外检测信息提取单元410db、对内辨识信息提取单元410rf及对外辨识信息提取单元410rb。对内检测信息提取单元410df用以提取对内检测信息Mdf。对外检测信息提取单元410db用以提取对外检测信息Mdb。对内辨识信息提取单元410rf用以提取对内辨识信息Mrf。对外辨识信息提取单元410rb用以提取对外辨识信息Mrb。对内检测信息提取单元410df、对外检测信息提取单元410db、对内辨识信息提取单元410rf及对外辨识信息提取单元410rb例如是图像提取装置。对内检测信息提取单元410df的解析度低于对内辨识信息提取单元410rf的解析度。对外检测信息提取单元410db的解析度低于对外辨识信息提取单元410rb的解析度。
也就是说，低解析度的对内检测信息提取单元410df、对外检测信息提取单元410db是用以检测有无使用者P1或目标物件O1。高解析度的对内辨识信息提取单元410rf及对外辨识信息提取单元410rb则可用以辨识使用者P1或目标物件O1的位置。
在一实施例中，可采用广角检测信息提取单元和/或广角辨识信息提取单元，广角检测信息和/或广角辨识信息的检测范围和/或取像范围可涵盖到透明显示器120的前方与后方。
请参照图8，其绘示根据一实施例的透明显示系统200的控制方法的流程图。在步骤S400中，控制装置430的检测单元431自信息提取组件410取得对内检测信息Mdf及对外检测信息Mdb。
接着，在步骤S410中，检测单元431依据对内检测信息Mdf及对外检测信息Mdb检测透明显示器120前的至少一使用者P1及透明显示器120后的至少一目标物件O1。
然后，在步骤S420中，资源配置单元432依据对内检测信息Mdf及对外检测信息Mdb的一检测结果DR4，获得一资源配置RA4。在图7的实施例中，资源配置RA4传送至辨识单元433。
接着，在步骤S430中，信息提取组件410取得对内辨识信息Mrf以及对外辨识信息Mrb，辨识单元433依据资源配置RA4仅对对内辨识信息Mrf的部分区域进行辨识、仅对对外辨识信息Mrb的部分区域进行辨识，以辨识出至少一使用者P1的至少一对内位置信息Lf1及至少一目标物件O1的至少一对外位置信息Lb1。
举例来说，请参照图9，其绘示根据一实施例的对内辨识信息Mrf。在资源配置RA4之下，可以仅对对内辨识信息Mrf的斜线部分区域进行辨识，以提高辨识效率。
然后，进入步骤S140。后续步骤S140～S160同前述图2的内容，在此不在重复叙述。
请参照图10，其绘示根据一实施例的透明显示系统500的示意图。在图10的实施例中，透明显示系统500的信息提取组件510包括对内检测信息提取单元510df、对外检测信息提取单元510db、对内辨识信息提取单元510rf及对外辨识信息提取单元510rb。对内检测信息提取单元510df、对外检测信息提取单元510db、对内辨识信息提取单元510rf及对外辨识信息提取单元510rb例如是图像提取装置。对内检测信息提取单元510df的解析度低于对内辨识信息提取单元510rf的解析度，对内检测信息提取单元510df的检测像范围可不同于对内辨识信息提取单元510rf的取像范围。对外检测信息提取单元510db的解析度低于对外辨识信息提取单元510rb的解析度，对外检测信息提取单元510db的检测范围可不同于对外辨识信息提取单元510rb的取像范围。
也就是说，低解析度的对内检测信息提取单元510df、对外检测信息提取单元510db是用以检测有无使用者P1或目标物件O1。高解析度的对内辨识信息提取单元510rf及对外辨识信息提取单元510rb则可用以辨识使用者P1或目标物件O1的位置。对内检测信息提取单元510df与对内辨识信息提取单元510rf可以设置在不同处，对外检测信息提取单元510db与对外辨识信息提取单元510rb可以设置在不同处，后续再进行信息对齐。
在一实施例中，可采用低解析度的广角检测信息提取单元及高解析度的广角辨识信息提取单元，低解析度的广角检测信息提取单元及高解析度的广角辨识信息提取单元可以设置在不同处。
请参照图11，其绘示根据一实施例的透明显示系统600的示意图。在图11的实施例中，透明显示系统600的信息提取组件610包括数个对内图像提取单元610f及数个对外图像提取单元610b。这些对内图像提取单元610f用以提取对内检测信息Mdf及对内辨识信息Mrf。这些对外图像提取单元610b用以提取对外检测信息Mdb及对外辨识信息Mrb。
请参照图12，其绘示根据一实施例的透明显示系统600的控制方法的流程图。在步骤S600中，控制装置630的检测单元631自信息提取组件610取得对内检测信息Mdf及对外检测信息Mdb。
接着，在步骤S610中，检测单元631依据对内检测信息Mdf及对外检测信息Mdb检测透明显示器620前的至少一使用者P1及透明显示器620后的至少一目标物件O1。透明显示器620例如是由数个显示面板所组成。
然后，在步骤S620中，资源配置单元632依据对内检测信息Mdf及对外检测信息Mdb的一检测结果DR6，获得一资源配置RA6。
接着，在步骤S630中，信息提取组件610取得对内辨识信息Mrf及对外辨识信息Mrb，辨识单元633依据资源配置RA6辨识出至少一使用者P1的至少一对内位置信息Lf1及至少一目标物件O1的至少一对外位置信息Lb1。资源配置RA6包括控制辨识单元633仅对部分的对内辨识信息Mrf进行辨识、控制辨识单元633仅对部分的对外辨识信息Mrb进行辨识。举例来说，辨识单元633可例如是包括数个处理器6331～6334。如图11所示，在左侧起算第一个对内检测信息Mdf中有检测到使用者P1，左侧起算第四个对外检测信息Mdb中有检测到目标物件O1，故第一个处理器6331对对内辨识信息Mrf进行辨识，第四个处理器6334对对外辨识信息Mrb进行辨识，其余的处理器6332、6333则不进行辨识。
然后，进入步骤S140。后续步骤S140～S160同前述图2的内容，在此不在重复叙述。
请参照图13，其绘示根据一实施例的透明显示系统700的示意图。图13的实施例中，透明显示系统700的信息提取组件710包括数个对内检测信息提取单元710df、数个对外检测信息提取单元710db、数个对内辨识信息提取单元710rf及数个对外辨识信息提取单元710rb。对内检测信息提取单元710df用以提取对内检测信息Mdf。对外检测信息提取单元710db用以提取对外检测信息Mdb。对内辨识信息提取单元710rf用以提取对内辨识信息Mrf。对外辨识信息提取单元710rb用以提取对外辨识信息Mrb。对内检测信息提取单元710df、对外检测信息提取单元710db、对内辨识信息提取单元710rf及对外辨识信息提取单元710rb例如是图像提取装置。对内检测信息提取单元710df的解析度低于对内辨识信息提取单元710rf的解析度。对外检测信息提取单元710db的解析度低于对外辨识信息提取单元710rb的解析度。
也就是说，低解析度的对内检测信息提取单元710df、对外检测信息提取单元710db是用以检测有无使用者P1或目标物件O1。高解析度的对内辨识信息提取单元710rf及对外辨识信息提取单元710rb则可用以辨识使用者P1或目标物件O1的位置。
请参照图14，其绘示根据一实施例的透明显示系统700的控制方法的流程图。在步骤S700中，检测单元731自信息提取组件710取得对内检测信息Mdf及对外检测信息Mdb。
接着，在步骤S710中，检测单元731依据对内检测信息Mdf及对外检测信息Mdb检测透明显示器720前的至少一使用者P1及透明显示器120后的至少一目标物件O1。透明显示器720例如是由多个显示面板所组成。
然后，在步骤S720中，资源配置单元732依据对内检测信息Mdf及对外检测信息Mdb的检测结果DR7，获得资源配置RA7。在一实施例中，资源配置RA4可同时传送至信息提取组件710与辨识单元733。
接着，在步骤S730中，信息提取组件410依据资源配置RA7以不同帧率取得对内辨识信息Mrf，并以不同帧率取得对外辨识信息Mrb，辨识单元733依据资源配置RA7仅对对内辨识信息Mrf的部分区域进行辨识、仅对对外辨识信息Mrb的部分区域进行辨识，以辨识出至少一使用者P1的至少一对内位置信息Lf1及至少一目标物件O1的至少一对外位置信息Lb1。
举例来说，如图13所示，在左侧起算第一个对内检测信息Mdf中有检测到使用者P1，在左侧起算第三个对外检测信息Mdb中有检测到目标物件O1，故左侧起算第一个对内辨识信息提取单元710rf及第三个对外辨识信息提取单元710rb以较高的帧率取得对内辨识信息Mrf及对外辨识信息Mrb，其余的对内辨识信息提取单元710rf、对外辨识信息提取单元710rb则以较低的帧率取得对内辨识信息Mrf与对外辨识信息Mrb。
此外，在资源配置RA7之下，可以仅对对内辨识信息Mrf与对外辨识信息Mrb的部分区域进行辨识，以提高辨识效率。
然后，进入步骤S140。后续步骤S140～S160同前述图2的内容，在此不在重复叙述。
根据上述各种实施例，透明显示系统可以利用资源配置技术来分配信息提取组件的处理资源、或者利用资源分配技术来分配控制装置之内部的处理资源，以降低整体处理资源的耗费。
综上所述，虽然本公开已以实施例公开如上，然其并非用以限定本公开。本公开所属技术领域的技术人员在不脱离本公开的精神和范围内，当可作各种的更动与润饰。因此，本公开的保护范围当视所附的权利要求书及其均等范围所界定者为准。

Claims (19)

1.一种透明显示系统，包括：
信息提取组件，用以取得至少一检测信息；
透明显示器；以及
控制装置，包括：
检测单元，用以依据该至少一检测信息检测该透明显示器前的至少一使用者及该透明显示器后的至少一目标物件；
资源配置单元，用以依据该至少一检测信息的检测结果，获得资源配置；及
辨识单元，该信息提取组件依据该资源配置取得至少一辨识信息，该辨识单元并依据该资源配置辨识出该至少一使用者的至少一对内位置信息及该至少一目标物件的至少一对外位置信息。
2.如权利要求1所述的透明显示系统，其中该控制装置还包括：
合并单元，分别整合该至少一对内位置信息及该至少一对外位置信息，以分别获得至少一对内相对位置信息及至少一对外相对位置信息；
融合单元，用以融合该至少一对内相对位置信息与该至少一对外相对位置信息，以获得至少一视线位置；以及
输出单元，用以依据该至少一视线位置，输出至少一显示信息至该透明显示器。
3.如权利要求1所述的透明显示系统，其中该至少一检测信息包括多个对内检测信息及多个对外检测信息，该至少一辨识信息包括多个对内辨识信息及多个对外辨识信息，该信息提取组件包括：
多个对内图像提取单元，用以提取这些对内检测信息及这些对内辨识信息；以及
多个对外图像提取单元，用以提取这些对外检测信息及这些对外辨识信息。
4.如权利要求3所述的透明显示系统，其中该资源配置包括控制这些对内图像提取单元以不同帧率取得这些对内辨识信息、控制这些对外图像提取单元以不同帧率取得这些对外辨识信息。
5.如权利要求3所述的透明显示系统，其中该资源配置包括控制该辨识单元仅对部分的这些对内辨识信息进行辨识、控制该辨识单元仅对部分的这些对外辨识信息进行辨识。
6.如权利要求1所述的透明显示系统，其中该至少一检测信息包括多个广角检测信息，该至少一辨识信息包括多个广角辨识信息，各该广角检测信息涵盖到该透明显示器的前方与该透明显示器的前方，各该广角辨识信息涵盖到该透明显示器的前方与该透明显示器的前方，该信息提取组件包括：
多个广角图像提取单元，用以提取这些广角检测信息及这些广角辨识信息。
7.如权利要求6所述的透明显示系统，其中该资源配置包括控制这些广角图像提取单元以不同帧率取得这些广角辨识信息。
8.如权利要求1所述的透明显示系统，其中该至少一检测信息包括对内检测信息及对外检测信息，该至少一辨识信息包括对内辨识信息及对外辨识信息，该信息提取组件包括：
对内检测信息提取单元，用以提取该对内检测信息；
对外检测信息提取单元，用以提取该对外检测信息；
对内辨识信息提取单元，用以提取该对内辨识信息，该对内检测信息提取单元的解析度低于该对内辨识信息提取单元的解析度；以及
对外辨识信息提取单元，用以提取该对外辨识信息，该对外检测信息提取单元的解析度低于该对外辨识信息提取单元的解析度，其中该资源配置包括控制该辨识单元仅对该对内辨识信息的部分区域进行辨识、控制该辨识单元仅对该对外辨识信息的部分区域进行辨识。
9.如权利要求1所述的透明显示系统，其中该至少一检测信息包括对内检测信息及对外检测信息，该至少一辨识信息包括对内辨识信息及对外辨识信息，该信息提取组件包括：
对内检测信息提取单元，用以提取该对内检测信息；
对外检测信息提取单元，用以提取该对外检测信息；
对内辨识信息提取单元，用以提取该对内辨识信息，该对内检测信息提取单元的解析度低于该对内辨识信息提取单元的解析度，该对内检测信息提取单元的检测范围不同于该对内辨识信息提取单元的取像范围；以及
对外辨识信息提取单元，用以提取该对外辨识信息，该对外检测信息提取单元的解析度低于该对外辨识信息提取单元的解析度，该对外检测信息提取单元的检测范围不同于该对外辨识信息提取单元的取像范围。
10.一种透明显示系统的控制方法，包括：
依据至少一检测信息检测透明显示器前的至少一使用者及该透明显示器后的至少一目标物件；
依据该至少一检测信息的检测结果，获得资源配置；以及
依据该资源配置取得至少一辨识信息，并辨识出该至少一使用者的至少一对内位置信息及该至少一目标物件的至少一对外位置信息。
11.如权利要求10所述的透明显示系统的控制方法，还包括：
分别整合该至少一对内位置信息及该至少一对外位置信息，以分别获得至少一对内相对位置信息及至少一对外相对位置信息；
融合该至少一对内相对位置信息与该至少一对外相对位置信息，以获得至少一视线位置；以及
依据至少一视线位置，输出至少一显示信息至该透明显示器。
12.如权利要求10所述的透明显示系统的控制方法，其中该至少一检测信息包括多个对内检测信息及多个对外检测信息，该至少一辨识信息包括多个对内辨识信息及多个对外辨识信息。
13.如权利要求12所述的透明显示系统的控制方法，其中该资源配置包括以不同帧率取得这些对内辨识信息、以不同帧率取得这些对外辨识信息。
14.如权利要求12所述的透明显示系统的控制方法，其中该资源配置包括仅对部分的这些对内辨识信息进行辨识、仅对部分的这些对外辨识信息进行辨识。
15.如权利要求10所述的透明显示系统的控制方法，其中该至少一检测信息包括多个广角检测信息，该至少一辨识信息包括多个广角辨识信息，各该广角检测信息涵盖到该透明显示器的前方与该透明显示器的前方，各该广角辨识信息涵盖到该透明显示器的前方与该透明显示器的前方。
16.如权利要求15所述的透明显示系统的控制方法，其中该资源配置包括以不同帧率取得这些广角辨识信息。
17.如权利要求10所述的透明显示器的控制方法，其中该至少一检测信息包括对内检测信息及对外检测信息，该至少一辨识信息包括对内辨识信息及对外辨识信息，该对内检测信息的解析度低于该对内辨识信息的解析度，该对外检测信息的解析度低于该对外辨识信息的解析度，该资源配置包括仅对该对内辨识信息的部分区域进行辨识、仅对该对外辨识信息的部分区域进行辨识。
18.如权利要求10所述的透明显示系统的控制方法，其中该至少一检测信息包括对内检测信息及对外检测信息，该至少一辨识信息包括对内辨识信息及对外辨识信息，该对内检测信息的解析度低于该对内辨识信息的解析度，该对外检测信息的解析度低于该对外辨识信息的解析度，该对内检测信息的检测范围不同于该对内辨识信息的取像范围，该对外检测信息的检测范围不同于该对外辨识信息的取像范围。
19.一种控制装置，包括：
检测单元，用以依据至少一检测信息检测透明显示器前的至少一使用者及该透明显示器后的至少一目标物件；
资源配置单元，用以依据该至少一检测信息的检测结果，获得资源配置；以及
辨识单元，该信息提取组件依据该资源配置取得至少一辨识信息，该辨识单元并依据该资源配置辨识出该至少一使用者的至少一对内位置信息及至少一目标物件的该至少一对外位置信息。
CN202111392198.9A 2020-11-20 2021-11-19 透明显示系统及其控制方法与控制装置 Pending CN114518921A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US202063116166P 2020-11-20 2020-11-20
US63/116,166 2020-11-20

Publications (1)

Publication Number Publication Date
CN114518921A true CN114518921A (zh) 2022-05-20

Family

ID=81597014

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111392198.9A Pending CN114518921A (zh) 2020-11-20 2021-11-19 透明显示系统及其控制方法与控制装置

Country Status (3)

Country Link
US (1) US11908158B2 (zh)
CN (1) CN114518921A (zh)
TW (3) TWI790738B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI819885B (zh) * 2022-11-07 2023-10-21 鴻華先進科技股份有限公司 動暈症誘發提示方法

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008147355A1 (en) 2007-05-29 2008-12-04 Cognex Technology And Investment Corporation 3d assembly verification from 2d images
TW201314629A (zh) * 2011-09-23 2013-04-01 Gen-Cher Lee 抗搖晃之視覺轉換方法、系統及其應用之電子裝置
TW201428324A (zh) 2013-01-15 2014-07-16 Univ Nat Taipei Technology 基於人體紅外線感測器之室內位置偵測系統
KR102130797B1 (ko) 2013-09-17 2020-07-03 엘지전자 주식회사 이동 단말기 및 그것의 제어방법
US9892493B2 (en) 2014-04-21 2018-02-13 Texas Instruments Incorporated Method, apparatus and system for performing geometric calibration for surround view camera solution
TWM499576U (zh) * 2014-12-02 2015-04-21 qing-wen Chen 具自動影像校正之照相模組之手持式電子裝置
US10659279B2 (en) * 2016-10-04 2020-05-19 Htc Corporation Method and device for displaying video corresponding to physical object
TWI633336B (zh) * 2017-02-24 2018-08-21 宏碁股份有限公司 頭戴式顯示器、其視野校正方法以及混合實境顯示系統
CN107168008B (zh) * 2017-06-27 2021-06-08 银河威尔科技（北京）有限公司 一种消除晕眩感的3Dvr摄影机的校正方法和装置
CN109388233B (zh) 2017-08-14 2022-07-29 财团法人工业技术研究院 透明显示装置及其控制方法
CN107398069A (zh) 2017-09-08 2017-11-28 骆毅 一种大屏幕电视有奖体感游戏机
TWI636381B (zh) 2017-10-19 2018-09-21 財團法人工業技術研究院 互動顯示系統及互動顯示控制方法
TWI633465B (zh) * 2017-11-21 2018-08-21 瑞軒科技股份有限公司 虛擬實境裝置及虛擬實境裝置的操作方法
TWI702531B (zh) * 2017-11-29 2020-08-21 財團法人工業技術研究院 影像資訊顯示方法、影像資訊顯示系統與顯示器
US10732919B2 (en) 2018-06-19 2020-08-04 Dell Products, L.P. Method and apparatus for determining treatment of cross-screen content for a dual segmented display
KR102090995B1 (ko) 2018-08-01 2020-03-19 주식회사 브래니 다중 vr게임 장치 연동 보상 지급 시스템
TWI734024B (zh) 2018-08-28 2021-07-21 財團法人工業技術研究院 指向判斷系統以及指向判斷方法
TWI669703B (zh) 2018-08-28 2019-08-21 財團法人工業技術研究院 適於多人觀看的資訊顯示方法及資訊顯示裝置
TWI718410B (zh) * 2018-09-14 2021-02-11 財團法人工業技術研究院 目標物資訊的預載顯示方法及裝置
TWI776025B (zh) * 2018-10-09 2022-09-01 先進光電科技股份有限公司 全景影像系統和駕駛輔助系統
US11100604B2 (en) 2019-01-31 2021-08-24 Advanced Micro Devices, Inc. Multiple application cooperative frame-based GPU scheduling
CN112346558A (zh) * 2019-08-06 2021-02-09 苹果公司 眼睛跟踪系统
EP3800581A1 (en) 2019-10-03 2021-04-07 Axis AB A method and apparatus for generating an object classification for an object

Also Published As

Publication number Publication date
TWI817214B (zh) 2023-10-01
TWI790738B (zh) 2023-01-21
US11908158B2 (en) 2024-02-20
TW202236083A (zh) 2022-09-16
TW202221468A (zh) 2022-06-01
TWI817256B (zh) 2023-10-01
TW202221466A (zh) 2022-06-01
US20220164979A1 (en) 2022-05-26

Similar Documents

Publication Publication Date Title
US11682225B2 (en) Image processing to detect a rectangular object
EP2941736A1 (en) Mobile device based text detection and tracking
KR20160057867A (ko) 디스플레이 장치 및 그에 의한 이미지 처리 방법
US10574904B2 (en) Imaging method and electronic device thereof
CN112669344A (zh) 一种运动物体的定位方法、装置、电子设备及存储介质
US20160379079A1 (en) System, apparatus, method, and computer readable storage medium for extracting information
CN111539311A (zh) 基于ir和rgb双摄的活体判别方法、装置及系统
WO2022134957A1 (zh) 摄像头遮挡检测方法及系统、电子设备及存储介质
CN112749613A (zh) 视频数据处理方法、装置、计算机设备及存储介质
US10861169B2 (en) Method, storage medium and electronic device for generating environment model
KR20210030060A (ko) 얼굴 영상 기반의 이벤트 모니터링 시스템 및 방법
CN114518921A (zh) 透明显示系统及其控制方法与控制装置
US10198842B2 (en) Method of generating a synthetic image
US10965858B2 (en) Image processing apparatus, control method thereof, and non-transitory computer-readable storage medium for detecting moving object in captured image
EP3757945A1 (en) Device for generating an augmented reality image
US20220309444A1 (en) System, method and apparatus for detecting article store or retrieve operations
US20210084223A1 (en) Apparatus and methods for camera selection in a multi-camera
CN203894772U (zh) 一种海量人脸发现与识别系统
KR20120082319A (ko) 윈도우 형태의 증강현실을 제공하는 장치 및 방법
Sutopo et al. Appearance-based passenger counting in cluttered scenes with lateral movement compensation
KR100827133B1 (ko) 이동 통신 단말기에서 3차원 입체 영상을 판별하기 위한방법 및 장치
CN113378705B (zh) 车道线检测方法、装置、设备及存储介质
CN113012211A (zh) 图像采集方法、装置、系统、计算机设备及存储介质
US10984536B2 (en) Motion detection in digital images and a communication method of the results thereof
CN110728275B (zh) 车牌识别方法、装置及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination