CN113261052A - 信息显示系统以及信息显示方法 - Google Patents

信息显示系统以及信息显示方法 Download PDF

Info

Publication number
CN113261052A
CN113261052A CN202080008025.XA CN202080008025A CN113261052A CN 113261052 A CN113261052 A CN 113261052A CN 202080008025 A CN202080008025 A CN 202080008025A CN 113261052 A CN113261052 A CN 113261052A
Authority
CN
China
Prior art keywords
user
wall surface
display
display content
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202080008025.XA
Other languages
English (en)
Inventor
松本隆史
五十岚雄哉
山崎元明
白石理人
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shimizu Construction Co Ltd
Shimizu Corp
Original Assignee
Shimizu Construction Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shimizu Construction Co Ltd filed Critical Shimizu Construction Co Ltd
Publication of CN113261052A publication Critical patent/CN113261052A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G06F3/0425Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means using a single imaging device like a video camera for tracking the absolute position of a single or a plurality of objects with respect to an imaged reference surface, e.g. video camera imaging a display or a projection screen, a table or a wall surface, on which a computer generated image is displayed or projected
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06KGRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K7/00Methods or arrangements for sensing record carriers, e.g. for reading patterns
    • G06K7/10Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
    • G06K7/14Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation using light without selection of wavelength, e.g. sensing reflected white light
    • G06K7/1404Methods for optical code recognition
    • G06K7/1408Methods for optical code recognition the method being specifically adapted for the type of code
    • G06K7/14131D bar codes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06KGRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K7/00Methods or arrangements for sensing record carriers, e.g. for reading patterns
    • G06K7/10Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
    • G06K7/14Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation using light without selection of wavelength, e.g. sensing reflected white light
    • G06K7/1404Methods for optical code recognition
    • G06K7/1408Methods for optical code recognition the method being specifically adapted for the type of code
    • G06K7/14172D bar codes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/001Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/363Graphics controllers
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/38Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory with means for controlling the display position
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00Aspects of interface with display user
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2380/00Specific applications
    • G09G2380/06Remotely controlled electronic signs other than labels

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Electromagnetism (AREA)
  • Toxicology (AREA)
  • Artificial Intelligence (AREA)
  • Multimedia (AREA)
  • Computer Graphics (AREA)
  • Controls And Circuits For Display Device (AREA)
  • User Interface Of Digital Computer (AREA)
  • Signal Processing (AREA)

Abstract

辨识用户的位置。显示部(102)使显示内容框(112)显示。判定部(103)判定用户的位置是否位于相距墙面(12)而预定的范围内。显示控制部(104)在用户的位置相距墙面以超过预定的范围的方式远离的情况下,使显示内容框显示在地面(11)上,在用户的位置位于相距墙面而预定的范围内的情况下,使显示内容框以从地面向墙面架起的方式进行显示,并且显示接受来自用户的操作输入的操作输入区域(113)。

Description

信息显示系统以及信息显示方法
技术领域
本发明涉及信息显示系统以及信息显示方法。本申请要求2019年1月8日在日本申请的特愿2019-001246号的优先权,其内容援引于此。
背景技术
通过将墙面整体作为屏幕使用,能够显示从远离的位置也能够辨识的信息或影像。电影屏幕就是其原始的例子。近年来,将建筑物的外墙作为信息显示器使用的媒体立面等被利用。在数字艺术装置等中,提出了在墙面绘画,能够与墙面的动态图像进行交互的表现方法和工具。电子白板工具等能够在物理空间内供多人交流,并且在电子白板的墙面描绘字符和绘画,同时将描绘于墙面的事项的记录电子数据化。在公共空间中,作为数字标牌,准备了交互式广告、基于触摸屏的信息终端等。在专利文献1中公开了将地图显示于地面的技术。
现有技术文献
专利文献
专利文献1:日本国特开2007-149053号公报。
发明内容
发明要解决的课题
在公共空间中,设想在一个空间内有多人,各人与墙面的位置关系也多种多样。在使用公共空间的墙面整体来提示信息的情况下,显示信息的尺寸以及供人与信息适当交互的手段根据交互显示墙面与人的距离而不同。尤其是其适当的关系性大致分为面向多人的信息和面向个人的信息等。即,关于面向离墙面一定距离以上的多人的信息,较大地使用墙面来提示信息时,多人的视觉辨认性较好。另一方面,在通过触摸操作等,信息和个人个别地进行交互的情况下,设想人位于以手能够到达墙面的程度而接近了墙面的场所。因此,即使字符、信息的显示尺寸较小,位于接近位置的人也能够视觉辨认。此外,存在面向多人而提供的大的信息和面向个人而提供的小的信息混杂于一个大的墙面的情况。在该情况下,希望提供,对位于远离墙面的场所的多人而言,能够明确地理解面向个人的信息的显示区域和被多人共享的信息的显示区域。
本发明的目的在于提供一种信息显示系统以及信息显示方法,以能够区别的方式显示在多人聚集的空间所提供的信息中的由多人共享的信息和面向个人的信息,能够改善多人和个人这二者的信息的获取性和操作性。
用于解决课题的手段
本发明的一个方式的信息显示系统具有:位置辨识部,辨识用户的位置;显示部,使显示内容框显示于与辨识出的所述用户的位置对应的地面和墙面的至少其中一个面的区域;判定部,判定所述用户的位置是否位于相距所述墙面而预定的范围内;显示控制部,基于所述判定部的判定结果,在所述用户的位置相距所述墙面以超过预定的范围方式远离的情况下,使所述显示内容框显示于所述地面;在所述用户的位置位于相距所述墙面而预定的范围内的情况下,使所述显示内容框的至少一部分显示于所述墙面,并且使接受来自所述用户的操作输入的操作输入区域显示于所述墙面。
本发明的一个方式的信息显示方法包括:辨识用户的位置的工序;使显示内容框显示于与辨识出的所述用户的位置对应的地面和墙面的至少其中一个面的区域的工序;判定所述用户的位置是否位于相距所述墙面而预定的范围内的工序;根据所述判定结果,在所述用户的位置相距所述墙面以超过预定的范围的方式远离的情况下,使所述显示内容框显示于所述地面,在所述用户的位置位于相距所述墙面而预定的范围内的情况下,使所述显示内容框的至少一部分显示于所述墙面,并且使接受来自所述用户的操作输入的操作输入区域显示于所述墙面的工序。
发明效果
根据本发明,若用户的位置靠近墙面,则以从地面向墙面架起的方式对显示内容框进行显示,墙面的显示内容框成为接受来自用户的操作输入的操作输入区域。由此,在多人聚集的空间,能够明确由多人共享的信息和面向个人的信息,各用户能够通过专用的操作输入进行操作。
附图说明
图1是表示本发明的一个实施方式所涉及的信息显示系统的概要的图。
图2是表示本发明的一个实施方式所涉及的信息显示系统中的控制装置的概要的框图。
图3A是用户的位置和显示内容框的关系的说明图。
图3B是用户的位置和显示内容框的关系的说明图。
图4是将显示内容框用作每个用户的应用程序的操作界面的例子的说明图。
图5是将显示内容框用于每个用户的信息的输入操作时的说明图。
图6是将显示内容框的大小进行放大或缩小时的操作的说明图。
图7A是显示内容框的整合的说明图。
图7B是显示内容框的整合的说明图。
图8是表示本发明的一个实施方式所涉及的信息显示系统中的处理的流程图。
图9是表示本发明的一个实施方式所涉及的信息显示系统中的处理的流程图。
图10是表示本发明所涉及的信息显示系统的基本结构的概略框图。
具体实施方式
以下参照附图说明本发明的实施方式。图1是表示本发明的一个实施方式所涉及的信息显示系统的概要的图。本实施方式的信息显示系统能够应用于被多人利用的空间。信息显示系统能够应用于例如车站(候车所、候车室、大厅等)、机场、公园、商业设施、建筑物入口、人行道、博物馆、医院、公共设施、活动场所等。在图1中,示出了用于多人聚集的车站(例如车站的候车所)的例子。
在图1中,车站的候车所的空间10至少有地面11和墙面12。地面11及墙面12的整体或至少一部分区域能够用作显示面。地面11及墙面12被投影仪、LED(Light EmittingDiode,发光二极管)模块等投影基于影像信号的图像,由此能够实现作为显示面的功能。关于在地面11、墙面12的附近用户是否进行了操作输入的动作,能够通过相机15、运动传感器来检测。除了相机15、运动传感器外,也可以使用3D扫描仪、触摸传感器等来检测用户的操作输入动作。
设置有能够拍摄车站的候车所的整个空间10或至少地面11和墙面12的相机15。相机15拍摄访问空间10的各用户50-1、50-2、50-3的位置、动作。并且,也可以是设置检测各用户50-1、50-2、50-3的位置、动作的3D扫描仪,从3D扫描仪获取关于各用户的位置、动作的信息的结构。
车站的候车所的空间10具备控制装置20。控制装置20对扫描仪或LED模块提供影像信号。扫描仪或LED模块将基于从控制装置20提供的影像信号而生成的图像投影(显示)于地面11、墙面12。图像包括绘画、字符信息。
在图1中,地面11及墙面12被用作能够提供由访问空间10的多个用户50-1、50-2、50-3共享的信息的区域。本例中,在墙面12显示各图像31-1、31-2。各图像31-1、31-2能够从任意的用户50-1、50-2、50-3视觉辨认,能够用作各用户共享的信息。这样的共享的信息优选以位于远离墙面12的位置的用户能够视觉辨认的位置、大小来显示。例如,关于共享的信息,是在墙面12上距离地面11一定以上的高度,从视觉辨认性的观点来看,优选使图像的显示尺寸为一定程度的大小。在地面11显示多个图像32-1、32-2、32-3。各图像32-1、32-2、32-3对于用户50-1、50-2、50-3均可视觉辨认,能够用作共享的信息。关于在地面11上显示的共享的信息,位于相距地面11上显示的位置以一定程度远离的位置的用户也能够视觉辨认。
关于访问车站的候车所的空间10的各用户50-1、50-2、50-3的位置、动作的信息能够通过对相机15的拍摄图像进行图像辨识而获取。相机15通过拍摄地面11而生成包括各用户50-1、50-2、50-3的拍摄图像。控制装置20根据拍摄图像来检测各用户50-1、50-2、50-3在地面的位置。控制装置20根据检测出的位置,在各用户50-1、50-2、50-3的脚下显示表示检测出各用户50-1、50-2、50-3的显示内容框60-1、60-2、60-3。通过将显示内容框60显示于与用户对应的位置,能够明确显示是针对各用户分配的与用户个人对应的信息。这样,能够明确区分地显示共享的信息和面向个人的信息。因此,对于用户而言,能够简单地掌握是面向自己的信息还是面向一般的共享信息。在此,可以在各用户50-1、50-2、50-3全员的脚下显示显示内容框,也可以至少在一人用户的脚下进行显示。
显示内容框60-1、60-2、60-3可以是圆环形、矩形的框,也可以是虚线。显示内容框60-1、60-2、60-3也可以是用线包围对象用户那样的图形。可以用任意的颜色显示(涂抹)显示内容框的内周侧。显示内容框60-1、60-2、60-3可以是动物、植物等的角色(character),也可以是字符等。
例如,在显示内容框60-1中,作为针对位于显示内容框60-1内的用户50-1的面向个人的信息,以从显示内容框60-1的外周起而延伸的方式显示箭头,并在显示内容框60-1内的用户50-1的正面侧显示表示目的地的字符串(符号60-1a)。由此,能够将显示内容框60-1的用户50-1引导至目的地。在显示内容框60-2中,作为针对显示内容框60-2内的用户50-2的面向个人的信息,在显示内容框60-2的用户50-2的正面侧并排显示字符串和公共汽车的图标。由此,能够针对显示内容框60-2的用户50-2提供关于公共汽车的信息。这样,显示内容框可以显示针对各用户而个性化的组合了箭头、字符、图标等的指南显示被一体化或组合后的图像。
各用户50-1、50-2、50-3在地面11上移动时,相机15拍摄包括移动的用户的地面11,检测各用户50-1、50-2、50-3在地面11上的位置。控制装置20根据从相机15得到的用户的位置,将显示内容框60-1、60-2、60-3以追随于与各用户50-1、50-2、50-3的位置对应的位置的方式显示于地面11。用户50-1、50-2、50-3靠近墙面12到预定距离以内时,在地面11上显示的内容框60-1、60-2、60-3以至少一部分从地面11向墙面12架起(日文:架かる),并延伸到墙面12的方式进行显示。图1中,控制装置20判定用户50-3靠近到相距墙面12预定距离以内这一情况,由此,控制装置20将显示内容框60-3以从地面11向墙面12架起并延伸到墙面12的方式进行显示。
在图1中,示出了多个用户50-1、50-2、50-3,但是在以下的说明中,在不区别用户50-1、50-2、50-3的情况下,有时简单记载为用户50。多个显示内容框60-1、60-2、60-3是与多个用户50-1、50-2、50-3的数量对应的数量,但是,在以下的说明中,在不区别显示内容框60-1、60-2、60-3的情况下,有时简单记载为显示内容框60。关于多个图像31-1、31-2及图像32-1、32-2、32-3,在不区别图像的情况下,在以下的说明中,有时简单记载为图像31及图像32。
向地面11及墙面12的图像的投影单元不限于投影仪、LED模块等,也可以使用其他装置或模块。本实施方式中,优选在显示面没有影。当向地面11投影图像时,难以受到对地面11的加重(日文:加重)、地面11的磨损的影响的投影单元是优选的。地面11、墙面12的各显示面可以分离。关于能够维持一个显示内容框的连续性而显示这点,优选地面11和墙面12的各显示面相接。地面11和墙面12的角度可以垂直,也可以是边界部分弯曲的连续面。
图2是表示本实施方式涉及的信息显示系统的控制装置20的概要的框图。如图2所示,控制装置20包括CPU(Central Processing Unit:中央处理单元)21、ROM(Read OnlyMemory:只读存储器)22、RAM(Random Access Memory:随机存取存储器)23、存储装置24和通信部25而构成。CPU21解释指令并执行。ROM22中存储有引导程序。RAM23用作主存储器。存储装置24包括HDD(Hard Disk Drive:硬盘驱动器)、SSD(Solid State Drive:固态驱动器)而构成,存储OS(Operating System:操作系统)、应用程序、数据。
控制装置20与显示部26、运动传感器27和相机15连接。显示部26例如是扫描仪或者LED模块,在地面11、墙面12的整个面或一部分区域显示图像。相机15拍摄地面11、墙面12,根据拍摄结果进行图像处理,由此,检测拍摄区域中存在的用户50的运动,将检测结果输出至控制装置20。控制装置20通过显示部26将从相机15输入的与检测出用户50的运动的结果对应的图像显示于地面11、墙面12。
在本实施方式中,能够根据相机15的拍摄结果,检测用户50的运动。用户50的运动也可以使用运动传感器27来检测。运动传感器27射出红外线或激光等预定波长的光,并接受被出射的反射光,由此检测周围存在的物体。运动传感器27根据检测物体而得的检测结果,检测物体的运动。运动传感器27将检测物体而得的检测结果、检测物体的运动而得的结果输出至CPU21。运动传感器27安装在例如空间10的天花板或天花板附近的墙面。在使用这样的相机15、运动传感器27的情况下,均能够获取用户50所在的位置,例如与地面接触的位置、用户50与墙面不接触时用户相对于墙面以怎样程度接近、用户与墙面接触时用户50触摸墙面的场所。在使用相机15、运动传感器的情况下,能够实现基于用户50的移动或用户50向墙和表示区域的接近程度的状况的判断、基于用户所进行的触摸显示面的明确的操作等的交互。除了相机15、运动传感器27外,也可以基于3D扫描仪的检测结果来检测用户50的运动。在墙面12设置了触摸面板时,能够直接检测是否进行了触摸操作,因此检测精度提高。
控制装置20作为解析相机15的拍摄画面来辨识用户50的位置的位置辨识部而发挥功能。辨识拍摄图像中包括的用户50的处理可以由相机15进行,也可以由控制装置20进行。
显示部26例如是扫描仪或LED模块。显示部26在与辨识出的用户50的位置对应的地面11(水平方向面)和墙面12(垂直方向面)的任意区域,对显示内容框60进行显示(投影)。地面不限于水平方向的面,包括倾斜的面。墙面不限于垂直方向的面,包括倾斜的面。地面和墙面只要是能够对显示内容框进行显示的面即可,也可以是弯曲的面。
控制装置20作为判定用户50的位置是否位于离墙面12预定的范围内的判定部和根据判定部的判定结果来控制显示内容框60的显示控制部而发挥功能。控制装置20在用户50的位置相距墙面12而比预定的范围更远的情况下,使显示内容框60显示于地面11。控制装置20在判定为用户50的位置位于相距墙面12预定的范围内的情况下,通过显示部26,使显示内容框60以从地面11向墙面12架起的方式进行显示,并且使接受来自用户50的操作输入的操作输入区域70显示于墙面12。
控制装置20作为对相机15的拍摄画面进行解析而检测用户50的动作的动作检测部而发挥功能。控制装置20作为根据用户50的动作使显示内容框60的显示方式改变的显示控制部而发挥功能。更具体而言,控制装置20作为进行显示内容框60的放大和缩小、与其他用户50的显示内容框的合并等的显示控制部而发挥功能。
控制装置20作为显示控制部而发挥功能,该显示控制部根据检测到多个用户50的动作的检测结果,针对进行了表示共享的动作的多个用户50,使显示分配给多个用户50的显示内容的个别的区域作为一个共享区域而显示于显示部26。
控制装置20作为在显示部26中使包括机器读取码62(参照图5)的显示内容框60在墙面12显示的显示控制部而发挥功能。机器读取码能够由用户50的终端装置63拍摄而读取。通信部25作为在接收到从读取了机器读取码的终端装置发送的机器读取码时,将与包括机器读取码的显示内容关联的信息发送至终端装置63的通信部而发挥功能。
图3A和图3B是说明用户50的位置和显示内容框的关系的图。如图3A所示,当用户50在地面11的位置与墙面12之间的距离L1比预定距离长的的情况下,显示内容框60以包围用户50的脚下的方式显示于地面11。距离L1的预定距离是用户50用手接触到墙面12这样的距离。距离L1的预定距离能够设定例如数10cm左右到1m左右的范围的任意的距离。例如,控制装置20检测用户50在地面11的位置到墙面12的距离。
如图3B所示,用户50的位置与墙面12之间的距离L2比预定距离短时,控制装置20将显示内容框以从地面11向墙面12架起的方式进行显示。显示内容框60中显示于墙面12的部分被用作用户50以个人方式进行交互的操作输入区域70。操作输入区域70在墙面12中的上端的高度,例如可以以按照检测出的用户50的身高,与易于使手伸展到墙面12而进行操作的高度相同或者成为超过其一定以上的高度的方式进行显示。由此,用户50不需要为了在显示内容框60内进行操作而蹲下或跳起。
图4是说明将操作输入区域70用作每个用户50的应用程序的操作界面的例的图。如图4所示,操作输入区域70中显示有图标61。用户50触摸操作输入区域70上的图标61时,所希望的应用程序启动,并在操作输入区域70上显示。在图4中,作为图标61,将公共汽车的图标投影于操作输入区域70。
图5是说明将操作输入区域70用于每个用户50的信息的输入操作时的图。如图5所示,操作输入区域70显示有机器读取码62。机器读取码62是条形码、二维条形码等能够通过拍摄装置读取的码。在图5中,机器读取码62表示二维条形码的例子。用户50通过自己的终端装置63拍摄机器读取码62。当用户50通过终端装置63拍摄机器读取码62时,终端装置63与控制装置20进行通信,与机器读取码62关联的信息显示于操作输入区域70。例如,控制装置20在检测到用户50对图4中的图标61进行了触摸操作的情况下,能够显示机器读取码62等显示与用户50的操作对应的信息。例如,控制装置20将分配给终端装置63的识别信息用作用户识别信息,由此,能够将用户识别信息与墙面12的操作输入区域70进行关联。如果能够确定用户识别信息,则也可以使用其他的实现手段。例如,用户识别信息和操作输入区域70的关联可以是将使用信标等的近距离通信的认证、来自相机的图像解析等进行组合而得的认证方法。
显示内容框60的大小可以通过操作操作输入区域70来进行放大和缩小。图6是说明对显示内容框60的大小进行放大和缩小时的操作的图。如图6所示,当用户50为了扩展操作输入区域70内而进行一边接触墙面12一边使操作输入区域70的右侧端部和左侧端部分别向外侧(彼此的距离远离的方向)扩展的动作时,控制装置20检测用户50的动作,根据用户50的动作来放大显示内容框60的宽度方向的大小。当用户50进行一边接触墙面12一边使操作输入区域70的右侧端部和左侧端部分别向内侧(彼此的距离靠近的方向)变窄的动作时,显示内容框60的宽度方向的大小不断缩小。在图6中,针对变更操作输入区域70的宽度方向的大小的情况进行了说明,但是,在用户50进行了将双手向上伸展,或将两腕向下拉伸这样的动作的情况下,控制装置20检测用户的动作,以使显示内容框60的高度方向的尺寸扩展或收缩的方式进行显示。在图6中,对用户50一边接触墙面12一边变更操作输入区域70的宽度方向的尺寸的情况进行了说明。作为其他的例子,也可以构成为,在用户50不触摸墙面12,也能够检测用户50的操作输入的情况下,接受为操作输入。
在旁边存在其他用户的情况下,如果放大显示内容框60,则有时相邻的用户50的显示内容框会重叠。在该情况下,可以整合显示内容框而作为一个显示内容框进行显示。图7A和图7B是说明显示内容框的整合的图。在该例中,对整合显示内容框60a和显示内容框60b而显示为一个显示内容框的情况进行说明。当位于墙面12的附近的用户50a和相邻的其他用户50b一边分别触摸分配给自己的显示内容框的右侧端部或左侧端部中的邻接的用户50所存在的一方的端部,一边将彼此的端部相接,以这样方式进行操作输入。控制装置20在检测到这样的操作输入时,控制装置20能够将以各显示内容框的端部彼此相接的方式进行了操作输入的各用户50各自的显示内容框,如图7B的符号60c所示那样,进行整合。关于显示内容框的整合,即使是3人以上的用户50的显示内容框也能够整合。
在墙面12,在分配给各用户50的操作输入区域70中显示针对多个用户50共通的内容的信息和不同内容的信息。
接着说明本实施方式涉及的信息显示方法。图8是表示本实施方式涉及的信息显示方法的流程图。
(步骤S1)用相机15拍摄空间内并检测空间内的对象。控制装置20在拍摄数据内检测到对象时,使处理前进至步骤S2。
(步骤S2)控制装置20判定检测出的对象是用户(人)还是障碍物。控制装置20在判定为检测出的对象不是人的情况下(否),控制装置20将对象辨识为障碍物,使处理返回步骤S1(步骤S3)。在对象是人的情况下(是),前进至步骤S4。
(步骤S4)位置辨识部101辨识用户50的位置。位置辨识部101确定用户50相对于地面11和墙面12的位置。如果位置辨识部101确定了用户50的位置,使处理前进至步骤S5。
(步骤S5)控制装置20向显示部发送用于在与由位置辨识部101辨识出的用户50的位置对应的地面11(水平方向面)和墙面12(垂直方向面)至少其中一个面的区域显示显示内容框的信号。例如,由于用户50站在地面11上,所以在地面11上显示显示内容框。显示部26基于接收到的信号,向用户50的脚下的地面11投影显示内容框。接着,使处理前进至步骤S6。
(步骤S6)控制装置20判定在步骤S4确定的用户50的位置是否位于相距墙面12而预定的范围内。相距墙面12预定的范围是例如用户50从用户50站着的位置将手向墙面12伸展时,用户50的手能够接触墙面12的范围。控制装置20在判定出用户50的位置位于相距墙面12预定的范围内的情况下(是),前进至步骤S7。控制装置20在判定出用户50的位置位于相距墙面12而预定的范围外的情况下(否),前进至步骤S8。
(步骤S7)在用户50的位置位于相距墙面12而预定的范围内的情况下,使显示内容框的至少一部分显示于墙面12,且在墙面显示接受来自用户50的操作输入的操作输入区域。所显示的操作输入区域的细节后面说明。
(步骤S8)当用户50的位置相距墙面12而以超过预定的范围的方式远离时,控制装置20向显示部26发送信号,显示部26向用户50的脚下的地面11投影显示内容框并显示。
控制装置20在步骤S7和步骤S8后,返回步骤S4,重复步骤S4至S8的处理直到用户50的位置被辨识为地面11外为止。
图9是表示本发明的实施方式涉及的信息显示系统的具体的处理例的流程图。
(步骤S101)控制装置20解析相机15的拍摄图像,检测车站的候车所的空间10内的对象。如果检测到对象,控制装置20使处理前进至步骤S102。
(步骤S102)控制装置20判别检测到的对象是否是人。如果控制装置20判别为检测到的对象不是人(步骤S102:否),则控制装置20使处理前进至步骤S103。如果控制装置20判别为检测到的对象是人(步骤S102:是),则使处理前进至步骤S104-1。
(步骤S103)如果检测到的对象不是人,则控制装置20将对象辨识为障碍物,使处理返回步骤S101。
(步骤S104-1)检测到的对象是人的情况下,控制装置20将人辨识为用户,并辨识用户50的位置(辨识用户的位置的工序)。例如,控制装置20解析相机15的拍摄画面,辨识用户50相对于地面11的位置。之后,使处理前进至步骤S104-2。
(步骤S104-2)在与步骤S104-1中辨识出的用户50的位置对应的地面11和墙面12的至少其中一个面的区域,显示显示内容框(使显示内容框显示的工序)。例如,控制装置20向显示部26发送信号,该信号用于以包围所检测到的用户50的脚下的方式使显示内容框60显示于地面11。显示部26基于接收到的信号,向用户50的脚下的地面11投影显示内容框。之后,使处理前进至步骤S105。
(步骤S105)控制装置20判定检测到的用户50的位置是否是墙面12的附近(判定用户的位置是否位于相距墙面而预定的范围内的工序)。如果判定为检测到的用户50正在靠近至墙面12的附近(步骤S105:是),则控制装置20使处理前进至步骤S106-1。如果判定为检测到的用户50的位置不是墙面12的附近(步骤S105:否),则控制装置20使处理返回步骤S104-1。在用户50移动的情况下,重复步骤S104-1、步骤S104-2、步骤S105的循环,显示内容框60追随于用户50的运动而运动。
(步骤S106-1)控制装置20解析相机15的拍摄画面,辨识用户50相对于墙面12的位置。之后,使处理前进至步骤S106-2。
(步骤S106-2)控制装置20使显示内容框60以从地面11向墙面12架起的方式伸展到墙面12而进行显示(使显示内容框显示的工序)。之后,使处理前进至步骤S107。
(步骤S107)控制装置20启动将显示内容框60中被显示于墙面12的部分作为操作输入区域70的应用程序,使处理前进至步骤S108(使操作输入区域显示的工序)。
(步骤S108)控制装置20判定是否存在接触了墙面12的操作。如果判定为用户50接触墙面12的操作存在(步骤S108:是),控制装置20使处理前进至步骤S109,如果判定为操作不存在(步骤S108:否),则使处理返回步骤S105。
(步骤S109)控制装置20判定用户50接触墙面12的操作是否是操作输入区域70内的触摸操作。如果控制装置20判定为是操作输入区域70内的触摸操作(步骤S109:是),则使处理前进至步骤S110。如果控制装置20判定为操作输入区域70内的触摸不存在(步骤S109:否),使处理前进至步骤S111。
(步骤S110)控制装置20进行与触摸操作对应的应用程序的处理,使处理返回步骤S108。
(步骤S111)控制装置20判定是否是操作输入区域70的滑动操作。如果判定为是操作输入区域70的滑动操作(步骤S111:是),控制装置20使处理前进至步骤S112。如果判定为不是操作输入区域70的滑动操作(步骤S111:否),控制装置20使处理前进至步骤S113。
(步骤S112)控制装置20根据滑动操作,将显示内容框60放大或缩小,使处理返回步骤S108。
(步骤S113)控制装置20判定有无用户50的移动。基于时间序列的相机15的拍摄结果,判定有无用户50的移动。用户50的移动量为预定量以上时(是),控制装置20前进至步骤S114的处理。控制装置20在判定为用户50的移动量为预定量以下时(否),控制装置20返回步骤S108的处理。
(步骤S114)用户50的移动量为预定量以内时,保持应用上的作业。在步骤S114中,关于用户50的移动量的预定量的范围,例如也可以将用户50沿着墙面12移动而与墙面12的距离大致不变的情况判定为预定量的范围内的移动。即,用户50不改变相对于墙面12的距离而在用户50的左右方向上移动的情况下,以用户50能够继续进行应用程序的触摸操作的方式,使显示内容框显示于墙面12。此外,用户50的移动量为预定量以内时,也可以根据用户50的移动,对显示内容框的显示位置进行微调整。
如以上所说明的,在本实施方式中,如果在空间10内检测到用户50,则在用户50的脚下的地面11显示显示内容框60,该显示内容框60表示被检测出的用户50正在被。如果用户50的位置靠近墙面12,则将显示内容框60以从地面11向墙面12架起的方式进行显示,显示内容框60中延伸至墙面12的部分成为接受来自用户50的操作输入的操作输入区域70。由此,能够在多人聚集的空间10内的墙面12、地面11上,明确地显示被共享的信息和面向个人的信息。能够将操作输入区域70作为操作对象的范围,个人用户50通过专用的操作输入进行操作。能够明确被共享的信息和面向个人的信息,因此对于字符的大小、显示的大小也能够与对象用户50相符合地适当地进行控制。例如,用户50的位置越靠近墙面12,则可以越小地显示字符。在该情况下,在用户50位于从墙面12远离的位置的情况下,大的字符易于视觉辨认,在位于靠近墙面12的位置的情况下,即使是小的字符也能够视觉辨认。
图10是表示本发明的信息显示系统的基本结构的概略框图。本实施方式涉及的信息显示系统将位置辨识部101、显示部102、判定部103和显示控制部104作为基本结构而包含。位置辨识部101辨识用户111的位置。显示部102使显示内容框112显示于与辨识出的用户111的位置对应的水平方向面106和垂直方向面105的至少其中一个的区域。判定部103判定用户111的位置是否位于相距垂直方向面105而预定的范围内。显示控制部104根据判定部103的判定结果,在用户111的位置相距垂直方向面105以超过预定的范围的方式远离的情况下,使显示内容框112显示于水平方向面106。显示控制部104在用户的位置位于相距垂直方向面105而预定的范围内的情况下,使显示内容框112以从水平方向面106向垂直方向面105架起的方式进行显示,并且使接受来自用户111的操作输入的操作输入区域113显示于垂直方向面105。
上述的实施方式的信息显示系统的全部或一部分也可以由计算机来实现。在该情况下,也可以将用于实现该功能的程序记录于计算机可读记录介质,将记录介质中记录的程序读取到计算机系统并执行从而实现。此处所说的“计算机系统”包括OS、外围设备等硬件。“计算机可读记录介质”是指软盘、磁光盘、ROM、CD-ROM等可携带介质、计算机系统内置的硬盘等存储装置。“计算机可读记录介质”也包括经由因特网等网络、电话线路等通信线路发送程序时的通信线那样,在短时间的期间动态地保持程序的记录介质、如该情况下成为服务器、客户机的计算机系统内部的非易失性存储器那样,将程序保存一定时间的记录介质。上述程序也可以是用于实现所述的功能的一部分的程序。上述程序也可以通过与计算机系统中已经记录的程序的组合来实现所述的功能的程序。上述程序也可以是使用FPGA等可编程逻辑器件来实现的程序。
至此,参照附图详细说明了该发明的实施方式,但是具体的结构并不限于该实施方式,也包括在不脱离该发明的主旨的范围的设计等。
工业上的可利用性
能够提供一种信息显示系统以及信息显示方法,其以能够区别的方式显示在多人聚集的空间所提供的信息中的由多人共享的信息和面向个人的信息,能够改善多人和个人这二者的信息的获取性和操作性。
标号说明
11…地面、12…墙面、15…相机、20…控制装置、25…通信部、26…显示部、60(60-1、60-2、60-3)…显示内容框、70…操作输入区域。

Claims (7)

1.一种信息显示系统,具备:
位置辨识部,辨识用户的位置;
显示部,使显示内容框显示于与辨识出的所述用户的位置对应的地面和墙面的至少其中一个面的区域;
判定部,判定所述用户的位置是否位于相距所述墙面而预定的范围内;以及
显示控制部,基于所述判定部的判定结果,在所述用户的位置相距所述墙面以超过预定的范围的方式远离的情况下,使所述显示内容框显示于所述地面;在所述用户的位置位于相距所述墙面而预定的范围内的情况下,使所述显示内容框的至少一部分显示于所述墙面,并且使接受来自所述用户的操作输入的操作输入区域显示于所述墙面。
2.根据权利要求1所述的信息显示系统,其中,
所述显示控制部在所述用户的位置位于相距所述墙面而预定的范围内的情况下,使所述显示内容框以从所述地面向所述墙面架起的方式进行显示,或者,使所述显示内容框的区域整体显示于垂直方向面,并且使接受来自所述用户的操作输入的操作输入区域显示于所述墙面。
3.根据权利要求1或2所述的信息显示系统,其中,
所述信息显示系统具有检测所述用户的动作的动作检测部,
所述显示控制部根据所述用户的动作改变所述显示内容框的显示方式来显示。
4.根据权利要求1至3中任一项所述的信息显示系统,其中,
所述显示控制部使所述显示部将包含机器读取码的显示内容框显示于所述墙面,
所述信息显示系统具有通信部,该通信部在接收从读取了所述机器读取码的终端装置发送的机器读取码时,将与包括所述机器读取码的显示内容框关联的信息发送至所述终端装置。
5.根据权利要求3或4所述的信息显示系统,其中,
在检测出的所述用户为多个的情况下,所述显示控制部根据检测出多个所述用户的各动作的检测结果,针对进行了表示共享的动作的多个所述用户,使所述显示部将显示被分配给多个所述用户的显示内容框的个别区域作为一个共享区域进行显示。
6.根据权利要求1至5中任一项所述的信息显示系统,其中,
所述显示控制部使所述显示部在所述墙面将被分配给所述用户的显示内容框、和显示对多个所述用户而共通的信息的显示内容框显示于不同的显示区域。
7.一种信息显示方法,包括:
辨识用户的位置的工序;
使显示内容框显示于与辨识出的所述用户的位置对应的地面和墙面的至少其中一个面的区域的工序;
判定所述用户的位置是否位于相距所述墙面而预定的范围内的工序;以及
根据判定出的所述结果,在所述用户的位置相距所述墙面以超过预定的范围的方式远离的情况下,使所述显示内容框显示于所述地面;在所述用户的位置位于相距所述墙面而预定的范围内的情况下,使所述显示内容框的至少一部分显示于所述墙面,并且使接受来自所述用户的操作输入的操作输入区域显示于所述墙面的工序。
CN202080008025.XA 2019-01-08 2020-01-06 信息显示系统以及信息显示方法 Pending CN113261052A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2019-001246 2019-01-08
JP2019001246A JP7244279B2 (ja) 2019-01-08 2019-01-08 情報表示システム及び情報表示方法
PCT/JP2020/000044 WO2020145232A1 (ja) 2019-01-08 2020-01-06 情報表示システム及び情報表示方法

Publications (1)

Publication Number Publication Date
CN113261052A true CN113261052A (zh) 2021-08-13

Family

ID=71521621

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202080008025.XA Pending CN113261052A (zh) 2019-01-08 2020-01-06 信息显示系统以及信息显示方法

Country Status (5)

Country Link
US (1) US11954241B2 (zh)
JP (1) JP7244279B2 (zh)
CN (1) CN113261052A (zh)
SG (1) SG11202107436UA (zh)
WO (1) WO2020145232A1 (zh)

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4771147B2 (ja) 2005-10-24 2011-09-14 清水建設株式会社 道案内システム
JP2016009214A (ja) 2014-06-20 2016-01-18 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
WO2016103543A1 (ja) 2014-12-25 2016-06-30 パナソニックIpマネジメント株式会社 投影装置
US10122976B2 (en) * 2014-12-25 2018-11-06 Panasonic Intellectual Property Management Co., Ltd. Projection device for controlling a position of an image projected on a projection surface
JP6613458B2 (ja) 2014-12-25 2019-12-04 パナソニックIpマネジメント株式会社 投影装置
JP2016169080A (ja) 2015-03-12 2016-09-23 パナソニックIpマネジメント株式会社 照明機能を有する検索システム
US20180357032A1 (en) * 2015-06-12 2018-12-13 Nureva, Inc. System, apparatus, and method for facilitating and perpetuating a collaborative ideation session
JP2017146927A (ja) 2016-02-19 2017-08-24 ソニーモバイルコミュニケーションズ株式会社 制御装置、制御方法及びプログラム
WO2019079790A1 (en) * 2017-10-21 2019-04-25 Eyecam, Inc ADAPTIVE GRAPHIC USER INTERFACE SYSTEM
KR102499354B1 (ko) * 2018-02-23 2023-02-13 삼성전자주식회사 디스플레이를 통해 표시된 제 1 콘텐트에 대해 제 2 콘텐트를 외부 객체의 움직임에 따라 제공하기 위한 전자 장치 및 그의 동작 방법

Also Published As

Publication number Publication date
JP7244279B2 (ja) 2023-03-22
US20220083127A1 (en) 2022-03-17
US11954241B2 (en) 2024-04-09
JP2020112867A (ja) 2020-07-27
SG11202107436UA (en) 2021-08-30
WO2020145232A1 (ja) 2020-07-16

Similar Documents

Publication Publication Date Title
US9129157B2 (en) Method for image-based status determination
US11100608B2 (en) Determining display orientations for portable devices
KR101357260B1 (ko) 증강 현실 사용자 인터페이스 제공 장치 및 방법
US8971629B2 (en) User interface system based on pointing device
WO2018163804A1 (ja) 情報処理システム、情報処理装置、情報処理方法ならびに情報処理方法をコンピュータに実行させるプログラム
US20150370318A1 (en) Apparatus, system, and method of controlling display, and recording medium
US20160194181A1 (en) Sensors for conveyance control
JP6558006B2 (ja) 画像管理装置、画像管理方法、画像管理プログラムおよび表示システム
CN111309183A (zh) 触控显示系统及其控制方法
US20240111382A1 (en) Touch recognition method and device having lidar sensor
JP6609588B2 (ja) 自律型モビリティシステムおよび自律型モビリティの制御方法
CN113946223A (zh) 一种采用显示屏的旅游互动方法
KR101426378B1 (ko) 깊이 정보를 이용한 프레젠테이션 이벤트 처리 장치 및 방법
KR101575063B1 (ko) 뎁스 카메라를 이용한 다중 사용자 멀티 터치 인터페이스 장치 및 방법
JP2008145541A (ja) 表示装置、表示方法およびプログラム
KR101695728B1 (ko) 스테레오 카메라를 포함하는 디스플레이 시스템 및 이를 이용한 위치검출 방법
JPWO2013175836A1 (ja) 監視カメラ管理装置、監視カメラ管理方法およびプログラム
CN113261052A (zh) 信息显示系统以及信息显示方法
JP2007133304A (ja) 情報表示制御装置および情報表示制御方法
TW201351308A (zh) 非接觸式醫療導覽系統及其控制方法
KR102543742B1 (ko) 이동 단말기 및 이동 단말기의 동작 방법을 기록한 컴퓨터로 읽을 수 있는 기록 매체
JP7272764B2 (ja) 情報提供システム
CN113342176A (zh) 一种沉浸式旅游互动系统
KR20180075843A (ko) 증강현실을 이용한 경로 안내 장치 및 이를 이용한 경로 안내 방법
WO2020197914A1 (en) Systems and methods for tracking

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination