JP7447507B2 - Information processing device and program - Google Patents

Information processing device and program Download PDF

Info

Publication number
JP7447507B2
JP7447507B2 JP2020011227A JP2020011227A JP7447507B2 JP 7447507 B2 JP7447507 B2 JP 7447507B2 JP 2020011227 A JP2020011227 A JP 2020011227A JP 2020011227 A JP2020011227 A JP 2020011227A JP 7447507 B2 JP7447507 B2 JP 7447507B2
Authority
JP
Japan
Prior art keywords
document
information
image
viewing
participant
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020011227A
Other languages
Japanese (ja)
Other versions
JP2021117789A (en
Inventor
堂好 齋田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Business Innovation Corp
Original Assignee
Fuji Xerox Co Ltd
Fujifilm Business Innovation Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Xerox Co Ltd, Fujifilm Business Innovation Corp filed Critical Fuji Xerox Co Ltd
Priority to JP2020011227A priority Critical patent/JP7447507B2/en
Publication of JP2021117789A publication Critical patent/JP2021117789A/en
Application granted granted Critical
Publication of JP7447507B2 publication Critical patent/JP7447507B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • User Interface Of Digital Computer (AREA)

Description

本発明は、情報処理装置及びプログラムに関する。 The present invention relates to an information processing device and a program.

レーザ光を入射しレーザ光をホログラムの再生波面情報に基づき変調する空間光変調器と、空間光変調器によって変調された変調光を拡大して結像させる拡大光学系と、変調光が結像される結像面に配置され、拡大光学系の光軸を中心とした円環状の全周領域に視域が形成されるように、変調光を経時的に偏向方向を変えて偏向させる偏向光学系とを備えるホログラム表示装置は、知られている(例えば、特許文献1参照)。 A spatial light modulator that inputs a laser beam and modulates the laser beam based on the reproduced wavefront information of the hologram, an expansion optical system that magnifies the modulated light modulated by the spatial light modulator and forms an image, and the modulated light forms an image. deflection optics that deflects the modulated light by changing the deflection direction over time so that a viewing zone is formed in an annular entire circumferential area centered on the optical axis of the magnifying optical system. A hologram display device including a system is known (for example, see Patent Document 1).

空中画像の表示面を撮像した画像を取得し、撮像された画像から空中画像の視認性が低下している領域を推定し、この後、推定された領域を含むように空中画像の表示を決定する視認性制御装置も、知られている(例えば、特許文献2参照)。 Obtain an image of the display surface of the aerial image, estimate the area where the visibility of the aerial image is reduced from the captured image, and then determine the display of the aerial image to include the estimated area. A visibility control device is also known (for example, see Patent Document 2).

特開2016-156892号公報Japanese Patent Application Publication No. 2016-156892 特開2019-128724号公報JP2019-128724A

周囲から観察可能な像を複数の観察者が観察することが考えられる。その際、周囲から観察可能な像における観察対象の情報を他の観察者から見られる状態で表示する構成を採用したのでは、周囲から観察可能な像における観察対象の情報がその閲覧を制限された他の観察者から見られる可能性がある。 It is conceivable that multiple observers observe an image that can be observed from the surroundings. In this case, if a configuration is adopted in which the information on the observation target in the image that can be observed from the surroundings is displayed in a state where it can be seen by other observers, the viewing of the information on the observation target in the image that can be observed from the surroundings will be restricted. may be seen by other observers.

本発明の目的は、周囲から観察可能な像における観察対象の情報を他の観察者から見られる状態で表示する構成を採用した場合に比較して、周囲から観察可能な像における観察対象の情報がその閲覧を制限された他の観察者から見られる可能性を低下させることにある。 An object of the present invention is to provide information on an observation target in an image that can be observed from the surroundings, compared to a case where information on an observation target in an image that can be observed from the surroundings is displayed in a state where it can be seen by other observers. The purpose of this is to reduce the possibility that other restricted viewers will see the information.

請求項1に記載の発明は、プロセッサを備え、前記プロセッサは、特定の観察者による特定の像を表示するための操作を受け付け、前記操作の受け付けに応じて、周囲から観察可能な前記特定の像を、当該特定の像における観察対象の情報の他の観察者による閲覧を制限するための処理を施した状態で、空中に表示するように制御し、前記閲覧を制限するための処理は、前記特定の像に前記観察対象の情報を形成しない処理と、当該特定の像に前記他の観察者による当該観察対象の情報の閲覧権限に関する情報を前記特定の観察者の側を向くように形成する処理とを含むことを特徴とする情報処理装置である。
請求項2に記載の発明は、前記閲覧を制限するための処理は、前記特定の像に前記観察対象の情報の閲覧制限に関する文言を形成する処理を更に含むことを特徴とする請求項1に記載の情報処理装置である。
請求項3に記載の発明は、前記他の観察者による前記観察対象の情報の閲覧権限に関する情報は、当該観察対象の情報の閲覧を制限されていない観察者の情報であることを特徴とする請求項1に記載の情報処理装置である。
請求項4に記載の発明は、前記閲覧を制限されていない観察者は、予め登録された観察者から選択された観察者であることを特徴とする請求項3に記載の情報処理装置である。
請求項5に記載の発明は、前記他の観察者による前記観察対象の情報の閲覧権限に関する情報は、当該観察対象の情報の閲覧を制限されている観察者の情報であることを特徴とする請求項1に記載の情報処理装置である。
請求項6に記載の発明は、コンピュータに、特定の観察者による特定の像を表示するための操作を受け付ける機能と、前記操作の受け付けに応じて、周囲から観察可能な前記特定の像を、当該特定の像における観察対象の情報の他の観察者による閲覧を制限するための処理を施した状態で、空中に表示するように制御する機能とを実現させ、前記閲覧を制限するための処理は、前記特定の像に前記観察対象の情報を形成しない処理と、当該特定の像に前記他の観察者による当該観察対象の情報の閲覧権限に関する情報を前記特定の観察者の側を向くように形成する処理とを含む、プログラムである。
The invention according to claim 1 includes a processor, and the processor receives an operation for displaying a specific image by a specific viewer, and in response to acceptance of the operation, displays the specific image observable from the surroundings. The image is controlled to be displayed in the air with processing for restricting the viewing of the observation target information in the particular image by other observers, and the processing for restricting the viewing includes: A process of not forming information on the observation target on the specific image, and forming information on the viewing authority of the information on the observation target by the other observer on the specific image so as to face the specific observer. An information processing apparatus is characterized in that it includes a process of :
The invention according to claim 2 is characterized in that the process for restricting viewing further includes a process of forming a wording regarding restriction on viewing of the information of the observation target on the specific image. This is the information processing device described.
The invention according to claim 3 is characterized in that the information regarding the viewing authority of the other observer to view the information on the observation target is information on an observer who is not restricted from viewing the information on the observation target. An information processing device according to claim 1 .
The invention according to claim 4 is the information processing apparatus according to claim 3, wherein the observer whose viewing is not restricted is an observer selected from pre-registered observers. .
The invention according to claim 5 is characterized in that the information regarding the viewing authority of the other observer to view the information on the observation target is information on an observer who is restricted from viewing the information on the observation target. An information processing device according to claim 1 .
The invention according to claim 6 provides a computer with a function of accepting an operation for displaying a specific image by a specific viewer, and in response to acceptance of the operation, displaying the specific image that can be observed from the surroundings. Processing for restricting the viewing by realizing a function of controlling the information on the observation target in the particular image to be displayed in the air with processing for restricting viewing by other observers. includes a process of not forming information on the observation target on the specific image, and a process of not forming information on the observation target on the specific image, and displaying information regarding the viewing authority of the other observer on the information on the observation target on the specific image so as to face the specific observer. This is a program that includes processing to form a file .

請求項1の発明によれば、周囲から観察可能な像における観察対象の情報がその閲覧を制限された他の観察者から見られず、周囲から観察可能な像における観察対象の情報の他の観察者による閲覧権限を知らせることができる
請求項2の発明によれば、周囲から観察可能な像における観察対象の情報の閲覧制限を知らせることができる。
請求項3の発明によれば、周囲から観察可能な像における観察対象の情報の閲覧を制限されていない観察者を知らせることができる。
請求項4の発明によれば、周囲から観察可能な像における観察対象の情報の閲覧を制限されていない全ての観察者の情報を表示する構成を採用した場合に比較して、観察対象の情報の閲覧を制限されていない観察者の情報が見易くなる。
請求項5の発明によれば、周囲から観察可能な像における観察対象の情報の閲覧を制限されている観察者を知らせることができる。
請求項6の発明によれば、周囲から観察可能な像における観察対象の情報がその閲覧を制限された他の観察者から見られず、周囲から観察可能な像における観察対象の情報の他の観察者による閲覧権限を知らせることができる
According to the invention of claim 1, the information on the object to be observed in the image that can be observed from the surroundings is not seen by other observers whose viewing is restricted, and the information on the object to be observed in the image that is observable from the surroundings is not visible. The viewer's viewing authority can be notified .
According to the second aspect of the invention , it is possible to notify the user of restrictions on viewing information about the observation target in an image that can be observed from the surroundings.
According to the third aspect of the invention , it is possible to notify an observer who is not restricted from viewing information about an observation target in an image that can be observed from the surroundings.
According to the invention of claim 4 , compared to the case where a configuration is adopted in which the information of all observers who are not restricted from viewing the information of the observation target in the image that can be observed from the surroundings is adopted, the information of the observation target is displayed. Information can be easily viewed by observers who are not restricted from viewing the information.
According to the invention of claim 5 , it is possible to notify an observer who is restricted from viewing information about an observation target in an image that can be observed from the surroundings.
According to the invention of claim 6 , the information on the object to be observed in the image that can be observed from the surroundings is not seen by other observers whose viewing is restricted, and the information on the object to be observed in the image that is observable from the surroundings is not visible. The viewer's viewing authority can be notified .

本発明の実施の形態における情報表示装置のハードウェア構成例を示した図である。1 is a diagram showing an example of a hardware configuration of an information display device according to an embodiment of the present invention. 本発明の実施の形態における情報表示装置が立体画像を表示する表示空間の一例を示した図である。1 is a diagram showing an example of a display space in which an information display device according to an embodiment of the present invention displays a stereoscopic image. (a),(b)は、表示空間内に表示する文書を選択する際の操作例を示した図である。(a) and (b) are diagrams showing an example of an operation when selecting a document to be displayed in a display space. 共有表示空間における文書画像の第1の態様の表示例を示した図である。FIG. 6 is a diagram illustrating a display example of a first aspect of a document image in a shared display space. (a),(b)は、共有表示空間における文書画像の第2の態様の表示例を示した図である。(a) and (b) are diagrams showing a display example of a second aspect of a document image in a shared display space. 共有表示空間における文書画像の第3の態様の表示例を示した図である。FIG. 7 is a diagram showing a display example of a third aspect of a document image in a shared display space. (a),(b)は、表示空間内に表示する文書を選択する際の別の操作例を示した図である。(a) and (b) are diagrams showing another example of operation when selecting a document to be displayed within the display space. 本発明の実施の形態における情報表示装置の機能構成例を示したブロック図である。1 is a block diagram showing an example of a functional configuration of an information display device according to an embodiment of the present invention. 本発明の実施の形態における情報表示装置の文書画像を空中に表示する際の第1の動作例を示したフローチャートである。2 is a flowchart showing a first operation example when displaying a document image in the air by the information display device according to the embodiment of the present invention. 本発明の実施の形態における情報表示装置の文書画像を空中に表示する際の第2の動作例を示したフローチャートである。12 is a flowchart showing a second operation example when displaying a document image in the air by the information display device according to the embodiment of the present invention. 本発明の実施の形態における情報表示装置の文書画像を空中に表示する際の第3の動作例を示したフローチャートである。12 is a flowchart showing a third operation example when displaying a document image in the air by the information display device according to the embodiment of the present invention.

以下、添付図面を参照して、本発明の実施の形態について詳細に説明する。 Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings.

[情報表示装置のハードウェア構成]
図1は、本実施の形態における情報表示装置10のハードウェア構成例を示した図である。情報表示装置10は、情報処理装置の一例であり、図示するように、演算手段であるプロセッサ11と、記憶手段であるメインメモリ12及びHDD(Hard Disk Drive)13とを備える。ここで、プロセッサ11は、OS(Operating System)やアプリケーション等の各種ソフトウェアを実行し、後述する各機能を実現する。また、メインメモリ12は、各種ソフトウェアやその実行に用いるデータ等を記憶する記憶領域であり、HDD13は、各種ソフトウェアに対する入力データや各種ソフトウェアからの出力データ等を記憶する記憶領域である。更に、情報表示装置10は、外部との通信を行うための通信I/F14と、表示デバイスに情報を出力するための表示I/F15と、入力デバイスから情報を入力するための入力I/F16とを備える。
[Hardware configuration of information display device]
FIG. 1 is a diagram showing an example of the hardware configuration of an information display device 10 in this embodiment. The information display device 10 is an example of an information processing device, and as shown in the figure, includes a processor 11 as a calculation means, a main memory 12 and an HDD (Hard Disk Drive) 13 as storage means. Here, the processor 11 executes various software such as an OS (Operating System) and applications to realize various functions described below. Further, the main memory 12 is a storage area that stores various software and data used for executing the software, and the HDD 13 is a storage area that stores input data for various software, output data from the various software, and the like. Furthermore, the information display device 10 includes a communication I/F 14 for communicating with the outside, a display I/F 15 for outputting information to a display device, and an input I/F 16 for inputting information from an input device. Equipped with.

ここで、表示I/F15に接続された表示デバイスについて説明する。図示するように、表示デバイスは、光源151と、空間光変調器(SLM:Spatial Light Modulator)152とを含む。 Here, the display device connected to the display I/F 15 will be explained. As illustrated, the display device includes a light source 151 and a spatial light modulator (SLM) 152.

光源151は、コヒーレント光である参照光L1をSLM152に出射する。具体的には、光源151は、例えばコリメートレンズ及びレーザ発光部を有し、レーザ発光部から出射されるレーザ光をコリメートレンズにより平行光にして、参照光L1として出射する。 The light source 151 emits reference light L1, which is coherent light, to the SLM 152. Specifically, the light source 151 includes, for example, a collimating lens and a laser light emitting section, and converts the laser light emitted from the laser light emitting section into parallel light using the collimating lens, and emits the parallel light as the reference light L1.

SLM152は、入射された参照光L1を、ホログラムの再生波面情報に基づいて変調し、変調した参照光L1を出力光L2として出射する。そして、この出力光L2により、SLM152の表面から予め定められた距離だけ離れた空中の位置に立体画像Sを表示する。具体的には、SLM152は、例えば、MEMS(Micro Electro Mechanical Systems)を使用した空間光変調器(MEMS-SLM)や、LCOS(Liquid Crystal On Silicon)を使用した空間光変調器(LCOS-SLM)であり、ホログラムの再生波面情報に基づき、干渉縞を表示する。ここで、再生波面情報とは、必要とされる立体画像Sを表示するためには、どのような干渉縞を用いて参照光L1を変調させるかを示す情報である。言い換えれば、再生波面情報とは、所望の立体画像Sを表示させるための干渉縞のパターンを示す情報である。 The SLM 152 modulates the input reference light L1 based on the reproduced wavefront information of the hologram, and outputs the modulated reference light L1 as output light L2. Then, using this output light L2, a stereoscopic image S is displayed at a position in the air that is a predetermined distance away from the surface of the SLM 152. Specifically, the SLM 152 is, for example, a spatial light modulator (MEMS-SLM) using MEMS (Micro Electro Mechanical Systems) or a spatial light modulator (LCOS-SLM) using LCOS (Liquid Crystal On Silicon). , and displays interference fringes based on the reproduced wavefront information of the hologram. Here, the reproduction wavefront information is information indicating what kind of interference fringes should be used to modulate the reference light L1 in order to display the required stereoscopic image S. In other words, the reproduced wavefront information is information indicating a pattern of interference fringes for displaying a desired stereoscopic image S.

また、入力I/F16に接続された入力デバイスについて説明する。図示するように、入力デバイスは、カメラ161とする。カメラ161は、像を結ぶための光学系(レンズ等)を有しており、画像を撮像する。ここでは特に参加者の動作を撮像するので、カメラ161としてはビデオカメラを用いるとよい。 Also, the input device connected to the input I/F 16 will be explained. As illustrated, the input device is a camera 161. The camera 161 has an optical system (lens, etc.) for forming an image, and captures an image. Here, since the movements of the participants are particularly imaged, it is preferable to use a video camera as the camera 161.

尚、図示しないが、通信I/F14は、指装着型のウェアラブルデバイスに設けられた加速度センサや、マウスやキーボード等の操作入力装置との間で無線通信を行うこともある。 Although not shown, the communication I/F 14 may perform wireless communication with an acceleration sensor provided in a finger-mounted wearable device or an operation input device such as a mouse or a keyboard.

[本実施の形態の概要]
本実施の形態では、情報表示装置10が、特定の観察者による特定の像を表示するための操作を受け付け、操作の受け付けに応じて、周囲から観察可能な特定の像を、特定の像における観察対象の情報の他の観察者による閲覧を制限するための処理を施した状態で、空中に表示するように制御する。
[Overview of this embodiment]
In the present embodiment, the information display device 10 accepts an operation by a specific viewer to display a specific image, and in response to the acceptance of the operation, displays a specific image that can be observed from the surroundings. Control is performed so that the information on the observation target is displayed in the air while being processed to restrict viewing by other observers.

以下では、特定の像として、紙文書を模した立体画像(以下、「文書画像」という)を例にとって説明する。また、特定の観察者及び他の観察者を含む複数の観察者としては、空中に表示された文書画像を参照しながら行われる会議の複数の参加者を例にとって説明する。 In the following, a three-dimensional image imitating a paper document (hereinafter referred to as a "document image") will be described as an example of a specific image. Further, as a plurality of observers including a specific observer and other observers, a plurality of participants in a conference held while referring to a document image displayed in the air will be explained as an example.

図2は、情報表示装置10が立体画像を表示する表示空間30の一例を示した図である。図示するように、表示空間30は、共有表示空間31と、個人表示空間32a,32bとを含む。 FIG. 2 is a diagram showing an example of a display space 30 in which the information display device 10 displays a stereoscopic image. As illustrated, the display space 30 includes a shared display space 31 and personal display spaces 32a and 32b.

共有表示空間31は、複数の参加者で共有される表示領域である。この共有表示空間31には、複数の参加者が共有する立体画像が表示される。図では、立体的な模型を表す立体画像40が表示されているが、後述するように、平板状の立体画像が表示されることもある。 The shared display space 31 is a display area shared by multiple participants. In this shared display space 31, a stereoscopic image shared by a plurality of participants is displayed. In the figure, a three-dimensional image 40 representing a three-dimensional model is displayed, but as will be described later, a flat three-dimensional image may also be displayed.

個人表示空間32aは、参加者A用の表示領域である。この個人表示空間32aには、参加者Aが管理する立体画像が表示される。図では、個人表示空間32aにおける参加者B側にデスクトップ画像51aが表示されており、デスクトップ画像51aの参加者A側に文書画像52aが表示されている。 The personal display space 32a is a display area for participant A. A stereoscopic image managed by participant A is displayed in this personal display space 32a. In the figure, a desktop image 51a is displayed on the participant B side in the personal display space 32a, and a document image 52a is displayed on the participant A side of the desktop image 51a.

個人表示空間32bは、参加者B用の表示領域である。この個人表示空間32bには、参加者Bが管理する立体画像が表示される。図では、個人表示空間32bにおける参加者A側にデスクトップ画像51bが表示されており、デスクトップ画像51bの参加者B側に文書画像52bが表示されている。但し、文書画像52bは、デスクトップ画像51bに隠れて見えないため、示されていない。 The personal display space 32b is a display area for participant B. A stereoscopic image managed by participant B is displayed in this personal display space 32b. In the figure, a desktop image 51b is displayed on the participant A side in the personal display space 32b, and a document image 52b is displayed on the participant B side of the desktop image 51b. However, the document image 52b is not shown because it is hidden behind the desktop image 51b.

尚、図では、個人表示空間32a,32b、デスクトップ画像51a,51bを示し、文書画像52a,52bが表示されるとしたが、これらを区別する必要がない場合は、個人表示空間32、デスクトップ画像51、文書画像52と称することもある。また、ここでは2人の参加者A,Bが向かいあって会議をする場合を想定したので2つの個人表示空間32を示したが、3人以上の参加者が参加して会議をする場合は3つ以上の個人表示空間32を設けてもよい。 In the figure, the personal display spaces 32a, 32b and the desktop images 51a, 51b are shown, and the document images 52a, 52b are displayed. However, if there is no need to distinguish between these, the personal display spaces 32 and the desktop images 51a, 51b are shown. 51 and may also be referred to as a document image 52. Also, here, two individual display spaces 32 are shown because it is assumed that two participants A and B are holding a meeting facing each other, but when three or more participants are holding a meeting, Three or more personal display spaces 32 may be provided.

また、ここでは個人表示空間32内にデスクトップ画像51を表示したが、本実施の形態においてデスクトップ画像51は必ずしも必要ではないので、以下では、デスクトップ画像51については言及しない。 Further, although the desktop image 51 is displayed in the personal display space 32 here, the desktop image 51 is not necessarily necessary in this embodiment, so the desktop image 51 will not be mentioned below.

更に、本明細書では、ある文書画像52について説明する際に、その文書画像52を管理する参加者を「特定の参加者」と表記し、この参加者以外の参加者を「他の参加者」と表記する。 Furthermore, in this specification, when describing a certain document image 52, a participant who manages the document image 52 is referred to as a "specific participant," and participants other than this participant are referred to as "other participants." ”.

更にまた、本明細書では、個人表示空間32、デスクトップ画像51、文書画像52以外にも、参加者Aが管理する画像や画像中の要素には添え字「a」を付して示す。一方、管理者を特定せずに一般的な概念として言及する場合は、添え字を付さないものとする。 Furthermore, in this specification, in addition to the personal display space 32, the desktop image 51, and the document image 52, images managed by participant A and elements in the images are indicated with the subscript "a". On the other hand, when referring to a general concept without specifying the administrator, no subscript shall be added.

次に、表示空間30における具体的な操作例を説明する。尚、ここでも参加者A,Bが向かい合って会議をする場面を想定する。 Next, a specific example of operation in the display space 30 will be explained. Here, we also assume a situation where participants A and B are facing each other in a meeting.

図3(a),(b)は、表示空間30内に表示する文書を選択する際の操作例を示した図である。 FIGS. 3A and 3B are diagrams showing an example of an operation when selecting a document to be displayed within the display space 30.

まず、参加者Aは、表示空間30内で文書画像52aを共有表示する場合、図3(a)に示すように、表示空間30内の空中に表示されるフォルダ画像53aにタッチするジェスチャG1を行う。 First, when sharing and displaying the document image 52a within the display space 30, the participant A performs a gesture G1 of touching the folder image 53a displayed in the air within the display space 30, as shown in FIG. 3(a). conduct.

フォルダ画像53aの拡大図を図3(b)に示す。例えば、参加者Aは、フォルダ画像53a中の文書「Document3.txt」にタッチするジェスチャG1を行う。 An enlarged view of the folder image 53a is shown in FIG. 3(b). For example, participant A performs a gesture G1 of touching the document "Document3.txt" in the folder image 53a.

すると、情報表示装置10は、カメラ161によって参加者Aの指先の位置を検知し、指先の位置に対応する文書を特定してこれをハイライト表示する。図中、ハイライト表示は斜線ハッチングで示している。その後、予め定められた時間(例えば5秒間)以上、指先がその文書の位置にあれば、参加者Aがその文書の表示を指示していると判断して、その文書を文書画像52aとして共有表示空間31内の空中に表示する。 Then, the information display device 10 detects the position of participant A's fingertip using the camera 161, identifies the document corresponding to the position of the fingertip, and displays it as a highlight. In the figure, highlighted display is indicated by diagonal hatching. After that, if the fingertip is in the position of the document for a predetermined period of time (for example, 5 seconds) or more, it is determined that Participant A is instructing the display of the document, and the document is shared as the document image 52a. It is displayed in the air within the display space 31.

尚、ここでは、個人表示空間32a内の空中に表示されたフォルダ画像53aから、文書画像52aとして表示する文書を選択するようにしたが、これには限らない。参加者Aが保持しているスマートフォンやパーソナルコンピュータから、文書画像52aとして表示する文書を選択するようにしてもよい。 Although here, the document to be displayed as the document image 52a is selected from the folder images 53a displayed in the air within the personal display space 32a, the present invention is not limited to this. A document to be displayed as the document image 52a may be selected from a smartphone or a personal computer held by participant A.

このようにして文書画像52aは共有表示空間31内の空中に表示される。ところが、文書画像52aの元となる文書の中には、アクセス権が設定され、その閲覧が制限されているものもある。例えば、図3(b)の文書「Document3.txt」は、アクセス権「Members Only」が設定され、特定の者しか閲覧できないようになっている。このような文書をその内容が分かる状態で不用意に共有表示空間31内に表示すると、他の参加者がその文書の内容を見てしまい、機密性が保たれなくなる虞がある。 In this way, the document image 52a is displayed in the air within the shared display space 31. However, some documents that are the source of the document image 52a have access rights set and viewing thereof is restricted. For example, the document "Document3.txt" in FIG. 3(b) has the access right "Members Only" set so that only a specific person can view it. If such a document is carelessly displayed in the shared display space 31 with its contents known, there is a risk that other participants will see the contents of the document and that confidentiality will not be maintained.

そこで、本実施の形態では、情報表示装置10が、文書画像52aを表示する前に、文書の内容の閲覧を制限するための処理を行う。 Therefore, in the present embodiment, the information display device 10 performs processing for restricting viewing of the contents of the document before displaying the document image 52a.

この文書の内容の閲覧を制限するための処理には、まず、文書画像52aに文書の内容を形成しないことを前提とした処理がある。そして、このような処理としては、文書画像52aに文書の内容の閲覧権限に関する情報を形成する処理と、文書画像52aに他の参加者による文書の内容の閲覧権限に関する情報を形成する処理とがある。以下では、前者の処理を行う場合の文書画像52aを第1の態様とし、後者の処理を行う場合の文書画像52aを第2の態様とする。 The process for restricting viewing of the content of the document includes, first, a process based on the premise that the content of the document is not formed in the document image 52a. Such processing includes a process of forming information regarding the viewing authority of the content of the document in the document image 52a, and a process of forming information regarding the viewing authority of the content of the document by other participants in the document image 52a. be. In the following, the document image 52a in which the former process is performed is referred to as a first aspect, and the document image 52a in which the latter process is performed is referred to as a second aspect.

また、文書の内容の閲覧を制限するための処理には、文書画像52aに文書の内容を形成することを前提とした処理もある。そして、このような処理としては、参加者Aの側とは反対の側から文書の内容を視認し難くする処理がある。以下では、この処理を行う場合の文書画像52aを第3の態様とする。 Furthermore, the processing for restricting viewing of the content of a document includes processing based on the premise that the content of the document is formed on the document image 52a. As such processing, there is processing that makes it difficult to visually recognize the contents of the document from the side opposite to participant A's side. In the following, the document image 52a in which this process is performed will be referred to as a third aspect.

図4は、共有表示空間31における文書画像52aの第1の態様の表示例を示した図である。 FIG. 4 is a diagram showing a display example of the first aspect of the document image 52a in the shared display space 31.

この場合、情報表示装置10は、図示するように、文書画像52aに、文書の内容は形成せず、文書の内容の閲覧制限に関する情報の一例として、文書のアクセス制限に関する文言521aを形成する。具体的には、「Members Only」との文言521aを形成している。 In this case, as shown in the figure, the information display device 10 does not form the content of the document in the document image 52a, but forms wording 521a regarding the access restriction of the document as an example of information regarding the viewing restriction of the content of the document. Specifically, the wording 521a is "Members Only".

尚、文書画像52aの元となる文書に閲覧制限がかけられていない場合、情報表示装置10は、文書画像52aを、文書の内容を閲覧可能な状態で表示する。 Note that if viewing restrictions are not applied to the document that is the source of the document image 52a, the information display device 10 displays the document image 52a in a state where the content of the document can be viewed.

図5(a),(b)は、共有表示空間31における文書画像52aの第2の態様の表示例を示した図である。 FIGS. 5A and 5B are diagrams showing a display example of the second mode of the document image 52a in the shared display space 31.

この場合、情報表示装置10は、図5(a)に示すように、文書画像52aに、文書の内容を形成せず、文書の内容の閲覧制限に関する情報の一例として、文書のアクセス制限に関する文言521aを形成する。具体的には、「Members Only」との文言521aを形成している。 In this case, as shown in FIG. 5A, the information display device 10 does not form the content of the document in the document image 52a, but instead displays text regarding access restrictions to the document as an example of information regarding restrictions on viewing the contents of the document. 521a. Specifically, the wording 521a is "Members Only".

また、情報表示装置10は、図5(a)に示すように、文書画像52aに、文言521aに加え、他の参加者による文書の内容の閲覧権限に関する情報の一例として、この文書に対するアクセス権を有する参加者の情報を形成する。ここでは、参加者の情報として、参加者の顔写真522aを形成している。例えば、図5(a)では、参加者Bが文書画像52aの元となる文書に対するアクセス権を有しているものとし、文書画像52aに参加者Bの顔写真522aを形成している。但し、参加者の顔写真522aはあくまで一例であり、参加者の情報としては、参加者の所属や名前等を形成してもよい。 In addition, as shown in FIG. 5A, the information display device 10 includes, in addition to the text 521a, the document image 52a, the access rights to this document as an example of information regarding the viewing rights of the contents of the document by other participants. form information for participants with Here, a facial photograph 522a of the participant is formed as the participant's information. For example, in FIG. 5A, it is assumed that participant B has access rights to the document that is the source of the document image 52a, and a face photo 522a of participant B is formed in the document image 52a. However, the participant's face photo 522a is just an example, and the participant's affiliation, name, etc. may also be provided as the participant's information.

この状態で、参加者Aは、参加者Bの情報が文書画像52aに形成されていることを確認して、文書の内容を参加者Bに閲覧させてもよいと判断すると、その文書の閲覧制限の解除を指示する。例えば、文書画像52aにタッチしたり、マウス、スマートフォン等のデバイスで指示したりすることにより、閲覧制限の解除を指示するとよい。 In this state, Participant A confirms that Participant B's information is formed in the document image 52a, and if Participant A determines that it is okay to allow Participant B to view the contents of the document, the Participant A can view the document. Instruct to lift restrictions. For example, it is preferable to instruct to cancel the viewing restriction by touching the document image 52a or instructing with a device such as a mouse or a smartphone.

すると、情報表示装置10は、図5(b)に示すように、文言521a及び顔写真522aが除去され、文書の内容が形成された文書画像52a’を表示する。尚、参加者Aが自身で文書の内容を確認する場合には、文書画像52a’の正面が参加者Aに向かうように文書の内容が表示され、参加者Bには文書の内容が裏返した状態で見えている。参加者Aが文書の内容を確認した後、予め定められた操作により、文書画像52a’の正面が参加者Bに向かう方向へ文書画像を回転させて表示させたり、文書画像52a’の正面が参加者Bに向かう文書画像を複製して表示させたりすることもできる。 Then, as shown in FIG. 5B, the information display device 10 displays a document image 52a' in which the text 521a and the face photograph 522a are removed and the content of the document is formed. Note that when Participant A confirms the contents of the document by himself/herself, the contents of the document are displayed so that the front of the document image 52a' faces Participant A, and the contents of the document are turned over to Participant B. It is visible in the condition. After Participant A confirms the content of the document, by performing a predetermined operation, the document image may be rotated and displayed so that the front of document image 52a' faces Participant B, or the front of document image 52a' may be It is also possible to duplicate the document image directed to participant B and display it.

尚、情報表示装置10は、この文書に対するアクセス権を有する一部の参加者の情報を形成するようにしてもよい。例えば、表示空間30の周辺にいる参加者を予め登録しておき、この文書に対するアクセス権を有する参加者のうち予め登録された参加者をその一部の参加者とすればよい。アクセス権を有する全ての参加者の情報を文書画像52aに形成すると、情報が多くなり過ぎて見難くなるからである。この場合、この一部の参加者は、予め登録された観察者から選択された観察者の一例である。 Note that the information display device 10 may form information on some participants who have access rights to this document. For example, the participants who are around the display space 30 may be registered in advance, and the pre-registered participants who have access rights to this document may be selected as some of the participants. This is because if the information of all participants who have access rights is formed in the document image 52a, there will be too much information and it will be difficult to view. In this case, some of the participants are an example of observers selected from pre-registered observers.

また、情報表示装置10は、文書画像52aに、他の参加者による文書の内容の閲覧権限に関する情報の一例として、この文書に対するアクセス権を有しない参加者の情報を形成するようにしてもよい。そして、この場合も、文書画像52aに形成する情報が多くなり過ぎないようアクセス権を有しない一部の参加者の情報を形成するようにしてよい。尚、他の参加者の中にアクセス権を有しない一部の参加者が確認できた場合であっても、文書の内容を閲覧させてもよい場合には、予め定められた操作によって、文書の内容を表示させることができるようにしてもよい。このとき、その時点ではアクセス権を有しないが、閲覧させてもよい参加者の情報を、この文書の電子ファイルの属性情報として記録したり、この文書の電子ファイルへのアクセス権に追加したりすることで、その参加者に閲覧を許可したことを記録することもできる。 Further, the information display device 10 may form information on a participant who does not have access rights to this document in the document image 52a, as an example of information regarding the authority to view the content of the document by other participants. . In this case as well, information of some participants who do not have access rights may be formed to prevent too much information from being formed in the document image 52a. In addition, even if some participants who do not have access rights are able to confirm the content of the document, if the contents of the document can be viewed, the document can be accessed by predetermined operations. It may also be possible to display the contents of the page. At this time, the information of participants who do not have access rights at that time but may be allowed to view the information may be recorded as attribute information of the electronic file of this document, or may be added to the access rights to the electronic file of this document. By doing so, you can also record that you have given permission for viewing by that participant.

図6は、共有表示空間31における文書画像52aの第3の態様の表示例を示した図である。 FIG. 6 is a diagram showing a display example of the third aspect of the document image 52a in the shared display space 31.

この場合、情報表示装置10は、図示するように、文書画像52aに文書の内容を形成するものの、参加者Aの側とは反対の側から文書の内容を視認し難くする処理の一例として、参加者Bによる閲覧を制限するための背景画像523aを文書画像52aの裏面に配置する処理を行う。 In this case, as shown in the figure, the information display device 10 forms the content of the document in the document image 52a, but as an example of processing to make the content of the document difficult to see from the side opposite to the participant A side, Processing is performed to place a background image 523a on the back side of the document image 52a to restrict viewing by participant B.

具体的には、背景画像523aの内部に、文書画像52aに含まれる文字情報を参加者Bから視認困難とする難視化画像を配するとよい。難視化画像は、例えば、記号、模様、静止画、動画であってよい。記号としては、例えば「*」、「※」、「#」等、一面に配することで向こう側から見え難くなるものを用いるとよい。模様としては、迷彩パターンが例示される。静止画としては、電子文書、ウェブページ、コンピュータグラフィックス等の他者の注意を惹きやすい画像が考えられる。動画としては、ランダムパターン動画(テレビの砂嵐像のように輝点がランダムに点滅している動画)、特定パターンを予め定められた方向若しくはランダムな方向に移動させる動画、又は、風景、テレビ番組、映画、CG等のビデオ動画が考えられる。 Specifically, a difficult-to-see image that makes it difficult for participant B to see the text information included in the document image 52a may be placed inside the background image 523a. The obfuscated image may be, for example, a symbol, a pattern, a still image, or a moving image. As a symbol, it is preferable to use a symbol such as "*", "*", "#", etc., which when placed on one side makes it difficult to see from the other side. An example of the pattern is a camouflage pattern. Examples of still images include electronic documents, web pages, computer graphics, and other images that tend to attract the attention of others. Videos include random pattern videos (videos with bright spots flashing randomly like a sandstorm image on TV), videos in which a specific pattern moves in a predetermined direction or in a random direction, landscapes, and TV programs. , movies, CG, and other video moving images can be considered.

或いは、背景画像523aは、文書画像52aに含まれる文字情報が参加者Bから視認困難となるように、その輝度を、文書画像52aの輝度より高くしてもよい。具体的には、背景画像523aを構成する点、線、面等の画像要素の輝度又は背景画像523aの単位面積当たりの輝度を、文書画像52aの点、線、面等の画像要素の輝度又は文書画像52aの単位面積当たりの輝度より高くしてもよい。 Alternatively, the brightness of the background image 523a may be made higher than the brightness of the document image 52a so that the text information included in the document image 52a is difficult for participant B to see. Specifically, the brightness of image elements such as points, lines, and planes constituting the background image 523a or the brightness per unit area of the background image 523a are compared to the brightness of image elements such as points, lines, and planes of the document image 52a, or the brightness per unit area of the background image 523a. The brightness may be higher than the brightness per unit area of the document image 52a.

図7(a),(b)は、表示空間30内に表示する文書を選択する際の別の操作例を示した図である。この操作例は、表示空間30内に仮想のファイルフォルダ又はファイルキャビネットを設け、そこから文書を抜き出して、その文書を文書画像52aとして空中に表示する例である。文書は予め特定のファイルフォルダ又はファイルキャビネット内に格納された状態で記憶されている。 FIGS. 7A and 7B are diagrams showing another example of operation when selecting a document to be displayed within the display space 30. This operation example is an example in which a virtual file folder or file cabinet is provided in the display space 30, a document is extracted from there, and the document is displayed in the air as a document image 52a. Documents are stored in advance in a specific file folder or file cabinet.

まず、情報表示装置10は、ファイルフォルダ又はファイルキャビネットを模した画像を表示空間30内の空中に表示する。ここでは、図7(a)に示すように、ファイルフォルダを模したフォルダ画像54aを空中に表示している。また、ファイルフォルダは複数あるものとし、複数のフォルダ画像54aを表示している。この状態で、参加者Aが、図7(a)に示すように、その指先をフォルダ画像54aに近付けるジェスチャG2を行ったとする。 First, the information display device 10 displays an image imitating a file folder or a file cabinet in the air within the display space 30. Here, as shown in FIG. 7(a), a folder image 54a imitating a file folder is displayed in the air. Further, it is assumed that there are a plurality of file folders, and a plurality of folder images 54a are displayed. In this state, as shown in FIG. 7A, it is assumed that participant A performs a gesture G2 of bringing the fingertip closer to the folder image 54a.

すると、情報表示装置10は、カメラ161により指先の位置を検出し、図7(b)に示すように、その位置に表示されたフォルダ画像54aを開いた状態に変更する。そして、そのフォルダ画像54a内に格納されている文書に対応する文書画像52aをフォルダ画像54aから取り出した状態で表示する。 Then, the information display device 10 detects the position of the fingertip using the camera 161, and changes the folder image 54a displayed at that position to an open state, as shown in FIG. 7(b). Then, the document image 52a corresponding to the document stored in the folder image 54a is extracted from the folder image 54a and displayed.

その際、情報表示装置10は、文書に設定されたアクセス権に応じて、図4乃至図6の何れかに示した文書の内容の表示の制限を施した状態で文書画像52aを表示する。尚、図7(b)では、一例として、図4に示した文書の内容の表示の制限を施した文書画像52aの第1の態様を示している。これにより、表示空間30内で文書を選択する場合に、閲覧の制限がかけられている文書を誤って取り出したことで文書の内容が表示されてしまうことが抑制される。 At this time, the information display device 10 displays the document image 52a with the display of the contents of the document shown in any one of FIGS. 4 to 6 restricted according to the access rights set for the document. Note that FIG. 7B shows, as an example, a first aspect of the document image 52a shown in FIG. 4, in which display of the contents of the document is restricted. As a result, when selecting a document within the display space 30, it is possible to prevent the contents of the document from being displayed due to mistakenly taking out a document whose viewing is restricted.

[情報表示装置の機能構成]
図8は、本実施の形態における情報表示装置10の機能構成例を示したブロック図である。図示するように、本実施の形態における情報表示装置10は、操作検出部21と、アクセス権記憶部22と、文書形状生成部23と、表示制御部24とを備えている。
[Functional configuration of information display device]
FIG. 8 is a block diagram showing an example of the functional configuration of the information display device 10 in this embodiment. As illustrated, the information display device 10 in this embodiment includes an operation detection section 21, an access right storage section 22, a document shape generation section 23, and a display control section 24.

操作検出部21は、参加者の動作情報が入力I/F16又は通信I/F14から入力されると、この動作情報から参加者の操作を検出する。例えば、カメラ161が参加者の動作を撮像した画像が入力I/F16から入力された場合は、その画像から参加者の指先の軌道を抽出し、この抽出された軌道に基づいて参加者のジェスチャを識別する。また、加速度センサが設けられた指装着型のウェアラブルデバイスを参加者が装着し、このウェアラブルデバイスからBluetooth(登録商標)により送信された加速度センサの検出データ(方向、スピード)が通信I/F14から入力された場合には、その検出データを既知のジェスチャパターンと比較し、この比較結果に基づいて参加者のジェスチャを識別する。そして、操作検出部21は、この識別されたジェスチャがフォルダ画像53中の文書にタッチしたりフォルダ画像54にタッチしたりする特定の参加者のジェスチャであれば、共有表示空間31に表示する文書画像52を選択するための特定の参加者の操作を検出する。この識別されたジェスチャが文書の内容の表示が制限された文書画像52にタッチする特定の参加者のジェスチャであれば、文書画像52における文書の内容の表示の制限を解除するための特定の参加者の操作を検出する。 When the operation information of the participant is input from the input I/F 16 or the communication I/F 14, the operation detection unit 21 detects the operation of the participant from this operation information. For example, if an image captured by the camera 161 of a participant's movements is input from the input I/F 16, the trajectory of the participant's fingertips is extracted from the image, and the participant's gesture is determined based on the extracted trajectory. identify. In addition, participants wear a finger-mounted wearable device equipped with an acceleration sensor, and detection data (direction, speed) of the acceleration sensor transmitted from this wearable device via Bluetooth (registered trademark) is transmitted from the communication I/F 14. If so, the detected data is compared with known gesture patterns and the participant's gesture is identified based on the comparison result. Then, if the identified gesture is a gesture of a specific participant such as touching a document in the folder image 53 or touching the folder image 54, the operation detection unit 21 detects the document displayed in the shared display space 31. A specific participant's operation for selecting an image 52 is detected. If this identified gesture is a gesture of a specific participant who touches the document image 52 in which the display of the document content is restricted, the specific participation is performed to release the restriction on the display of the document content in the document image 52. Detect user operations.

或いは、操作検出部21は、キーボード、マウス等で空中にマウスカーソルやメニューを表示して操作することでBluetooth(登録商標)により送信された操作情報が通信I/F14から入力されると、この操作情報から参加者の操作を検出する、というものでもよい。この場合も、操作検出部21は、共有表示空間31に表示する文書画像52を選択するための特定の参加者の操作、文書画像52における文書の内容の表示の制限を解除するための特定の参加者の操作を検出する。 Alternatively, when operation information transmitted by Bluetooth (registered trademark) is input from the communication I/F 14 by displaying and operating a mouse cursor or menu in the air using a keyboard, mouse, etc., the operation detection unit 21 detects this information. It is also possible to detect the participant's operation from the operation information. In this case as well, the operation detection unit 21 detects an operation by a specific participant to select the document image 52 to be displayed in the shared display space 31 and a specific operation to cancel the restriction on displaying the content of the document in the document image 52. Detect participant actions.

本実施の形態では、特定の観察者による特定の像を表示するための操作を受け付ける手段の一例として、操作検出部21を設けている。 In this embodiment, an operation detection unit 21 is provided as an example of means for accepting an operation by a specific viewer to display a specific image.

アクセス権記憶部22は、文書ごとのアクセス権を記憶する。例えば、図3(b)のフォルダ画像53内に示したように、文書名とアクセス権との対応を記憶すればよい。 The access right storage unit 22 stores access rights for each document. For example, as shown in the folder image 53 in FIG. 3(b), correspondence between document names and access rights may be stored.

文書形状生成部23は、共有表示空間31に表示する文書画像52を選択するための特定の参加者の操作を操作検出部21が検出した場合に、文書画像52を空中に表示するための立体的形状を示すデータ(以下、「文書形状」という)を生成する。その際、文書形状生成部23は、文書形状に対して、文書の内容の他の参加者による閲覧を制限するための処理を行う。本実施の形態では、操作の受け付けに応じて、特定の像を、観察対象の情報の他の観察者による閲覧を制限するための処理を施した状態で、空中に表示するように制御する手段の一例として、文書形状生成部23を設けている。 The document shape generation unit 23 generates a three-dimensional shape for displaying the document image 52 in the air when the operation detection unit 21 detects an operation by a specific participant to select the document image 52 to be displayed in the shared display space 31. data indicating the document shape (hereinafter referred to as "document shape"). At this time, the document shape generation unit 23 performs processing on the document shape to restrict viewing of the content of the document by other participants. In this embodiment, in response to the reception of an operation, a means for controlling a specific image to be displayed in the air with processing for restricting viewing of information on the observation target by other observers is provided. As an example, a document shape generation section 23 is provided.

具体的には、文書形状生成部23は、文書形状に対して、文書の内容を形成せずに、アクセス権記憶部22に記憶された文書の内容の閲覧権限に関する情報を形成する処理を行う。例えば、文書形状生成部23は、文書形状に対して、文書の内容を形成せずに、文書のアクセス制限に関する属性を表す文言を形成する処理を行う。この場合、文書の内容を形成せずに、文書のアクセス制限に関する属性を表す文言を形成する処理は、特定の像に観察対象の情報を形成しない処理、及び、特定の像に観察対象の情報の閲覧権限に関する情報を形成する処理の一例である。 Specifically, the document shape generation unit 23 performs processing on the document shape to form information regarding the viewing authority for the content of the document stored in the access right storage unit 22 without forming the content of the document. . For example, the document shape generation unit 23 performs processing on the document shape to form words representing attributes related to document access restrictions without forming the contents of the document. In this case, the process of forming text expressing the attributes related to document access restrictions without forming the content of the document is the process of not forming the information of the observation target on a specific image, and the process of forming the information of the observation target on a specific image. This is an example of a process for forming information regarding viewing authority.

また、文書形状生成部23は、文書形状に対して、文書の内容を形成せずに、アクセス権記憶部22に記憶された他の参加者による文書の内容の閲覧権限に関する情報を形成する処理を行ってもよい。例えば、文書形状生成部23は、文書形状に対して、文書の内容を形成せずに、文書に対するアクセス権限を有する参加者の情報を形成する処理を行ってもよい。この場合、文書の内容を形成せずに、文書に対するアクセス権限を有する参加者の情報を形成する処理は、特定の像に観察対象の情報を形成しない処理、特定の像に他の観察者による観察対象の情報の閲覧権限に関する情報を形成する処理、及び、特定の像に観察対象の情報の閲覧を制限されていない観察者の情報を形成する処理の一例である。或いは、文書形状生成部23は、文書形状に対して、文書の内容を形成せずに、文書に対するアクセス権限を有しない参加者の情報を形成する処理を行ってもよい。この場合、文書の内容を形成せずに、文書に対するアクセス権限を有しない参加者の情報を形成する処理は、特定の像に観察対象の情報を形成しない処理、特定の像に他の観察者による観察対象の情報の閲覧権限に関する情報を形成する処理、及び、特定の像に観察対象の情報の閲覧を制限されている観察者の情報を形成する処理の一例である。 Further, the document shape generation unit 23 performs processing for forming information regarding the viewing authority of other participants for viewing the content of the document stored in the access right storage unit 22 without forming the content of the document for the document shape. You may do so. For example, the document shape generation unit 23 may perform processing on the document shape to create information on participants who have access authority to the document, without creating the content of the document. In this case, the process of forming information on participants who have access authority to the document without forming the content of the document is the process of forming information on the object of observation on a specific image, and the process of forming information on participants who have access rights to the document This is an example of a process of forming information regarding viewing authority for information on an observation target, and a process of forming information on an observer who is not restricted from viewing information on an observation target in a specific image. Alternatively, the document shape generation unit 23 may perform processing on the document shape to create information about a participant who does not have access authority to the document, without creating the content of the document. In this case, the process of forming information for participants who do not have access rights to the document without forming the content of the document is the process of not forming information of the observation target on a specific image, and the process of forming information on participants who do not have access rights to the document This is an example of a process of forming information regarding the viewing authority of the information of the observation target and a process of forming information of an observer who is restricted from viewing the information of the observation target in a specific image.

更に、文書形状生成部23は、文書形状に対して、文書の内容を形成し、他の参加者の側から文書の内容を視認し難くする処理を行ってもよい。例えば、文書形状生成部23は、文書形状に文書の内容を形成し、他の参加者による閲覧を制限するための背景画像523を文書形状の裏面に配置する処理を行う。この場合、文書形状に文書の内容を形成し、他の参加者による閲覧を制限するための背景画像523を文書形状の裏面に配置する処理は、特定の像に観察対象の情報を形成し、特定の観察者の側とは反対の側から観察対象の情報を視認し難くする処理、及び、特定の像に観察対象の情報を形成し、観察対象の情報を視認し難くするための他の像を特定の観察者の側とは反対の側に配置する処理の一例である。 Further, the document shape generation unit 23 may perform a process of forming document contents on the document shape to make it difficult for other participants to view the document contents. For example, the document shape generation unit 23 performs a process of forming the content of the document in the document shape and arranging a background image 523 on the back side of the document shape to restrict viewing by other participants. In this case, the process of forming the content of the document in the document shape and placing the background image 523 on the back side of the document shape to restrict viewing by other participants forms information to be observed in a specific image, Processing that makes it difficult to visually recognize the information on the observation target from the side opposite to the side of a specific observer, and other processing that makes it difficult to see the information on the observation target by forming the information on the observation target in a specific image. This is an example of a process in which an image is placed on the side opposite to the side of a specific viewer.

表示制御部24は、文書形状生成部23が生成した文書形状を再生波面情報に変換する。そして、この再生波面情報をSLM152に出力することにより、文書画像52が空中に表示されるように制御する。 The display control section 24 converts the document shape generated by the document shape generation section 23 into reproduction wavefront information. Then, by outputting this reproduced wavefront information to the SLM 152, the document image 52 is controlled to be displayed in the air.

[情報表示装置の動作]
図9は、文書画像52を空中に表示する際の情報表示装置10の第1の動作例を示したフローチャートである。この第1の動作例は、図4に示した文書画像52の第1の態様を表示する際の動作例である。ここでは、動作に先立ち、図3(b)に示したフォルダ画像53又は図7(a)に示したフォルダ画像54が表示空間30内に表示されているものとする。
[Operation of information display device]
FIG. 9 is a flowchart showing a first example of the operation of the information display device 10 when displaying the document image 52 in the air. This first operation example is an operation example when displaying the first aspect of the document image 52 shown in FIG. 4. Here, it is assumed that the folder image 53 shown in FIG. 3(b) or the folder image 54 shown in FIG. 7(a) is displayed in the display space 30 prior to the operation.

図示するように、情報表示装置10では、まず、操作検出部21が、フォルダ画像53又はフォルダ画像54を用いて文書を選択する特定の参加者のジェスチャを検出したかどうかを判定する(ステップ201)。 As shown in the figure, in the information display device 10, the operation detection unit 21 first determines whether a gesture of a specific participant selecting a document using the folder image 53 or the folder image 54 is detected (step 201 ).

その結果、操作検出部21は、フォルダ画像53又はフォルダ画像54を用いて文書を選択する特定の参加者のジェスチャを検出したと判定しなければ、引き続きステップ201の処理を行う。 As a result, unless the operation detection unit 21 determines that a gesture of a specific participant selecting a document using the folder image 53 or the folder image 54 has been detected, the operation detection unit 21 continues to perform the process of step 201.

一方、フォルダ画像53又はフォルダ画像54を用いて文書を選択する特定の参加者のジェスチャを検出したと操作検出部21により判定されれば、文書形状生成部23が、アクセス権記憶部22を参照して、この文書にアクセス権が設定されているかどうかを判定する(ステップ202)。 On the other hand, if the operation detection unit 21 determines that a gesture of a specific participant selecting a document using the folder image 53 or the folder image 54 is detected, the document shape generation unit 23 refers to the access right storage unit 22. Then, it is determined whether access rights are set for this document (step 202).

この文書にアクセス権限が設定されていると判定すれば、文書形状生成部23は、文書の内容の表示が制限された状態の文書形状を生成する(ステップ203)。そして、この文書形状に対して、アクセス制限に関する文言を付加する(ステップ204)。 If it is determined that access authority is set for this document, the document shape generation unit 23 generates a document shape in which display of the contents of the document is restricted (step 203). Then, text regarding access restrictions is added to this document shape (step 204).

また、この文書にアクセス権限が設定されていると判定しなければ、文書形状生成部23は、文書の内容の表示が制限されない状態の文書形状を生成する(ステップ205)。 Further, if it is not determined that access authority is set for this document, the document shape generation unit 23 generates a document shape in which display of the contents of the document is not restricted (step 205).

これにより、表示制御部24が、ステップ203で生成され、ステップ204で文言が付加された文書形状、又は、ステップ205で生成された文書形状に基づいて、文書画像52を表示するように制御する(ステップ206)。具体的には、ステップ203で生成され、ステップ204で文言が付加された文書形状、又は、ステップ205で生成された文書形状を再生波面情報に変換する。そして、この再生波面情報をSLM152に出力することにより、文書画像52を表示するように制御する。 As a result, the display control unit 24 controls the display of the document image 52 based on the document shape generated in step 203 and with text added in step 204, or the document shape generated in step 205. (Step 206). Specifically, the document shape generated in step 203 and with text added in step 204, or the document shape generated in step 205, is converted into reproduced wavefront information. Then, by outputting this reproduced wavefront information to the SLM 152, it is controlled to display the document image 52.

図10は、文書画像52を空中に表示する際の情報表示装置10の第2の動作例を示したフローチャートである。この第2の動作例は、図5(a),(b)に示した文書画像52の第2の態様を表示する際の動作例である。ここでも、動作に先立ち、図3(b)に示したフォルダ画像53又は図7(a)に示したフォルダ画像54が表示空間30内に表示されているものとする。 FIG. 10 is a flowchart showing a second operation example of the information display device 10 when displaying the document image 52 in the air. This second operation example is an operation example when displaying the second aspect of the document image 52 shown in FIGS. 5(a) and 5(b). Also here, it is assumed that the folder image 53 shown in FIG. 3(b) or the folder image 54 shown in FIG. 7(a) is displayed in the display space 30 prior to the operation.

図示するように、情報表示装置10では、まず、操作検出部21が、フォルダ画像53又はフォルダ画像54を用いて文書を選択する特定の参加者のジェスチャを検出したかどうかを判定する(ステップ221)。 As shown in the figure, in the information display device 10, the operation detection unit 21 first determines whether a gesture of a specific participant selecting a document using the folder image 53 or the folder image 54 is detected (step 221 ).

その結果、操作検出部21は、フォルダ画像53又はフォルダ画像54を用いて文書を選択する特定の参加者のジェスチャを検出したと判定しなければ、引き続きステップ221の処理を行う。 As a result, if the operation detection unit 21 does not determine that a gesture of a specific participant selecting a document using the folder image 53 or the folder image 54 has been detected, the operation detection unit 21 continues to perform the process of step 221.

一方、フォルダ画像53又はフォルダ画像54を用いて文書を選択する特定の参加者のジェスチャを検出したと操作検出部21により判定されれば、文書形状生成部23が、アクセス権記憶部22を参照して、この文書にアクセス権が設定されているかどうかを判定する(ステップ222)。 On the other hand, if the operation detection unit 21 determines that a gesture of a specific participant selecting a document using the folder image 53 or the folder image 54 is detected, the document shape generation unit 23 refers to the access right storage unit 22. Then, it is determined whether access rights are set for this document (step 222).

この文書にアクセス権限が設定されていると判定すれば、文書形状生成部23は、文書の内容の表示が制限された状態の文書形状を生成する(ステップ223)。そして、この文書形状に対して、アクセス制限に関する文言を付加する(ステップ224)。また、この文書形状に対して、アクセス権限を有する参加者の情報を付加する(ステップ225)。 If it is determined that access authority is set for this document, the document shape generation unit 23 generates a document shape in which display of the contents of the document is restricted (step 223). Then, text regarding access restrictions is added to this document shape (step 224). Additionally, information on participants who have access authority is added to this document shape (step 225).

これにより、表示制御部24が、ステップ223で生成され、ステップ224で文言が付加され、ステップ225で参加者の情報が付加された文書形状に基づいて、文書の内容の表示が制限された文書画像52を表示するように制御する(ステップ226)。具体的には、ステップ223で生成され、ステップ224で文言が付加され、ステップ225で参加者の情報が付加された文書形状を再生波面情報に変換する。そして、この再生波面情報をSLM152に出力することにより、文書の内容の表示が制限された文書画像52を表示するように制御する。 As a result, the display control unit 24 generates a document in which the display of the content of the document is restricted based on the document shape generated in step 223, text added in step 224, and participant information added in step 225. The image 52 is controlled to be displayed (step 226). Specifically, the document shape generated in step 223, text added in step 224, and participant information added in step 225 is converted into reproduced wavefront information. Then, by outputting this reproduced wavefront information to the SLM 152, it is controlled to display a document image 52 in which the display of document contents is restricted.

その後、操作検出部21は、ステップ226で表示された文書画像52にタッチする特定の参加者のジェスチャを検出したかどうかを判定する(ステップ227)。 Thereafter, the operation detection unit 21 determines whether a gesture of a specific participant touching the document image 52 displayed in step 226 has been detected (step 227).

その結果、操作検出部21は、文書画像52にタッチする特定の参加者のジェスチャを検出したと判定しなければ、引き続きステップ227の処理を行う。 As a result, if the operation detection unit 21 does not determine that a gesture of a specific participant touching the document image 52 has been detected, the operation detection unit 21 continues to perform the process of step 227.

一方、文書画像52にタッチする特定の参加者のジェスチャを検出したと操作検出部21により判定されれば、文書形状生成部23が、文書の内容の表示が制限されない状態の文書形状を生成する(ステップ228)。 On the other hand, if the operation detection unit 21 determines that a gesture of a specific participant touching the document image 52 has been detected, the document shape generation unit 23 generates a document shape in which display of the contents of the document is not restricted. (Step 228).

また、ステップ222でこの文書にアクセス権限が設定されていると判定しなかった場合も、文書形状生成部23は、文書の内容の表示が制限されない状態の文書形状を生成する(ステップ228)。 Further, even if it is not determined in step 222 that access authority is set for this document, the document shape generation unit 23 generates a document shape in which display of the contents of the document is not restricted (step 228).

これにより、表示制御部24が、ステップ228で生成された文書形状に基づいて、文書の内容の表示が制限されない文書画像52を表示するように制御する(ステップ229)。具体的には、ステップ228で生成された文書形状を再生波面情報に変換する。そして、この再生波面情報をSLM152に出力することにより、文書の内容の表示が制限されない文書画像52を表示するように制御する。 Thereby, the display control unit 24 controls to display the document image 52 in which the display of the document contents is not restricted based on the document shape generated in step 228 (step 229). Specifically, the document shape generated in step 228 is converted into reproduced wavefront information. By outputting this reproduced wavefront information to the SLM 152, control is performed to display a document image 52 in which the display of document contents is not restricted.

[情報表示装置の動作]
図11は、文書画像52を空中に表示する際の情報表示装置10の第3の動作例を示したフローチャートである。この第3の動作例は、図6に示した文書画像52の第3の態様を表示する際の動作例である。ここでも、動作に先立ち、図3(b)に示したフォルダ画像53又は図7(a)に示したフォルダ画像54が表示空間30内に表示されているものとする。
[Operation of information display device]
FIG. 11 is a flowchart showing a third operation example of the information display device 10 when displaying the document image 52 in the air. This third operation example is an operation example when displaying the third aspect of the document image 52 shown in FIG. 6. Also here, it is assumed that the folder image 53 shown in FIG. 3(b) or the folder image 54 shown in FIG. 7(a) is displayed in the display space 30 prior to the operation.

図示するように、情報表示装置10では、まず、操作検出部21が、フォルダ画像53又はフォルダ画像54を用いて文書を選択する特定の参加者のジェスチャを検出したかどうかを判定する(ステップ241)。 As shown in the figure, in the information display device 10, the operation detection unit 21 first determines whether a gesture of a specific participant selecting a document using the folder image 53 or the folder image 54 is detected (step 241 ).

その結果、操作検出部21は、フォルダ画像53又はフォルダ画像54を用いて文書を選択する特定の参加者のジェスチャを検出したと判定しなければ、引き続きステップ241の処理を行う。 As a result, if the operation detection unit 21 does not determine that the gesture of a specific participant who selects a document using the folder image 53 or the folder image 54 has been detected, the operation detection unit 21 continues to perform the process of step 241.

一方、フォルダ画像53又はフォルダ画像54を用いて文書を選択する特定の参加者のジェスチャを検出したと操作検出部21により判定されれば、文書形状生成部23が、文書の内容の表示が制限されない状態の文書形状を生成する(ステップ242)。 On the other hand, if the operation detection unit 21 determines that a gesture of a specific participant selecting a document using the folder image 53 or the folder image 54 is detected, the document shape generation unit 23 restricts the display of the content of the document. A document shape is generated in a state in which no data is displayed (step 242).

次に、文書形状生成部23は、アクセス権記憶部22を参照して、この文書にアクセス権が設定されているかどうかを判定する(ステップ243)。 Next, the document shape generation unit 23 refers to the access right storage unit 22 and determines whether an access right is set for this document (step 243).

この文書にアクセス権限が設定されていると判定すれば、文書形状生成部23は、ステップ242で生成した文書形状の裏面に、他の参加者による閲覧を制限するための背景画像523を配置する(ステップ244)。そして、ステップ245へ進む。 If it is determined that access authority is set for this document, the document shape generation unit 23 places a background image 523 on the back side of the document shape generated in step 242 to restrict viewing by other participants. (Step 244). Then, the process advances to step 245.

また、この文書にアクセス権限が設定されていると判定しなければ、文書形状生成部23は、ステップ242で生成した文書形状の裏面に背景画像523を配置することなく、ステップ245へ進む。 Further, if it is not determined that access authority is set for this document, the document shape generation unit 23 proceeds to step 245 without placing the background image 523 on the back side of the document shape generated in step 242.

これにより、表示制御部24が、ステップ242で生成され、ステップ244で背景画像523が配置された文書形状、又は、ステップ242で生成された文書形状に基づいて、文書画像52を表示するように制御する(ステップ245)。具体的には、ステップ242で生成され、ステップ244で背景画像523が配置された文書形状、又は、ステップ242で生成された文書形状を再生波面情報に変換する。そして、この再生波面情報をSLM152に出力することにより、文書画像52を表示するように制御する。 This causes the display control unit 24 to display the document image 52 based on the document shape generated in step 242 and with the background image 523 arranged in step 244, or the document shape generated in step 242. control (step 245). Specifically, the document shape generated in step 242 and on which the background image 523 is placed in step 244, or the document shape generated in step 242, is converted into reproduced wavefront information. Then, by outputting this reproduced wavefront information to the SLM 152, it is controlled to display the document image 52.

[プロセッサ]
本実施の形態において、プロセッサとは広義的なプロセッサを指し、汎用的なプロセッサ(例えばCPU:Central Processing Unit等)や、専用のプロセッサ(例えばGPU:Graphics Processing Unit、ASIC:Application Specific Integrated Circuit、FPGA:Field Programmable Gate Array、プログラマブル論理デバイス等)を含むものである。
[Processor]
In this embodiment, the processor refers to a processor in a broad sense, and includes a general-purpose processor (for example, CPU: Central Processing Unit, etc.) and a dedicated processor (for example, GPU: Graphics Processing Unit, ASIC: Application Specific Integrated Circuit, FPGA). : Field Programmable Gate Array, programmable logic device, etc.).

また、本実施の形態におけるプロセッサの動作は、1つのプロセッサによって成すのみでなく、物理的に離れた位置に存在する複数のプロセッサが協働して成すものであってもよい。また、プロセッサの各動作の順序は、本実施の形態において記載した順序のみに限定されるものではなく、変更してもよい。 Further, the operation of the processor in this embodiment may be performed not only by one processor, but also by a plurality of processors located at physically distant locations working together. Further, the order of each operation of the processor is not limited to the order described in this embodiment, and may be changed.

[プログラム]
本実施の形態における情報表示装置10が行う処理は、例えば、アプリケーションソフトウェア等のプログラムとして用意される。
[program]
The processing performed by the information display device 10 in this embodiment is prepared, for example, as a program such as application software.

即ち、本実施の形態を実現するプログラムは、コンピュータに、特定の観察者による特定の像を表示するための操作を受け付ける機能と、操作の受け付けに応じて、周囲から観察可能な特定の像を、特定の像における観察対象の情報の他の観察者による閲覧を制限するための処理を施した状態で、空中に表示するように制御する機能とを実現させるためのプログラムとして捉えられる。 In other words, the program that implements this embodiment provides a computer with a function to accept an operation by a specific viewer to display a specific image, and a function to display a specific image that can be observed from the surroundings in response to the acceptance of the operation. This can be regarded as a program for realizing the functions of controlling the information on the observation target in a specific image to be displayed in mid-air with processing to restrict viewing by other observers.

尚、本実施の形態を実現するプログラムは、通信手段により提供することはもちろん、CD-ROM等の記録媒体に格納して提供することも可能である。 It should be noted that the program for realizing the present embodiment can of course be provided by communication means, and can also be provided by being stored in a recording medium such as a CD-ROM.

10…情報表示装置、21…操作検出部、22…アクセス権記憶部、23…文書形状生成部、24…表示制御部 DESCRIPTION OF SYMBOLS 10... Information display device, 21... Operation detection part, 22... Access right storage part, 23... Document shape generation part, 24... Display control part

Claims (6)

プロセッサを備え、
前記プロセッサは、
特定の観察者による特定の像を表示するための操作を受け付け、
前記操作の受け付けに応じて、周囲から観察可能な前記特定の像を、当該特定の像における観察対象の情報の他の観察者による閲覧を制限するための処理を施した状態で、空中に表示するように制御し、
前記閲覧を制限するための処理は、前記特定の像に前記観察対象の情報を形成しない処理と、当該特定の像に前記他の観察者による当該観察対象の情報の閲覧権限に関する情報を前記特定の観察者の側を向くように形成する処理とを含むことを特徴とする情報処理装置。
Equipped with a processor,
The processor includes:
Accepts operations to display a specific image by a specific observer,
In response to acceptance of the operation, the specific image that is observable from the surroundings is displayed in the air with processing for restricting viewing of information on the observation target in the specific image by other observers. control to
The process for restricting viewing includes a process for not forming information on the observation target on the specific image, and a process for specifying information regarding the viewing authority of the other observer to view the information on the observation target on the specific image. 1. An information processing apparatus comprising: processing for forming the information processing apparatus so as to face an observer .
前記閲覧を制限するための処理は、前記特定の像に前記観察対象の情報の閲覧制限に関する文言を形成する処理を更に含むことを特徴とする請求項1に記載の情報処理装置。 2. The information processing apparatus according to claim 1 , wherein the process for restricting viewing further includes a process for forming a text regarding restricting viewing of the information to be observed on the specific image. 前記他の観察者による前記観察対象の情報の閲覧権限に関する情報は、当該観察対象の情報の閲覧を制限されていない観察者の情報であることを特徴とする請求項1に記載の情報処理装置。 The information processing apparatus according to claim 1, wherein the information regarding the viewing authority of the information on the observation target by the other observer is information on an observer who is not restricted from viewing the information on the observation target. . 前記閲覧を制限されていない観察者は、予め登録された観察者から選択された観察者であることを特徴とする請求項3に記載の情報処理装置。 4. The information processing apparatus according to claim 3, wherein the observer whose viewing is not restricted is an observer selected from pre-registered observers. 前記他の観察者による前記観察対象の情報の閲覧権限に関する情報は、当該観察対象の情報の閲覧を制限されている観察者の情報であることを特徴とする請求項1に記載の情報処理装置。 The information processing apparatus according to claim 1, wherein the information regarding the viewing authority of the information on the observation target by the other observer is information on an observer who is restricted from viewing the information on the observation target. . コンピュータに、
特定の観察者による特定の像を表示するための操作を受け付ける機能と、
前記操作の受け付けに応じて、周囲から観察可能な前記特定の像を、当該特定の像における観察対象の情報の他の観察者による閲覧を制限するための処理を施した状態で、空中に表示するように制御する機能と
を実現させ
前記閲覧を制限するための処理は、前記特定の像に前記観察対象の情報を形成しない処理と、当該特定の像に前記他の観察者による当該観察対象の情報の閲覧権限に関する情報を前記特定の観察者の側を向くように形成する処理とを含む、プログラム。
to the computer,
A function that accepts operations for displaying a specific image by a specific observer,
In response to acceptance of the operation, the specific image that is observable from the surroundings is displayed in the air with processing for restricting viewing of information on the observation target in the specific image by other observers. Realize the function to control the
The process for restricting viewing includes a process for not forming information on the observation target on the specific image, and a process for specifying information regarding the viewing authority of the other observer to view the information on the observation target on the specific image. and a program to form the object to face the observer .
JP2020011227A 2020-01-27 2020-01-27 Information processing device and program Active JP7447507B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2020011227A JP7447507B2 (en) 2020-01-27 2020-01-27 Information processing device and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2020011227A JP7447507B2 (en) 2020-01-27 2020-01-27 Information processing device and program

Publications (2)

Publication Number Publication Date
JP2021117789A JP2021117789A (en) 2021-08-10
JP7447507B2 true JP7447507B2 (en) 2024-03-12

Family

ID=77175002

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020011227A Active JP7447507B2 (en) 2020-01-27 2020-01-27 Information processing device and program

Country Status (1)

Country Link
JP (1) JP7447507B2 (en)

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007188264A (en) 2006-01-12 2007-07-26 Ricoh Co Ltd Display control apparatus
JP2009176253A (en) 2008-01-28 2009-08-06 Ricoh Co Ltd Electronic document security system
JP2018113688A (en) 2012-09-14 2018-07-19 エイディシーテクノロジー株式会社 Line-of-sight shielding device
US20190080097A1 (en) 2017-09-14 2019-03-14 International Business Machines Corporation Methods and systems for rendering holographic content
US20190228689A1 (en) 2018-01-23 2019-07-25 Fuji Xerox Co., Ltd. Information processing apparatus, information processing system, and non-transitory computer readable medium
JP2019128726A (en) 2018-01-23 2019-08-01 富士ゼロックス株式会社 Information processing device, information processing system, and program
JP2019128723A (en) 2018-01-23 2019-08-01 富士ゼロックス株式会社 Information processing device, information processing system, and program
JP2019159451A (en) 2018-03-08 2019-09-19 富士ゼロックス株式会社 Electronic document display control system

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007188264A (en) 2006-01-12 2007-07-26 Ricoh Co Ltd Display control apparatus
JP2009176253A (en) 2008-01-28 2009-08-06 Ricoh Co Ltd Electronic document security system
JP2018113688A (en) 2012-09-14 2018-07-19 エイディシーテクノロジー株式会社 Line-of-sight shielding device
US20190080097A1 (en) 2017-09-14 2019-03-14 International Business Machines Corporation Methods and systems for rendering holographic content
US20190228689A1 (en) 2018-01-23 2019-07-25 Fuji Xerox Co., Ltd. Information processing apparatus, information processing system, and non-transitory computer readable medium
JP2019128726A (en) 2018-01-23 2019-08-01 富士ゼロックス株式会社 Information processing device, information processing system, and program
JP2019128724A (en) 2018-01-23 2019-08-01 富士ゼロックス株式会社 Information processing device, information processing system, and program
JP2019128723A (en) 2018-01-23 2019-08-01 富士ゼロックス株式会社 Information processing device, information processing system, and program
JP2019159451A (en) 2018-03-08 2019-09-19 富士ゼロックス株式会社 Electronic document display control system

Also Published As

Publication number Publication date
JP2021117789A (en) 2021-08-10

Similar Documents

Publication Publication Date Title
CN110443083B (en) User interface security in virtual reality environments
US10553031B2 (en) Digital project file presentation
US10430559B2 (en) Digital rights management in virtual and augmented reality
US20230350628A1 (en) Intuitive augmented reality collaboration on visual data
JP2016511863A (en) Mixed reality display adjustment
CN104427282B (en) Information processing unit, information processing method and program
Siriborvornratanakul Enhancing user experiences of mobile-based augmented reality via spatial augmented reality: Designs and architectures of projector-camera devices
CN104423806B (en) Information processing unit, information processing method and program
US20180158243A1 (en) Collaborative manipulation of objects in virtual reality
JP2015118556A (en) Augmented reality overlay for control devices
KR102644590B1 (en) Synchronization of positions of virtual and physical cameras
US20210342010A1 (en) Method and apparatus for manipulating content in an interface
WO2016042256A1 (en) Device and method for orchestrating display surfaces, projection devices and 2d and 3d spatial interaction devices for creating interactive environments
KR20220165780A (en) Physical companion devices for use with extended reality systems
JP7447507B2 (en) Information processing device and program
JP5830055B2 (en) Image processing apparatus and image processing system
JP6208910B1 (en) Moving image processing apparatus, moving image processing system, moving image processing method, and moving image processing program
JP7380253B2 (en) Information processing device and program
Do et al. Vice VRsa: Balancing Bystander's and VR user’s Privacy through Awareness Cues Inside and Outside VR
US20210132700A1 (en) Method and apparatus for manipulating content in an interface
McDonnell Immersive Technology and Medical Visualisation: A Users Guide
Shumaker Virtual, Augmented and Mixed Reality: Designing and Developing Augmented and Virtual Environments: 5th International Conference, VAMR 2013, Held as Part of HCI International 2013, Las Vegas, NV, USA, July 21-26, 2013, Proceedings, Part I
US20240019928A1 (en) Gaze and Head Pose Interaction
US20230185887A1 (en) Controlling Generation of Objects
Claydon Alternative realities: from augmented reality to mobile mixed reality

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20221223

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230710

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230829

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20231027

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240130

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240212

R150 Certificate of patent or registration of utility model

Ref document number: 7447507

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150