JP2018092228A - Information processing terminal, control method of information processing terminal and program - Google Patents
Information processing terminal, control method of information processing terminal and program Download PDFInfo
- Publication number
- JP2018092228A JP2018092228A JP2016232699A JP2016232699A JP2018092228A JP 2018092228 A JP2018092228 A JP 2018092228A JP 2016232699 A JP2016232699 A JP 2016232699A JP 2016232699 A JP2016232699 A JP 2016232699A JP 2018092228 A JP2018092228 A JP 2018092228A
- Authority
- JP
- Japan
- Prior art keywords
- information processing
- processing terminal
- image data
- display
- terminal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- User Interface Of Digital Computer (AREA)
- Information Transfer Between Computers (AREA)
Abstract
Description
本発明は、情報処理端末、情報処理端末の制御方法およびプログラムに関し、特に、2次元コードを読み取る情報処理端末が、携帯端末として用いられるかヘッドマウントディスプレイとして用いられるかによって、当該2次元コードに対応する文字データまたは画像データの表示を変えることによって、ユーザにとって視認性の高い表示を行うことが可能な仕組みを提供する技術に関する。 The present invention relates to an information processing terminal, a control method for the information processing terminal, and a program, and in particular, depending on whether an information processing terminal that reads a two-dimensional code is used as a mobile terminal or a head-mounted display, The present invention relates to a technique for providing a mechanism capable of performing display with high visibility for a user by changing display of corresponding character data or image data.
印刷物の電子化によるペーパーレス化が進んでいるが、視認性の高さなどから依然として紙媒体に対する需要は多くある。しかし、紙媒体の印刷文書に機密情報が記載されている場合、その印刷文書を紛失すると、情報漏洩につながる可能性があった。また、仮に紙媒体の印刷文書を紛失した場合でも機密情報の漏洩を回避したいという課題がある。 Although paperless printing is progressing through digitization of printed materials, there is still a great demand for paper media due to its high visibility. However, when confidential information is described in a printed document on a paper medium, the loss of the printed document may lead to information leakage. Further, there is a problem that it is desired to avoid leakage of confidential information even if a printed document on a paper medium is lost.
そこで、特許文献1には、印刷文書内の機密情報を、認証情報を含めて暗号化し、紙媒体として印刷する。その印刷文書をスマートフォンなどの端末でカメラ撮影して読み取り、認証情報を入力することで、端末上で復号化した文書を閲覧することができる技術が記載されている。
Therefore, in
特許文献1では、暗号化した文書をスマートフォンなどのカメラ付き端末を通して見ることで、端末を介して見た場合に限り復号化された文書が確認可能であった。しかしながら、端末側の表示がスマートフォンなどの端末であると、画面領域に限りがあり視認性が低い。
In
また、常に手に持った状態でかざす必要があり、虫眼鏡のような使い方となるため使用者にとって負担となる。 Moreover, it is necessary to always hold it in the hand, which is a burden on the user because it is used like a magnifying glass.
また一方で、一般的にHMDと呼ばれる頭に装着するタイプの端末の場合、ARと呼ばれる拡張現実を作り出すことで、表示領域に限りがなく、人間の視覚視野に近い自然な状態で仮想世界を作り出すことができる。このような端末であれば、上記のスマートフォンのように画面領域に限りがなく、手に持つという動作をせずに復号化した文書を確認することができるため、端末の種類に応じた表示方法が求められていた。 On the other hand, in the case of a terminal of the type generally worn on the head called HMD, by creating an augmented reality called AR, the display area is not limited, and a virtual world can be created in a natural state close to the human visual field. Can be produced. If it is such a terminal, the screen area is not limited like the above smartphone, and the decrypted document can be confirmed without the action of holding it in the hand, so the display method according to the type of terminal Was demanded.
本発明は、2次元コードを読み取る情報処理端末が、携帯端末として用いられるかヘッドマウントディスプレイとして用いられるかによって、当該2次元コードに対応する文字データまたは画像データの表示を変えることによって、ユーザにとって視認性の高い表示を行うことが可能な仕組みを提供することを目的とする。 The present invention changes the display of character data or image data corresponding to the two-dimensional code depending on whether the information processing terminal that reads the two-dimensional code is used as a portable terminal or a head-mounted display. It is an object to provide a mechanism capable of performing display with high visibility.
本発明は、撮影手段を有する情報処理端末であって、文字または画像が印字された紙媒体であって、前記文字または前記画像の少なくとも一部が認識不可能となるように加工され、加工された前記文字または前記画像の上に2次元コードが複数印字された紙媒体から、前記撮影手段を用いて当該2次元コードを読み取る読取手段と、前記読取手段により読み取った2次元コードに対応する文字データまたは画像データを表示する表示手段と、前記情報処理端末が、携帯端末として用いられるか、ヘッドマウントディスプレイとして用いられるかを判定する判定手段とを備え、前記表示手段は、前記判定手段により携帯端末として用いられると判定された場合には、複数の前記2次元コードに対応する文字データまたは画像データを一覧で表示し、ヘッドマウントディスプレイとして用いられると判定された場合には、複数の前記2次元コードに対応する前記文字データまたは画像データを、前記撮影手段により前記紙媒体を撮影することによって得られる画像データの複数の前記2次元コード上にそれぞれ重ね合わせた画像データを表示することを特徴とする。 The present invention is an information processing terminal having photographing means, which is a paper medium on which characters or images are printed, and is processed and processed so that at least a part of the characters or the images cannot be recognized. Further, a reading unit that reads the two-dimensional code from the paper medium on which the two-dimensional code is printed on the character or the image using the photographing unit, and a character corresponding to the two-dimensional code read by the reading unit Display means for displaying data or image data, and determination means for determining whether the information processing terminal is used as a portable terminal or a head-mounted display. The display means is portable by the determination means. When it is determined to be used as a terminal, a list of character data or image data corresponding to a plurality of the two-dimensional codes is displayed. When it is determined to be used as a head-mounted display, a plurality of pieces of image data obtained by photographing the paper medium by the photographing unit using the character data or image data corresponding to the plurality of two-dimensional codes. The superimposed image data is displayed on the two-dimensional code.
また、本発明は、撮影手段を有する情報処理端末の制御方法であって、前記情報処理端末の読取手段が、文字または画像が印字された紙媒体であって、前記文字または前記画像の少なくとも一部が認識不可能となるように加工され、加工された前記文字または前記画像の上に2次元コードが複数印字された紙媒体から、前記撮影手段を用いて当該2次元コードを読み取る読取工程と、前記情報処理端末の表示手段が、前記読取工程により読み取った2次元コードに対応する文字データまたは画像データを表示する表示工程と、前記情報処理端末の判定手段が、前記情報処理端末が、携帯端末として用いられるか、ヘッドマウントディスプレイとして用いられるかを判定する判定工程とを備え、前記情報処理端末の前記表示工程は、前記判定工程により携帯端末として用いられると判定された場合には、複数の前記2次元コードに対応する文字データまたは画像データを一覧で表示し、ヘッドマウントディスプレイとして用いられると判定された場合には、複数の前記2次元コードに対応する前記文字データまたは画像データを、前記撮影手段により前記紙媒体を撮影することによって得られる画像データの複数の前記2次元コード上にそれぞれ重ね合わせた画像データを表示することを特徴とする。 The present invention is also a method of controlling an information processing terminal having a photographing unit, wherein the reading unit of the information processing terminal is a paper medium on which characters or images are printed, and at least one of the characters or the images. A reading step of reading the two-dimensional code by using the photographing unit from a paper medium in which a plurality of two-dimensional codes are printed on the processed character or image. The display unit of the information processing terminal displays character data or image data corresponding to the two-dimensional code read by the reading step, and the determination unit of the information processing terminal is portable by the information processing terminal. A determination step for determining whether the information processing terminal is used as a terminal or a head-mounted display. If it is determined that it is used as a portable terminal, a list of character data or image data corresponding to a plurality of the two-dimensional codes is displayed, and if it is determined that it is used as a head mounted display, a plurality of Displaying image data obtained by superimposing the character data or image data corresponding to the two-dimensional code on a plurality of the two-dimensional codes of image data obtained by photographing the paper medium by the photographing unit. It is characterized by.
また、本発明は、撮影手段を有する情報処理端末で読み取り実行可能なプログラムあって、前記情報処理端末を、文字または画像が印字された紙媒体であって、前記文字または前記画像の少なくとも一部が認識不可能となるように加工され、加工された前記文字または前記画像の上に2次元コードが複数印字された紙媒体から、前記撮影手段を用いて当該2次元コードを読み取る読取手段と、前記読取手段により読み取った2次元コードに対応する文字データまたは画像データを表示する表示手段と、前記情報処理端末が、携帯端末として用いられるか、ヘッドマウントディスプレイとして用いられるかを判定する判定手段として機能させ、前記表示手段は、前記判定手段により携帯端末として用いられると判定された場合には、複数の前記2次元コードに対応する文字データまたは画像データを一覧で表示し、ヘッドマウントディスプレイとして用いられると判定された場合には、複数の前記2次元コードに対応する前記文字データまたは画像データを、前記撮影手段により前記紙媒体を撮影することによって得られる画像データの複数の前記2次元コード上にそれぞれ重ね合わせた画像データを表示することを特徴とする。 In addition, the present invention is a program that can be read and executed by an information processing terminal having a photographing unit, and the information processing terminal is a paper medium on which characters or images are printed, and at least a part of the characters or the images Reading means for reading the two-dimensional code using the photographing means, from a paper medium in which a plurality of two-dimensional codes are printed on the processed character or image, Display means for displaying character data or image data corresponding to the two-dimensional code read by the reading means, and determination means for determining whether the information processing terminal is used as a portable terminal or a head mounted display And when the determination means determines that the display means is used as a portable terminal, a plurality of the display means Character data or image data corresponding to the dimension code is displayed in a list, and when it is determined that the data is used as a head mounted display, the character data or image data corresponding to a plurality of the two-dimensional codes is stored in the photographing unit. The image data superimposed on each of the plurality of two-dimensional codes of the image data obtained by photographing the paper medium is displayed.
本発明によれば、2次元コードを読み取る情報処理端末が、携帯端末として用いられるかヘッドマウントディスプレイとして用いられるかによって、当該2次元コードに対応する文字データまたは画像データの表示を変えることによって、ユーザにとって視認性の高い表示を行うことができる。 According to the present invention, depending on whether an information processing terminal that reads a two-dimensional code is used as a portable terminal or a head-mounted display, by changing the display of character data or image data corresponding to the two-dimensional code, A display with high visibility for the user can be performed.
以下、図面を参照して、本発明の実施形態を詳細に説明する。 Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.
図1は本発明のシステムの一例を示すシステム構成図である。 FIG. 1 is a system configuration diagram showing an example of the system of the present invention.
本願発明の実施形態におけるシステムは、LAN120上に、情報処理端末110、および認証サーバ130が接続され構成される。
The system according to the embodiment of the present invention is configured by connecting an
LAN120は、ローカルエリアネットワークのことで、企業や家庭内でのネットワークを指すが、これに限ったものではなく、公衆回線であったり、Wi−Fiネットワークであったりしてもかまわない。 The LAN 120 is a local area network and indicates a network in a company or a home, but is not limited to this, and may be a public line or a Wi-Fi network.
情報処理端末110は、ユーザにより利用される情報処理装置であって、HMDやスマートフォンなどの端末などを適用可能であり、認証サーバ130から復号化された文書または復号化されたリストを取得するための装置である。
なお、本発明における暗号化とは、文字データ、画像データの表示をユーザが視認できないようにすることをいう。例えば、マスクされている状態をいう。また、本発明における復号化とは、マスクされユーザに視認できない状態の文字データ、画像データの表示をユーザに視認できるようにすることをいう。
The
Note that encryption in the present invention means that the display of character data and image data is not visually recognized by the user. For example, it means a masked state. Decoding in the present invention means that the user can visually recognize the display of character data and image data that are masked and cannot be visually recognized by the user.
本実施形態では、ユーザが利用する情報処理端末110の例として、例えばウェアラブルカメラ、スマートフォンを利用するものとしているが、これに限る必要はなくさまざまな情報処理装置で構成することが可能である。
In this embodiment, as an example of the
認証サーバ130は、情報処理端末110を所持するユーザが暗号文書を復号化して閲覧させても良いユーザかどうかの認証を行うサーバであるである。
The
次に、図2を用いて、図1に示した情報処理端末110、認証サーバ130に適用可能なハードウェア構成について説明する。
Next, a hardware configuration applicable to the
図2は、図1に示した情報処理端末110、認証サーバ130に適用可能な情報処理装置のハードウェア構成を示すブロック図である。各装置ともに、同様な構成を備えるため、同一の符号を用いて説明を行う。
FIG. 2 is a block diagram illustrating a hardware configuration of an information processing apparatus applicable to the
CPU201は、システムバス204に接続される各デバイスやコントローラを統括的に制御する。
The
ROM202あるいは外部メモリ212には、CPU201の制御プログラムであるBIOS(Basic Input / Output System)やオペレーティングシステムプログラム(以下、OS)や、サーバ或いは各クライアントの実行する機能を実現するために必要な後述する各種プログラム等が記憶されている。
In the
RAM203は、CPU201の主メモリ、ワークエリア等として機能する。
The
CPU201は、処理の実行に際して必要なプログラム等をRAM203にロードして、プログラムを実行することで各種動作を実現するものである。
The
入力コントローラ(入力C)205は、キーボード/タッチパネル209やカメラ(画像読取部)からの入力を制御する。
An input controller (input C) 205 controls input from the keyboard /
ビデオコントローラ(VC)206は、表示端末(ディスプレイ)211への表示を制御する。 A video controller (VC) 206 controls display on a display terminal (display) 211.
ディスプレイは、CRTディスプレイでも液晶ディスプレイ等でも構わない。 The display may be a CRT display or a liquid crystal display.
メモリコントローラ(MC)207は、ブートプログラム、ブラウザソフトウエア、各種のアプリケーション、フォントデータ、利用者ファイル、編集ファイル、各種データ等を記憶するハードディスク(HD)やフロッピー(登録商標)ディスク(登録商標)(FD)或いはPCMCIAカードスロットにアダプタを介して接続されるコンパクトフラッシュ(登録商標)メモリ等の外部メモリ212へのアクセスを制御する。
The memory controller (MC) 207 is a hard disk (HD) or floppy (registered trademark) disk (registered trademark) that stores a boot program, browser software, various applications, font data, user files, editing files, various data, and the like. Controls access to an
通信I/Fコントローラ(通信I/FC)208は、ネットワークLAN103120を介して、外部機器と接続・通信するものであり、ネットワークでの通信制御処理を実行する。例えば、TCP/IPを用いたインターネット通信等が可能である。 A communication I / F controller (communication I / FC) 208 is connected to and communicates with an external device via the network LAN 103120, and executes communication control processing in the network. For example, Internet communication using TCP / IP is possible.
なお、CPU201は、例えばRAM203内の表示情報用領域へアウトラインフォントの展開(ラスタライズ)処理を実行することにより、ディスプレイ211上での表示を可能としている。
Note that the
また、CPU201は、ディスプレイ211上の不図示のマウスカーソル等での利用者指示を可能とする。
In addition, the
本発明を実現するためのプログラムは外部メモリ212に記録されており、必要に応じてRAM203にロードされることによりCPU201によって実行されるものである。
A program for realizing the present invention is recorded in the
さらに、本発明に係わるプログラムが用いる各種データ及び各種テーブルは外部メモリ212に格納されており、これらについての詳細な説明は後述する。
Further, various data and various tables used by the program according to the present invention are stored in the
図3は、情報処理端末110、及び認証サーバ130が備える機能又はハードウェアを示すブロック図の一例を示す図である。
FIG. 3 is a diagram illustrating an example of a block diagram illustrating functions or hardware included in the
情報処理端末110は、暗号化文書復号化システム通信制御部304と、表示装置305と、入力装置306を有する。
The
暗号化文書復号化システム通信制御部304は、図2のCPU201に相当し、表示装置305は、図2のディスプレイ211に相当し、入力装置306は、図2のキーボード/タッチパネル209とカメラ(画像読取部)210に相当している。
The encrypted document decryption system
表示装置305は、前記読取手段により読み取った2次元コードに対応する文字データまたは画像データを表示する表示手段の適用例である。
The
認証サーバ130は、認証情報記憶部301と、文書情報記憶部302と、通信制御部303とを有する。
The
文書情報記憶部302には、復号化された文書が記憶されている。また、認証情報記憶部301には、ユーザ認証を許可するユーザID、パスワードの組の情報が記憶されている。
The document information storage unit 302 stores the decrypted document. Further, the authentication
通信制御部303は、図2のCPU201に相当し、認証情報記憶部301及び、文書情報記憶部302は、図2の外部メモリ212に相当する。
The
以下、図4のフローチャートを用いて、本発明における端末の種類に応じたカメラ機能を用いた復号文書の表示システムの処理の一例について説明する。 Hereinafter, an example of processing of the decrypted document display system using the camera function corresponding to the type of terminal according to the present invention will be described with reference to the flowchart of FIG.
ステップS401では、まず、情報処理端末110は、ユーザから認証の為の情報を取得する為に、図5に示すユーザ認証画面を情報処理端末110の表示装置305に表示する。
In step S401, first, the
図5は、情報処理端末110の表示装置305に表示されるユーザ認証画面501(ユーザ認証ダイアログ)の一例を示す図である。
FIG. 5 is a diagram illustrating an example of a user authentication screen 501 (user authentication dialog) displayed on the
図5のユーザ認証画面501には、ユーザIDの入力欄502と、パスワードの入力欄503と、OKボタン504とが表示される。
On the
情報処理端末110は、ユーザにより、ユーザIDと、パスワードの入力を受け付け、OKボタン504の押下を受け付けると、当該入力されたユーザIDと、パスワードとを、認証サーバ130に送信してユーザ認証要求を行う(ステップS402)。
When the
次に、認証サーバ130は、情報処理端末110からユーザIDとパスワードを受信すると(ステップS403)、当該受信したユーザID、パスワードの組が、認証サーバ130の認証情報記憶部301に格納されたユーザID、パスワードの組と、一致しているか否かを判定して、ユーザの認証処理(ユーザ認証手段)を実行する(ステップS404)。
Next, when the
そして、認証サーバ130(認証情報記憶部301)は、ユーザの認証が成功した場合、認証結果情報を、情報処理端末110に送信する(ステップS405)。 Then, if the user authentication is successful, the authentication server 130 (authentication information storage unit 301) transmits authentication result information to the information processing terminal 110 (step S405).
ステップS406では、情報処理端末110は、認証サーバ130より認証結果情報を受信する。
In step S <b> 406, the
ステップS407では、情報処理端末110は、ステップS406で取得した「認証結果情報」が「認証成功」であると判定された場合には(ステップS407:YES)、処理をステップS408に移行する。
In step S407, when it is determined that the “authentication result information” acquired in step S406 is “authentication success” (step S407: YES), the
一方、情報処理端末110は、S406で取得した「認証結果情報」が失敗(「認証成功」ではない)と判定された場合には(ステップS407:NO)、処理を終了する。
On the other hand, if it is determined that the “authentication result information” acquired in S406 is unsuccessful (not “authentication successful”) (step S407: NO), the
ステップS408では、情報処理端末110は、情報処理端末110のカメラ機能を使用して暗号化された印刷済みの紙媒体の文書から文書情報を取得する。ステップS408は、文字または画像が印字された紙媒体であって、前記文字または前記画像の少なくとも一部が認識不可能となるように加工され、加工された前記文字または前記画像の上に2次元コードが複数印字された紙媒体から、前記撮影手段を用いて当該2次元コードを読み取る読取手段の適用例である。
In step S <b> 408, the
ここでステップS408にて、情報処理端末110の入力装置306で暗号化された印刷文書を読み取る処理の一例の画面(図7)の説明をする。
Here, in step S408, an example of a screen (FIG. 7) for reading a print document encrypted by the
図7は、ステップS408にて、情報処理端末110の入力装置306で暗号化された印刷文書を読み取る処理の一例である。
FIG. 7 is an example of a process for reading a print document encrypted by the
スマートフォン702(情報処理装置110に相当)のカメラ機能を使用して、印刷文書701に印刷されているQRコード(登録商標)を読み取る。印刷文書701では、暗号文602が暗号文[1](図面では丸印の中に「1」と記載)(暗号文1)、暗号文[2](図面では丸印の中に「2」と記載)、暗号文[3](図面では丸印の中に「3」と記載)、暗号文[4](図面では丸印の中に「4」と記載)(暗号画像1)が存在する図を示す。そして、暗号文[1]、暗号文[2]、暗号文[3]、暗号文[4]の各々にQRコード(登録商標)とARマーカーが印刷されている図を示す。
The QR code (registered trademark) printed on the
ステップS409では、情報処理端末110は、ステップS408で取得した文書情報に「暗号化文書情報が存在する」と判定された場合には(ステップS409:YES)、処理をステップS410に移行する。
In step S409, if it is determined that “encrypted document information exists” in the document information acquired in step S408 (step S409: YES), the
一方、情報処理端末110は、ステップS408で取得した文書情報に暗号化文書情報が存在しないと判定された場合には(ステップS409:NO)、処理を終了する。
On the other hand, when it is determined that the encrypted document information does not exist in the document information acquired in step S408 (step S409: NO), the
ステップS410では、情報処理端末110は、ステップS408で取得した文書情報の暗号化情報を復号する。
In step S410, the
ステップS409〜ステップS410を具体的に説明すると、暗号化情報の印刷文書への印刷方法の一例としては、QRコード(登録商標)が使用可能である。印刷文書にQRコード(登録商標)が存在する場合、上述の暗号化文書情報が存在するかどうかの判断において「存在する」と判断することができ、そのQRコード(登録商標)を基に暗号化情報の復号化を行うことができる。 Steps S409 to S410 will be specifically described. As an example of a method for printing encrypted information on a print document, a QR code (registered trademark) can be used. When a QR code (registered trademark) exists in a printed document, it can be determined that “exists” in determining whether the above-described encrypted document information exists, and encryption is performed based on the QR code (registered trademark). The decryption information can be decoded.
また、QRコード(登録商標)が印刷文書内に複数存在する場合は、カメラ内に撮影されている各々のQRコード(登録商標)を順に復号化する。また、一度に全暗号化情報を復号化したい場合は、一つのQRコード(登録商標)に複数の暗号化情報(復号化情報の表示位置、暗号化前の文書情報)を含めておいても良い。この方法であれば、印刷文書内の複数のQRコード(登録商標)を撮影することなく、一度に複数の暗号化情報の復号が可能である。 If there are a plurality of QR codes (registered trademark) in the print document, each QR code (registered trademark) photographed in the camera is sequentially decoded. If it is desired to decrypt all encrypted information at once, a plurality of encrypted information (decrypted information display position, document information before encryption) may be included in one QR code (registered trademark). good. With this method, it is possible to decrypt a plurality of encrypted information at a time without photographing a plurality of QR codes (registered trademark) in a printed document.
ステップS411では、情報処理端末110は、ステップS410で復号した文書情報を表示する為の表示形式の判断方法を取得する。
In step S411, the
ステップS412では、情報処理端末110は、ステップS411で取得した表示形式の判断方法が「情報処理端末を手に持っているかどうかで判断」と判定された場合には(ステップS412:YES)、処理をステップS413に移行する。一方、情報処理端末110は、S411で取得した表示形式の判断方法が「情報処理端末を手に持っているかどうかで判断」ではないと判定された場合には(ステップS412:NO)、処理をステップS416に移行する。情報処理端末を手に持っているかどうかで判断するかは、事前にユーザから設定画面等で受け付ける。または、ステップS412の処理をせず、ステップS413で加速度センサーの情報を取得して、手に持っていなければステップS416の端末の種類で判定する処理に進むようにしてもよい。
In step S412, the
ステップS413では、情報処理端末110は、ユーザが情報処理端末110を手に持っているかどうか判定する為に、情報処理端末110の加速度センサーの情報を取得する。
In step S413, the
ステップS414では、情報処理端末110は、ステップS413で取得した加速度センサーの情報から加速度センサーで検出できる動きの状態である、傾きと、衝撃と、振動等のいずれか一つに所定の値以上の変化があり「端末を手に持っている」と判定された場合には(ステップS414:YES)、処理をステップS415に移行する。一方、情報処理端末110は、S413で取得した表示形式の判断方法が端末を手に持っていないと判定された場合には(ステップS414:NO)、処理をステップS419に移行する。
In step S414, the
ステップS415では、情報処理端末110は、情報処理端末110の表示装置305に復号した情報をリスト形式で表示(図8)し、処理を終了する。
In step S415, the
ここで図8の説明をする。 Here, FIG. 8 will be described.
図8は、ステップS408にて、情報処理端末110の入力装置306で全てのQRコード(登録商標)を読み取り、ステップS415にて、情報処理端末110の表示装置305に復号化された情報を表示した図である。スマートフォン801に、図7の印刷文書701から読み取った暗号化情報を復号化してリスト形式で表示する。具体的には、各QRコード(登録商標)を読み取ると、暗号文1と、暗号文2と、暗号文3と、暗号画像1が復号されて表示する。
8, all QR codes (registered trademark) are read by the
ステップS416では、情報処理端末110は、ステップS411で取得した表示形式の判断方法が「端末の種類で判断」と判定された場合には(ステップS416:YES)、処理をステップS417に移行する。一方、情報処理端末110は、ステップS411で取得した表示形式の判断方法が「端末の種類で判断」ではないと判定された場合には(ステップS416:NO)、処理を終了する。端末の種類で判断かは、事前にユーザから設定画面等で設定を受け付ける。
In step S416, when the
ステップS417の処理をする理由は、例えばスマートフォンをHMDに装着して使用する場合に端末の種類で判断が必要になるためである。つまり、スマートフォンをHMDに装着して使用する場合には、HMDと判断するための処理である。 The reason why the process of step S417 is performed is that, for example, when a smartphone is attached to the HMD and used, it is necessary to determine the type of terminal. That is, it is a process for determining that the smartphone is an HMD when the smartphone is used on the HMD.
ステップS417では、情報処理端末110は、端末がHMD(ヘッドマウントディスプレイ)形式の端末かどうか判断する為に情報処理端末110の「端末種別情報(情報処理端末がHMDとして使用される形態の端末であるか、手に持って使用される形態の端末であるかを示す情報)」を取得する。
In step S417, the
ステップS418では、情報処理端末110は、ステップS417で取得した端末種別情報から「端末がHMDである」と判定された場合には(ステップS417:YES)、処理をステップS419に移行する。一方、情報処理端末110は、ステップS417で取得した端末種別情報から端末がHMDではないと判定された場合には(ステップS417:NO)、処理をステップS415に移行する。ステップS418は、前記情報処理端末が、携帯端末として用いられるか、ヘッドマウントディスプレイとして用いられるかを判定する判定手段の適用例である。
In step S418, if the
ステップS419では、情報処理端末110は、情報処理端末110の表示装置305に復号した情報をARと呼ばれる拡張現実(以下、ARと称する)として撮影情報に重ねて表示する。ARの実現方法の一例としては、例えば、特開2016−71705にあるように、暗号化情報のQRコード(登録商標)と、同一箇所にARマーカーを印刷文書に印刷し、ARマーカーをARの表示基準位置として復号化した情報を重ねて表示する方法がある。ARマーカーはQRコード(登録商標)と別途印刷してもよいし、QRコード(登録商標)をARマーカーとして使用してもよい。AR表示後、処理を終了する。
In step S419, the
ステップS415とステップS419は、前記表示手段は、前記判定手段により携帯端末として用いられると判定された場合には、複数の前記2次元コードに対応する文字データまたは画像データを一覧で表示し、ヘッドマウントディスプレイとして用いられると判定された場合には、複数の前記2次元コードに対応する前記文字列データまたは画像データを、前記撮影手段により前記紙媒体を撮影することによって得られる画像データの複数の前記二次元コード上にそれぞれ重ね合わせた画像データを表示する適用例である。 In step S415 and step S419, the display means displays a list of character data or image data corresponding to a plurality of the two-dimensional codes when it is determined that the display means is used as a portable terminal. When it is determined to be used as a mount display, the character string data or image data corresponding to a plurality of the two-dimensional codes is used as a plurality of pieces of image data obtained by photographing the paper medium by the photographing unit. This is an application example in which image data superimposed on the two-dimensional code is displayed.
次に図6を用いて、本発明における端末の種類に応じたカメラ機能を用いた復号文書の表示の一例について説明する。 Next, an example of display of a decrypted document using a camera function corresponding to the type of terminal in the present invention will be described with reference to FIG.
図6は、ステップS408にて、情報処理端末110の入力装置306で暗号化された印刷文書を読み取り、ステップS419にて情報処理端末110の表示装置305に復号化した情報を表示する一例である。
FIG. 6 is an example of reading a print document encrypted with the
印刷文書601は暗号化情報のQRコード(登録商標)とARマーカーを印刷した印刷文書である。
HMD603のカメラ機能で読み取った暗号化された印刷文書601の暗号文602を読み取り、HMD603に撮影情報と復号した情報を重ねて表示(印刷文書604)する。本実施例ではQRコード(登録商標)はスマートフォンの表示装置305に表示するときに読み取られ、ARマーカーはHMD603の表示装置305に表示するときに読み取られる説明する。
A
The
印刷文書601では、暗号文602が暗号文[1](図面では丸印の中に「1」と記載)(暗号文1)、暗号文[2](図面では丸印の中に「2」と記載)、暗号文[3](図面では丸印の中に「3」と記載)、暗号文[4](図面では丸印の中に「4」と記載)(暗号画像1)が存在する図を示す。そして、暗号文[1]、暗号文[2]、暗号文[3]、暗号文[4]の各々にQRコード(登録商標)とARマーカーが印刷されている図を示す。
In the
印刷文書604では、暗号文Bが撮影情報と復号した情報を重ねて表示する図を示す。
In the
以上、本発明によるとユーザによって2次元コードを読み取る情報処理端末が、携帯端末として用いられるかヘッドマウントディスプレイとして用いられるかによって、当該2次元コードに対応する文字データまたは画像データの表示を変えることによって、ユーザにとって視認性の高い表示を行うことが可能な仕組みを提供することが可能となる。 As described above, according to the present invention, the display of character data or image data corresponding to the two-dimensional code is changed depending on whether the information processing terminal that reads the two-dimensional code by the user is used as a portable terminal or a head-mounted display. Thus, it is possible to provide a mechanism capable of performing display with high visibility for the user.
以上、本発明の実施形態について示したが、本発明は、例えば、システム、装置、方法、プログラムもしくは記録媒体等としての実施態様をとることが可能である。具体的には、複数の機器から構成されるシステムに適用しても良いし、また、一つの機器からなる装置に適用しても良い。 Although the embodiment of the present invention has been described above, the present invention can take an embodiment as a system, apparatus, method, program, recording medium, or the like. Specifically, the present invention may be applied to a system composed of a plurality of devices, or may be applied to an apparatus composed of a single device.
また、本発明におけるプログラムは、各フローチャートの処理方法をコンピュータが実行可能なプログラムであり、本発明の記憶媒体は各フローチャートの処理方法をコンピュータが実行可能なプログラムが記憶されている。なお、本発明におけるプログラムは各装置の処理方法ごとのプログラムであってもよい。 The program according to the present invention is a program that allows a computer to execute the processing method of each flowchart, and the storage medium of the present invention stores a program that allows the computer to execute the processing method of each flowchart. The program in the present invention may be a program for each processing method of each device.
以上のように、前述した実施形態の機能を実現するプログラムを記録した記録媒体を、システムあるいは装置に供給し、そのシステムあるいは装置のコンピュータ(またはCPUやMPU)が記録媒体に格納されたプログラムを読み出し、実行することによっても本発明の目的が達成されることは言うまでもない。 As described above, a recording medium that records a program that implements the functions of the above-described embodiments is supplied to a system or apparatus, and a computer (or CPU or MPU) of the system or apparatus stores the program stored in the recording medium. It goes without saying that the object of the present invention can also be achieved by reading and executing.
この場合、記録媒体から読み出されたプログラム自体が本発明の新規な機能を実現することになり、そのプログラムを記録した記録媒体は本発明を構成することになる。 In this case, the program itself read from the recording medium realizes the novel function of the present invention, and the recording medium recording the program constitutes the present invention.
プログラムを供給するための記録媒体としては、例えば、フレキシブルディスク、ハードディスク、光ディスク、光磁気ディスク、CD−ROM、CD−R、DVD−ROM、磁気テープ、不揮発性のメモリカード、ROM、EEPROM、シリコンディスク等を用いることが出来る。 As a recording medium for supplying the program, for example, a flexible disk, hard disk, optical disk, magneto-optical disk, CD-ROM, CD-R, DVD-ROM, magnetic tape, nonvolatile memory card, ROM, EEPROM, silicon A disk or the like can be used.
また、コンピュータが読み出したプログラムを実行することにより、前述した実施形態の機能が実現されるだけでなく、そのプログラムの指示に基づき、コンピュータ上で稼働しているOS(オペレーティングシステム)等が実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。 Further, by executing the program read by the computer, not only the functions of the above-described embodiments are realized, but also an OS (operating system) operating on the computer based on an instruction of the program is actually It goes without saying that a case where the function of the above-described embodiment is realized by performing part or all of the processing and the processing is included.
さらに、記録媒体から読み出されたプログラムが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれた後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるCPU等が実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。 Furthermore, after the program read from the recording medium is written to the memory provided in the function expansion board inserted into the computer or the function expansion unit connected to the computer, the function expansion board is based on the instructions of the program code. It goes without saying that the case where the CPU or the like provided in the function expansion unit performs part or all of the actual processing and the functions of the above-described embodiments are realized by the processing.
また、本発明は、複数の機器から構成されるシステムに適用しても、ひとつの機器から成る装置に適用しても良い。また、本発明は、システムあるいは装置にプログラムを供給することによって達成される場合にも適応できることは言うまでもない。この場合、本発明を達成するためのプログラムを格納した記録媒体を該システムあるいは装置に読み出すことによって、そのシステムあるいは装置が、本発明の効果を享受することが可能となる。 The present invention may be applied to a system constituted by a plurality of devices or an apparatus constituted by a single device. Needless to say, the present invention can be applied to a case where the present invention is achieved by supplying a program to a system or apparatus. In this case, by reading a recording medium storing a program for achieving the present invention into the system or apparatus, the system or apparatus can enjoy the effects of the present invention.
さらに、本発明を達成するためのプログラムをネットワーク上のサーバ、データベース等から通信プログラムによりダウンロードして読み出すことによって、そのシステムあるいは装置が、本発明の効果を享受することが可能となる。なお、上述した各実施形態およびその変形例を組み合わせた構成も全て本発明に含まれるものである。 Furthermore, by downloading and reading a program for achieving the present invention from a server, database, etc. on a network using a communication program, the system or apparatus can enjoy the effects of the present invention. In addition, all the structures which combined each embodiment mentioned above and its modification are also included in this invention.
110 情報処理端末
120 LAN
130 認証サーバ
110 Information processing terminal 120 LAN
130 Authentication server
Claims (5)
文字または画像が印字された紙媒体であって、前記文字または前記画像の少なくとも一部が認識不可能となるように加工され、加工された前記文字または前記画像の上に2次元コードが複数印字された紙媒体から、前記撮影手段を用いて当該2次元コードを読み取る読取手段と、
前記読取手段により読み取った2次元コードに対応する文字データまたは画像データを表示する表示手段と、
前記情報処理端末が、携帯端末として用いられるか、ヘッドマウントディスプレイとして用いられるかを判定する判定手段とを備え、
前記表示手段は、前記判定手段により携帯端末として用いられると判定された場合には、複数の前記2次元コードに対応する文字データまたは画像データを一覧で表示し、ヘッドマウントディスプレイとして用いられると判定された場合には、複数の前記2次元コードに対応する前記文字データまたは画像データを、前記撮影手段により前記紙媒体を撮影することによって得られる画像データの複数の前記2次元コード上にそれぞれ重ね合わせた画像データを表示することを特徴とする情報処理端末。 An information processing terminal having photographing means,
A paper medium on which characters or images are printed, wherein at least part of the characters or the images are processed so that they cannot be recognized, and a plurality of two-dimensional codes are printed on the processed characters or images Reading means for reading the two-dimensional code from the paper medium using the photographing means;
Display means for displaying character data or image data corresponding to the two-dimensional code read by the reading means;
Determination means for determining whether the information processing terminal is used as a portable terminal or a head-mounted display,
The display means displays a list of character data or image data corresponding to a plurality of the two-dimensional codes when it is determined by the determination means to be used as a portable terminal, and is determined to be used as a head mounted display. In such a case, the character data or the image data corresponding to the plurality of two-dimensional codes are respectively superimposed on the plurality of two-dimensional codes of image data obtained by photographing the paper medium by the photographing unit. An information processing terminal characterized by displaying combined image data.
前記情報処理端末の読取手段が、文字または画像が印字された紙媒体であって、前記文字または前記画像の少なくとも一部が認識不可能となるように加工され、加工された前記文字または前記画像の上に2次元コードが複数印字された紙媒体から、前記撮影手段を用いて当該2次元コードを読み取る読取工程と、
前記情報処理端末の表示手段が、前記読取工程により読み取った2次元コードに対応する文字データまたは画像データを表示する表示工程と、
前記情報処理端末の判定手段が、前記情報処理端末が、携帯端末として用いられるか、ヘッドマウントディスプレイとして用いられるかを判定する判定工程とを備え、
前記情報処理端末の前記表示工程は、前記判定工程により携帯端末として用いられると判定された場合には、複数の前記2次元コードに対応する文字データまたは画像データを一覧で表示し、ヘッドマウントディスプレイとして用いられると判定された場合には、複数の前記2次元コードに対応する前記文字データまたは画像データを、前記撮影手段により前記紙媒体を撮影することによって得られる画像データの複数の前記2次元コード上にそれぞれ重ね合わせた画像データを表示することを特徴とする制御方法。 A method for controlling an information processing terminal having a photographing means,
The reading means of the information processing terminal is a paper medium on which a character or an image is printed, and is processed so that at least a part of the character or the image cannot be recognized, and the processed character or the image A reading step of reading the two-dimensional code from a paper medium having a plurality of two-dimensional codes printed thereon using the photographing means;
A display step in which the display means of the information processing terminal displays character data or image data corresponding to the two-dimensional code read by the reading step;
A determination step of determining whether the information processing terminal is used as a mobile terminal or a head-mounted display;
The display step of the information processing terminal displays a list of character data or image data corresponding to a plurality of the two-dimensional codes when the determination step determines that the information processing terminal is used as a portable terminal, and a head mounted display When it is determined that the character data or image data corresponding to a plurality of the two-dimensional codes is used, a plurality of the two-dimensional images of the image data obtained by photographing the paper medium by the photographing unit. A control method characterized by displaying image data superimposed on each code.
前記情報処理端末を、
文字または画像が印字された紙媒体であって、前記文字または前記画像の少なくとも一部が認識不可能となるように加工され、加工された前記文字または前記画像の上に2次元コードが複数印字された紙媒体から、前記撮影手段を用いて当該2次元コードを読み取る読取手段と、
前記読取手段により読み取った2次元コードに対応する文字データまたは画像データを表示する表示手段と、
前記情報処理端末が、携帯端末として用いられるか、ヘッドマウントディスプレイとして用いられるかを判定する判定手段として機能させ、
前記表示手段は、前記判定手段により携帯端末として用いられると判定された場合には、複数の前記2次元コードに対応する文字データまたは画像データを一覧で表示し、ヘッドマウントディスプレイとして用いられると判定された場合には、複数の前記2次元コードに対応する前記文字データまたは画像データを、前記撮影手段により前記紙媒体を撮影することによって得られる画像データの複数の前記2次元コード上にそれぞれ重ね合わせた画像データを表示することを特徴とするプログラム。 There is a program that can be read and executed by an information processing terminal having a photographing means,
The information processing terminal
A paper medium on which characters or images are printed, wherein at least part of the characters or the images are processed so that they cannot be recognized, and a plurality of two-dimensional codes are printed on the processed characters or images Reading means for reading the two-dimensional code from the paper medium using the photographing means;
Display means for displaying character data or image data corresponding to the two-dimensional code read by the reading means;
Functioning as a determination means for determining whether the information processing terminal is used as a portable terminal or a head-mounted display;
The display means displays a list of character data or image data corresponding to a plurality of the two-dimensional codes when it is determined by the determination means to be used as a portable terminal, and is determined to be used as a head mounted display. In such a case, the character data or the image data corresponding to the plurality of two-dimensional codes are respectively superimposed on the plurality of two-dimensional codes of image data obtained by photographing the paper medium by the photographing unit. A program characterized by displaying combined image data.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016232699A JP2018092228A (en) | 2016-11-30 | 2016-11-30 | Information processing terminal, control method of information processing terminal and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016232699A JP2018092228A (en) | 2016-11-30 | 2016-11-30 | Information processing terminal, control method of information processing terminal and program |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2018092228A true JP2018092228A (en) | 2018-06-14 |
Family
ID=62566070
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016232699A Pending JP2018092228A (en) | 2016-11-30 | 2016-11-30 | Information processing terminal, control method of information processing terminal and program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2018092228A (en) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2020205538A (en) * | 2019-06-18 | 2020-12-24 | コニカミノルタ株式会社 | Image processing system, browsing image generation device, terminal device, information processing device, and program |
WO2023276092A1 (en) * | 2021-06-30 | 2023-01-05 | 日本電信電話株式会社 | Display control system, display control method, and display control program |
WO2023276091A1 (en) * | 2021-06-30 | 2023-01-05 | 日本電信電話株式会社 | Display control system, display control method, and display control program |
-
2016
- 2016-11-30 JP JP2016232699A patent/JP2018092228A/en active Pending
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2020205538A (en) * | 2019-06-18 | 2020-12-24 | コニカミノルタ株式会社 | Image processing system, browsing image generation device, terminal device, information processing device, and program |
JP7467834B2 (en) | 2019-06-18 | 2024-04-16 | コニカミノルタ株式会社 | IMAGE PROCESSING SYSTEM, VIEW IMAGE GENERATION DEVICE, TERMINAL DEVICE, INFORMATION PROCESSING DEVICE, AND PROGRAM |
WO2023276092A1 (en) * | 2021-06-30 | 2023-01-05 | 日本電信電話株式会社 | Display control system, display control method, and display control program |
WO2023276091A1 (en) * | 2021-06-30 | 2023-01-05 | 日本電信電話株式会社 | Display control system, display control method, and display control program |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4931924B2 (en) | Media data processing apparatus and media data processing method | |
US10489603B2 (en) | Method and apparatus for image privacy protection | |
JP6503771B2 (en) | Projector and control method | |
US20050226413A1 (en) | Shooting apparatus, managing server, shooting managing system and shooting managing method | |
US10803195B2 (en) | Control method of image communication apparatus, data distribution system, export apparatus, and import apparatus | |
JP2006277239A (en) | Electronic document browsing management system | |
JP2018092228A (en) | Information processing terminal, control method of information processing terminal and program | |
JP2018202708A (en) | Setting information utilization system, electronic apparatus, setting information utilization method, and program | |
JP2014115587A (en) | Portable terminal, information processing method and program | |
JP2007020065A (en) | Decryption backup method, decryption restoration method, attestation device, individual key setting machine, user terminal, backup equipment, encryption backup program, decryption restoration program | |
JP2014106490A (en) | Code image processing system, code image display apparatus, image display apparatus, and program | |
US20110026066A1 (en) | Image processing apparatus, encrypted job execution method thereof, and recording medium | |
US20150154416A1 (en) | Processing method for making electronic documents secure | |
JP6660193B2 (en) | Electronic signature management system | |
EP3438838A1 (en) | Service providing system, serving receiving system, service providing method and program | |
JP5910654B2 (en) | Information processing apparatus, information processing apparatus control method, and program | |
JP6485523B2 (en) | Information processing apparatus, information processing method, and program | |
JP6540403B2 (en) | PORTABLE TERMINAL DEVICE, CONTROL PROGRAM, AND CONTROL METHOD | |
JP6613553B2 (en) | Information processing apparatus, information processing system, control method thereof, and program | |
JP6281560B2 (en) | Information processing apparatus, processing method, and program | |
EP3438860A1 (en) | Service provision system, service exchange system, service provision method, and program | |
JP6044761B2 (en) | Image protection system, photographing apparatus and reproducing apparatus | |
JP2006197118A (en) | Photographing device and server device | |
JP2002341763A (en) | Image signal generating method | |
JP2016126763A (en) | Information processing system, and information processing method and program thereof |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A712 Effective date: 20170719 |
|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20180703 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20181031 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20190111 |