JP7502647B2 - Information code display terminal and program - Google Patents

Information code display terminal and program Download PDF

Info

Publication number
JP7502647B2
JP7502647B2 JP2021029520A JP2021029520A JP7502647B2 JP 7502647 B2 JP7502647 B2 JP 7502647B2 JP 2021029520 A JP2021029520 A JP 2021029520A JP 2021029520 A JP2021029520 A JP 2021029520A JP 7502647 B2 JP7502647 B2 JP 7502647B2
Authority
JP
Japan
Prior art keywords
information code
imaging
display
state
predetermined
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2021029520A
Other languages
Japanese (ja)
Other versions
JP2022130879A (en
Inventor
千鶴 福本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Denso Wave Inc
Original Assignee
Denso Wave Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Denso Wave Inc filed Critical Denso Wave Inc
Priority to JP2021029520A priority Critical patent/JP7502647B2/en
Publication of JP2022130879A publication Critical patent/JP2022130879A/en
Application granted granted Critical
Publication of JP7502647B2 publication Critical patent/JP7502647B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Telephone Function (AREA)

Description

本発明は、情報コードを表示する情報コード表示端末及びプログラムに関するものである。 The present invention relates to an information code display terminal and a program for displaying information codes.

従来、携帯電話等の表示端末に情報コードを表示させてこの情報コードを読取装置に光学的に読み取らせることで、その情報コードに応じた処理を読取装置に行わせる技術が知られている。例えば、利用者が携帯する表示端末に入場チケットとなる情報コードを表示させ、この情報コードを入場ゲートに設けられる読取装置に読み取らせることでその利用者の入場が許可される入場管理システムなどが提案されている。 Conventionally, there is known a technique for displaying an information code on a display terminal such as a mobile phone, and having a reader optically read this information code, thereby causing the reader to perform processing according to the information code. For example, an entrance management system has been proposed in which an information code serving as an entrance ticket is displayed on a display terminal carried by a user, and this information code is read by a reader installed at the entrance gate, thereby permitting the user to enter.

入場チケット等として利用する情報コードは、盗撮等によって不正に複製されやすいという問題がある。このため、例えば、下記特許文献1に開示される情報コード読取システムでは、読取装置にて所定の発光状態にて発光し、この所定の発光状態が情報コード表示端末にて撮像されることで、その情報コード表示端末に情報コードが表示される。このように、所定の発光状態を検出した時のみ情報コードを表示させることで、情報コード表示端末に表示される情報コードの複製防止を行うことができる。 Information codes used as admission tickets, etc., have the problem that they are easily illegally copied by voyeurism, etc. For this reason, for example, in the information code reading system disclosed in the following Patent Document 1, the reading device emits light in a predetermined light-emitting state, and this predetermined light-emitting state is imaged by the information code display terminal, and the information code is displayed on the information code display terminal. In this way, by displaying the information code only when the predetermined light-emitting state is detected, it is possible to prevent copying of the information code displayed on the information code display terminal.

特開2017-107413号公報JP 2017-107413 A

ところで、上述のように発光状態を検出した時のみ情報コードが表示される構成では、発光状態が検出されるまでは情報コード表示端末にて情報コードが表示されなくなる。そうすると、利用者に表示画面が向けられている状態、すなわち、利用者が表示画面を見ている状態では、その表示画面に情報コードが表示されないため、利用者は、情報コードが表示されていない表示画面を読取装置にかざす動作を行うことになる。このように、情報コードが表示されていない表示画面を読取装置にかざす必要がある一方で、その情報コードを利用者自身は見ることができないため、読取装置が情報コードの読み取りに失敗してもその失敗原因を把握できない場合があり、導入の障壁になっていた。 However, in the configuration described above where the information code is displayed only when the light emission state is detected, the information code is not displayed on the information code display terminal until the light emission state is detected. As a result, when the display screen is facing the user, i.e., when the user is looking at the display screen, the information code is not displayed on the display screen, so the user must hold the display screen without the information code over the reading device. In this way, while it is necessary to hold the display screen without the information code over the reading device, the user cannot see the information code himself, so even if the reading device fails to read the information code, there are cases where the user is unable to understand the reason for the failure, which has been an obstacle to implementation.

本発明は、上述した課題を解決するためになされたものであり、その目的とするところは、利用者が視認可能であって盗撮され難い情報コードを表示可能な構成を提供することにある。 The present invention has been made to solve the above-mentioned problems, and its purpose is to provide a configuration capable of displaying an information code that is visible to the user and difficult to photograph secretly.

上記目的を達成するため、特許請求の範囲の請求項1に記載の発明は、
情報コード(C)を表示可能な情報コード表示端末(10)であって、
筐体(11)と、
前記筐体の一方の面(12)に前記情報コードを表示するための表示画面(24a)が設けられる表示部(24)と、
前記一方の面が向けられる方向を撮像方向とする撮像部(23)と、
前記撮像部による撮像結果に基づいて、前記情報コードを非表示とすべき所定の撮像状態であるか否かについて判定する判定部(21)と、
前記表示部の表示状態を制御する表示制御部(21)と、
を備え、
前記判定部は、前記撮像部の撮像画像から検出されたカメラレンズの前記撮像画像に占める比率(R)が所定比率(Rth)以下であって、複数の前記撮像画像から求められる前記カメラレンズの当該情報コード表示端末に対する相対的な移動速度(V)が所定速度(Vth)以下となる場合に、前記所定の撮像状態であると判定し、
前記表示制御部は、前記判定部により前記所定の撮像状態と判定されると、前記表示画面に表示されていた前記情報コードを非表示とするように前記表示部を制御することを特徴とする。
In order to achieve the above object, the invention described in claim 1 of the claims is as follows:
An information code display terminal (10) capable of displaying an information code (C),
A housing (11);
a display unit (24) provided on one surface (12) of the housing with a display screen (24a) for displaying the information code;
An imaging section (23) having an imaging direction in which the one surface is oriented;
a determination unit (21) that determines whether or not a predetermined imaging state is reached in which the information code should be hidden based on an imaging result by the imaging unit;
A display control unit (21) for controlling a display state of the display unit;
Equipped with
the determination unit determines that the predetermined imaging state exists when a ratio (R) of the camera lens to the captured image detected from the captured image of the imaging unit is equal to or smaller than a predetermined ratio (Rth) and a relative moving speed (V) of the camera lens to the information code display terminal obtained from a plurality of the captured images is equal to or smaller than a predetermined speed (Vth);
The display control unit controls the display unit to hide the information code that has been displayed on the display screen when the determination unit determines that the image capturing state is the predetermined image capturing state.

請求項2に記載の発明は、
情報コード(C)を表示可能な情報コード表示端末(10)であって、
筐体(11)と、
前記筐体の一方の面(12)に前記情報コードを表示するための表示画面(24a)が設けられる表示部(24)と、
前記一方の面が向けられる方向を撮像方向とする撮像部(23)と、
前記撮像部による撮像結果に基づいて、前記情報コードを非表示とすべき所定の撮像状態であるか否かについて判定する判定部(21)と、
前記表示部の表示状態を制御する表示制御部(21)と、
当該情報コード表示端末の加速度を検出する加速度センサ(26)と、
を備え、
前記判定部は、前記撮像部の撮像画像からカメラレンズが検出された際、前記加速度センサの検出結果から当該情報コード表示端末の静止状態が検知される場合に、前記所定の撮像状態であると判定し、
前記表示制御部は、前記判定部により前記所定の撮像状態と判定されると、前記表示画面に表示されていた前記情報コードを非表示とするように前記表示部を制御することを特徴とする。
The invention described in claim 2 is
An information code display terminal (10) capable of displaying an information code (C),
A housing (11);
a display unit (24) provided on one surface (12) of the housing with a display screen (24a) for displaying the information code;
An imaging section (23) having an imaging direction in which the one surface is oriented;
a determination unit (21) that determines whether or not a predetermined imaging state is reached in which the information code should be hidden based on an imaging result by the imaging unit;
A display control unit (21) for controlling a display state of the display unit;
an acceleration sensor (26) for detecting the acceleration of the information code display terminal;
Equipped with
the determination unit determines that the information code display terminal is in the predetermined imaging state when a camera lens is detected from an image captured by the imaging unit and a stationary state of the information code display terminal is detected from a detection result of the acceleration sensor,
The display control unit controls the display unit to hide the information code that has been displayed on the display screen when the determination unit determines that the image capturing state is the predetermined image capturing state.

請求項3に記載の発明は、
情報コード(C)を表示可能な情報コード表示端末(10)を制御するコンピュータ(21)により実行されるプログラムであって、
筐体(11)の一方の面(12)に設けられる表示画面(24a)に前記情報コードを表示するステップと、
前記一方の面が向けられる方向を撮像方向とする撮像部(23)の撮像画像から検出されたカメラレンズの前記撮像画像に占める比率(R)が所定比率(Rth)以下であって、複数の前記撮像画像から求められる前記カメラレンズの当該情報コード表示端末に対する相対的な移動速度(V)が所定速度(Vth)以下となる場合に、前記情報コードを非表示とすべき所定の撮像状態であると判定するステップと、
前記所定の撮像状態と判定されることで前記表示画面に表示されていた前記情報コードを非表示とするステップと、
を前記コンピュータに実行させることを特徴とする。
The invention described in claim 3 is
A program executed by a computer (21) that controls an information code display terminal (10) capable of displaying an information code (C),
displaying the information code on a display screen (24a) provided on one surface (12) of the housing (11);
a step of determining that the imaging state is a predetermined imaging state in which the information code should be hidden when a ratio (R) of the camera lens in an image captured by an imaging unit (23) having an imaging direction in the direction in which the one surface is facing is equal to or less than a predetermined ratio (Rth) and a relative moving speed (V) of the camera lens with respect to the information code display terminal, which is obtained from a plurality of the captured images, is equal to or less than a predetermined speed (Vth);
a step of hiding the information code that has been displayed on the display screen when the image capturing state is determined to be the predetermined image capturing state;
The present invention is characterized in that the computer is caused to execute the above steps.

請求項4に記載の発明は、
情報コード(C)を表示可能な情報コード表示端末(10)を制御するコンピュータ(21)により実行されるプログラムであって、
筐体(11)の一方の面(12)に設けられる表示画面(24a)に前記情報コードを表示するステップと、
前記一方の面が向けられる方向を撮像方向とする撮像部(23)の撮像画像からカメラレンズが検出された際、加速度センサ(26)の検出結果から当該情報コード表示端末の静止状態が検知される場合に、前記情報コードを非表示とすべき所定の撮像状態であると判定するステップと、
前記所定の撮像状態と判定されることで前記表示画面に表示されていた前記情報コードを非表示とするステップと、
を前記コンピュータに実行させることを特徴とする。
なお、上記各括弧内の符号は、後述する実施形態に記載の具体的手段との対応関係を示すものである。
The invention described in claim 4 is
A program executed by a computer (21) that controls an information code display terminal (10) capable of displaying an information code (C),
displaying the information code on a display screen (24a) provided on one surface (12) of the housing (11);
a step of determining that the information code display terminal is in a predetermined imaging state in which the information code should be hidden when a camera lens is detected from an image captured by an imaging section (23) whose imaging direction is the direction in which the one surface is directed, and when a stationary state of the information code display terminal is detected from a detection result of an acceleration sensor (26);
a step of hiding the information code that has been displayed on the display screen when the image capturing state is determined to be the predetermined image capturing state;
The present invention is characterized in that the computer is caused to execute the above steps.
The symbols in parentheses above indicate the corresponding relationship with the specific means described in the embodiments described later.

請求項1の発明では、筐体の一方の面に情報コードを表示するための表示部の表示画面が設けられ、この一方の面が向けられる方向を撮像方向とする撮像部が設けられる。そして、撮像部の撮像画像から検出されたカメラレンズの撮像画像に占める比率が所定比率以下であって、複数の撮像画像から求められるカメラレンズの当該情報コード表示端末に対する相対的な移動速度が所定速度以下となる場合に、情報コードを非表示とすべき所定の撮像状態であると判定部により判定されて、表示画面に表示されていた情報コードを非表示とするように表示制御部により表示部が制御される。 In the invention of claim 1, a display screen of a display unit for displaying an information code is provided on one side of a housing, and an imaging unit is provided with an imaging direction in the direction in which this one side is facing. Then, when the ratio of the camera lens in the captured image detected from the captured image of the imaging unit is equal to or less than a predetermined ratio, and the relative moving speed of the camera lens with respect to the information code display terminal determined from the multiple captured images is equal to or less than a predetermined speed, the determination unit determines that the imaging state is a predetermined state in which the information code should be hidden, and the display control unit controls the display unit to hide the information code that was displayed on the display screen.

筐体の一方の面に表示された情報コードをスマートフォン等で盗撮する場合、その盗撮用のカメラレンズは、撮像可能な範囲内で情報コード表示端末から離されて、かつ、情報コードに向けられた状態が維持される。情報コード表示端末に近いと盗撮が見つかってしまい、比較的遠くからデコード可能に撮像するために相対的に静止状態に近づける必要があるからである。一方、筐体の一方の面に表示された情報コードを正当に読取装置が撮像する場合、その読取装置のカメラレンズは、情報コード表示端末に比較的近くなる状態や、情報コードを読取装置に近づけるまでに相対的に移動する状態になる。このため、撮像画像から検出されたカメラレンズの撮像画像に占める比率が所定比率以下であって、そのカメラレンズの相対的な移動速度が所定速度以下となる場合には、盗撮用のカメラレンズが撮像されているとして上記所定の撮像状態であると判定し、情報コードが非表示とされることで、情報コードの盗撮を防止することができる。そして、利用者が表示された情報コードを見る場合には、上記所定の撮像状態と判定されないために、情報コードを視認可能な状態が維持される。したがって、利用者が視認可能であって盗撮され難い情報コードを表示可能な情報コード表示端末を実現することができる。 When the information code displayed on one side of the housing is secretly photographed with a smartphone or the like, the camera lens for the secret photograph is kept away from the information code display terminal within an imageable range and is maintained pointed toward the information code. This is because if the camera lens is close to the information code display terminal, the secret photograph will be discovered, and it is necessary to bring the camera lens relatively close to the information code display terminal in order to capture an image that can be decoded from a relatively long distance. On the other hand, when the reader legitimately captures the information code displayed on one side of the housing, the camera lens of the reader is in a state where it is relatively close to the information code display terminal or moves relatively to the information code until it is brought close to the reader. For this reason, when the ratio of the camera lens detected from the captured image to the captured image is equal to or less than a predetermined ratio and the relative moving speed of the camera lens is equal to or less than a predetermined speed, it is determined that the camera lens for the secret photograph is being photographed and that the above-mentioned predetermined imaging state is established, and the information code is hidden, thereby preventing the information code from being secretly photographed. Then, when the user looks at the displayed information code, the above-mentioned predetermined imaging state is not determined, and the information code is maintained in a state where it can be seen. This makes it possible to realize an information code display terminal that can display an information code that is visible to the user and difficult to capture secretly.

請求項2の発明では、筐体の一方の面に情報コードを表示するための表示部の表示画面が設けられ、この一方の面が向けられる方向を撮像方向とする撮像部が設けられる。そして、撮像部の撮像画像からカメラレンズが検出された際、加速度センサの検出結果から当該情報コード表示端末の静止状態が検知される場合に、情報コードを非表示とすべき所定の撮像状態であると判定部により判定されて、表示画面に表示されていた情報コードを非表示とするように表示制御部により表示部が制御される。 In the invention of claim 2, a display screen of a display unit for displaying an information code is provided on one side of the housing, and an imaging unit is provided with an imaging direction in which the one side is facing. When a camera lens is detected from an image captured by the imaging unit, if the stationary state of the information code display terminal is detected from the detection result of the acceleration sensor, the determination unit determines that the imaging state is a predetermined imaging state in which the information code should be hidden, and the display control unit controls the display unit to hide the information code that was displayed on the display screen.

筐体の一方の面に表示された情報コードを正当に読取装置が撮像する場合、情報コード表示端末の表示画面を読取装置にかざすために情報コード表示端末が移動するので、加速度センサの検出結果から当該情報コード表示端末の移動状態が検知される。一方、加速度センサの検出結果から静止状態が検知される情報コード表示端末によってカメラレンズが撮像されると、そのカメラレンズを有する端末が、情報コード表示端末の撮像範囲に自ら入り込んできているため、表示された情報コードを盗撮する動きをしていると判断することができる。このため、撮像画像からカメラレンズが検出された際、加速度センサの検出結果から当該情報コード表示端末の静止状態が検知される場合には、盗撮用のカメラレンズが撮像されているとして上記所定の撮像状態であると判定し、情報コードが非表示とされることで、情報コードの盗撮を防止することができる。そして、利用者が表示された情報コードを見る場合には、上記所定の撮像状態と判定されないために、情報コードを視認可能な状態が維持される。したがって、利用者が視認可能であって盗撮され難い情報コードを表示可能な情報コード表示端末を実現することができる。 When the reading device legitimately captures an image of the information code displayed on one side of the housing, the information code display terminal moves in order to hold the display screen of the information code display terminal over the reading device, and the moving state of the information code display terminal is detected from the detection result of the acceleration sensor. On the other hand, when a camera lens is captured by an information code display terminal whose stationary state is detected from the detection result of the acceleration sensor, it can be determined that the terminal having the camera lens has entered the imaging range of the information code display terminal and is making a movement to secretly capture the displayed information code. Therefore, when a camera lens is detected from the captured image, if the stationary state of the information code display terminal is detected from the detection result of the acceleration sensor, it is determined that the camera lens for secret photography has been captured and that the above-mentioned specified imaging state is present, and the information code is made invisible, thereby preventing the information code from being secretly photographed. Then, when the user looks at the displayed information code, the above-mentioned specified imaging state is not determined, and the information code is maintained in a state in which it can be seen. Therefore, it is possible to realize an information code display terminal that can display an information code that is visible to the user and difficult to be secretly photographed.

請求項3の発明によれば、請求項1と同様の効果を奏するプログラムを実現できる。
請求項4の発明によれば、請求項2と同様の効果を奏するプログラムを実現できる。
According to the third aspect of the present invention, a program that provides the same effects as the first aspect can be realized.
According to the fourth aspect of the present invention, a program that provides the same effects as those of the second aspect can be realized.

第1実施形態に係る携帯端末に表示された情報コードを読取装置にかざしている状態を説明する説明図である。4 is an explanatory diagram illustrating a state in which an information code displayed on the mobile terminal according to the first embodiment is held over a reading device. FIG. 図1の携帯端末の表示画面に情報コードが表示された状態を説明する説明図である。2 is an explanatory diagram illustrating a state in which an information code is displayed on the display screen of the mobile terminal of FIG. 1 . FIG. 図1の携帯端末の電気的構成を概略的に例示するブロック図である。2 is a block diagram illustrating a schematic electrical configuration of the mobile terminal of FIG. 1; 図1の読取装置の平面図である。FIG. 2 is a plan view of the reading device of FIG. 1; 図1の読取装置の電気的構成を概略的に例示するブロック図である。2 is a block diagram illustrating a schematic electrical configuration of the reading device of FIG. 1; 第1実施形態において携帯端末にてなされる情報コード表示処理の流れを例示するフローチャートである。10 is a flowchart illustrating a flow of an information code display process performed on the mobile terminal in the first embodiment. 図7(A)は、読取装置のカメラレンズが撮像された撮像画像の一例を説明する説明図であり、図7(B)は、読取装置のカメラレンズが撮像された撮像画像の他の例を説明する説明図である。FIG. 7(A) is an explanatory diagram illustrating an example of an image captured by the camera lens of a reading device, and FIG. 7(B) is an explanatory diagram illustrating another example of an image captured by the camera lens of a reading device. 図8(A)は、盗撮用端末のカメラレンズが撮像された撮像画像の一例を説明する説明図であり、図8(B)は、盗撮用端末のカメラレンズが撮像された撮像画像の他の例を説明する説明図である。FIG. 8(A) is an explanatory diagram illustrating an example of an image captured by the camera lens of a voyeurism terminal, and FIG. 8(B) is an explanatory diagram illustrating another example of an image captured by the camera lens of a voyeurism terminal. 第2実施形態において携帯端末にてなされる情報コード表示処理の流れを例示するフローチャートである。13 is a flowchart illustrating the flow of an information code display process performed on a mobile terminal in a second embodiment.

[第1実施形態]
以下、本発明の情報コード表示端末を携帯端末に適用した第1実施形態について、図面を参照して説明する。
本実施形態に係る携帯端末10は、利用者による操作に応じて情報コードを表示可能であって、その情報コードの盗撮を防止可能な携帯型の情報コード表示端末として構成されている。
[First embodiment]
DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS A first embodiment in which an information code display terminal of the present invention is applied to a mobile terminal will be described below with reference to the drawings.
The mobile terminal 10 according to this embodiment is configured as a mobile information code display terminal capable of displaying an information code in response to an operation by a user and capable of preventing unauthorized photographing of the information code.

図1及び図2に示す携帯端末10は、例えば、利用者が所持するスマートフォン等の携帯型の情報処理端末に所定の秘匿情報が記録された情報コードCを生成して表示するためのアプリケーションプログラム(以下、情報コード表示アプリともいう)がインストールされて構成されるものである。この携帯端末10は、略薄板状に形成される筐体11によって外郭が構成され、筐体11の表面12の中央には、情報コードCを表示可能な表示画面24aが配置されている。この表示画面24aに表示された情報コードCを読取装置30にかざすことで、読取装置30にて読み取られた上記所定の秘匿情報に応じた処理がなされる。 The mobile terminal 10 shown in Figures 1 and 2 is configured by installing an application program (hereinafter also referred to as an information code display application) for generating and displaying an information code C in which predetermined confidential information is recorded on a portable information processing terminal such as a smartphone carried by a user. The outer hull of this mobile terminal 10 is formed by a housing 11 formed in a substantially thin plate shape, and a display screen 24a capable of displaying the information code C is disposed in the center of the surface 12 of the housing 11. By holding the information code C displayed on this display screen 24a over a reading device 30, processing is performed according to the predetermined confidential information read by the reading device 30.

携帯端末10は、主に、図3に示すように、CPU等からなる制御部21、ROM,RAM、不揮発性メモリなどからなる記憶部22、受光センサ(例えば、C-MOSエリアセンサ、CCDエリアセンサ等)を備えたカメラとして構成される撮像部23、タッチパネル式の表示部24、タッチパネルに対するタッチ操作や各種操作キーに対する操作に応じた信号を制御部21に出力する操作部25、加速度センサ26、外部機器と無線または有線にて通信可能な通信インタフェースとして構成される通信部27などを備えている。 As shown in FIG. 3, the mobile terminal 10 mainly includes a control unit 21 consisting of a CPU or the like, a storage unit 22 consisting of a ROM, RAM, non-volatile memory, etc., an imaging unit 23 configured as a camera equipped with a light receiving sensor (e.g., a C-MOS area sensor, a CCD area sensor, etc.), a touch panel display unit 24, an operation unit 25 that outputs signals to the control unit 21 in response to touch operations on the touch panel and operations on various operation keys, an acceleration sensor 26, and a communication unit 27 configured as a communication interface capable of wireless or wired communication with external devices.

撮像部23は、筐体11における表面12のうち表示画面24aの近傍に設けられる撮像窓23aを介して外部を撮像するように構成されている。すなわち、撮像部23は、表面12(表示画面24a)が向けられる方向を撮像方向とするインカメラとして機能するように構成されている。なお、表面12は、「一方の面」の一例に相当し得る。 The imaging unit 23 is configured to capture an image of the outside through an imaging window 23a provided near the display screen 24a on the surface 12 of the housing 11. In other words, the imaging unit 23 is configured to function as an in-camera whose imaging direction is the direction in which the surface 12 (display screen 24a) is facing. The surface 12 can be an example of "one side."

加速度センサ26は、3軸方向の加速度を検出可能な公知の3軸加速度センサ(3軸モーションセンサ)であって、X軸方向、Y軸方向およびZ軸方向のそれぞれの方向の加速度を検出し、この検出結果に応じた加速度信号を制御部21に出力するように構成されている。 The acceleration sensor 26 is a known three-axis acceleration sensor (three-axis motion sensor) capable of detecting acceleration in three axial directions, and is configured to detect acceleration in each of the X-axis, Y-axis, and Z-axis directions, and output an acceleration signal according to the detection results to the control unit 21.

このように構成される携帯端末10では、情報コードCを表示部24の表示画面24aに表示する際に、上記情報コード表示アプリを起動することで、制御部21により情報コード表示処理が開始される。この情報コード表示処理では、読取装置30に読み取らせるべき所定の秘匿情報を記録した情報コードCが生成されて表示画面24aに画面表示された後、その情報コードCの盗撮を防止するため、撮像部23による撮像結果に基づいて情報コードCを非表示とすべき所定の撮像状態であると判定される場合に、その情報コードCが非表示とされる。この情報コード表示処理については、後述する。 In the mobile terminal 10 configured in this manner, when the information code C is to be displayed on the display screen 24a of the display unit 24, the information code display application is launched, and the control unit 21 starts the information code display process. In this information code display process, an information code C that records predetermined confidential information to be read by the reading device 30 is generated and displayed on the display screen 24a, and then, in order to prevent surreptitious photography of the information code C, if it is determined based on the imaging result by the imaging unit 23 that the information code C is in a predetermined imaging state in which it should be hidden, the information code C is hidden. This information code display process will be described later.

次に、携帯端末10の表示画面24aに表示された情報コードCを光学的に読み取る読取装置30について、図1、図4及び図5を参照して詳述する。
本実施形態に係る読取装置30は、QRコード(登録商標)やバーコード等の情報コードを光学的に読み取る据え置き型の情報コード読取装置であって、情報コードの読取結果を利用して所定のサービスを提供する店舗等に設置されている。
Next, the reader 30 that optically reads the information code C displayed on the display screen 24a of the mobile terminal 10 will be described in detail with reference to FIGS.
The reading device 30 in this embodiment is a stationary information code reading device that optically reads information codes such as QR codes (registered trademark) and bar codes, and is installed in stores and the like that provide specified services using the results of reading the information codes.

この読取装置30は、図5に示すように、CPUからなる制御部31、ROM,RAM、不揮発性メモリなどからなる記憶部32、撮像部33、液晶表示器などからなる表示部34、LEDなどからなる発光部35、各種操作キー(図示略)によって構成される操作部36、上位端末等の外部機器と有線通信或いは無線通信を行うための通信インタフェースとして構成される通信部37などを備えている。 As shown in FIG. 5, the reading device 30 includes a control unit 31 consisting of a CPU, a storage unit 32 consisting of ROM, RAM, non-volatile memory, etc., an imaging unit 33, a display unit 34 consisting of a liquid crystal display or the like, a light emitting unit 35 consisting of an LED or the like, an operation unit 36 consisting of various operation keys (not shown), and a communication unit 37 consisting of a communication interface for performing wired or wireless communication with an external device such as a higher-level terminal.

撮像部33は、C-MOSやCCD等の固体撮像素子を二次元に配列したエリアセンサ(図示略)やカメラレンズ(結像レンズ)33aを備えるカメラとして構成されている。この撮像部33は、読取装置30の外郭を構成する筐体38の上面中央に設けられる読取口39を介して上方を撮像するように筐体38内に配置されている。本実施形態では、図4に示すように、撮像部33のカメラレンズ33aは、読取口39を介して円形状となるように視認される。 The imaging unit 33 is configured as a camera equipped with an area sensor (not shown) in which solid-state imaging elements such as C-MOS or CCD are arranged two-dimensionally, and a camera lens (imaging lens) 33a. This imaging unit 33 is disposed inside the housing 38 so as to capture an image of the upper side through a reading port 39 provided in the center of the top surface of the housing 38 that constitutes the outer shell of the reading device 30. In this embodiment, as shown in FIG. 4, the camera lens 33a of the imaging unit 33 is viewed as being circular through the reading port 39.

このように構成される読取装置30では、制御部31にてなされる読取処理により、撮像部33により読取口39を介して撮像された情報コードの撮像画像に対して公知のデコード処理を行うことで、その情報コードに記録される情報が読み取られる。上述のように携帯端末10に表示される情報コードCが撮像されている場合には、その情報コードCに記録される所定の秘匿情報が読み取られることになる。 In the reading device 30 configured in this manner, the control unit 31 performs a reading process to perform a known decoding process on the image of the information code captured by the imaging unit 33 through the reading port 39, thereby reading the information recorded in the information code. When the information code C displayed on the mobile terminal 10 is imaged as described above, the predetermined confidential information recorded in the information code C is read.

次に、携帯端末10において、表示画面24aに表示した情報コードCを読取装置30に読み取らせる際に、読取装置30と異なるスマートフォン等の盗撮用端末にてその情報コードCが盗撮されることを防止するために、制御部21にてなされる情報コード表示処理について、以下に説明する。 Next, the information code display process performed by the control unit 21 in the mobile terminal 10 to prevent the information code C from being secretly photographed by a secret photography terminal such as a smartphone other than the reading device 30 when the information code C displayed on the display screen 24a of the mobile terminal 10 is read by the reading device 30 will be described below.

本実施形態では、撮像部23の撮像画像から検出されたカメラレンズの撮像画像に占める比率が所定比率以下であって、そのカメラレンズの携帯端末10に対する相対的な移動速度が所定速度以下となる場合に、情報コードCを非表示とすべき上記所定の撮像状態であると判定する。 In this embodiment, when the ratio of the camera lens detected from the image captured by the imaging unit 23 to the captured image is equal to or less than a predetermined ratio, and the relative moving speed of the camera lens with respect to the mobile terminal 10 is equal to or less than a predetermined speed, it is determined that the above-mentioned predetermined imaging state is one in which the information code C should not be displayed.

表示画面24aに表示された情報コードCを盗撮用端末で盗撮する場合、その盗撮用端末のカメラレンズは、撮像可能な範囲内で携帯端末10から離されて、かつ、情報コードCに向けられた状態が維持される。携帯端末10に近いと盗撮が見つかってしまい、比較的遠くからデコード可能に撮像するために相対的に静止状態に近づける必要があるからである。一方、表示画面24aに表示された情報コードCを正当に読取装置30が撮像する場合、その読取装置30のカメラレンズ33aは、携帯端末10に比較的近くなる状態や、情報コードCを読取装置30に近づけるまでに相対的に移動する状態になる。 When secretly photographing the information code C displayed on the display screen 24a with a secret photography terminal, the camera lens of the secret photography terminal is kept away from the mobile terminal 10 within an image capturing range and is maintained pointed at the information code C. This is because if it is too close to the mobile terminal 10, the secret photography will be discovered, and it is necessary to bring the terminal relatively to a stationary state in order to capture an image that can be decoded from a relatively long distance. On the other hand, when the reading device 30 legitimately photographs the information code C displayed on the display screen 24a, the camera lens 33a of the reading device 30 is brought relatively close to the mobile terminal 10, or moves relatively until the information code C is brought close to the reading device 30.

このため、本実施形態における情報コード表示処理では、情報コードCの表示中に、撮像画像から検出されたカメラレンズの撮像画像に占める比率が所定比率以下であって、そのカメラレンズの相対的な移動速度が所定速度以下となる場合には、盗撮用のカメラレンズが撮像されているとして上記所定の撮像状態であると判定し、情報コードCが非表示とされることで、情報コードCの盗撮を防止する。 For this reason, in the information code display process of this embodiment, if the ratio of the camera lens detected from the captured image to the captured image while the information code C is being displayed is equal to or less than a predetermined ratio, and the relative movement speed of the camera lens is equal to or less than a predetermined speed, it is determined that the camera lens used for voyeurism is being captured, and the above-mentioned predetermined imaging state is reached, and the information code C is made invisible, thereby preventing voyeurism of the information code C.

特に、本実施形態では、盗撮用端末がスマートフォンであることを前提に、撮像画像にてスマートフォンが撮像されている場合に、その撮像画像にてスマートフォンのカメラレンズが撮像されているか否かについて判定される。具体的には、撮像画像からスマートフォンを検出するためのモデル(以下、第1検出モデルともいう)と、その検出されたスマートフォンが占める画像範囲からカメラレンズを検出するためのモデル(以下、第2検出モデルともいう)とをそれぞれ予め用意して、これらのモデルを利用してカメラレンズの検出を行う。上記第1検出モデルは、一般的に流通している各種のスマートフォンを様々な方向から撮像した大量の画像から生成されるモデルであり、上記第2検出モデルは、上述した一般的に流通している各種のスマートフォンのカメラレンズ部分を様々な方向から撮像した大量の画像から生成されるモデルである。 In particular, in this embodiment, assuming that the voyeur terminal is a smartphone, if a smartphone is captured in a captured image, it is determined whether or not the smartphone's camera lens is captured in the captured image. Specifically, a model for detecting a smartphone from a captured image (hereinafter also referred to as a first detection model) and a model for detecting a camera lens from an image range occupied by the detected smartphone (hereinafter also referred to as a second detection model) are prepared in advance, and the camera lens is detected using these models. The first detection model is a model generated from a large number of images of various types of smartphones that are commonly in circulation, captured from various directions, and the second detection model is a model generated from a large number of images of the camera lens portion of the above-mentioned various types of commonly in circulation smartphones, captured from various directions.

以下、本実施形態において表示制御部として機能する制御部21にてなされる情報コード表示処理について、図6に示すフローチャート等を参照して詳述する。
操作部25に対する所定の操作に応じて上記情報コード表示アプリが起動することで制御部21により情報コード表示処理が開始されると、図6のステップS101に示す表示処理がなされ、情報コードCが表示部24の表示画面24aに表示される(図2参照)。なお、画面表示される情報コードCは、予め生成されて記憶部22に記憶されてもよし、その都度生成されてもよい。
Hereinafter, the information code display process performed by the control unit 21 functioning as a display control unit in this embodiment will be described in detail with reference to the flowchart shown in FIG.
When the information code display application is started in response to a predetermined operation on the operation unit 25, the control unit 21 starts the information code display process, and the display process shown in step S101 of Fig. 6 is performed, and the information code C is displayed on the display screen 24a of the display unit 24 (see Fig. 2). The information code C displayed on the screen may be generated in advance and stored in the storage unit 22, or may be generated each time.

次に、ステップS103に示す撮像処理がなされ、撮像部23によって、表面12が向けられる方向、すなわち、情報コードCが向けられる方向が撮像される。続いて、ステップS105の判定処理にて、撮像部23による撮像画像からカメラレンズが検出される状態であるか否かについて判定される。上記第1検出モデルを利用して撮像画像からスマートフォンが検出されない場合には、カメラレンズが検出されないとして上記ステップS105の判定処理にてNoと判定されて、上記ステップS101からの処理が繰り返される。また、上記第1検出モデルを利用して撮像画像からスマートフォンが検出されても、上記第2検出モデルを利用してそのスマートフォンが検出された画像範囲からカメラレンズが検出されない場合には、上記ステップS105の判定処理にてNoと判定されて、上記ステップS101からの処理が繰り返される。 Next, the imaging process shown in step S103 is performed, and the imaging unit 23 captures an image of the direction in which the surface 12 is facing, i.e., the direction in which the information code C is facing. Next, in the judgment process of step S105, it is determined whether or not a camera lens is detected from the image captured by the imaging unit 23. If the smartphone is not detected from the captured image using the first detection model, the judgment process of step S105 returns No as the camera lens is not detected, and the process from step S101 is repeated. Also, even if the smartphone is detected from the captured image using the first detection model, if the camera lens is not detected from the image range in which the smartphone is detected using the second detection model, the judgment process of step S105 returns No, and the process from step S101 is repeated.

このため、スマートフォンのカメラレンズが検出されるまで、情報コードCの表示処理とその情報コードCが向けられる方向の撮像処理とが継続される。このような処理状態では、図7(A)や図7(B)に例示するように、読取装置30のカメラレンズ33aが撮像される場合でも、上記ステップS105の判定処理にてNoと判定されて、情報コードCの表示が維持されるため、その情報コードCを読取装置30にて撮像することができる。 Therefore, the display process of the information code C and the image capture process of the direction in which the information code C is pointed continue until the camera lens of the smartphone is detected. In this processing state, as illustrated in Figures 7(A) and 7(B), even if the camera lens 33a of the reading device 30 is captured, the judgment process of step S105 returns No and the display of the information code C is maintained, so that the information code C can be captured by the reading device 30.

一方、図8(A)のようにスマートフォンのカメラレンズL1が撮像される状態や図8(B)のようにスマートフォンのカメラレンズL2が撮像される状態では、上記第1検出モデルを利用して撮像画像からスマートフォンが検出されるとともに、上記第2検出モデルを利用してそのスマートフォンが検出された画像範囲からカメラレンズが検出されて(S105でYes)、その画像が記憶部22に保存される(S107)。 On the other hand, when the smartphone's camera lens L1 is imaged as shown in FIG. 8(A) or when the smartphone's camera lens L2 is imaged as shown in FIG. 8(B), the smartphone is detected from the captured image using the first detection model, and the camera lens is detected from the image range in which the smartphone is detected using the second detection model (Yes in S105), and the image is stored in the memory unit 22 (S107).

次に、ステップS109に示すレンズ比率算出処理がなされ、上述のように検出されたカメラレンズの撮像画像に占めるレンズの比率(以下、レンズ比率Rともいう)が算出される。続いて、ステップS111に示す判定処理にて、上述のように算出されたレンズ比率Rが所定比率Rth以下であるか否かについて判定される。本実施形態では、上記所定比率Rthは、例えば、1%に設定されており、カメラレンズが比較的大きく撮像されるために、算出されたレンズ比率Rが所定比率Rth以下にならない場合には、ステップS111の判定処理にてNoと判定されて、上記ステップS101からの処理が繰り返される。 Next, a lens ratio calculation process shown in step S109 is performed, and the ratio of the lens (hereinafter also referred to as lens ratio R) in the captured image of the camera lens detected as described above is calculated. Then, in a judgment process shown in step S111, it is judged whether the lens ratio R calculated as described above is equal to or less than a predetermined ratio Rth. In this embodiment, the predetermined ratio Rth is set to, for example, 1%, and if the calculated lens ratio R is not equal to or less than the predetermined ratio Rth because the camera lens is captured relatively large, the judgment process in step S111 is judged as No, and the process from step S101 is repeated.

一方、上述のように算出されたレンズ比率Rが所定比率Rth以下になると(S111でYes)、ステップS113に示すレンズ相対移動速度算出処理がなされる。この処理では、記憶部22に記憶されているカメラレンズの連続画像(所定枚数以上の連続して撮像される画像)から、そのカメラレンズの携帯端末10に対する相対的な移動速度(以下、移動速度Vともいう)が算出される。具体的には、撮像部23のフレームレートが一定であるため、例えば、各連続画像でのカメラレンズの中心座標を求めて、その中心座標の各画像間での移動距離から移動速度Vを算出することができる。 On the other hand, when the lens ratio R calculated as described above becomes equal to or less than the predetermined ratio Rth (Yes in S111), the lens relative movement speed calculation process shown in step S113 is performed. In this process, the relative movement speed (hereinafter also referred to as movement speed V) of the camera lens with respect to the mobile terminal 10 is calculated from the successive images of the camera lens (a predetermined number or more of images captured in succession) stored in the memory unit 22. Specifically, since the frame rate of the imaging unit 23 is constant, for example, the center coordinate of the camera lens in each successive image can be found, and the movement speed V can be calculated from the movement distance between each image of the center coordinate.

上述のように移動速度Vが算出されると、ステップS115の判定処理にて、検出されたカメラレンズが携帯端末10に対して静止状態であるか否かについて判定される。ここで、算出された移動速度Vが所定速度Vthを超えており、明らかにカメラレンズが携帯端末10に対して移動していると判断される場合には、ステップS115にてNoと判定されて、上記ステップS101からの処理が繰り返される。なお、上記ステップS111の判定処理及びステップS115の判定処理を行う制御部21は、撮像部23による撮像結果に基づいて、情報コードCを非表示とすべき所定の撮像状態であるか否かについて判定する「判定部」の一例に相当し得る。 When the moving speed V is calculated as described above, in the judgment process of step S115, it is judged whether or not the detected camera lens is stationary relative to the mobile terminal 10. Here, if the calculated moving speed V exceeds a predetermined speed Vth and it is judged that the camera lens is clearly moving relative to the mobile terminal 10, the result is No in step S115, and the processes from step S101 are repeated. Note that the control unit 21 that performs the judgment process of step S111 and the judgment process of step S115 may correspond to an example of a "judgment unit" that judges whether or not a predetermined imaging state in which the information code C should be hidden is reached, based on the imaging result by the imaging unit 23.

一方、上述のように算出された移動速度Vが所定速度Vth以下になると、検出されたカメラレンズが携帯端末10に対して静止状態であるとして、ステップS115の判定処理にてYesと判定される。この場合には、ステップS117に示す情報コード非表示処理がなされ、表示画面24aに表示されていた情報コードCが非表示状態になる。すなわち、検出されたカメラレンズの撮像画像に占めるレンズ比率Rが所定比率Rth以下であり、そのカメラレンズの移動速度Vが所定速度Vth以下となる場合には、情報コードCを非表示とすべき所定の撮像状態であるとして、情報コードCが非表示状態になる。 On the other hand, when the moving speed V calculated as described above becomes equal to or lower than the predetermined speed Vth, it is determined that the detected camera lens is stationary relative to the mobile terminal 10, and the determination process of step S115 is Yes. In this case, the information code non-display process shown in step S117 is performed, and the information code C displayed on the display screen 24a becomes non-displayed. In other words, when the lens ratio R of the detected camera lens in the captured image is equal to or lower than the predetermined ratio Rth, and the moving speed V of the camera lens becomes equal to or lower than the predetermined speed Vth, it is determined that the image capture state is a predetermined image capture state in which the information code C should be hidden, and the information code C becomes non-displayed.

以上説明したように、本実施形態に係る携帯端末10では、筐体11の表面12に情報コードCを表示するための表示部24の表示画面24aが設けられ、この表面12が向けられる方向を撮像方向とする撮像部23が設けられる。そして、撮像部23の撮像画像から検出されたカメラレンズの撮像画像に占めるレンズ比率Rが所定比率Rth以下であって、複数の撮像画像から求められるカメラレンズの当該携帯端末10に対する相対的な移動速度Vが所定速度Vth以下となる場合に、情報コードCを非表示とすべき所定の撮像状態であると判定されて、表示画面24aに表示されていた情報コードCを非表示とするように表示部24が制御される。 As described above, in the mobile terminal 10 according to this embodiment, the display screen 24a of the display unit 24 for displaying the information code C on the surface 12 of the housing 11 is provided, and the imaging unit 23 is provided with an imaging direction in the direction in which the surface 12 is facing. When the lens ratio R of the camera lens in the captured image detected from the captured image of the imaging unit 23 is equal to or less than a predetermined ratio Rth, and the relative moving speed V of the camera lens with respect to the mobile terminal 10 obtained from the multiple captured images is equal to or less than a predetermined speed Vth, it is determined that the imaging state is a predetermined state in which the information code C should not be displayed, and the display unit 24 is controlled to hide the information code C that was displayed on the display screen 24a.

すなわち、情報コード表示アプリによって、筐体11の表面12に設けられる表示画面24aに情報コードCを表示するステップと、表面12が向けられる方向を撮像方向とする撮像部23の撮像画像から検出されたカメラレンズの撮像画像に占めるレンズ比率Rが所定比率Rth以下であって、複数の撮像画像から求められるカメラレンズの携帯端末10に対する相対的な移動速度Vが所定速度Vth以下となる場合に、情報コードCを非表示とすべき所定の撮像状態であると判定するステップと、所定の撮像状態と判定されることで表示画面24aに表示されていた情報コードCを非表示とするステップと、が情報コードCを表示可能な携帯端末10を制御するコンピュータとして機能する制御部21によって実行される。 That is, the steps of displaying the information code C on the display screen 24a provided on the surface 12 of the housing 11 by the information code display app, determining that the imaging state is a predetermined imaging state in which the information code C should be hidden when the lens ratio R of the camera lens in the captured image detected from the captured image of the imaging unit 23, whose imaging direction is the direction in which the surface 12 is facing, is equal to or less than a predetermined ratio Rth and the relative moving speed V of the camera lens with respect to the mobile terminal 10 obtained from the multiple captured images is equal to or less than a predetermined speed Vth, and hiding the information code C that was displayed on the display screen 24a due to the determination that the imaging state is the predetermined imaging state are executed by the control unit 21 functioning as a computer that controls the mobile terminal 10 capable of displaying the information code C.

このように、撮像画像から検出されたカメラレンズの撮像画像に占めるレンズ比率Rが所定比率Rth以下であって、そのカメラレンズの相対的な移動速度Vが所定速度Vth以下となる場合には、盗撮用のカメラレンズが撮像されているとして上記所定の撮像状態であると判定し、情報コードCが非表示とされることで、情報コードCの盗撮を防止することができる。そして、利用者が表示された情報コードCを見る場合には、上記所定の撮像状態と判定されないために、情報コードCを視認可能な状態が維持される。したがって、利用者が視認可能であって盗撮され難い情報コードCを表示可能な携帯端末(情報コード表示端末)10を実現することができる。 In this way, when the lens ratio R of the camera lens detected from the captured image to the captured image is equal to or less than a predetermined ratio Rth, and the relative movement speed V of the camera lens is equal to or less than a predetermined speed Vth, it is determined that the camera lens for voyeurism is being captured and that the above-mentioned predetermined imaging state is present, and the information code C is made invisible, thereby preventing voyeurism of the information code C. Then, when the user looks at the displayed information code C, it is not determined that the above-mentioned predetermined imaging state is present, and the information code C remains visible. Therefore, it is possible to realize a mobile terminal (information code display terminal) 10 that can display an information code C that is visible to the user and difficult to capture voyeuristically.

[第2実施形態]
次に、本発明の第2実施形態に係る情報コード表示端末を適用した携帯端末について、図面を参照して説明する。
本第2実施形態では、加速度センサによる検出結果を利用して情報コードを非表示とすべき所定の撮像状態であるか否かについて判定する点が、上記第1実施形態と主に異なる。したがって、第1実施形態と実質的に同一の構成部分には、同一符号を付し、その説明を省略する。
[Second embodiment]
Next, a mobile terminal to which an information code display terminal according to a second embodiment of the present invention is applied will be described with reference to the drawings.
The second embodiment is different from the first embodiment in that the detection result by the acceleration sensor is used to determine whether or not the image capturing state is a predetermined state in which the information code should not be displayed. Therefore, the same components as those in the first embodiment are denoted by the same reference numerals and the description thereof will be omitted.

本実施形態では、制御部21にてなされる情報コード表示処理において、撮像部23の撮像画像からカメラレンズが検出された際、加速度センサ26の検出結果から携帯端末10の静止状態が検知される場合に、情報コードCを非表示とすべき所定の撮像状態であると判定する。 In this embodiment, in the information code display process performed by the control unit 21, when a camera lens is detected from the image captured by the imaging unit 23, and the detection result of the acceleration sensor 26 detects that the mobile terminal 10 is stationary, it is determined that the imaging state is a specified state in which the information code C should not be displayed.

筐体11の表面12に表示された情報コードCを正当に読取装置30が撮像する場合、携帯端末10の表示画面24aを読取装置30にかざすために携帯端末10が移動するので、加速度センサ26の検出結果から携帯端末10の移動状態が検知される。一方、加速度センサ26の検出結果から静止状態が検知される携帯端末10によってカメラレンズが撮像されると、そのカメラレンズを有する端末が、携帯端末10の撮像範囲に自ら入り込んできているため、表示された情報コードCを盗撮する動きをしていると判断することができる。このため、撮像画像からカメラレンズが検出された際、加速度センサの検出結果から携帯端末10の静止状態が検知される場合には、盗撮用のカメラレンズが撮像されているとして上記所定の撮像状態であると判定し、情報コードCが非表示とされることで、情報コードCの盗撮を防止する。なお、本実施形態では、加速度センサの検出結果から求められる三軸方向のそれぞれの移動速度が全て所定速度以下となった場合に、携帯端末10が静止状態であると検知する。 When the reading device 30 legitimately captures the information code C displayed on the surface 12 of the housing 11, the mobile terminal 10 moves in order to hold the display screen 24a of the mobile terminal 10 over the reading device 30, and the moving state of the mobile terminal 10 is detected from the detection result of the acceleration sensor 26. On the other hand, when a camera lens is captured by the mobile terminal 10 whose stationary state is detected from the detection result of the acceleration sensor 26, it can be determined that the terminal having the camera lens has entered the imaging range of the mobile terminal 10 and is making a movement to secretly capture the displayed information code C. Therefore, when a camera lens is detected from the captured image, if the stationary state of the mobile terminal 10 is detected from the detection result of the acceleration sensor, it is determined that the above-mentioned predetermined imaging state is being taken as the camera lens for secret photography, and the information code C is made invisible, thereby preventing the information code C from being secretly photographed. In this embodiment, the mobile terminal 10 is detected to be in a stationary state when the movement speeds in each of the three axial directions obtained from the detection result of the acceleration sensor are all equal to or less than a predetermined speed.

以下、本実施形態において表示制御部として機能する制御部21にてなされる情報コード表示処理について、図9に示すフローチャート等を参照して詳述する。
上記第1実施形態と同様に、上記第1検出モデルを利用して撮像画像からスマートフォンが検出されない場合、または、上記第1検出モデルを利用して撮像画像からスマートフォンが検出されても上記第2検出モデルを利用してそのスマートフォンが検出された画像範囲からカメラレンズが検出されない場合には、図9のステップS105にてNoとの判定が繰り返される。このような場合には、情報コードCが表示部24の表示画面24aに表示される状態(S101)と、情報コードCが向けられる方向を撮像する状態(S103)とが継続される。
Hereinafter, the information code display process performed by the control unit 21 functioning as a display control unit in this embodiment will be described in detail with reference to the flowchart shown in FIG.
As in the first embodiment, if the smartphone is not detected from the captured image using the first detection model, or if the smartphone is detected from the captured image using the first detection model but the camera lens is not detected from the image range in which the smartphone is detected using the second detection model, the determination of No is repeated in step S105 of Fig. 9. In such cases, the state in which the information code C is displayed on the display screen 24a of the display unit 24 (S101) and the state in which the image is captured in the direction in which the information code C is pointed (S103) are maintained.

そして、上記第1検出モデルを利用して撮像画像からスマートフォンが検出されるとともに、上記第2検出モデルを利用してそのスマートフォンが検出された画像範囲からカメラレンズが検出されると(S105でYes)、ステップS119の判定処理にて、加速度センサ26の検出結果から携帯端末10の静止状態が検知されるか否かについて判定される。ここで、加速度センサ26の検出結果から携帯端末10の移動状態が検知される場合(静止状態が検知されない場合)には、ステップS119にてNoと判定されて、利用者が携帯端末10の表示画面24aを読取装置30の読取口39に向けている動作をしているとして、情報コードCが表示部24の表示画面24aに表示される状態が継続される(S101)。 When the smartphone is detected from the captured image using the first detection model and the camera lens is detected from the image range in which the smartphone is detected using the second detection model (Yes in S105), a determination is made in step S119 as to whether or not the stationary state of the mobile terminal 10 is detected from the detection result of the acceleration sensor 26. Here, if the moving state of the mobile terminal 10 is detected from the detection result of the acceleration sensor 26 (if the stationary state is not detected), the determination is No in step S119, and it is determined that the user is pointing the display screen 24a of the mobile terminal 10 toward the reading port 39 of the reading device 30, and the state in which the information code C is displayed on the display screen 24a of the display unit 24 continues (S101).

一方、上記ステップS105にてNoと判定された後、加速度センサ26の検出結果から携帯端末10の静止状態が検知される場合には、ステップS119にてYesと判定されて、上述のように、情報コードCを非表示とすべき所定の撮像状態であるとして、情報コードCが非表示状態になる。 On the other hand, if the mobile terminal 10 is detected as stationary from the detection result of the acceleration sensor 26 after the determination in step S105 is No, the determination in step S119 is Yes, and as described above, the information code C is placed in a hidden state as a predetermined imaging state in which the information code C should not be displayed.

以上説明したように、本実施形態に係る携帯端末10では、筐体11の表面12に情報コードCを表示するための表示部24の表示画面24aが設けられ、この表面12が向けられる方向を撮像方向とする撮像部23が設けられる。そして、撮像部23の撮像画像からカメラレンズが検出された際、加速度センサ26の検出結果から携帯端末10の静止状態が検知される場合に、情報コードCを非表示とすべき所定の撮像状態であると判定されて、表示画面24aに表示されていた情報コードCを非表示とするように表示部24が制御される。 As described above, in the mobile terminal 10 according to this embodiment, the display screen 24a of the display unit 24 for displaying the information code C on the surface 12 of the housing 11 is provided, and the imaging unit 23 is provided with an imaging direction in the direction in which the surface 12 is pointed. When the camera lens is detected from the image captured by the imaging unit 23, if the detection result of the acceleration sensor 26 detects that the mobile terminal 10 is stationary, it is determined that the imaging state is a specified state in which the information code C should be hidden, and the display unit 24 is controlled to hide the information code C that was displayed on the display screen 24a.

すなわち、情報コード表示アプリによって、筐体11の表面12に設けられる表示画面24aに情報コードCを表示するステップと、表面12が向けられる方向を撮像方向とする撮像部23の撮像画像からカメラレンズが検出された際、加速度センサ26の検出結果から携帯端末10の静止状態が検知される場合に、情報コードCを非表示とすべき所定の撮像状態であると判定するステップと、所定の撮像状態と判定されることで表示画面24aに表示されていた情報コードCを非表示とするステップと、が情報コードCを表示可能な携帯端末10を制御するコンピュータとして機能する制御部21によって実行される。 That is, the following steps are executed by the control unit 21, which functions as a computer that controls the mobile terminal 10 capable of displaying the information code C: displaying the information code C on the display screen 24a provided on the surface 12 of the housing 11 using an information code display app; determining that the mobile terminal 10 is in a specified imaging state in which the information code C should be hidden if the mobile terminal 10 is detected to be in a stationary state from the detection result of the acceleration sensor 26 when a camera lens is detected from an image captured by the imaging unit 23, whose imaging direction is the direction in which the surface 12 is pointed; and hiding the information code C that was displayed on the display screen 24a when the specified imaging state is determined to be present.

このように、撮像画像からカメラレンズが検出された際、加速度センサ26の検出結果から携帯端末10の静止状態が検知される場合には、盗撮用のカメラレンズが撮像されているとして上記所定の撮像状態であると判定し、情報コードCが非表示とされることで、情報コードCの盗撮を防止することができる。そして、利用者が表示された情報コードCを見る場合には、上記所定の撮像状態と判定されないために、情報コードCを視認可能な状態が維持される。したがって、利用者が視認可能であって盗撮され難い情報コードCを表示可能な携帯端末(情報コード表示端末)10を実現することができる。 In this way, when a camera lens is detected from the captured image, if the detection result of the acceleration sensor 26 detects that the mobile terminal 10 is stationary, it is determined that the camera lens for voyeurism has been captured and that the above-mentioned specified imaging state is met, and the information code C is made invisible, thereby preventing voyeurism of the information code C. Then, when the user looks at the displayed information code C, it is not determined that the above-mentioned specified imaging state is met, and the information code C remains visible. Therefore, it is possible to realize a mobile terminal (information code display terminal) 10 that can display an information code C that is visible to the user and difficult to voyeurize.

なお、本発明は上記各実施形態等に限定されるものではなく、例えば、以下のように具体化してもよい。
(1)携帯端末10の表示画面24aに表示される情報コードCは、所定の秘匿情報が記録されるようにQRコードとして生成されているが、これに限らず、他のコード種別の情報コード、例えば、データマトリックスコード、マキシコード等の二次元コードとして生成されてもよいし、バーコード等の一次元コードとして生成されてもよい。また、情報コードCは、セキュリティ性を向上させるためにさらに暗号化等されてもよい。
The present invention is not limited to the above-described embodiments, and may be embodied as follows, for example.
(1) The information code C displayed on the display screen 24a of the mobile terminal 10 is generated as a QR code so that predetermined secret information is recorded, but is not limited to this and may be generated as other types of information code, for example, a two-dimensional code such as a data matrix code or a maxicode, or a one-dimensional code such as a barcode. Furthermore, the information code C may be further encrypted to improve security.

(2)本発明は、上記情報コード表示アプリがインストールされたスマートフォンに適用されることに限らず、例えば、上記情報コード表示アプリに相当するプログラムがインストールされた業務用の携帯端末等に適用されてもよい。 (2) The present invention is not limited to being applied to a smartphone on which the above-mentioned information code display app is installed, but may also be applied, for example, to a mobile terminal for business use on which a program equivalent to the above-mentioned information code display app is installed.

10…携帯端末(情報コード表示端末)
11…筐体
12…表面(一方の面)
21…制御部(判定部,表示制御部,コンピュータ)
23…撮像部
23a…撮像窓
24…表示部
24a…表示画面
26…加速度センサ
C…情報コード
R…レンズ比率
Rth…所定比率
V…移動速度
Vth…所定速度
10...Mobile terminal (information code display terminal)
11... Housing 12... Surface (one side)
21...Control unit (determination unit, display control unit, computer)
23: Imaging section 23a: Imaging window 24: Display section 24a: Display screen 26: Acceleration sensor C: Information code R: Lens ratio Rth: Predetermined ratio V: Travel speed Vth: Predetermined speed

Claims (4)

情報コードを表示可能な情報コード表示端末であって、
筐体と、
前記筐体の一方の面に前記情報コードを表示するための表示画面が設けられる表示部と、
前記一方の面が向けられる方向を撮像方向とする撮像部と、
前記撮像部による撮像結果に基づいて、前記情報コードを非表示とすべき所定の撮像状態であるか否かについて判定する判定部と、
前記表示部の表示状態を制御する表示制御部と、
を備え、
前記判定部は、前記撮像部の撮像画像から検出されたカメラレンズの前記撮像画像に占める比率が所定比率以下であって、複数の前記撮像画像から求められる前記カメラレンズの当該情報コード表示端末に対する相対的な移動速度が所定速度以下となる場合に、前記所定の撮像状態であると判定し、
前記表示制御部は、前記判定部により前記所定の撮像状態と判定されると、前記表示画面に表示されていた前記情報コードを非表示とするように前記表示部を制御することを特徴とする情報コード表示端末。
An information code display terminal capable of displaying an information code,
A housing and
a display unit having a display screen for displaying the information code on one surface of the housing;
an imaging unit whose imaging direction is the direction in which the one surface is oriented;
a determination unit that determines whether or not a predetermined imaging state is reached in which the information code should be hidden based on an imaging result by the imaging unit;
A display control unit that controls a display state of the display unit;
Equipped with
the determination unit determines that the predetermined imaging state exists when a ratio of the camera lens detected from an image captured by the imaging unit to the captured image is equal to or smaller than a predetermined ratio and a relative moving speed of the camera lens with respect to the information code display terminal obtained from a plurality of the captured images is equal to or smaller than a predetermined speed;
The display control unit controls the display unit to hide the information code that was displayed on the display screen when the determination unit determines that the specified imaging state is reached.
情報コードを表示可能な情報コード表示端末であって、
筐体と、
前記筐体の一方の面に前記情報コードを表示するための表示画面が設けられる表示部と、
前記一方の面が向けられる方向を撮像方向とする撮像部と、
前記撮像部による撮像結果に基づいて、前記情報コードを非表示とすべき所定の撮像状態であるか否かについて判定する判定部と、
前記表示部の表示状態を制御する表示制御部と、
当該情報コード表示端末の加速度を検出する加速度センサと、
を備え、
前記判定部は、前記撮像部の撮像画像からカメラレンズが検出された際、前記加速度センサの検出結果から当該情報コード表示端末の静止状態が検知される場合に、前記所定の撮像状態であると判定し、
前記表示制御部は、前記判定部により前記所定の撮像状態と判定されると、前記表示画面に表示されていた前記情報コードを非表示とするように前記表示部を制御することを特徴とする情報コード表示端末。
An information code display terminal capable of displaying an information code,
A housing and
a display unit having a display screen for displaying the information code on one surface of the housing;
an imaging unit whose imaging direction is the direction in which the one surface is oriented;
a determination unit that determines whether or not a predetermined imaging state is reached in which the information code should be hidden based on an imaging result by the imaging unit;
A display control unit that controls a display state of the display unit;
an acceleration sensor for detecting an acceleration of the information code display terminal;
Equipped with
the determination unit determines that the information code display terminal is in the predetermined imaging state when a camera lens is detected from an image captured by the imaging unit and a stationary state of the information code display terminal is detected from a detection result of the acceleration sensor,
The display control unit controls the display unit to hide the information code that was displayed on the display screen when the determination unit determines that the specified imaging state is reached.
情報コードを表示可能な情報コード表示端末を制御するコンピュータにより実行されるプログラムであって、
筐体の一方の面に設けられる表示画面に前記情報コードを表示するステップと、
前記一方の面が向けられる方向を撮像方向とする撮像部の撮像画像から検出されたカメラレンズの前記撮像画像に占める比率が所定比率以下であって、複数の前記撮像画像から求められる前記カメラレンズの当該情報コード表示端末に対する相対的な移動速度が所定速度以下となる場合に、前記情報コードを非表示とすべき所定の撮像状態であると判定するステップと、
前記所定の撮像状態と判定されることで前記表示画面に表示されていた前記情報コードを非表示とするステップと、
を前記コンピュータに実行させることを特徴とするプログラム。
A program executed by a computer that controls an information code display terminal capable of displaying an information code,
displaying the information code on a display screen provided on one side of a housing;
determining that the imaging state is a predetermined state in which the information code should be hidden when a ratio of the camera lens detected from an image captured by an imaging unit whose imaging direction is the direction in which the one surface is facing to the captured image is equal to or less than a predetermined ratio and a relative moving speed of the camera lens with respect to the information code display terminal, which is determined from a plurality of the captured images, is equal to or less than a predetermined speed;
a step of hiding the information code that has been displayed on the display screen when the image capturing state is determined to be the predetermined image capturing state;
A program for causing the computer to execute the above.
情報コードを表示可能な情報コード表示端末を制御するコンピュータにより実行されるプログラムであって、
筐体の一方の面に設けられる表示画面に前記情報コードを表示するステップと、
前記一方の面が向けられる方向を撮像方向とする撮像部の撮像画像からカメラレンズが検出された際、加速度センサの検出結果から当該情報コード表示端末の静止状態が検知される場合に、前記情報コードを非表示とすべき所定の撮像状態であると判定するステップと、
前記所定の撮像状態と判定されることで前記表示画面に表示されていた前記情報コードを非表示とするステップと、
を前記コンピュータに実行させることを特徴とするプログラム。
A program executed by a computer that controls an information code display terminal capable of displaying an information code,
displaying the information code on a display screen provided on one side of a housing;
a step of determining that the information code display terminal is in a predetermined imaging state in which the information code should not be displayed when a camera lens is detected from an image captured by an imaging unit whose imaging direction is the direction in which the one surface is facing and when a stationary state of the information code display terminal is detected from a detection result of an acceleration sensor;
a step of hiding the information code that has been displayed on the display screen when the image capturing state is determined to be the predetermined image capturing state;
A program for causing the computer to execute the above.
JP2021029520A 2021-02-26 2021-02-26 Information code display terminal and program Active JP7502647B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2021029520A JP7502647B2 (en) 2021-02-26 2021-02-26 Information code display terminal and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2021029520A JP7502647B2 (en) 2021-02-26 2021-02-26 Information code display terminal and program

Publications (2)

Publication Number Publication Date
JP2022130879A JP2022130879A (en) 2022-09-07
JP7502647B2 true JP7502647B2 (en) 2024-06-19

Family

ID=83153520

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021029520A Active JP7502647B2 (en) 2021-02-26 2021-02-26 Information code display terminal and program

Country Status (1)

Country Link
JP (1) JP7502647B2 (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005286930A (en) 2004-03-31 2005-10-13 Kyocera Corp Mobile terminal
JP2005346307A (en) 2004-06-01 2005-12-15 Canon Inc Electronic document browsing device and control method thereof
JP2017107413A (en) 2015-12-10 2017-06-15 株式会社デンソーウェーブ Information code reading system
JP2019046308A (en) 2017-09-05 2019-03-22 株式会社デンソーウェーブ Information code reading system
US20200167508A1 (en) 2017-12-21 2020-05-28 Disappears.Com Holdings (Canada) Ltd. Method for detecting the possible taking of screenshots

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005286930A (en) 2004-03-31 2005-10-13 Kyocera Corp Mobile terminal
JP2005346307A (en) 2004-06-01 2005-12-15 Canon Inc Electronic document browsing device and control method thereof
JP2017107413A (en) 2015-12-10 2017-06-15 株式会社デンソーウェーブ Information code reading system
JP2019046308A (en) 2017-09-05 2019-03-22 株式会社デンソーウェーブ Information code reading system
US20200167508A1 (en) 2017-12-21 2020-05-28 Disappears.Com Holdings (Canada) Ltd. Method for detecting the possible taking of screenshots

Also Published As

Publication number Publication date
JP2022130879A (en) 2022-09-07

Similar Documents

Publication Publication Date Title
CN104376248B (en) A kind of method and device that user's checking is carried out in interface for password input
EP2229651B1 (en) Optically readable tag
JP4910627B2 (en) Impersonation detection device
JP2007122400A (en) Authentication device, program, and recording medium
JP6376246B2 (en) Authentication device, authentication method, control program, and recording medium
JP2018041293A (en) Image processing apparatus, image processing method, and program
KR20170083256A (en) Apparatus and method for providing surveillance image based on depth image
KR101725219B1 (en) Method for digital image judging and system tereof, application system, and authentication system thereof
JP6954355B2 (en) Information acquisition system, information acquisition method and storage medium
JP7502647B2 (en) Information code display terminal and program
JP6991045B2 (en) Image processing device, control method of image processing device
JP5784813B1 (en) Bar code display device, operation method and program of bar code display device
JP2019061427A (en) Information code reading system
JP6958067B2 (en) Information code reading system
CN111066022B (en) System and method for reading information codes
TW202101282A (en) Information code reading system
JP7371395B2 (en) Information code reader
JP5071645B2 (en) Imaging surveillance system and method
JP2012181567A (en) Information reading device, information reading method, and program
JP2008181015A (en) Image display device, and image display program
KR102623605B1 (en) Electornic device for acquiring biometric information of and operating method thereof
JP2014178977A (en) Display device and control program of display device
WO2023127400A1 (en) Information code display device and information code display system
JP6493974B2 (en) Bar code display device, bar code server device, bar code reading device, operation method thereof, and program
JP4311237B2 (en) Imaging system, digital camera, and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230724

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20240321

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240507

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240520

R150 Certificate of patent or registration of utility model

Ref document number: 7502647

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150