JP5583249B2

JP5583249B2 - Operation display device and operation display method

Info

Publication number: JP5583249B2
Application number: JP2013159330A
Authority: JP
Inventors: 雅弘山田
Original assignee: Toshiba Corp
Current assignee: Toshiba Corp
Priority date: 2013-07-31
Filing date: 2013-07-31
Publication date: 2014-09-03
Anticipated expiration: 2032-03-30
Also published as: JP2013218740A

Description

本発明の実施形態は、操作表示装置および操作表示方法に関する。 Embodiments described herein relate generally to an operation display device and an operation display method.

従来、タッチパネルによるユーザインタフェイスを備えた操作表示装置が知られている。操作表示装置においては、例えば利用者が指や指定の端末において、ユーザインタフェイス上に表示されたアイコン等に触れた場合に、アイコンに関連付けられた所定のプログラムが起動されるようになっている。この際に、利用者が指でタッチパネルに触れたのか、端末でタッチパネルに触れたのかを判別するために、操作表示装置に無線通信によって端末を検出する検出センサーを設けるようにし、検出センサーによって機器が検出された場合に、端末による接触であると判定する構成が知られている。 Conventionally, an operation display device having a user interface using a touch panel is known. In the operation display device, for example, when a user touches an icon or the like displayed on the user interface with a finger or a designated terminal, a predetermined program associated with the icon is activated. . At this time, in order to determine whether the user touched the touch panel with a finger or the touch panel with the terminal, a detection sensor for detecting the terminal by wireless communication is provided in the operation display device, and the device is detected by the detection sensor. There has been known a configuration in which it is determined that a contact is made by a terminal when an error is detected.

特開２００８−１２３４７６号公報JP 2008-123476 A

しかしながら、操作表示装置が大きく、タッチパネル上に複数の端末が検出されている場合などに、無線通信によって取得された機器の識別情報からは、実際にどの端末と装置間との間で処理を行ったらよいのかを判別できない場合が存在する。 However, when the operation display device is large and a plurality of terminals are detected on the touch panel, the device identification information acquired by wireless communication is used to perform processing between which device and the device. There are cases where it is not possible to determine what to do.

本発明の実施形態は、上記に鑑みてなされたものであって、操作表示装置に対して操作を加える端末をより好適に検出することができる操作表示装置を提供することにある。 Embodiments of the present invention have been made in view of the above, and provide an operation display device that can more suitably detect a terminal that performs an operation on the operation display device.

実施形態の操作表示装置は、画面を表示するデバイスを有する表示部と、前記表示部の裏面に設けられ、前記表示部への携帯端末の近接を検出する検出部と、前記携帯端末から、前記携帯端末の動作に関する情報を受信する受信部と、前記検出部により検出された前記携帯端末の近接と、前記受信部により受信した前記携帯端末の動作に関する情報と、に基づいて、所定のプログラムを実行することにより、前記画面に表示される内容が変更される実行部と、を備える。 The operation display device according to the embodiment includes a display unit having a device for displaying a screen, a detection unit that is provided on a back surface of the display unit and detects the proximity of the mobile terminal to the display unit, and the mobile terminal. Based on the receiving unit that receives information related to the operation of the mobile terminal, the proximity of the mobile terminal detected by the detection unit , and the information related to the operation of the mobile terminal received by the receiving unit And an execution unit that changes the content displayed on the screen by executing.

図１は、第１の実施形態の操作表示装置のハードウェア構成図である。FIG. 1 is a hardware configuration diagram of the operation display device according to the first embodiment. 図２は、第１の実施形態のアイコン記憶部に記憶されるデータのデータ構造の一例を示す図である。FIG. 2 is a diagram illustrating an example of a data structure of data stored in the icon storage unit according to the first embodiment. 図３は、第１の実施形態の近接検出部の配置態様の一例を示す図である。FIG. 3 is a diagram illustrating an example of an arrangement mode of the proximity detection unit according to the first embodiment. 図４は、第１の実施形態での近接検出部のそれぞれが検出可能な範囲を記憶したデータテーブルのデータ構造図である。FIG. 4 is a data structure diagram of a data table storing a range that can be detected by each of the proximity detection units in the first embodiment. 図５は、第１の実施形態のデータ転送プログラム実行時の画面遷移を示す図である。FIG. 5 is a diagram illustrating screen transition when the data transfer program of the first embodiment is executed. 図６は、第１の実施形態のデータを転送する際のユーザインタフェイス画面の一例である。FIG. 6 is an example of a user interface screen when transferring data according to the first embodiment. 図７は、第１の実施形態のアクセス制限を解除する場合のユーザインタフェイス画面の一例を示す図である。FIG. 7 is a diagram illustrating an example of a user interface screen when the access restriction according to the first embodiment is released. 図８は、第１の実施形態でフォルダのアクセス制限解除にかかる処理の流れを示すフロー図である。FIG. 8 is a flowchart showing a flow of processing related to the folder access restriction release in the first embodiment. 図９は、第１の実施形態でプログラムを起動する処理の流れを示すフロー図である。FIG. 9 is a flowchart showing a flow of processing for starting a program in the first embodiment. 図１０は、第１の実施形態の起動されるプログラムの詳細な処理の流れを示すフロー図である。FIG. 10 is a flowchart showing a detailed processing flow of a program to be started according to the first embodiment. 図１１は、第１の実施形態の決済におけるユーザインタフェイス画面の一例である。FIG. 11 is an example of a user interface screen in the settlement according to the first embodiment. 図１２は、第２の実施形態の操作表示装置のハードウェア構成図である。FIG. 12 is a hardware configuration diagram of the operation display device of the second embodiment. 図１３は、第２の実施形態における時間計測の契機を示すタイミングチャートの一例である。FIG. 13 is an example of a timing chart showing the timing of time measurement in the second embodiment. 図１４は、第２の実施形態における時間計測の契機を示すタイミングチャートの一例である。FIG. 14 is an example of a timing chart showing the timing of time measurement in the second embodiment. 図１５は、第２の実施形態における時間計測の契機を示すタイミングチャートの一例である。FIG. 15 is an example of a timing chart showing the timing of time measurement in the second embodiment.

以下に、本発明にかかる操作表示装置の実施形態を図面に基づいて詳細に説明する。なお、この実施形態によりこの発明が限定されるものではない。実施形態における操作表示装置は、タッチパネル式の表示部にユーザインタフェイス画面が表示されており、ユーザインタフェイス画面に携帯端末で接触することで所定の処理が実行されるものである。携帯端末は、例えばスマートフォン等を利用することができるが、他の専用のデバイスを利用してもよい。
（第１の実施形態） Embodiments of an operation display device according to the present invention will be described below in detail with reference to the drawings. In addition, this invention is not limited by this embodiment. In the operation display device according to the embodiment, a user interface screen is displayed on a touch panel display unit, and predetermined processing is executed by touching the user interface screen with a mobile terminal. The mobile terminal can use a smartphone or the like, for example, but may use another dedicated device.
(First embodiment)

図１は、第１の実施形態の操作表示装置１のハードウェア構成図である。図１に示されるように、操作表示装置１は、表示部１１、ＣＰＵ１２、表示コントローラ部１３、ＲＯＭ・ＲＡＭ１４、位置取得部１５、近接検出部１６、位置取得部ＩＦ部１７、近接検出部ＩＦ部１８、及び通信ＩＦ部１９を備えている。 FIG. 1 is a hardware configuration diagram of an operation display device 1 according to the first embodiment. As shown in FIG. 1, the operation display device 1 includes a display unit 11, a CPU 12, a display controller unit 13, a ROM / RAM 14, a position acquisition unit 15, a proximity detection unit 16, a position acquisition unit IF unit 17, and a proximity detection unit IF. Unit 18 and communication IF unit 19.

表示部１１は、液晶表示パネルなどにより構成されており、利用者に対するユーザインタフェイス画面を表示する。ＣＰＵ１２、及び表示コントローラ部１３は、表示部１１に情報やユーザインタフェイス画面を画像の形式に変換して描画する。 The display unit 11 is configured by a liquid crystal display panel or the like, and displays a user interface screen for the user. The CPU 12 and the display controller unit 13 render information and a user interface screen on the display unit 11 by converting them into an image format.

ＲＯＭ・ＲＡＭ１４は、アイコン記憶部２１、配置記憶部２２、プログラム群２３、及び起動部２４を備えている。アイコン記憶部２１は、ユーザインタフェイス画面上に表示するアイコン部の画像データ、特定の処理を行うプログラム、アイコン部の表示部１１のユーザインタフェイスにおける表示位置を表す第１位置情報と、を対応付けて記憶している。図２は、アイコン記憶部２１に記憶されるデータのデータ構造を示した図である。図２に示されるように、アイコンデータテーブル５０は、アイコンの識別情報である表示アイコンＩＤと、第１位置情報の一例である座標、及びアイコンサイズと、アイコンに用いられる画像データを指定するオブジェクトＩＤと、及び端末の属性毎に起動するプログラムとを１レコードに対応付けて記憶している。オブジェクトＩＤによって規定されるアイコンの画像データは、ＣＰＵ１２によって表示コントローラ部１３を通じて、表示部１１の指定の位置に描画される。また、本実施形態においては、プログラムは、携帯端末の属性がタイプ１と特定される場合、属性がタイプ２と特定される場合、及び指により表示部１１が接触された場合の３パターンが存在し、アイコン記憶部２１に各アイコン部に接触することで起動されるプログラムの対応関係が記憶されている。 The ROM / RAM 14 includes an icon storage unit 21, an arrangement storage unit 22, a program group 23, and an activation unit 24. The icon storage unit 21 corresponds to image data of the icon part displayed on the user interface screen, a program for performing a specific process, and first position information indicating a display position on the user interface of the display part 11 of the icon part. I remember it. FIG. 2 is a diagram illustrating a data structure of data stored in the icon storage unit 21. As shown in FIG. 2, the icon data table 50 is an object that specifies display icon IDs that are identification information of icons, coordinates and icon sizes that are examples of first position information, and image data used for the icons. An ID and a program to be started for each terminal attribute are stored in association with one record. The image data of the icon defined by the object ID is drawn at a designated position on the display unit 11 by the CPU 12 through the display controller unit 13. In the present embodiment, the program has three patterns when the attribute of the mobile terminal is specified as type 1, when the attribute is specified as type 2, and when the display unit 11 is touched by a finger. The icon storage unit 21 stores a correspondence relationship of programs that are activated by touching each icon unit.

図１に戻り、配置記憶部２２は、複数設けられている近接検出部１６の検出可能な範囲を記憶する。図３は、近接検出部１６の配置態様の一例を示す図であり、図４は、近接検出部１６のそれぞれが検出可能な範囲を記憶した配置情報テーブル６０のデータ構造図である。図３に示されるように、近接検出部１６は、表示部１１の裏面に、複数配置されている。近接検出部１６は、例えばＲＦＩＤなどにより構成されており、チップが搭載された端末との間で情報を通信することが可能である。近接検出部１６の配置位置は、表示部１１の左右方向においてＸ１〜Ｘ４、上下方向においてはＹ１〜Ｙ４の組み合わせによって規定することができる。例えば、近接検出部１６ａの位置はＸ１Ｙ１として表すことができる。近接検出部１６は、それぞれこのＸ１〜Ｘ４、及びはＹ１〜Ｙ４の組み合わせによる１６個の位置にそれぞれ設けられている。また、近接検出部１６それぞれの検出可能な範囲の広さは、隣接する近接検出部１６を含む領域に達する程度となっており、それぞれの検出可能な範囲は表示部１１よりは小さい。近接検出部１６は、検出可能なチップを搭載した携帯端末がそれぞれの検出範囲内に存在すると、携帯端末からその識別情報を取得する。近接検出部１６は、取得した携帯端末の識別情報をどの近接検出部１６が取得したかを一時的にＲＯＭ・ＲＡＭ１４に記憶する。 Returning to FIG. 1, the arrangement | positioning memory | storage part 22 memorize | stores the range which can detect the proximity detection part 16 provided with two or more. FIG. 3 is a diagram illustrating an example of an arrangement mode of the proximity detection unit 16, and FIG. 4 is a data structure diagram of the arrangement information table 60 in which ranges that can be detected by the proximity detection unit 16 are stored. As shown in FIG. 3, a plurality of proximity detectors 16 are arranged on the back surface of the display unit 11. The proximity detection unit 16 is configured by, for example, RFID, and can communicate information with a terminal on which a chip is mounted. The arrangement position of the proximity detector 16 can be defined by a combination of X1 to X4 in the left-right direction of the display unit 11 and Y1 to Y4 in the vertical direction. For example, the position of the proximity detector 16a can be expressed as X1Y1. The proximity detectors 16 are provided at 16 positions according to combinations of X1 to X4 and Y1 to Y4, respectively. Further, the width of the detectable range of each proximity detection unit 16 is such that it reaches an area including the adjacent proximity detection unit 16, and each detectable range is smaller than that of the display unit 11. The proximity detection unit 16 acquires the identification information from the mobile terminal when the mobile terminal on which the chip that can be detected is present in each detection range. The proximity detection unit 16 temporarily stores in the ROM / RAM 14 which proximity detection unit 16 has acquired the acquired identification information of the mobile terminal.

図４に示されるように、配置記憶部２２の配置情報テーブル６０は、近接検出部１６の識別情報、座標情報、及び検出範囲の３つのデータを対応付けられて記憶する。識別情報は、近接検出部１６のそれぞれを特定する識別情報である。また、座標情報は、それぞれの近接検出部１６が設けられている位置に相当する表示部１１上の位置座標である。また、検出範囲は近接検出部１６の検出可能領域の広さを示す値であり、本実施形態では半径の長さが記憶されている。 As shown in FIG. 4, the arrangement information table 60 of the arrangement storage unit 22 stores three pieces of data, that is, identification information of the proximity detection unit 16, coordinate information, and a detection range in association with each other. The identification information is identification information that identifies each of the proximity detection units 16. The coordinate information is a position coordinate on the display unit 11 corresponding to the position where each proximity detection unit 16 is provided. The detection range is a value indicating the size of the detectable region of the proximity detection unit 16, and the radius length is stored in this embodiment.

図１に戻り、プログラム群２３は、上述した属性のタイプ１に対応したプログラム、属性のタイプ２に対応したプログラム、及び指により表示部１１が接触された場合に対応したプログラムなどを含む。また、起動部２４は、接触した端末に応じて起動するプログラムを決定する。具体的には、起動部２４は、位置取得部１５が取得した表示部１１への接触があった位置座標を取得すると、取得した位置座標と最も近い場所における近接検出部１６によって取得され、一時的に記憶されている携帯端末の識別情報を取得し、取得した識別情報によって特定される携帯端末の属性に応じたプログラムを起動させる。例えば、識別情報が属性タイプ１に対応するものであれば、属性タイプ１に対応するプログラムを起動させる。なお、携帯端末が接触した位置の位置座標と、アイコンに対応付けられた位置座標とが必ずしも、一致、もしくは重なってなくてもよく、これらの位置座標が例えば所定値以内の距離で近接している場合に、プログラムを起動させるようにしてもよい。 Returning to FIG. 1, the program group 23 includes a program corresponding to the attribute type 1 described above, a program corresponding to the attribute type 2, and a program corresponding to the case where the display unit 11 is touched with a finger. In addition, the activation unit 24 determines a program to be activated in accordance with the contacted terminal. Specifically, when the activation unit 24 acquires the position coordinates that are in contact with the display unit 11 acquired by the position acquisition unit 15, the activation unit 24 acquires the position coordinates closest to the acquired position coordinates, and temporarily The identification information of the portable terminal memorize | stored automatically is acquired, and the program according to the attribute of the portable terminal specified by the acquired identification information is started. For example, if the identification information corresponds to attribute type 1, a program corresponding to attribute type 1 is started. It should be noted that the position coordinates of the position touched by the mobile terminal and the position coordinates associated with the icon do not necessarily match or overlap, and these position coordinates are close to each other within a predetermined value, for example. If it is, the program may be started.

位置取得部１５は、第２位置情報の一例である、表示部１１に携帯端末が接触した位置座標を取得する。位置取得部１５は、表示部１１の表面に貼られたタッチセンサーフィルムにより構成される。タッチセンサーフィルムにはＸ軸方向、及びＹ軸方向にセンサーが並んでおり、ユーザが手や指でなどで触ったり、携帯端末などで画面に表示されたアイコンなどに触ったりすると、タッチフィルムセンサーがこれらの接触を検出して、操作指示がＣＰＵ１１へと伝えられる。なお、実際に接触していなくても、ほぼ接触した状態を接触とみなすような構成であってもよい。位置取得部１５が取得した位置座標は、位置取得部ＩＦ部１７を通じて、ＣＰＵ１２へと入力される。また、近接検出部１６が検出した携帯端末の識別情報は、近接検出部ＩＦ部１８を通じて、ＣＰＵ１２へと入力される。また、操作表示装置１は、通信ＩＦ部１９を介して、Ｂｌｕｅｔｏｏｔｈ（登録商標）や無線ＬＡＮによる携帯端末１００へのデータ送受信や、無線ＬＡＮによるインターネット通信等を行うことができる。 The position acquisition unit 15 acquires position coordinates at which the mobile terminal contacts the display unit 11, which is an example of second position information. The position acquisition unit 15 is configured by a touch sensor film attached to the surface of the display unit 11. The touch sensor film has sensors arranged in the X-axis direction and the Y-axis direction. When the user touches with a hand or a finger or touches an icon displayed on the screen with a mobile terminal or the like, the touch film sensor Detects these contacts, and an operation instruction is transmitted to the CPU 11. In addition, even if it is not actually contacting, the structure which considers the state almost contacted as a contact may be sufficient. The position coordinates acquired by the position acquisition unit 15 are input to the CPU 12 through the position acquisition unit IF unit 17. Further, the identification information of the mobile terminal detected by the proximity detection unit 16 is input to the CPU 12 through the proximity detection unit IF unit 18. Further, the operation display device 1 can perform data transmission / reception to / from the mobile terminal 100 via Bluetooth (registered trademark) or a wireless LAN, internet communication via a wireless LAN, or the like via the communication IF unit 19.

図５は、本実施形態の操作表示装置１でデータ転送プログラム実行時のユーザインタフェイス画面の表示例を示す。図５（ａ）に示されるように、操作表示装置１の表示部１１には、ＲＯＭ・ＲＡＭ１４に記憶されている３つの動画、３つの音楽、及び２つの写真のデータが、それぞれ異なる種類のアイコンで表示されている。また、携帯端末側で選択しているデータをアップロードするアップロードアイコン３１が表示されている。 FIG. 5 shows a display example of a user interface screen when the data transfer program is executed by the operation display device 1 of the present embodiment. As shown in FIG. 5A, the display unit 11 of the operation display device 1 has three types of data of three moving images, three music, and two photos stored in the ROM / RAM 14. It is displayed with an icon. In addition, an upload icon 31 for uploading data selected on the mobile terminal side is displayed.

この表示部１１のユーザインタフェイス画面に対して、２つの異なる携帯端末１００、及び２００で触れる場合について説明する。図５（ｂ）は、携帯端末１００が、アップロードアイコン３１上に置かれ、携帯端末２００がどのアイコンにも触れない位置に置かれたた状態を示している。この場合、近接検出部１６により、携帯端末１００、２００の双方が検出され、それぞれの識別情報が取得される。一方、データのアップロードを行うプログラムは、このアップロードアイコン３１と最も近い近接検出部１６によって取得された識別情報で特定される携帯端末１００との間で実行される。したがって、起動部２４は、携帯端末１００と操作表示装置１との間でデータを転送するプログラムを起動する。そして操作表示装置１は、通信ＩＦ部１９を介してデータを転送する。なお、近接検出部１６が例えばＴｒａｎｓｆｅｒＪｅｔ（登録商標）のような近接無線通信のモジュールであれば、操作表示装置１は近接検出部１６を用いてデータを転送してもよい。 A case where the user interface screen of the display unit 11 is touched by two different portable terminals 100 and 200 will be described. FIG. 5B shows a state where the mobile terminal 100 is placed on the upload icon 31 and the mobile terminal 200 is placed at a position where it does not touch any icon. In this case, the proximity detection unit 16 detects both the mobile terminals 100 and 200 and acquires the respective identification information. On the other hand, a program for uploading data is executed between the upload icon 31 and the portable terminal 100 specified by the identification information acquired by the closest proximity detection unit 16. Accordingly, the activation unit 24 activates a program for transferring data between the portable terminal 100 and the operation display device 1. Then, the operation display device 1 transfers data via the communication IF unit 19. If the proximity detection unit 16 is a module for proximity wireless communication such as TransferJet (registered trademark), the operation display device 1 may transfer data using the proximity detection unit 16.

図５（ｃ）の画面においては、携帯端末１００から操作表示装置１に転送されたデータを示すアイコン３２がアップロードアイコン３１の隣に追加表示される。プログラムは、データの種別を判定し、データが動画、音楽、及び写真のいずれかかを判別して、適切なアイコンを付与する。また、データの種別に応じて、記憶するデータフォルダを映像や音楽などの専用フォルダに記憶先を指定するようにしてもよい。 In the screen of FIG. 5C, an icon 32 indicating data transferred from the portable terminal 100 to the operation display device 1 is additionally displayed next to the upload icon 31. The program determines the type of data, determines whether the data is a moving image, music, or a photo, and assigns an appropriate icon. In addition, depending on the type of data, the storage destination may be designated as a dedicated folder such as video or music for the data folder to be stored.

なお、この際のデータを転送する際のユーザインタフェイス画面の一例として例えば図６のような態様がある。図６は、携帯端末１００を表示部１１に触れさせた場合に表示されるグラフィックスの例を示している。図６（ａ）に示されるように、携帯端末１００に記憶されている写真データは携帯端末１００の画面上にアイコンなどの形で表示されており、携帯端末１００が操作表示装置１の表示部１１に触れた際に、データ転送が開始される。 An example of a user interface screen for transferring data at this time is shown in FIG. FIG. 6 shows an example of graphics displayed when the mobile terminal 100 is touched on the display unit 11. As shown in FIG. 6A, the photo data stored in the mobile terminal 100 is displayed in the form of an icon or the like on the screen of the mobile terminal 100, and the mobile terminal 100 displays the display unit of the operation display device 1. When 11 is touched, data transfer is started.

次いで、図６（ｂ）〜（ｄ）に示されるように、データの転送の進行度合い、具体的にはデータの総容量に対して転送完了したデータ量や未転送のデータ量に応じた割合に相当するアイコンの一部が携帯端末１００の画面に、他の部分が表示部１１にそれぞれ表示される。データ転送中に操作表示装置１の表示部１１に表示されるアイコンの位置は、位置取得部１５によって取得された携帯端末１００の位置座標に基づいて決定される。そして表示部１１は、携帯端末１００の表示画面が表示するアイコンと表示部１１が表示するアイコンとが合わせて１つのアイコンに見えるようにアイコンを表示する。そして、図６（ｅ）に示されるように、表示部１１は、データの転送完了時に、アップロードアイコン３１の隣の位置にデータのアイコン３２を表示する。そしてプログラムは、データの種別を判定し、データが動画、音楽、及び写真の何れであるかに応じた位置にアイコンを表示し、データ転送に係る処理は終了する。 Next, as shown in FIGS. 6B to 6D, the degree of progress of data transfer, specifically the ratio according to the amount of data that has been transferred or the amount of data that has not been transferred, with respect to the total capacity of the data A part of the icon corresponding to is displayed on the screen of the mobile terminal 100 and the other part is displayed on the display unit 11. The position of the icon displayed on the display unit 11 of the operation display device 1 during data transfer is determined based on the position coordinates of the mobile terminal 100 acquired by the position acquisition unit 15. And the display part 11 displays an icon so that the icon which the display screen of the portable terminal 100 displays, and the icon which the display part 11 displays can be seen as one icon. Then, as shown in FIG. 6E, the display unit 11 displays a data icon 32 at a position next to the upload icon 31 when the data transfer is completed. Then, the program determines the type of data, displays an icon at a position according to whether the data is a moving image, music, or a photo, and the processing related to data transfer ends.

このように、表示部１１にデータ転送の経過を表示することにより、データが携帯端末１００から操作表示装置１へと送り出され、データのアイコンが表示部１１に入って行くかのように見えるように表示することができる。 Thus, by displaying the progress of the data transfer on the display unit 11, the data is sent from the portable terminal 100 to the operation display device 1, and the data icon seems to enter the display unit 11. Can be displayed.

なお、携帯端末１００が表示部１１に接触したときに、すぐにデータ転送を開始するのではなく、携帯端末１００に確認のダイアログを表示し、ユーザに動作の確認を求めるようにしてもよい。これにより、携帯端末１００が触れたかどうかの判定を誤った時にユーザの意思に反してデータ転送することを防ぐことができる。 Note that when the mobile terminal 100 contacts the display unit 11, data transfer may not be started immediately, but a confirmation dialog may be displayed on the mobile terminal 100 to ask the user to confirm the operation. Thereby, when it is erroneously determined whether or not the mobile terminal 100 is touched, data transfer can be prevented against the user's intention.

また、図５（ｃ）に基づき、動画や写真などのデータを示すアイコンに携帯端末１００が触れた際の動作について説明する。例えば、携帯端末１００が左から二番目の写真のアイコンに触れると、位置取得部１５は、接触のあった位置座標を取得する。また、この際、近接検出部１６が取得している携帯端末１００、２００の識別情報のうち、接触のあった位置座標と最も近い位置に存在する近接検出部１６によって検出されたものが特定され、この特定された携帯端末１００に写真のデータが転送される。 An operation when the mobile terminal 100 touches an icon indicating data such as a moving image or a photo will be described with reference to FIG. For example, when the mobile terminal 100 touches the icon of the second photo from the left, the position acquisition unit 15 acquires the position coordinates where the contact has occurred. At this time, among the identification information of the mobile terminals 100 and 200 acquired by the proximity detection unit 16, the information detected by the proximity detection unit 16 existing at the position closest to the position coordinates where the contact has occurred is specified. The photo data is transferred to the specified portable terminal 100.

操作表示装置１から携帯端末１００に向かってデータ転送をする場合は、データの総容量に対して転送完了したデータ量や転送済のデータ量に応じた割合に相当するアイコンの一部領域を携帯端末１００の画面に表示する。一方、操作表示装置１の表示部１１には、位置取得部１５が取得した位置座標に基づき、データの総容量に対して未転送のデータ量の割合に相当するアイコンの残りの一部領域（携帯端末に表示されていない領域）が表示される。 When data is transferred from the operation display device 1 toward the mobile terminal 100, a partial area of the icon corresponding to a ratio corresponding to the amount of data that has been transferred or the amount of data that has been transferred with respect to the total amount of data is carried. It is displayed on the screen of the terminal 100. On the other hand, based on the position coordinates acquired by the position acquisition unit 15, the display unit 11 of the operation display device 1 has a remaining partial region of icons corresponding to the ratio of the untransferred data amount to the total data capacity ( Area not displayed on the mobile terminal) is displayed.

また、携帯端末１００の画面の画素密度あるいは解像度と画面サイズの情報を操作表示装置１で受信し、本装置にてアイコンのサイズを調整してして表示してもよい。また、その逆で、本装置の画素密度あるいは解像度と画面サイズの情報を携帯端末に送信し、携帯端末１００にてアイコンのサイズを調整して表示してもよい。これにより、携帯端末１００と本装置上で、アイコンを同一あるいはほぼ同一サイズで表示することができる。また操作表示装置１は、携帯端末１００の向きに関する情報を取得し、当該情報が示す向きに応じたアイコンを表示しても良い。なおこれらの処理は図５（ｂ）に係る処理において行っても良い。即ち、携帯端末１００がアップロードアイコン３１上に置かれてデータ転送が開始された場合に、携帯端末１００と操作表示装置１とが、アイコンを同一あるいはほぼ同一サイズで表示してもよい。 Further, information on the pixel density or resolution of the screen of the mobile terminal 100 and the screen size may be received by the operation display device 1 and displayed by adjusting the size of the icon in this device. Conversely, the pixel density or resolution and screen size information of this apparatus may be transmitted to the mobile terminal, and the mobile terminal 100 may adjust and display the icon size. Thereby, the icon can be displayed in the same or almost the same size on the portable terminal 100 and the present apparatus. Further, the operation display device 1 may acquire information related to the orientation of the mobile terminal 100 and display an icon corresponding to the orientation indicated by the information. These processes may be performed in the process according to FIG. That is, when the mobile terminal 100 is placed on the upload icon 31 and data transfer is started, the mobile terminal 100 and the operation display device 1 may display the icons in the same or almost the same size.

また、近接検出部１６により識別情報が検出されていない場合は、起動部２４は、アイコンには手で触ったものと判定し、そのアイコンが示している写真データの表示を表示部１１上に行う。 If the identification information is not detected by the proximity detection unit 16, the activation unit 24 determines that the icon has been touched by hand, and displays the photo data indicated by the icon on the display unit 11. Do.

また、データ転送の途中で携帯端末１００が表示部１１から離れた場合は、表示部１１及び携帯端末１００はデータ転送を中止する。ユーザは特段のキャンセルのための操作をせずに、直感的にデータ転送の中止を指示することができる。また表示部１１は、転送の開始前、あるいは転送中に、例えば図６（ａ）及び（ｂ）のような「転送ロック」「転送中断」のダイアログを表示してもよい。当該ダイアログに対する選択がなければ、転送を開始したのちに携帯端末１００を表示部１１から離すことでデータ転送は中止されるが、転送ロックが選択された場合は、携帯端末１００が表示部１１から離れてもデータ転送は継続される。このようにすることで、ユーザがデータ転送中の間、継続して携帯端末を表示部１１に触れ続けさせる必要がなくなる。 Further, when the mobile terminal 100 is separated from the display unit 11 during the data transfer, the display unit 11 and the mobile terminal 100 stop the data transfer. The user can intuitively instruct to stop the data transfer without performing any special cancel operation. Further, the display unit 11 may display a dialog “transfer lock” and “transfer interruption” as shown in FIGS. 6A and 6B, for example, before the start of transfer or during transfer. If there is no selection for the dialog, the data transfer is stopped by releasing the mobile terminal 100 from the display unit 11 after starting the transfer. However, if the transfer lock is selected, the mobile terminal 100 is moved from the display unit 11. Data transfer continues even if the user leaves. In this way, it is not necessary for the user to continuously touch the display unit 11 while the data is being transferred.

また、転送中断が選択されれば、データ転送が中断される。転送ロックが選択された場合、携帯端末１００を表示部１１から離しただけではデータ転送は中止されないので、そこでユーザがデータ転送を継続中にやはりデータ転送を中断したいと考えた時に、転送中断が選択されることで、データ転送を中断することができる。 If transfer interruption is selected, data transfer is interrupted. When the transfer lock is selected, the data transfer is not stopped only by moving the mobile terminal 100 away from the display unit 11. Therefore, when the user wants to interrupt the data transfer while continuing the data transfer, the transfer interruption is stopped. By being selected, the data transfer can be interrupted.

なお図５のように表示部１１が複数のアイコンを表示する場合、当該表示部１１は複数のアイコン夫々を近接検出部１６に対応する位置に配置しても良い。ＴｒａｎｓｆｅｒＪｅｔのような近接無線通信のモジュールを用いてデータ伝送を行う場合、送信側のカプラと受信側のカプラとが対向する場合に通信品質が高くなる。このため、近接検出部１６が近接無線通信のモジュールである場合、例えば近接検出部１６を覆う位置に表示部１１がアイコンを表示すれば、高い通信品質でのデータ転送が可能となる。なおこの場合に操作表示装置１は、図４で示した配置情報テーブル６０に基づいてアイコンの表示位置を制御する。 When the display unit 11 displays a plurality of icons as shown in FIG. 5, the display unit 11 may arrange each of the plurality of icons at a position corresponding to the proximity detection unit 16. When data transmission is performed using a near field communication module such as TransferJet, communication quality is high when a transmission-side coupler and a reception-side coupler are opposed to each other. For this reason, when the proximity detection unit 16 is a module for proximity wireless communication, for example, if the display unit 11 displays an icon at a position covering the proximity detection unit 16, data transfer with high communication quality is possible. In this case, the operation display device 1 controls the display position of the icon based on the arrangement information table 60 shown in FIG.

図７は、操作表示装置１のＲＯＭ・ＲＡＭ１４に格納されているデータにアクセスする場合のアクセス制限を解除する場合のユーザインタフェイス画面の例を示している。ＲＯＭ・ＲＡＭ１４に格納されているデータはフォルダー構造の形式で格納されており、だれでもアクセスしてよいとされるデータはパブリックフォルダに、特定の人だけがアクセスしてよいとされるデータはプライベートフォルダに格納されている。 FIG. 7 shows an example of a user interface screen when the access restriction is released when data stored in the ROM / RAM 14 of the operation display device 1 is accessed. The data stored in the ROM / RAM 14 is stored in the form of a folder structure. The data that anyone can access is the public folder, and the data that only a specific person can access is private. Stored in a folder.

本実施形態においては、携帯端末１００によって、プライベートフォルダ３００へのアクセス制限を解除することができる。パブリックフォルダ４００は鍵なしのアイコンで表示され、プライベートフォルダ３００は鍵付のアイコンで表示される。鍵付アイコンに特定の携帯端末をタッチすると、位置取得部１５がまず操作表示装置１の表示部１１における携帯端末１００により接触のあったプライベートフォルダ３００の表示位置の位置座標を取得する。また、近接検出部１６は、近接した携帯端末１００を検出し、携帯端末１００の鍵情報を取得する。そして、起動部２４は取得した鍵情報に基づいて、プライベートフォルダ３００のアクセス制御を解除する。 In the present embodiment, the access restriction to the private folder 300 can be released by the mobile terminal 100. The public folder 400 is displayed with an icon without a key, and the private folder 300 is displayed with an icon with a key. When a specific mobile terminal is touched to the icon with a key, the position acquisition unit 15 first acquires the position coordinates of the display position of the private folder 300 that has been touched by the mobile terminal 100 in the display unit 11 of the operation display device 1. Further, the proximity detection unit 16 detects the mobile terminal 100 that is in proximity and acquires key information of the mobile terminal 100. Then, the activation unit 24 releases access control of the private folder 300 based on the acquired key information.

以下、図８に基づき、携帯端末による鍵の解除の処理の流れを説明する。図８に示されるように、まず位置取得部１５は、表示部１１において携帯端末が接触した位置の位置座標を取得する（ステップＳ３０１）。次いで、起動部２４は取得した位置座標がプライベートフォルダ３００の位置か否かを判定する（ステップＳ３０２）。プライベートフォルダ３００の位置であると判定された場合（ステップＳ３０２：Ｙｅｓ）、起動部２４は、携帯端末にプライベートフォルダ３００の鍵情報があるかを問い合わせる（ステップＳ３０３）。鍵情報としては、データの読み出しのみを許可するものと、読み出し、及び書き込みの両方を許可するものの２種類が存在するようにしてもよい。一方、プライベートフォルダ３００の位置でないと判定された場合（ステップＳ３０２：Ｎｏ）、処理を終了し、他の該当するプログラムが起動されるか、なにも行われない。 Hereinafter, the flow of the key release process by the mobile terminal will be described with reference to FIG. As shown in FIG. 8, first, the position acquisition unit 15 acquires the position coordinates of the position where the mobile terminal touches on the display unit 11 (step S <b> 301). Next, the activation unit 24 determines whether or not the acquired position coordinate is the position of the private folder 300 (step S302). When it is determined that the position is the private folder 300 (step S302: Yes), the activation unit 24 inquires whether the portable terminal has the key information of the private folder 300 (step S303). There may be two types of key information, one that permits only reading of data and one that permits both reading and writing. On the other hand, if it is determined that the position is not the position of the private folder 300 (step S302: No), the process is ended and another corresponding program is started or nothing is performed.

次いで、起動部２４は、携帯端末に鍵情報があるか否かを判定する（ステップＳ３０４）。鍵情報があると判定された場合（ステップＳ３０４：Ｙｅｓ）、「鍵が合いました」というメッセージが表示される（ステップＳ３０５）。なお、この際表示するメッセージは他のものであってもよい。また、表示させる場所は、表示部１１であってもよいし、携帯端末のディスプレー上であってもよい。一方、鍵情報がないと判定された場合（ステップＳ３０４：Ｎｏ）、起動部２４は、処理を終了する。次いで、起動部２４は、携帯端末に対してその動作を問い合わせて受信する（ステップＳ３０６）。携帯端末の動作は、携帯端末に設けられた加速度センサーの出力によって示される。起動部２４は、携帯端末の動作を判定して、動作毎に割り当てられたプログラムを起動して、処理を終了する（ステップＳ３０７）。 Next, the activation unit 24 determines whether or not the mobile terminal has key information (step S304). When it is determined that there is key information (step S304: Yes), a message “key matched” is displayed (step S305). Note that other messages may be displayed at this time. Further, the display location may be the display unit 11 or on the display of the mobile terminal. On the other hand, when it determines with there being no key information (step S304: No), the starting part 24 complete | finishes a process. Next, the activation unit 24 inquires and receives the operation from the mobile terminal (step S306). The operation of the mobile terminal is indicated by the output of an acceleration sensor provided in the mobile terminal. The activation unit 24 determines the operation of the mobile terminal, activates the program assigned for each operation, and ends the process (step S307).

例えば、鍵情報が読み出しと、書き込みの両方を許可するものである場合について説明する。携帯端末が約９０度プライベートフォルダ３００の位置で回転されると、プライベートフォルダ３００の読み出しのアクセス制限が解除される。また、携帯端末が約１８０度プライベートフォルダ３００の位置で回転されると、プライベートフォルダ３００の読み出しと書き込みのアクセス制限が解除される。この際、解除完了の旨を表示部１１や携帯端末の画面に表示するようにしてもよい。また回転の方向で、読み出し、及び書き込みのいずれを解除するかを決定するようにしてもよい。また、鍵情報が、読み出しのみを許可するものである場合は、携帯端末が約１８０度回転された場合には、「この携帯端末には読み出しのみが許可されています」と表示されて、約９０度携帯端末を回転させる読み出し解除の動作を利用者に促すようにしてもよい。なお操作表示装置１が携帯端末１００の回転を検出する方法としては、携帯端末１００の表示部１１上での接触位置を検出する方法や、携帯端末１００から当該携帯端末１００の向きに関する情報を取得する方法等が挙げられる。なお、携帯端末１００の識別情報を鍵情報とともに取得し、一度アクセス制限を解除した場合は、２度目以降は鍵情報を取得することなく、携帯端末１００の識別情報でアクセス制限を解除するようにすることもできる。 For example, a case where the key information permits both reading and writing will be described. When the portable terminal is rotated about 90 degrees at the position of the private folder 300, the read access restriction on the private folder 300 is released. When the portable terminal is rotated about 180 degrees at the position of the private folder 300, the read and write access restrictions on the private folder 300 are released. At this time, the completion of the release may be displayed on the display unit 11 or the screen of the mobile terminal. In addition, it may be determined which of reading and writing is canceled in the direction of rotation. Also, if the key information is one that only allows reading, when the mobile device is rotated about 180 degrees, “Reading is only allowed on this mobile device” is displayed, The user may be prompted to perform a read cancellation operation of rotating the 90-degree mobile terminal. As a method for detecting the rotation of the mobile terminal 100 by the operation display device 1, a method for detecting a contact position on the display unit 11 of the mobile terminal 100 or information on the orientation of the mobile terminal 100 is acquired from the mobile terminal 100. And the like. If the identification information of the mobile terminal 100 is acquired together with the key information and the access restriction is once released, the access restriction is released with the identification information of the mobile terminal 100 without acquiring the key information for the second time and thereafter. You can also

次に、操作表示装置１におけるプログラムを起動する処理の流れを図９を用いて説明する。図９に示されるように、位置取得部１５は、表示部１１へと接触があった否かを判定する（ステップＳ１０1）。表示部１１へと接触があったと判定された場合（ステップＳ１０1：Ｙｅｓ）、位置取得部１５は、接触があった位置座標を取得する（ステップＳ１０２）。一方、表示部１１へと接触があったと判定されなかった場合、処理は繰り返される。 Next, a flow of processing for starting a program in the operation display device 1 will be described with reference to FIG. As shown in FIG. 9, the position acquisition unit 15 determines whether or not there is a contact with the display unit 11 (step S101). When it is determined that the display unit 11 has been touched (step S101: Yes), the position acquisition unit 15 acquires the position coordinates where the touch has occurred (step S102). On the other hand, when it is not determined that the display unit 11 has been touched, the process is repeated.

また、ステップ１０１、及びステップＳ１０２の位置取得部１５による表示部１１への接触の検出と並行して、操作表示装置１への携帯端末の近接を検出する処理が行われる。近接検出部１６は、近接した携帯端末を検出したか否かを判定する（ステップＳ１０３）。なお、複数の近接検出部１６は、それぞれがステップＳ１０３の判定処理を行う。近接した携帯端末が検出されたと判定された場合（ステップＳ１０３：Ｙｅｓ）、近接検出部１６は、携帯端末の識別情報を取得し、取得した近接検出部１６の識別情報と対応付けて記憶する（ステップＳ１０４）。なお、近接検出部１６は、取得した識別情報を一時的に記憶しており、例えばそれぞれの近接検出部１６が携帯端末を検出できている間だけ識別情報を記憶しており、検出可能範囲から携帯端末が出た段階で、記憶している識別情報を消去するようにするといった方法で実現することができる。 Moreover, the process which detects the proximity | contact of the portable terminal to the operation display apparatus 1 is performed in parallel with the detection of the contact to the display part 11 by the position acquisition part 15 of step 101 and step S102. The proximity detection unit 16 determines whether or not a nearby mobile terminal has been detected (step S103). Each of the plurality of proximity detection units 16 performs the determination process in step S103. When it is determined that an adjacent mobile terminal has been detected (step S103: Yes), the proximity detection unit 16 acquires the identification information of the mobile terminal, and stores the identification information in association with the acquired identification information of the proximity detection unit 16 ( Step S104). Note that the proximity detection unit 16 temporarily stores the acquired identification information. For example, the proximity detection unit 16 stores the identification information only while each proximity detection unit 16 can detect the mobile terminal. It can be realized by a method of deleting the stored identification information when the portable terminal comes out.

次いで、起動部２４は、近接検出部１６が取得した携帯端末の識別情報が記憶されて存在しているか否かを判定する（ステップＳ１０５）。携帯端末の識別情報が記憶されていると判定された場合（ステップＳ１０５：Ｙｅｓ）、起動部２４は、接触があった位置座標と最も近い位置における近接検出部１６を特定する（ステップＳ１０６）。近接検出部１６の位置は、配置記憶部２２に記憶されている位置情報から参照する。次いで、起動部２４は、特定した近接検出部１６により検出された携帯端末の識別情報を取得する（ステップＳ１０７）。次いで、起動部２４は、接触されたアイコンの位置座標に基づき、アイコン記憶部２１を参照して、プログラム群２３から起動するプログラムを選択する（ステップＳ１０８）。そして、起動部２４は、特定した携帯端末の識別情報を指定して選択したプログラムを起動する（ステップＳ１０９）。一方、携帯端末の識別情報が記憶されていないと判定された場合（ステップＳ１０５：Ｎｏ）、起動部２４は、指などの携帯端末以外による場合のプログラムを起動させる（ステップＳ１１０）。 Next, the activation unit 24 determines whether the identification information of the mobile terminal acquired by the proximity detection unit 16 is stored and exists (step S105). When it determines with the identification information of a portable terminal being memorize | stored (step S105: Yes), the starting part 24 specifies the proximity detection part 16 in the position nearest to the position coordinate with which it contacted (step S106). The position of the proximity detection unit 16 is referred to from the position information stored in the arrangement storage unit 22. Next, the activation unit 24 acquires identification information of the mobile terminal detected by the specified proximity detection unit 16 (step S107). Next, the activation unit 24 refers to the icon storage unit 21 based on the position coordinates of the touched icon and selects a program to be activated from the program group 23 (step S108). Then, the activation unit 24 activates the program selected by specifying the identification information of the specified portable terminal (step S109). On the other hand, when it is determined that the identification information of the portable terminal is not stored (step S105: No), the activation unit 24 activates a program for a case other than a portable terminal such as a finger (step S110).

次いで、起動されるプログラムの詳細な処理の流れについて、図１０に基づき説明する。図１０に示されるように、まず起動部２４は、指定された携帯端末の識別情報から、携帯端末の属性を取得する（ステップＳ２０１）。取得する属性としては、例えば対応可能なデータ形式、表示画面サイズ、実行可能な機能、及び通信方式などである。取得された携帯端末の属性は記憶される。なお、起動部２４は、これらの属性を例えば通信ＩＦ部１９からインターネットを通じて取得してもよいし、操作表示装置１に予めデータベースとして記憶させておいてもよい。 Next, the detailed processing flow of the activated program will be described with reference to FIG. As illustrated in FIG. 10, the activation unit 24 first acquires the attributes of the mobile terminal from the specified mobile terminal identification information (step S <b> 201). The acquired attributes include, for example, compatible data formats, display screen sizes, executable functions, communication methods, and the like. The acquired attribute of the mobile terminal is stored. Note that the activation unit 24 may acquire these attributes from, for example, the communication IF unit 19 via the Internet, or may be stored in advance in the operation display device 1 as a database.

起動部２４は、取得した携帯端末の属性に応じてプログラムを起動する（ステップＳ２０２）。プログラムの具体的な例としては、例えば音楽のファイルを携帯端末に転送するプログラムである場合、ＭＰ３の再生が可能な携帯端末であるか、ＡＡＣの再生が可能な端末であるかといった属性情報に基づいて、音楽ファイルを携帯端末に対応するファイル形式へと変換する処理が行われる。携帯端末により接触があった場合は、このような変換処理が適宜実施された後に、転送が行われる。また、動画のファイルを携帯端末に転送するプログラムである場合、携帯端末の画面サイズが１９２０×１０８０であるか、６４０×４８０であるかといった属性情報に応じて、動画の解像度を転送先の携帯端末の画面サイズに応じたサイズへと変換した後に、転送が行われる。 The activation unit 24 activates the program according to the acquired attribute of the mobile terminal (step S202). As a specific example of the program, for example, in the case of a program for transferring a music file to a mobile terminal, attribute information such as whether the mobile terminal is capable of MP3 playback or is a terminal capable of AAC playback. Based on this, a process for converting the music file into a file format corresponding to the portable terminal is performed. When contact is made with the portable terminal, the transfer is performed after such conversion processing is appropriately performed. Further, in the case of a program for transferring a moving image file to a mobile terminal, the resolution of the moving image is determined according to attribute information such as whether the screen size of the mobile terminal is 1920 × 1080 or 640 × 480. Transfer is performed after conversion to a size corresponding to the screen size of the terminal.

また、転送先の携帯端末が無線ＬＡＮによる通信が可能か、Ｂｌｕｅｔｏｏｔｈ（登録商標）による通信が可能かといった属性情報に基づき、データを転送する際の通信手段を変更することもできる。また、データを転送する際には、携帯端末の全体のサイズを示すサイズ情報を所定のサイズ記憶部から取得し、取得した携帯端末のサイズ情報に基づき、表示部１１上に携帯端末に相当する端末の形状の画像を描画し、描画された携帯端末の画像と、他のユーザインタフェイスとの間でデータ転送が実行されている経路が表示されることで、ユーザに対して視覚的にデータを転送中であることを知覚させることができるようになる。サイズ記憶部は、インターネット上に設けられたデータベースであってもよいし、携帯端末や操作表示装置１内に設けられていてもよい。なお、転送するデータが音楽ファイルや映像ファイル、写真ファイルなどである場合、表示部１１に接触したのが携帯端末ではなく、指であると判断された場合は、転送ではなく表示部１１においてデータの再生処理が行われるようにする。 Also, the communication means for transferring data can be changed based on attribute information such as whether the transfer destination mobile terminal is capable of wireless LAN communication or Bluetooth (registered trademark) communication. Also, when transferring data, size information indicating the overall size of the mobile terminal is acquired from a predetermined size storage unit, and the display unit 11 corresponds to the mobile terminal based on the acquired size information of the mobile terminal. By drawing the image of the terminal shape and displaying the route of the data transfer between the drawn image of the mobile terminal and other user interfaces, data is visually displayed to the user. Can be perceived as being transferred. The size storage unit may be a database provided on the Internet, or may be provided in the mobile terminal or the operation display device 1. When the data to be transferred is a music file, a video file, a photo file, or the like, if it is determined that the finger touching the display unit 11 is not a portable terminal but a finger, the data is not displayed on the display unit 11 but transferred. The playback process is performed.

また、反対に操作表示装置１へと携帯端末からデータを転送する場合について説明する。この場合、まず操作表示装置１のプログラムは、携帯端末側に転送しようとするデータの種類を問い合わせる。この際、携帯端末側は画面上に表示し、選択してあるデータの属性情報を操作表示装置１側へと送るが、データが選択されておらず、属性情報が送られてこない場合は、操作表示装置１は「転送したいデータを選択ください」というメッセージを表示させる。 On the contrary, a case where data is transferred from the portable terminal to the operation display device 1 will be described. In this case, first, the program of the operation display device 1 inquires about the type of data to be transferred to the mobile terminal side. At this time, the mobile terminal side displays it on the screen and sends the attribute information of the selected data to the operation display device 1 side, but if no data is selected and no attribute information is sent, The operation display device 1 displays a message “Please select data to transfer”.

次いで、操作表示装置１では、取得したデータの属性情報から、音楽、映像、及び写真のいずれのデータであるかを判定し、データ毎に予め定められた専用のフォルダが転送先として設定される。また、表示部１１における表示位置や、アイコンの種類も同時に設定される。また、データは属性情報に含まれる日時情報から、日時別のフォルダが転送先として設定されてもよい。こうしたデータ転送にかかる設定処理が完了してから、データの転送が開始される。 Next, the operation display device 1 determines whether the data is music, video, or photo from the attribute information of the acquired data, and a dedicated folder predetermined for each data is set as the transfer destination. . Also, the display position on the display unit 11 and the type of icon are set at the same time. In addition, for data, a folder for each date and time may be set as a transfer destination based on date and time information included in the attribute information. Data transfer is started after the setting process for such data transfer is completed.

また、他の起動されるプログラムの例としては、電子決済用のプログラムも採用可能である。図１１はある商品を購入しようとした場合にその決済用画面４０を示している。決済用画面４０は、購入した商品の情報や決済に使用するカードの情報を表示する購入情報表示部４１、接触部４２、ＯＫボタン４３、及びＮＧボタン４４を含んでいる。接触部４２は、利用者が接触部４２に決済に利用するカードや決済機能を有する携帯端末を接触させる部位である。 Further, as an example of another activated program, a program for electronic settlement can be employed. FIG. 11 shows a settlement screen 40 when a product is purchased. The settlement screen 40 includes a purchase information display unit 41, a contact unit 42, an OK button 43, and an NG button 44 that display information on purchased products and information on cards used for settlement. The contact part 42 is a part where the user contacts the contact part 42 with a card used for payment or a portable terminal having a payment function.

起動部２４は、位置取得部１５が取得した位置座標から、接触部４２、ＯＫボタン４３、及びＮＧボタン４４のいずれの位置に接触があったかを判定する。接触部４２に接触があったと判定された場合、近接検出部１６により近接が検出されていれば、その識別情報で特定されるカードや携帯端末から決済情報が取得される。一方、近接検出部１６により近接が検出されていない場合は、「決済を行うカードでタッチしてください」などのメッセージが表示される。 The activation unit 24 determines, from the position coordinates acquired by the position acquisition unit 15, which position of the contact unit 42, the OK button 43, and the NG button 44 has been touched. If it is determined that there is contact with the contact unit 42, if proximity is detected by the proximity detection unit 16, payment information is acquired from the card or portable terminal specified by the identification information. On the other hand, when proximity is not detected by the proximity detection unit 16, a message such as “Please touch with a card for settlement” is displayed.

また、ＯＫボタン４３に接触があったと判定された場合は、取得済みの決済情報に従って決済が実行される。また、ＮＧボタン４４に接触があったと判定された場合は、取得済みの決済情報が消去される。なお、この決済用画面４０の表示位置は、近接検出部１６のいずれかと対応するような位置に設定することが望ましい。また、決済時に携帯端末に対して、商品クーポンなどを転送するようにしてもよい。この処理は、上述した音楽や映像データの転送処理と同じ流れによって行うことができる。 If it is determined that the OK button 43 has been touched, payment is executed according to the acquired payment information. If it is determined that the NG button 44 has been touched, the acquired settlement information is deleted. The display position of the settlement screen 40 is desirably set to a position corresponding to any one of the proximity detection units 16. Moreover, you may make it transfer a product coupon etc. with respect to a portable terminal at the time of payment. This process can be performed according to the same flow as the music and video data transfer process described above.

以上に示した本実施形態の操作表示装置１においては、携帯端末による表示部１１のアイコンへの接触があった場合に、接触のあったアイコンと最も近い位置における近接検出部１６によって検出された携帯端末の識別情報に基づいてアイコンと対応付けられたプログラムが起動されることとした。そのため、複数の携帯端末が操作表示装置１に近接していると検出されている場合であっても、ユーザが意図する携帯端末との間においてプログラムを起動することができるようになるため、意図しない携帯端末との間でデータが転送されるといった問題が発生することを防ぐことができ、ユーザの利便性を向上させることができるようになる。 In the operation display device 1 of the present embodiment described above, when the mobile terminal touches the icon of the display unit 11, it is detected by the proximity detection unit 16 at a position closest to the touched icon. The program associated with the icon is started based on the identification information of the mobile terminal. Therefore, even when it is detected that a plurality of mobile terminals are close to the operation display device 1, the program can be started with the mobile terminal intended by the user. Therefore, it is possible to prevent a problem that data is transferred to or from a portable terminal that does not, and to improve user convenience.

また、起動するプログラムに対して適切な携帯端末の属性情報を渡すことで、プログラムは携帯端末に応じてプログラムを実行することができ、利便性を向上させることができるようになる。 In addition, by passing appropriate portable terminal attribute information to the program to be activated, the program can be executed according to the portable terminal, and convenience can be improved.

（第２の実施形態）
次に、操作表示装置の第２の実施形態について説明する。第２の実施形態においては、図１２に示されるように、操作表示装置１０００は、新たに起動許可部１２５を備え、起動許可部１２５は、近接検出部１６と位置取得部１５とによる携帯端末の検出の時間差が所定の閾値以内である場合のみ、プログラムの起動を許可する点で異なっている。 (Second Embodiment)
Next, a second embodiment of the operation display device will be described. In the second embodiment, as shown in FIG. 12, the operation display device 1000 is newly provided with an activation permission unit 125, and the activation permission unit 125 is a portable terminal including the proximity detection unit 16 and the position acquisition unit 15. Only when the time difference between the detections is within a predetermined threshold, the activation of the program is permitted.

図１３は、携帯端末３の近接が近接検出部１６によって検出されたＴｉｍｉｎｇ１と、
位置取得部１５による接触の検出がされたＴｉｍｉｎｇ２とのタイミングチャートである。本実施形態においては、この２つのＴｉｍｉｎｇ１、及びＴｉｍｉｎｇ２の間の時間差が所定の閾値以内である場合に、起動許可部１２５は、該当するプログラムの起動を許可する。具体的には、起動許可部１２５は、位置取得部１５による接触の検出があったタイミングで時間の計測を開始する。また、起動許可部１２５は、近接検出部１６による近接の検出があったタイミングで時間の計測を開始する。そして、起動許可部１２５は、位置取得部１５、及び近接検出部１６の双方の検出があった際に、時間の計測を停止し、その際の計測した時間の差が所定の閾値以内か否かを判定する。 FIG. 13 shows Timing 1 in which the proximity of the mobile terminal 3 is detected by the proximity detector 16;
It is a timing chart with Timing2 by which the contact detection by the position acquisition part 15 was detected. In the present embodiment, when the time difference between the two timings 1 and 2 is within a predetermined threshold, the activation permission unit 125 permits activation of the corresponding program. Specifically, the activation permission unit 125 starts measuring time at the timing when the position acquisition unit 15 detects contact. In addition, the activation permission unit 125 starts measuring time at the timing when the proximity detection unit 16 detects proximity. Then, the activation permission unit 125 stops the time measurement when both the position acquisition unit 15 and the proximity detection unit 16 detect, and whether or not the difference in the measured time is within a predetermined threshold value. Determine whether.

なお、起動許可部１２５が近接検出信号を契機に時間の計測を開始する構成に変えて、他の信号を契機とすることもできる。例えば、図１４に示されるように、携帯端末におけるボタンの押下信号を受信したことを契機に、時間の計測を開始したり、図１５に示されるように、加速度センサーを備えた携帯端末からの加速度検出信号を受信したことを契機に時間の計測を開始したりといった構成を採ることができる。この場合、これらの信号は通信ＩＦ部１９を通じて信号を受信することができる。 It should be noted that the activation permission unit 125 may be triggered by another signal instead of the configuration in which the time measurement is started by the proximity detection signal. For example, as shown in FIG. 14, time measurement is started when a button press signal in the mobile terminal is received, or from a mobile terminal equipped with an acceleration sensor as shown in FIG. 15. It is possible to adopt a configuration in which time measurement is started when the acceleration detection signal is received. In this case, these signals can be received through the communication IF unit 19.

以上に示した本実施形態の構成によれば、位置の取得と、携帯端末の検出との時間差が大きくなるような、イレギュラーな状況の場合に、プログラムを起動させないようにすることで、ユーザが意図しない処理が実行されることを防止することができる。なお、時間差が所定の閾値よりも大きい場合、操作表示装置１０００は、位置取得部１５が検出した接触を通常の接触動作として処理してもよい。つまり、操作表示装置１０００が動画、音楽、写真等を示すアイコンを表示している場合に位置取得部１５がこれらアイコンの位置に対する接触を検出し、位置の取得と携帯端末の検出とが所定の閾値より大きいと、操作表示装置１００は例えばアイコンに対応するデータを再生する。 According to the configuration of the present embodiment described above, the user is prevented from starting in an irregular situation where the time difference between the acquisition of the position and the detection of the mobile terminal becomes large. Can prevent unintended processing from being executed. When the time difference is larger than the predetermined threshold, the operation display device 1000 may process the contact detected by the position acquisition unit 15 as a normal contact operation. That is, when the operation display device 1000 displays icons indicating moving images, music, photos, etc., the position acquisition unit 15 detects contact with the positions of these icons, and the acquisition of the position and the detection of the mobile terminal are predetermined. If it is larger than the threshold value, the operation display device 100 reproduces data corresponding to the icon, for example.

なお、第１、及び第２の実施形態において示したプログラムは、操作表示装置１において実行可能なプログラムの例を示したものであり、他のプログラムの実施にも適用することは可能である。 The programs shown in the first and second embodiments are examples of programs that can be executed in the operation display device 1, and can be applied to the implementation of other programs.

また、近接検出部１６のそれぞれの検出可能な範囲の広さは、表示部１１よりも大きく設定されていてもよく、この場合、近接検出部１６は複数でなく１つであっても良い。 Further, the width of each detectable range of the proximity detection unit 16 may be set larger than that of the display unit 11. In this case, the proximity detection unit 16 may be one instead of plural.

本発明の実施形態を説明したが、実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。 Although embodiments of the present invention have been described, the embodiments have been presented by way of example and are not intended to limit the scope of the invention. These novel embodiments can be implemented in various other forms, and various omissions, replacements, and changes can be made without departing from the scope of the invention. These embodiments and modifications thereof are included in the scope and gist of the invention, and are included in the invention described in the claims and the equivalents thereof.

［１］
表示部への携帯端末の近接を検出する近接検出部と、
前記表示部上に表示されるアイコンと、携帯端末が前記表示部に近接した場合に特定の処理を行う第１プログラムと、前記携帯端末以外が前記表示部に近接した場合に特定の処理を行う第２プログラムと、前記アイコンの前記表示部上の表示位置を表す第１位置情報と、を対応付けて記憶するアイコン記憶部と、
前記携帯端末または前記携帯端末以外の前記表示部に近接した位置を表す第２位置情報を取得する位置取得部と、
前記位置取得部によって前記第２位置情報が取得された場合に、前記近接検出部により前記表示部への前記携帯端末の近接が検出されたか否かを判断し、前記携帯端末の近接が検出された場合には、前記第２位置情報と最も近い位置の前記近接検出部で検出された携帯端末に基づいて、前記第２位置情報に一致または類似する前記第１位置情報に対応する前記第１プログラムを起動させ、前記携帯端末の近接が検出されていない場合には、前記第２位置情報に一致または類似する前記第１位置情報に対応する前記第２プログラムを起動させる起動部と、
を備えることを特徴とする操作表示装置。
［２］
前記第１プログラムは、前記携帯端末の種類に応じて異なる処理を実行する
ことを特徴とする［１］に記載の操作表示装置。
［３］
非接触通信により前記携帯端末との間で通信を行う通信部と、
前記通信部を通じて前記携帯端末が操作された旨を示す操作信号を受信した場合に、前記操作信号の受信と、前記近接検出部による前記携帯端末の検出との時間差が所定の閾値内以下である場合に、前記起動部による前記第１プログラムの起動を許可する起動許可部と、
を更に備えることを特徴とする［１］に記載の操作表示装置。
［４］
非接触通信により前記携帯端末との間で通信を行う通信部と、
前記通信部を通じて、加速度検出部を備えた前記携帯端末の加速度検出信号を受信した場合に、前記加速度検出信号の受信と、前記近接検出部による前記携帯端末の検出との時間差が所定の閾値以下である場合に、前記起動部による前記第１プログラムの起動を許可する起動許可部と、
を更に備えることを特徴とする［１］に記載の操作表示装置。
［５］
検出された携帯端末のサイズ情報を所定のサイズ記憶部から検索する検索部と、
検索の結果、前記サイズ情報が得られた場合に、得られた前記サイズ情報に基づいて前記表示装置に前記携帯端末の形状を表示させる表示制御部と、
を更に備えることを特徴とする［２］に記載の操作表示装置。
［６］
前記表示部、
をさらに備えることを特徴とする［１］〜［５］のいずれか一つに記載の操作表示装置。
［７］
操作表示装置で実行される操作表示方法であって、
前記操作表示装置は、表示部上に表示されるアイコンと、携帯端末が前記表示部に近接した場合に特定の処理を行う第１プログラムと、前記携帯端末以外が前記表示部に近接した場合に特定の処理を行う第２プログラムと、前記アイコンの前記表示部上の表示位置を表す第１位置情報と、を対応付けて記憶するアイコン記憶部、を備え、
近接検出部により、前記表示部への前記携帯端末の近接を検出する近接検出ステップと、
前記携帯端末または前記携帯端末以外の前記表示部に近接した位置を示す第２位置情報を取得する位置取得ステップと、
前記位置取得ステップによって前記第２位置情報が取得された場合に、前記近接検出部により前記表示部への前記携帯端末の近接が検出されたか否かを判断し、前記携帯端末の近接が検出された場合には、前記第２位置情報と最も近い位置の前記近接検出部で検出された前記携帯端末に基づいて、前記第２位置情報に一致または類似する前記第１位置情報に対応する前記第１プログラムを起動させ、前記携帯端末の近接が検出されていない場合には、前記第２位置情報に一致または類似する前記第１位置情報に対応する前記第２プログラムを起動させる起動ステップと、
を含むことを特徴とする操作表示方法。 [1]
A proximity detection unit that detects the proximity of the mobile terminal to the display unit;
An icon displayed on the display unit, a first program for performing a specific process when a mobile terminal is close to the display unit, and a specific process when a device other than the mobile terminal is close to the display unit An icon storage unit that associates and stores a second program and first position information representing a display position of the icon on the display unit;
A position acquisition unit that acquires second position information representing a position close to the display unit other than the mobile terminal or the mobile terminal;
When the second position information is acquired by the position acquisition unit, the proximity detection unit determines whether the proximity of the mobile terminal to the display unit is detected, and the proximity of the mobile terminal is detected. The first position information corresponding to the first position information that matches or resembles the second position information based on the portable terminal detected by the proximity detection unit at the position closest to the second position information. An activation unit that activates the program and activates the second program corresponding to the first position information that matches or is similar to the second position information when proximity of the mobile terminal is not detected;
An operation display device comprising:
[2]
The operation display device according to [1], wherein the first program executes different processing depending on a type of the mobile terminal.
[3]
A communication unit for communicating with the portable terminal by non-contact communication;
When an operation signal indicating that the portable terminal has been operated is received through the communication unit, a time difference between reception of the operation signal and detection of the portable terminal by the proximity detection unit is within a predetermined threshold value An activation permission unit that permits activation of the first program by the activation unit;
The operation display device according to [1], further comprising:
[4]
A communication unit for communicating with the portable terminal by non-contact communication;
When receiving an acceleration detection signal of the mobile terminal provided with an acceleration detection unit through the communication unit, a time difference between reception of the acceleration detection signal and detection of the mobile terminal by the proximity detection unit is equal to or less than a predetermined threshold value And an activation permission unit that permits activation of the first program by the activation unit,
The operation display device according to [1], further comprising:
[5]
A search unit for searching the size information of the detected mobile terminal from a predetermined size storage unit;
As a result of the search, when the size information is obtained, a display control unit that displays the shape of the mobile terminal on the display device based on the obtained size information;
The operation display device according to [2], further comprising:
[6]
The display unit,
The operation display device according to any one of [1] to [5], further comprising:
[7]
An operation display method executed by the operation display device,
The operation display device includes an icon displayed on the display unit, a first program for performing a specific process when the mobile terminal is close to the display unit, and a case where a device other than the mobile terminal is close to the display unit. An icon storage unit that stores a second program for performing a specific process and first position information that represents a display position of the icon on the display unit in association with each other;
A proximity detection step of detecting proximity of the mobile terminal to the display unit by a proximity detection unit;
A position acquisition step of acquiring second position information indicating a position close to the display unit other than the mobile terminal or the mobile terminal;
When the second position information is acquired by the position acquisition step, the proximity detection unit determines whether the proximity of the mobile terminal to the display unit is detected, and the proximity of the mobile terminal is detected. In the case of the second position information, the first position information corresponding to the first position information that matches or is similar to the second position information based on the portable terminal detected by the proximity detection unit at a position closest to the second position information. An activation step of activating one program and activating the second program corresponding to the first position information that matches or is similar to the second position information when proximity of the mobile terminal is not detected;
The operation display method characterized by including.

１操作表示装置
１１表示部
１２ＣＰＵ
１３表示コントローラ部
１４ＲＯＭ・ＲＡＭ
１５位置取得部
１６近接検出部
１７位置取得ＩＦ部
１８近接検出ＩＦ部
１９通信ＩＦ部
２１アイコン記憶部
２２配置記憶部
２３プログラム群
２４起動部
３１アップロードアイコン
６０配置情報テーブル
１００携帯端末
１２５起動許可部
２００携帯端末
３００プライベートフォルダ
４００パブリックフォルダ 1 Operation Display Device 11 Display Unit 12 CPU
13 Display Controller 14 ROM / RAM
DESCRIPTION OF SYMBOLS 15 Position acquisition part 16 Proximity detection part 17 Position acquisition IF part 18 Proximity detection IF part 19 Communication IF part 21 Icon memory | storage part 22 Arrangement | storage memory part 23 Program group 24 Starting part 31 Upload icon 60 Arrangement information table 100 Portable terminal 125 Starting permission part 200 Mobile terminal 300 Private folder 400 Public folder

Claims

A display unit having a device for displaying a screen;
A detection unit that is provided on the back surface of the display unit and detects the proximity of the mobile terminal to the display unit;
A receiving unit that receives information on the operation of the mobile terminal from the mobile terminal;
The content displayed on the screen by executing a predetermined program based on the proximity of the mobile terminal detected by the detection unit and the information on the operation of the mobile terminal received by the reception unit. An execution part to be changed ;
A display device comprising:

The operation is a rotation operation of the mobile terminal,
The execution unit, by executing the program, in accordance with the rotational position of the mobile terminal, to release the access restriction to information,
The operation display device according to claim 1.

The operation is a rotation operation of the mobile terminal,
The execution unit, by executing the program, in accordance with the rotation direction of the mobile terminal, to release the access restriction to information,
The operation display device according to claim 1.

The receiving unit receives information related to the rotation operation based on an output of an acceleration sensor in the mobile terminal.
The operation display device according to claim 2 or 3.

Provided on the back side of the display unit having a device for displaying a screen, detecting the proximity of the mobile terminal to the display unit,
Receiving information on the operation of the mobile terminal from the mobile terminal;
The content displayed on the screen is changed by executing a predetermined program based on the detected proximity of the mobile terminal and the received information on the operation of the mobile terminal .
Operation display method including that.