JP2013137659A - Display unit - Google Patents

Display unit Download PDF

Info

Publication number
JP2013137659A
JP2013137659A JP2011288347A JP2011288347A JP2013137659A JP 2013137659 A JP2013137659 A JP 2013137659A JP 2011288347 A JP2011288347 A JP 2011288347A JP 2011288347 A JP2011288347 A JP 2011288347A JP 2013137659 A JP2013137659 A JP 2013137659A
Authority
JP
Japan
Prior art keywords
temperature
image
unit
presentation
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2011288347A
Other languages
Japanese (ja)
Inventor
Hidenori Kuribayashi
英範 栗林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nikon Corp
Original Assignee
Nikon Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nikon Corp filed Critical Nikon Corp
Priority to JP2011288347A priority Critical patent/JP2013137659A/en
Publication of JP2013137659A publication Critical patent/JP2013137659A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • User Interface Of Digital Computer (AREA)
  • Studio Devices (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a display unit capable of presenting the content of a displayed image through tactile sense to an operator.SOLUTION: A display unit comprises a tactile sense presentation part for presenting a tactile sense to an operator, an image determination part for determining the content of a displayed image, and a control part for controlling the amount of presentation of tactile sense which is outputted from the tactile sense presentation part corresponding to the content of a displayed image determined with the image determination part.

Description

本発明は、デジタルカメラ等の手持ち型の表示装置に関する。   The present invention relates to a hand-held display device such as a digital camera.

関連する撮像装置がある(特許文献1を参照)。この特許文献1に記載の撮像装置は、ユーザの意志や身体状況等に応じて的確な撮像動作制御が行われるようにする。この特許文献1に記載の撮像装置では、撮像動作のオン/オフや、撮像動作態様、例えばズーム状態、フォーカス状態、撮像感度調整や輝度レベル等の信号処理、撮像時のフレームレートなど、各種の撮像動作制御として、ユーザの動作又は身体の状況に関する情報を取得し、その情報から使用者の意志又は状況を判定し、判定結果に基づいて各種適切な制御を行う。   There is a related imaging device (see Patent Document 1). The imaging apparatus described in Patent Literature 1 performs accurate imaging operation control in accordance with the user's will, physical condition, and the like. In the imaging apparatus described in Patent Document 1, various operations such as on / off of an imaging operation, an imaging operation mode, for example, a zoom state, a focus state, signal processing such as an imaging sensitivity adjustment and a luminance level, a frame rate at the time of imaging, etc. As imaging operation control, information related to the user's motion or physical condition is acquired, the user's will or situation is determined from the information, and various appropriate controls are performed based on the determination result.

特開2008−067219号公報JP 2008-067219 A

特許文献1に記載の撮像装置は、生体情報を取得して、その取得状況に応じて表示内容を変化させるようにでき、例えば、ユーザの体調を考慮した表示が可能となる。
しかしながら、特許文献1に記載の撮像装置では、ユーザ(操作者)の体調によって視覚情報を変化させることができるが、画像の表示内容を触覚としてユーザに提示する機能は有していない。
The imaging device described in Patent Literature 1 can acquire biological information and change display contents according to the acquisition status. For example, it is possible to display in consideration of the physical condition of the user.
However, the imaging apparatus described in Patent Literature 1 can change visual information depending on the physical condition of the user (operator), but does not have a function of presenting the display content of the image as a tactile sensation.

本発明は、斯かる実情に鑑みなされたものであり、本発明の目的は、画像の表示内容を触覚として操作者に提示することができる、表示装置を提供することにある。   The present invention has been made in view of such circumstances, and an object of the present invention is to provide a display device capable of presenting display contents of an image to an operator as a tactile sensation.

本発明は、上記課題を解決するためになされたものであり、本発明の表示装置は、操作者に触覚を提示する触覚提示部と、表示された画像の表示内容を判定する画像判定部と、前記画像判定部により判定された画像の表示内容に応じて前記触覚提示部から出力される触覚の提示量を制御する制御部と、を備える。   The present invention has been made to solve the above problems, and the display device of the present invention includes a tactile sense presenting unit that presents a tactile sensation to an operator, an image determination unit that determines display content of a displayed image, and the like. A control unit that controls the amount of tactile presentation output from the tactile sense presenting unit in accordance with the display content of the image determined by the image determining unit.

本発明の表示装置は、画像の表示内容を判定し、画像の表示内容に応じた触覚を操作者に提示するようにしたので、これにより、画像の表示内容を触覚として操作者に提示することができる。   Since the display device of the present invention determines the display content of the image and presents a tactile sensation according to the display content of the image to the operator, the display content of the image is thereby presented to the operator as a tactile sensation. Can do.

本発明の表示装置の概要について説明するための図である。It is a figure for demonstrating the outline | summary of the display apparatus of this invention. 本発明の一実施形態による表示装置の構成を示すブロック図である。It is a block diagram which shows the structure of the display apparatus by one Embodiment of this invention. 温度提示部の配置例を示す図である。It is a figure which shows the example of arrangement | positioning of a temperature presentation part. 温度提示部が提示する温度変化の第1の例を示す図である。It is a figure which shows the 1st example of the temperature change which a temperature presentation part shows. 表示画像の寒暖系統の例を示す図である。It is a figure which shows the example of the cold / warm system of a display image. 表示画像に応じて温度提示の変化タイミングを制御する例を示す図である。It is a figure which shows the example which controls the change timing of temperature presentation according to a display image. 温度提示部が提示する温度変化の第2の例を示す図である。It is a figure which shows the 2nd example of the temperature change which a temperature presentation part shows. 温度提示部が複数配置される場合の配置例を示す図である。It is a figure which shows the example of arrangement | positioning in case multiple temperature presentation parts are arrange | positioned. 温度提示部が複数配置される場合の他の配置例を示す図である。It is a figure which shows the other example of arrangement | positioning when two or more temperature presentation parts are arrange | positioned. 温度提示部が提示する温度変化の第3の例を示す図である。It is a figure which shows the 3rd example of the temperature change which a temperature presentation part shows. 温度提示部が提示する温度変化の第4の例を示す図である。It is a figure which shows the 4th example of the temperature change which a temperature presentation part shows. 温度提示部が提示する温度変化の第5の例を示す図である。It is a figure which shows the 5th example of the temperature change which a temperature presentation part shows. 温度提示部が提示する温度変化の第6の例を示す図である。It is a figure which shows the 6th example of the temperature change which a temperature presentation part shows. 温度提示部が提示する温度変化の第1の補足例を示す図である。It is a figure which shows the 1st supplementary example of the temperature change which a temperature presentation part shows. 温度提示部が提示する温度変化の第2の補足例を示す図である。It is a figure which shows the 2nd supplementary example of the temperature change which a temperature presentation part shows. 温度提示部をマトリックス状に配置する例を示す図である。It is a figure which shows the example which arrange | positions a temperature presentation part in matrix form. 基板上での温度提示部パネルの配置例を示す図である。It is a figure which shows the example of arrangement | positioning of the temperature presentation part panel on a board | substrate.

以下、図面を参照して、本発明の実施の形態について説明する。   Embodiments of the present invention will be described below with reference to the drawings.

[第1実施形態]
(表示装置の概要)
図1は、本発明の表示装置の概要について説明するための図であり、デジタルカメラの例を示している。なお、ここではデジタルカメラの例を示しているが、本発明の表示装置は、携帯電話、スマートフォン、タブレット型端末、ノートパソコン等であってもよい。
[First Embodiment]
(Outline of display device)
FIG. 1 is a diagram for explaining an outline of a display device of the present invention, and shows an example of a digital camera. Although an example of a digital camera is shown here, the display device of the present invention may be a mobile phone, a smartphone, a tablet terminal, a laptop computer, or the like.

図1に示すデジタルカメラ100は、片手で持つことができるコンパクトサイズのデジタルカメラの例を示しており、図1(A)は、左手(例えば、親指と、人差し指と、中指と)で把持されたデジタルカメラ100を、背面側(背面の液晶表示パネル141の側)から見た図を示している。図1(B)および図1(C)は、同じく左手で把持されたデジタルカメラ100を、正面側から見た図を示している。   A digital camera 100 illustrated in FIG. 1 illustrates an example of a compact digital camera that can be held with one hand. FIG. 1A illustrates a digital camera 100 that is held with a left hand (for example, a thumb, an index finger, and a middle finger). The figure which looked at the digital camera 100 from the back side (the liquid crystal display panel 141 side of the back) is shown. FIG. 1B and FIG. 1C show views of the digital camera 100 similarly held by the left hand as seen from the front side.

本実施形態のデジタルカメラ100は、図1(C)に示すように、例えば、撮影時において操作者の手(より正確には手の指)がデジタルカメラ100に触れる部分に、触覚により刺激を与える温度提示部201を配置する。この温度提示部201は、例えば、ペルチェ素子等で構成される。この温度提示部201は、液晶表示パネル141に表示される画像の表示内容に応じて温度(発熱または冷却)が制御される。   As shown in FIG. 1C, the digital camera 100 according to the present embodiment stimulates, for example, a tactile sense at a portion where an operator's hand (more precisely, a finger of the hand) touches the digital camera 100 during shooting. A temperature presentation unit 201 is provided. This temperature presentation part 201 is comprised by the Peltier device etc., for example. The temperature presentation unit 201 is controlled in temperature (heat generation or cooling) in accordance with the display content of the image displayed on the liquid crystal display panel 141.

図1(C)に示す例では、温度提示部201が撮像レンズ111の下部の領域に配置され、左手でデジタルカメラ100を把持する場合に、主に人差し指と中指とが温度提示部201に触れるように構成されている。人間は、絶対的な温度差を識別することは苦手であるが、相対的な温度変化に対しては敏感に感じやすく、画像の表示内容に応じて温度提示部201の温度を変化させることで、操作者の指に対して温感または冷感による刺激を与えやすくする。
なお、図1に示すデジタルカメラ100は、温度提示部201をカメラの正面側に1つだけ配置した例を示しているが、温度提示部201の個数と配置場所は、後述するように必要に応じて任意に選択できるものである。また、触覚の提示は、温度に限らず、バイブレータ等を用いた振動で提示することもできる。
また、図1に示すデジタルカメラ100では、撮像レンズ111が正面右上に配置された例を示しているが、勿論、撮像レンズ111が正面中央部に配置されている場合おいても、温度提示部201を、図1(C)に示す例と同様にして配置できるものである。
In the example illustrated in FIG. 1C, when the temperature presentation unit 201 is disposed in the lower region of the imaging lens 111 and the digital camera 100 is held with the left hand, the index finger and the middle finger mainly touch the temperature presentation unit 201. It is configured as follows. Humans are not good at identifying absolute temperature differences, but they are easily sensitive to relative temperature changes, and by changing the temperature of the temperature presentation unit 201 according to the display content of the image. , It is easy to give a stimulus of warmth or cold to the operator's finger.
The digital camera 100 shown in FIG. 1 shows an example in which only one temperature presentation unit 201 is arranged on the front side of the camera, but the number and location of the temperature presentation units 201 are necessary as will be described later. It can be arbitrarily selected depending on the case. In addition, presentation of tactile sensation is not limited to temperature, and can be presented by vibration using a vibrator or the like.
In the digital camera 100 shown in FIG. 1, an example is shown in which the imaging lens 111 is arranged on the upper right side of the front. Of course, even when the imaging lens 111 is arranged in the center of the front, the temperature presentation unit 201 can be arranged in the same manner as the example shown in FIG.

また、図2は、この発明の一実施形態による表示装置の構成を示すブロック図である。この図1に示す例は、デジタルカメラの例を示しており、本発明に関係する部分を示している。この図2に示されるように、本実施形態に係るデジタルカメラ100は、撮像部110と、CPU(Central Processing Unit)120と、画像処理部130と、表示部140と、記憶部150と、バッファメモリ部151と、操作部160と、通信部170と、画像判定部180と、制御部190と、触覚提示部200と、を備えている。   FIG. 2 is a block diagram showing the configuration of the display device according to the embodiment of the present invention. The example shown in FIG. 1 shows an example of a digital camera, and shows parts related to the present invention. As shown in FIG. 2, the digital camera 100 according to the present embodiment includes an imaging unit 110, a CPU (Central Processing Unit) 120, an image processing unit 130, a display unit 140, a storage unit 150, and a buffer. The memory unit 151, the operation unit 160, the communication unit 170, the image determination unit 180, the control unit 190, and the tactile sense presentation unit 200 are provided.

撮像部110は、複数の撮像レンズ111を備える光学系112と、撮像素子113と、A/D変換部114とを備えている。この撮像部110は、設定された撮像条件(例えば絞り値、露出値等)に基づいてCPU120により制御され、撮像レンズ111を介した光学像を撮像素子113に結像させ、A/D変換部114によりデジタル信号に変換された当該光学像に基づく画像データを生成する。   The imaging unit 110 includes an optical system 112 including a plurality of imaging lenses 111, an imaging element 113, and an A / D conversion unit 114. The imaging unit 110 is controlled by the CPU 120 based on the set imaging conditions (for example, an aperture value, an exposure value, etc.), and forms an optical image via the imaging lens 111 on the imaging element 113, and an A / D conversion unit Image data based on the optical image converted into a digital signal by 114 is generated.

撮像素子113は、例えば、受光面に結像した光学像を電気信号に変換して、A/D変換部114に出力する。A/D変換部114は、撮像素子113によって変換された電気信号をアナログ/デジタル変換し、この変換したデジタル信号である画像データを出力する。画像データは、バッファメモリ部151に記憶される。
操作部160は、例えば、電源スイッチ、シャッターボタン、十字キー、確定ボタン、および、その他の操作キーを含み、ユーザによって操作されることでユーザの操作入力を受け付け、CPU120に出力する。
For example, the image sensor 113 converts an optical image formed on the light receiving surface into an electric signal and outputs the electric signal to the A / D converter 114. The A / D converter 114 performs analog / digital conversion on the electrical signal converted by the image sensor 113 and outputs image data that is the converted digital signal. The image data is stored in the buffer memory unit 151.
The operation unit 160 includes, for example, a power switch, a shutter button, a cross key, a confirmation button, and other operation keys. The operation unit 160 receives a user operation input by being operated by the user and outputs it to the CPU 120.

画像処理部130は、記憶部150に記憶されている画像処理条件に基づいて、バッファメモリ部151に記憶されている画像データに対して画像処理を実行する。ここでいうバッファメモリ部151に記憶されている画像データとは、画像処理部130に入力される画像データのことであり、たとえば、上述した撮影画像データ、スルー画等の撮影画像データのことである。
表示部140は、例えば液晶ディスプレイであって、撮像部110によって得られた画像データや操作画面等を、液晶表示パネル141上に表示する。
記憶部150には、CPU120によってシーン判定の際に参照される判定条件や、撮像条件等が記憶されている。
The image processing unit 130 performs image processing on the image data stored in the buffer memory unit 151 based on the image processing conditions stored in the storage unit 150. The image data stored in the buffer memory unit 151 here is image data input to the image processing unit 130, for example, photographic image data such as the above-described photographic image data or a through image. is there.
The display unit 140 is a liquid crystal display, for example, and displays image data, an operation screen, and the like obtained by the imaging unit 110 on the liquid crystal display panel 141.
The storage unit 150 stores determination conditions to be referred to when the CPU 120 determines a scene, imaging conditions, and the like.

通信部170は、デジタルカメラ100と外部のサーバ300(あるいはパソコン)とを通信接続するための通信制御部であり、デジタルカメラ100は、通信部170を通して、サーバ300(あるいはパソコン)に撮影画像データを送信することができる。また、デジタルカメラ100は、通信部170を通して、サーバ300(あるいはパソコン)から撮影日時に応じた天気情報(気象情報)301を受信することができる。   The communication unit 170 is a communication control unit for communicatively connecting the digital camera 100 and an external server 300 (or personal computer). The digital camera 100 passes the captured image data to the server 300 (or personal computer) through the communication unit 170. Can be sent. Further, the digital camera 100 can receive weather information (weather information) 301 corresponding to the shooting date and time from the server 300 (or personal computer) through the communication unit 170.

なお、デジタルカメラ100には、カードメモリ等の取り外しが可能な記憶媒体(不図示)が着脱可能なように構成されており、この記憶媒体へ、例えば、撮像部110によって生成された撮影画像データを記憶する。   Note that the digital camera 100 is configured such that a removable storage medium (not shown) such as a card memory can be attached to and detached from the digital camera 100, for example, photographed image data generated by the imaging unit 110. Remember.

画像判定部180は、表示部140に表示された画像から、画像の表示内容を判定する。この画像の表示内容の判定については、後述する、
制御部190は、画像判定部180により判定された画像の表示内容に応じた触覚が、操作者に対して提示されるように触覚提示部200を制御する。この制御部190は、温度制御部191と振動制御部192とで構成され、温度制御部191は、画像の表示内容に応じた温度の変化が、操作者に対して提示されるように触覚提示部200を制御する。振動制御部192は、画像の表示内容に応じた振動の変化が、操作者に対して提示されるように触覚提示部200を制御する。
The image determination unit 180 determines the display content of the image from the image displayed on the display unit 140. The determination of the display content of this image will be described later.
The control unit 190 controls the tactile sense presenting unit 200 so that a tactile sense corresponding to the display content of the image determined by the image determining unit 180 is presented to the operator. The control unit 190 includes a temperature control unit 191 and a vibration control unit 192. The temperature control unit 191 presents a tactile sensation so that a change in temperature according to the display content of the image is presented to the operator. The unit 200 is controlled. The vibration control unit 192 controls the tactile sense presenting unit 200 so that a change in vibration according to the display content of the image is presented to the operator.

触覚提示部200は、温度提示部201と、振動提示部210とで構成される。温度提示部201は、ペルチェ素子などにより、画像の表示内容に応じた温度の変化を操作者に対して提示する。振動提示部210は、バイブレータなどにより、画像の表示内容に応じた振動の変化を操作者に対して提示する。   The tactile sense presenting unit 200 includes a temperature presenting unit 201 and a vibration presenting unit 210. The temperature presentation unit 201 presents a change in temperature according to the display content of the image to the operator using a Peltier element or the like. The vibration presenting unit 210 presents a vibration change according to the display content of the image to the operator using a vibrator or the like.

CPU120は、デジタルカメラ100が備える各構成部を制御する。バス220は、撮像部110と、CPU120と、操作部160と、画像処理部130と、表示部140と、記憶部150と、バッファメモリ部151と、通信部170と、画像判定部180と、制御部190とに接続され、各部から出力された画像データや制御信号等を転送する。   The CPU 120 controls each component included in the digital camera 100. The bus 220 includes an imaging unit 110, a CPU 120, an operation unit 160, an image processing unit 130, a display unit 140, a storage unit 150, a buffer memory unit 151, a communication unit 170, an image determination unit 180, It is connected to the control unit 190 and transfers image data, control signals and the like output from each unit.

また、図3は、温度提示部の配置例を示す図である。図1では、温度提示部201が、デジタルカメラ100の正面側に配置される例を示したが、温度提示部201は、デジタルカメラ100の側面や背面に配置することもできる。また、温度提示部201は、両手でデジタルカメラ100を把持する場合にも対応できるように、カメラ正面の両端部に配置することもできる。   Moreover, FIG. 3 is a figure which shows the example of arrangement | positioning of a temperature presentation part. In FIG. 1, the example in which the temperature presentation unit 201 is arranged on the front side of the digital camera 100 is shown, but the temperature presentation unit 201 can be arranged on the side surface or the back side of the digital camera 100. Moreover, the temperature presentation part 201 can also be arrange | positioned at the both ends of a camera front so that it may respond | correspond also when holding the digital camera 100 with both hands.

例えば、図3(A)は、カメラの側面に温度提示部201を配置する例であり、デジタルカメラ100の側面を指で把持する場合に、表示画像の内容に応じた触覚(この場合は温度変化による刺激)をユーザの指に与えることができる。   For example, FIG. 3A is an example in which the temperature presentation unit 201 is arranged on the side surface of the camera. When the side surface of the digital camera 100 is held with a finger, a tactile sensation (in this case, the temperature) (Stimulation by change) can be applied to the user's finger.

また、図3(B)は、デジタルカメラ100の背面(より正確には液晶表示パネル141の背面)に温度提示部201を配置した例であり、例えば、片手または両手でカメラの側面を把持する場合に、操作者の指に触覚(この場合は温度変化)による刺激を与えることができる。
また、図3(C)は、カメラ正面の両端部に温度提示部201を配置する例であり、デジタルカメラの正面の左側に温度提示部201Lを配置し、デジタルカメラの正面の右側に温度提示部201Rを配置する例である。この図3(C)に示す例は、デジタルカメラ100を両手で把持する場合、左手で把持する場合、および右手で把持する場合のいずれの場合においても、表示画像の内容に応じた触覚(この場合は温度変化による刺激)を操作者の手の指に与えることができる。
また、図3に示すデジタルカメラ100では、撮像レンズ111が正面右上に配置された例を示しているが、勿論、撮像レンズ111が正面中央部に配置されている場合おいても、温度提示部201Rおよび201Lを、図3(C)に示す例と同様にして配置できるものである。
なお、デジタルカメラ100に複数の温度提示部201を配置する例については、後述する第2実施形態において、さらに詳細に説明する。
3B is an example in which the temperature presentation unit 201 is disposed on the back surface of the digital camera 100 (more precisely, the back surface of the liquid crystal display panel 141). For example, the side surface of the camera is held with one hand or both hands. In some cases, the operator's finger can be stimulated by touch (in this case, temperature change).
FIG. 3C illustrates an example in which the temperature presentation unit 201 is disposed at both ends of the front of the camera, the temperature presentation unit 201L is disposed on the left side of the front of the digital camera, and the temperature presentation is performed on the right side of the front of the digital camera. This is an example in which the part 201R is arranged. In the example shown in FIG. 3C, a tactile sensation corresponding to the content of the display image (this is the case when holding the digital camera 100 with both hands, holding with the left hand, and holding with the right hand). In this case, stimulation by temperature change can be applied to the finger of the operator's hand.
In the digital camera 100 shown in FIG. 3, an example in which the imaging lens 111 is arranged at the upper right corner of the front is shown. Of course, even when the imaging lens 111 is arranged at the center of the front, the temperature presentation unit 201R and 201L can be arranged in the same manner as in the example shown in FIG.
An example in which a plurality of temperature presentation units 201 are arranged in the digital camera 100 will be described in more detail in a second embodiment described later.

(温度提示部が提示する温度変化の第1の例)
本実施形態のデジタルカメラ100は、画像の表示内容に応じて温度提示部201が提示する温度を変化させる。
図4は、温度提示部201が提示する温度変化の第1の例を示す図である。
制御部190は、画像判定部180により表示画像が「暖かい感じのする画像」と判定された場合に、図4(A)に示す温度変化パターンにより温度提示部201の温度を変化させる。また、制御部190は、画像判定部180により表示画像が「冷たい感じのする画像」と判定された場合に、図4(B)に示す温度変化パターンにより温度提示部201の温度を変化させる。なお、「暖かい感じのする画像」と、「冷たい感じのする画像」の判定方法については、後述する。
(First example of temperature change presented by the temperature presentation unit)
The digital camera 100 of the present embodiment changes the temperature presented by the temperature presentation unit 201 according to the display content of the image.
FIG. 4 is a diagram illustrating a first example of a temperature change presented by the temperature presentation unit 201.
When the image determination unit 180 determines that the display image is “an image that feels warm”, the control unit 190 changes the temperature of the temperature presentation unit 201 according to the temperature change pattern shown in FIG. When the image determination unit 180 determines that the display image is “an image that feels cold”, the control unit 190 changes the temperature of the temperature presentation unit 201 using the temperature change pattern shown in FIG. Note that a determination method of “an image that feels warm” and “an image that feels cold” will be described later.

図4(A)は、表示画像が「暖かい感じのする画像」の場合の例であり、横軸に時間をとり縦軸に温度をとることにより、温度提示部201の温度変化をグラフで示している。
この図4(A)に示すように、温度提示部201は、画像表示が開始される前(時刻t1以前)までは一定の温度θ1(例えば、23°C)に加温されている。この一定の温度θ1による温度提示部201の加温は、例えば、デジタルカメラ100の電源スイッチの投入時や、画像の再生開始スイッチの投入時に開始される。
FIG. 4A is an example in the case where the display image is “an image that feels warm”, and shows the temperature change of the temperature presentation unit 201 in a graph by taking time on the horizontal axis and temperature on the vertical axis. ing.
As shown in FIG. 4A, the temperature presentation unit 201 is heated to a constant temperature θ1 (for example, 23 ° C.) before image display is started (before time t1). The heating of the temperature presentation unit 201 at the constant temperature θ1 is started, for example, when the power switch of the digital camera 100 is turned on or when the image reproduction start switch is turned on.

そして、図4(A)において、時刻t1から「暖かい感じのする画像」の表示が開始されると、制御部190は、温度提示部201の温度を温度θ1から徐々に上昇させ、温度提示部201は時刻t2において温度θ2(例えば、26°C)となる。これにより、温度提示部201は、操作者に対して相対的に暖かくなったと感じさせることができる。   In FIG. 4A, when the display of the “image that feels warm” is started from time t1, the control unit 190 gradually increases the temperature of the temperature presentation unit 201 from the temperature θ1, and the temperature presentation unit 201 becomes temperature θ2 (for example, 26 ° C.) at time t2. Thereby, the temperature presentation unit 201 can make the operator feel relatively warm.

その後、制御部190は、時刻t2から時刻t3まで温度提示部201の温度を一定の温度θ2の定温状態に維持する。そして、時刻t3において画像の表示が終了すると、制御部190は、この時刻t3から温度提示部201の温度を徐々に下降させ、温度提示部201は、時刻t4において元の温度θ1に戻る。これにより、温度提示部201は、「暖かい感じのする画像」の表示が終了する際に、操作者に対して相対的に冷たくなったと感じさせることができる。   Thereafter, the control unit 190 maintains the temperature of the temperature presentation unit 201 in a constant temperature state of a constant temperature θ2 from time t2 to time t3. When the display of the image ends at time t3, control unit 190 gradually decreases the temperature of temperature presentation unit 201 from time t3, and temperature presentation unit 201 returns to the original temperature θ1 at time t4. As a result, the temperature presentation unit 201 can make the operator feel relatively cold when the display of the “image that feels warm” ends.

一方、画像判定部180が、表示画像が「冷たい感じのする画像」と判定した場合に、制御部190は、図4(B)の温度変化パターンに示すように温度提示部201の温度を変化させる。
この図4(B)に示すように、温度提示部201は、画像表示が開始される前(時刻t1以前)までは一定の温度θ1(例えば、23°C)に加温されている。そして、時刻t1から「冷たい感じる画像」の表示が開始されると、温度提示部201の温度が温度θ1から徐々に温度が下降し、時刻t2において温度θ3(例えば、20°C)となる。これにより、温度提示部201は、操作者に対して相対的に冷たくなったと感じさせることができる。
On the other hand, when the image determination unit 180 determines that the display image is “an image that feels cold”, the control unit 190 changes the temperature of the temperature presentation unit 201 as shown in the temperature change pattern of FIG. Let
As shown in FIG. 4B, the temperature presentation unit 201 is heated to a constant temperature θ1 (for example, 23 ° C.) before image display is started (before time t1). When the display of the “image that feels cold” is started from time t1, the temperature of the temperature presentation unit 201 gradually decreases from the temperature θ1, and reaches a temperature θ3 (for example, 20 ° C.) at time t2. Thereby, the temperature presentation unit 201 can make the operator feel relatively cold.

その後、制御部190は、時刻t2から時刻t3まで温度提示部201の温度を一定の温度θ3の定温状態に維持する。そして、時刻t3において画像の表示が終了すると、制御部190は、この時刻t3から温度提示部201の温度を徐々に上昇させ温度提示部201は、時刻t4において元の温度θ1に戻る。これにより、温度提示部201は、「冷たい感じのする画像」の表示が終了する際に、操作者に対して相対的に暖かくなったと感じさせることができる。   Thereafter, the control unit 190 maintains the temperature of the temperature presentation unit 201 at a constant temperature θ3 from time t2 to time t3. When the display of the image ends at time t3, control unit 190 gradually increases the temperature of temperature presentation unit 201 from time t3, and temperature presentation unit 201 returns to the original temperature θ1 at time t4. Thereby, the temperature presentation unit 201 can make the operator feel relatively warm when the display of the “image that feels cold” ends.

このように、本実施形態のデジタルカメラ100は、表示画像が「暖かい感じのする画像」であるか、或いは「冷たい感じのする画像」であるかを判定し、それぞれの画像の寒暖に応じた触覚(この場合は温度変化)を提示する。これにより、デジタルカメラ100は、画像の表示内容に相応する温感の刺激を操作者に与えることができる。   As described above, the digital camera 100 according to the present embodiment determines whether the display image is “an image that feels warm” or “an image that feels cold”, and according to the temperature of each image. Present tactile sense (in this case, temperature change). As a result, the digital camera 100 can give the operator a warm stimulus corresponding to the display content of the image.

なお、温度提示部201の温度の調整は、ペルチェ素子にある一定の電流をかけて定温状態として、温度を上昇させるときはペルチェ素子に流れる電流を増加し、温度を下降させる時は電流を減少することにより、相対的な温度変化を操作者に知覚させることができる。
また、温度提示部201の温度の調整は、ペルチェ素子に流す電流値を制御するとともに、電流を流す方向を制御することで行うこともできる。ペルチェ素子は、流れる電流の方向により発熱体または冷却体として動作させることができるため、制御部190は、温度提示部201の温度を上昇させる場合に、ペルチェ素子を発熱体として動作させ、温度提示部201の温度を低下させる場合に、冷却体として動作させることができる。
Note that the temperature of the temperature presentation unit 201 is adjusted by applying a certain current to the Peltier element to maintain a constant temperature state. When the temperature is increased, the current flowing through the Peltier element is increased, and when the temperature is decreased, the current is decreased. By doing so, the operator can perceive a relative temperature change.
In addition, the temperature of the temperature presentation unit 201 can be adjusted by controlling the value of current flowing through the Peltier element and controlling the direction of current flow. Since the Peltier element can be operated as a heating element or a cooling body depending on the direction of the flowing current, the control unit 190 operates the Peltier element as a heating element when the temperature of the temperature presentation unit 201 is increased, thereby providing the temperature presentation. When the temperature of the unit 201 is lowered, it can be operated as a cooling body.

なお、上述した例では、温度θ1、温度θ3、および温度θ3の相対値を設定して、操作者に対して温度の変化を感じさせるようにしているが、温度の相対値の他に、温度の変化率を変えることにより、操作者が受ける刺激の程度を変化させるようにしてもよい、例えば、制御部190は、温度を急激に変化させることにより、操作者に対して強く刺激を与えることができる。例えば、画像が炎や花火の場合に、制御部190は、温度を急激に変化させることにより、操作者に対して強く刺激を与えることができる。   In the above-described example, the relative values of the temperature θ1, the temperature θ3, and the temperature θ3 are set so that the operator feels a change in the temperature. The degree of stimulation received by the operator may be changed by changing the change rate of the control unit. For example, the control unit 190 may strongly stimulate the operator by changing the temperature rapidly. Can do. For example, when the image is flame or fireworks, the control unit 190 can give a strong stimulus to the operator by changing the temperature rapidly.

また、上述した温度θ1、温度θ3、および温度θ3の値は、所定の上限値以内において任意の固定値として設定できるとともに、表示画像の「寒暖の度合い」に応じて変動させることもできる。また、温度θ1、温度θ3、および温度θ3の値は、操作者が、操作部160或いは液晶表示パネル141(例えば、タッチパネル)上で設定するようにしてもよい。また、操作者が、温度変化の傾きを、操作部160或いは液晶表示パネル141上で設定するようにしてもよい。   Further, the values of the temperature θ1, the temperature θ3, and the temperature θ3 described above can be set as arbitrary fixed values within a predetermined upper limit value, and can be changed according to the “degree of warming” of the display image. Further, the values of the temperature θ1, the temperature θ3, and the temperature θ3 may be set by the operator on the operation unit 160 or the liquid crystal display panel 141 (for example, a touch panel). Further, the operator may set the inclination of the temperature change on the operation unit 160 or the liquid crystal display panel 141.

(画像の寒暖系統の識別方法)
上述の「暖かい感じのする画像」と「冷たい感じのする画像」の判定は、画像判定部180により行われ、画像判定部180は、表示画像の主要な被写体が暖色系であるか寒色系であるにより寒暖を判定する。
(How to identify the cold / warm system in the image)
The determination of the above-mentioned “image that feels warm” and “image that feels cold” is performed by the image determination unit 180, and the image determination unit 180 determines whether the main subject of the display image is a warm color system or a cold color system. Judgment of temperature is more.

図5は、表示画像の寒暖系統の例を示す図である。図5(A)に示す暖色系1の画像は、被写体が焚き火の画像であり、焚き火の赤やオレンジ色が暖色系の色となる。図5(B)に示す暖色系2の画像は、被写体が日向に座る犬の画像であり、日差しの明るい色が暖色系の色となる。このように、図5(A)および図5(B)に示す画像の被写体は、暖色系(例えば、赤、オレンジ、黄色)の色を多く含み、画像判定部180により「暖かい感じのする画像」と判定される。   FIG. 5 is a diagram illustrating an example of a cooling / heating system of a display image. The warm color system 1 image shown in FIG. 5A is a bonfire image of the subject, and the bonfire red and orange colors are warm colors. The warm color 2 image shown in FIG. 5B is a dog image in which the subject is sitting in the sun, and the bright color of the sunlight is the warm color. As described above, the subject of the image shown in FIGS. 5A and 5B includes many warm colors (for example, red, orange, and yellow). Is determined.

また、図5(C)に示す寒色系1の画像は、被写体が海中を泳ぐイルカ等の大型海洋動物の画像であり、海の青色が寒色系の色となる。図5(D)に示す寒色系2の画像は、スミレの花の画像であり、花の紫色と葉の緑が寒色系の色となる。このように、図5(C)および図5(D)に示す画像の被写体は、寒色系(例えば、青、青緑)の色が多く含み、画像判定部180により「冷たい感じのする画像」と判定される。   5C is an image of a large marine animal such as a dolphin in which the subject swims in the sea, and the blue of the sea is a cold color. The image of the cold color system 2 shown in FIG. 5D is an image of a violet flower, and the purple color of the flower and the green color of the leaves are the colors of the cold color system. As described above, the subjects of the images shown in FIGS. 5C and 5D include many cold colors (for example, blue and blue-green), and the image determination unit 180 determines that “the image feels cold”. It is determined.

なお、画像が「暖色系・寒色系」どちらにも属さない色を多く含む場合に、画像判定部180は、「暖かくもなく冷たくもない画像」と判定し、温度提示部201おける温度変化を発生させないようにすることもできる。   When the image includes many colors that do not belong to either “warm color / cold color”, the image determination unit 180 determines that the image is neither warm nor cold, and the temperature change in the temperature presentation unit 201 is determined. It is also possible not to generate it.

また、寒暖の判定は、例えば、EXIF(Exchangeable Image File Format)データの時間や日時の情報を基に判定してもよく、また、画像全体の色平均値から判定してもよい。また、寒暖の判定は、主要被写体を推定して主要被写体の特徴量から判定してもよい。また、寒暖の判定は、EXIFデータと、画像が「暖色系・寒色系」であるかの判定結果と組み合わせて行うなど、複数の種類のデータを組み合わせて判定するようにしてもよい。また、例えば、画像判定部180により主要被写体が人であると判定された場合に、制御部190は、温度提示部201の温度が人肌で保たれるようにしてもよい。   The determination of the temperature may be made based on, for example, time and date / time information of EXIF (Exchangeable Image File Format) data, or may be made from the color average value of the entire image. Further, the determination of the temperature may be made based on the feature amount of the main subject by estimating the main subject. In addition, the determination of cold / warm may be made by combining a plurality of types of data such as EXIF data and a determination result of whether the image is “warm / cold”. For example, when the image determination unit 180 determines that the main subject is a person, the control unit 190 may keep the temperature of the temperature presentation unit 201 in human skin.

さらには、制御部190は、天気情報(気象情報)を保存するサーバ300(図2を参照)から、撮影日時に応じた天気情報(気象情報)を取得し、この天気情報を基に寒暖の判定を行うようにしてもよい。例えば、撮影された画像の空の色が白色で表示されるが、撮影者が記憶する記憶色が青空であり、画像の色と記憶色との間に大きな差があるような場合に、画像判定部180は、サーバ300から撮影日時に応じた天気情報を取得することにより、例えば、当日が快晴であった場合は表示画像を「暖かい感じのする画像」と判定することができる。
またさらに、操作者が、EXIFデータとしてテキスコメント(例えば、「さわやかな朝だった」)を予め入力しておき、画像判定部180が、このテキスコメントの内容を基にして、画像の寒暖の判定を行うようにしてもよい。
Furthermore, the control unit 190 acquires weather information (weather information) according to the shooting date and time from the server 300 (see FIG. 2) that stores the weather information (weather information), and based on this weather information, You may make it perform determination. For example, when the sky color of a photographed image is displayed in white but the memory color stored by the photographer is blue sky, and there is a large difference between the image color and the memory color, the image The determination unit 180 can acquire the weather information according to the shooting date and time from the server 300, and for example, can determine that the display image is an image that feels warm when the day is clear.
Furthermore, the operator inputs a text comment (eg, “It was a refreshing morning”) as EXIF data in advance, and the image determination unit 180 determines whether the image is warm or cold based on the content of the text comment. You may make it perform determination.

(表示画像に応じて温度提示の変化タイミングを制御する例)
また、制御部190は、表示画像に応じて提示する温度の変化タイミングを、画像の表示態様に対応させて変化させるようにしてもよい。例えば、制御部190は、スライドショー表示において、フェードイン・アウトやスライドイン・アウトに合わせて温度を変化させるようにしてもよい。
なお、フェードインは、「一色の状態から徐々に映像が見えている状態に移り変わること」であり、フェードアウトは「映像が見えている状態から徐々に一色に移り変わること」である。
(Example of controlling the change timing of temperature presentation according to the display image)
The control unit 190 may change the change timing of the temperature to be presented according to the display image in accordance with the display mode of the image. For example, the control unit 190 may change the temperature in accordance with fade-in / out and slide-in / out in the slide show display.
Note that the fade-in is “change from a state of one color gradually to a state where an image can be seen”, and the fade-out is “a state where the image is visible and gradually changes to a color”.

図6は、表示画像に応じて温度提示の変化タイミングを制御する例を示す図である。図6(A)は、フェードイン・フェードアウトの例を示す図であり、図6(B)は、スライドイン・スライドアウトの例を示す図である。
この図6(A)は、2つのグラフを縦方向に並べて示しており、上側に、横軸に時間をとり縦軸に画像の透過率をとることにより、表示画像が「フェードイン・フェードアウト」する際の透過率の変化をグラフで示し、下側に、横軸に時間をとり縦軸に温度をとることにより、表示画像が「フェードイン・フェードアウト」する際の温度の変化をグラフで示している。
FIG. 6 is a diagram illustrating an example of controlling the change timing of the temperature presentation according to the display image. FIG. 6A is a diagram illustrating an example of fade-in / fade-out, and FIG. 6B is a diagram illustrating an example of slide-in / slide-out.
FIG. 6A shows two graphs arranged in the vertical direction. On the upper side, the horizontal axis is time and the vertical axis is the image transmittance, so that the display image is “fade-in / fade-out”. The graph shows the change in transmittance when the display image "fades in and out" by taking time on the horizontal axis and taking the temperature on the vertical axis. ing.

図6(A)に示すように、温度提示部201は、画像表示が開始される前(時刻t1以前)までは、画像の透過率が100%の白の画像が表示され、温度提示部201は、一定の温度θ1に加温されている。
そして、時刻t1において画像のフェードインが開始されると、制御部190は、温度提示部201の温度を温度θ1から徐々に増加させ、時刻t2において本実施例において表示させたい画像である黒画像を表示するため画像の透過率を完全に非透過とし、その際温度提示部201の温度をθ2にする。これにより、温度提示部201は、フェードインの際に、操作者に対して相対的に暖かくなったと感じさせることができる。
As shown in FIG. 6 (A), the temperature presentation unit 201 displays a white image with a transmittance of 100% before the image display is started (before time t1). Is heated to a constant temperature θ1.
When the fade-in of the image is started at time t1, the control unit 190 gradually increases the temperature of the temperature presentation unit 201 from the temperature θ1, and a black image that is an image that is desired to be displayed in the present embodiment at time t2. In order to display the image, the transmittance of the image is made completely non-transmissive, and the temperature of the temperature presentation unit 201 is set to θ2. Thereby, the temperature presentation unit 201 can make the operator feel relatively warm during the fade-in.

その後、制御部190は、時刻t2から時刻t3まで温度提示部201の温度を一定の温度θ2の定温状態に維持する。そして、時刻t3において画像のフェードアウトが開始されると、制御部190は、この時刻t3から温度提示部201の温度を徐々に低下させ、温度提示部201は、時刻t4において元の温度θ1に戻る。これにより、温度提示部201は、フェードアウトの際に、操作者に対して相対的に冷たくなったと感じさせることができる。
その後、次の画像が表示され、図6(A)に示した動作が繰り返される。
Thereafter, the control unit 190 maintains the temperature of the temperature presentation unit 201 in a constant temperature state of a constant temperature θ2 from time t2 to time t3. When the fade-out of the image is started at time t3, the control unit 190 gradually decreases the temperature of the temperature presentation unit 201 from this time t3, and the temperature presentation unit 201 returns to the original temperature θ1 at time t4. . Thereby, the temperature presentation unit 201 can make the operator feel relatively cold during the fade-out.
Thereafter, the next image is displayed, and the operation shown in FIG. 6A is repeated.

また、図6(B)は、上側に、横軸に時間をとり縦軸に画像の位置をとることにより、表示画像が「スライドイン・スライドアウト」する際の画像位置の変化をグラフで示し、下側に、横軸に時間をとり縦軸に温度をとることにより、表示画像が「スライドイン・スライドアウト」する際の温度の変化をグラフで示している。   FIG. 6B is a graph showing the change in the image position when the display image “slides in and out”, by taking time on the horizontal axis and taking the image position on the vertical axis. On the lower side, time is plotted on the horizontal axis and temperature is plotted on the vertical axis, and the change in temperature when the display image “slides in and out” is shown in a graph.

図6(B)に示すように、制御部190は、画像のスライドイン・スライドアウト(例えば、横方向から画像を挿入し、その後に排出)を行う際に、表示画面上での画像の重心位置に合わせて温度提示部201の温度を変化させる。
制御部190は、時刻t1において画像のスライドインが開始されると、温度提示部201の温度を温度θ1から徐々に増加させ、時刻t2において画像の重心が表示画面の中心位置になった状態で温度提示部201の温度をθ2にする。これにより、温度提示部201は、スライドインの際に、操作者に対して相対的に暖かくなったと感じさせることができる。
As shown in FIG. 6B, when the control unit 190 performs slide-in / slide-out of an image (for example, inserting an image from the horizontal direction and then discharging the image), the center of gravity of the image on the display screen is displayed. The temperature of the temperature presentation unit 201 is changed according to the position.
When the slide-in of the image is started at time t1, the control unit 190 gradually increases the temperature of the temperature presentation unit 201 from the temperature θ1, and the center of gravity of the image becomes the center position of the display screen at time t2. The temperature of the temperature presentation unit 201 is set to θ2. Thereby, the temperature presentation unit 201 can make the operator feel relatively warm during the slide-in.

その後、画像の重心が画面の中心位置に表示されている間(時刻t2〜時刻t3)、制御部190は、温度提示部201の温度を一定の温度θ2の定温状態に維持する。
そして、時刻t3において、画像のスライドアウトが開始されると、制御部190は、温度提示部201の温度を徐々に低下させ、温度提示部201は、時刻t4において元の温度θ1に戻る。これにより、温度提示部201は、スライドアウトの際に、操作者に対して相対的に冷たくなったと感じさせることができる。
Thereafter, while the center of gravity of the image is displayed at the center position of the screen (time t2 to time t3), the control unit 190 maintains the temperature of the temperature presentation unit 201 in a constant temperature state of a constant temperature θ2.
Then, when the slide-out of the image is started at time t3, the control unit 190 gradually decreases the temperature of the temperature presentation unit 201, and the temperature presentation unit 201 returns to the original temperature θ1 at time t4. Thereby, the temperature presentation part 201 can make it feel that it became cold relatively with respect to an operator in the case of a slide out.

(温度提示部が提示する温度変化の第2の例)
操作者に温度変化を伝える際に、制御部190は、温度提示部201の温度を相対的に大きく変化させることにより、より効果的に温度変化を操作者に伝えることができる。そこで、制御部190は、温度提示部201の温度を提示したい温度とは反対方向に一旦変化させ、その後に、提示したい温度へ変化させてもよい。
(Second example of temperature change presented by the temperature presentation unit)
When transmitting the temperature change to the operator, the control unit 190 can transmit the temperature change to the operator more effectively by changing the temperature of the temperature presentation unit 201 relatively large. Therefore, the control unit 190 may temporarily change the temperature of the temperature presentation unit 201 in a direction opposite to the temperature desired to be presented, and then change the temperature to the desired temperature.

図7は、温度提示部201が提示する温度変化の第2の例を示す図である。
図7(A)は、横軸に時間をとり縦軸に温度をとることにより、表示画像が「暖かい感じのする画像」の場合における温度提示部201の温度変化をグラフで示している。
この図7(A)に示すように、温度提示部201は、画像表示が開始される前(時刻t1以前)までは一定の温度θ1に加温されている。そして、時刻t1から「暖かい感じのする画像」の表示が開始されると、制御部190は、温度提示部201の温度を温度θ1から一旦、徐々に低下させ、温度提示部201の温度が、時刻t2において温度θ1’(温度θ1より少しだけ低い温度)になるように制御する。
なお、この温度提示部201の温度の下げ幅は、温度提示部201の上げ幅を超えない範囲で設定されるとともに、温度提示部201を冷たいと感じる触覚が支配的にならない範囲で設定される。
FIG. 7 is a diagram illustrating a second example of the temperature change presented by the temperature presentation unit 201.
FIG. 7A is a graph showing the temperature change of the temperature presentation unit 201 when the display image is “an image that feels warm” by taking time on the horizontal axis and temperature on the vertical axis.
As shown in FIG. 7A, the temperature presentation unit 201 is heated to a constant temperature θ1 before image display is started (before time t1). When the display of the “image that feels warm” is started from time t1, the control unit 190 gradually decreases the temperature of the temperature presentation unit 201 from the temperature θ1, and the temperature of the temperature presentation unit 201 is Control is performed so that the temperature θ1 ′ (a temperature slightly lower than the temperature θ1) is reached at time t2.
The temperature reduction range of the temperature presentation unit 201 is set in a range that does not exceed the increase range of the temperature presentation unit 201, and is set in a range in which the tactile sensation that the temperature presentation unit 201 feels cold is not dominant.

そして、制御部190は、時刻t2から再び温度提示部201の温度を徐々に上昇させる。温度提示部201の温度は、時刻t3において温度θ2となる。これにより、制御部190は、「暖かい感じのする画像」を表示する際に、操作者に対して温度提示部201が相対的に暖かくなったと強く感じさせることができる。   Then, the control unit 190 gradually increases the temperature of the temperature presentation unit 201 again from time t2. The temperature of the temperature presentation unit 201 becomes the temperature θ2 at time t3. Thereby, the control unit 190 can make the operator strongly feel that the temperature presentation unit 201 has become relatively warm when displaying the “image that feels warm”.

その後、制御部190は、時刻t2から時刻t4まで温度提示部201の温度を一定の温度θ2の定温状態に維持する。そして、時刻t4において画像の表示が終了すると、この時刻t4から、制御部190は、温度提示部201の温度を徐々に低下させ、温度提示部201は、時刻t5において元の温度θ1に戻る。
これにより、温度提示部201は、「暖かい感じのする画像」の表示を終了する際に、操作者に対して相対的に冷たくなったと感じさせることができる。
Thereafter, the control unit 190 maintains the temperature of the temperature presentation unit 201 at a constant temperature θ2 from time t2 to time t4. When the display of the image ends at time t4, from this time t4, the control unit 190 gradually decreases the temperature of the temperature presentation unit 201, and the temperature presentation unit 201 returns to the original temperature θ1 at time t5.
Thereby, the temperature presentation unit 201 can make the operator feel relatively cold when the display of the “image that feels warm” is terminated.

また、図7(B)は、表示画像が「冷たい感じのする画像」の場合における温度提示部201の温度変化をグラフで示している。
この図7(B)に示すように、温度提示部201は、時刻t1から「冷たい感じのする画像」の表示が開始されると、制御部190は、温度提示部201の温度を温度θ1から一旦、徐々に増加させ、温度提示部201の温度が、時刻t2において温度θ1’(温度θ1より少しだけ高い温度)になるように制御する。そして、制御部190は、時刻t2から再び温度提示部201の温度を徐々に低下させる。温度提示部201の温度は、時刻t3において温度θ3となる。これにより、温度提示部201は、「冷たい感じのする画像」を表示する際に、操作者に対して相対的に冷たくなったと感じさせることができる。
FIG. 7B is a graph showing the temperature change of the temperature presentation unit 201 when the display image is “an image that feels cold”.
As shown in FIG. 7B, when the temperature presentation unit 201 starts displaying “an image that feels cold” from time t1, the control unit 190 changes the temperature of the temperature presentation unit 201 from the temperature θ1. Once it is gradually increased, control is performed so that the temperature of the temperature presentation unit 201 becomes temperature θ1 ′ (temperature slightly higher than temperature θ1) at time t2. And the control part 190 reduces the temperature of the temperature presentation part 201 gradually from the time t2. The temperature of the temperature presentation unit 201 becomes the temperature θ3 at time t3. Thereby, the temperature presentation unit 201 can cause the operator to feel that it has become relatively cold when displaying the “image that feels cold”.

その後、制御部190は、時刻t3から時刻t4まで温度提示部201の温度を一定の温度θ3の定温状態に維持する。そして、時刻t4において画像の表示が終了すると、この時刻t4以降、制御部190は、温度提示部201の温度を徐々に上昇させ、温度提示部201は、時刻t5において元の温度θ1に戻る。
これにより、温度提示部201は、「冷たい感じのする画像」の表示を終了する際に、操作者に対して相対的に暖かくなったと感じさせることができる。
Thereafter, the control unit 190 maintains the temperature of the temperature presentation unit 201 at a constant temperature θ3 from time t3 to time t4. When the display of the image ends at time t4, after this time t4, the control unit 190 gradually increases the temperature of the temperature presentation unit 201, and the temperature presentation unit 201 returns to the original temperature θ1 at time t5.
As a result, the temperature presentation unit 201 can make the operator feel relatively warm when ending the display of the “image that feels cold”.

なお、図6(A)および図6(B)に示す例において、温度提示部201の温度を一旦反対方向に変化させる時間(時刻t1〜t2)は、温度提示部201を提示したい温度に変化させる時間(時刻t2〜t3)よりも短くなるようにする。また、温度変化の傾きは、温度を一旦反対方向に変化させる方の傾き(時刻t1〜t2における変化率)を緩くし、温度提示部201を提示したい温度に変化させる方の傾き(時刻t2〜t3における変化率)を急にする。   In the example shown in FIGS. 6A and 6B, the time for changing the temperature of the temperature presentation unit 201 in the opposite direction (time t1 to t2) changes to the temperature at which the temperature presentation unit 201 is to be presented. It is made shorter than the time (time t2-t3) to be made. Further, the inclination of the temperature change is such that the inclination that changes the temperature once in the opposite direction (rate of change at times t1 to t2) is loosened, and the inclination that changes the temperature to the temperature that the temperature presentation unit 201 wants to present (times t2 to t2). (Change rate at t3) is made steep.

[第2実施形態]
上述の第1実施形態では、デジタルカメラ100に配置される温度提示部201の個数が、基本的に1つである場合の温度提示方法の例について説明した。
本発明の第2実施形態では、デジタルカメラ100に配置される温度提示部201の個数が複数である場合の温度提示方法の例について説明する。なお、以下の説明において温度提示部201が複数配置される場合に、それらの温度提示部を識別して示すために、それぞれの温度提示部を、温度提示部1、温度提示部2、温度提示部3、および温度提示部4と順番を付して示す。
[Second Embodiment]
In the first embodiment described above, the example of the temperature presentation method when the number of the temperature presentation units 201 arranged in the digital camera 100 is basically one has been described.
In the second embodiment of the present invention, an example of a temperature presentation method when there are a plurality of temperature presentation units 201 arranged in the digital camera 100 will be described. In the following description, when a plurality of temperature presentation units 201 are arranged, in order to identify and show these temperature presentation units, the temperature presentation units are represented by temperature presentation unit 1, temperature presentation unit 2, and temperature presentation unit, respectively. Part 3 and temperature presentation part 4 are shown in order.

図8は、温度提示部が複数配置される場合の配置例を示す図である。この図8に示すデジタルカメラ100は、このデジタルカメラ100を把持する手の指に複数の温度提示部が接触するようになっている。
例えば、図8(A)は、デジタルカメラ100の正面側の撮像レンズ111の下部の領域に、2つの温度提示部1と温度提示部2とを、上下に並べて配置する例を示している。デジタルカメラ100の正面側を指で把持する場合に、表示画像の内容に応じた触覚(この場合は温度変化による刺激)を2つの温度提示部1と温度提示部2とを通して操作者の指に与えることができる。
FIG. 8 is a diagram illustrating an arrangement example when a plurality of temperature presentation units are arranged. The digital camera 100 shown in FIG. 8 is configured such that a plurality of temperature presentation units are in contact with fingers of a hand holding the digital camera 100.
For example, FIG. 8A shows an example in which two temperature presentation units 1 and 2 are arranged side by side in the lower region of the imaging lens 111 on the front side of the digital camera 100. When the front side of the digital camera 100 is held with a finger, a tactile sensation (in this case, a stimulus due to a temperature change) corresponding to the content of the display image is applied to the operator's finger through the two temperature presentation units 1 and 2. Can be given.

また、図8(B)は、カメラの正面側の両端部に温度提示部を配置する例であり、デジタルカメラの正面の左側に温度提示部1と温度提示部2とを配置し、デジタルカメラの正面の右側に温度提示部3と温度提示部4を配置する例である。この図8(C)に示す例は、デジタルカメラ100を両手で把持する場合、左手で把持する場合、および右手で把持する場合のいずれの場合においても、表示画像の内容に応じた触覚(この場合は温度変化による刺激)を操作者の指に与えることができる。
また、図8に示すデジタルカメラ100では、撮像レンズ111が正面右上に配置された例を示しているが、勿論、撮像レンズ111が正面中央部に配置されている場合おいても、温度提示部1、2、3、4を、図8に示す例と同様にして配置できるものである。
FIG. 8B is an example in which temperature presentation units are arranged at both ends on the front side of the camera, and the temperature presentation unit 1 and the temperature presentation unit 2 are arranged on the left side of the front of the digital camera. It is an example which arrange | positions the temperature presentation part 3 and the temperature presentation part 4 on the right side of the front of. The example shown in FIG. 8C shows a tactile sensation corresponding to the content of the display image (this is the case when holding the digital camera 100 with both hands, holding with the left hand, and holding with the right hand). In this case, stimulation by temperature change can be given to the operator's finger.
8 shows an example in which the imaging lens 111 is arranged on the upper right side of the front. Of course, even when the imaging lens 111 is arranged in the center of the front, the temperature presentation unit 1, 2, 3, 4 can be arranged in the same manner as the example shown in FIG.

また、図9は、温度提示部が複数配置される場合の他の配置例を示す図である。図9(A)は、デジタルカメラ100の側面に、2つの温度提示部1と温度提示部2とを、上下に並べて配置した例を示している。デジタルカメラ100の側面を手の指で把持する場合に、表示画像の内容に応じた触覚(この場合は温度変化による刺激)を2つの温度提示部1と温度提示部2を通して操作者の指に与えることができる。
なお、図9(A)に示す例では、デジタルカメラ100の側面に、2つの温度提示部1と温度提示部2を設けた例を示しているが、温度提示部をデジタルカメラ100の上面、あるいは下面側に設けるようにしてもよい。また、温度提示部を、側面と上面とに設けるなど、複数の面に設けるようにしてもよい。
Moreover, FIG. 9 is a figure which shows the other example of arrangement | positioning when two or more temperature presentation parts are arrange | positioned. FIG. 9A shows an example in which two temperature presentation units 1 and 2 are arranged side by side on the side of the digital camera 100. When the side surface of the digital camera 100 is grasped by a finger of a hand, a tactile sensation (stimulation due to temperature change in this case) corresponding to the content of the display image is applied to the operator's finger through the two temperature presentation units 1 and 2. Can be given.
In the example shown in FIG. 9A, an example in which two temperature presentation units 1 and 2 are provided on the side surface of the digital camera 100 is shown. Or you may make it provide in a lower surface side. Moreover, you may make it provide a temperature presentation part in several surfaces, such as providing in a side surface and an upper surface.

また、図9(B)は、カメラ背面の片側に温度提示部を配置する例であり、デジタルカメラの背面の片側に温度提示部1と温度提示部2とを上下に並べて配置した例である。このデジタルカメラ100は、操作者が左手または両手でカメラを把持する場合に、親指に触覚(この場合は温度変化による刺激)を与えることができる。   FIG. 9B is an example in which the temperature presentation unit is arranged on one side of the back side of the camera, and the temperature presentation unit 1 and the temperature presentation unit 2 are arranged side by side on one side of the back side of the digital camera. . The digital camera 100 can give a tactile sensation (in this case, stimulation by temperature change) to the thumb when the operator holds the camera with his left hand or both hands.

また、図9(C)は、カメラ背面の両端に温度提示部を配置する例であり、デジタルカメラの背面の左側に温度提示部1と温度提示部2とを配置し、デジタルカメラの背面の右側に温度提示部3と温度提示部4とを配置した例である。この図9(C)に示す例は、デジタルカメラ100を両手で把持する場合、左手で把持する場合、および右手で把持する場合のいずれの場合においても、表示画像の内容に応じた触覚(この場合は温度変化による刺激)を操作者の親指に与えることができる。   FIG. 9C is an example in which temperature presentation units are arranged at both ends of the back side of the camera. The temperature presentation unit 1 and the temperature presentation unit 2 are arranged on the left side of the back side of the digital camera. This is an example in which the temperature presentation unit 3 and the temperature presentation unit 4 are arranged on the right side. The example shown in FIG. 9C shows a tactile sensation corresponding to the content of the display image (this is the case when holding the digital camera 100 with both hands, holding with the left hand, and holding with the right hand). In this case, stimulation by temperature change can be given to the thumb of the operator.

なお、本実施形態のデジタルカメラ100では、カメラの表面に圧力センサや感温素子を配置し、或いは液晶表示パネル141上にタッチパネルを配置することにより、操作者の指による把持状態を判定し、この把持状態に応じて複数の温度提示部1、2、3、4の温度をそれぞれごとに制御するようにしてもよい。例えば、制御部190は、操作者の指が触れている温度提示部のみを発熱させるようにして、省エネルギー化を図ることができる。   In the digital camera 100 of the present embodiment, a pressure sensor or a temperature sensing element is arranged on the surface of the camera, or a touch panel is arranged on the liquid crystal display panel 141, thereby determining a gripping state by an operator's finger, You may make it control the temperature of several temperature presentation part 1, 2, 3, 4 according to this holding | gripping state for each. For example, the control unit 190 can save energy by causing only the temperature presentation unit that is touched by the operator's finger to generate heat.

また、第2実施形態のデジタルカメラの装置構成については、図2に示した第1実施形態のデジタルカメラの構成と同様であり、図2に示す温度提示部201が複数個の温度提示部1、2、3、4になる点と、制御部190が、複数の温度提示部1、2、3、4を制御する点だけが異なり、他の構成は同じある。このため、重複する説明は省略する。   The device configuration of the digital camera of the second embodiment is the same as the configuration of the digital camera of the first embodiment shown in FIG. 2, and the temperature presentation unit 201 shown in FIG. 2, 3, and 4 and the point that the control unit 190 controls the plurality of temperature presentation units 1, 2, 3, and 4 is different, and the other configurations are the same. For this reason, the overlapping description is omitted.

(温度提示部が提示する温度変化の第3の例)
図10は、温度提示部が提示する温度変化の第3の例を示す図である。
この第3の例では、温度提示部1および2の温度は、温度提示部1および2の設置箇所に応じて変化する。例えば、制御部190は、暖色系画像では温度提示部1だけを温度変化させ、寒色系画像では温度提示部2だけを温度変化させる。すなわち、制御部190は、画像の寒暖に応じて温度変化させる場所を変化させる。
(Third example of temperature change presented by the temperature presentation unit)
FIG. 10 is a diagram illustrating a third example of the temperature change presented by the temperature presentation unit.
In the third example, the temperature of the temperature presentation units 1 and 2 changes according to the installation location of the temperature presentation units 1 and 2. For example, the control unit 190 changes the temperature of only the temperature presentation unit 1 in the warm color image, and changes the temperature of only the temperature presentation unit 2 in the cold color image. That is, the control unit 190 changes the place where the temperature is changed according to the temperature of the image.

制御部190は、画像判定部180により表示画像が「暖かい感じのする画像」と判定された場合に、図10(A)に示す温度変化パターンにより温度提示部1および2の温度を変化させる。また、制御部190は、画像判定部180により表示画像が「冷たい感じのする画像」と判定された場合に、図10(B)に示す温度変化パターンにより温度提示部1および2の温度を変化させる。   When the image determination unit 180 determines that the display image is “a warm-feeling image”, the control unit 190 changes the temperatures of the temperature presentation units 1 and 2 according to the temperature change pattern shown in FIG. In addition, when the image determination unit 180 determines that the display image is “an image that feels cold”, the control unit 190 changes the temperature of the temperature presentation units 1 and 2 according to the temperature change pattern shown in FIG. Let

図10(A)は、横軸に時間をとり縦軸に温度をとることにより、表示画像が「暖かい感じのする画像」の場合における温度提示部1および2の温度変化をグラフで示している。
この図10(A)に示すように、温度提示部1および2は、画像表示が開始される前(時刻t1以前)までは一定の温度θ1に加温されている。そして、時刻t1から「暖かい感じのする画像」の表示が開始されると、制御部190は、温度提示部1の温度を温度θ1から徐々に上昇させ、温度提示部1の温度を時刻t2において温度θ2とする。これにより、温度提示部1は、操作者に対して相対的に暖かくなったと感じさせることができる。
一方、制御部190は、温度提示部2の温度を変化させず、温度θ1の定温状態を維持する。
FIG. 10A is a graph showing the temperature change of the temperature presentation units 1 and 2 when the display image is a “warm-feeling image” by taking time on the horizontal axis and temperature on the vertical axis. .
As shown in FIG. 10A, the temperature presentation units 1 and 2 are heated to a constant temperature θ1 until image display is started (before time t1). Then, when the display of the “image that feels warm” is started from time t1, the control unit 190 gradually increases the temperature of the temperature presentation unit 1 from the temperature θ1, and the temperature of the temperature presentation unit 1 is increased at time t2. The temperature is θ2. Thereby, the temperature presentation part 1 can make it feel that it became relatively warm with respect to the operator.
On the other hand, the control unit 190 does not change the temperature of the temperature presentation unit 2 and maintains the constant temperature state of the temperature θ1.

その後、温度提示部1は、時刻t2から時刻t3まで、一定の温度θ2の定温状態を維持し、時刻t3において画像の表示が終了すると、制御部190は、この時刻t3から温度提示部1の温度を徐々に下降させ、温度提示部1は、時刻t4において元の温度θ1に戻る。これにより、温度提示部1は、操作者に対して相対的に冷たくなったと感じさせることができる。   After that, the temperature presentation unit 1 maintains a constant temperature state of the constant temperature θ2 from time t2 to time t3, and when the image display ends at time t3, the control unit 190 starts the temperature presentation unit 1 from time t3. The temperature is gradually lowered, and the temperature presentation unit 1 returns to the original temperature θ1 at time t4. Thereby, the temperature presentation unit 1 can make the operator feel relatively cold.

また、画像判定部180が、表示画像が「冷たい感じのする画像」と判定した場合に、制御部190は、図10(B)の温度変化パターンに示すように温度提示部1および2の温度を変化させる。
この図10(B)に示すように、温度提示部1および2は、画像表示が開始される前(時刻t1以前)までは一定の温度θ1に加温されている。そして、時刻t1から「冷たい感じる画像」の表示が開始されると、制御部190は、温度提示部2の温度を温度θ1から徐々に低下させ、温度提示部2の温度を時刻t2において温度θ3となる。これにより、温度提示部2は、操作者に対して相対的に冷たくなったと感じさせることができる。
一方、制御部190は、温度提示部1の温度を変化させず、温度θ1の定温状態を維持させる。
When the image determination unit 180 determines that the display image is “an image that feels cold”, the control unit 190 displays the temperature of the temperature presentation units 1 and 2 as shown in the temperature change pattern of FIG. To change.
As shown in FIG. 10B, the temperature presentation units 1 and 2 are heated to a constant temperature θ1 until image display is started (before time t1). When the display of the “image that feels cold” is started from time t1, the control unit 190 gradually decreases the temperature of the temperature presentation unit 2 from the temperature θ1, and the temperature of the temperature presentation unit 2 is changed to the temperature θ3 at time t2. It becomes. Thereby, the temperature presentation part 2 can make it feel that it became cold relatively with respect to the operator.
On the other hand, the control unit 190 maintains the constant temperature state of the temperature θ1 without changing the temperature of the temperature presentation unit 1.

その後、温度提示部2は、時刻t2から時刻t3まで、一定の温度θ3の定温状態を維持する。そして、時刻t3において画像の表示が終了すると、制御部190は、この時刻t3から温度提示部2の温度を徐々に上昇させ、温度提示部2は、時刻t4において元の温度θ1に戻る。これにより、温度提示部2は、「冷たい感じのする画像」の表示が終了する際に、操作者に対して相対的に暖かくなったと感じさせることができる。   Thereafter, the temperature presentation unit 2 maintains a constant temperature state of a constant temperature θ3 from time t2 to time t3. When the display of the image ends at time t3, control unit 190 gradually increases the temperature of temperature presentation unit 2 from time t3, and temperature presentation unit 2 returns to the original temperature θ1 at time t4. Thereby, the temperature presentation part 2 can make it feel that it became comparatively warm with respect to an operator, when the display of "the image which feels cold" is complete | finished.

なお、図10(A)および図10(B)に示す例は、温度提示部1の温度を上昇させ、温度提示部2の温度を下降させる例を示しているが、逆に、温度提示部1の温度を下降させ、温度提示部2の温度を上昇させるようにしてもよい。   In addition, although the example shown to FIG. 10 (A) and FIG. 10 (B) has shown the example which raises the temperature of the temperature presentation part 1 and lowers the temperature of the temperature presentation part 2, conversely, the temperature presentation part 1 may be lowered and the temperature of the temperature presentation unit 2 may be raised.

(温度提示部が提示する温度変化の第4の例)
図11は、温度提示部が提示する温度変化の第4の例を示す図である。
この第4の例では、制御部190は、温度提示部1および2の設置箇所に応じて、温度提示部1および2の温度を相反する方向に温度を変化させる。こうすることで、制御部190は、温度提示部1および2が提示する相対的な温度変化をより大きくすることができ、より効果的に操作者に温度変化を知覚させることができる。
例えば、暖色系画像の場合に、制御部190は、11図(A)に示すように、温度提示部1の温度を上昇させ、温度提示部2の温度を下降させる。
この場合に、図11(B)に示すように、制御部190は、画像表示開始タイミングにおいては、温度提示部1および2の温度変化の開始タイミングを合わせ、画像表示終了タイミングにおいては、温度を下降させた温度提示部2の方をより早く定温状態(温度θ1)に戻すようにしてもよい。
(Fourth example of temperature change presented by the temperature presentation unit)
FIG. 11 is a diagram illustrating a fourth example of the temperature change presented by the temperature presentation unit.
In the fourth example, the control unit 190 changes the temperature in a direction opposite to the temperature of the temperature presentation units 1 and 2 according to the installation location of the temperature presentation units 1 and 2. By doing so, the control unit 190 can make the relative temperature change presented by the temperature presentation units 1 and 2 larger, and can make the operator perceive the temperature change more effectively.
For example, in the case of a warm color image, the control unit 190 increases the temperature of the temperature presentation unit 1 and decreases the temperature of the temperature presentation unit 2 as shown in FIG.
In this case, as shown in FIG. 11B, the control unit 190 matches the start timing of the temperature change of the temperature presentation units 1 and 2 at the image display start timing, and sets the temperature at the image display end timing. The lowered temperature presentation unit 2 may be returned to the constant temperature state (temperature θ1) earlier.

図11(A)は、横軸に時間をとり縦軸に温度をとることにより、表示画像が「暖かい感じのする画像」の場合における温度提示部1および2の温度変化をグラフで示している。
この図11(A)に示すように、温度提示部1および2は、画像表示が開始される前(時刻t1以前)までは一定の温度θ1に加温されている。そして、時刻t1から「暖かい感じのする画像」の表示が開始されると、制御部190は、温度提示部1の温度を温度θ1から徐々に上昇させ、温度提示部1の温度を時刻t2において温度θ2とする。
一方、制御部190は、時刻t1から「暖かい感じのする画像」の表示が開始されると、温度提示部2の温度を温度θ1から徐々に下降させ、温度提示部2は時刻t2において温度θ1’となる。
これにより、制御部190は、操作者に対して温度提示部1が相対的に暖かくなったと感じさせることができるともに、温度提示部1と2の相対的な温度変化を大きくし、より効果的に操作者に温度変化を知覚させることができる。
FIG. 11A is a graph showing the temperature change of the temperature presentation units 1 and 2 when the display image is a “warm-feeling image” by taking time on the horizontal axis and temperature on the vertical axis. .
As shown in FIG. 11A, the temperature presentation units 1 and 2 are heated to a constant temperature θ1 until image display is started (before time t1). Then, when the display of the “image that feels warm” is started from time t1, the control unit 190 gradually increases the temperature of the temperature presentation unit 1 from the temperature θ1, and the temperature of the temperature presentation unit 1 is increased at time t2. The temperature is θ2.
On the other hand, when the display of the “image that feels warm” is started from time t1, the control unit 190 gradually decreases the temperature of the temperature presentation unit 2 from the temperature θ1, and the temperature presentation unit 2 detects the temperature θ1 at time t2. 'Become.
Thereby, the control unit 190 can make the operator feel that the temperature presentation unit 1 has become relatively warm, and increases the relative temperature change between the temperature presentation units 1 and 2, which is more effective. The operator can perceive a temperature change.

その後、時刻t2から時刻t3において画像表示が終了するまで間、制御部190は、温度提示部1および2の温度を変化させず、温度提示部1を温度θ2の定温状態に維持し、温度提示部2を温度θ1’の定温状態に維持する。   Thereafter, until the image display is completed from time t2 to time t3, the control unit 190 does not change the temperature of the temperature presentation units 1 and 2, maintains the temperature presentation unit 1 in a constant temperature state of the temperature θ2, and provides the temperature presentation. The part 2 is maintained at a constant temperature of the temperature θ1 ′.

そして、時刻t3において画像の表示が終了すると、制御部190は、この時刻t3から温度提示部1の温度を徐々に下降させ、温度提示部1は時刻t4において元の温度θ1に戻る。また、制御部190は、時刻t3から温度提示部2の温度を徐々に上昇させ、温度提示部2は時刻t4において元の温度θ1に戻る。   When the display of the image ends at time t3, control unit 190 gradually decreases the temperature of temperature presentation unit 1 from time t3, and temperature presentation unit 1 returns to the original temperature θ1 at time t4. In addition, the control unit 190 gradually increases the temperature of the temperature presentation unit 2 from time t3, and the temperature presentation unit 2 returns to the original temperature θ1 at time t4.

また、図11(B)は、図11(A)と比較して、時刻t1からt3までの動作は同じであり、時刻t3以降の動作だけが異なる。この図11(B)において、制御部190は、時刻t3の画像表示の終了タイミングの後に、温度提示部1を定温状態(温度θ1)に戻すタイミング(時刻t4)よりも早いタイミング(時刻t3’)で、温度提示部2の温度を定温状態(温度θ1)に戻す。すなわち、制御部190は、画像表示の終了後に、温度を下降させた温度提示部2の方をより早く定温状態(温度θ1)に戻す。   In FIG. 11B, the operation from time t1 to t3 is the same as that in FIG. 11A, and only the operation after time t3 is different. In FIG. 11B, the control unit 190 has a timing (time t3 ′) earlier than the timing (time t4) to return the temperature presentation unit 1 to the constant temperature state (temperature θ1) after the image display end timing at time t3. ), The temperature of the temperature presentation unit 2 is returned to the constant temperature state (temperature θ1). That is, after the end of image display, the control unit 190 returns the temperature presentation unit 2 whose temperature has been lowered to the constant temperature state (temperature θ1) earlier.

なお、図11(A)および図11(B)に示す例は、温度提示部1の温度を上昇させ、温度提示部2の温度を下降させる例を示しているが、逆に、温度提示部1の温度を下降させ、温度提示部2の温度を上昇させるようにしてもよい。   In addition, although the example shown to FIG. 11 (A) and FIG. 11 (B) has shown the example which raises the temperature of the temperature presentation part 1 and lowers the temperature of the temperature presentation part 2, conversely, a temperature presentation part 1 may be lowered and the temperature of the temperature presentation unit 2 may be raised.

(温度提示部が提示する温度変化の第5の例)
図11に示す温度変化の第4の例では、制御部190が、温度提示部1と2の温度変化の開始タイミングを合わせていたが、温度提示部1と2の温度変化の開始タイミングをずらしてもよい。制御部190は、相反する方向(提示したい温度とは逆の方向)に温度変化する温度提示部の温度変化の開始タイミングを少し早めることで、温度提示部1と2の間の相対的な温度変化を大きくすることができ、操作者が温度変化をより知覚しやすくなる。
(Fifth example of temperature change presented by the temperature presentation unit)
In the fourth example of the temperature change shown in FIG. 11, the control unit 190 matches the start timing of the temperature change of the temperature presentation units 1 and 2, but the start timing of the temperature change of the temperature presentation units 1 and 2 is shifted. May be. The control unit 190 slightly increases the relative temperature between the temperature presentation units 1 and 2 by slightly advancing the start timing of the temperature change of the temperature presentation unit that changes in the opposite direction (the direction opposite to the temperature to be presented). The change can be increased, and the operator can more easily perceive the temperature change.

図12は、温度提示部が提示する温度変化の第5の例を示す図である。
この図12は、図11(B)と比較して、時刻t1からt3までの動作だけが異なり、時刻t3以降の動作は同じである。この図12において、制御部190は、画像表示が開始されるよりも前の時刻(時刻t1以前)から、温度提示部2の温度を温度θ1から徐々に下降させ、温度提示部2を時刻t2において温度θ1’とする。そして、制御部190は、時刻t2から画像表示の終了タイミング(時刻t4)まで、温度提示部2の定温状態(温度θ1’)を維持する。
FIG. 12 is a diagram illustrating a fifth example of the temperature change presented by the temperature presentation unit.
FIG. 12 differs from FIG. 11B only in the operation from time t1 to t3, and the operation after time t3 is the same. In FIG. 12, the control unit 190 gradually lowers the temperature of the temperature presentation unit 2 from the temperature θ1 from the time before the image display is started (before time t1), and the temperature presentation unit 2 is set to the time t2. The temperature is assumed to be θ1 ′. And the control part 190 maintains the constant temperature state (temperature (theta) 1 ') of the temperature presentation part 2 from the time t2 to the completion | finish timing (time t4) of an image display.

そして、時刻t2において「暖かい感じのする画像」の表示が開始されると、制御部190は、温度提示部1の温度を温度θ1から徐々に上昇させ、温度提示部1の温度を時刻t3において温度θ2とする。
これにより、制御部190は、「暖かい感じのする画像」の表示を開始する際に、操作者に対して温度提示部1が相対的に暖かくなったと感じさせることができるともに、温度提示部1と2の相対的な温度変化を大きくし、より効果的に操作者に温度変化を知覚させることができる。
その後の動作は、図11(B)と同様であり、重複する説明は省略する。
When the display of the “image that feels warm” is started at time t2, the control unit 190 gradually increases the temperature of the temperature presentation unit 1 from the temperature θ1, and the temperature of the temperature presentation unit 1 is increased at time t3. The temperature is θ2.
Thereby, when starting the display of the “image that feels warm”, the control unit 190 can make the operator feel that the temperature presentation unit 1 is relatively warm, and the temperature presentation unit 1 And 2 can be made larger, and the operator can perceive the temperature change more effectively.
The subsequent operation is the same as that in FIG. 11B, and redundant description is omitted.

なお、図12に示す例は、温度提示部1の温度を上昇させ、温度提示部2の温度を下降させる例を示しているが、逆に、温度提示部1の温度を下降させ、温度提示部2の温度を上昇させるようにしてもよい。   In addition, although the example shown in FIG. 12 has shown the example which raises the temperature of the temperature presentation part 1 and falls the temperature of the temperature presentation part 2, conversely, the temperature of the temperature presentation part 1 is lowered | hung and temperature presentation is carried out. You may make it raise the temperature of the part 2. FIG.

(温度提示部が提示する温度変化の第6の例)
上述の温度変化の第3、第4、および第5の例では、制御部190が、温度提示部1と温度提示部2のそれぞれが異なる温度変化のパターンを示すように制御する例を示したが、温度提示部1および2の温度を、タイミングをずらして同じ方向に(同じパターンで)変化させるようにしてもよい。この場合、温度提示部1および2における温度変化の開始タイミングにおいて、温度提示部1と2の間に温度差が生じるので、操作者は、温度提示箇所が1箇所である場合よりも温度変化を知覚しやすくなる。なお、この場合に、画像表示の終了タイミングにおいて、制御部190は、温度提示部1および2の温度を揃えるようにしてもよい。
(Sixth example of temperature change presented by the temperature presentation unit)
In the third, fourth, and fifth examples of the temperature change described above, an example is shown in which the control unit 190 performs control so that each of the temperature presentation unit 1 and the temperature presentation unit 2 shows different temperature change patterns. However, you may make it change the temperature of the temperature presentation parts 1 and 2 in the same direction (with the same pattern), shifting timing. In this case, since the temperature difference is generated between the temperature presentation units 1 and 2 at the start timing of the temperature change in the temperature presentation units 1 and 2, the operator changes the temperature more than when the temperature presentation location is one location. It becomes easier to perceive. In this case, the control unit 190 may adjust the temperatures of the temperature presentation units 1 and 2 at the end timing of image display.

図13は、温度提示部が提示する温度変化の第6の例を示す図である。
図13(A)に示すように、温度提示部1および2は、画像表示が開始される前(時刻t1以前)までは一定の温度θ1に加温されている。そして、時刻t1から画像の表示が開始されると、制御部190は、温度提示部1の温度を温度θ1から徐々に上昇させ、温度提示部1の温度は時刻t3において温度θ2となる。制御部190は、時刻t3から時刻t5(画像表示が終了する時刻)まで、温度提示部1の温度を一定の温度θ2の定温状態に維持する。そして、制御部190は、時刻t5において画像の表示が終了すると、温度提示部1の温度を徐々に降下させ、時刻t7において元の温度θ1に戻す。
FIG. 13 is a diagram illustrating a sixth example of the temperature change presented by the temperature presentation unit.
As shown in FIG. 13A, the temperature presentation units 1 and 2 are heated to a constant temperature θ1 until image display is started (before time t1). When the image display is started from time t1, the control unit 190 gradually increases the temperature of the temperature presentation unit 1 from the temperature θ1, and the temperature of the temperature presentation unit 1 becomes the temperature θ2 at time t3. The control unit 190 maintains the temperature of the temperature presentation unit 1 at a constant temperature θ2 from time t3 to time t5 (time when image display ends). Then, when the display of the image ends at time t5, the control unit 190 gradually decreases the temperature of the temperature presentation unit 1 and returns it to the original temperature θ1 at time t7.

一方、制御部190は、画像の表示が開始される時刻t1から少し遅れた時刻t2において、温度提示部2の温度を温度θ1から徐々に上昇させ、温度提示部2の温度は時刻t4において温度θ2となる。その後、制御部190は、時刻t4から時刻t6(画像表示の終了時刻t5から少し遅れた時刻)まで、温度提示部2の温度を一定の温度θ2の定温状態に維持する。そして、制御部190は、時刻t6から、温度提示部1の温度を徐々に降下させ、時刻t8において元の温度に戻す。
このように、制御部190は、温度提示部1および2の温度を、タイミングをずらして、同じ方向に(同じパターンで)変化させることができる。これにより、例えば、スライドイン・スライドアウトを行う場合に、操作者は、画像変化に対して全体としての温度変化を感じとることができ、画像表示の変化に応じた一体感(視覚情報と触覚刺激との連動感)を得ることができる。
On the other hand, the control unit 190 gradually increases the temperature of the temperature presentation unit 2 from the temperature θ1 at a time t2 slightly delayed from the time t1 when the image display is started, and the temperature of the temperature presentation unit 2 is the temperature at the time t4. θ2. Thereafter, the control unit 190 maintains the temperature of the temperature presentation unit 2 in a constant temperature state of a constant temperature θ2 from time t4 to time t6 (time slightly delayed from the image display end time t5). And the control part 190 reduces the temperature of the temperature presentation part 1 gradually from the time t6, and returns to the original temperature in the time t8.
In this way, the control unit 190 can change the temperatures of the temperature presentation units 1 and 2 in the same direction (in the same pattern) at different timings. Thus, for example, when performing slide-in / slide-out, the operator can sense the temperature change as a whole with respect to the image change, and the sense of unity (visual information and tactile stimulation) according to the change in the image display. A sense of interlocking).

また、図13(B)は、図13(A)と比較して、時刻t1から時刻t5までの動作は同じであり、時刻t5以降の動作だけが異なる。
この図13(B)に示すように、時刻t5において画像表示が終了すると、制御部190は、この時刻t5から温度提示部1と温度提示部2の両方の温度を徐々に降下させ、時刻t6において元の温度θ1に戻す。
このように、温度提示部1と2の温度を同時に低下させることにより、温度提示部1と2は、操作者に対して画像の表示が終了したことを明確に示すことができる。
13B is the same in operation from time t1 to time t5 as compared with FIG. 13A, and only the operation after time t5 is different.
As shown in FIG. 13B, when the image display ends at time t5, control unit 190 gradually decreases the temperatures of both temperature presentation unit 1 and temperature presentation unit 2 from time t5, and time t6. To return to the original temperature θ1.
Thus, by simultaneously reducing the temperatures of the temperature presentation units 1 and 2, the temperature presentation units 1 and 2 can clearly indicate to the operator that the image display has been completed.

なお、操作者の指による温度変化の感じ方は、定温状態の時間に依存するので、短いススライドイン・スライドアウトを行う場合は、図13(A)の場合を選択し、また、スライドイン・スライドアウトの時間が長い場合は、図13(B)の場合を選択するようにしてもよい。   In addition, since how to feel the temperature change by the finger of the operator depends on the time of the constant temperature state, when performing a short slide-in / slide-out, the case of FIG. 13A is selected, and the slide-in When the slide-out time is long, the case of FIG. 13B may be selected.

(温度提示方法の第1の補足例)
図14は、温度提示部が提示する温度変化の第1の補足例を示す図である。
図14に示すように、複数枚(この例では3枚)の画像を連続して表示する場合に、制御部190は、温度提示部(例えば、温度提示部1)の提示温度と、温度上昇の傾きと、温度下降の傾きとを、それぞれの画像の表示内容に応じて設定することができる。この場合、制御部190は、複数枚の画像の中で最も「暖かい感じのする画像」に対して、出力可能な最高温度(この例では温度θ3)に設定し、他の画像に対する温度を最高温度θ3により正規化して設定することができる。
(First supplementary example of temperature presentation method)
FIG. 14 is a diagram illustrating a first supplemental example of the temperature change presented by the temperature presentation unit.
As shown in FIG. 14, when a plurality of images (three in this example) are continuously displayed, the control unit 190 displays the temperature indicated by the temperature presentation unit (for example, the temperature presentation unit 1) and the temperature rise. And the temperature decrease gradient can be set according to the display contents of each image. In this case, the control unit 190 sets the highest outputable temperature (temperature θ3 in this example) to the highest “image that feels warm” among a plurality of images, and sets the temperature for the other images to the highest. It can be normalized and set by the temperature θ3.

この図14において、制御部190は、画像表示が開始される前(時刻t1以前)までは温度提示部1を一定の温度θ1に加温する。そして、時刻t1に表示が開始され時刻t3に表示が終了する第1の画像に対して、制御部190は、時刻t2からt3の間において、温度提示部1が定温状態(温度θ2)となるように制御する。
また、時刻t4に表示が開始され時刻t6に表示が終了する第1の画像に対して、制御部190は、時刻t5からt6の間において、温度提示部1が定温状態(温度θ3)となるように制御する。この場合に、温度θ3は、温度θ2よりも大きくなるように設定される。
また、時刻t7に表示が開始され時刻t9に表示が終了する第1の画像に対して、制御部190は、時刻t8からt9の間において、温度提示部1が定温状態(温度θ2)となるように制御する。そして、時刻t9において画像表示が終了すると、その後、温度提示部1の温度は徐々に低下し、時刻t10において温度θ1に戻る。
In FIG. 14, the control unit 190 heats the temperature presentation unit 1 to a constant temperature θ1 until image display is started (before time t1). And with respect to the 1st image which a display is started at the time t1 and a display is complete | finished at the time t3, as for the control part 190, between the time t2 and t3, the temperature presentation part 1 will be in a constant temperature state (temperature (theta) 2). To control.
Further, with respect to the first image whose display starts at time t4 and ends at time t6, the control unit 190 causes the temperature presentation unit 1 to be in a constant temperature state (temperature θ3) between time t5 and t6. To control. In this case, the temperature θ3 is set to be higher than the temperature θ2.
In addition, for the first image whose display starts at time t7 and ends at time t9, the control unit 190 causes the temperature presentation unit 1 to be in a constant temperature state (temperature θ2) between time t8 and t9. To control. When the image display ends at time t9, the temperature of the temperature presentation unit 1 gradually decreases thereafter, and returns to the temperature θ1 at time t10.

このように、複数枚の画像を連続して表示する場合に、制御部190は、画像を表示する際の温度提示部(例えば、温度提示部1)が提示する温度を、それぞれの画像の表示内容に応じて設定することにより、操作者に対して、画像の表示内容に応じて強弱をつけた触覚を提示することができる。とくに、スライドイン・スライドアウトにより複数の画像を連続して表示する場合に、制御部190は、表示される画像の表示内容に応じて強弱をつけた触覚を提示することができる。
また、制御部190は、それぞれの画像の表示内容に応じて、温度提示部の温度上昇の傾き、温度下降の傾きについても制御することができる。
As described above, when a plurality of images are continuously displayed, the control unit 190 displays the temperatures presented by the temperature presentation unit (for example, the temperature presentation unit 1) when displaying the images. By setting according to the content, it is possible to present the operator with a tactile sensation with strength depending on the display content of the image. In particular, when a plurality of images are continuously displayed by slide-in / slide-out, the control unit 190 can present a tactile sensation with strength depending on the display content of the displayed image.
Moreover, the control part 190 can also control the inclination of the temperature rise of a temperature presentation part, and the inclination of a temperature fall according to the display content of each image.

(温度提示方法の第2の補足例)
図15は、温度提示方法の第2の補足例を示す図である。
上述した温度提示方法の例において、制御部190は、温度提示部の温度を提示したい温度まで変化させた後には、温度提示部の温度を一定温度の定温状態に維持するようにしている。ここでは、制御部190が、画像表示中の温度を段階的に変化させる例について説明する。
(Second supplementary example of temperature presentation method)
FIG. 15 is a diagram illustrating a second supplemental example of the temperature presentation method.
In the example of the temperature presentation method described above, the control unit 190 maintains the temperature of the temperature presentation unit in a constant temperature state at a constant temperature after changing the temperature of the temperature presentation unit to the desired temperature. Here, an example in which the control unit 190 changes the temperature during image display stepwise will be described.

この図15において、制御部190は、画像表示が開始される前(時刻t1以前)までは温度提示部1を一定の温度θ1に加温する。そして、時刻t1から時刻t7までの間に表示される画像に対して、温度提示部1の温度が、時刻t2からt3の間において定温状態(温度θ2)となるように制御する。また、制御部190は、時刻t4から時刻t5までの間において、定温状態(温度θ3)となるように制御する。この場合に、温度θ3は、温度θ2よりも大きくなるように設定される。
また、制御部190は、時刻t6から時刻t7までの間において、温度提示部1が定温状態(温度θ2)となるように制御する。そして、制御部190は、時刻t7において画像表示が終了すると、温度提示部1の温度を徐々に下降させ、時刻t8において温度θ1に戻す。
In FIG. 15, the control unit 190 heats the temperature presentation unit 1 to a constant temperature θ1 until image display is started (before time t1). And it controls so that the temperature of the temperature presentation part 1 may be in a constant temperature state (temperature (theta) 2) between the time t2 and t3 with respect to the image displayed between the time t1 and the time t7. In addition, the control unit 190 performs control so as to be in a constant temperature state (temperature θ3) from time t4 to time t5. In this case, the temperature θ3 is set to be higher than the temperature θ2.
In addition, the control unit 190 controls the temperature presentation unit 1 to be in a constant temperature state (temperature θ2) between time t6 and time t7. Then, when the image display ends at time t7, control unit 190 gradually lowers the temperature of temperature presentation unit 1 and returns it to temperature θ1 at time t8.

なお、画像の表示内容によっては、制御部190は、時刻t4から時刻t5までの間において、定温状態(温度θ3)となるように制御するのでなく、時刻t2からt3の間における定温状態(温度θ2)をそのまま維持するようにしてもよい。また、制御部190は、温度提示部1の定温状態のレベルを3つ以上のレベルに変化させることもできる。   Depending on the display content of the image, the control unit 190 does not control to be in a constant temperature state (temperature θ3) from time t4 to time t5, but is in a constant temperature state (temperature) from time t2 to t3. You may make it maintain (theta) 2) as it is. Moreover, the control part 190 can also change the level of the constant temperature state of the temperature presentation part 1 into three or more levels.

このように、1枚の画像の表示期間中に、制御部190は、温度提示部1の定温状態のレベルを複数のレベルに分け段階的に変化させることができる。これにより、制御部190は、温度提示部1の温度変化を操作者にたいして、より効果的にかつ動的に知覚させることができる。このため、制御部190は、温度変化のレンジを低下させることも可能になる。
なお、図15に示す例は、制御部190が1つの温度提示部の動作を制御する例を示しているが、複数の温度提示部を制御する場合においても、各温度提示部を同じように制御することができる。
Thus, during the display period of one image, the control unit 190 can change the level of the constant temperature state of the temperature presentation unit 1 into a plurality of levels and change it in stages. Thereby, the control part 190 can make an operator perceive the temperature change of the temperature presentation part 1 more effectively and dynamically. For this reason, the control part 190 can also reduce the range of a temperature change.
In addition, although the example shown in FIG. 15 has shown the example which the control part 190 controls operation | movement of one temperature presentation part, also when controlling several temperature presentation parts, each temperature presentation part is made the same. Can be controlled.

[第4実施形態]
次に、本発明の第4実施形態として、温度提示部をデジタルカメラ100の背面にマトリックス状に複数配列する例について説明する。
図16は、温度提示部をデジタルカメラ100の背面にマトリックス状に配置する例を示す図である。
図16(A)に示すように、複数の温度提示部201を縦横方向にマトリックス状に配置した温度提示部パネル202を製作し、この温度提示部パネル202をデジタルカメラ100の背面に配置する。この場合、例えば、後述する図17(A)に示すように、液晶表示パネル141の背面に温度提示部パネル202を配置する。
[Fourth Embodiment]
Next, as a fourth embodiment of the present invention, an example in which a plurality of temperature presentation units are arranged in a matrix on the back surface of the digital camera 100 will be described.
FIG. 16 is a diagram illustrating an example in which temperature presentation units are arranged in a matrix on the back surface of the digital camera 100.
As shown in FIG. 16A, a temperature presentation unit panel 202 in which a plurality of temperature presentation units 201 are arranged in a matrix in the vertical and horizontal directions is manufactured, and the temperature presentation unit panel 202 is arranged on the back surface of the digital camera 100. In this case, for example, as shown in FIG. 17A described later, the temperature presentation unit panel 202 is disposed on the back surface of the liquid crystal display panel 141.

そして、図16(B)に示すように、制御部190が、画像の表示内容に応じて、例えば、4つの温度提示部aと、2つの温度提示部bの温度を上昇(または下降)させることにより、液晶表示パネル141上の領域L1および領域L2の温度が変化する。そして、操作者の指がこの領域L1およびL2に触れることにより、操作者に対して画像の表示内容に応じて触覚を提示することができる。
例えば、制御部190は、領域L1に暖色系に被写体が表示された場合に、温度提示部aの温度を上昇させ、領域L2に寒色系に被写体が表示された場合に、温度提示部bの温度を低下させる。
Then, as illustrated in FIG. 16B, the control unit 190 increases (or decreases) the temperatures of, for example, the four temperature presentation units a and the two temperature presentation units b in accordance with the display content of the image. As a result, the temperatures of the region L1 and the region L2 on the liquid crystal display panel 141 change. Then, when the operator's finger touches the regions L1 and L2, a tactile sensation can be presented to the operator according to the display content of the image.
For example, the control unit 190 increases the temperature of the temperature presentation unit a when the subject is displayed in the warm color system in the region L1, and the temperature presentation unit b displays when the subject is displayed in the cold color system in the region L2. Reduce temperature.

図17は、基板上での温度提示部パネルの配置例を示す図である。
図17(A)に示す温度提示部パネルの配置例は、液晶表示パネル141とプリント配線基板203との間に、温度提示部パネル202を配置した例である。この例では、温度提示部パネル202内の個々の温度提示部201からの発熱が、液晶表示パネル141を介して、操作者の指に伝達される。
FIG. 17 is a diagram illustrating an arrangement example of the temperature presentation unit panel on the substrate.
The arrangement example of the temperature presentation unit panel shown in FIG. 17A is an example in which the temperature presentation unit panel 202 is arranged between the liquid crystal display panel 141 and the printed wiring board 203. In this example, heat generated from each temperature presentation unit 201 in the temperature presentation unit panel 202 is transmitted to the operator's finger via the liquid crystal display panel 141.

また、図17(B)は、プリント配線基板203の両側に温度提示部パネル202を配置した例であり、同じ形状の2つの温度提示部パネル202が、プリント配線基板203を挟んで、個々の温度提示部201が対向する位置になるように配置される。この図17(B)に示す例では、2つの温度提示部パネル202による発熱(または冷却)が行われるため、温度提示部201による温度変化の効果を向上させることができる。   FIG. 17B is an example in which the temperature presentation unit panels 202 are arranged on both sides of the printed wiring board 203, and two temperature presentation unit panels 202 having the same shape are sandwiched between the printed wiring boards 203. It arrange | positions so that the temperature presentation part 201 may become a position which opposes. In the example shown in FIG. 17B, since the heat generation (or cooling) is performed by the two temperature presentation unit panels 202, the effect of temperature change by the temperature presentation unit 201 can be improved.

また、図17(A)および図17(B)に示す構成において、液晶表示パネル141の上面にさらにタッチパネルを配置し、制御部190は、このタッチパネルに指が触れた部分を検出して、当該指が触れた部分に対応する領域に配置された温度提示部のみについて温度を変化させるようにしてもよい。
また、温度提示部201をデジタルカメラ100の背面の温度が変化するよう液晶表示パネル141の背面に取り付けたが、液晶表示パネル141の前面のみに取り付け、デジタルカメラ100の前面の温度が変化するようにしてもよい。
17A and 17B, a touch panel is further arranged on the upper surface of the liquid crystal display panel 141, and the control unit 190 detects a portion where the finger touches the touch panel, and You may make it change temperature only about the temperature presentation part arrange | positioned in the area | region corresponding to the part which the finger touched.
Further, the temperature presentation unit 201 is attached to the back surface of the liquid crystal display panel 141 so that the temperature of the back surface of the digital camera 100 changes, but is attached only to the front surface of the liquid crystal display panel 141 so that the temperature of the front surface of the digital camera 100 changes. It may be.

[第5の実施形態]
上述した第1から第4の実施形態では、触覚提示部200が温度提示部201で構成された例について説明したが、触覚提示部200は、バイブレータ等の振動提示部210で構成することができる。また、図2に示すように、触覚提示部200は、温度提示部201と振動提示部210の両方を併用する形で構成するようにしてもよい。
[Fifth Embodiment]
In the first to fourth embodiments described above, the example in which the tactile sense providing unit 200 is configured by the temperature presenting unit 201 has been described. However, the tactile sense presenting unit 200 can be configured by the vibration presenting unit 210 such as a vibrator. . In addition, as shown in FIG. 2, the tactile sense presentation unit 200 may be configured to use both the temperature presentation unit 201 and the vibration presentation unit 210.

また、振動提示部210の配置方法は、図1、図4、図8、および図9に示す温度提示部の配置例と同様にして配置される。また、振動提示部210による振動の提示方法は、第1から第4実施形態で示した温度提示部による温度変化の提示方法と同様であり、振動による提示方法の場合は、温度変化に代えて振動の強度(あるいは振動の周波数)を変化させることになる。   Further, the vibration presentation unit 210 is arranged in the same manner as the arrangement example of the temperature presentation unit shown in FIGS. 1, 4, 8, and 9. The vibration presentation method by the vibration presentation unit 210 is the same as the temperature change presentation method by the temperature presentation unit shown in the first to fourth embodiments. In the case of the vibration presentation method, instead of the temperature change, The vibration intensity (or vibration frequency) is changed.

さらに、この振動による触覚の提示方法は、表示画像の中で移動物体を認識した時の触覚の提示方法として効果的に用いることができる。例えば、画像判定部180により、表示画像中の主要被写体が車両、人、動物等であると判定され、さらに被写体が移動していると判定された場合に、制御部190は、物体の移動方向に合わせて振動(複数の振動提示部210のそれぞれの振動)を変化させることができる。   Furthermore, this method for presenting a tactile sense by vibration can be effectively used as a method for presenting a tactile sense when a moving object is recognized in a display image. For example, when the image determination unit 180 determines that the main subject in the display image is a vehicle, a person, an animal, and the like, and further determines that the subject is moving, the control unit 190 moves the object in the moving direction. The vibration (respective vibrations of the plurality of vibration presentation units 210) can be changed according to the above.

また、例えば、画像判定部180により、表示画像中の主要被写体が人物であると判定され場合に、さらに被写体の手や足の動きから移動しているか否かを判定し、移動していると判定された場合に、制御部190は、人間の移動方向に合わせて振動(複数の振動提示部210のそれぞれの振動)を変化させることができる。
これにより、操作者は、振動刺激を通して被写体の動きを感じ取ることができ、表示画像に対して臨場感を得ることができる。
In addition, for example, when the image determination unit 180 determines that the main subject in the display image is a person, it is further determined whether or not the subject is moving from the movement of the hand or foot of the subject. When the determination is made, the control unit 190 can change the vibrations (respective vibrations of the plurality of vibration presenting units 210) in accordance with the moving direction of the person.
As a result, the operator can sense the movement of the subject through the vibration stimulus, and can obtain a sense of reality with respect to the display image.

また、画像判定部180は、画像中の主要被写体が車両の場合、被写体の上部と下部のシャープネスの違いから、移動しているか否かを判定するようにしてもよい。車両が移動している場合の画像は、ホイールが回転しているためボケた像となる。従って、画像判定部180は、被写体の上下部のシャープを比較すれば、車輌が停止中か走行中かを判定することができる。
また、画像中の移動体は、上述の人や車両に限らず、移動体検出技術を用いて検出することができるものであり、制御部190は、移動体の移動方向に合わせて振動(複数の振動提示部210のそれぞれの振動)を変化させることができる。
Further, when the main subject in the image is a vehicle, the image determination unit 180 may determine whether or not the subject is moving from the difference in sharpness between the upper part and the lower part of the subject. The image when the vehicle is moving is a blurred image because the wheel is rotating. Therefore, the image determination unit 180 can determine whether the vehicle is stopped or traveling by comparing the sharpness of the upper and lower portions of the subject.
In addition, the moving body in the image is not limited to the above-described person or vehicle, and can be detected using a moving body detection technique. The control unit 190 vibrates in accordance with the moving direction of the moving body (several numbers). The vibrations of the vibration presenting unit 210 can be changed.

以上、本発明の実施形態について説明したが、上述した実施形態では、主に静止画像を表示する場合の例について説明したが、本発明による触覚の提示方法は、動画を表示する場合にも好適に用いることができるものである。
例えば、複数の温度提示部を用いる場合に、制御部190が、動画中の被写体の動きに合わせて、それぞれの温度提示部の温度変化の態様を制御することにより、画像表示内容と温度提示部との連動性を高めることができる。例えば、図13(A)および(B)に示す例において、動画中の被写体の動きに合わせて、温度提示部1および2の温度変化のタイミングをずらすことにより、画像表示との連動性を高めることができる。
The embodiment of the present invention has been described above. In the above-described embodiment, an example in which still images are mainly displayed has been described. However, the tactile sense presentation method according to the present invention is also suitable for displaying moving images. It can be used for.
For example, when a plurality of temperature presentation units are used, the control unit 190 controls the temperature change mode of each temperature presentation unit according to the movement of the subject in the moving image, whereby the image display content and the temperature presentation unit are controlled. The linkage with can be improved. For example, in the example shown in FIGS. 13A and 13B, the linkage with the image display is improved by shifting the temperature change timing of the temperature presentation units 1 and 2 in accordance with the movement of the subject in the moving image. be able to.

また、例えば、複数の振動提示部を用いる場合に、制御部190が、動画中の被写体の動きに合わせて、それぞれの振動提示部の振動の変化を制御することにより、画像表示との連動性を高めることができる。例えば、車が左から右に移動する場合において、制御部190は、車が左から右に移動するのに合わせてそれぞれの振動提示部の振動発生のタイミングを変化させることにより、操作者に対して被写体の移動を感じさせることができる。
なお、この場合に、制御部190は、複数の触覚提示部のそれぞれの振動の強弱を制御することにより、触覚の錯覚現象(ファントムセンセーション)を利用して、操作者に対して被写体の移動を感じさせることもできる。
Further, for example, when a plurality of vibration presenting units are used, the control unit 190 controls the change in vibration of each vibration presenting unit in accordance with the movement of the subject in the moving image, so that the linkage with the image display is achieved. Can be increased. For example, when the car moves from left to right, the control unit 190 changes the timing of vibration generation of each vibration presenting unit as the car moves from left to right. You can feel the movement of the subject.
In this case, the control unit 190 controls the intensity of vibration of each of the plurality of tactile sense presenting units, thereby using the tactile illusion phenomenon (phantom sensation) to move the subject to the operator. You can make it feel.

以上、本発明の実施形態について、デジタルカメラを例に挙げて説明したが、本発明の表示装置は、携帯電話、スマートフォン、タブレット型端末、ノートパソコン等であってもよい。
そして、これらの表示装置は、内部にCPU、ROM及びRAMを含むコンピュータシステムを有しており、この表示装置において行われる処理の過程は、プログラムの形式でコンピュータ読み取り可能な記録媒体(ROM等)に記憶されており、このプログラムをコンピュータが読み出して実行することによって、上述の触覚提示部200を用いた触覚提示処理が実現される。
ここで、コンピュータ読み取り可能な記録媒体とは、磁気ディスク、光磁気ディスク、CD−ROM、DVD−ROM、半導体メモリ等をいう。また、このコンピュータプログラムを通信回線によってコンピュータに配信し、この配信を受けたコンピュータが当該プログラムを実行するようにしてもよい。
The embodiment of the present invention has been described by taking a digital camera as an example. However, the display device of the present invention may be a mobile phone, a smartphone, a tablet terminal, a laptop computer, or the like.
These display devices have a computer system including a CPU, a ROM, and a RAM inside, and the process performed in the display device is a computer-readable recording medium (ROM or the like) in the form of a program. When the computer reads out and executes this program, the haptic presentation process using the haptic presentation unit 200 described above is realized.
Here, the computer-readable recording medium refers to a magnetic disk, a magneto-optical disk, a CD-ROM, a DVD-ROM, a semiconductor memory, and the like. Alternatively, the computer program may be distributed to the computer via a communication line, and the computer that has received the distribution may execute the program.

以上、本発明の実施の形態について説明したが、本発明の表示装置は、上述の図示例にのみ限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々変更を加え得ることは勿論である。   Although the embodiment of the present invention has been described above, the display device of the present invention is not limited to the above illustrated examples, and various modifications can be made without departing from the gist of the present invention. Of course.

100…デジタルカメラ、110…撮像部、111…撮像レンズ、112…光学系、113…撮像素子、114…A/D変換部、130…画像処理部、140…表示部、141…液晶表示パネル、150…記憶部、151…バッファメモリ部、160…操作部、170…通信部、180…画像判定部、190…制御部、191…温度制御部、192…振動制御部、200…触覚提示部、201…温度提示部、202…温度提示部パネル、203…プリント配線基板、210…振動提示部、300…サーバ DESCRIPTION OF SYMBOLS 100 ... Digital camera, 110 ... Imaging part, 111 ... Imaging lens, 112 ... Optical system, 113 ... Imaging element, 114 ... A / D conversion part, 130 ... Image processing part, 140 ... Display part, 141 ... Liquid crystal display panel, DESCRIPTION OF SYMBOLS 150 ... Memory | storage part, 151 ... Buffer memory part, 160 ... Operation part, 170 ... Communication part, 180 ... Image determination part, 190 ... Control part, 191 ... Temperature control part, 192 ... Vibration control part, 200 ... Tactile sense presentation part, DESCRIPTION OF SYMBOLS 201 ... Temperature presentation part, 202 ... Temperature presentation part panel, 203 ... Printed wiring board, 210 ... Vibration presentation part, 300 ... Server

Claims (15)

操作者に触覚を提示する触覚提示部と、
表示された画像の表示内容を判定する画像判定部と、
前記画像判定部により判定された画像の表示内容に応じて前記触覚提示部から出力される触覚の提示量を制御する制御部と、
を備えることを特徴とする表示装置。
A tactile presentation unit for presenting tactile sensation to the operator;
An image determination unit for determining display content of the displayed image;
A control unit that controls a tactile presentation amount output from the tactile presentation unit according to the display content of the image determined by the image determination unit;
A display device comprising:
前記触覚提示部は、
操作者に温度を提示する温度提示部を有し、
前記制御部は、
前記温度提示部により提示される温度を、前記画像判定部により判定された画像の表示内容に応じて変化させる
ことを特徴とする請求項1に記載の表示装置。
The tactile sense presentation unit
It has a temperature presentation unit that presents the temperature to the operator,
The controller is
The display device according to claim 1, wherein the temperature presented by the temperature presentation unit is changed according to the display content of the image determined by the image determination unit.
前記画像判定部は、
表示画像が暖色系であるかまたは寒色系であるかを判定し、
前記制御部は、
前記表示画像が暖色系であるかまたは寒色系であるかの判定結果に応じて前記温度提示部が提示する温度を変化させる
ことを特徴とする請求項2に記載の表示装置。
The image determination unit
Determine whether the displayed image is warm or cold,
The controller is
The display device according to claim 2, wherein the temperature presented by the temperature presentation unit is changed according to a determination result of whether the display image is a warm color system or a cold color system.
前記制御部は、
前記画像表示の変化に合わせて前記触覚の提示量を変化させる
ことを特徴とする請求項1から3のいずれか1項に記載の表示装置。
The controller is
The display device according to claim 1, wherein the tactile presentation amount is changed in accordance with the change in the image display.
前記触覚提示部は、
前記画像を表示中でない場合に、定常的な触覚の提示量である初期提示量を常時出力しており、
前記制御部は、
前記触覚提示部から出力される触覚の提示量を、前記初期提示量から提示したい第1の制御量に変化させる場合に、
最初に、前記触覚提示部から出力される触覚の提示量を、前記初期提示量から前記第1の制御量に変化させる方向とは逆方向に所定量だけ一旦変化させて第2の制御量とし、
その後に、前記触覚提示部から出力される触覚の提示量を、前記第2の制御量から前記第1の制御量に変化させる
ことを特徴とする請求項4に記載の表示装置。
The tactile sense presentation unit
When the image is not being displayed, an initial presentation amount that is a steady tactile presentation amount is constantly output,
The controller is
When changing the tactile presentation amount output from the tactile sense presentation unit to the first control amount to be presented from the initial presentation amount,
First, the amount of tactile presentation output from the tactile sense presentation unit is temporarily changed by a predetermined amount in a direction opposite to the direction of changing from the initial presentation amount to the first control amount to be the second control amount. ,
5. The display device according to claim 4, wherein after that, a tactile presentation amount output from the tactile sense presentation unit is changed from the second control amount to the first control amount.
前記触覚提示部は、複数箇所に配置され、
前記制御部は、
前記画像の表示内容に応じて前記複数の触覚提示部のそれぞれにおける触覚の提示量を変化させる
ことを特徴とする請求項1から5のいずれか1項に記載の表示装置。
The tactile sense presenting units are arranged at a plurality of locations,
The controller is
6. The display device according to claim 1, wherein a tactile presentation amount in each of the plurality of tactile presentation units is changed in accordance with display contents of the image.
提示したい提示量の変化とは相反する方向に提示量が変化する触覚提示部は、表示内容の変化が開始されるよりも所定時間だけ速いタイミングで変化を開始する
ことを特徴とする請求項6に記載の表示装置。
The tactile sense presentation unit in which the presentation amount changes in a direction opposite to the change in the presentation amount desired to be presented starts changing at a timing that is faster by a predetermined time than the change in display content is started. The display device described in 1.
前記制御部は、
それぞれの触覚提示部が出力する提示量を同一方向に変化させる場合に、それぞれの触覚提示部の配置箇所に応じて提示量の変化の開始タイミングに時間差を設ける
ことを特徴とする請求項6に記載の表示装置。
The controller is
7. The method according to claim 6, wherein when the presentation amount output by each tactile sensation presentation unit is changed in the same direction, a time difference is provided at the start timing of the presentation amount change according to the arrangement location of each tactile presentation unit. The display device described.
前記触覚提示部は、
操作者に振動を提示する振動提示部を有し、
前記制御部は、
前記振動提示部により提示される振動の態様を、前記画像判定部により判定された画像の表示内容に応じて変化させる
ことを特徴とする請求項1から8のいずれか1項に記載の表示装置。
The tactile sense presentation unit
It has a vibration presentation unit that presents vibrations to the operator,
The controller is
The display device according to any one of claims 1 to 8, wherein a mode of vibration presented by the vibration presenting unit is changed in accordance with display contents of the image determined by the image determining unit. .
前記画像判定部は、
表示画像が暖色系であるかまたは寒色系であるかを判定する際に、表示画像のEXIFデータを基に判定する
ことを特徴とする請求項3に記載の表示装置。
The image determination unit
The display device according to claim 3, wherein when determining whether the display image is a warm color system or a cold color system, the display image is determined based on EXIF data of the display image.
前記画像判定部は、表示画像中から主要被写体の推定を行い、この主要被写体の特徴量を基に、表示画像が暖色系であるかまたは寒色系であるかを判定する
ことを特徴とする請求項3に記載の表示装置。
The image determination unit estimates a main subject from a display image, and determines whether the display image is a warm color system or a cold color system based on a feature amount of the main object. Item 4. The display device according to Item 3.
前記画像判定部が、
表示画像中の主要被写体として人間の顔もしくは人体を認識し、人間が主要被写体として表示されていると判定した場合に、
制御部は、
前記温度提示部が提示する温度を人肌程度の温度に調整する
ことを特徴とする請求項3に記載の表示装置。
The image determination unit
When a human face or human body is recognized as the main subject in the displayed image and it is determined that the human is displayed as the main subject,
The control unit
The display device according to claim 3, wherein the temperature presented by the temperature presentation unit is adjusted to a temperature about a human skin.
前記振動提示部は、複数個所に配置され、
前記画像判定部が、
表示画像中に移動している被写体を認識した場合に、
前記制御部は、
前記被写体の移動方向に合わせてそれぞれの振動提示部が提示する振動量を変化させる
ことを特徴とする請求項9に記載の表示装置。
The vibration presenting unit is arranged at a plurality of locations,
The image determination unit
When recognizing a moving subject in the displayed image,
The controller is
The display device according to claim 9, wherein a vibration amount presented by each vibration presentation unit is changed in accordance with a moving direction of the subject.
前記画像判定部は、
表示画像中の主要被写体として移動体を認識した場合に、さらに、当該移動体が移動しているか否かを判定し、
前記制御部は、
前記移動体の移動方向に合わせてそれぞれの振動提示部が提示する振動量を変化させる
ことを特徴とする請求項13に記載の表示装置。
The image determination unit
When the moving object is recognized as the main subject in the display image, it is further determined whether or not the moving object is moving,
The controller is
The display device according to claim 13, wherein a vibration amount presented by each vibration presentation unit is changed in accordance with a moving direction of the moving body.
前記画像判定部は、
表示画像中の主要被写体として乗物を認識した場合に、さらに、この被写体の上部と下部のシャープネスの違いから当該乗物が移動しているか否かを判定する
ことを特徴とする請求項14に記載の表示装置。
The image determination unit
The vehicle according to claim 14, wherein when the vehicle is recognized as a main subject in the display image, it is further determined whether or not the vehicle is moving based on a difference in sharpness between an upper portion and a lower portion of the subject. Display device.
JP2011288347A 2011-12-28 2011-12-28 Display unit Pending JP2013137659A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2011288347A JP2013137659A (en) 2011-12-28 2011-12-28 Display unit

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011288347A JP2013137659A (en) 2011-12-28 2011-12-28 Display unit

Publications (1)

Publication Number Publication Date
JP2013137659A true JP2013137659A (en) 2013-07-11

Family

ID=48913329

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011288347A Pending JP2013137659A (en) 2011-12-28 2011-12-28 Display unit

Country Status (1)

Country Link
JP (1) JP2013137659A (en)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5507760B2 (en) * 2012-01-17 2014-05-28 パナソニック株式会社 Electronics
JP2015141647A (en) * 2014-01-30 2015-08-03 和俊 尾花 Information processing apparatus, information processing program, information processing system and information processing method
JP2017134699A (en) * 2016-01-29 2017-08-03 株式会社ニコン Electronic instrument and program
JP2018506765A (en) * 2015-02-25 2018-03-08 イマージョン コーポレーションImmersion Corporation Haptic effect overlay
WO2018143021A1 (en) * 2017-02-06 2018-08-09 アルプス電気株式会社 Tactile-sensation presentation device
JP2019153129A (en) * 2018-03-05 2019-09-12 アルプスアルパイン株式会社 Control device, temperature sensation presentation device, temperature sensation presentation system, control method, and program
JP2020135191A (en) * 2019-02-15 2020-08-31 株式会社豊田中央研究所 User stimulus system
WO2021157049A1 (en) * 2020-02-07 2021-08-12 日本電信電話株式会社 Temperature stimulus presentation device and method thereof
WO2022209111A1 (en) * 2021-03-29 2022-10-06 ソニーグループ株式会社 Haptic sensation presentation device, haptic sensation presentation method, and program

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001195579A (en) * 2000-01-07 2001-07-19 Omron Corp Image evaluating device
JP2005234881A (en) * 2004-02-19 2005-09-02 Nec Corp Tactile force indicating portable terminal and method
JP2006072359A (en) * 2004-08-30 2006-03-16 Samsung Electronics Co Ltd Method of controlling display apparatus
JP2008123431A (en) * 2006-11-15 2008-05-29 Canon Inc Contact presenting device and method
JP2008134990A (en) * 2006-10-23 2008-06-12 Canon Inc Information processing apparatus and information processing method
JP2009031854A (en) * 2007-07-24 2009-02-12 Seiko Epson Corp Image processor, image processing method and computer program
JP2010176479A (en) * 2009-01-30 2010-08-12 Fujifilm Corp Image keyword appending apparatus, image search device and method of controlling them
JP2010286986A (en) * 2009-06-10 2010-12-24 Funai Electric Co Ltd Mobile terminal device
JP2011510371A (en) * 2008-01-15 2011-03-31 ソニー エリクソン モバイル コミュニケーションズ, エービー Image sense

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001195579A (en) * 2000-01-07 2001-07-19 Omron Corp Image evaluating device
JP2005234881A (en) * 2004-02-19 2005-09-02 Nec Corp Tactile force indicating portable terminal and method
JP2006072359A (en) * 2004-08-30 2006-03-16 Samsung Electronics Co Ltd Method of controlling display apparatus
JP2008134990A (en) * 2006-10-23 2008-06-12 Canon Inc Information processing apparatus and information processing method
JP2008123431A (en) * 2006-11-15 2008-05-29 Canon Inc Contact presenting device and method
JP2009031854A (en) * 2007-07-24 2009-02-12 Seiko Epson Corp Image processor, image processing method and computer program
JP2011510371A (en) * 2008-01-15 2011-03-31 ソニー エリクソン モバイル コミュニケーションズ, エービー Image sense
JP2010176479A (en) * 2009-01-30 2010-08-12 Fujifilm Corp Image keyword appending apparatus, image search device and method of controlling them
JP2010286986A (en) * 2009-06-10 2010-12-24 Funai Electric Co Ltd Mobile terminal device

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5507760B2 (en) * 2012-01-17 2014-05-28 パナソニック株式会社 Electronics
JPWO2013108595A1 (en) * 2012-01-17 2015-05-11 パナソニック株式会社 Electronics
JP2015141647A (en) * 2014-01-30 2015-08-03 和俊 尾花 Information processing apparatus, information processing program, information processing system and information processing method
JP2018506765A (en) * 2015-02-25 2018-03-08 イマージョン コーポレーションImmersion Corporation Haptic effect overlay
JP2017134699A (en) * 2016-01-29 2017-08-03 株式会社ニコン Electronic instrument and program
WO2018143021A1 (en) * 2017-02-06 2018-08-09 アルプス電気株式会社 Tactile-sensation presentation device
JP2019153129A (en) * 2018-03-05 2019-09-12 アルプスアルパイン株式会社 Control device, temperature sensation presentation device, temperature sensation presentation system, control method, and program
JP2020135191A (en) * 2019-02-15 2020-08-31 株式会社豊田中央研究所 User stimulus system
JP7251195B2 (en) 2019-02-15 2023-04-04 株式会社豊田中央研究所 User stimulation system
WO2021157049A1 (en) * 2020-02-07 2021-08-12 日本電信電話株式会社 Temperature stimulus presentation device and method thereof
JPWO2021157049A1 (en) * 2020-02-07 2021-08-12
WO2022209111A1 (en) * 2021-03-29 2022-10-06 ソニーグループ株式会社 Haptic sensation presentation device, haptic sensation presentation method, and program

Similar Documents

Publication Publication Date Title
JP2013137659A (en) Display unit
JP7033152B2 (en) User interface camera effect
EP3141993A2 (en) Mobile terminal and method for controlling the same
KR102056033B1 (en) Implementation of biometric authentication
US11500533B2 (en) Mobile terminal for displaying a preview image to be captured by a camera and control method therefor
US20150071043A1 (en) Relative Clock Time Display Device and Relative Clock Time Display Program
JP6940353B2 (en) Electronics
JP6004756B2 (en) Display control apparatus and control method thereof
JP2010004118A (en) Digital photograph frame, information processing system, control method, program, and information storage medium
KR102294599B1 (en) Display device and controlling method thereof
JP6701033B2 (en) Electronic device and control method thereof
JP4406626B2 (en) Digital camera
US9544462B2 (en) Image capturing apparatus and control method of image capturing apparatus
JP6128919B2 (en) Display control apparatus and control method thereof
JP2012078469A (en) Image display device and image display method
JP5633296B2 (en) Image control apparatus and program
JP2006311209A (en) Camera
CN104717417B (en) A kind of fast automatic focusing method of imaging system and device
JP6637757B2 (en) Eye accommodation function support system
JP5856436B2 (en) CONTENT MANAGEMENT SYSTEM, RECORDING DEVICE, OPERATING DEVICE, ITS CONTROL METHOD, STORAGE MEDIUM, PROGRAM
CN105824522A (en) Photographing method and mobile terminal
WO2018098992A1 (en) Method and device for screen control and computer storage medium
KR200473426Y1 (en) Smart phone with back-side touch screen
JP7030458B2 (en) Imaging control device, its control method, and program, and storage medium
JP7450408B2 (en) Electronic devices, their control methods, programs and storage media

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20141216

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20151113

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20151117

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20160308