WO2013021864A1 - 表示装置 - Google Patents

表示装置 Download PDF

Info

Publication number
WO2013021864A1
WO2013021864A1 PCT/JP2012/069476 JP2012069476W WO2013021864A1 WO 2013021864 A1 WO2013021864 A1 WO 2013021864A1 JP 2012069476 W JP2012069476 W JP 2012069476W WO 2013021864 A1 WO2013021864 A1 WO 2013021864A1
Authority
WO
WIPO (PCT)
Prior art keywords
observer
unit
display
content
viewpoint
Prior art date
Application number
PCT/JP2012/069476
Other languages
English (en)
French (fr)
Inventor
誠 喜多
Original Assignee
シャープ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by シャープ株式会社 filed Critical シャープ株式会社
Publication of WO2013021864A1 publication Critical patent/WO2013021864A1/ja

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user

Definitions

  • the present invention relates to a display device that can change the appearance of content according to the viewpoint of an observer.
  • a display device such as a liquid crystal display device has been conventionally known. Content is displayed on the display screen of the display device. The observer looks at the content displayed on the display screen.
  • the appearance of content does not change even if the observer's viewpoint moves. In other words, only the content viewed from a specific direction is displayed on the display screen. Therefore, even if the observer moves the viewpoint, only the content viewed from a specific direction is seen.
  • JP-A-7-306955 discloses a system for generating a three-dimensional illusion.
  • the computer receives data indicating the approximate position of the customer's viewpoint in the real world.
  • the customer's viewpoint moves to a new position relative to the screen, the appropriate video at that new position is generated by the computer and displayed on the screen.
  • the customer's viewpoint is estimated from the position of the customer in the room, and the estimated customer's viewpoint may be different from the actual customer's viewpoint.
  • the above publication complicates a system for obtaining data indicating a customer's viewpoint position.
  • An object of the present invention is to provide a display device that allows an observer to see content viewed from a direction different from a specific direction and easily associates the observer's viewpoint with the content display mode.
  • the display device of the present invention includes a display panel having a display area, a control unit that displays content in the display area, and a detection unit that is provided in front of an observer who views the content and detects the viewpoint of the observer.
  • the control unit includes: a field identification unit that identifies an observer's field of view based on a result detected by the detection unit; and a display mode of the content based on an observer's field of view identified by the field of vision identification unit And a display control unit that displays the content in the display area based on the display mode of the content determined by the display mode determination unit.
  • the display device of the present invention allows the viewer to see the content viewed from a direction different from the specific direction, and easily matches the viewer's viewpoint with the display mode of the content.
  • FIG. 1 is a functional block diagram showing an example of a schematic configuration of a display device as a first embodiment of the present invention.
  • FIG. 2 is a front view illustrating an example of the display device.
  • FIG. 3 is a plan view for explaining display mode data in the horizontal direction.
  • FIG. 4 is a side view for explaining the display mode data in the vertical direction.
  • FIG. 5 is an explanatory diagram showing how the detection unit detects the observer's viewpoint.
  • FIG. 6 is an explanatory diagram showing how the observer's viewpoint is specified based on the result detected by the detection unit.
  • FIG. 7 is a front view showing an example of content displayed in the display area.
  • FIG. 8 is a front view showing an example of content having a display mode different from that in FIG. FIG.
  • FIG. 9 is a front view showing another example of content that is different from the display mode shown in FIG.
  • FIG. 10 is a front view showing still another example of content having a display mode different from that in FIG.
  • FIG. 11 is a front view illustrating an example of content displayed in the display area.
  • 12 is a front view showing an example of content displayed in the display area when the observer moves from the position shown in FIG.
  • FIG. 13 is a front view showing an example of content displayed in the display area.
  • FIG. 14 is a front view showing an example of content displayed in the display area when the observer moves from the position shown in FIG.
  • FIG. 15 is a flowchart illustrating an example of the reference setting process executed by the control unit.
  • FIG. 16 is a flowchart illustrating an example of content display processing executed by the control unit.
  • FIG. 17 is a front view showing another example of content displayed in the display area when the observer moves from the position shown in FIG. It is a functional block diagram which shows an example of schematic structure of the viewpoint specific part employ
  • FIG. 19 is a functional block diagram illustrating an example of a schematic configuration of a display device according to the second embodiment of the present invention.
  • FIG. 20 is a front view illustrating an example of content displayed in the display area.
  • FIG. 21 is a front view showing an example of content displayed in the display area when the observer moves from the position shown in FIG.
  • FIG. 22 is a flowchart illustrating an example of an audio output process executed by the control unit.
  • a display device in front of a display panel having a display area, a control unit that displays content in the display area, and an observer who views the content, and detects the viewpoint of the observer And a control unit, based on a result of detection by the detection unit, a field of view specifying unit that identifies the field of view of the observer, and a field of view of the viewer specified by the field of view specifying unit, A display mode determination unit that determines a display mode of the content, and a display control unit that displays the content in the display area based on the display mode of the content determined by the display mode determination unit (first Constitution).
  • the field of view of the observer is specified based on the viewpoint of the observer.
  • the display mode of the content is determined based on the identified field of view of the observer. Therefore, the observer can see the content viewed from a direction different from the specific direction.
  • the detection unit is provided in front of the observer. Therefore, it becomes easy to detect an observer's viewpoint. As a result, it becomes easy to make the viewer's viewpoint correspond to the display mode of the content.
  • the control unit further includes a determination unit that determines whether or not the content data includes display mode data, and the content data includes the display mode data.
  • the determination unit determines that the visual field is included
  • the visual field specifying unit specifies an observer's visual field. In such a configuration, the observer's field of view is specified only when the content data includes display mode data. Therefore, the control unit does not have to perform useless processing.
  • control unit further includes a reference setting unit that sets a reference used when the visual field specifying unit compares the detection result with the detection result of the detection unit. is there. In such a configuration, it is possible to improve the accuracy when the visual field specifying unit specifies the visual field.
  • the control unit further includes a confirmation unit that confirms whether or not there is an observer in front of the display area, and the confirmation unit When it is confirmed that there is an observer in front of the display area, the visual field specifying unit specifies the visual field of the observer.
  • the visual field of the observer is specified only when the observer is located in front of the display area. Therefore, the control unit does not have to perform useless processing.
  • the fifth configuration is a configuration in which, in the fourth configuration, the confirmation unit confirms whether or not there is an observer in front of the display area based on a result detected by the detection unit. In such a configuration, it is not necessary to separately provide detection means used only for confirming whether or not there is an observer in front of the display area.
  • the display mode determination unit displays the content display mode. Is set to a predetermined display mode. In such a configuration, the content can be displayed even if the observer is not in front of the display area.
  • the seventh configuration further includes a speaker in any one of the first to sixth configurations, and the control unit outputs from the speaker based on the field of view of the observer specified by the field of view specifying unit.
  • the output mode determining unit that determines the output mode of the voice to be output and the voice control unit that outputs the voice from the speaker based on the output mode determined by the output mode determining unit.
  • the image displayed in the display area can be associated with the sound output from the speaker.
  • the control unit includes a plurality of the detection units, and the control unit is configured to detect an observer based on a result detected by each of the plurality of detection units. It is the structure further provided with the viewpoint specific
  • the viewpoint specifying unit includes a determination unit that determines whether or not there are a plurality of observers based on a result detected by the detection unit, and a plurality of observers.
  • the determination unit determines that it exists, an observer specifying unit that specifies an observer having the closest distance to the display panel among a plurality of observers, and an observer viewpoint specified by the observer specifying unit And a viewpoint determination unit for determining.
  • the display mode of the content is determined based on the field of view of a specific observer. Therefore, when each of the plurality of observers changes the viewpoint, it is possible to prevent the display mode of the content from changing each time.
  • FIG. 1 is a functional block diagram illustrating an example of a schematic configuration of the display device 10.
  • Display device 10 displays content. Specific examples of the display device 10 include displays such as a mobile phone, a portable information terminal, a television receiver, a laptop computer, a notebook computer, and a game machine.
  • the display device 10 includes a display panel 12, a detection unit 14, and a control unit 16.
  • the display panel 12 is, for example, a liquid crystal panel, a plasma display panel (PDP), an organic EL (electroluminescence) panel, an FED (Field Emission Display) panel, or the like.
  • the display panel 12 has a plurality of pixels (not shown). The plurality of pixels are formed in a matrix, for example. The formation area of the plurality of pixels becomes the display area 18 (see FIG. 2) of the display panel 12.
  • Each pixel may have a plurality of sub-pixels.
  • the plurality of sub-pixels are, for example, a red pixel, a green pixel, and a blue pixel.
  • the plurality of sub-pixels may further include a yellow pixel.
  • Detecting unit 14 detects the observer's viewpoint.
  • the observer looks at the content displayed in the display area 18.
  • the content may be a moving image or a still image.
  • the moving images are, for example, sports matches, stage plays, musician performances, etc., taken with a video camera or the like.
  • the still image is, for example, a landscape photographed with a video camera or the like, a graph created with a personal computer, or the like.
  • the detection unit 14 detects the viewpoint of the observer located in front of the display area 18, for example.
  • the observer positioned in front of the display area 18 refers to an observer that overlaps the display area 18 in the projection in the perpendicular direction of the display panel 12, for example.
  • it refers to an observer whose part of the face overlaps with the display area 18 in the perpendicular projection of the display panel 12, for example.
  • Detecting unit 14 has a function of photographing an observer's face, for example.
  • the detection unit 14 captures the face of the observer, for example, the position of the face, the position of the pupil, the orientation of the face, and the like can be known. As a result, the observer's viewpoint is detected.
  • the detection unit 14 has a function of measuring a distance from an observer, for example. Thereby, the distance from the detection part 14 to an observer is known.
  • the detection unit 14 may include, for example, a function of photographing an observer's face and a function of measuring a distance from the observer. Or you may provide separately the detection part 14 provided with the function which image
  • the field of view of the observer is specified.
  • the observer's field of view is, for example, a quadrangular pyramid defined by straight lines connecting the midpoints of the lines connecting the pupils of both eyes of the observer and the four corners of the display area 18 with the observer across the display area 18 Is the area inside the part located on the opposite side.
  • the field of view of the observer is a range that can be seen from the position where the observer is present in the area outside the window.
  • FIG. 1 shows only one detection unit 14 for easy understanding of the drawing, but it is preferable to provide a plurality of detection units 14. For example, in the example of FIG. 2, four detection units 14 are provided.
  • FIG. 2 is a front view of the display device 10.
  • the display device 10 includes a housing 20.
  • the housing 20 supports the display panel 12.
  • the housing 20 has an opening 22.
  • the opening 22 exposes the display area 18. Thereby, the observer can see the display area 18.
  • the detection unit 14 is provided around the display area 18. In other words, the detection unit 14 is provided in front of the observer. In the example of FIG. 2, one detection unit 14 is provided at each of the four corners of the housing 20 as viewed from the front.
  • the detection unit 14 may be provided inside the housing 20 or may be provided outside the housing 20.
  • the detection unit 14 is exposed through, for example, an opening formed in the housing 20.
  • the detection part 14 is provided in the surface of the housing 20, for example.
  • the detection unit 14 outputs a detection result.
  • the detection result is, for example, the image data of the observer's face and the distance from the detection unit 14 to the observer's face.
  • the detection result output by the detection unit 14 is input to the control unit 16.
  • the control unit 16 changes the display mode (appearance) of the content displayed in the display area 18 based on the detection result from the detection unit 14. In other words, the control unit 16 changes the display mode of the content based on the detection result from the detection unit 14.
  • the control unit 16 includes a storage unit 24.
  • the storage unit 24 stores content data displayed in the display area 18.
  • the storage unit 24 is, for example, a memory that temporarily stores content data sent from the outside.
  • the content data includes, for example, luminance data and display mode data.
  • Luminance data indicates the luminance of pixels that display content.
  • the luminance data is set corresponding to the display mode data.
  • the display mode data includes, for example, the direction in which the viewer views the content and the content viewed from the direction.
  • the display mode data includes, for example, horizontal display mode data and vertical display mode data.
  • display mode data for example, horizontal display mode data and vertical display mode data
  • FIGS. FIG. 3 and FIG. 4 show a state where the observer is looking at the cube 40 displayed in the content.
  • the horizontal display mode data is display mode data when viewing content from a direction inclined by an angle ⁇ H in the horizontal direction with respect to a straight line DL (reference line DL) extending in a predetermined direction.
  • the angle ⁇ H is an angle formed by the straight line VL extending in the direction in which the viewer 26 views the content and the reference line DL in the vertical projection.
  • the content viewed from the direction in which the reference line DL extends becomes the default content.
  • the straight line VL passes through the midpoint of a line segment connecting the pupils of both eyes of the observer 26.
  • a possible range of the angle ⁇ H is, for example, 0 to 90 degrees on each of the left and right sides of the reference line DL.
  • the display mode data in the vertical direction is display mode data when viewing content from a direction inclined by an angle ⁇ V in the vertical direction with respect to the reference line DL.
  • the angle ⁇ V is an angle formed by the straight line VL and the reference line DL in the horizontal projection.
  • the possible range of the angle ⁇ V is, for example, 0 to 90 degrees on both the upper and lower sides of the reference line DL.
  • the display mode of content is determined based on display mode data (for example, horizontal display mode data and vertical display mode data). A method of determining the content display mode will be described later.
  • control unit 16 further includes a determination unit 28.
  • the determination unit 28 checks what data is included in the content data. For example, the determination unit 28 determines whether the display data is included in the content data.
  • the control unit 16 further includes a confirmation unit 30.
  • the confirmation unit 30 confirms whether or not an observer is present in front of the display region 18 based on the result detected by the detection unit 14.
  • the confirmation unit 30 determines whether or not an observer exists by using pattern recognition, for example.
  • the confirmation unit 30 may confirm whether or not there is an observer in front of the display area 18 based on the detection result of one detection unit 14, or based on the detection results of the plurality of detection units 14. Then, it may be confirmed whether an observer is present in front of the display area 18. When it is confirmed whether or not an observer is present in front of the display area 18 based on the detection result of one detection unit 14, the observer is in front of the display area 18 based on the detection results of the plurality of detection units 14. Compared with the case where it is confirmed whether or not it exists, the time required to confirm whether or not an observer exists in front of the display region 18 can be shortened.
  • the control unit 16 further includes a viewpoint specifying unit 32.
  • the viewpoint specifying unit 32 specifies the observer's viewpoint based on the detection result of the detection unit 14.
  • the viewpoint specifying unit 32 specifies the viewpoint of the observer 26 by, for example, synthesizing the face of the observer 26 photographed by each detection unit 14.
  • the viewpoint specifying unit 32 may specify the observer's viewpoint using the detection result of the detection unit 14 that is referred to when the confirmation unit 30 confirms that an observer is present in front of the display area 18. .
  • the processing time can be shortened compared to the case of newly acquiring the detection result.
  • control unit 16 further includes a visual field specifying unit 34.
  • the visual field specifying unit 34 specifies the visual field of the observer based on the observer's viewpoint. In the present embodiment, the visual field specifying unit 34 specifies the visual field of the observer based on the viewpoint of the observer specified by the visual point specifying unit 32.
  • the control unit 16 further includes a reference setting unit 36.
  • the reference setting unit 36 sets the observer's viewpoint as a reference when the visual field specifying unit 34 specifies the observer's visual field.
  • the detection unit 14 detects the viewpoint of an observer who is directly in front of the display area 18 and separated from the display area 18 by a predetermined distance.
  • the reference setting unit 36 sets the observer's viewpoint as a reference observer's viewpoint.
  • the reference setting unit 36 identifies the observer's viewpoint based on the detected observer's viewpoint, and the identified observer's viewpoint Is set as the reference observer's viewpoint.
  • the control unit 16 further includes a display mode determination unit 38.
  • the display mode determination unit 38 determines the display mode of content based on the field of view specified by the field of view specifying unit 34.
  • the display mode determination unit 38 selects display mode data (horizontal display mode data and vertical display mode data) based on the field of view specified by the field of view specifying unit 34.
  • the display mode determination unit 38 determines the display mode of the content based on the selected display mode data.
  • FIG. 3, FIG. 4, and FIG. 7 to FIG. 10 show content that displays only one cube 40.
  • Fig. 7 shows the default content.
  • the front surface 40a of the cube 40 is visible.
  • the angle ⁇ H is in the range of 0 to 90 degrees
  • the angle ⁇ V is 0 degrees. Therefore, in the example of FIG. 3, as shown in FIG. 8, the cube 40 can see not only the front surface 40a but also the side surface 40b.
  • the cube 40 can see not only the front surface 40 a but also the upper surface 40 c as shown in FIG. 9.
  • the angle ⁇ H is in the range of 0 to 90 degrees
  • the angle ⁇ V is in the range of 0 to 90 degrees. Therefore, in the example in which FIG. 3 and FIG. 4 are combined, as shown in FIG. 10, the front surface 40a, the side surface 40b, and the upper surface 40c of the cube 40 can be seen.
  • Hidden parts become visible as the content appearance changes.
  • the fact that the hidden part is visible is not limited to the fact that the hidden part of the three-dimensional shape is visible as shown in FIGS.
  • the viewpoint of the observer 26 moves in a portion that is hidden by being located outside the display area 18. Including becoming visible.
  • FIGS. 11 and 12 show a personal computer display as an example of the display device 10. This display may be a desktop personal computer display or a notebook personal computer display.
  • a graph 42 created by a personal computer is displayed in the display area 18. As the viewpoint of the observer 26 moves from the position shown in FIG. 11 to the position shown in FIG. 12, a portion that cannot be seen at the position shown in FIG. 11 (the hidden portion of the leftmost graph 42) becomes visible.
  • FIGS. 13 and 14 show a television receiver as an example of the display device 10.
  • a baseball game is displayed in the display area 18.
  • the observer moves from the position shown in FIG. 13 to the position shown in FIG. 14, the player 44 that cannot be seen at the position shown in FIG. 13 becomes visible at the position shown in FIG.
  • control unit 16 further includes a display control unit 46.
  • the display control unit 46 displays the content in the display area 18 based on the content display mode determined by the display mode determination unit 38.
  • reference setting processing executed by the control unit 16 (reference setting unit 36) will be described with reference to FIG.
  • the reference setting process may be executed, for example, when the observer uses the display device for the first time, or may be executed at an arbitrary time desired by the observer.
  • control unit 16 determines whether or not there is an observer in front of the display area 18 in step (hereinafter, S) 11. When there is no observer (S11: NO), the control unit 16 (reference setting unit 36) ends the reference setting process.
  • control unit 16 determines the viewpoint of the reference observer in S12. Thereafter, the control unit 16 (reference setting unit 36) ends the reference setting process.
  • the control unit 16 may guide the observer to a predetermined position in the process of determining the viewpoint of the reference observer.
  • This guidance is realized, for example, by displaying a guidance display for guiding the observer to a predetermined position in the display area 18.
  • the guidance display and the guidance voice can be used in combination.
  • the content display process is repeatedly executed when content data is stored in the storage unit 24, for example.
  • step S21 the control unit 16 (determination unit 28) determines whether or not the content data includes display mode data.
  • the control unit 16 (confirmation unit 30) determines whether or not the observer is located in front of the display area 18 in S22.
  • the control unit 16 specifies the viewpoint of the observer in S23.
  • the control unit 16 specifies the visual field of the observer in S24.
  • control unit 16 determines the display mode of the content in S25.
  • control part 16 display control part 46
  • control unit 16 ends the content display process.
  • the control unit 16 determines whether the display mode data is included (S21: NO). If the display mode data is not included (S21: NO), the control unit 16 (display mode determination unit 38) sets the content display mode to default in S27. Then, the control part 16 performs the process after S26.
  • the display mode of the content is determined according to the viewpoint of the observer. Therefore, the observer can see the content viewed from a direction different from the predetermined direction.
  • the detection unit 14 is provided in front of the observer. This makes it easier to detect the observer's viewpoint. As a result, it becomes easy to make the viewer's viewpoint correspond to the display mode of the content.
  • the display device 10 is provided with a detection unit 14 that detects the viewpoint of the observer. Therefore, it is not necessary to separately prepare a device for detecting the observer's viewpoint in addition to the display device 10. As a result, a configuration for detecting the observer's viewpoint can be simplified.
  • the control part 16 does not need to perform an extra process.
  • the reference observer's viewpoint is set. Thereby, the detection accuracy of an observer's viewpoint improves.
  • the control part 16 does not need to perform an extra process.
  • the content display mode is set to the default. Thereby, even when the observer is not in front of the display area 18, the content can be displayed in the display area 18.
  • the observer's viewpoint is specified based on the result detected by each of the plurality of detection units 14. Thereby, the precision which pinpoints an observer's viewpoint improves.
  • the display mode of the content may be changed.
  • the content is not displayed in the area 48 that does not include the display mode data.
  • the area 48 not including the display mode data is displayed in black.
  • the viewpoint identification unit 32 includes a determination unit 50, an observer identification unit 52, and a viewpoint determination unit 54.
  • the determination unit 50 determines whether there are a plurality of observers based on the result detected by the detection unit 14. The determination unit 50 determines whether there are a plurality of observers by using pattern recognition, for example.
  • the observer specifying unit 52 specifies the observer having the closest distance from the display panel 12 among the plurality of observers. For example, the observer specifying unit 52 specifies the observer closest to the display panel 12 based on the distance from the observer among the results detected by the detection unit 14.
  • the viewpoint determination unit 54 determines the viewpoint of the observer specified by the observer specifying unit 52. For example, the viewpoint determination unit 54 determines the viewpoint of the observer identified by the observer identification unit 52 based on the image data of the face of the observer identified by the observer identification unit 52 among the results detected by the detection unit 14. decide.
  • the display mode of content is determined according to the viewpoint of a specific observer. Therefore, when each of the plurality of observers changes the viewpoint, it is possible to prevent the display mode of the content from changing each time.
  • a display device 56 according to a second embodiment of the present invention will be described with reference to FIG.
  • members and parts having the same structure as those of the first embodiment are denoted by the same reference numerals as those of the first embodiment, and detailed descriptions thereof are omitted. To do.
  • a speaker 58 is provided as compared with the first embodiment.
  • the control part 60 differs compared with 1st Embodiment.
  • the control part 60 of this embodiment is further provided with the output mode determination part 62 and the audio
  • the output mode determination unit 62 changes the audio output mode based on the viewer's field of view specified by the field of view specifying unit 34.
  • the sound output mode is, for example, which speaker outputs sound when there are a plurality of speakers, how loud the sound is output, and the like.
  • the audio output mode is set corresponding to the content display mode.
  • data relating to an audio output mode is included in content data.
  • the data related to the audio output mode is set corresponding to the content display mode data, for example.
  • FIG. 20 and 21 a television receiver is shown as an example of the display device 56.
  • a baseball game is displayed in the display area 18.
  • the voice control unit 64 outputs a voice based on the voice output mode determined by the output mode determination unit 62.
  • the audio output process is repeatedly executed when content data is stored in the storage unit 24, for example.
  • the audio output process is executed in parallel with the content display process, for example.
  • control unit 60 determines whether or not the content data includes display mode data in S31.
  • display mode data is included (S31: YES)
  • control unit 60 confirmation unit 30 determines whether or not the observer is positioned in front of the display area 18 in S32.
  • the control unit 60 specifies the viewpoint of the observer in S33.
  • the control unit 60 specifies the visual field of the observer in S34.
  • control unit 60 determines a voice output mode.
  • control unit 60 audio control unit 64
  • control unit 60 ends the sound output process.
  • control unit 60 (output mode determination unit 62) sets the voice output mode to default in S37. Then, the control part 60 performs the process after S36.
  • a plurality of detection units 14 are provided, but for example, one detection unit 14 may be provided. In this case, it is not necessary to provide the viewpoint specifying unit 32.

Abstract

　観察者が特定の方向とは異なる方向から見たコンテンツを見ることができるとともに、観察者の視点とコンテンツの表示態様とを対応させ易い表示装置を提供することを、目的とする。表示領域（１８）を有する表示パネル（１２）と、表示領域（１８）にコンテンツを表示する制御部（１６）と、コンテンツを見る観察者の前方に設けられ、コンテンツを見る観察者の視点を検出する検出部（１４）とを備える。制御部（１６）は、検出部（１４）が検出した結果に基づいて、観察者の視界を特定する視界特定部（３４）と、視界特定部（３４）が特定した観察者の視界に基づいて、コンテンツの表示態様を決定する表示態様決定部（３８）と、表示態様決定部（３８）が決定したコンテンツの表示態様に基づいて、コンテンツを表示領域（１８）に表示する表示制御部（４６）とを備える。

Description

表示装置
　本発明は、観察者の視点に応じてコンテンツの見え方を変化させることができる表示装置に関する。
　液晶表示装置等の表示装置が、従来から知られている。表示装置の表示画面には、コンテンツが表示される。観察者は、表示画面に表示されるコンテンツを見る。
　一般的に、観察者の視点が移動しても、コンテンツの見え方は変化しない。換言すれば、表示画面には、特定の方向から見たコンテンツしか表示されない。そのため、観察者は、その視点を移動させたとしても、特定の方向から見たコンテンツだけを見ることになる。
　なお、特開平７－３０６９５５号公報には、３次元イリュージョンを生み出すシステムが開示されている。このシステムでは、スクリーンに対して、客が部屋の床の格子上を移動すると、コンピュータが客の視点の現実世界におけるおおよその位置を示すデータを受理する。客の視点がスクリーンに対して新しい位置に移動した場合、その新しい位置における適切な映像がコンピュータによって生成され、スクリーンに表示される。
　しかしながら、上記公報においては、部屋の中における客の位置から客の視点を推定することになり、当該推定した客の視点と実際の客の視点とが異なる場合がある。加えて、上記公報では、客の視点位置を示すデータを得るためのシステムが複雑になる。
　本発明の目的は、観察者が特定の方向とは異なる方向から見たコンテンツを見ることができるとともに、観察者の視点とコンテンツの表示態様とを対応させ易い表示装置を提供することである。
　本発明の表示装置は、表示領域を有する表示パネルと、前記表示領域にコンテンツを表示する制御部と、前記コンテンツを見る観察者の前方に設けられ、観察者の視点を検出する検出部とを備え、前記制御部は、前記検出部が検出した結果に基づいて、観察者の視界を特定する視界特定部と、前記視界特定部が特定した観察者の視界に基づいて、前記コンテンツの表示態様を決定する表示態様決定部と、前記表示態様決定部が決定した前記コンテンツの表示態様に基づいて、前記コンテンツを前記表示領域に表示する表示制御部とを備える。
　本発明の表示装置は、観察者が特定の方向とは異なる方向から見たコンテンツを見ることができるとともに、観察者の視点とコンテンツの表示態様とを対応させ易い。
図１は、本発明の第１の実施形態としての表示装置の概略構成の一例を示す機能ブロック図である。 図２は、表示装置の一例を示す正面図である。 図３は、水平方向の表示態様データを説明するための平面図である。 図４は、垂直方向の表示態様データを説明するための側面図である。 図５は、検出部が観察者の視点を検出する様子を示す説明図である。 図６は、検出部が検出した結果に基づいて観察者の視点が特定される様子を示す説明図である。 図７は、表示領域に表示されるコンテンツの一例を示す正面図である。 図８は、図７とは表示態様が異なるコンテンツの一例を示す正面図である。 図９は、図７とは表示態様が異なるコンテンツの他の一例を示す正面図である。 図１０は、図７とは表示態様が異なるコンテンツの更に別の一例を示す正面図である。 図１１は、表示領域に表示されるコンテンツの一例を示す正面図である。 図１２は、観察者が図１１に示す位置から移動したときに、表示領域に表示されるコンテンツの一例を示す正面図である。 図１３は、表示領域に表示されるコンテンツの一例を示す正面図である。 図１４は、観察者が図１３に示す位置から移動したときに、表示領域に表示されるコンテンツの一例を示す正面図である。 図１５は、制御部が実行する基準設定処理の一例を示すフローチャートである。 図１６は、制御部が実行するコンテンツ表示処理の一例を示すフローチャートである。 図１７は、観察者が図１３に示す位置から移動したときに、表示領域に表示されるコンテンツの他の一例を示す正面図である。 第１の実施形態の応用例２で採用される視点特定部の概略構成の一例を示す機能ブロック図である。 図１９は、本発明の第２の実施形態としての表示装置の概略構成の一例を示す機能ブロック図である。 図２０は、表示領域に表示されるコンテンツの一例を示す正面図である。 図２１は、観察者が図２０に示す位置から移動したときに、表示領域に表示されるコンテンツの一例を示す正面図である。 図２２は、制御部が実行する音声出力処理の一例を示すフローチャートである。
　本発明の一実施形態に係る表示装置は、表示領域を有する表示パネルと、前記表示領域にコンテンツを表示する制御部と、前記コンテンツを見る観察者の前方に設けられ、観察者の視点を検出する検出部とを備え、前記制御部は、前記検出部が検出した結果に基づいて、観察者の視界を特定する視界特定部と、前記視界特定部が特定した観察者の視界に基づいて、前記コンテンツの表示態様を決定する表示態様決定部と、前記表示態様決定部が決定した前記コンテンツの表示態様に基づいて、前記コンテンツを前記表示領域に表示する表示制御部とを備える（第１の構成）。
　第１の構成においては、観察者の視点に基づいて、観察者の視界が特定される。特定された観察者の視界に基づいて、コンテンツの表示態様が決定される。そのため、観察者は、特定の方向とは異なる方向から見たコンテンツを見ることができる。
　ここで、第１の構成においては、検出部が観察者の前方に設けられる。そのため、観察者の視点を検出し易くなる。その結果、観察者の視点とコンテンツの表示態様とを対応させ易くなる。
　第２の構成は、前記第１の構成において、前記制御部は、前記コンテンツのデータが表示態様データを含むか否かを判定する判定部をさらに備え、前記コンテンツのデータが前記表示態様データを含むと前記判定部が判断した場合に、前記視界特定部が観察者の視界を特定する構成である。このような構成においては、コンテンツのデータが表示態様データを含む場合だけ、観察者の視界が特定される。そのため、制御部が無駄な処理をしなくて済む。
　第３の構成は、前記第１又は第２の構成において、前記制御部は、前記視界特定部が前記検出部の検出結果と比較する際に用いる基準を設定する基準設定部をさらに備える構成である。このような構成においては、視界特定部が視界を特定する際の精度を向上させることができる。
　第４の構成は、前記第１～第３の構成の何れか１つにおいて、前記制御部は、前記表示領域の前方に観察者がいるか否かを確認する確認部をさらに備え、前記確認部が前記表示領域の前方に観察者がいることを確認した場合に、前記視界特定部が観察者の視界を特定する構成である。このような構成においては、観察者が表示領域の前方に位置する場合だけ、観察者の視界が特定される。そのため、制御部が無駄な処理をしなくて済む。
　第５の構成は、前記第４の構成において、前記確認部は、前記検出部が検出した結果に基づいて、前記表示領域の前方に観察者がいるか否かを確認する構成である。このような構成においては、表示領域の前方に観察者がいるか否かを確認するためだけに用いる検出手段を別途設ける必要がなくなる。
　第６の構成は、前記第４又は第５の構成において、前記表示領域の前方に観察者がいないことを、前記確認部が確認した場合に、前記表示態様決定部が、前記コンテンツの表示態様を予め定められた表示態様に設定する構成である。このような構成においては、観察者が表示領域の前方にいなくても、コンテンツを表示することができる。
　第７の構成は、前記第１～第６の構成の何れか１つにおいて、スピーカをさらに備え、前記制御部は、前記視界特定部が特定した観察者の視界に基づいて、前記スピーカから出力される音声の出力態様を決定する出力態様決定部と、前記出力態様決定部が決定した出力態様に基づいて、前記スピーカから音声を出力する音声制御部とをさらに備える構成である。このような構成においては、表示領域に表示される画像と、スピーカから出力される音声とを対応させることができる。
　第８の構成は、前記第１～第７の構成の何れか１つにおいて、前記検出部を複数備え、前記制御部は、複数の前記検出部のそれぞれが検出した結果に基づいて、観察者の視点を特定する視点特定部をさらに備える構成である。このような構成においては、観察者の視点を特定する精度を向上させることができる。
　第９の構成は、前記第８の構成において、前記視点特定部は、前記検出部が検出した結果に基づいて、観察者が複数存在するか否かを判断する判断部と、観察者が複数存在すると前記判断部が判断した場合に、複数の観察者のうち前記表示パネルとの距離が最も近い観察者を特定する観察者特定部と、前記観察者特定部が特定した観察者の視点を決定する視点決定部とを備える構成である。このような構成においては、コンテンツの表示態様が特定の観察者の視界に基づいて決定される。そのため、複数の観察者のそれぞれが視点を変えた場合に、コンテンツの表示態様がその都度変わるのを防ぐことができる。
　以下、本発明のより具体的な実施形態について、図面を参照しながら説明する。なお、以下で参照する各図は、説明の便宜上、本発明の実施形態の構成部材のうち、本発明を説明するために必要な主要部材のみを簡略化して示したものである。従って、本発明に係る表示装置は、本明細書が参照する各図に示されていない任意の構成部材を備え得る。また、図中同一又は相当部分には、同一符号を付して、その説明は繰り返さない。
　［第１の実施形態］
　図１を参照して、本発明の第１の実施形態としての表示装置１０について説明する。図１は、表示装置１０の概略構成の一例を示す機能ブロック図である。
　表示装置１０は、コンテンツを表示する。表示装置１０の具体例としては、例えば、携帯電話機、携帯情報端末、テレビ受像機、ラップトップ型パソコン、ノートブック型パソコン、ゲーム機等のディスプレイがある。表示装置１０は、表示パネル１２と、検出部１４と、制御部１６とを備える。
　表示パネル１２は、例えば、液晶パネル、プラズマディスプレイパネル（ＰＤＰ）、有機ＥＬ(electroluminescence)パネル、ＦＥＤ（Field Emission Display）パネル等である。表示パネル１２は、複数の画素（図示せず）を有する。複数の画素は、例えば、マトリクス状に形成されている。複数の画素の形成領域が、表示パネル１２の表示領域１８（図２参照）になる。
　各画素は、複数のサブ画素を有してもよい。複数のサブ画素は、例えば、赤色画素、緑色画素及び青色画素である。複数のサブ画素は、黄色画素をさらに含んでもよい。
　検出部１４は、観察者の視点を検出する。観察者は、表示領域１８に表示されるコンテンツを見る。コンテンツは、動画であってもよいし、静止画であってもよい。動画は、例えば、ビデオカメラ等で撮影したスポーツの試合、舞台劇、音楽家の演奏等である。静止画は、例えば、ビデオカメラ等で撮影した風景、パソコンで作成したグラフ等である。
　検出部１４は、例えば、表示領域１８の前方に位置する観察者の視点を検出する。表示領域１８の前方に位置する観察者とは、例えば、表示パネル１２の垂線方向の投影において、表示領域１８と重なる観察者をいう。好ましくは、例えば、表示パネル１２の垂線方向の投影において、顔の一部が表示領域１８と重なる観察者をいう。
　検出部１４は、例えば、観察者の顔を撮影する機能を有する。検出部１４が観察者の顔を撮影することにより、例えば、顔の位置、瞳孔の位置、顔の向き等が判る。その結果、観察者の視点が検出される。
　検出部１４は、例えば、観察者との距離を測定する機能を有する。これにより、検出部１４から観察者までの距離が判る。
　検出部１４は、例えば、観察者の顔を撮影する機能と、観察者との距離を測定する機能とを併せ備えてもよい。或いは、観察者の顔を撮影する機能を備えた検出部１４と、観察者との距離を測定する機能を備えた検出部１４とを別々に設けてもよい。この場合、これらの検出部１４は、近接して配置することが望ましい。
　検出部１４が検出した結果（例えば、検出部１４が検出した観察者の視点と、検出部１４が測定した観察者との距離）に基づいて、観察者の視界が特定される。観察者の視界は、例えば、観察者の両目の瞳孔を結ぶ線分の中点と、表示領域１８の四隅とを結ぶ直線によって規定される四角錐のうち、表示領域１８を挟んで観察者とは反対側に位置する部分の内側の領域である。換言すれば、観察者の視界は、例えば、表示領域１８を窓と考えた場合、この窓の外側の領域のうち、観察者が現在いる位置から見える範囲である。
　図１では、図面を判り易くするために、１つの検出部１４だけを示しているが、複数の検出部１４を設けることが好ましい。例えば、図２の例では、４つの検出部１４が設けられている。図２は、表示装置１０の正面図である。
　図２に示すように、表示装置１０は、筺体２０を備える。筺体２０は、表示パネル１２を支持する。筺体２０は、開口２２を有する。開口２２は、表示領域１８を露出させる。これにより、観察者は表示領域１８を見ることができる。
　検出部１４は、表示領域１８の周囲に設けられる。換言すれば、検出部１４は、観察者の前方に設けられる。図２の例では、検出部１４は、正面から見た筺体２０の四隅に１つずつ設けられている。検出部１４は、例えば、筺体２０の内側に設けてもよいし、筺体２０の外側に設けてもよい。筺体２０の内側に検出部１４を設ける場合、検出部１４は、例えば、筺体２０に形成された開口を通じて露出される。筺体２０の外側に検出部１４を設ける場合、検出部１４は、例えば、筺体２０の表面に設けられる。
　図１に示すように、検出部１４は、検出結果を出力する。検出結果は、例えば、観察者の顔の画像データと、検出部１４から観察者の顔までの距離である。
　検出部１４が出力する検出結果は、制御部１６に入力される。制御部１６は、検出部１４からの検出結果に基づいて、表示領域１８に表示されるコンテンツの表示態様（見え方）を変更する。換言すれば、制御部１６は、検出部１４からの検出結果に基づいて、コンテンツの表示態様を変化させる。
　制御部１６は、格納部２４を備える。格納部２４は、表示領域１８に表示されるコンテンツのデータを格納する。格納部２４は、例えば、外部から送られてくるコンテンツのデータを一時的に格納するメモリである。コンテンツのデータは、例えば、輝度データと、表示態様データとを含む。
　輝度データは、コンテンツを表示する画素の輝度を示す。輝度データは、表示態様データに対応して設定されている。
　表示態様データは、例えば、観察者がコンテンツをみる方向と、当該方向から見たコンテンツとを含む。表示態様データは、例えば、水平方向の表示態様データと、垂直方向の表示態様データとを含む。
　ここで、図３及び図４を参照しながら、表示態様データ（例えば、水平方向の表示態様データと、垂直方向の表示態様データ）について説明する。図３及び図４では、観察者がコンテンツに表示される立方体４０を見ている状態が示されている。
　水平方向の表示態様データは、所定の方向に延びる直線ＤＬ（基準線ＤＬ）に対して、水平方向に角度θＨだけ傾いた方向からコンテンツを見るときの表示態様データである。図３に示すように、角度θＨは、観察者２６がコンテンツを見る方向に延びる直線ＶＬと、基準線ＤＬとが、垂直方向の投影において為す角度である。基準線ＤＬが延びる方向から見たコンテンツが、デフォルトのコンテンツになる。直線ＶＬは、例えば、観察者２６の両目の瞳孔を結ぶ線分の中点を通る。角度θＨの取り得る範囲は、例えば、基準線ＤＬの左右両側にそれぞれ、０～９０度である。
　垂直方向の表示態様データは、基準線ＤＬに対して、垂直方向に角度θＶだけ傾いた方向からコンテンツを見るときの表示態様データである。図４に示すように、角度θＶは、直線ＶＬと、基準線ＤＬとが、水平方向の投影において為す角度である。角度θＶの取り得る範囲は、例えば、基準線ＤＬの上下両側にそれぞれ、０～９０度である。
　表示態様データ（例えば、水平方向の表示態様データと、垂直方向の表示態様データ）に基づいて、コンテンツの表示態様が決まる。コンテンツの表示態様を決定する方法については、後述する。
　図１に示すように、制御部１６は、判定部２８をさらに備える。判定部２８は、どのようなデータがコンテンツのデータに含まれているかを確認する。判定部２８は、例えば、コンテンツのデータに表示態様データが含まれているか否かを判定する。
　制御部１６は、確認部３０をさらに備える。確認部３０は、例えば、検出部１４が検出した結果に基づいて、表示領域１８の前方に観察者が存在するか否かを確認する。確認部３０は、例えば、パターン認識を利用することによって、観察者が存在するか否かを判断する。
　確認部３０は、例えば、１つの検出部１４の検出結果に基づいて表示領域１８の前方に観察者が存在するか否かを確認してもよいし、複数の検出部１４の検出結果に基づいて表示領域１８の前方に観察者が存在するか否かを確認してもよい。１つの検出部１４の検出結果に基づいて表示領域１８の前方に観察者が存在するか否かを確認する場合、複数の検出部１４の検出結果に基づいて表示領域１８の前方に観察者が存在するか否かを確認する場合に比して、表示領域１８の前方に観察者が存在するか否かを確認するのに要する時間を短くすることができる。
　制御部１６は、視点特定部３２をさらに備える。視点特定部３２は、検出部１４の検出結果に基づいて、観察者の視点を特定する。
　ここで、図５及び図６を参照しながら、視点特定部３２が観察者２６の視点を特定する方法について、もう少し詳しく説明する。図５に示すように、複数の検出部１４のそれぞれが観察者２６の顔を撮影する場合を考える。この場合、図６に示すように、各検出部１４が撮影する観察者２６の顔は、観察者２６の顔を正面から撮影したものではない。そこで、視点特定部３２は、例えば、各検出部１４が撮影する観察者２６の顔を合成する等して、観察者２６の視点を特定する。
　視点特定部３２は、表示領域１８の前方に観察者が存在することを確認部３０が確認する際に参照した検出部１４の検出結果を利用して、観察者の視点を特定してもよい。この場合、既に取得した検出結果を利用することになるので、検出結果を新たに取得する場合に比して、処理時間を短くすることができる。
　図１に示すように、制御部１６は、視界特定部３４をさらに備える。視界特定部３４は、観察者の視点に基づいて、観察者の視界を特定する。本実施形態では、視点特定部３２が特定した観察者の視点に基づいて、視界特定部３４が観察者の視界を特定する。
　制御部１６は、基準設定部３６をさらに備える。基準設定部３６は、視界特定部３４が観察者の視界を特定する際の基準となる観察者の視点を設定する。
　具体的には、例えば、表示領域１８の真正面で、表示領域１８から所定距離だけ離れた位置にいる観察者の視点を検出部１４が検出する。基準設定部３６は、当該観察者の視点を基準となる観察者の視点に設定する。複数の検出部１４のそれぞれが観察者の視点を検出する場合、基準設定部３６は、これらの検出された観察者の視点に基づいて、観察者の視点を特定し、特定した観察者の視点を基準となる観察者の視点に設定する。
　制御部１６は、表示態様決定部３８をさらに備える。表示態様決定部３８は、視界特定部３４が特定した視界に基づいて、コンテンツの表示態様を決定する。
　具体的には、表示態様決定部３８は、視界特定部３４が特定した視界に基づいて、表示態様データ（水平方向の表示態様データと、垂直方向の表示態様データ）を選択する。表示態様決定部３８は、選択した表示態様データに基づいて、コンテンツの表示態様を決定する。
　ここで、図３、図４、図７～図１０を参照しながら、表示態様決定部３８がコンテンツの表示態様を決定する方法について、もう少し詳しく説明する。理解を容易にするために、図３、図４、図７～図１０では、１つの立方体４０だけを表示するコンテンツを示す。
　図７は、デフォルトのコンテンツを示す。図７では、立方体４０の前面４０ａだけが見えている。ここで、例えば、観察者の視点が水平方向にのみ移動した場合を考える。この場合、角度θＨは０～９０度の範囲にあり、角度θＶは０度である。そのため、図３の例では、立方体４０は、図８に示すように、前面４０ａだけでなく、側面４０ｂも見えるようになる。
　また、例えば、観察者の視点が垂直方向にのみ移動した場合を考える。この場合、角度θＶは０～９０度の範囲にあり、角度θＨは０度である。そのため、図４の例では、立方体４０は、図９に示すように、前面４０ａだけでなく、上面４０ｃも見えるようになる。
　また、例えば、観察者の視点が水平方向と垂直方向とのそれぞれに移動した場合を考える。この場合、角度θＨは０～９０度の範囲にあり、角度θＶは０～９０度の範囲にある。そのため、図３及び図４を併せた例では、立方体４０は、図１０に示すように、前面４０ａと、側面４０ｂと、上面４０ｃとが見えるようになる。
　コンテンツの見え方が変化することにより、隠れていた部分が見えるようになる。隠れていた部分が見えるというのは、図７～図１０に示すように、立体形状の隠れていた部分が見えることに限定されない。例えば、図１１及び図１２に示すように、或いは、図１３及び図１４に示すように、表示領域１８の外側に位置することで隠れて見えなかった部分が、観察者２６の視点が移動することで見えるようになることを含む。
　図１１及び図１２では、表示装置１０の一例として、パソコンのディスプレイを示す。このディスプレイは、デスクトップ型パソコンのディスプレイであってもよいし、ノート型パソコンのディスプレイであってもよい。図１１及び図１２の例では、パソコンで作成したグラフ４２が表示領域１８に表示されている。観察者２６の視点が図１１に示す位置から図１２に示す位置に移動することにより、図１１の位置では見えなかった部分（左端のグラフ４２の隠れていた部分）が見えるようになる。
　図１３及び図１４では、表示装置１０の一例として、テレビ受像機を示す。図１３及び図１４の例では、野球の試合が表示領域１８に表示されている。観察者が図１３に示す位置から図１４に示す位置に移動することにより、図１３の位置では見えなかった選手４４が、図１４の位置では見えるようになる。
　図１に示すように、制御部１６は、表示制御部４６をさらに備える。表示制御部４６は、表示態様決定部３８が決定したコンテンツの表示態様に基づいて、コンテンツを表示領域１８に表示する。
　続いて、図１５を参照しながら、制御部１６（基準設定部３６）が実行する基準設定処理について説明する。基準設定処理は、例えば、観察者が表示装置を初めて使用する際に実行してもよいし、観察者が所望する任意の時期に実行してもよい。
　先ず、制御部１６（基準設定部３６）は、ステップ（以下、Ｓ）１１において、表示領域１８の前方に観察者がいるか否かを判定する。観察者がいない場合（Ｓ１１：ＮＯ）、制御部１６（基準設定部３６）は、基準設定処理を終了する。
　観察者がいる場合（Ｓ１１：ＹＥＳ）、制御部１６（基準設定部３６）は、Ｓ１２において、基準となる観察者の視点を決定する。その後、制御部１６（基準設定部３６）は、基準設定処理を終了する。
　制御部１６（基準設定部３６）は、基準となる観察者の視点を決定する処理において、観察者を所定の位置に誘導してもよい。この誘導は、例えば、観察者を所定位置に誘導するための誘導表示を表示領域１８に表示することで実現される。或いは、観察者を所定位置に誘導するための誘導音声をスピーカ（図示せず）から出力することで実現される。誘導表示と誘導音声とを併用することも、勿論、可能である。
　続いて、図１６を参照しながら、制御部１６が実行するコンテンツ表示処理について説明する。コンテンツ表示処理は、例えば、格納部２４にコンテンツのデータが格納されている場合には、繰り返し実行される。
　先ず、制御部１６（判定部２８）は、Ｓ２１において、コンテンツのデータが表示態様データを含むか否かを判定する。表示態様データを含む場合（Ｓ２１：ＹＥＳ）、制御部１６（確認部３０）は、Ｓ２２において、観察者が表示領域１８の前方に位置するか否かを判定する。
　観察者が表示領域１８の前方に位置すると判定された場合（Ｓ２２：ＹＥＳ）、制御部１６（視点特定部３２）は、Ｓ２３において、観察者の視点を特定する。次に、制御部１６（視界特定部３４）は、Ｓ２４において、観察者の視界を特定する。
　続いて、制御部１６（表示態様決定部３８）は、Ｓ２５において、コンテンツの表示態様を決定する。次に、制御部１６（表示制御部４６）は、Ｓ２６において、表示領域１８にコンテンツを表示する。その後、制御部１６は、コンテンツ表示処理を終了する。
　表示態様データを含まない場合（Ｓ２１：ＮＯ）、制御部１６（表示態様決定部３８）は、Ｓ２７において、コンテンツの表示態様をデフォルトに設定する。その後、制御部１６は、Ｓ２６以降の処理を実行する。
　このような表示装置１０においては、観察者の視点に応じて、コンテンツの表示態様が決定される。そのため、観察者は所定の方向とは異なる方向から見たコンテンツを見ることができる。
　ここで、表示装置１０においては、検出部１４が観察者の前方に設けられている。そのため、観察者の視点が検出し易くなる。その結果、観察者の視点とコンテンツの表示態様とを対応させ易くなる。
　また、表示装置１０においては、観察者の視点を検出する検出部１４が表示装置１０に設けられている。そのため、観察者の視点を検出するための装置を、表示装置１０の他に、別途用意する必要がなくなる。その結果、観察者の視点を検出するための構成を簡単にすることができる。
　コンテンツのデータが表示態様データを含む場合に、表示領域１８の前方に観察者がいるか否かが確認される。これにより、制御部１６が余計な処理を実行しなくて済む。
　基準となる観察者の視点が設定される。これにより、観察者の視点の検出精度が向上する。
　表示領域１８の前方に観察者が存在する場合に、観察者の視界が特定される。これにより、制御部１６が余計な処理を実行しなくて済む。
　検出部１４が検出した結果に基づいて、表示領域１８の前方に観察者がいるか否かが確認される。これにより、必要な部品点数を少なくすることができる。
　観察者が表示領域１８の前方にいない場合、コンテンツの表示態様がデフォルトに設定される。これにより、観察者が表示領域１８の前方にいない場合でも、表示領域１８にコンテンツを表示することができる。
　複数の検出部１４のそれぞれが検出した結果に基づいて、観察者の視点が特定される。これにより、観察者の視点を特定する精度が向上する。
　［第１の実施形態の応用例１］
　例えば、コンテンツの一部に表示態様データを含まない領域がある場合に、コンテンツの表示態様を変更してもよい。この場合、例えば、図１７に示すように、当該表示態様データを含まない領域４８には、コンテンツが表示されないようにする。具体的には、例えば、当該表示態様データを含まない領域４８を黒表示にする。
　［第１の実施形態の応用例２］
　本応用例では、図１８に示すように、視点特定部３２が、判断部５０と、観察者特定部５２と、視点決定部５４とを備える。
　判断部５０は、検出部１４が検出した結果に基づいて、観察者が複数存在するか否かを判断する。判断部５０は、例えば、パターン認識を利用することによって、観察者が複数存在するか否かを判断する。
　観察者特定部５２は、観察者が複数存在すると判断部５０が判断した場合に、複数の観察者のうち表示パネル１２との距離が最も近い観察者を特定する。観察者特定部５２は、例えば、検出部１４が検出した結果のうち、観察者との距離に基づいて、表示パネル１２に最も近い観察者を特定する。
　視点決定部５４は、観察者特定部５２が特定した観察者の視点を決定する。視点決定部５４は、例えば、検出部１４が検出した結果のうち、観察者特定部５２が特定した観察者の顔の画像データに基づいて、観察者特定部５２が特定した観察者の視点を決定する。
　本応用例では、特定の観察者の視点に応じて、コンテンツの表示態様が決定される。そのため、複数の観察者のそれぞれが視点を変えた場合に、コンテンツの表示態様がその都度変わるのを防ぐことができる。
　［第２の実施形態］
　図１９を参照しながら、本発明の第２の実施形態としての表示装置５６について説明する。なお、以下の記載において、第１の実施形態と同様な構造とされた部材及び部位については、図中に、第１の実施形態と同一の符号を付すことにより、それらの詳細な説明を省略する。
　本実施形態では、第１の実施形態に比して、スピーカ５８を備える。また、本実施形態では、第１の実施形態に比して、制御部６０が異なる。本実施形態の制御部６０は、第１の実施形態に比して、出力態様決定部６２と、音声制御部６４とをさらに備える。
　出力態様決定部６２は、視界特定部３４が特定した観察者の視界に基づいて、音声の出力態様を変更する。音声の出力態様は、例えば、スピーカが複数ある場合に何れのスピーカから音声を出力するか、音声をどれくらいの大きさで出力するか等である。音声の出力態様は、コンテンツの表示態様に対応して設定される。本実施形態では、音声の出力態様に関するデータが、コンテンツのデータに含まれている。音声の出力態様に関するデータは、例えば、コンテンツの表示態様データに対応して設定されている。
　ここで、図２０及び図２１を参照しながら、音声の出力態様が変化する一例について説明する。図２０及び図２１では、表示装置５６の一例として、テレビ受像機を示す。図２０及び図２１の例では、野球の試合が表示領域１８に表示されている。
　観察者２６が図２０に示す位置にいるときに、表示領域１８の外側の隠れて見えない部分から小さな音声が出力される場合を考える。この場合、音声の発生源を観察者２６が確認しようとして、観察者２６が図２１に示す位置に移動したとする。図２１に示す位置では、それまで隠れていた選手４４が見えるようになる。それに伴い、音声が大きくなる。その結果、観察者２６は、表示領域１８の外側に隠れていて見えなかった選手４４が、音声の発生源であると認識できる。
　音声制御部６４は、出力態様決定部６２が決定した音声の出力態様に基づいて、音声を出力する。
　続いて、図２２を参照しながら、制御部６０が実行する音声出力処理について説明する。音声出力処理は、例えば、格納部２４にコンテンツのデータが格納されている場合には、繰り返し実行される。音声出力処理は、例えば、コンテンツ表示処理と並行して実行される。
　先ず、制御部６０（判定部２８）は、Ｓ３１において、コンテンツのデータが表示態様データを含むか否かを判定する。表示態様データを含む場合（Ｓ３１：ＹＥＳ）、制御部６０（確認部３０）は、Ｓ３２において、観察者が表示領域１８の前方に位置するか否かを判定する。
　観察者が表示領域１８の前方に位置すると判定された場合（Ｓ３２：ＹＥＳ）、制御部６０（視点特定部３２）は、Ｓ３３において、観察者の視点を特定する。次に、制御部６０（視界特定部３４）は、Ｓ３４において、観察者の視界を特定する。
　続いて、制御部６０（出力態様決定部６２）は、Ｓ３５において、音声の出力態様を決定する。次に、制御部６０（音声制御部６４）は、Ｓ３６において、スピーカ５８から音声を出力する。その後、制御部６０は、音声出力処理を終了する。
　表示態様データを含まない場合（Ｓ３１：ＮＯ）、制御部６０（出力態様決定部６２）は、Ｓ３７において、音声の出力態様をデフォルトに設定する。その後、制御部６０は、Ｓ３６以降の処理を実行する。
　以上、本発明の実施形態について、詳述してきたが、これらはあくまでも例示であって、本発明は、上述の実施形態によって、何等、限定されない。
　例えば、前記第１及び第２の実施形態では、検出部１４が複数設けられていたが、例えば、検出部１４は１つであってもよい。この場合、視点特定部３２を設ける必要はない。

Claims (9)

  1. 　表示領域を有する表示パネルと、
    　前記表示領域にコンテンツを表示する制御部と、
    　前記コンテンツを見る観察者の前方に設けられ、観察者の視点を検出する検出部とを備え、
    　前記制御部は、
    　前記検出部が検出した結果に基づいて、観察者の視界を特定する視界特定部と、
    　前記視界特定部が特定した観察者の視界に基づいて、前記コンテンツの表示態様を決定する表示態様決定部と、
    　前記表示態様決定部が決定した前記コンテンツの表示態様に基づいて、前記コンテンツを前記表示領域に表示する表示制御部とを備える、表示装置。
  2. 　前記制御部は、前記コンテンツのデータが表示態様データを含むか否かを判定する判定部をさらに備え、
    　前記コンテンツのデータが前記表示態様データを含むと前記判定部が判断した場合に、前記視界特定部が観察者の視界を特定する、請求項１に記載の表示装置。
  3. 　前記制御部は、前記視界特定部が前記検出部の検出結果と比較する際に用いる基準を設定する基準設定部をさらに備える、請求項１又は２に記載の表示装置。
  4. 　前記制御部は、前記表示領域の前方に観察者がいるか否かを確認する確認部をさらに備え、
    　前記確認部が前記表示領域の前方に観察者がいることを確認した場合に、前記視界特定部が観察者の視界を特定する、請求項１～３の何れか１項に記載の表示装置。
  5. 　前記確認部は、前記検出部が検出した結果に基づいて、前記表示領域の前方に観察者がいるか否かを確認する、請求項４に記載の表示装置。
  6. 　前記表示領域の前方に観察者がいないことを、前記確認部が確認した場合に、前記表示態様決定部が、前記コンテンツの表示態様を予め定められた表示態様に設定する、請求項４又は５に記載の表示装置。
  7. 　スピーカをさらに備え、
    　前記制御部は、
    　前記視界特定部が特定した観察者の視界に基づいて、前記スピーカから出力される音声の出力態様を決定する出力態様決定部と、
    　前記出力態様決定部が決定した出力態様に基づいて、前記スピーカから音声を出力する音声制御部とをさらに備える、請求項１～６の何れか１項に記載の表示装置。
  8. 　前記検出部を複数備え、
    　前記制御部は、複数の前記検出部のそれぞれが検出した結果に基づいて、観察者の視点を特定する視点特定部をさらに備える、請求項１～７の何れか１項に記載の表示装置。
  9. 　前記視点特定部は、
    　前記検出部が検出した結果に基づいて、観察者が複数存在するか否かを判断する判断部と、
    　観察者が複数存在すると前記判断部が判断した場合に、複数の観察者のうち前記表示パネルとの距離が最も近い観察者を特定する観察者特定部と、
    　前記観察者特定部が特定した観察者の視点を決定する視点決定部とを備える、請求項８に記載の表示装置。
PCT/JP2012/069476 2011-08-09 2012-07-31 表示装置 WO2013021864A1 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2011174276A JP2014199963A (ja) 2011-08-09 2011-08-09 表示装置
JP2011-174276 2011-08-09

Publications (1)

Publication Number Publication Date
WO2013021864A1 true WO2013021864A1 (ja) 2013-02-14

Family

ID=47668376

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2012/069476 WO2013021864A1 (ja) 2011-08-09 2012-07-31 表示装置

Country Status (2)

Country Link
JP (1) JP2014199963A (ja)
WO (1) WO2013021864A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017097854A (ja) * 2016-09-29 2017-06-01 株式会社スクウェア・エニックス プログラム、記録媒体、コンテンツ提供装置及び制御方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006349921A (ja) * 2005-06-15 2006-12-28 Mitsubishi Electric Corp 画像表示装置
JP2007052304A (ja) * 2005-08-19 2007-03-01 Mitsubishi Electric Corp 映像表示システム
JP2008225364A (ja) * 2007-03-15 2008-09-25 Nippon Telegr & Teleph Corp <Ntt> 情報提示装置及び情報提示方法
JP2010072477A (ja) * 2008-09-19 2010-04-02 Toshiba Tec Corp 画像表示装置、画像表示方法及びプログラム
JP2011090400A (ja) * 2009-10-20 2011-05-06 Sony Corp 画像表示装置および方法、並びにプログラム

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006349921A (ja) * 2005-06-15 2006-12-28 Mitsubishi Electric Corp 画像表示装置
JP2007052304A (ja) * 2005-08-19 2007-03-01 Mitsubishi Electric Corp 映像表示システム
JP2008225364A (ja) * 2007-03-15 2008-09-25 Nippon Telegr & Teleph Corp <Ntt> 情報提示装置及び情報提示方法
JP2010072477A (ja) * 2008-09-19 2010-04-02 Toshiba Tec Corp 画像表示装置、画像表示方法及びプログラム
JP2011090400A (ja) * 2009-10-20 2011-05-06 Sony Corp 画像表示装置および方法、並びにプログラム

Also Published As

Publication number Publication date
JP2014199963A (ja) 2014-10-23

Similar Documents

Publication Publication Date Title
US11301199B2 (en) Multi-viewpoint switched shooting system and method
JP6511386B2 (ja) 情報処理装置および画像生成方法
CN105589199A (zh) 显示装置、显示装置的控制方法以及程序
US8576468B2 (en) Scanning projector with dynamic scan angle
JP6845111B2 (ja) 情報処理装置および画像表示方法
US20140256429A1 (en) Image display system and head-mounted display device
JP2008097599A (ja) 模擬視差および視野変化を伴う仮想ウィンドウの方法、システム、およびコンピュータ・プログラムが記録された記録媒体（模擬視差および視野変化を伴う仮想ウィンドウ）
KR102539427B1 (ko) 화상 처리장치, 화상 처리방법, 및 기억매체
TW201708883A (zh) 電子系統、可攜式顯示裝置及導引裝置
JP6126271B1 (ja) 仮想空間を提供する方法、プログラム及び記録媒体
US11720996B2 (en) Camera-based transparent display
JP2014219948A (ja) 表示制御システム、表示制御装置、表示制御プログラム、および表示制御方法
US10792567B2 (en) Terminal device, system, program, and method
JP6474278B2 (ja) 画像生成システム、画像生成方法、プログラム及び情報記憶媒体
US20140232829A1 (en) Image processing system based on stereo image
US20180054568A1 (en) Display control method and program for executing the display control method on computer
JP2010153983A (ja) 投影型映像表示装置および該方法
KR20180051202A (ko) 디스플레이장치 및 그 제어방법
KR20200056721A (ko) 증강현실 기기의 광학 특성 측정 방법 및 장치
JP2012142804A (ja) 表示制御プログラム、表示制御装置、表示制御方法および表示制御システム
US20120327114A1 (en) Device and associated methodology for producing augmented images
WO2018139073A1 (ja) 表示制御装置、第２の表示装置、表示制御装置の制御方法、および制御プログラム
WO2013021864A1 (ja) 表示装置
JP2017208808A (ja) 仮想空間を提供する方法、プログラム及び記録媒体
KR101665363B1 (ko) 가상현실, 증강현실 및 홀로그램을 혼합한 인터랙티브 콘텐츠 시스템

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 12822435

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 12822435

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: JP