WO2007032553A1 - 視聴覚システム - Google Patents

視聴覚システム Download PDF

Info

Publication number
WO2007032553A1
WO2007032553A1 PCT/JP2006/318670 JP2006318670W WO2007032553A1 WO 2007032553 A1 WO2007032553 A1 WO 2007032553A1 JP 2006318670 W JP2006318670 W JP 2006318670W WO 2007032553 A1 WO2007032553 A1 WO 2007032553A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
wall
floor
ceiling
room
Prior art date
Application number
PCT/JP2006/318670
Other languages
English (en)
French (fr)
Inventor
Tetsujiro Kondo
Tetsushi Kokubo
Yasushi Tatehira
Kenji Tanaka
Hitoshi Mukai
Hirofumi Hibi
Kazumasa Tanaka
Akihiko Arimitsu
Junichi Shima
Tsugihiko Haga
Nobuyuki Nakamura
Original Assignee
Sony Corporation
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corporation filed Critical Sony Corporation
Priority to US12/066,663 priority Critical patent/US7980704B2/en
Publication of WO2007032553A1 publication Critical patent/WO2007032553A1/ja

Links

Classifications

    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B21/00—Projectors or projection-type viewers; Accessories therefor
    • G03B21/14—Details
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B21/00—Projectors or projection-type viewers; Accessories therefor
    • G03B21/10—Projectors with built-in or built-on screen
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B37/00—Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe
    • G03B37/04—Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe with cameras or projectors providing touching or overlapping fields of view
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
    • G09F19/00—Advertising or display means not otherwise provided for
    • G09F19/12—Advertising or display means not otherwise provided for using special optical effects
    • G09F19/18—Advertising or display means not otherwise provided for using special optical effects involving the use of optical projection means, e.g. projection of images on clouds
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
    • G09F19/00—Advertising or display means not otherwise provided for
    • G09F19/22—Advertising or display means on roads, walls or similar surfaces, e.g. illuminated
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
    • G09F27/00—Combined visual and audible advertising or displaying, e.g. for public address
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3141—Constructional details thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3141—Constructional details thereof
    • H04N9/3147—Multi-projection systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G06F3/0425—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means using a single imaging device like a video camera for tracking the absolute position of a single or a plurality of objects with respect to an imaged reference surface, e.g. video camera imaging a display or a projection screen, a table or a wall surface, on which a computer generated image is displayed or projected

Definitions

  • the present invention relates to an audiovisual system for viewing content.
  • the present invention is arranged in a room in which at least one surface wall is composed of a wall and an outer wall, and a space between the inner wall and the outer wall, so that the inner wall exhibits at least a video display function or an audio output function. It is related to the audio-visual system that allows the user to view content without disturbing the indoor atmosphere. Background art
  • a projector is applied when enjoying video content on a large screen.
  • a so-called front projector a desired image is displayed by irradiating image light from the front of the screen, and a rear projection projector. Then, the desired image is displayed by irradiating image light from the back side of the screen.
  • the configuration for emitting the image light and the screen are separated, and the configuration for emitting the image light is provided on the ceiling or the like.
  • a rear projection type projector a configuration for emitting image light and a screen are integrally formed. .
  • Japanese Patent Laid-Open No. 5 _ 1 6 8 80 80 discloses a speaker cabinet with a shape and material that matches the audiovisual room, thereby saving space. Ingenuity to secure the desired sound field has been proposed. Disclosure of the invention
  • Multi-screen display by multiple projectors enables high resolution video Can be displayed on the screen.
  • it is necessary to arrange a large number of projectors etc. in the room and the indoor atmosphere is disturbed by these many projectors.
  • even when equipment necessary for viewing video content is simply placed in the room there is a problem that the atmosphere in the room may be disturbed depending on the user and the construction of the room. ,
  • An object of the present invention is to provide an audiovisual system capable of satisfactorily viewing content without disturbing the indoor atmosphere.
  • the concept of the present invention is an audiovisual system for viewing content, wherein the room comprises at least one inner wall and an outer wall arranged with a predetermined interval, and the inner wall and the outer wall of the room.
  • the audio-visual system is characterized in that it is provided in a space between and a device for displaying at least a video display function or an audio output function on the inner wall.
  • the room is composed of an inner wall and an outer wall in which walls on at least one surface are arranged at a predetermined interval.
  • equipment for causing at least the video display function or the audio output function is arranged on the inner wall.
  • the space between the inner and outer walls is sized to allow humans to enter. In this case, when placing equipment in the space between the inner wall and the outer wall and when performing maintenance on the equipment, service personnel etc. can enter the space and work easily.
  • part or all of the inner wall is made up of a rear projection screen (frosted glass, opaque acrylic plate, etc.), and the image is projected onto the screen as equipment placed in the space between the inner and outer walls.
  • Projectors to be included are included.
  • the projector is fixed to the outer wall so that the short side direction is the wall thickness direction, and the image light emitted from the projector in the direction along the outer wall is reflected by the mirror and incident on the screen. .
  • the projector can be stably attached to the strong outer wall.
  • the projector since the projector is fixed to the outer wall so that the short side direction is the wall thickness direction, the space between the inner wall and the outer wall is not so narrow even if the projector is fixed to the outer wall. Also in this case The image light emitted from the projector in the direction along the outer wall is reflected by the mirror and incident on the screen, and the optical path of the image light is bent, so that the distance between the inner wall and the outer wall can be shortened.
  • a part or all of the inner wall constitutes a diaphragm to which a vibrator is attached, and the vibrator is driven based on an audio signal as equipment disposed in a space between the inner wall and the outer wall.
  • a drive device such as an amplifier is included.
  • a room having at least one wall made up of an inner wall and an outer wall, and a device that is arranged in a space between the inner wall and the outer wall and causes the inner wall to perform at least a video display function or an audio output function. It is equipped, and it does not place equipment in the room, and can view content without disturbing the atmosphere in the room.
  • a room has a double ceiling structure consisting of a ceiling and a ceiling arranged at a predetermined interval from the ceiling, or a floor and a floor arranged at a predetermined interval from the floor. It has a double floor structure consisting of When these double ceiling structures or double floor structures are used, equipment such as projectors and amplifiers can be placed behind the ceiling or under the floor.
  • a room is composed of an inner wall and an outer wall in which all walls are arranged at a predetermined interval, and a double ceiling structure consisting of a ceiling and a ceiling arranged at a predetermined interval with respect to the ceiling.
  • a double floor structure comprising an underfloor and a floor arranged at a predetermined interval from the underfloor, and a structure composed of an inner wall, a ceiling, and a floor has a plurality of structures below the underfloor. It is supposed to be supported with legs.
  • a space can be formed in all of the walls, ceiling, and floor, and the structure composed of the inner wall and ceiling floor can be completely independent of the outer wall.
  • a room has an inner wall and an outer wall in which all walls are arranged at a predetermined interval, and a double ceiling structure consisting of a ceiling and a ceiling arranged at a predetermined interval with respect to the ceiling. It has a double floor structure consisting of a floor and a floor arranged at a predetermined interval with respect to the floor.
  • the ceiling and floor are fixed to the outer wall, and the inner wall is fixed to the ceiling and floor. It is supposed to be.
  • a space can be formed in all of the wall, ceiling, and floor, and the inner wall can be stably fixed and held on the outer wall via the ceiling and floor.
  • some or all of the interior walls of a room have a plurality of plates It is assumed that it is made of a member. This makes it possible to change the indoor atmosphere in various ways by exchanging plate-like members with different makeup as required. In addition, it is possible to easily change the size of the screen for rear processing, or change the position of the vibration plate to which the vibrator is attached.
  • a room has a room entrance for entering the interior from the outside through the outer wall and the inner wall, and a space entrance for entering the space between the inner wall and the outer wall is provided on the side of the room entrance. It is supposed to be. As a result, it is possible to easily provide the space entrance without providing the space entrance on the inner wall or the outer wall.
  • at least one surface wall is disposed in a room composed of an inner wall and an outer wall and a space between the inner wall and the outer wall, and the equipment for causing the inner wall to exhibit at least a video display function or an audio output function The equipment is not arranged indoors, and the content can be viewed well without disturbing the indoor atmosphere.
  • FIG. 1 is a perspective view showing a configuration of an audiovisual system having a double wall structure.
  • FIG. 2 is a diagram showing a frame configuration of the inner wall.
  • FIG. 3 is a diagram for explaining the frame structure of the inner wall.
  • FIG. 4 is an enlarged view of a part of the frame.
  • FIG. 5 is a diagram showing the welding state of the horizontal and vertical frames.
  • Fig. 6 is a diagram for explaining how to fix the load direction support to the horizontal frame.
  • FIG. 7 is a diagram for explaining how to fix the load direction support to the horizontal frame.
  • FIG. 8 is a view showing the longitudinal support of the plate unit.
  • FIG. 9 is a view for explaining how to fix the longitudinal support to the frame portion.
  • FIG. 10 is a diagram for explaining how to connect a plurality of frame portions.
  • FIG. 11 is a diagram showing another configuration of the audiovisual system.
  • FIG. 12 is a diagram showing another configuration of the audiovisual system. '
  • FIG. 13 is a diagram for explaining the installation state of the projector.
  • FIG. 14 is a diagram showing the installation state of the projector (comparative example).
  • FIGS. 15A and 15B are diagrams showing another configuration of the audiovisual system.
  • FIGS. 16A and 16B are diagrams showing another configuration of the audiovisual system.
  • FIG. 17 is a diagram showing another configuration of the audiovisual system.
  • Fig. 18 shows the entrance for the room and the entrance for the space.
  • FIG. 19 is a block diagram showing a configuration of an image display system for displaying images on the background image display unit and the bird's eye image display unit.
  • FIG. 2A and FIG. 20B are diagrams for explaining omnidirectional image data.
  • FIG. 21 is a diagram for explaining image distortion.
  • FIG. 22 is a diagram for explaining the correction of the bacterial image distortion.
  • FIG. 23 is a diagram for explaining correction of image distortion.
  • FIG. 24 is a diagram for explaining the vanishing point.
  • FIG. 25 is a flowchart showing the processing procedure of the control unit of the image processing apparatus.
  • Figure is a bird's eye view
  • FIG. 5 is a diagram illustrating a relationship between an image and a display on a background image display unit.
  • FIGS. 28 (A) and 28 (B) are diagrams for explaining the correction of the image display position by the vanishing point.
  • FIG. 29 is a flowchart showing the processing procedure of the control unit of the image processing apparatus.
  • FIG. 30 is a flowchart showing the processing procedure of the control unit of the image processing apparatus.
  • FIG. 31 is a diagram for explaining the input in the display of the background image display unit.
  • FIG. 3 2A and FIG. 3 2B are diagrams schematically showing display examples of the bird's-eye mode and the immersion mode in the bird's-eye image display unit.
  • FIG. 33 is a state transition diagram showing display state transition of the bird's-eye image display unit.
  • Fig. 34 shows the parallel display of all-around images.
  • FIG. 35 is a flowchart showing the processing procedure of the control unit for parallel display of all-around images.
  • FIG. 36 is a diagram for explaining intersection mark detection.
  • Fig. 3'7 is a diagram for explaining the relationship between the sun direction and the shooting direction.
  • FIG. 38 is a diagram showing a change in luminance level depending on the direction of shooting.
  • FIG. 39 is a diagram for explaining the illumination control information.
  • FIG. 40 is a flowchart showing the processing procedure of the control unit related to the processing of the illumination control information.
  • FIG. 41 is a block diagram showing another configuration of the image display system.
  • FIG. 42 is a perspective view showing the inside of the audiovisual room (room) surrounded by the inner wall, ceiling, and floor (irradiating the screen with image light).
  • FIG. 43 is an exploded perspective view showing the structure of the projector moving mechanism.
  • FIG. 44 is a perspective view showing a mirror moving mechanism of the projector.
  • FIG. 45 is a block diagram showing the configuration of the projector. '
  • FIG. 46 ' is a diagram for explaining the movement along the ceiling surface of the projector disposed in the space between the ceiling and the back of the ceiling. '
  • FIG. 47 is a diagram for explaining the movement along the floor surface of the projector arranged in the space between the floor and the floor. .
  • FIG. 48 is a diagram showing an example of projection of image light from a projector arranged in a space between the ceiling and the back of the ceiling.
  • FIG. 49 is a diagram showing an example of projection of image light from a projector arranged in a space between the floor and the floor.
  • FIG. 50 is a perspective view showing the inside of the audiovisual room (room) surrounded by the inner wall, ceiling, and floor (images are irradiated with light on the ceiling and floor).
  • FIG. 3 is a perspective view showing light irradiating a wall and a window.
  • Fig. 5.2 is a perspective view showing the interior of the audiovisual room (room) surrounded by the inner wall, ceiling, and floor (irradiating the image light from the floor to the table surface).
  • FIG. 53 shows the structure of the table irradiated with video light.
  • FIG. 54 is a perspective view showing the inside of the audiovisual room (room) surrounded by the inner wall, ceiling, and floor (irradiating the image light from the ceiling side to the table surface).
  • Fig. 55 is a diagram showing a partial configuration of an audiovisual room system in which an image is displayed on the screen by one projector in two audiovisual rooms (rooms) that are continuous in the vertical direction (vertical direction).
  • FIG. 56 is a diagram showing a partial configuration of an audiovisual room system in which an image is displayed on a screen and a table with one projector in two audiovisual rooms (rooms) continuous in the vertical direction (vertical direction).
  • FIG. 57 is a diagram showing a partial configuration of an audiovisual room system that displays an image with two projectors (rooms) that are continuous in the left-right direction (horizontal direction).
  • Fig. 58 is a perspective view showing the inside of the audiovisual room (room) surrounded by the inner wall, ceiling, and floor (irradiating the image light onto the floor through a band-shaped projection window on the ceiling).
  • Fig. 59 is a perspective view showing the inside of the audiovisual room (room) surrounded by the inner wall, ceiling, and floor (irradiation of the image light to the opposing inner wall through a strip-shaped projection window on the inner wall).
  • Fig. 6 is a diagram showing the configuration of the remote commander (with the projector placed on the floor). '
  • FIG. 61 is a perspective view showing a table constituting the remote commander.
  • FIGS. 6 2 A and 6 2 B are a side view and a bottom view of the table base constituting the table.
  • FIG. 63 is a diagram showing a state in which the screen arranged on the table surface is irradiated with image light from the projector and the image is displayed on the screen.
  • FIG. 64 is a diagram showing another configuration of the remote commander (a projector is disposed in the space between the floor and the floor).
  • FIG. 65 is a diagram showing another configuration of the remote commander (a projector is placed on the floor and a lens for shortening the optical path is used).
  • FIG. 66 shows another configuration of the remote commander (a projector is arranged in a space between the floor and the floor, and the optical path is bent by a mirror). ..
  • FIG. 67 shows another configuration of the remote commander (a projector is placed in a space between the floor and the floor, the optical path is bent by a mirror, and a lens for shortening the optical path is used).
  • FIG. 68 is a perspective view showing the inside of the audiovisual room in which the remote commander using the table is arranged (the liquid crystal film constituting the screen is in a translucent state).
  • FIG. 69 is a perspective view showing the inside of the audiovisual room in which the remote commander by the table is arranged (the liquid crystal film constituting the screen is in a transparent state).
  • FIG. 70 is a diagram showing another configuration of the remote commander (the sensing unit is composed of an imaging device and the projector is placed on the floor).
  • FIG. 71 shows another configuration of the remote commander (the sensing unit is composed of an imaging device, etc., and the projector is placed in the space between the floor and the floor). .
  • FIG. 72 is a diagram showing another configuration of the remote commander (the sensing unit is composed of an imaging device, etc., and also detects dragging of a moving object, etc.).
  • FIG. 73 is a block diagram showing the configuration of image processing humiliation for displaying a bird's-eye view image with a photographed image arranged. , '.
  • FIG. 74 is a diagram for explaining a panoramic image as a photographed image.
  • FIGS. 75A and 75B are diagrams for explaining the processing of the omnidirectional image converter.
  • FIG. 76 is a flowchart showing the procedure of display processing in the control unit constituting the image display apparatus.
  • FIG. 77 is a flowchart showing the procedure of landscape image display processing in the display processing.
  • FIG. 78 is a flowchart showing the procedure of the viewpoint conversion process in the display process.
  • Fig. 79 is a flowchart showing the procedure for scene switching in the display process.
  • Figure 80 shows the scenery image display board when placing a panoramic image on a map image. It is a figure for demonstrating the inclination adjustment by arrangement
  • Fig. 8.1 is a diagram for explaining the extraction of a partial area corresponding to the viewpoint from the panoramic image. '
  • FIGS. 8 2 A and 8 2 B are diagrams showing display examples of images in which panoramic images are arranged on a map image.
  • FIG. 83 is a diagram for explaining the viewpoint moving process for zooming in and zooming out. '
  • FIG. 84 shows a display example of zoom-in and zoom-out in the bird's-eye image display unit.
  • Figures 85A, 85B and 85C show examples of bird's-eye viewpoint movement processing.
  • FIG. 86 is a diagram showing an example of a remote commander in which a bird's-eye image display unit is arranged on a table surface.
  • FIG. 87 ' is a diagram showing an application example to a car navigation device.
  • Fig. 88 shows an example of application to terminal devices such as stations and convenience stores. Best mode for carrying out the invention
  • Figure 1 shows the configuration of the audiovisual system.
  • This audio-visual system is arranged in a space between an audio-visual room (room) 1 consisting of an inner wall 2 and an outer wall 3 on which one wall is arranged at a predetermined interval, and an inner wall 2 and an outer wall 3.
  • a projector 10 for demonstrating at least the video presentation function or audio output function.
  • the audio-visual room 1 is an audio-visual room formed in an ordinary household, and an inner wall 2 is provided on one of the four walls forming one room of an ordinary ordinary household. It has a double structure consisting of an inner wall 2 and an outer wall 3.
  • This audiovisual room 1 is formed by arranging the remaining three walls and the outer wall 3 in the same manner as a wall in a normal house, for example, by placing a decorative board on the wall surface of a building structure. Also on the ceiling and floor, usually It is the same as the ceiling and floor in the house.
  • the inner wall.2 has a vertical frame 4 installed at a fixed pitch between the ceiling and the floor, and then a horizontal frame 5 is horizontally placed between the vertical frames 4 and 4.
  • a framework is formed, and the plate-like units 6A to 6D are arranged and formed on the framework as shown in FIG.
  • plate unit 6A-6D comprises the plate-shaped member.
  • FIG. 3 shows only the frame portion 24 corresponding to the pair of vertical frames 4 and 4.
  • the upper side of FIG. 3 shows a view when the frame portion 24 is viewed from the front in the drawing
  • the lower side of FIG. 3 shows a view when the frame portion 24 is viewed from the upper side in the drawing.
  • the frame portion 24 has a U-shaped cross section on the surface to which the plate unit is fixed.
  • the frame ⁇ portion 24 is composed of six frames 5 1 A to 5.1?.
  • the frames 5 1 E and 5 1 F constitute the vertical frame 4 shown in FIG. 2
  • the frames 5 1 A to 5 1 D constitute the horizontal frame 5 shown in FIG. Yes.
  • Each of these frames 5 1 A to 5 1 F is made of a material such as metal, for example.
  • each of the frames 5 1 A to 5 1 F is provided with a long hole (or a round hole) at a predetermined position, and these long holes are provided for each of the frames 5 1 A to 51 F. It is provided at each predetermined position to be divided. For example, when a part of frame 5 1 (frames 5 1 to 5 1?) Is enlarged, frame 5 1 has a long length in the short direction as shown in the example of FIG. Hole 5 3—:! 5-3-4 are drilled at predetermined intervals.
  • each of the frames 5 1 A to 51 D constituting the horizontal frame 5 is vertically long.
  • Each of the frames 5 1 E and 5 IF constituting the vertical frame 4 is provided with a horizontally long slot.
  • the frames 5 1 E and 5 1 F are formed as L-shaped angle members, and are fixed to each of the straight frames 5 1 A to 5 1 D, for example, by welding.
  • frame part 24 as shown in Fig. 5, straight frame (horizontal frame) 5 1 A and L-shaped frame (vertical frame) 5 1 E are fixed by welding, As shown in the lower part of Fig. 3, the cross-section has a U-shape.
  • the frame portion 24 has a U-shaped cross section, so the frame 5 1 is not only from the front side in the figure but also from the left and right side surfaces. Slots provided in each of E and 5 1 F can be used.
  • FIG. 6 shows a perspective view when the support in the load direction 25 is fixed to the frame 51
  • FIG. 7 shows a view when FIG. 6 is viewed from the upper side.
  • the load direction support 25 is made of a material such as metal, for example. As shown in FIG. 6, the load-bearing support 25 is made of an L-shaped angle material ', and the L-shaped angle material can be fitted into an elongated hole provided in the foam 51. Each of bolts 6 1 A and 6 1 B is provided.
  • the frame 51 is a horizontal frame and corresponds to the frames 51B to 51D.
  • the longitudinal support 26 is formed of a material such as metal, for example.
  • the longitudinal supports 26 (26A, 26B) are formed in a U-shaped cross section and are detachably attached to the frame portion 24.
  • the front / rear direction support 26 is formed by a plate-shaped unit by means of the front / rear direction support 26 A, 26 B using its U-shaped shape.
  • the plate-like unit 36 is supported in the front-rear direction by sandwiching the base 36.
  • each of the longitudinal supports 2 6 A and 2 6 B can be fitted into a slot provided in the frame (vertical frame) 5 1 of the frame portion 2 4, for example.
  • a predetermined number of bolts (not shown) that can be provided are provided, and these bolts are fitted into the elongated holes of the frame 51, and the number of nuts corresponding to the number of bolts (in the example of FIG. 9) It is fixed with nut 7 3 A and nut 7 3 B).
  • Each of the longitudinal supports 2 6 A and 2 6 B also sandwiches the plate-like unit 36 together with the plate-like unit 36 when sandwiching the plate-like mute 36.
  • the buffer material having a predetermined shape in FIG. 9, the buffer material 71A, the buffer material 71B, the buffer material 72A, and the buffer material 72B) is also sandwiched together.
  • Each of the buffer material 7 1 A, the buffer material 7 1 B, the buffer material 7 2 A, and the buffer material 7 2 B is formed of a material such as urethane (sponge) or rubber, for example.
  • Each of the cushioning material 7 1 A and the cushioning material 7 1 B is provided in front of the plate-shaped unit 36.
  • the cushioning material 7 2 A and each of the cushioning material 7 2 B are each of the plate-shaped unit 36. It is installed at the rear to absorb and protect the impact on the plate unit 36.
  • the plate unit 3 6 can also be removed by removing A and 2 6 B from the frame portion 2 4.
  • FIG. 2 In the frame configuration of the inner wall 2 shown in FIG. 2, a predetermined number of the frame portions 24 described above are arranged in the horizontal direction. The case where the frame portions 24 are connected in the horizontal direction will be described with reference to FIG.
  • This figure 10 shows The figure shows a case where the frame portion 2 4 -1, 1 4-2 is viewed from above.
  • each of the frames 5 1 E and 5 1 F which are vertical frames is formed as an L-shaped angle material as described with reference to FIGS. Therefore, the slots provided in each of the frames 51E and 51F can be used not only from the front side but also from the left and right side surfaces.
  • each of the frame parts 2 4 -1, 2 4-2 has a U-shaped cross section on the surface that fixes each of the plate-like units 3 6 A, 3 6 B. Using the U-shaped shape, the frame portions 2 4 -1, 1 4 -2 are connected in the horizontal direction.
  • the joint 8 1 is fixed to the left side of the frame part 2 4-1 and the right side of the frame part 2 4-2 by bolts 8 1 A and nuts 8 1 B.
  • the joint portion 8 1 has the L-shaped frame 5 1 F of the frame portion 2 4-1 and the L-shaped frame 5 1 E of the frame portion 2 4-2 arranged in the horizontal direction.
  • the long holes provided in each of the facing surfaces are fixed with a predetermined number of ports 8 1 A and nuts 8 1 B.
  • the inner wall 2 is composed of a plurality of unit units (plate-like members) that are maintained at the exchange ability.
  • FIG. 1 shows that the entire inner wall 2 is composed of a plate-shaped unit, only a part of the inner wall 2 is composed of a plurality of plate-shaped units that are exchangeably held. May be.
  • the room atmosphere can be changed in various ways by replacing it with a plate-like unit with different makeup as required. It is also possible to easily change the size of the screen for rear projection, or change the position of the diaphragm to which the vibrator is attached. ,
  • the plate-like units 6A to 6D are various functional units related to viewing of video contents, and are arranged in the framework according to the function, design, etc. required for this audiovisual room 1. .
  • three plate units 6 A each serving as a speaker are arranged between the vertical frames 4 at both ends of the inner wall 2.
  • the plate-like unit 6 A responsible for the function of the speaker is appropriately referred to as a speaker unit.
  • the speaker unit 6 A is a vibrator that vibrates when driven by an audio signal. 8 is configured and arranged at a constant pitch on a diaphragm 9 that vibrates due to the vibration of the vibrator 8. As a result, the vibrator 9 is driven based on the audio signal, so that the diaphragm 9 is vibrated to function as a speaker.
  • the speaker 6A holds the diaphragm 9 in a frame (not shown) so as to freely vibrate, thereby ensuring sufficient strength and being arranged on the vertical frame 4.
  • a decorative member made of saran or the like is provided on the front side surface of the diaphragm 9.
  • a plate-like unit 6B responsible for a simple blindfold function and a plate-like unit 6C responsible for a screen function are disposed between the inner vertical frames 4 and 4 of the speaker unit 6A.
  • the plate unit responsible for this blind function is called a blank unit
  • the plate unit 6 C responsible for the screen function is called a screen unit.
  • the blank unit 6 B is formed of a plate material such as a gypsum board with makeup on the front side surface by assuming a simple blindfold function.
  • the screen unit 6 C functions as a screen of the rear projection type projector, and is formed by reinforcing the frame material applied to the screen of the rear projection type projector by the frame. Specifically, it is formed by being held by a frame body such as frosted glass, opaque clay, or rill plate.
  • the projector 10 is arranged on the outer wall 3 positioned on the back surface of the screen unit 6C corresponding to the screen unit 6C. As a result, the audiovisual room 1 is created so that the video of various video contents can be viewed on the screen unit 6C.
  • a plank unit 6B and a plate unit 6D that functions as an operation unit of the video equipment are arranged between the vertical frames 4 and 4 following the screen unit 6C. Is done.
  • the plate unit that functions as the operation unit is referred to as an operation unit.
  • the operation unit 6D is provided with a bay 11 on which video equipment and the like are arranged.
  • the bay 11 includes, among video devices provided in the audio-visual room 1, a device that needs to accept a user operation directly, such as a DVD (Digital Versatile Disc) that requires a recording medium to be replaced. ) Players, video tape recorders, etc. will be provided.
  • Bay 1 1 is required for remote control of each video equipment.
  • a receiving unit for receiving the remote control # from the remote commander is provided.
  • the distance D between the inner wall 2 and the outer wall 3 is set to a sufficient distance for humans to enter the space between the inner wall 2 and the outer wall 3 to install and maintain various video equipment.
  • One of the blank units 6 B is installed so that it can be removed from the front so that an intrusion port for humans to enter can be formed in the space between the inner wall 2 and the outer wall 3.
  • the wall of one of the four walls of the audiovisual room 1 is formed by an inner wall 2 and an outer wall 3 arranged at a predetermined interval, and the screen unit 6 C And a speaker unit 6A.
  • the projector 10 and the speaker unit 6 A are provided with video content obtained from video equipment (including equipment related to a recording medium placed on the pay 11) disposed in the space between the inner wall 2 and the outer wall 3. Driven by the video signal and the audio signal. As a result, an image is projected from the projector 10 onto the screen unit 6 C to display an image, and sound is output from the speaker unit 6 A.
  • one of the four walls is formed by an inner wall 2 and an outer wall 3 having a space between them;
  • the speaker unit 6 A is placed, and the projector 10 and other equipment related to video content (equipment) are placed in the space between the inner wall 2 and the outer wall 3.
  • Equipment related to the content is not arranged, and the content can be viewed well without disturbing the indoor atmosphere.
  • the inner wall 2 and the outer wall 3 are arranged at a predetermined interval with a size that allows humans to enter, so that various video devices are placed between the inner wall 2 and the outer wall 3.
  • the inner wall 2 is formed by a plurality of plate material units, and a predetermined number of plate units constitute the speaker unit 6 A.
  • the function of the speaker is included. Therefore, this view In the audiovisual system, the audio of the video content can be viewed without arranging a speaker in the audiovisual room 1 separately, which can further prevent the room atmosphere from being disturbed. . In this case, it is also possible to provide a high-quality sound by dividing the inner wall related to the spin force into a plurality of parts.
  • the inner wall 2 is formed by a plurality of plate-shaped units that are held in an exchangeable manner.
  • the atmosphere of the audiovisual room can be changed in various ways, and the screen size or speaker position can be easily changed.
  • the plate unit can be removed and used as an entrance to the space.
  • Fig. 11 shows another configuration example of the audiovisual system.
  • This audiovisual system is arranged in a space between an audiovisual room (room) 21 consisting of an inner wall 2 and an outer wall 3 in which two corresponding walls are arranged at a predetermined interval, and an inner wall 2 and an outer wall 3,
  • the inner wall 2 is equipped with equipment such as a projector 10 for demonstrating at least a video display function or an audio output function.
  • the parts corresponding to those in FIG. 1 are denoted by the same reference numerals.
  • two opposing surfaces of the four surfaces' are formed by the inner wall 2 and the outer wall 3 having a space between them.
  • one inner wall 2 is formed by the speaker unit 6 A and the blank unit 6 B, and the speaker is installed in the space between the inner wall 2 and the outer wall 3 on one side.
  • the other inner wall 2 is formed by a screen unit 6 C, a blank unit 6 B, and a spin force: Etto 6 A, and the space between the inner wall 2 and the outer wall 3 on the side where the screen cut 6 C is provided.
  • a screen unit 6 C a blank unit 6 B
  • a spin force: Etto 6 A the space between the inner wall 2 and the outer wall 3 on the side where the screen cut 6 C is provided.
  • video equipment 2 arrange video equipment 2 2.
  • audio data is transmitted from the video equipment 22 on the side where the screen unit 6 C is provided to the amplifier 23 by wireless communication such as B 1 uoteo t h.
  • the audiovisual system shown in FIG. 11 is configured in the same manner as the audiovisual system shown in FIG. 1 except for the configuration described above. Like the audio-visual system shown in Fig. 11, two opposing walls of the four walls are formed by the inner wall 2 and the outer wall 3. However, the same effect as the audiovisual system shown in FIG. 1 can be obtained. In this case, a sound field with a sense of reality can be obtained by providing a speaker on the back side of the screen.
  • Fig. 12 shows another configuration example of the audiovisual system.
  • a large screen screen unit 6 C is provided on the inner wall 2 of the audiovisual room 31, and a plurality of projectors 10 are disposed on the back of the large screen screen unit 6 C.
  • a multi-screen display by multiple projectors 10 displays high-angle video on a large screen.
  • each projector 10 is fixed to the outer wall 3 so that the short side direction is the wall thickness direction. Thereby, even if the projector 10 is fixed to the outer wall 3, the space between the inner wall 2 and the outer wall 3 is not so narrow.
  • each projector 10 emits image light (emitted light used for image display) in the direction taken by the wall surface.
  • This image light is reflected by the mirror 32 disposed on the optical path, and the image light is irradiated onto the screen unit 6C.
  • the optical path of the image light is bent by the mirror 3 2, the distance between the inner wall 2 and the outer wall 3 is shortened as shown in FIG. The screen can be displayed.
  • the mounting direction of the projector 10 is not limited to the upward direction, and may be provided in the downward direction, the horizontal direction, or the like.
  • the dimensions shown in Fig. 1 3 and Fig. 1 4 are examples showing the distance between the inner wall 2 and the outer wall 3 necessary for displaying a screen with a certain size.
  • the audiovisual system shown in FIG. 12 is configured in the same manner as the audiovisual system shown in FIG. 1 except for the configuration described above. According to the audiovisual system shown in FIG. 12, the same effects as the audiovisual system shown in FIG. 1 can be obtained.
  • the image light is emitted from the projector 10 in the direction along the outer wall 3, the image light is reflected by the mirror 3 2 toward the screen 6C.
  • the distance between the inner wall 2 and the outer wall 3 can be shortened to display a large screen.
  • the projector 10 can be stably mounted on the strong outer wall 3, and the space between the outer wall 3 and the inner wall 2 is not so narrow, so that maintenance is possible. Etc. can be improved.
  • FIG. 15A shows a perspective view
  • FIG. 15B shows a side view
  • all four walls of the audiovisual room 4 1 are formed by the inner wall 2 and the outer wall 3, and a space is formed so that a person 5 can enter.
  • the audiovisual room 4 1 has a double ceiling structure in which the ceiling 2 A is arranged with a predetermined interval from the ceiling 3 A, and the floor 2 B is arranged with a predetermined interval with respect to the under floor 3 B. It has a double floor structure.
  • a rectangular parallelepiped structure including an inner wall 2, a ceiling 2A, and a floor 2B is supported by a plurality of legs 4 2 on the floor 3B. That is, the floor 2 B is supported by the plurality of 0 legs 4 2 below the floor 3 B, the four inner walls 2 are held by the floor 2 B, and the ceiling 2 A is held by the four inner walls 2.
  • the rectangular parallelepiped structure composed of the inner wall 2, the ceiling 2A, and the floor 2B is supported by the lower floor 3B with a plurality of legs 4 2.
  • the audiovisual room 41 of ⁇ has, for example, a screen unit 6 C and a speaker unit 6 A on the inner wall 2 on one side, and a speaker unit 6 A on the remaining inner wall, floor, and ceiling. As a result, it is created so that the video content can be viewed through the round sound field. ⁇
  • the audiovisual system shown in FIGS. 15 and 15B is configured in the same manner as the audiovisual system shown in FIG. 1 except for the configuration described above, and can obtain the same operational effects. Moreover, since it has a double ceiling structure or a double floor structure, it is possible to arrange equipment such as a projector and an amplifier under the ceiling or under the floor. • A rectangular parallelepiped structure consisting of an inner wall 2, a ceiling 2A, and a floor 2B is supported by a plurality of legs 4 2 with respect to the floor 3B. All of the walls, ceiling, and floor In addition, the space can be formed easily and reliably, and the structure composed of the inner wall, ceiling and floor can be completely independent of the outer wall.
  • FIG. 16A shows a perspective view
  • FIG. 16B shows a side view
  • all four walls of the audiovisual room 51 are formed by the inner wall 2 and the outer wall 3, and a space is formed so that humans can enter.
  • the audiovisual room 5 1 has a ceiling 2 A on the back of the ceiling 3 It has a double ceiling structure with a predetermined spacing from A
  • floor 2 B has a double floor structure with a predetermined spacing from under floor 3 B.
  • the ceiling 2 A and the floor 2 B are fixed to the outer wall 3, and the inner wall 2 is fixed to the ceiling 2 A and the floor 2 B.
  • a screen unit 6C and a speaker force unit 6A are provided on the inner wall 2 of one surface, and a speaker unit 6A is provided on the remaining inner wall surface, floor surface, and ceiling surface, As a result, the video content can be viewed through the surround sound field.
  • the audiovisual system shown in FIGS. 16A and 16B is configured in the same manner as the audiovisual system shown in FIG. 1 except for the configuration described above, and can obtain the same operational effects. Moreover, since it has a double ceiling structure or a double floor structure, it is possible to arrange equipment such as a projector and an amplifier under the ceiling or under the floor. Also,
  • FIG. 17 shows another example of the structure of the audiovisual system.
  • the audiovisual room 61 in this audiovisual system has a ceiling similar to the audiovisual rooms 4 1 and 5 1 of the audiovisual system shown in FIGS. 15A, 15B, 16A and 16B.
  • the floor and walls have a double structure. As shown in FIG.
  • the audio-visual room 61 has a room entrance 62 for entering the inside through the outer wall 3 and the inner wall 2 from the outside.
  • the user enters the inside of the audiovisual room 61 through a door 63 provided on the inner wall 2 through a tunnel-like passage constituting the room entrance 62.
  • a space entrance (door) 64 for entering the space between the inner wall 2 and the outer wall 3 is provided on the side surface of the room entrance 62, that is, the side surface of the tunnel-shaped passage.
  • a sound absorbing material by the curtain 65 is provided in the space between the inner wall 2 and the outer wall 3, and this is generated in the speaker unit 6C.
  • the sound wave is reflected by the outer wall 3 so that the sound reproduction by the speaker unit 6 C is not adversely affected.
  • the outer wall 3 Inside, the mat-like glass wool may be affixed, and various members and arrangement methods can be widely applied.
  • the audiovisual system shown in FIG. 17 is configured in the same manner as the audiovisual system shown in FIG. 1 except for the configuration described above, and can obtain the same operational effects.
  • the space entrance 6 4 is not provided in the inner wall 2 or the outer wall 3, but the space entrance 6 4 can be easily provided. It is possible to easily enter the space between the outer walls 3.
  • the present invention is not limited to this.
  • the wall, ceiling, and floor that make up the audiovisual room (room) can have a double structure as necessary, and the same effects as those in the above configuration example can be obtained.
  • FIG. 19 shows a configuration example of an image display system 101 for displaying an image on the inner wall 2 constituting the audiovisual room in the audiovisual system described above.
  • the image display system 10 1 includes a data processing device 10 2, an image display device 1 1 1, and an illumination 1 2 0.
  • the image display device 1.1 1 includes a media database 1 1 2, a sound field processing unit 1 1 3 C, an image processing unit 1 1 3 B, a display information selection scale unit 1 1 3 A, and an illumination information selection unit.
  • the sound field processing unit 1 1 3 C, the image processing unit 1 1 3 B, the display information selection unit 1 1 3 A, the illumination information selection unit 1 1 3 E, and the illumination information generation unit 1 1 3 D are respectively control units.
  • 1 1 3 is composed.
  • the data processing device 1 0 2 supplies the all-around image data D 3 to the image display device 1 1 1.
  • the data processor 1 0 2 generates omnidirectional image data D 3 from the image data D 1 based on the imaging result acquired in advance at the imaging point.
  • imaging results are acquired in advance at a predetermined shooting point, for example, by panning the imaging device (camera) by a fixed angle, thereby making it difficult to display on a single screen.
  • the imaging result of the wide-angle image that captured the range is To be acquired.
  • the imaging result of this wide-angle image can be seen over the entire surrounding image at this imaging point. Applies.
  • the rotation axis and the like related to the pan of the imaging device are precisely adjusted so that the imaging device returns correctly to the initial position. This also compares the imaging result taken at the starting position in this way with the imaging result taken after rotating once and returning to the initial position, and this comparison result does not return correctly to the original position. In such a case, the image is repeated by adjusting the rotation axis again. In this shooting, the exposure is set to be optimal for each imaging result by adjusting the auto iris.
  • the sound at this shooting point is recorded by the surround method for a certain time at the time of obtaining the imaging result by the still image.
  • this surround system for example, a 5.1 channel surround system is applied. At this time, this voice is recorded on the basis of a certain direction by a plurality of fixed microphones.
  • this image display system 1 o these images and sound are recorded at a plurality of preset points, and this data is recorded and recorded : sound image data D l and sound data D 2 are Provided on 1 0 2.
  • the data processing device 102 is formed by, for example, a computer capable of image processing, and the image data D 1 acquired in this way can be easily processed by the image display device 11 1 1.
  • the all-around image data D 3 is related to a plurality of images (hereinafter referred to as “partial images”) obtained by dividing the periphery of each photographing point by a predetermined angle range.
  • the all-around image data D3 is formed by a set of image files by this partial image force SJPEG (Joint Photographic Coding Experts Group) or the like.
  • FIG. 20B shows an image based on the original image data D1
  • the frame indicated by the symbol FL is a single screen displayed by the image display system 1001. It shows the size.
  • the data processing device 1 0 2 has a plurality of images shot at each shooting point. After combining the imaging results to generate an all-around image, a partial image is cut out, thereby generating all-around image data D3. In addition, the azimuth information of each partial image is set to generate the omnidirectional image data D3 so that the azimuth of each partial image at the photographing point can be detected.
  • the image obtained by the imaging device in this way is obtained by capturing light from a subject incident through a diaphragm represented by a pinhole of a pinhole camera on a flat imaging surface formed by an imaging device.
  • the figure distortion increases in the peripheral part of the image.
  • the data processing device 102 removes this image distortion from the image based on the image data D1, and then generates an all-around image and cuts out a partial image. Therefore, as shown in FIG. 21, the data processing device 102 projects an image based on the imaging result onto the imaging screen 10 4 with a plane corresponding to the imaging surface, and the imaging device 10 5 Projecting the image projected on the imaging screen 1 0 onto the virtual imaging screen 1 0 6 where image distortion can be removed as a way to view the projected image on the imaging screen 10 4 Is performed by an arithmetic process, thereby removing this kind of image distortion.
  • the data processor 1 0 2 defines the virtual imaging screen 1 0 6 by defining a curved surface only in the longitudinal direction '(horizontal direction) of the image. Execute arithmetic processing. As a result, the virtual imaging screen 10 6 is formed in a shape in which a cylinder is partially cut by a plane parallel to the axis.
  • the data processing apparatus 102 assumes that the imaging screen 104 and the virtual imaging screen 106 are in contact with each other at the center, for example.
  • the coordinates of the viewpoint be (0, 0, 1a).
  • the data processing device 10 2 maps each pixel according to the imaging result to the imaging screen 10 4, and connects each pixel to the point of the viewpoint (0, 0, — a). Detect the XY coordinates of the intersection where the straight line crosses the virtual imaging screen 10 6. The data processor 10 0 2 corrects the position of each pixel by replacing the XY coordinate value of each pixel on the imaging screen 10 4 with the XY coordinate at this intersection, thereby executing the image distortion removal process. .
  • this series of processing may be executed by processing using a polar coordinate system instead of processing using a three-dimensional coordinate system. .
  • the data processing apparatus 10 2 corrects the image distortion in this way and generates an all-around image (hereinafter referred to as “all-around image”), then cuts out the partial image, and the image data of each partial image Are compressed to generate a plurality of image data files. Also, the image data file of the partial images is collected for each photographing point to generate the all-around image data D3. At this time, the audio data D 2 acquired at each photographing point is added to generate the all-around image data D 3. In this case, the audio data D 2 may be a separate file in association with the all-around image data D 3.
  • the data processing device 102 detects the vanishing point for each omnidirectional image data D3, and adds the Y coordinate value of this vanishing point to the omnidirectional image data D3.
  • the vanishing point is the straight line L l on the screen plane corresponding to the parallel line when projected in parallel on the image plane by perspective transformation on the image plane. L 2,..., L n,.
  • the vanishing point is an “infinitely far point” on a planar image on which a space having a depth is actually projected, and a line parallel to the depth direction (for example, an image of a room, its The extension of the ridge line's extension 'line and the surface extending in the depth direction (for example, in the case of a room image, each plane corresponding to the floor, wall and ceiling extending in the depth direction) converges to infinity. It is recognized as a point.
  • the straight line drawn horizontally in the image from the vanishing point is the horizon.
  • the data processor 1 0 2 processes each image acquired at one shooting point to detect parallel lines in the depth direction, detects the Y coordinate value of the intersection of these parallel lines, and the coordinate value of the vanishing point And Note that the image processing related to the detection of parallel lines is executed by detecting feature points and statistically processing them.
  • the data processor 1 0 2 has a set of parallel lines. For each match, the Y coordinate value of the vanishing point is detected and statistically processed, and one ⁇ coordinate value is detected in one image.
  • the ⁇ coordinate value related to the vanishing point is detected for each of the all-round images. A value is added to each omnidirectional image data D3.
  • the ⁇ coordinate value of the contact point between the imaging screen described above with respect to Fig. 2 1 and the virtual imaging screen 1 0 6 is set to the ⁇ coordinate value of the vanishing point detected in this way. It is done.
  • the statistical processing related to the series of processing is, for example, averaging processing.
  • the data processing device 102 when the data processing device 102 generates the all-around image data D3 from the partial images in this way, The gradation in each image is corrected so as to correct the difference in aperture between the plurality of images, thereby forming a partial image based on the all-around image data D3 from an image photographed under a constant aperture condition.
  • the data processor 1 0 2 detects the maximum value and the minimum value of the pixel values in all the images used for the generation of the all-around image data, and the maximum value and the minimum value of these pixel values have a dynamic range.
  • the tonal image of each image is corrected so that the entire surrounding image data is captured under constant aperture conditions.
  • the entire surrounding image data can be used in place of the post-gradation correction of multiple images taken by such automatic aperture control.
  • the imaging result used for generating the image may be captured with a constant aperture.
  • the image display system 1 0 1 supplies the all-around image data D 3 generated in this way to the image display device 1 1 1 together with the corresponding bird's-eye image data D 4 and records it in the media database 1 1 2.
  • the bird's-eye view image data D4 is image data of the bird's-eye view image.
  • the bird's-eye view image is an image of the shooting location (location) related to the acquisition of the all-around image data D 3 as seen from above.
  • the bird's-eye view image can be used to confirm the shooting location related to the acquisition of the all-around image data D 3 by using a mark, etc.
  • D 3 is made searchable. Specifically, for example, a bird's-eye view image is created by placing a mark at the shooting location related to acquisition of the all-around image data D3, and link information for identifying the corresponding all-around image data D3 includes each mark. Created with set to.
  • All-around image data D3 and bird's-eye image data D4 are read from various recording media such as optical disks, magnetic disks, memory cards, etc., and supplied to the image display device 1 1 1 or downloaded via a network such as the Internet. Supplied to image display device 1 1 1.
  • the media database 1 1 2 is formed by, for example, a large-capacity hard disk device, and records and holds these all-around image data D 3 and bird's-eye image data D 4 under the control of the control unit 1 1 3.
  • the stored all-around image data D3 and bird's-eye image data D4 are reproduced and output.
  • the lighting control information D 5 relating to the lighting control output from the control unit 1 13 is recorded and held, and the held lighting control information D 5 is generated and output to the control unit 1 13.
  • the background image display unit 1 1 5 is a display device with a large screen, and displays an image based on the video data D V 1 output from the control unit 1 1 3.
  • the background screen display unit 1 1.5 includes, for example, an inner wall 2 (screen unit 6 C) and a projector 10 that constitute the audiovisual system described above.
  • this video data DV 1 is video data generated from the all-around image data D 3, so that the image display device 1 1 1 can be connected to the user by the background image display unit 1 1.5.
  • a landscape image of the desired shooting point in the desired direction is displayed.
  • the remote commander 1 1 6 displays a bird's-eye view image and notifies various control operations related to the bird's-eye view image and the like to the control unit 1 13 by wireless communication or the like. That is, the bird's-eye view image display unit 1 1 7 is formed by a liquid crystal display panel arranged in the remote commander 1 1 6, and displays a bird's-eye view image related to the shooting point of the image displayed on the background image display unit 1 1 5. .
  • the touch panel 1 1 8 notifies the control unit 1 1 3 of various user operations by the bird's-eye view image display unit 1 1 7.
  • the remote commander 1 16 is formed, for example, on the surface of a table arranged in the audiovisual room as will be described later.
  • the lighting controller 1 1 9 is a control means for controlling the lighting 1 2 0 of the room (visual auditory room) in which the image display device 1 1 1 is arranged. According to the instructions of the control unit 1 1.3, the lighting 1 2 0 Variable brightness and color temperature. '
  • the control unit 1 13 is a computer that executes a series of processes related to the image display device 1 1 1, and controls the ft operation of each unit by executing a program recorded in a memory (not shown).
  • the control unit 1 1 3 configures various function blocks by executing this program.
  • the program related to the processing of the control unit 1 1 3 is provided by being installed on the image display device 1 1 1 in advance, but for such prior installation. Instead, the program may be provided by being recorded on various recording media such as an optical disk, a magnetic disk, and a memory card, or may be provided by downloading via a network such as the Internet.
  • the display information selection unit 1 1 3 A selects the image to be displayed in the bird's eye image display unit 1 1 7 and the background image display unit 1 1 5 according to the notification from the remote commander 1 1 6 As a result, the media database 1 1 2 is instructed to output image data D 3 and D 4 and audio data D 2 ⁇ .
  • the image processing unit 1 1 3 B processes the image data D′ 3 and P4 output from the media database 1 1 2 to drive the bird's-eye image display unit 1 1 7 and the background image display unit 1 1 5 Video data DV 2 and DV 1 are generated and output to the bird's-eye image display unit 1 1 7 and the background image display unit 1 15.
  • the sound field processing unit 1 1 3 C processes the audio data D 2 output from the media database 1 1 2 and drives the speaker 1 2 2 for generating a surround sound field.
  • the speaker 1 2 2 is constituted by the inner wall 2 (speaker unit 6 A) in the audiovisual system described above.
  • the sound field processing unit 1 1 3 C changes the localization position of the sound image based on the audio data D 2 according to the image displayed on the background image display unit 1 15, and thereby the background image display unit
  • the speaker 1 2 2 is driven by the localization of the sound image corresponding to the orientation of the image displayed in 1 1 5. Note that such a change in the localization position of the sound image is performed by, for example, changing the localization position greatly by switching the channel of each audio signal that drives the speaker 12 2, and then performing addition / subtraction processing between these channels. Change the position finely To be executed.
  • Lighting information generation unit 1 1 3 D processes the image data D 3 output from the media database 1 1 2 and generates lighting control information D 5 necessary for controlling the lighting 1 2 0 to create a media database. Record in 1 1 2.
  • the lighting information selection unit 1 1 3 E generates the background from the lighting control information D 5 generated by the lighting information generation unit 1 1 3 D and recorded in the media database 1 1 2 according to the notification from the remote commander 1 1 6
  • the lighting control information D 5 corresponding to the image displayed on the image display unit 1 1 5 is selectively acquired, and the operation of the lighting controller 1 1 9 is controlled by the acquired lighting control information D 5.
  • FIG. 25 is a flowchart showing a processing procedure related to the basic processing of the control unit 1 1 3.
  • the control unit 1 1 3 starts this processing procedure and moves from step SP 1 to step SP 2, where the recording from the media database 1 1 2 starts.
  • the selection of the bird's-eye view image provided for the table is accepted by the user's selection on this menu screen, and the bird's-eye view image data D 4 of this bird's-eye view image is acquired from the media database 1 1 2.
  • the control unit 1 13 displays the bird's-eye image 1 31 on the bird's-eye image display unit 1 17 using the obtained bird's-eye image data D 4 as shown in FIG. 26 (A 1).
  • the shooting point of the all-around image data D3 is indicated by marks M1 to M5.
  • the marks M1 to M5 are represented by circles, and the letters "A" and "B" are the actual buildings where the letters are displayed. It shall indicate an object.
  • the control unit 1 1 3 moves to step SP 3 where it detects the operation of the touch panel 1 1 8 by the user and selects these marks M 1 to M 5 by the user's selection of the marks M 1 to M 5. It accepts which of the shooting points represented by M 5 the image taken at the shooting point is to be displayed on the background image display unit 1 15. Further, by accepting the display direction, it is accepted whether the image obtained by viewing which direction is displayed on the background image display unit 115 at the selected photographing point. As shown in Fig. 26 (A 1), when the user selects a mark, the control unit 1 1 3 displays a mark MK indicating that the orientation has been selected on the selected mark.
  • This mark MK can be changed by operating the touch panel 1 1 8 using the and the input of these shooting locations and orientations is accepted.
  • FIG. 26 (A 1) in this embodiment, a camera design is applied to the mark MK indicating this orientation and selection.
  • control unit 1 1 3 moves to step SP 4 and the corresponding all-around image data D by the link information set in the selected mark M l. Get 3 from the media database 1 1 2.
  • step SP5 it was set in step SP3 from a plurality of partial images based on the acquired all-around image data D3 (Fig. 27 (A)). Select and connect partial images corresponding to the orientation (Fig. 27 (B1)), cut out the image for one screen according to the orientation set in step SP 3 from the joined images, and background image Displayed on display 1 1 5 (Fig. 27 (C1)). It should be noted that the distortion correction processing described above with reference to FIGS. 21 to 23 may be executed together with the processing in step SP 5 instead of the creation of the all-around image data D 3. .
  • the control unit 1 1 3 displays the background image display unit 1 1 as shown in FIG.
  • the control unit 1 1 3 compares the eye height when viewing the user's image in the background image display section 1 1 5 set by the service person and the ⁇ coordinate value of the vanishing point set in the all-around image data 3
  • the background image display section 1 1 5 is displayed with the display position corrected so that the position of the vanishing point of the displayed image is at the height of the user's eyes.
  • the control unit 1 1 3 displays the image in this way so that the user can appreciate the scenery without feeling uncomfortable.
  • control unit 1 1 3 moves to step SP 6 and starts the reproduction of the audio data related to the all-around image data D 3, and the speaker 1 2 2 Drive.
  • the control unit 1 1 3 causes the background image display unit 1 1 5 to perform processing by the function block of the sound field processing unit 1 1 3 C described above. Set the sound field by changing the localization position of the sound image so that the sound is localized at the position corresponding to the displayed image.
  • the control unit 1 1 3 displays the scenery that the user sees on the background image display unit 1 1 5 when the user stands in the direction indicated by the user at the location indicated by the user in the bird's-eye view image.
  • images such as those shown in Fig. 26 (A2) are reproduced by playing various sounds heard by the user with a sound power of 1 2 2. Display on background image display 1 1 5
  • control unit 1 1 3 moves to step SP 7 and whether or not the user has instructed to change the orientation by operating the touch panel 1 1 8. to decide. If a negative result is obtained here, the control unit 1 1 3 moves to step SP 8 and checks whether the user selects another mark M 1 to M 4 by operating the touch panel 1 1 8 and the user has instructed the movement. Judge whether or not. If a negative result is obtained here, the control unit 1 1 3 returns to Step S P 7. '
  • step SP 7 the control unit 1 1 3 waits for a direction change / movement instruction by the user, and when the direction change is instructed by the user, an affirmative result is obtained in step SP 7.
  • step SP 1 1 Fig. 29
  • the control unit 1 1 3 is shown in Fig. 27 (A).
  • step SP 1 2 the processing by the function block of the sound field processing unit 1 1 3 C is switched, and the sound image formed by the speaker 1 2 2 is linked to the scrolling in the background image display unit 1 15. Move the position gradually and return to step SP 7 in Fig. 25. Also, at this time, as shown in Fig. 26 (B1), the mark MK indicating the direction can be changed to be interlocked with the scrolling in the background image display section 1 15 by comparison with Fig. 26 (A1). To do. This example of Fig. 26 (B 1) Then, the background image display unit 1 15 displays the distant view of the building indicated by the symbol B in FIG. 26 (B 2).
  • step SP 8 when movement is instructed by the user, an affirmative result is obtained in step SP 8, and the control unit 1 13 moves from step SP 8 to step SP 13 (FIG. 30).
  • the control unit 1 1 3 detects the shooting point (position) of the moving destination based on the marks M 1 to M 5 instructed by the user, and then in step SP 1 4, step SP 1 1 and step SP 1 In the same way as described above for 2, change the display of the background image display section 1 15 and the sound field setting to the direction of the shooting point of the moving destination. '
  • step S P 15 the entire surrounding image data D 3 is acquired from the media database 1 1 2 for this destination in the same manner as described above for step S P 4. Further, in the subsequent step SP 16, in the same manner as described above for step SP 5, an image related to display at the movement destination is generated from the entire surrounding image data D 3 acquired from the media database 1 12. To do.
  • step SP 1 7 the control unit 1 1 3 gradually zooms in on the image displayed in the background image display unit 1 1 5 while displaying the previous display by cross-fade in step SP 1 5. Switch to the generated image. Instead of such zoom-in and cross-fade transitions, transitions by various effects such as mosaic can be applied as necessary.
  • step SP 18 the sound of the audio data D 2 corresponding to the destination is obtained by cross-fading or fading-in after fading out in conjunction with such display switching. The sound field by the speaker 1 2 2 is switched to the field, and the process returns to step SP 7.
  • the control unit 1 1 3 allows the user to set the shooting point by the mark M l as shown in Fig. 2 6 (B 1).
  • the target when moving from place to place, for example, the target may be caught in a direction other than the front.
  • the process of turning to the destination is omitted in the series of processes for switching the display of the background image display unit 1 15 so as to move in the direction of the destination.
  • the image provided after the movement may be an image according to the direction immediately before the movement, or an image according to the direction of the target instructed by the user.
  • the scrolling process in the moving direction may be executed together with the zooming process. Further, regarding the transition of the display at the time of switching the display, it is also possible to change the display to a bird's-eye view image.
  • FIG. 31 is a schematic diagram for explaining the display of the background image display unit 115 when the user instructs transition on the background image.
  • the control unit 1 1 3 is a mark corresponding to the marks M 1 to M 5 displayed on the bird's-eye image for a certain period of time.
  • N 4 is displayed on the image by the background image display unit 1 1 5.
  • the marks N 1 to N 4 related to the display of the background image display unit 1 1 5 are marked on the all-around image data D 3 by the data processor 1 0 2 when the all-around image data D 3 is generated. Display information from 1 to N4 is added and displayed based on this position information.
  • control units 1 1 3 change the display positions of the marks N 1 to N 4 on the image based on the all-around image data D 3. You can calculate and display it.
  • the control unit 1 1 3 displays the marks N 1 to N 4 in this way, the menu for switching the focus of these marks N 1 to N 4 on the bird's-eye view image display unit 1 1 7, the menu for determination, and the left and right Displays a menu that prompts you When one of the marks N 1 to N 4 is selected by one operation, the marks N 1 to N 4 are displayed in the same manner as described above with reference to FIGS. 25, 29, 30. Acquires all surrounding image data D3 and switches the display of the background image display section 1 1 5.
  • the display selected up to now is zoomed while scrolling so that the display position of the mark selected by the user is in the center of the screen, and the marker selected by the user through the crossfade is selected.
  • the display selected up to now is zoomed while scrolling so that the display position of the mark selected by the user is in the center of the screen, and the marker selected by the user through the crossfade is selected.
  • the image after the display switching at this time the image is displayed according to the direction of viewing the shooting point related to the mark selected by the user from the shooting point related to the original image.
  • control unit 1 1 3 displays the entire surrounding image force as shown by the arrows C 1 and C 2. Is gradually changed in the direction instructed by the user, thereby scrolling the display on the background image display unit 1 15. In these processes, the control unit 1 13 also changes the sound field so as to correspond to the display in the background image display unit 1 15, thereby ensuring a sense of reality.
  • control unit 1 1 3 This allows the control unit 1 1 3 to select the destination on the displayed image without changing the current position from the bird's-eye view, and to change the direction and experience the walk-through. 0 to improve the sense of immersion
  • FIGS. 25, 29, and 30 it has been described that only the bird's-eye image is displayed on the bird's-eye image display unit 1 17, but the bird's-eye image is displayed.
  • the bird's-eye view image display unit 1 shifts to a state in which an image is displayed (hereinafter referred to as “immersion mode”), and when the user performs a return operation in the immersion mode, the user enters the bird's-eye view mode again.
  • the display state of 17 may be freely switchable between the bird's-eye mode and the immersive mode described above.
  • Fig. 3 2 A shows a display example of the bird's-eye image display unit 1 1 7 in bird's-eye view mode.
  • Fig. 2B shows a display example of the bird's eye view image display section 1 1 7 in the immersive mode.
  • a bird's-eye view image is displayed on the bird's-eye view image display section 1 17.
  • Rectangular display areas D1 to D5 are provided corresponding to the shooting points Ml to M5 of the all-around image in this bird's-eye view image.
  • these display area display areas D1 to D5 are blank, but in reality, images in the current orientation at the respective points are displayed in the respective display areas. '
  • the bird's-eye view image display section 1 1 7 displays direction selection buttons B L and B R superimposed on the bird's-eye view image.
  • the user can arbitrarily select the direction by operating the selection buttons B L and B R on the touch panel 1 1 8.
  • the orientation of the bird's-eye image displayed on the bird's-eye image display unit 1 17 is changed according to the selection of the orientation, and the images displayed in the display areas D 1 to D 5 are also changed correspondingly.
  • the change of the bird's-eye view image can be achieved by making the bird's-eye view image data D 4 read from the media database 1 1 2 according to the direction as described above.
  • bird's-eye image data D 4 corresponding to each direction is stored in the media database 1 1 2.
  • changing the orientation of the bird's-eye view image can also be achieved by coordinate transformation processing.
  • the display image of each display area can be changed by changing the portion to be cut out from the entire surrounding image at each point according to the orientation as described above.
  • the user can select a shooting point by touching one of the shooting points M 1 to M 5 with the touch panel 1 1 8.
  • the entire surrounding image data D 3 of the selected point is read from the media adenita base 1 1 2, and the image of the selected shooting point is displayed in the bird's-eye mode on the background image display unit 1 1 5. Displayed in the selected orientation.
  • the display state of the bird's-eye image display unit 1 17 is in the immersive mode, and the same image as that displayed on the background image display unit 1 15 is displayed. Become.
  • the bird's-eye view image display section 1 1 7 displays the direction selection buttons BL and BR superimposed on the image.
  • the user can arbitrarily select the direction by operating the selection buttons BL and BR on the touch panel 1 1 8.
  • the image displayed on the background image display unit 1 15 is changed, and the image displayed on the bird's-eye image display unit 1 17 is also changed accordingly. Change this image Can be achieved by changing the portion cut out from the entire surrounding image of the selected point as described above according to the direction.
  • the bird's-eye view image display unit 1 17 is superimposed on the image. Marks N 2 and N 3 indicating other photographing points existing in the image are displayed. The user can directly select another shooting point by touching the mark of the shooting point on the touch panel 1 1 8.
  • the entire surrounding image data D 3 of the shooting point is read from the media database 1 1 2, and the background image display unit 1 1 5
  • the image of the shooting point is displayed in the orientation at the selected point. In this case, the image displayed on the bird's-eye image display unit 1 17 is also changed to that at the shooting point.
  • the bird's eye image display unit 1 17 has a return button RB superimposed on the image.
  • this return button RB By operating this return button RB on the touch panel 1 1 8, the user shifts from the immersive mode to the bird's-eye mode, and the bird's-eye image is displayed on the bird's-eye image display unit 1 1 7 as shown in Fig. 3 2 A. Return to the displayed state.
  • FIG. 33 shows a transition diagram of the display state of the above-described bird's-eye image display unit 1 17 '.
  • 'Immersion mode allows you to change the orientation without changing the mode.
  • this immersive mode you can select points without changing the mode.
  • the return operation is performed in this immersion mode, the mode changes to the bird's-eye view mode.
  • the control unit 1 1 3 displays the background image display unit 1 1 5 as shown in FIG. All the surrounding images D 3 A related to the two shadow points designated by the user are displayed side by side. In this case, all you need to do is display all the surrounding images for the two shooting points side by side, and display only a part of the entire surroundings within the range that can be displayed by the background image display 1 1 5. You may do it. Two images may be displayed separately on the background image display unit 1 15 and the bird's-eye image display city 1 1 7, or may be displayed together on the bird's-eye image display unit 1 1 7. Furthermore, a third display device may be provided for display. The control unit 1 1 3 scrolls this display according to an instruction from the user, and accepts an input of the movement destination.
  • FIG. 35 is a flowchart showing the processing procedure of the control unit 11 3 related to the parallel display of this all-around image.
  • the control unit 1 1 3 moves from step SP 21 to step SP 22 and displays the bird's-eye view image by the bird's-eye view image display unit 1 1 7.
  • the touch panel 1 118 detects the selection of the marks M1 to M5 displayed in, and accepts the shooting point designated by the user.
  • the control unit 1 13 receives the selection of the two marks M1 to M5, and thereby receives the selection of the shooting point for the two images used for parallel display.
  • control unit 1 1 3 moves to step SP '2.4, reads the two omnidirectional image data D 3 relating to the photographing point acquired in step SP 2 3 from the media database 1 1 2, and The all-around image D 3 A based on the two all-around image data D 3 is displayed side by side as shown in FIG.
  • step SP 25 determines whether or not the user has instructed to scroll the entire surrounding image displayed on the upper side by operating the touch panel 1 1 8. If an affirmative result is obtained, the process moves to step SP 26, and as shown by the arrow D in FIG. 34, the entire surrounding image D 3 A displayed on the upper side is scrolled, and the process returns to step SP 25. On the other hand, if a negative result is obtained in step SP 25, the control unit 1 1 3 moves from step SP 25 to step SP 27, and the user moves downward by operating the touch panel 1 1 8. Judge whether the scroll of the displayed all-around image D 3 A is instructed. If a positive result is obtained here, the control unit 1 1 3 moves from step SP 2 7 to step SP 28, and in FIG. As shown in the figure, scroll the entire surrounding image displayed on the lower side and return to step SP25.
  • step SP 27 if a negative result is obtained in step SP 27, the control unit 1 1 3 moves to step SP 29 and whether or not the user operates the decision menu by operating the touch panel 1 1 8. Determine whether.
  • the control unit 1 1 3 returns from step SP 2 9 to step SP 2 5.
  • the control unit 1 1 3 scrolls the all-around image D 3 A displayed up and down in response to a user operation.
  • step S P 29 the control unit 1 1 3 proceeds to step S P 3 0.
  • the control unit 1 13 detects which direction of the plurality of shooting points is the horizontal center position of the omnidirectional image D 3 A displayed vertically. Also, as shown on the bird's-eye view image 1 3 1 according to Fig. 36, this detection result detects the intersection point P between the straight lines L 1 and L 2 extending in the direction detected from each imaging point. The nearest shooting point of P (in this case, the shooting point by mark M3) is detected.
  • control unit 1 1 3 detects the movement desired by the user, and in the subsequent step SP 3 1, obtains all-around image data D 3 relating to the movement destination and displays it on the background image display unit 1 15 After that, go to Step SP 3 2 to finish this procedure. .
  • control unit 1 1 3 scrolls the display of the two omnidirectional images so that the move destination is in the center of the screen in the full-screen display of the omnidirectional images. Accepts input and switches display, which further improves usability.
  • the setting of the destination direction may be accepted by displaying and moving the cursor on the entire surrounding image. Also, in such parallel display of all-around images, when displaying on the bird's-eye image display unit 1 1 7, it is possible to accept the setting of the movement destination direction by operating the touch panel 1 1 8.
  • control unit 1 3 controls the background image display under the control of the lighting controller 1 1 9.
  • the illumination 1 2 0 is changed variously according to the image displayed on the part 1 1 5.
  • control unit 1 1 3 when the control unit 1 1 3 first acquires the all-around image data D 3 in the series of processes described above, the control unit 1 1 3 generates illumination control information D 5 for the all-around image data D 3 to generate the media database 1 1. Record in 2.
  • the control unit 1 13 calculates the average value of the pixel values constituting the partial image for each partial image constituting the all-around image data D 3, thereby detecting the average luminance level of each partial image.
  • partial images are taken by sequentially panning the imaging device at one shooting point, so that shooting with a high brightness level is possible when shooting with the sun facing behind. Whereas the result can be obtained, when shooting in the direction of the sun, the result is a so-called backlight and an imaging result with a low luminance level can be obtained.
  • the average luminance level detected in this way changes in a sinusoidal shape according to the position of the partial image with respect to the sun.
  • the control unit 1 13 generates the illumination control information D 5 so as to change the illumination 1 2 0 according to the average luminance level of each part of the omnidirectional image detected in this way.
  • the illumination control information D 5 is generated for each partial image so that the brightness of the illumination 120 is proportional to the average luminance level detected in each partial image.
  • the illumination control information D5 is generated for each partial image so that the color temperature of the illumination is proportional to the average luminance level detected in each partial image.
  • the brighter the image displayed on the background image display unit 1 15, the brighter the lighting 120 is set, and the apparent contrast of the image displayed on the background image display unit 1 15 is increased.
  • the portion with a high luminance level appears brighter, thereby increasing the apparent contrast.
  • the color temperature of the portion with a high luminance level is increased, so that an image with a higher luminance level appears to be an image of sunlight, which also increases the apparent contrast.
  • the control unit 1 1 3 uses the illumination control information D 5 generated in this way together with an image ID that is an identification code for identifying the corresponding partial image in the media database 1 1 2. To record and hold. Also displayed in the background image display area 1 1 5 The lighting control information D5 recorded in this media database 1 1 2 is searched for corresponding lighting control information ⁇ RD5, and the detected lighting control information D5 The controller for lighting 1 1 9 controls the brightness and color temperature of the lighting 1 2 0 by the control of 1 9.
  • FIG. 40 is a flowchart showing a processing procedure of the control unit 1 13 related to the control of the illumination 120.
  • the control unit 1 1 3 moves from step SP 4 1 to step SP 4 2 and obtains “all surrounding images”.
  • the illumination control information D 5 is generated from the acquired all-around image as described above, and recorded and stored in the media database 1 1 2.
  • step SP 4 when an image to be displayed in the background image display unit 1 1 5 is selected, in step SP 4 5, the lighting control information D 5 corresponding to the image to be displayed is stored in the media database 1. 1 In the subsequent step SP 4 6, the image selected in step SP 4 4 is displayed on the background image display unit 1 1 5. In the following step S P 47, the lighting 120 is controlled from the lighting control information D 5 obtained in step S P 45. In addition, if the user obtains a change finger for the image displayed in the background image display section 1.15 in step SP4 8, the process returns to step SP4 4.
  • the lighting control information may be generated in real time instead of generating the lighting control information in advance. ... Or, conversely, it may be created at the time of generating all-around image data D 3 and provided together with all-around image data D 3.
  • the user's operation on the bird's-eye view image switches the wide-angle image display at different shooting points, and by scrolling this image display, the image display by the live-action image is displayed as compared with the conventional case.
  • a high immersive feeling can be secured.
  • the audio data corresponding to the wide-angle image switches the audio data to be provided to the user in conjunction with the switching of the wide-angle image display and scrolling, and the sound image position can be changed to further enhance the presence of the sound. Can be improved, and a much higher level of immersion can be obtained.
  • the user-friendliness can be improved by switching the wide-angle image display and scrolling the image display even when the user inputs on the wide-angle display image.
  • the atmosphere can be changed according to the image, and the contrast can be further increased, further increasing the immersion.
  • a feeling can be improved.
  • the change in lighting is variable in either or both of brightness and color temperature, and further, the brightness is increased and the color temperature is increased in accordance with the luminance level. , Can further improve the immersive feeling.
  • illumination control information D5 is generated for each partial image so that the brightness and color temperature of the illumination are inversely proportional to the average luminance level detected in each partial image. You can do it.
  • the illumination image 120 is set to be darker as the image displayed on the background image display unit 115 becomes brighter, and the apparent contrast of the image displayed on the background image display unit 115 is increased.
  • the low-luminance part ⁇ appears darker, thereby increasing the apparent contrast.
  • the color temperature of the low luminance level is increased, so that images with lower luminance level appear to be images of sunlight, which also increases the apparent contrast.
  • the brightness and color temperature related to the illumination can be varied to reduce the brightness and lower the color temperature. Can increase the sense of immersion.
  • proportional control that makes the brightness and color temperature proportional to the average luminance level detected in each partial image, and conversely, the average luminance level detected in each partial image is adjusted.
  • the illumination control is adaptively switched according to the image to be displayed. Specifically, for example, when displaying seaside scenery, proportional control is used. Control the lighting more and control the lighting by inverse proportional control when displaying images taken indoors. Thus, even if the control related to the illumination is switched according to the image to be displayed, the feeling of immersion can be further improved.
  • the direction of the sun may be recorded and held, and information for specifying the direction of the sun may be added to the all-around image data D3.
  • the image display device 1 1 1 the brightness and color temperature of the image displayed on the background image display unit 1 1 5 are varied according to the direction of the sun at the time of shooting, based on the information specifying the direction of the sun. .
  • the immersive feeling can be improved by changing the brightness and color temperature of the image displayed on the background image display unit 1 15 according to the direction of the sun at the time of shooting.
  • time information at the time of photographing that specifies the photographing time may be added to the all-around image data D3, and illumination may be controlled based on the time information at the time of photographing. Specifically, when the shooting time is in the evening, the brightness of the lighting is dimmed and the color temperature is lowered. Also, when the shooting time is at night, the brightness of the lighting is further increased and the color temperature is lowered. If the shooting time is daytime, increase the brightness of the lighting and increase the color temperature. Thus, even if the illumination is changed according to the photographing time of the image displayed on the background image display unit 115, the immersive feeling can be improved.
  • FIG. 41 is a block diagram showing the configuration of another image display system 14 1.
  • this image display system 14 all-around image data and bird's-eye image data are held in a media database 1 4 4 ⁇ to 14 4 ′ C, which is a server on the network.
  • the image display device 1 4 2 accesses the media database 1 4 4 A to l 4 4 C via the wideband network 1 4 3 to Except for acquiring image data and bird's-eye image data, it is configured in the same way as the above-described image display device 1 1 1 (see FIG. 19).
  • the recording / reproducing unit related to the image data is arranged on the network, the same effect as the above-described embodiment can be obtained.
  • the omnidirectional image data may be constituted by one omnidirectional image.
  • the case where an image based on a still image is displayed has been described.
  • the present invention is not limited to this, and can be widely applied to the case where an image based on a moving image is displayed. In this case, it is conceivable to connect to a server that supplies all-around image data through the network as described above with reference to FIG.
  • the server provides a plurality of imaging results for generation of the above-described omnidirectional image data by moving images, and the image display device side performs image synthesis of the imaging results of the plurality of moving images.
  • the video can be displayed in the background image display section with various orientations.
  • a dedicated imaging mechanism that captures and captures moving images from around the surroundings is used to obtain and provide moving image capturing results. You can also display video images. Note that there are dedicated image capturing mechanisms for capturing moving images from all around, such as a method using a curved mirror or a pyramid mirror. On the image display device side, depending on the image capturing mechanism, It is necessary to convert the transmitted imaging result into an image. .
  • the present invention is not limited to this.
  • it can be widely applied to display an image having various spreads as required.
  • the present invention is applied to the display of a wide-angle image having a spread in the horizontal direction.
  • the present invention is not limited to this, and instead of this, or in addition to this. Therefore, wide-angle image display having a spread in the vertical direction can also be widely applied.
  • the present invention is not limited to this, and the distribution of illumination may be controlled. That is, for example, when displaying an image due to backlighting, the direction of the sun can be perceived by the distribution of illumination by making the side displaying the image brighter and darkening the opposite side. A feeling can be improved. On the other hand, when displaying images taken with the sun behind, the background is brightened. With the above, it is possible to sense the i: positive direction by the distribution of lighting, and to improve the sense of reality.
  • the present invention is not limited to this, and the immersive feeling is further increased by controlling the wind, temperature, and the like. May be.
  • an audiovisual room having a space between the ceiling and the back of the ceiling, a space between the floor and the floor, or a space between the inner wall and the outer wall.
  • Various examples in the case of arranging are described.
  • Figure 4 2 shows the interior of an audiovisual room (room) 4 0 1 surrounded by an inner wall 2, a ceiling 2A, and a floor 2B.
  • this audiovisual room 41 projection windows 40 4 as openings are provided at a plurality of locations on the ceiling 2 A and the floor 2 B, respectively, at two locations in the illustrated example.
  • the projection window 40 4 is a space between the ceiling 2 A and the ceiling 3 A (see FIGS. 15 and 16), floor 2 B and the screen provided in the room.
  • Fig. 4 2 is not shown in the figure
  • a transparent plate material such as glass is disposed in the part.
  • the projection window 40 4 is provided with a lid (not shown) when it is simply formed by an opening, and is covered with this lid when not in use. '
  • the projector 4 0 2 arranged between the ceiling 2 A and the ceiling back 3 A is positioned along any surface of the ceiling 2 A at any position on the projection porthole 4 0 4 formed on the ceiling 2 A.
  • the light is selectively moved, and image light is irradiated to a predetermined position in the audiovisual room 4101 through the projection window 401, and an image is displayed at the predetermined position.
  • the projector 4 0 2 1 arranged between the floor 2 B and the bottom floor 3 B is connected to any of the projection windows 4 0 4 formed on the floor 2 B along the surface of the floor 2 B. Then, the image light is irradiated to a predetermined position in the audiovisual room 4101 through the projection window 404, and an image is displayed at the predetermined position.
  • the projector 4 0 2 can be used by projecting the image light from the projector 4 0 2 to a predetermined position in the room through the projection window 4 0 4.
  • this projector 4 or 2 is not taken out indoors, and does not disturb the indoor atmosphere during use.
  • a guide member is arranged between the two projection windows 40 4 so that the projector 40 2 can selectively move to the positions of the two projection windows 40 4.
  • the guide member is used as a power supply line for guiding the projector 40 2 and supplying power to the projector 4 0 2.
  • the projector 40 2 is guided to the guide member and selectively moves to the position of the two projection windows 40 4, but correctly moves to the position corresponding to the projection window 40 4.
  • it has a position detection mechanism. This position detection mechanism detects whether or not it is at the position by detecting a position detection member provided at the position of each projection window 40 4.
  • a reflective sheet or the like as a position detection member is attached to the back surface of the ceiling 2A or a guide member.
  • the position detection mechanism uses an IC tag.
  • the IC tag is attached to the back surface of the ceiling 2 cm or a guide member. In this way, various position detection members are arranged on the back surface of the ceiling 2A and the like in accordance with the position detection method employed by the position detection mechanism. ..
  • FIG. 43 shows an example of the moving mechanism of the projector 400. Both ends of the bottom of the projector 4 0 2 are supported by two bases 4 5 1 with screws, and each base 4 5 1 is installed in the two rails 4 5 2 with screws. Placed. As the two rails 4 5 2 are rotated synchronously by the motor 4 5 3, the projector 4 0 2 moves back and forth (X direction). ,
  • both ends of each of these two rails 45 2 have a structure with a screw, and each rail 45 5 2 is installed by being squeezed into two rails 45 5 4 with a screw.
  • the projector 4 0 2 moves left and right (Y direction).
  • the guide member for guiding the projector 4 0 2 to the position of the two projection windows 4 0 4 as described above is, for example, rail 4 5 2 or rail Consists of 4 5 4
  • the projector 402 has a mirror that reflects the image light emitted from the projection mechanism in a predetermined direction, and a mirror movable mechanism that changes the position and angle of the mirror.
  • Fig. 44 shows an example of the mirror moving mechanism. 'Cylinder 4 6 1 is attached to the upper surface of projector 4 0 2, and mirror 4 6 2 is attached to the tip of this cylinder 4 6 1. With this cylinder 4 61, the distance of the mirror 4 6 2 from the projector 4 0 2 can be adjusted.
  • a second-axis motor 4 6 3 is provided at the mounting position of the mirror 4 6 2 of the cylinder 4 6 1.
  • the direction of the mirror 4 6 2 can be adjusted by the two-axis motor 4 6 3.
  • the position and angle of the mirror 4 6 2 can be changed by the cylinder 4 6 1 and the biaxial motor 4 6 3, whereby the image light emitted from the projection mechanism of the projector 4 0 2 is directed to
  • the indoor position where the image is projected can be adjusted, and the degree of freedom in selecting the image display position can be increased.
  • the audiovisual room 40 1 has a pre-advanced position in the location corresponding to the projection window 40 4 of each of the ceiling 2 A and floor 2 B described above.
  • Screens 4 0 5 a and 4 0 5 b are arranged by installation or movement by a user.
  • FIG. 45 shows the configuration of the projector 40 2 described above.
  • the projector 4 0 2 includes a controller 4 0 2 a for controlling the entire operation, the moving mechanism 4 0 2 b (see FIG. 4 3) described above, and the mirror movable mechanism 4 0 2 d (see FIG. 4 4).
  • a projection mechanism for projecting video light a remote control receiver for receiving a control signal wirelessly transmitted from the remote commander 471, a DVD player, a personal computer, a TV tuner, etc.
  • the video receiver 4 0 2 f that receives video signals transmitted wirelessly from the video equipment 4 7 2 and the video signals received by the video receiver 4 0 2 f are projected indoors by the projection mechanism 4 0 2 c.
  • the video equipment 4 7 2 is accommodated in a space between the inner wall 2 and the outer wall 3, for example.
  • the remote control receiver 4 0 2 e receives a control signal wirelessly transmitted from the remote commander 4 7 1, and the video receiver 4 0 2 f receives a video signal wirelessly transmitted from the video equipment 4 7 2.
  • Projector 4 0 2 and video equipment 4 7 2 and the projector 4 0 2 and the remote commander 4 7 1 are connected wirelessly, so that the cable does not get in the way when the projector 4 0 2 moves in the space. .
  • the projection mechanism 4 0 2 c generates and emits image light based on the video signal received by the video receiver 4 0 2 f.
  • this projection mechanism 40.2c includes a light source, an optical spatial modulation element such as a liquid crystal panel that generates image light by spatially modulating the light emitted from the light source by a video signal, It is formed by an optical system that emits light. .
  • the remote control receiver 4 0 2 e receives the control signal from the remote commander 4 71 and notifies the controller 4 0 2 a.
  • the position detection mechanism 4 0 2 h detects the movement of the projector 4 0 2 to the position where the projection window 4 0 4 is provided by detecting the position detection member described above, and sends it to the controller 4 0 2. Notice.
  • the moving mechanism 4 0 2 b rotates the screw by the driving force of the motor under the control of the controller 4 0 2 a (see FIG. 4 3), and thereby the rails provided in the space such as the ceiling and floor This projector 4 0 2 is moved along.
  • FIG. 5 The operation of the projector 400 shown in Fig. 5 will be briefly described.
  • the case where a signal is output will be described.
  • the control signal from the remote commander 4 71 is received by the remote control receiver 4 0 2 e, and this control signal is supplied to the controller 4 0 2 a.
  • the controller 40 2 a controls the moving mechanism 4 0 2 b to start moving the projector 4 0 2 to a position corresponding to the predetermined projection window 4 4 described above.
  • the controller 40 2 a controls the moving mechanism 4 0 2 b when the position detecting mechanism 4 0 2 h detects the movement of the projector 4 0 2 to the position of the predetermined projection window 4 0 4. To stop the projector 4 0 2 movement.
  • the projector 40 2 placed in the space between the ceiling 2A and the ceiling back 3A is moved along the ceiling surface according to the instruction from the user. Then, the position of the projection window 40 4 positioned so far is moved to the position of the next projection window (predetermined projection window 40.4).
  • the projector 4 0 2 'disposed in the space between the floor 2 B and the floor 3 B is moved along the floor surface by the user's instruction until then. It moves from the position of the projected projection window 40 4 to the next projection window (predetermined projection window 40 4).
  • the controller 4 0 2 a controls the mirror movable mechanism 4 0 2 d and the mirror 4 6 3 The position and angle of the mirror 402 d are adjusted so that the predetermined position in the room is irradiated through the predetermined projection window 404.
  • the controller 4 0 2 a moves the projection mechanism 4 0 2 b, the correction processing unit 4 0 2 g, and the image processing unit 4 when the projector 4 0 2 moves to the position of the predetermined projection window 4 0 4 in this way.
  • 0 2 Activate the operation of f.
  • the video receiving unit 4 0 2 f receives the video signal from the video device 4 7 2 and supplies the video signal to the projection mechanism 4 0 2 c via the correction processing unit 4 0 2 g.
  • image light based on the image signal is emitted from the projection mechanism 4 0 2 c, and the image light is reflected by the mirror 4 0 2 d and then irradiated to a predetermined position in the room. Then, at a predetermined position in the room, an image based on the video signal supplied from the video device 4.72 to the video receiving unit 4202f is displayed.
  • the “controller 4 0 2 a displays the image at a predetermined position in the room in this way, and the projection mechanism 4 0 responds to the user's operations such as focus and zoom according to the notification from the remote control reception” section. 2 Adjust the focus and zoom magnification of c.
  • the projector 40 2 arranged in the space between the ceiling 2 A and the ceiling back 3 A is on the optical path of the image light emitted from the projection mechanism 4 0 2 c.
  • Mirror 4 62 is arranged on the ceiling, and the optical path of the image light emitted in the direction along the ceiling surface is bent by this mirror 4 6 2, and is passed through the projection window 4 0 4 provided on the ceiling 2 A. Irradiate the screen 4 5 in the room. In this case, the irradiation position can be adjusted by changing the tilt of the mirror 4 62.
  • the projector 40 2 disposed in the space between the floor 2 B and the floor 3 B similarly receives the image light emitted from the projection mechanism 4 0 2 c.
  • Mirror 4 6 2 is arranged on the floor 2, the optical path of the image light emitted in the direction along the floor surface is bent by this mirror 4 6 2, and the projection light 4 0 4 provided on the floor 2 B Project onto screen 4 0 5.
  • trapezoidal distortion or the like is generated by irradiating image light obliquely to the screen 400.
  • the correction processing unit 4 0 2 g of the projector 4 0 2 performs processing for preventing the trapezoidal distortion and the like on the video signal.
  • the correction processing unit 4 0 2 g receives the image reception unit 4 0 2 f so that the projection mechanism 4 0 2 c corrects the distortion of the image projected to the predetermined position in the room.
  • the corrected video signal is subjected to correction processing and supplied to the projection mechanism 4 0 2 c. As a result, a good image without distortion is displayed at a predetermined position in the room.
  • the remote commander 4 71 controls the opening / closing of the projection window 40 4. That is, as described above, a control signal instructing to irradiate video light to a predetermined position in the room through the predetermined projection window 40 4 from the projector 40 2 is the remote control receiver 4 of the projector 4 0 2. When 0 2 e is transmitted, a control signal is supplied to instruct the predetermined projection window 40 4 to open the lid. , '.
  • the screen 4 0 5 can be opened and closed by the remote commander 4 7 1. Be controlled. That is, as described above, a control signal instructing to irradiate video light to a predetermined position in the room through the predetermined projection window 4 0 4 from the projector 4 0 2 is sent to the remote control receiver 4 0 2 e of the projector 4 0 2. When transmitted, a control signal is supplied that instructs the screen 400 to open.
  • the projector 4 0 2 is placed in the space between the ceiling 2 A and the back of the ceiling 3 A, the space between the floor 2 B and the bottom floor 3 B, or the space between the inner wall 2 and the outer wall 3. Therefore, it is not arranged in the audiovisual room 4 0 1 and does not disturb the atmosphere in the room.
  • the projector 402 can selectively move to a plurality of positions in the space according to a user operation and irradiate the room with image light. Without preparing a projector, the user can view the video at multiple locations in the room.
  • FIG. 50 shows the interior of the audiovisual room (room) 4 0 1 in comparison with FIG. 4 2 described above. In FIG. 42, the force of projecting the image on the screen 4005 In FIG.
  • the image is projected on the ceiling 2A and the floor 2B. That is, the image light from the projector 40 2 placed in the space between the ceiling 2 A and the ceiling back 3 A is irradiated to the floor 2 B through the projection window 40 4 provided on the ceiling 2 A. ing. In addition, the image light from the projector 40 2 disposed between the floor 2 B and the floor 3 B is irradiated to the ceiling 2 A through the projection window 40 4 provided on the floor 2 B. . In FIG. 50, the projector 4 0 2, the ceiling 3 A, and the floor 3 B are not shown.
  • FIG. 51 shows the inside of the audiovisual room (room) 40 1 in comparison with FIG. 4 2 described above.
  • the force of projecting an image on the screen 4 5 5 In FIG. 5 1 the image is projected on the inner wall 2 and the window 4 3 0. That is, the image light from the projector 40 2 placed in the space between the ceiling 2 A and the ceiling 3 A is irradiated to the inner wall 2 through the projection window 40 4 provided on the ceiling 2 A.
  • the projector 40 2, the ceiling 3 A, and the floor 3 B are not shown.
  • FIG. 52 shows the state of the interior of the audiovisual room (room) 40 1 in comparison with FIG. 42 described above.
  • the force of projecting an image on the screen 4 5 5 In FIG. 5 2 the image is projected on the table 4 2 0.
  • the image light from the projector 40 2 disposed in the space between the floor 2 B and the floor 3 B is irradiated on the table 4 2 0 through the projection window 4 0 provided on the floor 2 B.
  • the projector 40 2 and the underfloor 3 B are not shown.
  • the table 4 2 0 has a substantially square table surface 4 2 3 as viewed from above, and the four corners of the table surface 4 2 3 are respectively formed by the legs 4 2 2. It has a supporting structure.
  • the table surface 4 2 3 is formed of a transparent plate material such as tempered glass.
  • Table surface 4 2 3 has a rear projection screen 4 2 5 on almost the entire surface.
  • the table 4 20 receives the image light from the projection window 4 4 provided on the floor 2 B by the screen 4 2 5, and between the floor 2 B and the floor 3 B below. Displays images from the projector 4 0 2 placed in the space.
  • FIG. 54 shows the inside of the audiovisual room (room) 40 1 in comparison with FIG. 42 described above.
  • an image is projected onto the screen 400.
  • an image is projected onto the table 42.20. ⁇ That is, the image light from the projector 40 2 placed in the space between the ceiling 2 A and the ceiling 3 ⁇ 4 3 A enters the table 4 2 0 through the projection window 4 0 4 provided on the ceiling 2 A. Irradiated.
  • the projector 4 0 2 and the ceiling 3 A are not shown.
  • FIGS. 55 and 56 show a partial configuration of the audiovisual room system in comparison with FIGS. 48 and 49.
  • video is displayed by one projector 4 0 2 in two audiovisual rooms (rooms) 4 0 1 U and 4 0 1 D that are continuous in the vertical direction (vertical direction).
  • Figure 5-5 shows that the video is displayed on the screen 4 0 5 in the audiovisual room 4 0 1 D downstairs, and the video 4 0 '5 is also displayed in the audiovisual room 4 0 1 U upstairs. This is an example.
  • the video is displayed on the screen 40 in the lower visual hall 4 0 1 D, and the table 4 2 0 in the audio visual room 4 0 1 U on the lower floor. It is an example in which an image is displayed on a table surface.
  • the projector 40 2 is arranged in a space between the ceiling 2 A of the audiovisual room 4 0 1D below the floor and the floor 2 B of the audiovisual room 4.0 1 U above the floor.
  • This projector 4 0 2 is connected to the floor of the audio visual room 4 0 1 U on the floor or the position of the projection window 4 0 provided in the ceiling 2 A of the lower floor audio visual room 4 0 1 D. 2 B It can be selectively moved to the position of the projection window 4 0 4 provided.
  • a guide member for guiding the projector 40 2 to the position of the projection window 40 4 is provided in the space.
  • the projector 4 0 2 moves to the position of the projection window 4 0 4 provided on the ceiling 2 A of the audio-visual room 4 0 1 D by operating the remote commander 4 7 1 in the audio-visual room 4 0 1 D downstairs To do. Also, by operating the remote commander 4 7 1 in the audiovisual room 4 0 1 U on the floor, it is moved to the position of the projection window 4 0 4 provided on the floor 2 B of the audio visual room 4 0 1 U. Move.
  • the audiovisual room 4 0 1 D of the audiovisual room 4 0 1 D passes through this projection window 4 0 4
  • the direction of the mirror 4 6 2 is switched so that an image is displayed at a predetermined position. 'Also, when moving to the position of the projection window 4 0 4 provided on the ceiling 2 A of the audiovisual room 4 0 1 D below the floor, the predetermined position of the audiovisual room 4 0 1 D through this projection window 4 0 4
  • the direction of mirror 4 6 2 can be switched so that an image is displayed on the screen.
  • the two audiovisual rooms 4 0 1 U and 4 0 1 D can be used as one projector 4 0 2, and the configuration is simplified accordingly.
  • Fig. 57 shows a part of the audiovisual room system in comparison with Fig. 55 and Fig. 56.
  • video is displayed by one projector 4 0 2 in two audiovisual rooms (rooms) 4 0 1 L and 4 0 1 R that are continuous in the left-right direction (horizontal direction).
  • the projector 4 0 2 is disposed in the space between the ceiling 28 of the audiovisual room 4 0 1 L, 4 0 1 1 and the back of the sky valve 3 A.
  • the projector 40 2 is connected to the position of the projection window 40 4 provided in the ceiling 2 A of the left audio-visual room 4 0 1 L or the ceiling 2 A of the right audio-visual room 4 0 1 R. It can be selectively moved to the position of the projection window 4 0 4 provided.
  • a guide member (see the rails in FIG. 43) for guiding the projector 400 to the position of the projection window 40 4 is provided in the space. .
  • the projector 40 2 moves to the position of the projection window 4 provided on the ceiling 2 A of the audiovisual room 4 0 1 L by the operation of the remote commander 4 7 1 of the left audiovisual room 40.1 L. Further, the position of the projection window 40 4 provided on the ceiling 2 A of the audiovisual room 4 0 1 R is moved by the operation of the remote commander 4 7 1 in the audio visual room 4 0 1 R on the right side.
  • the audio-visual room 4 0 1 L When the projector 4 0 2 moves to the position of the projection window 4 0 4 provided on the ceiling 2 A of the left audio-visual room 4 0 1 L, the audio-visual room 4 0 1 L The direction of the mirror 4 6 2 is switched so that an image is displayed at a predetermined position. Also When moving to the position of the projection window 4 0 4 provided on the ceiling 2 A of the audiovisual room 4 0 1 R on the right side, it moves to the predetermined position of the audiovisual room 4 0 1 R via this projection window 4 0 4 The direction of mirror 4 6 2 can be switched to display the image. '
  • the two audiovisual rooms 4 O I L, 4 0 1 can be used as one projector 4.0 2, and the configuration can be simplified accordingly.
  • a single projector can be used in the same way in more audiovisual rooms arranged in the horizontal direction.
  • the projector 40 2 is placed in the space between the ceiling 2 A and the back of the ceiling 3 A, but this projector 40 2 is placed in the space between the floor and the floor. What can be configured similarly.
  • FIG. 58 shows the inside of the audiovisual room (room) 40 1 in comparison with FIG. 50 described above.
  • the ceiling 2A is provided with two projection windows 40.
  • the ceiling 2A has one strip-shaped projection window 40. 4 is provided.
  • the projection window 40 4 is formed by being covered with, for example, transparent glass. In this case, the projection position of the image can be changed variously by moving the projector 40 2 to each part of the strip-shaped projection window 40 4.
  • FIG. 59 shows the state of the “inside of the audiovisual room (room). 4 0 1” in contrast with FIG. 58 described above.
  • Fig. 58 one strip-shaped projection window 40 4 is provided on the ceiling 2A, but in Fig. 5.9, one strip-shaped projection window 4 is provided on the inner wall 2. 0 4 is provided.
  • This projection window 40 4 is made, for example, covered with transparent glass. In this case, the projector 40 2 placed in the space between the inner wall 2 and the outer wall 3 is moved to each part of the strip-shaped projection window 40 4 to project the image on the inner wall 2 on the opposite side. The position can be changed variously.
  • the guide member of the projector 400 is a rail.
  • the present invention is not limited to this, and various methods can be widely applied.
  • the case where the image is projected on the screen 400, the table 42, the floor 2B, the ceiling 2A, the inner wall 2, etc. is not limited to this.
  • various settings can be made at the projection location.
  • the case where the ceiling, floor, and wall are formed in a double structure has been described.
  • the present invention is not limited to this, and in short, the projector is moved along the ceiling surface, floor surface, and wall surface. It can be placed on the back side of the ceiling, the back side of the floor, or the back side of the wall, and can be widely applied to audiovisual rooms with various structures.
  • a remote commander that can be used as the above-described remote commander 1 1 6 of the image display system 1 10 1 or the remote commander 4 7 1 that controls the projector 4 0 2 described above will be described. .
  • FIG. 60 is a schematic diagram showing the configuration of the remote commander 2 0 1.
  • the remote commander 2 0 1 accepts a user operation based on the table 2 0 2.
  • the table 20 2 has a table surface 20 3 having a substantially square shape when viewed from above, and the four corners of the table surface 20 3 are respectively formed by the legs 2 0 4. It has a fine structure.
  • the table surface 203 is formed of a transparent plate material such as tempered glass.
  • a screen 2 of a rear projection type projector 6 and a transparent touch panel 20 7 are laminated in this order on almost the entire surface of the table surface 20 3.
  • the touch panel 20 7 constitutes a sensing unit that detects an instruction by a user operation.
  • the entire table surface 203 may be formed of a transparent portion, but at least a portion corresponding to the screen 206 may be a transparent portion. '
  • the table 20 2 is provided with a table base 2 0 8 on the lower side of the table surface 2 0 3 and inside the legs 2 0 4. That is, as shown in FIGS. 6 2 and 6 2 B, respectively, a side view and a bottom view are shown, and the table base 2 08 is formed in a rectangular tube shape that substantially covers the entire lower surface of the table surface 2 0 3. ing. As will be described later, the projector 2 10 placed below the table 2 0 2 is covered with the table 2 20 8. Here, it is also possible to support the entire table surface 20 3 by this table base 2 0 8 and omit the legs 2 0 4.
  • the projector 2 1 0 is a rear projection type projector
  • Video light from the video signal SV received wirelessly from a video device (not shown) such as a video recorder, video tape recorder, or TV tuner and received by the transmitter / receiver 2 1 2 is emitted upward.
  • a video device not shown
  • FIG. 63 an image based on the image signal SV is displayed on the screen 206 provided on the table surface 20 3.
  • the signal processing unit 2 1 1 detects an instruction by the user operating the touch panel 2 07 and notifies the transmission / reception unit 2 1 2 of this instruction.
  • the transmission / reception unit 2 1 2 wirelessly transmits the instruction by the user operation to the video equipment.
  • the transmission / reception unit 2 1 2 communicates wirelessly with the video device, receives the video signal SV from the video device, and supplies it to the projector 2 10.
  • the remote commander 2 0 1 shown in FIG. 60 will be described.
  • the signal processing unit 2 1 1 detects a menu screen request instruction.
  • the request instruction on the menu screen is transmitted to the video equipment through the transmission / reception unit 2 1 2.
  • the video signal for the menu screen sent from the video equipment in response to the request instruction on the menu screen is received by the transmission / reception unit 2 12, and this video signal SV is supplied to the projector 2 10. From the projector 2 10, the image light based on the image signal S V is emitted and applied to the screen 2 6 6 arranged on the table surface 2 03. As a result, the menu screen can be displayed on the screen 2 06.
  • the signal processing unit 2 11 detects an instruction for selecting a predetermined menu. .
  • This menu selection instruction is sent to the video equipment through the transceiver 2 1 2.
  • the operation of this video equipment includes the operation of sending a predetermined video signal to the remote commander 210.
  • the operation of this video equipment also includes the operation of the control unit 113 in the image display system shown in FIG.
  • the screen 2 06 constitutes the bird's-eye view image display unit 1 1 7 and displays, for example, the operation screen of the bird's-eye view mode and the immersive mode as shown in FIGS. 3 2A and 3 2B. Done.
  • the bird's eye view mode is initially displayed on the screen 2 06, and Depending on the subsequent user operation, either the bird's eye view mode or the immersion mode operation screen is displayed.
  • Video signals related to such operation screens are transmitted wirelessly from the video equipment (corresponding to image processing unit 1 1 3 B in Fig. 19) and received by transmission / reception unit 2 1 2 every time the screen contents change. Will be.
  • the remote commander 2 0 1 shown in FIG. 60 an image is displayed on the screen 2 6 6 arranged on the table 2 0 2 as furniture, and the user operation on this screen 2 0 6
  • the touch panel 20.7 is used as a sensing unit to detect the instruction, and it is not found when trying to operate like a conventional remote commander, improving user convenience.
  • FIG. 64 shows a part of the remote commander 2 01 A in comparison with FIG. In FIG. 64, parts corresponding to those in FIG. 60 are denoted by the same reference numerals.
  • the table 2 0 2 is fixed and held at a fixed location on the floor 2 B. In this way, the portion of the floor 2 B on which the table 20 2 is fixedly held is provided with a projection window 2 13 for allowing the image light from the projector 2 10 to pass therethrough.
  • the projection window 213 may be formed by an opening, or may be formed by arranging a transparent plate material such as glass in the opening.
  • a lid (not shown) may be provided in correspondence with the projection window 2 1 3 and the lid may be opened only during use.
  • the projector 2 10 is arranged in the space between the floor 2 B and the floor 3 B corresponding to the projection window 2 1 3 described above.
  • the image light emitted from the projector 2 1 0 irradiates the screen 2 0 6 disposed on the table surface 2 0 3 of the table 2 0 2 through the projection window 2 1 3 provided on the floor 2 B.
  • the video is displayed on this screen.
  • the remote commander 2 0 1 A is configured in the same manner as the remote commander 2 0 1 shown in FIG. 60 except for the configuration related to the arrangement position of the projector 2 1 0 as described above.
  • This remote commander 2 0 1 A can obtain the same effect as the remote commander 2 0 1, and the projector 2 1 0 is located in the space between the floor 2 B and the floor 3 B, Since it is not arranged, a technique for concealing the projector 2 1 0 as in the remote commander 2 0 1 shown in FIG.
  • One projector 2 0 8 can be omitted, and the projector 2 1 0 is placed in the space between the floor 2 ⁇ and the floor 3 ⁇ , so the optical path from the projector 2 1 0 to the screen 2 0 6 It is possible to reduce the thickness of the lower structure of the table 20 2 and display a video on a large screen.
  • FIG. 65 shows a part of the remote commander 201 in comparison with FIG. In FIG. 65, parts corresponding to those in FIG. 60 are denoted by the same reference numerals.
  • the projector 2 1 0 is disposed on the floor 2 ⁇ , and a lens 2 2 2 for shortening the optical path is provided on the optical path of the projector 2 1 0. Yes.
  • the image light emitted from the projector 2 10 is irradiated onto the screen 2 06 via the lens 2 2 2.
  • the remote commander 2 0 1 ⁇ has the same configuration as the remote commander 2 0 1 shown in FIG. 60 except for the configuration related to the lens 2 2 2 as described above.
  • This remote commander 2 0 1 ⁇ ⁇ ⁇ can obtain the same effect as the remote commander 2 0 1, and the optical path from the projector 2 1 0 to the screen 2 0 6 is shortened by the lens 2 2 2. By reducing the thickness of the lower structure of 0 2, video can be displayed on a large screen. '.
  • FIG. 66 shows a part of the “Remote Commander 20 1 C” by comparison with FIG. In FIG. 66, parts corresponding to those in FIG. 64 are denoted by the same reference numerals.
  • the projector 2 1 0 is disposed in the space between the floor 2 ⁇ and the floor 3 B ′ and bends the optical path of the image light emitted from the projector 2 1 0.
  • a mirror 2 3 4 is provided.
  • the projector 210 is arranged so that the image light is emitted in a direction along the floor surface.
  • the image light emitted from the projector 2 1 0 in this way is reflected in the orthogonal direction by the mirror 2 3 4 and irradiated onto the screen 2 6 through the projection window 2 1 3 provided on the floor 2.
  • This remote commander 2 0 1 C is configured similarly to the remote commander 2 0 1 ⁇ shown in FIG. 64 except for the configuration related to the mirror 2 3 4 as described above.
  • This remote commander 2 0 1 C has the same effect as remote commander 2 0 1 A
  • the mirror 2 3 4 can bend the optical path, and even if the thickness of the lower structure of the table 2 0 2 is reduced, a sufficient optical path of the image light to irradiate the screen 2 0 6 can be secured. Video display on a large screen is possible. '
  • FIG. 67 shows a part of the remote commander 201D in comparison with FIG. 66.
  • parts corresponding to those in FIG. 66 are denoted by the same reference numerals.
  • an optical path shortening lens 2 4 5 is provided on the optical path of the projector 2 1 0. 'In this case, the image light emitted from the projector 2 1 0 is irradiated onto the screen 2 0 6 through the lens 2 4 5 and the mirror 2 3 4.
  • the remote commander 2 0 1 D is configured in the same manner as the remote commander 2 0 1 C shown in FIG. 66 except for the configuration related to the lens 2 45 as described above.
  • This remote commander 2 0 1 D can obtain the same effect as the remote commander 2 0 1 C, and the optical path from the projector 2 1 0 to the screen 2 0 6 is shortened by the lens 2 4 5. It is possible to display an image on a large screen by further reducing the thickness of the lower structure of the table 20.
  • Figure 6 8 and Figure 6 9 show the state of the audiovisual room (room) 4 0 1 in which the remote commander 2 0 1 E is placed in comparison with Figure 60 and Figure 6 1.
  • FIGS. 68 and 69 parts corresponding to those in FIGS. 60 and 61 are denoted by the same reference numerals.
  • the audiovisual room 40 01 is surrounded by an inner wall 2, a ceiling 2A, and a floor 2B.
  • the table 2 0 2 constituting the remote commander 2 0 1 E is placed on the floor 2 B. '
  • a liquid crystal film 2 06 A and a transparent touch panel 2 0 7 are laminated in this order on almost the entire surface 2 0 3 of the transparent plate material of the table 2 0 2.
  • a liquid crystal film 2 06 A is used instead of the screen 2 6 6 of the rear projection projector of the remote commander 2 0 1 shown in FIGS. 60 and 61. Arranged.
  • This liquid crystal film 206 A is a sheet material formed by disposing a liquid crystal between transparent films having two transparent electrodes.
  • the transmissivity in the thickness direction varies greatly depending on the voltage value applied to the transparent electrode.
  • the voltage applied to the liquid crystal film 2.06 ⁇ ⁇ ⁇ ⁇ is switched by operating the switch provided on the side surface of the table 202, so that the liquid crystal film 206A is in a transparent state, and the projector 2 It can be selectively switched to a translucent state that can be used as a 10 screen.
  • the liquid crystal film 20 6 A is set in a translucent state, and the liquid crystal film 2 06 A is irradiated with image light from the projector 2 10 A, so that the table 2 0 2
  • the image can be displayed on the table surface 2 0 3 (liquid crystal film 2 0 6 A).
  • the liquid crystal film 20 6 A is in a transparent state, and image light from the projector 2 10 is passed through the liquid crystal film 2 06 A to irradiate the ceiling 2 A, Images can be displayed on this ceiling 2A.
  • the projector 210 is configured to be able to adjust the focus following such switching of the image light irradiation target.
  • the remote commander 2 0 1 E is configured in the same manner as the remote commander 2 0 1 except for the configuration related to the liquid crystal film 2 0 '6 A as described above.
  • This remote commander 2 0 1 E can obtain the same effects as the remote commander 2 0 1, and can display images on the ceiling 2 A with the liquid crystal film 2 0 6 in the clear state. It can be further improved.
  • FIG. 70 shows the configuration of the remote commander 2 0 1 F in comparison with FIG. 60.
  • This remote commander 2 0 1 F is provided with an imaging device (camera) 2 6 6 and an image processing unit 2 6 7 in place of the touch panel 2 0 7 and the signal processing unit 2 1 1 in the remote commander 2 0 1. Yes.
  • the imaging device 2 6 6 and the image processing unit 2 67 constitute a sensing unit that detects an instruction by a user operation.
  • the imaging device 2 6 6 is arranged adjacent to the projector 2 10, and captures an operation of a finger or the like by the user on the screen 2 6 6 together with an image displayed on the screen 2 6,
  • the video data as the imaging result is output to the image processing unit 2 67.
  • the image processor 2 67 detects an instruction by a user's finger operation on the screen 2 06 and sends this instruction. Notify receiver 2 1 2 Transmission / reception 15 2 1 2 wirelessly transmits this user operation instruction to the video equipment.
  • the remote commander 2 0 1 F is configured in the same manner as the remote commander 2 0 1 shown in FIG. 60 except for the configuration related to the sensing unit as described above.
  • This remote commander 2 0 1 F can achieve the same effect as the remote commander 2 0 1, and also eliminates the need to place a touch panel 2 0 7 for user operation on the table surface 2 0 3. There is.
  • FIG. 71 shows a part of the remote commander 20 1 G by comparison with FIG. In FIG. 71, parts corresponding to those in FIG. 70 are given the same reference numerals.
  • the table 2 0 2 is fixed and held at a fixed position on the floor 2 .B.
  • the projection for passing the image light from the projector 2 1 0 is applied to the portion of the floor 2 B where the table 2 0 2 is fixed and held in this way.
  • Windows 2 1 3 are provided.
  • the projector 2 10 and the imaging device 2 6 6 are arranged in a space between the floor 2 B and the floor 3 B corresponding to the projection window 2 1 3 described above.
  • the projector emits light from the projector 2 1 0.
  • the image light is placed on the table surface 2 0 3 of the table 2 0 2 through the projection window 2 1 3 provided on the floor '2 B.
  • the screen 2 0 6 is irradiated and the image is displayed on this screen 2 0 6.
  • the imaging device 2 6 6 allows the user to operate the finger on the screen 2 06 through the projection window 2 1 3 provided on the floor 2, together with the image displayed on the screen 2 6. Take an image.
  • the remote commander 2 0 1 G is configured in the same manner as the remote commander 2 0 1 F shown in FIG. 70 except for the configuration related to the arrangement position of the projector 2 1 0 and the imaging device 2 6 6 as described above. ing.
  • This remote commander 2 0 1 G can obtain the same effect as the remote commander 2 0 1 F, and the projector 2 1 0 and imaging device 2 6 6 have a space between the floor 2 ⁇ and the floor 3 ⁇ Because it is not located in the room, it does not disturb the indoor atmosphere.
  • FIG. 72 shows a part of the remote commander 201 in comparison with FIG. In FIG. 71, parts corresponding to those in FIG. 70 are given the same reference numerals.
  • This remote commander 2 0 1 ⁇ from the imaging device 2 6 6
  • the image processing unit 2 6 7 A that processes the video data detects the instruction by the dragging operation of the moving object on the screen 2 06 by distinguishing it from the instruction by the touch operation to the screen 2 0 6 only. This instruction is sent to the transmission / reception unit 2 1 2.
  • This remote commander 2 0 1 H has the same configuration as the remote commander 2 0 1 F shown in FIG. 70 except for the configuration related to the image processing unit 2 6 7 A.
  • This remote commander 2 1 H can obtain the same effect as the remote commander 2 0 1 F, and the image processing unit 2 6 7 A provides instructions and a moving object by simply touching the screen 2 6 6. The instruction by dragging is identified and detected, and the types of instructions by the user operation can be increased.
  • the screen 2 06 is disposed on the table surface 20 3 made of a transparent plate material, but the screen 2 6 6 itself constitutes the table surface 2 0 3. It may be the case.
  • the remote commander using a table has been described. However, the respective configurations may be appropriately combined.
  • the power described in the case of projecting an image by the rear projection type projector 20 is not limited to this, and the image may be projected by a front projection type projector. .
  • the projector instead of placing the projector under the floor or the like, the projector is placed on the ceiling or the like.
  • the furniture is a table.
  • the same remote commander can be obtained by using other furniture such as desks and towels.
  • the video equipment remote commander has been described.
  • the present invention is not limited to this and can be widely applied to remote commanders of various equipment.
  • the bird's-eye view image display unit 1 17 constituting the remote commander 1 1 6 includes, for example, a bird's-eye view image and a shooting point specified on the bird's-eye view image ( Images taken at (Shooting location) are displayed at the same time ( (See Figure 3 2 A).
  • FIG. 7.3 shows the configuration of the image processing apparatus 301 for displaying the bird's-eye view image on which the photographed image is arranged as described above.
  • the image processing apparatus 30 1 includes a media database 1 1 2, a control unit 1 1 3, a bird's-eye image display unit 1 1 7, and a touch panel 1 1 8.
  • This image display device 301 is constituted by a computer having sufficient image processing capability.
  • the media database 1 1 2 is formed by a recording / playback unit, for example, a large-capacity hard disk device.
  • This media database 1 1 2 contains various programs necessary for the operation of the image display device 3 0 1, image data of multiple types of bird's-eye images, and images of images taken at the shooting points specified on each bird's-eye image Data is recorded and retained, and the retained image data is reproduced and output.
  • the bird's-eye view image is an image obtained by viewing the shooting point of the photographed image from the sky.
  • an image of a live-action image, an image of an illustration, an image of a computer graphic, a map image, etc. can be used.
  • a map image is applied as a bird's-eye view image. That is, the media database 1 1 2 records and holds map image image data D 4 as image data of the bird's-eye view image.
  • the photographed images are various images photographed at the photographing points P1 to P3 set in the map image as shown in FIG. 74 using the map M.
  • the photographed images are A panoramic image is applied. That is, the media database 1 1 2 records and holds panoramic image data D 3 as image data of the captured image. This panoramic image was acquired by photographing the surroundings with a fisheye lens and formed in a circular shape.
  • the panorama image at each shooting point is set with information on the shooting point as link information that identifies the shooting point on the map image.
  • link information for specifying the corresponding panorama image may be set at the shooting point on the map image side.
  • this panoramic image the imaging result using a hyperboloidal mirror It is also possible to apply the imaging results of multiple images taken by panning the imaging device (camera) by a fixed angle, and to apply panoramic images by various methods widely.
  • each panoramic image is shot so that a specific direction is a fixed direction, and altitude information indicating the altitude of the shooting point is attached and provided.
  • the media database 1 1 2 is provided with the panoramic image data D 3, the map image image data D 4, and the programs necessary for the processing of the image processing device 3 0 1 installed in advance.
  • it may be provided by being recorded on various recording media such as an optical disk, magnetic disk, memory card, etc., or by downloading via a network such as the Internet. You may make it provide.
  • the bird's-eye view image display unit 1 1 7 is formed by a liquid crystal display panel, for example, and displays an image based on the video data DV 2 output from the image processing unit 1 1 3 B, thereby arranging a panoramic image on the map image. Display an image.
  • the touch panel 1 1 8 constitutes a user operation unit. With this touch panel 1 1 8, the user can perform operations such as changing the position of the viewpoint and switching scenes. The operation information from this touch panel 1 1 8 is notified to the display information selection section 1 1 3 A.
  • an operation device such as a mouse, an acceleration sensor, or a joystick can be used instead of the touch panel 118.
  • the control unit 1 13 is a calculation means for executing the program recorded in the media database 1 1 2 and constitutes various functional blocks by executing this program. That is, the control unit 1 1 3 includes an image processing unit 1 1 3 B and a display screen selection unit 1 1 3 A. Further, the image processing unit 1 1 3 B includes an omnidirectional image conversion unit 3 0 4 A, a map image / panorama image arrangement unit 3 0 4 B, and a viewpoint coordinate conversion unit 3 0 4 C.
  • the omnidirectional image conversion unit 30 4 A converts each pixel that forms a circular panorama image based on the imaging results A1 to A3 in the horizontal direction.
  • the panorama images A 1 to A 3 with these circular shapes are mapped to panoramic images B 1 to B with a rectangular shape with a wide angle of view in the horizontal direction. Convert the image to B3.
  • panorama images B1 to B3 with a rectangular shape with a wide angle of view in the horizontal direction can be generated by image conversion processing using a similar mapping process. You can.
  • panoramic images of a plurality of images captured by panning the imaging device by a certain angle can create such panoramic images B1 to B3 by connecting the plurality of images.
  • the map image Z panorama image arrangement unit 3 0 4 B arranges the panorama image on the map image based on the map image data D 4. In this case, place the panorama image so that it faces the viewpoint.
  • the viewpoint coordinate converter 3 0 4 C performs viewpoint coordinate conversion processing for converting an image in which a panoramic image is arranged in this way into an image viewed from the viewpoint direction, and the video data DV 2 resulting from the processing result is converted into a bird's-eye image.
  • the display information selection unit 1 1 3 A is to be processed by the image processing unit 1 1 3 B according to the notification of the operation information from the touch panel 1 1 8, that is, to be displayed on the bird's eye view image display unit 1 1 7, the map image and Select a panoramic image.
  • the image data of the selected map image and panorama image is read from the media database 1 1 2 and supplied to the image processing unit 1 1 3.
  • the display information selection unit 1.1 3 ⁇ ⁇ ⁇ gives viewpoint information to the viewpoint coordinate conversion unit 3 0. 4 C of the image processing unit 1 1 3 B according to the operation information notification from the touch panel 1 '1 8 .
  • step ST1 the control unit 1 13 starts display processing when the power is turned on or when the user touches the touch panel 1 1 8 and proceeds to step ST2.
  • the control unit 1 1 3 receives the image data D 4 of the map image to be displayed in the initial state from the media database 1 1 2 and the image of the panoramic image taken at the shooting point specified on the map image. Data D3, and information on the shooting location indicating the shooting location are read.
  • the map image to be displayed in this initial state is a fixed one set in advance, or one displayed at the end of the previous time.
  • step ST 3 the control unit 1 1 3 performs the panorama with the circular shape acquired in step ST 2 by the processing related to the function block of the omnidirectional image conversion unit 3 0 4 A.
  • Image images A1 to A3 are converted into horizontally long panoramic images B1 to B3 (see Fig. 75).
  • the processing in steps ST 2 and ST 3 described above is the initialization processing. '
  • FIG. 80 the control unit 1 1 3 performs processing on the map image M on the basis of the shooting point information by the processing related to the function block of the map image / panorama image arrangement unit 3 4 B.
  • Shooting point P:! ⁇ P 3 Landscape image display boards C 1 to C 3 that are planes of a certain size are placed, and this board C 1 to C 3 is set to face the direction of the viewpoint PS. Tilt.
  • the term “facing” refers to a relationship in which a straight line connecting the center of each board C 1 to C 3 and the viewpoint P S is orthogonal to the plane of each board.
  • the board C 1 to C 3 may stand upright on the map image M.
  • step ST 1.1 3 the control unit 1 1 3 performs panorama processing as shown in FIG. 8 1 through processing related to the functional block of the map image / panoramic image placement unit 3 0 4 B.
  • Images B 1 to B 3 are cut out by AR with a constant width corresponding to the size of each board C 1 to C 3.
  • an area AR having a constant width is cut out from the panoramic images B1 to B3, and the horizontal length of the panoramic images D1 to D3 displayed on the boards C1 to C3 is set as described later.
  • the control unit 113 sets the cut-out area AR as an area that can be seen from the viewpoint direction. For example, when the viewpoint exists in the north direction of the map image M, the south part of the panoramic images B1 to B3 is cut out. Also On the contrary, if the viewpoint exists in the south direction of the map image M, the north part of the panorama images B1 to B.3 is cut out.
  • the control unit 1 1 3 sequentially moves the cutout area AR as indicated by arrow C by moving the viewpoint.
  • step ST 1 1 4 the control unit 1 1 3 converts the images D 1 to D 3 of the cutout area AR cut out from the panoramic images B 1 to B 3 as described above, respectively, to the boards C 1 to Affixed to C 3, panoramic images D 1 to D '3 photographed at the photographing points P 1 to P 3 are arranged at the photographing points P 1 to P 3 of the map image M.
  • step ST 1 1 5 the control unit ⁇ 1 3 obtains the map image M on which the norama images D 1 to D 3 are arranged by processing related to the function block of the viewpoint coordinate conversion unit 3 0 4 C.
  • the viewpoint coordinate conversion process is executed so that the image is viewed from the viewpoint PS, and the video data DV 2 of the display image obtained by this process is supplied to the bird's-eye image display unit 1 17.
  • the viewpoint coordinate conversion process is executed by the parallel conversion process, but various methods can be applied as necessary.
  • the bird's-eye view image display unit 1 17 has an image in which panoramic images D1 to D3 are arranged on the map image M as seen from the viewpoint PS, as shown in FIGS. 8 2 A and 8 2 B. It is displayed in the state.
  • the display examples in Fig. 8 2 A and Fig. 8 2 B are in relation to the viewpoint PS arranged on the opposite side. , '
  • the control unit 1 1 3 places on the map image M triangle marks M 1 to M 3 with apexes facing downward so that the shooting point is indicated by the tip, and this mark M l
  • the panoramic images D1 to D3 are displayed above to M3 so that the photographing locations corresponding to the panorama images D1 to D3 can be grasped in detail.
  • set the length L of this mark M1 to M3 to be proportional to the altitude of the shooting location, and thereby adjust the altitude of the shooting location Be able to grasp roughly.
  • various shapes can be widely applied.
  • a mark and a panoramic image are displayed in a form as if a signboard is displayed on a pole stabbed in the ground, You can show the altitude by the length of this pole.
  • the control unit 1 1 3 displays buttons B 1 and B 2 on the front side for the user to control the movement of the viewpoint.
  • control unit 1 1 3 actually has a panorama on the map image M in this way.
  • the llama images D1 to D3 are arranged to form a 2D image viewed from the direction of the viewpoint PS.
  • the corresponding pixel values of the map image M and the panorama images A1 to A3 A series of these processes is executed by mapping.
  • step ST 1 1 5 After the processing of step ST 1 1 5, the control unit 1 1 3 ends the scenery image display processing in step ST 1 1 6, and proceeds to step ST 5 in FIG. 7 6 to perform the viewpoint conversion processing.
  • Figure 78 shows the procedure for the viewpoint conversion process. That is, the control unit 1 1 3 starts the viewpoint conversion process in step ST 2 11 and proceeds to step ST 2 1 2.
  • the control unit 1 1 3 determines whether or not the zoom-in operation is performed based on the operation information from the touch panel 1 1 8 by the processing related to the function block of the display image selection unit 1 1 3 A. When the zoom-in operation has been performed, the process proceeds to step ST 2 1 3 to perform zoom-in viewpoint movement processing, and thereafter, in step ST 2 1 8, the viewpoint conversion process ends.
  • step ST 2 1 If the zoom-in operation has not been performed in step ST 2 1 2, the control unit 1 1 3 proceeds to step ST 2 1 4, and determines whether or not the zoom-out operation has been performed. If the zoom-out operation has been performed, the process proceeds to step ST 2 15 to perform the zoom viewpoint movement process, and then the viewpoint conversion process is terminated in step ST 2 18. , '
  • the zoom-in and zoom-out viewpoint movement process described above is a process of changing the distance D from the map image M to the viewpoint S by a certain value, as shown in FIG.
  • the distance D is reduced by a certain value, and the viewpoint P S is brought closer to the map image M by a certain value.
  • zoom-out viewpoint movement processing the distance D is increased by a certain value, and the viewpoint PS is moved away from the map image M by a certain value.
  • the display image selection unit 1 1 3 A gives the viewpoint information thus changed to the viewpoint coordinate conversion unit 3 0 4 C described above.
  • the viewpoint movement process in step ST 2 1 3 or step ST 2 15 is repeatedly performed, and the viewpoint PS continuously changes.
  • the viewpoint information changed by the zoom-in or zoom-out viewpoint movement process is given to the viewpoint coordinate conversion unit 30 4 C, and the image is viewed from the viewpoint changed by the viewpoint coordinate conversion unit 3 0 4 C. like
  • the viewpoint coordinate conversion process as shown in FIG. 84, the image displayed on the bird's eye image display unit 1 1 7. is zoomed in or zoomed out.
  • step ST 2 16 If the zoom-out operation has not been performed in step ST 2 14, it is determined in step ST 2 16 whether or not the bird's-eye view viewpoint movement operation has been performed.
  • the control unit 1 1 3 proceeds to step ST 2 1 7 and performs the bird's-eye viewpoint movement process by the processing related to the function block of the display image selection unit 1 1 3 A. Then, in step ST 2 1 8, the viewpoint conversion process is terminated.
  • the above-described bird's-eye viewpoint moving process is a process of moving the position of the viewpoint P S as shown in FIGS. 85A to 85C, for example.
  • Figure 85 A shows an example in which the viewpoint PS is moved at a predetermined speed so as to turn around the point of interest.
  • Figure 85 shows an example of moving on a spherical surface of a hemisphere centered on the point of interest at a predetermined speed and path.
  • the viewpoint movement process in step ST 2 17 is repeated, and the viewpoint P S changes continuously.
  • the viewpoint information changed by the bird's-eye viewpoint movement processing is given to the viewpoint coordinate conversion unit 3 4 C so that the image is viewed from the viewpoint changed by the viewpoint coordinate conversion unit 3 0 4 C.
  • the viewpoint coordinate conversion process is executed.
  • the direction of the map image] i and the pods C 1 to C 3 is changed to follow the movement of the viewpoint PS, and
  • the panorama images D1 to D3 displayed on the boards C1 to C3 are also changed.
  • step ST 2 1 8 the controller 1 1 3 ends the viewpoint conversion process, and then proceeds to step ST 6 in FIG.
  • the control unit 1 1 3 determines whether or not there has been a scene switching operation by the processing related to the functional block of the display image selection unit 1 1 3 A. If there is a scene switching operation, proceed to step ST7.
  • the scene switching operation by the user is performed by selecting a new map image (bird's-eye view image) to be displayed on the bird's-eye view image display section 1. 17 using the touch panel 1 1 8.
  • the control unit 1 1 3 displays the menu screen on the bird's-eye view image display unit 1 1 7 alone or together with the map image, and the user selects a desired map image based on the menu screen. You may do it.
  • Figure 79 shows the scene switching process. That is, the control unit 1 1 3 starts the scene switching process at step ST 3 1 1 and proceeds to step ST 3 1 2.
  • the control unit 1 1 3 receives the image data D 4 of the selected map image from the media database 1 1 2 and the image data D of the panoramic image captured at the shooting point specified on the map image. 3
  • the information of the shooting point indicating the shooting point is inserted.
  • step ST 3 1 3 the control unit 1 1 3 performs panoramic image A with the circular shape acquired in step ST 3 1 2 by processing related to the functional block of the omnidirectional image conversion unit 3 0 4 A.
  • Image conversion processing is performed on 1 to A3 to horizontally long panoramic images B1 to B3 (see FIG. 75).
  • the processes in steps S T 3 1 2 and S T 3 1 3 described above are processes corresponding to the initialization processes in steps S T 2 and S T 3 described above. ...
  • control unit 1 13 ends the scene switching process at step ST 3 14, and proceeds to step ⁇ T 8 in FIG.
  • the new map image data D 4 etc. can be obtained by reading the new map image data D 4 etc. from the media database 1.1 2 as described above. Since the processing is performed using the, a new map image ⁇ etc. is displayed on the bird's-eye view image display section 1 17 and the scene is switched.
  • step ST8 the control unit 1 1 3 determines whether or not to end the display on the bird's-eye view image display unit 1 1 7. For example, the control unit 1 1 3 determines that the operation is finished when the power is turned off or the user performs an operation of touching a predetermined portion of the touch panel 1 1 8 twice in succession. In addition, for example, the control unit 1 1 3 is configured so that a predetermined time elapses from the last time when the user operates the touch panel 1 1 8. If so, it is determined to end. Note that the condition for determining termination is not limited to this.
  • control unit 1 1 3 When it is not determined to end, the control unit 1 1 3 returns to step ST 4 and repeats the same processing as described above. On the other hand, when determining that the process is to end, the control unit 1 1 3 proceeds to step ST 9 and ends the display process.
  • the display process is started when the power is turned on or when the user touches one of the touch panels 118.
  • the image data D 4 of the map image to be displayed in the initial state and the image of the panoramic image taken at the shooting point specified on the map image Data D 3 and information on the shooting point indicating the shooting point are read.
  • a display image is generated using the image data and the like. In this case, a panoramic image obtained by shooting at each shooting point of the map image is arranged and converted into an image viewed from the viewpoint.
  • an image in which a panoramic image is arranged on the map image is displayed on the bird's-eye view image display unit 1 17 as viewed from the viewpoint (see FIGS. 82 A and 82 B).
  • the touch panel 1 1.8 allows the user to perform operations for converting the point of view (zoom-in operation, zoom-out operation, bird's-eye view (The move operation etc.) will be performed (the view point move processing is performed in l control unit 1 1 3 and the panoramic image placed on the map image displayed in the bird's eye view image display portion 1 1 7 will move the view point position). It will change with it.
  • the control unit from the media database 1 1 2 1 1 3 reads the image data D 4 of the newly selected map image, the panorama image data D 3 taken at the shooting point specified on the map image, and the information of the shooting point. Then, an image based on the new map image data D 4 etc. is displayed on the bird's-eye view image display section 1 1 7 and scene switching is performed.
  • the image displayed on the bird's-eye image display unit 1 1 7 is taken there at the shooting point of the map image M (bird's-eye image).
  • the panorama image (photographed image) is placed. Therefore, the geographical relationship between the panorama images D 1 to D 3 can be easily grasped in the plurality of panorama images and the above-described embodiments.
  • the panoramic image arranged at the photographing point of the map image M is arranged so as to face the viewpoint PS, and further the map image on which this panoramic image is arranged.
  • the display image is obtained by converting M into an image viewed from the viewpoint. Therefore, the map image M is displayed as seen from the viewpoint PS, but the panorama image is displayed in a state of facing the viewpoint PS. Therefore, display an image that is consistent with the viewing direction. This makes it easier to understand the geographical relationship between multiple panoramic images.
  • panoramic image displayed on the map image M are those corresponding to the viewpoint, i.e. becomes an image that can be viewed from the perspective direction, the user can confirm the image, You can fully understand the places introduced by map images and panoramic images. .
  • the user can change the position of the viewpoint PS using the touch panel 1 18 which is the user operation unit. Therefore, the user can change the direction of the displayed map image by changing the viewpoint position, and the content of the panoramic image placed on the map image M changes accordingly. It is easier to understand the relationship.
  • the arrangement of the norama image on the map image M is executed by cutting out and arranging a partial area of the panorama image (the 8 1 1 (See figure) Therefore, even when a large number of horizontally long panoramic images are displayed, overlapping between the panoramic images is prevented and visibility is ensured, and this also makes it easy to grasp the geographical relationship between the panoramic images. Is possible.
  • the clipping process may be omitted and the panoramic image may be placed directly.
  • the panoramic image placed on the map image M Can be seen from the viewpoint direction
  • the display direction of the panoramic image is aligned with the scenery that can actually be seen at the site. be able to.
  • FIG. 7 3 shows an example in which the remote commander 1 16 is formed on a table that is furniture, and a bird's-eye image display unit 1.16 is arranged on the table surface. .
  • image display device 301 shown in FIG. 73 can also be applied to a carna pigation device as shown in FIG. 87.
  • the corresponding panorama image is arranged and displayed on the map image corresponding to the current position detected by GPS (Global Positioning System) or the like and the destination designated by the user. Also, at this time, the viewpoint is set in the default direction, and further, the viewpoint is set according to the direction of the car detected by GPS or the like, and the map image and the panorama image are displayed.
  • GPS Global Positioning System
  • the user can select the destination on the map image by operating the touch panel on the display screen, and can also select the destination by selecting the panoramic image.
  • the viewpoint position can be moved in various directions by the same touch panel operation.
  • the movement of this viewpoint includes movement by rotation around the center of the displayed map and parallel movement with respect to the displayed map. In the case of rotation, the desired place can be moved in various directions. In the case of parallel movement, for example, the route along the moving route can be confirmed.
  • the image display device 30 1 shown in FIG. 73 can be similarly applied to a terminal device or the like disposed in a station, a convenience store, etc., as shown in FIG. 88.
  • the present invention is not limited to this, and instead of the panoramic image, it is difficult to display on one screen.
  • the present invention can be widely applied when displaying a wide-angle image, and also when displaying an image with a normal angle of view.
  • the media data configured by the HDD or the like
  • the present invention is not limited to this.
  • the present invention can be widely applied to the case of acquiring image data by accessing a server on the network.
  • the present invention can satisfactorily view content without disturbing the indoor atmosphere, and can be applied to an audiovisual system for viewing video content, audio content, and the like.

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Accounting & Taxation (AREA)
  • Marketing (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Projection Apparatus (AREA)

Abstract

　室内の雰囲気を乱さずにコンテンツの視聴を良好に行い得るようにする。視聴覚室１は、一の面の壁が内壁２および外壁３からなっている。内壁２の一部または全部はリアプロジェクション用のスクリーン６Ｃ、振動板（スピーカユニット）６Ａなどを構成している。内壁２および外壁３の間の空間にプロジェクタ１０、アンプ等の機材が配置されており、またその空間は人が侵入可能な大きさを持ち、機材のメンテナンスを行う際にサービスマン等が当該空間に入って容易に作業を行い得るようにされている。視聴覚室１の室内にプロジェクタ等の機材を配置するものではなく、室内の雰囲気を乱さずにコンテンツの視聴が可能となる。

Description

明細書
視聴覚システム
発明の背景
技術分野
この発明は、 コンテンツを視聴するための視聴覚システムに関する。 詳しくは 、 この発明は、 少なくとも一の面の壁が內壁および外壁からなる部屋と、 当該内 壁および外壁の間の空間に配置され、 内壁に少なくとも映像表示機能または音声 出力機能を発揮させるための機材とを備えることによって、 室内の雰囲気を乱さ ずにコンテンツの視聴を良好に行い得る視聴覚システムに係るものである。 背景技術
従来、 映像コンテンツを鑑賞する視聴覚室には、 プロジェクタ等の各種映像コ ンテンッに係る処理に必要な機材が配置されていた。
ここでプロジェクタは、 大画面により映像コンテンツを.楽しむ場合に適用され 、 いわゆるフロント型のプロジ千クタでは'、 スクリーンの正面から映像光を照射 して所望の映像を表示し、 背面投影型のプロジェクタでは、 スクリーンの背面側 から映像光を照射して所望の映像を表示する。 これによりフロント型のプロジェ クタでは、 映像光を出射する構成とスクリーンとが別体化され、 この映像光を出 射する構成が天井等に設けられる。 これに対して背面投影型のプロジヱクタでは 、 映像光を出射する構成とスクリーンとが一体に形成されている。 .
このようなコンテンツを鑑賞する視聴覚室に関して、 例えば日本特開平 5 _ 1 6 8 0 8 0号公報には、 視聴覚室に合致した形状、 材料でスピーカキャビネット を作成することで、 省スペースを図り、 所望の音場を確保する工夫が提案されて いる。 発明の開示
複数台のプロジェクタによるマルチ画面表示によれば、 高解像度の映像を大画 面で表示することができる。 しか'しながら、 複数台のプロジェクタを用いてマル チ画面表示する場合、 その分、 室内に多数のプロジェクタ等を配置することが必 要になり、 室内の雰囲気がこれら多数のプロジェクタにより乱されてしまう問題 がある。 また、 単に映像コンテンツの鑑賞に必要な機器を室内に配置する場合に あっても、 ユーザによっては、 さらには部屋の造りによっては、 室内の雰囲気が 乱されてしまう問題がある。 ，
この発明の目的は、 室内の雰囲気を乱さずにコンテンツの視聴を良好に行い得 る視聴覚システムを提供することにある。
この発明の概念は、 コンテンツを視聴するための視聴覚システムであって、 少 なくとも一の面の壁が所定の間隔をもって配された内壁および外壁からなる部屋 と、 上記部屋の上記内壁および上記外壁の間の空間に配置され、 上記内壁に少な くとも映像表示機能または音声出力機能を発揮させるための機材とを備えること を特徴とする視聴覚システムにある。 ·
この発明において、 部屋は少なくとも一の面の壁が所定の間隔をもって配され た内壁および外壁からなるものとされる。 そして、 この内壁および外壁の間の空 間に、 この内壁に少なくとも映像表示機能または音声出力機能を.発揮させるため の機材が配置される。 例えば、 内壁および外壁.の間の空間は人が侵入可能な大き さをもつようにされる。 この場合、. 内壁および外壁の間の空間に機材を配置する 際およびその機材のメンテナンスを行う際に、 サービスマン等が当該空間に入つ ていって作業を容易に行い得る。
例えば、 内壁の一部または全部はリアプロジェクシヨン用のスクリーン （曇り ガラス、 不透明アクリル板など） を構成するようにされ、 内壁および外壁の間の 空間.に配置される機材としてスクリーンに映像を投影するプロジヱクタが含まれ る。 この場合、 例えばプロジェクタは短辺方向が壁厚方向となるように外壁に固 定され、 そしてこのプロジェクタから外壁に沿った方向に出射される映像光はミ ラーで反射されてスクリーンに入射される。 この場合、 プロジェクタを強固な外 壁に対して安定して取り付けることができる。 またこの場合、 プロジェクタは短 辺方向が壁厚方向となるように外壁に固定されるため、 当該プロジェクタが外壁 に固定されても内壁および外壁との間はそれほど狭くはならない。 またこの場合 、 このプロジェクタから外壁に沿った方向に出射される映像光はミラーで反射さ れてスクリーンに入射され、 映像光の光路が折り曲げられるので、 内壁と外壁の 間隔を短くできる。 ' '
また例えば、 内壁の一部または全部は振動子が取り付けられた振動板を構成す るようにされ、 内壁および外壁の間の空間に配置される機材として、 音声信号に 基づいて振動子を駆動する、 例えばアンプ等の駆動機器が含まれる。
このように、 少なくとも一の面の壁が内壁および外壁からなる部屋と、 当該内 壁および外壁の間の空間に配置され、 内壁に少なくとも映像表示機能または音声 出力機能を発揮させるための機材とを備えるものであり、 室内に機材を配置する ものではなく、 室内の雰囲気を乱さずにコンテンツの視聴を良好に行い得る。
なお、 例えば、 部屋は、 天井裏とこの天井裏に対して所定の間隔をもって配さ れた天井とからなる二重天井構造、 あるいは床下とこの床下に対して所定の間隔 をもって配された床とからなる二重床構造を有するものとされる。 これら二重天 井權造あるいは二重床構造を有する場合には、 例えば天井裏あるいは床下にプロ ジェクタ、 アンプ等の機材を配置することも可能となる。
また例えば、 部屋は、 全ての壁が所定の間隔をもって配された内壁および外壁' からなり、 天井裏とこの天井裏に対して所定の間隔をもつて配され天井とからな る二重天井構造を有し、 床下とこの床下に対して所定の間隔をもつて配された床 とからなる二重床構造を有し、 内壁、 天井および床で構成される構造体が床下に 対して複数の脚をもって支持されているものとされる。 これにより、 壁、 天井、 床の全てに空間を形成でき、 しかも内壁、 天井おょぴ床で構成される構造体は外' 壁に対して完全に独立した状態とできる。
また例えば、 部屋は、 全ての壁が所定の間隔をもって配された内壁および外壁 からなり、 天井裏とこの天井裏に対して所定の間隔をもつて配され天井とからな る二重天井構造を有し、 床下とこの床下に対して所定の間隔をもって配された床 とからなる二重床構造を有し、 天井およぴ床は外壁に固定され、 内壁は天井およ ぴ床に固定されているものとされる。 これにより、 壁、 天井、 床の全てに空間を 形成でき、 しかも内壁を天井およぴ床を介して外壁に安定して固定保持できる。 また例えば、 部屋の一部または全部の内壁は、 交換可能に保持された複数の板 状部材からなつているものとされる。 これにより、 必要に応じて化粧の異なる板 状部材を交換することで、 室内の雰囲気を種々に変更できる。 また、 リアプロジ ヱクシヨン用のスクリーンの大きさの変更、 あるいは振動子が取り付けられた振 動板の位置の変更などを容易に行うことができる。
また例えば、 部屋は、 外部から外壁および内壁を通じて内部に入るための部屋 用入り 口を有し、 この部屋用入り 口の側面に内壁および外壁の間の空間に入るた めの空間用入り口が設けられているものとされる。 これにより、 内壁あるいは外 壁に空間用入り口を設けることなく、 当該空間用入り口を容易に設けることがで さる。 この発明によれば、 少なくとも一の面の壁が内壁および外壁からなる部屋と、 当該内壁および外壁の間の空間に配置され、 内壁に少なくとも映像表示機能また は音声出力機能を発揮させるための機材とを備えるものであり、 機材が室内に配 されるものではなく、 室内の雰囲気を乱さずにコンテンツの視聴を良好に行うこ とができる。 図面の簡単な説明
第 1図は、 二重壁構造の視聴覚システムの構成を示す斜視図である。
第 2図は、 内壁のフレーム構成を示す図である。
第 3図は、 内壁のフ..レーム構成を説明するための図である。
第 4図は、 フレームの一部を拡大して示した図である。
第 5図は、 水平、 垂直フレームの溶接状態を示す図である。
第 6図は、 加重方向支えの水平フレームへの固定の仕方を説明するための図で あ "S o
第 7図は、 加重方向支えの水平フレームへの固定の仕方を説明するための図で ある。
第 8図は、 板状ュニットの前後方向支えを示す図である。
第 9図は、 前後方向支えのフレーム部分への固定の仕方を説明するための図で ある。 第 10図は、 複数のフレーム部分の連結の仕方を説明するための図である。 第 1 1図は、 視聴覚システムの他の構成を示す図である。
第 1 2図は、 視聴覚しステムの他の構成を示す図である。 '
第 1 3図は、 プロジヱクタの設置状態を説明するための図である。
第 14図は、 プロジヱクタの設置状態 （比較例） を示す図である。
第 1 5 A図および第 15B図は、 視聴覚システムの他の構成を示す図である。 第 1 6 A図および第 16 B図は、 '視聴覚システムの他の構成を示す図である。 第 1 7図は、 視聴覚システムの他の構成を示す図である。
第 1 8図は、 部屋用入り口と空間用入り口とを示す図である。
第 1 9図は、 背景画像表示部および鳥瞰画像表示部に画像を表示するための画 像表示システムの構成を示すブロック図である。
第 2 OA図および第 20 B図は、 全周囲画像データを説明するための図である 第 21図は、 画像歪みを説明するための図である。
第 22図は、 菌像歪みの補正を説明するための図である。
第 23図は、 画像歪みの補正を説明するための図である。，
第 24図は、 消失点を説明する,ための図である。
第 25図は、 画像処理装置の制御部の処理手順を示すフローチャートである。 第 26 (A1) 図， 第 26 (A2) 図， 第 26 (B 1) 図， 第 26 (B 2) 図 ， 第 26 (C 1) 図おょぴ第 26 (C 2) 図は、 鳥瞰画像と背景画像表示部の表 示との関係を示す図である。
第 27 (A) 図， 第 27 (B 1) 図， 第 27. (B 2) 図， 第 27 iC 1) 図お よび第 27 (C 2) 図は、 背景画像表示部の画像表示を説明するための図である 第 28 (A) 図および第 28 (B) 図は、 消失点による画像表示位置の補正を 説明するための図である。
第 29図は、 画像処理装置の制御部の処理手順を示すフローチャートである。 第 30図は、 画像処理装置の制御部の処理手順を示すフローチャートである。 第 3 1図は、 背景画像表示部の表示における入力を説明するための図である。 第 3 2 A図おょぴ第 3 2 B図は、 鳥瞰画像表示部における鳥瞰モードおよび没 入モードの表示例を模式的に示した図である。
第 3 3図は、 鳥瞰画像表示部の表示状態遷移を示す状態遷移図である。
第 3 4図は、 全周囲画像の並列表示を示す図である。
第 3 5図は、 全周囲画像の並列表示に係る制御部の処理手順を示すフローチヤ ートである。
第 3 6図は、 交点のマーク検出を説明するための図である。
第 3' 7図は、 太陽の方向と撮影方向との関係を説明するための図である。
第 3 8図は、 撮影の向きによる輝度レベルの変化を示す図である。
第 3 9図は、 照明制御情報を説明するための図である。
第 4 0図は、 照明制御情報の処理に係る制御部の処理手順を示すフローチヤ一 トである。
第 4 1図は、 画像表示システムの他の構成を示すブロック図である。
第 4 2図は、 内壁、 天井、 床で囲まれた視聴覚室 （部屋） の内部の様子 （映像 光をスクリーンに照射） を示す斜視図である。
第 4 3図は、 プロジェクタの移動機構の構成を示す分解斜視図である。
第 4 4図は、 プロジェクタのミ,ラー可動機構を示す斜視図である。
第 4 5図は、 プロジェクタの構成.を示すブロック図である。 '
第 4 6'図は、 天井と天井裏との間の空間に配置されたプロジェクタの天井面に 沿った移動を説明するための図である。 '
第 4 7図は、 床と床下との間の空間に配置されたプロジェクタの床面に沿った 移動を説明するための図である。 、
第 4 8図は、 天井と天井裏との間の空間に配置されたプロジェクタからの映像 光の投影例を示す図である。
第 4 9図は、 床と床下との間の空間に配置されたプロジヱクタからの映像光の 投影例を示す図である。
第 5 0図は、 内壁、 天井、 床で囲まれた視聴覚室 （部屋） の内部の様子 （映像' 光を天井、 床に照射） を示す斜視図である。
第 5 1図は、 内壁、 天井、 床で囲まれた視聴覚室 （部屋） の内部の様子 （映像 光を壁、 窓に照射） を示す斜視.図である。
第 5. 2図は、 内壁、 天井、 床で囲まれた視聴覚室 （部屋） の内部の様子 （映像 光を床側からテーブル面に照射） を示す斜視図である。
第 5 3図は、 映像光が照射されるテーブルの構成を示す図である。
第 5 4図は、 内壁、 天井、 床で囲まれた視聴覚室 （部屋） の内部の様子 （映像 光を天井側からテーブル面に照射） を示す斜視図である。
第 5 5図は、 上下方向 （垂直方向). に連続する 2つの視聴覚室 （部屋） に 1台 の.プロジヱクタでスクリーンに映像を表示する視聴覚室システムの一部構成を示 す図である。
第 5 6図は、 上下方向 （垂直方向） に連続する 2つの視聴覚室 （部屋） に 1台 のプロジェクタでスクリーンおよびテーブルに映像を表示する視聴覚室システム の一部構成を示す図である。
第 5 7図は、 左右方向 （水平方向） に連続する 2つの視聴覚室 （部屋） 1台の プロジヱクタで映像を表示する視聴覚室システムの一部構成を示す図である。 第 5 8図は、 内壁、 天井、 床で囲まれた視聴覚室 （部屋） の内部の様子 （映像 光を天井の帯状の投影用窓を通して床に照射） を示す斜視図である.。
第 5 9図は、.内壁、 天井、 床で囲まれた視聴覚室 （部屋） の内部の様子 （映像 光を内壁の帯状の投影用窓を通して対向する内壁に照射） を示す斜視図である。 第 6ひ図は、 リモートコマンダの構成 （プロジェクタを床に配置） を示す図で ある。'
第 6 1図は、 リモートコマンダを構成するテーブルを示す斜視図である。
第 6 2 A図および第 6 2 B図は、 テープルを構成するテーブル台の側面図およ び底面図である。
第 6 3図は、 テーブル面に配置されたスクリーンにプロジェクタから映像光を 照射し、 当該スクリーンに映像を表示している状態を示す図である。
第 6 4図は、 リモートコマンダの他の構成 （プロジェクタを床と床下との間の 空かに配置） を示す図である。
第 6 5図は、 リモートコマンダの他の構成 （プロジェクタを床に配置し、 光路 短縮用のレンズを使用） を示す図である。 第 6 6図は、 リモートコマンダの他の構成 （プロジェクタを床と床下との間の 空間に配置し、 ミラーで光路を折り曲げる） を示す図である。 ..
第 6 7図は、 リモートコマンダの他の構成 （プロジェクタを床と床下との間の 空間に配置し、 ミラーで光路を折り曲げ、 さらに光路短縮用のレンズを使用） を 示す図である。
第 6 8図は、 テ ブルによるリモートコマンダが配置された視聴覚室の内部の 様子 （スクリーンを構成する液晶ブイルムは半透明状態） を示す斜視図である。 第 6 9図は、 テーブルによるリモートコマンダが配置された視聴覚室の内部の 様子 （スクリーンを構成する液晶フィルムは透明状態） を示す斜視図である。 第 7 0図は、 リモートコマンダの他の構成 （センシング部が撮像装置等からな り、 プロジェクタを床に配置） を示す図である。
第 7 1図は、 リモートコマンダの他の構成 （センシング部が撮像装置等からな り、 プロ ェクタを床と床下との間の空間に配置） を示す図であ'る。 .
第 7 2図は、 リモートコマンダの他の構成 （センシング部が撮像装置等からな り、 移動体のドラッグ等も検出） を示す図である。
第 7 3図は、：撮影画像が配置'された鳥瞰画像を表示するための画像処理装辱の 構成を すブロック図である。 ， ' . .
第 7 4図は、 撮影画像としてのパノラマ画像を説明するための図である。
第 7 5 A図および第 7 5 B図は、 全方位画像変換部の処理を説明するための図 である。
第 7 6図は、 画像表示装置を構成する制御部における表示処理の手順を示すフ ローチャートである。 第 7 7図は、 表示処理における風景画像表示処理の手順を示すフローチャート である。
第 7 8図は、 表示処理における視点変換処理の手順を示すフローチャートであ る。
第 7 9図は、 表示処理におけるシーン切り替え処理の手順を示すフローチヤ一 トである。
第 8 0図は、 地図画像にパノラマ画像を配置する際の、 風景画像表示ボードの 配置と視点による傾き調整を説明するための図である。
第 8. 1図は、 パノラマ画像からの視点に対応した一部領域の切り出しを説明す るための図である。 '
第 8 2 A図および第 8 2 B図は、 地図画像上にパノラマ画像を配置した画像の 表示例を示す図である。
第 8 3図は、 ズームイン、 ズームアウ トの視点移動処理を説明するための図で ある。 '
第 8 4図は、 鳥瞰画像表示部におけるズームィン、 ズームァゥトの表示例を示 す図である。
第 8 5 A図， 第 8 5 B図および第 8 5 C図は、 鳥瞰視点移動処理の例を示す図 である。
第 8 6図は、 テーブル面に鳥瞰画像表示部が配置されてなるリモートコマンダ の一例を示す図である。
第 8 7'図は、 カーナビゲーシヨン装置への適用例を示す図である。
第 8 8図は、.駅、 コンビニエンスストァ等の端末装置への適用例を^す図であ る。 , - . 発明を実施するための最良の形態
( 1 ) ·視聴覚システム
第 1図は、 視聴覚システムの構成を示している。 この視聴覚システムは、 一の 面の壁が所定の間隔をもって配された内壁 2および外壁 3とからなる視聴覚室 （ 部屋） 1と、 内壁 2および外壁 3との間の空間に配置され、 内壁 2に少なくとも 映像奉示機能または音声出力機能を発揮させるためのプロジェクタ 1 0等の機材 とを備えている。
視聴覚室 1は、 一般家庭に形成された視聴覚室であり、 通常の一般家庭の 1室 を形成する 4面の壁のうちの一の面に内壁 2が設けられ、 この一の面の壁が内壁 2と外壁 3とからなる二重構造とされたものである。 この視聴覚室 1は、 残る 3 面の壁おょぴ外壁 3が、 通常の家屋における壁と同一に、 例えば建物構造体によ る壁面に化粧板を配置する等により形成される。 また天井、 床にあっても、 通常 の家屋における天井、 床と同一に 成される。
内壁.2は、 第 2図に示すように、 天井、 床との間に、 一定のピッチにより垂直 フレーム 4を設置した後、 さらにこの垂直フレーム 4， 4の間に水平フレーム 5 を水平に配置して骨組みが形成され、 この骨組みに、 第 1図に示すように板状ュ ニット 6 A〜6 Dが配置されて形成される。 ここで、 板状ユニット 6 A〜6 Dは 板状部材を構成している。 ，
第 3図を参照して、 内壁 2のフレーム構成の詳細についてさらに説明する。 こ の第 3図は、 一対の垂直フレーム 4， 4に対応したフレーム部分 2 4のみを示し ている。 第 3図の上側は、 フレーム部分 2 4を図中正面から見たときの図を示し 、 第 3図の下側は、 フレーム部分 2 4を図中上側から見たときの図を示している 。 すなわち、 フレーム部分 2 4は、 板状ユニットを固定する面の断面がコの字型 の形状をしている。
フレー Λ部分 2 4は、 第 3図の上側で示すように、 6本のフレーム 5 1 A〜 5. 1 ?で構成されている。 ここで、 フレーム 5 1 E， 5 1 Fはそれぞれ第 2図に示 す垂直フレーム 4を構成しており、 フレーム 5 1 A〜 5 1 Dはそれぞれ第 2図に 示す水平フレーム 5を構成している。 これらフレーム 5 1 A〜5 1 Fは、 それぞ れ、 例えば、 金属などの素材から形成されている.。
また、 フレーム 5 1 A〜5 1 Fのそれぞれには、 所定の位置に長穴 （または丸 穴） が設けられており、 それらの長穴は、 フレーム 5 1 A〜5 1 Fのそれぞれを 等分割する所定の位置にそれぞれ設けられている。 例えば、 フレーム 5 1 (フレ ーム5 1八〜5 1 ? ) の一部を拡大して見た場合、 フレーム 5 1には、 第 4図の 例で示すように、 短手方向に長い長穴 5 3— :！〜 5 3— 4が、 それぞれ、 所定の 間隔をもって穿設されている。
すなわち、 フレーム部分 2 4においては、 第 3図に示すように、 フレーム 5 1 A〜 5 1 Fのうち、 水平フレーム 5を構成するフレーム 5 1 A〜 5 1 Dのそれぞ れには、 縦長の長穴が設けられ、 垂直フレーム 4を構成するフレーム 5 1 E， 5 I Fのそれぞれには、 横長の長穴が設けられている。
フレーム 5 1 E， 5 1 Fは、 L字アングル材として形成され、 直線型となるフ レーム 5 1 A〜5 1 Dのそれぞれと、 例えば、 溶接により固定される。 例えば、 フレーム部分 2 4においては、 第 5図に示すように、 直線型のフレーム （水平フ レーム） 5 1 Aおよび L字型のフレーム （垂直フレーム） 5 1 Eが溶接により固 定されることにより、 第 3図の下側で示すように、 その断面がコの字型の形状と なる。
すなわち、 詳細は後述するが、 フレーム部分 2 4は、 その断面がコの字型の形 状をしているので、 図中正面側からだけでなく、，左右の側面側からも、 フレーム 5 1 E , 5 1 Fのそれぞれに設けられた長穴を利用することができる。
.次に.、 上述したフレーム部分 2 4に対する板状ユニットの取り付けの詳細につ いて説明する。 なお、 以下の説明においては、 フレーム 5 1 A〜5 1 Fを個々に 区別する必要がない場合、 単に、 フレーム 5 1と称する。
第 6図および第 7図を参照して、 板状ユニットを、 フレーム部分 2 4に取り付 ける際に、 加重方向に支える加重方向支え 2 5について説明する。 第 6図は、 加 重方向支え 2 5をフレーム 5 1に固定するときの斜視図を示し、 第 7図は、 第 6 図を上側から見た場合の図を示している。
加重方向支え 2 5は、 例えば、 金属などの素材から形成される。 加重方向支え 2 5は、 第 6図に示すように、 L字アングル材からなり'、 その L字アングル材に は、 フ ーム 5 1に設けられている長穴に嵌めることが可能となるボルト 6 1 A およびボルト 6 1 Bのそれぞれが設けられている。 ここで、 フレーム 5 1は水平 フレームであって、 フレーム 5 1 B〜5 1 Dが対応する。
加重方向支え 2 5をフレーム 5 1に固定する際、 第 7図に示すように、 加重方 向支え 2 5のポルト 6 1 Aおよびボルト 6 1 Bのそれぞれを、 フレーム 5 1の所 定の長穴に嵌め込み、 この嵌め込まれたボルト 6 1 Aおよびボルト 1 Bのそれ ぞれ (こ、 ナット 6 2 Aおよびナツト 6 2 Bを螺合させる。
第 8図、 第 9図を参照して、 板状ユニットを、 フレーム部分 2 4に取り付ける 際に、 前後方向に支える前後方向支え 2 6について説明する。 前後方向支え 2 6 は、 例えば、 金属などの素材から形成される。 前後方向支え 2 6 ( 2 6 A, 2 6 B ) は、 第 8図に示すように、 断面コの字型の形状で形成され、 フレーム部分 2 4に着脱自在に取り付けられる。 この前後方向支え 2 6は、 第 9図に示すように 、 そのコの字型の形状を利用して、 前後方向支え 2 6 A， 2 6 Bにより板状ュニ ット 3 6を挟み込むことで、 当該板状ュニット 3 6を前後方向で支える。
第 9.図に示すように、 前後方向支え 2 6 A, 2 6 Bのそれぞれには、 例えば、 フレーム部分 2 4のフレーム （垂直フレーム） 5 1に設けられている長穴に嵌め ることが可能となる所定の個数のボルト （図示せず） が設けられており、 それら のボルトは、 フレーム 5 1の長穴に嵌め込まれ、 ボルトの個数に対応した個数の ナット （第 9図の例ではナット 7 3 Aおよびナット 7 3 B ) により固定されてい る。
また、 前後方向支え 2 6 A, 2 6 Bのそれぞれは、 板状ュ-ット 3 6を挟み込 む場合、 当該板状ユニット 3 6とともに、 この板状ユニット 3 6をさらに挟むよ うにして所定の形状の緩衝材 （第 9図では、 緩衝材 7 1 A、 緩衝材 7 1 B、 緩衝 材 7 2 A、 および緩衝材 7 2 B ) も一緒に挟み込む。
緩衝材 7 1 A、 緩衝材 7 1 B、 緩衝材 7 2 A、 および緩衝材 7 2 Bのそれぞれ は、 例えば、 ウレタン （スポンジ） またはゴムなどの素材により形成される。 緩 衝材 7 1 Aおよび緩衝材 7 1 Bのそれぞれは、 板状ュニット 3 6の前方に設けら れ、. 緩衝材 7 2 Aおよび緩衝材 7 2 Bのそれぞれは、 板状ュニット 3 6の後方に 設けられて、 当該板状ュニット 3 6にかかる衝撃を吸収して.保護している。
また、'フレーム部分 2 4から板状ュ-ッ 'ド 3 6を取り外す場合、 '前後方向支え 2 6 Aに設けられたボルトに螺合されているナット 7 3 Aを緩め、 前後方向支え 2 6 Aをフレーム 5 1の長穴に沿って右側に移動させる。 また、 同様に、 前後方 向支え 2 6 Bに設けられたボルトに螺合されているナット 7 3 Bを緩め、 前後方 向支え 2 6 Bをフレーム 5 1の長穴に沿って左側に移動させる。 これにより、 板 状ユニット 3 6の取り外しが可能となる。 .
ナット 7 3 A, 7 3 Bをボルトから完全に外した状態として、 前後方向支え 2 6 A, 2 6 Bに設けられているポルトをフレーム 5 1の長穴から引き出し、 当該 前後方向支え 2 6 A, 2 6 Bをフレーム部分 2 4から取り外すことでも、 板状ュ ニット 3 6の取り外しが可能となる。
第 2図に示す内壁 2のフレーム構成では、 上述したフレーム部分 2 4が水平方 向に所定個数だけ配された構成となっている。 第 1 0図を参照して、 フレーム部 分 2 4を水平方向に連結させる場合について説明する。 この第 1 0図は、 連結さ れたフレーム部分 2 4 -1, 1 4 - 2 上側から見た場合の図を示している。
フレーム部分 2 4 -1， 2 4 - 2において、 垂直フレームであるフレーム 5 1 E , 5 1 Fのそれぞれは、 第 3図および第 5図により説明したように、 L字アングル 材として形成されており、 正面側からだけでなく、 左右の側面側からも、 当該フ レーム 5 1 E , 5 1 Fのそれぞれに設けられた長穴を利用することができる。 す なわち、 フレーム部分 2 4 -1, 2 4 - 2のそれぞれは、 板状ユニッ ト 3 6 A, 3 6 Bのそれぞれを固定する面の断面が、 コの字型の形状となるので、 そのコの字型 の形状を利用して、 当該フレーム部分 2 4 -1, 1 4 -2を水平方向に連結させる。 ジョイント部 8 1は、 例えば、 ボルト 8 1 Aおよびナツト 8 1 Bより、 フレー ム部分 2 4 - 1の図中左側の側面と、 フレーム部分 2 4 - 2の図中右側の側面とを固 定する。 すなわち、 ジョイント部 8 1は、 フレーム部分 2 4 -1の L字型のフレー ム 5 1 Fと、 フレーム部分 2 4 - 2の L字型のフレーム 5 1 Eとのそれぞれを水平 方向に並べたとき、 L字型の形状となる面のうち、 向き合っている面のそれぞれ に設けられている長穴を、 所定の個数のポルト 8 1 Aとナット 8 1 Bとにより固 定する。
上述したように、 内壁 2は、 交換 ¾T能に保持された複数の 状ユニット （板状 部材） からなつている。 なお.、 第 1図には、 内壁 2の全面が板状ユニットからな るものを示したが、 内壁 2の一部のみが交換可能に保持された複数の板状ュニッ 'トからなるようにしてもよい。 これにより、 必要に応じて化粧の異なる板状ュニ ットに交換することで、 室内の雰囲気を種々に変更できる。 また、 リアプロジェ クシヨン用のスクリーンの大きさの変更、 あるいは振動子が取り付けられた振動 板の位置の変更などを容易に行うことができる。. 、
第 1図に戻って、 板状ユニット 6 A〜6 Dは、 映像コンテンツの視聴に係る各 種機能ユニットであり、 この視聴覚室 1に求められる機能、 デザイン等に応じて 、 骨組みに配置される。 この第 1図に示す例では、 この内壁 2の両端の垂直フレ ーム 4間に、 スピーカの機能を担う板状ユニット 6 Aが 3個ずつ配置される。 以 下、 このスピーカの機能を担う板状ユニット 6 Aを、 適宜、 スピーカユニットと 呼ぶ。
ここで、 スピーカユニット 6 Aは、 音声信号による駆動により振動する振動子 8が、 この振動子 8の振動により振動する振動板 9に、 一定のピッチで配置され て構成'されている。 これにより、 音声信号に基づいて振動子 &が駆動されること で振動板 9が振動してスピーカとして機能するように形成される'。 なお、 スピー 力ュ-ット 6 Aは、 図示しない枠体に自在に振動可能に振動板 9を保持し、 これ により充分な強度を確保すると共に、 垂直フレーム 4に配置可能に形成される。 なお振動板 9の表側面には、 サラン等による化粧部材が設けられる。
この視聴覚室 1では、 このスピーカユエット 6 Aの内側め垂直フレーム 4 ,· 4 間に、 単なる目隠し機能を担う板状ユニット 6 B、 スクリーンとしての機能を担 う板状ユニット 6 Cが配置されている。 なお、 以下において、 この目隠し機能を 担う板状ュニットをブランクュニットと呼び、 スクリーンとしての機能を担う板 状ュニッ ト 6 Cをスクリーンュニッ トと呼ぶ。 ここで、 ブランクユニット 6 Bは 、 単なる目隠し機能を担うことにより、 表側面に化粧を施した石膏ボード等の板 材により形成される。
れに対して、 スクリーンユニット 6 Cは、 背面投影型プロジェクダのスクリ ーンの機能を担い、 これにより背面投影型プロジェクタのスクリーンに適用され る扳材を枠体により補強して形成される。 具体的に、 曇りガラス、 不透明ァク.リ ル板等 枠体により保持して.形成される。 との視聴覚室 1は、 このスクリーンュ ニット 6 Cに対応して、 このスクリ.ーンュニット 6 Cの背面 位置する外壁 3に プロジェクタ 1 0が配置される。 これにより、 の視聴覚室 1は、 スクリーンュ ニット 6 Cにより各種映像コンテンツの映像を鑑賞できるように作成される。 また、 この視聴覚室 1は、 このスクリーンユニット 6 Cに続く垂直フレーム 4 ， 4間に、 プランクユニット 6 Bと、 映像機器の操作部の機能を担う、板状ュ二ッ ト 6 Dとが配置される。 なお、 以下において、 この操作部の機能を担う板状ュニ ットを操作ュニットと呼ぶ。
ここで、 操作ュ-ット 6 Dには、 映像機器等が配置されたべィ 1 1が設けられ ている。 例えば、 べィ 1 1には、 視聴覚室 1に設けられる映像機器のうちで、 ュ 一ザによる操作を直接受け付けることが必要な機器、 例えば記録媒体を交換する ことが必要な D V D (Digital Versatile Disc) プレーヤ、 ビデオテープレコー ダ等が設けられる。 また例えば、 べィ 1 1には、 各映像機器の遠隔制御に必要な リモートコマンダからのリモコンィ#号を受信する受信部が設けられる。
上述した記録媒体に係る機器以外の機器にあっては、 内壁 2.と外壁 3との間の 空間に配置される。 また内壁 2と外壁 3との間の間隔 Dは、 内壁 2と外壁 3との 間の空間に人間が侵入して各種映像機器を設置、 メンテナンスするのに充分な間 隔に設定され、 さらにこの内壁 2と外壁 3との間の空間に人間が侵入する侵入口 を形成できるように、 ブランクユニット 6 Bの 1つは、 前方より取り外すことが できるように設置される。
第 1図に示す視聴覚システムでは、 視聴覚室 1の 4つの壁のうちの一の面の壁 が所定の間隔をもって配された内壁 2と外壁 3とにより形成され、 この内壁 2に スクリーンユニット 6 Cおよびスピーカユニット 6 Aが配置されている。 そして 、 これらプロジェクタ 1 0、 スピーカユニット 6 Aは、 内壁 2と外壁 3との間の 空間に配置された映像機器 （ペイ 1 1に配置された記録媒体に係る機器も含む） から得られる映像コンテンッに係る映像信号および音声信号により駆動される。 . これにより、 スクリーンュニット 6 Cにはプロジェクタ 1 0から映像が投影され て映像表示が行われ、 またスピーカユニット 6 Aから音声が出力される。
第 1図に示す視聴覚室システムによれば、 4つの壁のうちの 1面が、 間に空間 を有する内壁 2と外壁 3とに.より形成され； この内壁 2にスクリーンュ-ット 6 Cおよびスピーカユニット 6 Aが配置され、 内壁 2と外壁 3との間の空間に、 プ ロジェグタ 1 0およびその他の映像コンテンツに係る機器 （機材） が配置される ものであり、 視聴覚室 1の室内に映像コンテンツに係る機器が配置されるもので はなく、 室内の雰囲気を乱さずにコンテンツの視聰を良好に行うことができる。 また、 第 1図に示す視聴覚システムによれば、 内壁 2および外壁 3は人が侵入 可能な大きさを持つ所定間隔をもって配されているため、 各種映像機器を内壁 2 および外壁 3の間の空間に配置する際、 さらにはこの空間に配置した各種映像機 器のメンテナンスを行う際には、 サービスマン等が当該空間に侵入して作業する ことができ、 作業性の向上を図ることができる。
また、 第 1図に示す視聴覚システムによれば、 内壁 2が複数の板材ユニットに より形成され、 所定数の板状ュニットがスピーカュ-ット 6 Aを構成するもので あり、 これにより壁面自体にスピーカの機能が盛り込まれる。 そのため、 この視 聰覚システムでは、 別途、 視聴覚 ¾ 1の室内にスピーカを配置しなくても、 映像 コンテンツの音声を鑑賞することができ、 これによつても一段と室内の雰囲気を 乱さないようにすることができる。 またこの場合、 このスピ^"力に係る内壁が複 数に分割されていることにより高音質の音を提供することも可能になる。
また、 第 1図に示す視聴覚システムによれば、 内壁 2が交換可能に保持された 複数の板状ュニットにより形成されるものであり、 必要に応じて化粧の異なる板 材に交換することにより、 視聴覚室の雰囲気を種々に変更することができ、 さら に.は、 スクリーンの大きさの変更、 あるいはスピーカ位置の変更などを容易に行 うことができる。 また、 この板材ユニットを取り外して空間への侵入口とするこ とができる。
第 1 1図は、 視聴覚システムの他の構成例を示している。 この視聴覚システム は、 対応する 2面の壁が所定の間隔をもって配された内壁 2および外壁 3とから なる視聴覚室 （部屋） 2 1と、 内壁 2および外壁 3との間の空間に配置され、 内 壁 2に少なくとも映像表示機能または音声出力機能を発揮させるためのプロジェ クタ 1 0等の機材とを備えている。 この第 1 1図において、 第 1図と対応する部 分〖こは同一符号を付して示している。
すなわち、 この視聴覚システムは、 4面'の壁のうちの、 対向する 2面が、 間に 空間を有する内壁 2と外壁 3とにより形成ざれる。 またこの対向する 2面のうち の、 一方の内壁 2をスピーカュニット 6 Aとブランクュニット 6 Bとにより形成 し、 またこの一方の側の内壁 2と外壁 3との間の空間に、 スピーカユニット 6 A を駆動するアンプ 2 3を配置する。
また、 他方の内壁 2をスクリーンユニット 6 C、 ブランクユニット 6 B、 スピ 一力: エツト 6 Aにより形成し、 このスクリーンュ-ット 6 Cを設けた側の内壁 2と外壁 3との間の空間に、 映像機器 2 2を配置する。 またこのスクリーンュニ ット 6 Cを設けた側の映像機器 2 2よりアンプ 2 3に、 例えば B 1 u e t o o t h等の無線通信により音声データを伝送する。
この第 1 1図に示す視聴覚システムは、 上述した構成を除いて、 第 1図に示す 視聴覚システムと同様に構成される。 この第 1 1図に示す視聴覚システムのよう に 4面の壁のうちの対向する 2面を内壁 2および外壁 3により形成するようにし ても、 第 1図に示す視聴覚システムと同様の効果を得ることができる。 またこの 場合、 .スクリーンの背面側にもスピーカが設けられることにより、 臨場感のある 音場を得ることが可能となる。
第 1 2図は、 視聴覚システムの他の構成例を示している。 この視聴覚システム は、 視聴覚室 3 1の内壁 2に、 大画面のスクリーンユニット 6 Cが設けられると 共に、 この大画面のスクリーンュニット 6 Cの背面に複数台のプロジェクタ 1 0 が配置され、 これら複数台のプロジヱクタ 1 0によるマルチ画面表示により、 高 角举像度の映像を大画面により表示するものである。
ここで、 第 1 3図に示すように、 各プロジ mクタ 1 0は短辺方向が壁厚方向と なるように外壁 3に固定される。 これにより、 当該プロジェクタ 1 0が外壁 3に 固定されても内壁 2および外壁 3との間はそれほど狭くはならない。
また、 第 1 3図に示すように、 各プロジヱクタ 1 0は、 映像光 （映像の表示に 供する出射光） を壁面に取った方向に出射する。 この映像光は、 その光路上に配 置レたミラー 3 2により反射されて映像光をスクリーンュニット 6 Cに照射され る。 この場合、 ミラー 3 2で映像光の光路が折り曲げられるので、 第, 1 4図との 対比により第 1 3図に示すように、 内壁 2と外壁 3との間の距離を短くして、 大 画面表 できる。
なお、 これによりプロジェクタ 1 0の取り付け向きは、 上向きに限らず、 下向 き、 横向き等により設けるようにしてもよい。 第 1 3図おょぴ第 1 4図に示す寸 法は、 一定の大きさによる画面の表示に必要な内壁 2と外壁 3との間の間隔を示 す例である。
この第 1 2図に示す視聴覚システムは、 上述した構成を除いて、 第 1図に示す 視聴覚システムと同様に構成される。 この第 1 2図に示す視聴覚システムによれ ば、 第 1図に示す視聴覚システムと同様の効果を得ることができる。 またこの場 合、 上述したように外壁 3に沿った方向にプロジェクタ 1 0から映像光を出射し た後、 ミラー 3 2によりスクリーンュ-ット 6 Cに向けて映像光を反射するもの であり、 内壁 2と外壁 3との間の距離を短くして大画面表示することができる。 また、 強固な外壁 3に対して、 プロジェクタ 1 0を安定して取りつけることがで き、 また外壁 3と内壁 2の間の空間がそれほど狭くならないので、 メンテナンス 性等を向上させることができる。
第 1. 5 A図， 第 1 5 B図は、 視聴覚システムの他の構成例を示している。 第 1 5 A図は斜視図を示し、 第 1 5 B図は側面図を示している。 この視聴覚システム は、 視聴覚室 4 1の 4面の壁の全てが、 内壁 2と外壁 3とにより形成されて、 人 5 間の侵入可能に空間が形成される。 また、 視聴覚室 4 1は、 天井 2 Aが天井裏 3 Aに対して所定の間隔をもって配された二重天井構造を有すると共に、 床 2 Bが 床下 3 Bに対して所定の間隔をもって配された二重床構造を有している。
そして、 内壁 2、 天井 2 Aおよび床 2 Bで構成される直方体の構造体が、 床下 3 Bに対して複数の脚 4 2をもって支持されている。 すなわち、 床 2 Bが複数の0 脚 4 2により床下 3 Bに対して支持され、 4面の内壁 2がこの床 2 Bに保持され 、 さらにこの 4面の内壁 2に天井 2 Aが保持され、 上述したように内壁 2、 天井 2 Aおよび床 2 Bで構成される直方体の構造体が床下 3 Bに対して複数の脚 4 2 をもって支持された状態となっている。 '
^の視聴覚室 4 1は、 例えば、 一の面の内壁 2にスクリーンユニッ ト 6 C、 ス ピー力ユニット 6 Aが設けられ、 残る内壁面、 床面、 天井面に、 スピーカュエツ ト 6 Aが設けられ、 これにより ラウンド音場により映像コンテンツを鑑賞でき ' るように作成される。 ·
この第 1 5 図， 第1 5 B図に示す視聴覚システムは、 上述した構成を除いて 、 第 1図に示す視聴覚システムと同様に構成され、 同様の作用効果を得ることが できる。 また、 二重天井構造あるいは二重床構造を有するので、 例えば天井裏あ るいは床下にプロジェクタ、 アンプ等の機材を配置することも可能となる。 また • 、 内壁 2、 天井 2 Aおよぴ床 2 Bで構成される直方体の構造体が床下 3 Bに対し て複数の脚 4 2をもって支持されるものであり、 壁、 天井、 床の全てに簡易かつ 確実に空間を形成でき、 しかも内壁、 天井および床で構成される構造体は外壁に 対して完全に独立した状態とできる。
第 1 6 A図， 第 1 6 B図は、 視聴覚システムの他の構成例を示している。 第 1 6 A図は斜視図を示し、 第 1 6 B図は側面図を示している。 この視聴覚システム は、 視聴覚室 5 1の 4面の壁の全てが、 内壁 2と外壁 3とにより形成されて、 人 間の侵入可能に空間が形成される。 また、 視聴覚室 5 1は、 天井 2 Aが天井裏 3 Aに対して所定の間隔をもって配きれた二重天井構造を有すると共に、 床 2 Bが 床下 3 Bに対して所定の間隔をもって配された二重床構造を有している。 そして 、 天井 2 Aおよび床 2 Bは外壁 3に固定され、 内壁 2は天井 2 Aおよび床 2 Bに 固定されている。
この視聴覚室 5 1は、 例えば、 一の面の内壁 2にスクリーンユニット 6 C、 ス ピー力ユニット 6 Aが設けられ、 残る内壁面、 床面、 天井面に、 スピーカュニッ ト 6 Aが設けられ、 これによりサラウンド音場により映像 ンテンツを鑑賞でき るようにィ乍成される。
この第 1 6 A図， 第 1 6 B図に示す視聴覚システムは、 上述した構成を除いて 、 第 1図に示す視聴覚システムと同様に構成され、 同様の作用効果を得ることが できる。 また、 二重天井構造あるいは二重床構造を有するので、 例えば天井裏あ るいは床下にプロジェクタ、 アンプ等の機材を配置することも可能となる。 また
、 天井 2 Aおよび床 2 Bは外壁 3に固定され、 內壁 2は天井 2 Aおよび床 2 Bに 固定ざれるものであり、 壁、 天井、 床の全てに簡単かつ確実に空間を形成でき、 しかも内壁 2を天井 2 Aおよび床 2 Bを介して外壁 3に安定して固定保持できる 第 1 7図は、 視聴覚システムの他の構成例を示している。 この視聴覚システム における視聴覚室 6 1は、 第 1 5 A図， 第 1 5 B図、 第 1 6 A図， 第 1 6 B図に 示す視聴覚システムの視聴覚室 4 1 , 5 1と同様に、 天井、 床、 壁が二重構造と されている。 また、 第 1 8図に示すょ に、 視聴覚室 6 1は、 外部から外壁 3お よび内壁 2を通じて内部に入るための部屋用入り口 6 2を有している。 ごの場合 、 ユーザは、 部屋用入り口 6 2を構成するトンネル状の通路を通って内壁 2に設 けられたドア 6 3から視聴覚室 6 1の内部に入る。 そして、 この部屋用入り口 6 2の側面、 つまり トンネル状の通路側面に、 内壁 2および外壁 3の間の空間に入 るための空間用入り口 （ドア） 6 4が設けられている。
また、 視聴覚室 6 1には、 第 1 7図に示すように、 内壁 2と外壁 3との間の空 間に、 カーテン 6 5による吸音材が設けられ、 これによりスピーカユニット 6 C で発生した音波が外壁 3により反射して、 スピーカュニット 6 Cによる音声の再 生に悪影響を与えないようにされる。 なおこのような吸音材にあっては、 外壁 3 の内側に、 マット状のグラスウールを貼り付けるようにしてもよく、 種々の部材 、 配置方法を広く適用することができる。
この第 1 7図に示す視聴覚システムは、 上述した構成を除いて、 第 1図に示す 視聴覚システムと同様に構成され、 同様の作用効果を得ることができる。 また、 内壁 2あるいは外壁 3に空間用入り口 6 4を設けるものではなく、 当該空間用入 り口 6 4を容易に設けることができ、 しかもサービスマン等はこの空間用入り口 6 4から内壁 2および外壁 3の間の空間に容易に侵入することができる。
なお'、 上述した視聴覚システムの構成例においては、 4面の壁のうちの 1面、 2面、 4面を内壁 2、 外壁 3により作成する場合等について述べたが、 本発明は これに限らず、 視聴覚室 （部屋） を構成する壁、 天井、 床を必要に応じて二重構 造として、 上述の構成例と同様の効果を得ることができる。
( 2 ) 画像表示装置
第 1 9図は、 上述した視聴覚システムで、 視聴覚室を構成する内壁 2に画像を 表示するための画像表示システム 1 0 1の構成例を示している。 この画像表示シ ステム 1 0 1は、 データ処理装置 1 0 2と、 画像表示装置 1 1 1と、 照明 1 2 0 とからなっている。 そして、 .画像表示装置 1 .1 1は、 メディアデータベース 1 1 2、 音場処理部 1 1 3 C、 画像処理部 1 1 3 B、 表示情報選キ尺部 1 1 3 A、 照明 情報選択部 1 1 3 E、 照明情報生成部 1 1 3 D、.背景画像表示部 1 1 5、 鳥瞰画 像表示部 1 1 7およぴタツチパネル 1 1 8からなるリモートコマンダ 1 1 6、 照 明用コントローラ 1 1 9およびスピーカ 1 2 2を有している。 ここで、 音場処理 部 1 1 3 C、 画像処理部 1 1 3 B、 表示情報選択部 1 1 3 A、 照明情報選択部 1 1 3 Eおよび照明情報生成部 1 1 3 Dはそれぞれ制御部 1 1 3を構成している。 データ処理装置 1 0 2は、 画像表示装置 1 1 1に、 全周囲画像データ D 3を供 給する。 データ処理装置 1 0 2は、 事前に撮影地点で取得された撮像結果による 画像データ D 1から、 全周囲画像データ D 3を生成する。
すなわち、 この画像表示システム 1 0 1では、 事前に、 所定の撮影地点で、 例 えば撮像装置 （カメラ） を一定角度ずつパンさせながら撮像結果が取得され、 こ れにより 1画面では表示困難な広い範囲を撮影した広角の画像による撮像結果が 取得される。 この実施の形態では、 撮像装置をパンさせながら撮像結果を取得し て当該撮像装置を 1周させることにより、 この広角の画像による撮像結果に、 こ の撮影地点で見渡すことができる全周囲の画像が適用される。
なおここで、 この撮影では、 撮像装置が 1回転した際に、 この撮像装置が始め の位置に正しく戻るように、 撮像装置のパンに係る回転軸等が精密に調整される 。 またこれによりこのように始めの位置で撮影した撮像結果と、 1回転して初め の位置に戻って撮影した撮像結果とを比較し、 この比較結果により、 元の位置に 正しぐ戻っていない場合には、 改めて回転軸等を調整し直して撮影が繰り返され る。 またこの撮影では、 オート絞り調整により、 各撮像結果でそれぞれ露出が最 適となるように設定される。
この画像表示システム 1 0 1では、 この静止画による撮像結果の取得時に、 併 せて、 一定時間の間、 この撮影地点の音声がサラウンド方式により録音される。 なお、 このサラウンド方式としては、 例えば 5 . 1チャンネルによるサラウンド 方式が適用される。 このとき、 この音声にあっては、 固定した複数のマイクロフ オンにより、 一定の方位を基準にして録音される。
の画像表示システム 1 o では、 事前に設定された複数地点で、 これらの撮 影、 音声の録音が実行され、 この撮影、 録 :音による画像データ D l、 音声データ D 2が、 データ処理装置 1 0 2に提供される。
データ処理装置 1 0 2は、 例えば画像処理可能なコンピュータにより形成され 、 このように取得した画像データ D 1を画像表示装置 1 1 1により容易に処理可 能に、 この画像データ D 1による画像を処理し、 撮影地点毎に、 全周囲画像デー タ D 3を生成する。 ここで、 第 2 O A図に示すように、 全周囲画像データ D 3は 、 各撮影地点の周囲を、 所定の角度範囲で区切った複数の画像 （以下、 「部分画 像」 と呼ぶ） に係る画像データである。 全周囲画像データ D 3は、 この部分画像 力 S J P E G (Joint Photographic Coding Experts Group ) 等による画像フアイ ルの集合により形成される。 なおここで、 第 2 0 B図は、 元の画像データ D 1に よる画像を示し、 また第 2 O A図において、 符号 F Lにより示す枠は、 画像表示 システム 1 0 1により表示される 1画面の大きさを示すものである。
これにより、 データ処理装置 1 0 2ほ、 各撮影地点でそれぞれ撮影された複数 の撮像結果を繋ぎ合わせて全周囲め画像を生成した後、 部分画像を切り出し、 こ れにより全周囲画像データ D 3を生成する。 また撮影地点における各部分画像の 方位を検出可能に、 各部分画像の方位情報を設定して全周囲画像データ D 3を生 成する。
ところで、 このようにして撮像装置により得られる画像は、 ピンホールカメラ のピンホールに代表される絞りを介して入射する被写体からの光を、 撮像素子に より形成される平坦な撮像面で撮像して取得されるものであり、 これにより画像 の周辺部分で図形歪みが大きくなる。 .これにより順次、 パンさせて撮影した画像 にあっては、 違和感なく自然に繋ぎ合わせることが困難で、 繋ぎ合わせの部分で 、 例えば建物の屋根が折れ曲がったり、 ずれたりする。
このためデータ処理装置 1 0 2は、 画像データ D 1による画像よりこの画像歪 みを除去した後、 全周囲画像を生成して部分画像を切り出す。 このためデータ処 理装置 1 0 2は、 第 2 1図に示すように、 撮像面に対応する平面による結像スク リーン 1 0 4に撮像結果による画像を投影して撮像装置 1 0 5よりこの結像スク リーン 1 0 4の投影画像を見るものとして、 画像歪みを除去可能な仮想結像スク リーン 1 0 6に、 結像スクリ 'ーン 1 0 に投影された画像を投影.し直す処理を演 算処理により実行し、 これによりこの種の'画像歪みを除去する。 ここで、 データ 処理装置 1 0 2は、 処理の簡略化のために、 画像の長手方向 '(水平方向） にのみ '曲面となった面によりこの仮想結像スクリーン 1 0 6を定義してこの演算処理を 実行する。 これにより仮想結像スクリーン 1 0 6は、 軸に平行な面により円筒を 部分的に切り取つた形状により形成される。
これによりデータ処理装置 1 0 2は、 第 2 1図に示すように、 結像スクリーン 1 0 4と仮想結像スクリーン 1 0 6とが例えば中央で接しているものとして、 こ の接した個所を原点に設定して 3次元座標空間を定義する。 また視点の座標を （ 0 , 0， 一 a ) とする。 なおここでは、 結像スクリーン 1 0 4における画像の横 幅の 1 / 2を値 1とした場合の、 画角の 1 Z 2が 6の場合に、 tan 0 = l Z aに より定義され、 仮想結像スクリーン 1 0 6の半径である。
データ処理装置 1 0 2は、 第 2 2図に示すように、 撮像結果による各画素を結 像スクリーン 1 0 4にマッピングし、 各画素と視点 （0 , 0 , — a ) の点とを結 ぶ直線が仮想結像スクリーン 1 0 6を横切る交点の X Y座標を検出する。 データ 処理装置 1 0 2は、 結像スクリーン 1 0 4における各画素の X Y座標値をこの交 点による X Y座標に置き換えて各画素の位置を補正し、 これにより画像歪みの除 去処理を実行する。
なおこの場合、 第 2 2図との対比により第 2 3図に示すように、 3次元座標系 による処理に代えて、 極座標系による処理により、 この一連の処理を実行するよ うにしてもよい。
データ処理装置 1 0 2は、 このようにして画像歪みを捕正して全周囲の画像 （ 以下、 「全周囲画像」 と呼ぶ） を生成した後、 部分画像を切り出し、 各部分画像 の画像データをそれぞれデータ圧縮して複数の画像データファイルを生成する。 またこの部分画像による画像データフアイルを撮影地点毎にまとめて全周囲画像 データ D 3を生成する。 またこのとき各撮影地点で取得された音声データ D 2を 付加して全周囲画像データ D 3を生成する。 なおこの場合、 全周囲画像データ D 3と対応付けして、 音声データ D 2を別ファイルとしてもよい。
さらに、 データ処理装置 1 0 2は、 全周囲画像データ D 3毎に消失点を検出し 、 この消失点の Y座標値をそれぞれ全周囲画像データ D 3に付加する。 ここで消 失点は、 第 2 4図に示すように、，透視変換によって三次元空間中の平行線を画像 平面上に投影した場合に、 この平行線に対応する画面平面上の直線 L l、 L 2、 ……、 L n、 ……が収束する点のことである。 すなわち消失点とは、 実際は奥行 きを有している空間が投影された平面画像上において、 「無限に遠い点」 であり 、 奥行き方向に平行な線 （例えば、 部屋の画像であれば、 その稜線） の延長'線が 交わる点や、 奥行き方向に伸びる面 （例えば、 部屋の画像であれば、、奥行き方向 に伸びる床、 壁、 天井に対応するそれぞれの平面） の延長が無限遠方に収束する 点として認識されるものである。 消失点から画像内で水平方向に描画された直線 は、 地平線である。
データ処理装置 1 0 2は、 1つの撮影地点で取得された各画像を画像処理して 奥行き方向の平行線を検出し、 この平行線の交点の Y座標値を検出して消失点の 座標値とする。 なおこの平行線の検出に係る画像処理は、 特徴点を検出して統計 的に処理することにより実行される。 またデータ処理装置 1 0 2は、 平行線の組 み合わせ毎に消失点の Y座標値を検出して統計的に処理し、 1つの画像に 1つの Υ座標値を検出する。 また全周囲画像の作成に供する複数画像で検出される Υ座 標値をさらに統計的に処理することにより、 全周囲画像毎に、 '消失点に係る Υ座 標値を検出し、 この Υ座標値を各全周囲画像データ D 3に付加する。 なおこれに より第 2 1図について上述した結像スクリーン.1 0 4と仮想結像スクリーン 1 0 6との接点の Υ座標値は、 このようにして検出される消失点の Υ座標値に設定さ れる。 またこれら一連の処理に係る統計的処理は、 例えば平均値化の処理である また、 データ処理装置 1 0 2は、 このようにして部分画像より全周囲画像デー タ D 3を生成する際に、 複数画像間における絞りの相違を捕正するように、 各画 像における階調を補正し、 これにより全周囲画像データ D 3による部分画像を、 絞り一定の条件により撮影した画像により形成する。 具体的にデータ処理装置 1 0 2は、 全周囲画像データの生成に供する全ての画像で、 画素値の最大値おぉぴ 最小値を検出し、 これら画素値の最大値および最小値がダイナミックレンジを越 えないようにして、 連続する画像の繋ぎ目で輝度レベルが急激に変化レないよう に、 各画像の階調を補正し、 これにより絞り一定の条件により撮影した場合の全 周囲画像データ D 3を生成す 。 ，
なお、 撮像装置による撮像結果において、 充分なダイナミックレンジを確保で きている場合には、 このようなオート絞り制御により撮影した複数画像の事後的 な階調の補正に代えて、 全周囲画像データの生成に供する撮像結果を絞り一定に より撮像するようにしてもよい。
画像表示システム 1 0 1は、 このようにして生成された全周囲画像データ D 3 を、 対応する鳥瞰画像データ D 4と共に画像表示装置 1 1 1に供給し、 メディア データベース 1 1 2に記録する。
ここで、 鳥瞰画像データ D 4は、 鳥瞰画像の画像データである。 また、 鳥瞰画 像は、 全周囲画像データ D 3の取得に係る撮影地点 （個所） を上空より見た画像 であり、 実写による画像、 イラストによる画像、 コンピュータグラフィックスに よる画像等が適用される。 また、 鳥瞰画像は、 マーク等により全周囲画像データ D 3の取得に係る撮影地点を確認できるように、 また対応する全周囲画像データ D 3を検索可能に作成される。 具体的には、 例えば鳥瞰画像は、 全周囲画像デー タ D 3.の取得に係る撮影地点にマークが配置されて作成され、 対応する全周囲画 像データ D 3を特定するリンク情報が各マークに設定されて作成される。 またこ れに代えて、 鳥瞰画像に撮影地点をマークできるように、 全周囲画像データ D 3 側に同様のリンク情報が設定される。 全周囲画像データ D 3、 鳥瞰画像データ D 4は、 光ディスク、 磁気ディスク、 メモリカード等の各種記録媒体から読み出さ れて画像表示装置 1 1 1に供給され、 あるいはインターネット等のネットワーク を介したダウンロードにより画像表示装置 1 1 1に供給される。
メディアデータベース 1 1 2は、 例えば大容量のハードディスク装置により形 成され、 制御部 1 1 3の制御により、 これら全周囲画像データ D 3、 鳥瞰画像デ ータ D 4を記録して保持し、 また保持したこれら全周囲画像データ D 3、 鳥瞰画 像データ D 4を再生して出力する。 また制御部 1 1 3から出力される照明の制御 に係る照明制御情報 D 5を記録して保持し、 またこの保持した照明制御情報 D 5 を 生して制御部 1 1 3に出力する。
背景画像表示部 1 1 5は、 大画面による表示装置であり、 制御部 1 1 3から出 力されるビデオデータ D V 1による画像を表示する。 この背景画面表示部 1 1. 5 は、 例えば上述した視聴覚システムを構成する内壁 2 (スクリーンュニット 6 C ) およびプロジェクタ 1 0等からなっている。 ここで、 このビデオデータ D V 1 は、 全周囲画像データ D 3により生成されるビデオデータであり、 これにより画 像表示装置 1 1 1は、.,この背景画像表示部 1 1. 5によりユーザの所望する撮影地 点の、 所望する方向の風景画像を表示する。
リモートコマンダ 1 1 6は、 鳥瞰画像を表示すると共に、 この鳥瞰画像等に係 る各種ユーザ操作を無線通信等により制御部 1 1 3に通知する。 すなわち、 鳥瞰 画像表示部 1 1 7は、 このリモートコマンダ 1 1 6に配置された液晶表示パネル により形成され、 背景画像表示部 1 1 5で表示される画像の撮影地点に係る鳥瞰 画像を表示する。 タツチパネル 1 1 8は、 この鳥瞰画像表示部 1 1 7によるユー ザの各種操作を制御部 1 1 3に通知する。 なお、 このリモートコマンダ 1 1 6は 、 例えば後述するように視聴覚室の室内に配置されるテーブルの表面に形成され る。 照明用コントローラ 1 1 9は、 この画像表示装置 1 1 1が配置された部屋 （視 聴覚室） の照明 1 2 0を制御する制御手段であり、 制御部 1 1.3の指示に従って 照明 1 2 0の明るさ、 色温度を可変する。 '
制御部 1 1 3は、 この画像表示装置 1 1 1に係る一連の処理を実行するコンビ ユータであり、 図示しないメモリに記録されたプログラムの実行により各部の ft 作を制御する。 制御部 1 1 3は、 このプログラムの実行により各種機能プロック を構成する。 なお、 この実施の形態において、 この制御部 1 1 3の処理に係るプ ログラムは、 この画像表示装置 1 1 1に事 ffにインストールされて提供されるも のの、 このような事前のインストールに代えて、 光ディスク、 磁気ディスク、 メ モリカード等の種々の記録媒体に記録して提供するようにしてもよく、 またイン ターネット等のネットワークを介したダウンロードにより提供するようにしても よい。
ここで、 表示情報選択部 1 1 3 Aは、 リモートコマンダ 1 1 6からの通知に従 つて、 鳥瞰画像表示部 1 1 7、 背景画像表示部 1 1 5で表示する画像を選択し、 この選択結果によりメディアデータベース 1 1 2に画像データ D 3 、 D 4および 音声データ D 2 ©出力を指示する。 画像処理部 1 1 3 Bは、 このメディアデーダ ベース 1 1 2から出力される画像データ D '3、 P 4を処理して、 鳥瞰画像表示部 1 1 7、 背景画像表示部 1 1 5の駆動に供す.るビデオデータ D V 2 , D V 1を生 ^¾して鳥瞰画像表示部 1 1 7、 背景画像表示部 1 1 5に出力する。
音場処理部 1 1 3 C.は、 メディアデータベース 1 1 2から出力される音声デー タ D 2を処理して、 サラウンド音場の生成に供するスピーカ 1 2 2を駆動する。 このスピーカ 1 2 2は、 上述した視聴覚システムでは、 内壁 2 (スピーカュニッ ト 6 A) で構成される。
このとき音場処理部 1 1 3 Cは、 背景画像表示部 1 1 5で表示される画像に応 じて、 この音声データ D 2による音像の定位位置を変化させ、 これにより背景画 像表示部 1 1 5で表示される画像の向きに対応する音像の定位によりスピーカ 1 2 2を駆動する。 なお、 このような音像の定位位置の変化は、 例えばスピーカ 1 2 2を駆動する各音声信号のチヤンネルの切り換えにより、 定位位置を大きく変 化させた後、 これらチャンネル間で加減算処理して、 定位位置を細かく変化させ ることにより実行される。
照明.情報生成部 1 1 3 Dは、 メディアデータベース 1 1 2から出力される画像 データ D 3を処理し、 照明 1 2 0の制御に必要な照明制御情報 D 5を生成してメ ディァデータベース 1 1 2に記録する。 照明情報選択部 1 1 3 Eは、 リモートコ マンダ 1 1 6からの通知に従って、 照明情報生成部 1 1 3 Dにより生成してメデ ィァデータベース 1 1 2に記録した照明制御情報 D 5から、 背景画像表示部 1 1 5で表示される画像に対応する照明制御情報 D 5を選択的に取得し、 この取得し た照明制御情報 D 5により照明用コントローラ 1 1 9の動作を制御する。
第 2 5図は、 制御部 1 1 3の基本的な処理に係る処理手順を示すフローチヤ一 トである。 制御部 1 1 3は、 画像表示装置 1 1 1の電源が立ち上げられると、 こ の処理手順を開始してステップ S P 1からステップ S P 2に移り、 ここでメディ ァデータベース 1 1 2の記録から鳥瞰画像の選択に供するメュユー画面を表示す る。 またさらに，このメニュー画面におけるユーザの選択により、 表 に供する鳥 瞰画像の選択を受け付け、 この鳥瞰画像の鳥瞰画像データ D 4をメディァデータ ベース 1 1 2から取得する。
制御部 1 1 3は、 第 2 6 (A 1 ) .図に示すように、 この取得した鳥瞰画像デー タ D 4により鳥瞰画像表示部 1 1 7に鳥瞰画像 1 3 1を表示する。 またこのとき 、 この鳥瞰画像 1 3 1において、 全周囲画像データ D 3の撮影地点をマーク M l 〜M 5により示す。 なお、 この第 2 6図に示す鳥瞰画像においては、 このマーク M l〜M 5を丸印により表し、 「A」 及び 「B」 の文字は、 それぞれ各文字を表 示した場所に実在する建築物を示すものとする。
続いて、 制御部 1 1 3は、 ステップ S P 3に移り、 ここでユーザによるタツチ パネル 1 1 8の操作を検出し、 ユーザによるマーク M l〜M 5の選択により、 こ れらマーク M 1〜M 5により表される撮影地点のうち何れの撮影地点で撮影した 画像を背景画像表示部 1 1 5で表示するかを受け付ける。 またさらに表示の向き の受け付けにより、 この選択した撮影地点において、 何れの方向を見て得られる 画像を背景画像表示部 1 1 5で表示するかを受け付ける。 制御部 1 1 3は、 第 2 6 (A 1 ) 図に示すように、 ユーザによりマークが選択されると、 この選択され たマークの上に、 向きおょぴ選択されたことを示すマーク MKを表示し、 ユーザ によるタツチパネル 1 1 8の操作によりこのマーク MKの向きを可変し、 これに よりこれら撮影地点、 向きの入力を受け付ける。 なお、 第 2 6 (A 1 ) 図に示す ように、 この実施の形態では、 この向きおよび選択されたことを示すマーク MK に、 カメラの図案が適用される。
このようにして撮影地点、 向きの入力を受け付けると、 制御部 1 1 3は、 ステ ップ S P 4に移り、 選択されたマーク M lに設定されたリンク情報により対応す る全周囲画像データ D 3をメディアデータベース 1 1 2から取得する。
また'、 第 2 7図に示すように、 続くステップ S P 5において、 この取得した全 周囲画像データ D 3 (第 2 7 (A) 図） による複数の部分画像から、 ステップ S P 3で設定された向きに対応する部分画像を選択して繋ぎ合わせ （第 2 7 ( B 1 ) 図） 、 この繋ぎ合わせた画像からステップ S P 3で設定された向きに応じて 1 画面分の画像を切り出して背景画像表示部 1 1 5に表示する (第 2 7 ( C 1 ) 図 ) 。 なお、'第 2 1図〜第 2 3図について上述した歪み補正の処理は、 全周囲画像 データ D 3の作成時に代えて、 このステップ S P 5における処理において、 併せ て実行するようにしてもよい。 また'同様に、 上述した絞り一定の条件 より撮影 したように階調を捕正する処理を、 全周囲画像データ D 3 .の作成時に代えて、 .こ のステップ S P 5における処理において、 ί并せて実行するよう してもよい。 このようにして 1画面分の画像を切り出して背景画像表示部 1 1 5に表示する 際に、 制御部 1 1 3は、 第 2 8 (Α) 図に示すように、 背景画像表示部 1 1 .5の 設置時、 サービスマンにより設定された背景画像表示部 1 1 5におけるユーザの 画像鑑賞時の目の高さと、 全周囲画像データ 3に設定された消失点の Υ座標値 とを比較し、 第 2 8 ( Β ) 図に示すように、 背景画像表示部 1 1 5 表示する画 像の消失点の位置が、 このユーザの目の高さとなるように、 表示位置を捕正して 表示する。 これにより制御部 1 1 3は、 このようにして画像を表示して違和感な くユーザが風景等を鑑賞できるようにする。
このようにして全周囲画像データ D 3による画像を表示すると、 制御部 1 1 3 は、 ステップ S P 6に移り、 この全周囲画像データ D 3に係る音声データの再生 を開始してスピーカ 1 2 2を駆動する。 このとき制御部 1 1 3は、 上述した音場 処理部 1 1 3 Cの機能プロックによる処理により、 背景画像表示部 1 1 5により 表示した画像に対応する位置に音 を定位させるように、 音像の定位位置を可変 して音場を設定する。
これらにより、 制御部 1 1 3は、 鳥瞰画像においてユーザが指示した場所に、 ユーザが指示した向きにユーザが立ち至った場合に、 このユーザが目にする風景 を背景画像表示部 1 1 5に表示し、 またこのユーザが耳にする各種の音'をスピー 力 1 2 2により再生し、 第 2 6 (A 1 ) 図により示す例では、 第 2 6 (A 2 ) 図 により示すような画像を背景画像表示部 1 1 5に表示する。
このよう:にして画像を表示して音声データの再生を開始すると、 制御部 1 1 3 は、 ステップ S P 7に移り、 タツチパネル 1 1 8の操作によりユーザが向きの変 更を指示したか否か判断する。 ここで否定結果が得られると、 制御部 1 1 3は、 ステップ S P 8に移り、 タツチパネル 1 1 8の操作によりユーザが別のマーク M 1〜M 4を選択し、 ユーザが移動を指示したか否か判断する。 ここで否定結果が 得られると、 制御部 1 1 3は、 ステップ S P 7に戻る。 '
これにより、 制御部 1 1 3は、 ュ"ザによる向きの変更、 移動の指示を待ち、 ユーザにより向きの変更が指示されると、 ステップ S P 7で肯定結果が得られる ことにより、 ステップ S P 7.からステップ S P 1 0で向き.を検出した後に、 スデ ップ S P 1 1 (第 2 9図） に移る。 ここで制御部 1 1 3は、 第 2 7 (A) 図にお いて符号 Bにより示すように、 ユーザにより'変更が指示された向きの分、 徐々に 背景画像表示部 1 1 5で表示する画像をスクロールさせる。 なおこの場合に.、 第 2 7 ( B 1 ) 図および第 2 7 ( C 1 ) 図との対比により第 2 7 ( B 2 ) 図および 第 2 7 ( C 2 ) 図に示すように、 必要に応じて部分画像を繋ぎ併せて切り出す領 域を徐々に変更し、 これにより全周囲画像データ D 3による全周囲雨像上で、 ス クロールの処理を実行する。
また、 続くステップ S P 1 2において、 音場処理部 1 1 3 Cの機能ブロックに よる処理を切り換え、 背景画像表示部 1 1 5におけるスクロールに連動するよう に、 スピーカ 1 2 2により形成する音像の位置を徐々に移動させ、 第 2 5図のス テツプ S P 7に戻る。 またこのとき第 2 6 (A 1 ) 図との対比により第 2 6 ( B 1 ) 図に示すように、 向きを示すマーク MKを、 背景画像表示部 1 1 5における スクロールに連動するように可変する。 これにより、 この第 2 6 ( B 1 ) 図の例 では、 第 2 6 ( B 2 ) 図により示 符号 Bによる建造物の遠景を背景画像表示部 1 1 5で表示することになる。
これに対して、 ユーザにより移動が指示されると、 ステップ S P 8で肯定結果 が得られることにより、 制御部 1 1 3は、 ステップ S P 8からステップ S P 1 3 (第 3 0図） に移る。 ここで制御部 1 1 3は、 ユーザにより指示されたマーク M 1〜M 5により移動先の撮影地点 （位置） を検出し、 続くステップ S P 1 4にお いて、 ステップ S P 1 1、 ステップ S P 1 2について上述したと同様にして、 こ の移動先の撮影地点の向きに背景画像表示部 1 1 5の表示、 音場の設定を変更す る。 '
また、 続くステップ S P 1 5において、 この移動先について、 ステップ S P 4 について上述したと同様にして全周囲画像データ D 3をメディアデータベース 1 1 2から取得する。 また、 続くステップ S P 1 6において、 ステップ S P 5につ いて上述したと同様にして、 このメデ アデータベース 1 1 2から取得した全周 囲画像データ D 3から移動先での表示に係る画像を生成する。
制御部 1 1 3は、 続くステップ S P 1 7において、 背景画像表示部 1 1 5に表 示中の画像を徐々にズームインさ itながら、 クロスフェードによりそれまでの表' 示をステップ S P 1 5で生成した画像に切'り換える。 なおこのようなズームイン 、 クロスフェードによる遷移に代えて、 モザイク等、 種々のエフェクトによる遷 移を必要に応じて適用することができる。：また、 続くステップ S P 1 8において 、 このような表示の切り換えに連動して、 クロスフェードにより、 又はー且フエ ードアウトした後、 フェードインすることにより、 移動先に対応する音声データ D 2による音場にスピーカ 1 2 2による音場を切り換え、 ステップ S P 7に戻る これにより制御部 1 1 3は、 第 2 6 ( B 1 ) 図により示すように、 ユーザがマ ーク M lによる撮影地点を指定して北側の風景を背景画像表示部 1 1 5により表 示している状態で、 北西に配置されたマーク M 2への移動を指示した場合、 第 2 6 (A 1 ) 図により示すように、 マーク M 2に向きを変更するように、 背景画像 表示部 1 1 5の表示、 音場を変更した後、 第 2 6 ( C 1 ) 図および第 2 6 ( C 2 ) 図により示すように、 マーク M 2に向かって移動するように背景画像表示部 1 1 5の表示、 音場を変更し、 マー M 2の位置による画像および音場をユーザに 提供する。 また、 制御部 1 1 3は、 これらの表示の切り換えに連動するように、 制御部 1 1 3は、 鳥瞰画像の表示におけるマーク MKの位置、 向きを可変する。 これらにより、 この画像表示装置 1 1 1では、 実写における画像を用いてゥォ 一クスル一を体感できるように、 画像および音声を提供する。 '
なお、 現実世界において、 場所を移動する場合、 例えば正面以外の方向に目標 物を捕らえて移動する場合もある。 これによりユーザにより移動が指示された場 合に、 このように移動先の方向に向き直って移動するように背景画像表示部 1 1 5の表示を切り換える一連の処理において、 移動先に向き直る処理を省略しても よい。 なおこの場合、 移動後に提供する画像にあっては、 移動直前の向きによる 画像としてもよく、 ユーザにより指示された目標物の向きによる画像としてもよ い。 またこのような場合に、 表示の切り換え時における遷移にあっては、 移動方 向に係るスクロールの処理をズームの処理と併せて実行するようにしてもよい。 また、 表示の切り換え時における表示の遷移にあっては、 ー且、 鳥瞰画像に表示 を切り換えて遷移するようにしてもよい。
第 3 1図は、 ユーザが背景画像上での遷移を指示した場合の、 背景画像表示部 1 1 5め表示の説明に供する略線図である'。 制御部 1 1 3は、 タツチパネル 1 1 8の操作によりユーザが背景画像上での遷移を指示すると、 一定時間の間、 鳥瞰 画像で表示しだマーク M l〜M 5に対応するマーク N 1〜N 4をこの背景画像表 示部 1 1 5による画像上で表示する。 なおこの背景画像表示部 1 1 5の表示に係 るマーク N 1〜N 4は、 全周囲画像データ D 3を生成する際に、 データ処理装置 1 0 2により全周囲画像データ D 3にマーク N 1〜N 4の表示ィ立置情報を付加し ておき、 この位置情報に基づいて表示する。 なおこの場合に、 対応する鳥瞰画像 に設定されているマーク M l〜M 5に基づいて、 制御部 1 1 3により全周囲画像 データ D 3による画像上でマーク N 1〜N 4の表示位置を計算して表示するよう にしてもよレヽ。
制御部 1 1 3は、 このようにしてマーク N 1〜N 4を表示すると、 鳥瞰画像表 示部 1 1 7にこれらマーク N 1〜N 4のフォーカスを切り換えるメニュー、 決定 のメェユー、 左右へのスクローノレを指示するメニューを表示し、 これらのメニュ 一の操作により、 ユーザが何れかめマーク N 1〜N 4を選択すると、 第 2 5図、 第 2 9.図および第 3 0図について上述したと同様にして、 このマーク N 1〜N 4 に対応する全周囲画像データ D 3を取得して背景画像表示部 1 1 5の表示を切り 換える。
なお、 この表示の切り換えにあっては、 ユーザにより選択されたマークの表示 位置が画面中央になるように、 それまでの表示をスクロールさせながらズームィ ンさせ、 クロスフエ一ドによりユーザにより選択されたマ—クに係る画像に表示 を切り換える。 また、 このときの表示切り換え後の画像にあっては、 元の画像に 係る撮影地点からユーザにより選択されたマークに係る撮影地点を見た向きによ り表示される。
これに対して、 ユーザがスクロールのメェユーを選択すると、 矢印 C 1および C 2により表示に供する領域の変化を示すように、 制御部 1 1 3は、 全周囲画像 力、ら切り出して表示する領域をユーザにより指示された方向に徐々に変化させ、 これにより背景画像表示部 1 1 5における表示をスクロールさせる。 なお、 制御 部 1 1 3は、 これらの処理においても、 背景画像表示部 1 1 5における表示に対 応するように、 音場を変更し、 れにより臨場感を確保する.。
これにより、.制御部 1 1 3は、，いちいち鳥瞰図により現在位置を把握しなくて も、 表示されだ画像上で移動先を選択して、 さらには向きを変えてウォークスル 一を体感することができようにし、 さらに一段と没入感を向上できるようにする 0
なお、 上述の第 2 5図、 第 2 9図、 第 3 0図の処理では、 鳥瞰画像表示部 1 1 7には鳥瞰画像のみが表示されるように説明したが、 鳥瞰画像が表^されている 状態 .（以下、 「鳥瞰モード」 と呼ぶ） で、 ユーザ操作によってマーク選択によつ て表示すべき撮影地点が指定されると、 背景画像表示部 1 1 5に表示される画像 と同じ画像が表示される状態 （以下、 「没入モード」 と呼ぶ） に移行し、 この没 入モードで、 ユーザによるリターン操作がされると、 再び鳥瞰モードに移行する というように、 鳥瞰画像表示部 1 1 7の表示状態を、 上述した鳥瞰モードと没入 モードとに自由に切り換え可能としてもよい。
第 3 2 A図は鳥瞰モードにおける鳥瞰画像表示部 1 1 7の表示例を示し、 第 3 2 B図は没入モードにおける鳥瞰 ®像表示部 1 1 7の表示例を示している。 第 3 2 A図に示す鳥瞰モードでは、 鳥瞰画像表示部 1 1 7には鳥瞰画像が表示される 。 この鳥瞰画像における全周囲画像の撮影地点 M l〜M 5に対応して矩形の表示 領域 D 1〜D 5が設けられている。 第 3 2 A図ではこれらの表示領域表示領域 D 1〜D 5は空白となっているが、 実際には各表示領域にはそれぞれの地点におけ る現在の向きにおける画像が表示されている。 '
この鳥瞰モードでは、 鳥瞰画像表示部 1 1 7には、 鳥瞰画像に重畳されて向き 選択ボタン B L， B Rが表示されている。 ユーザは、 タツチパネル 1 1 8で選択 ボタン B L , B Rを操作することで、 向きを任意に選択できる。 この向きの選択 に応じて鳥瞰画像表示部 1 1 7に表示される鳥瞰画像の向きも変更され、 さらに 表示領域 D 1〜D 5のそれぞれに表示される画像も対応して変更される。
ここで、 鳥瞰画像の変更は、 上述したようにメディアデータベース 1 1 2から 読み出す鳥瞰画像データ D 4を向きに応じたものとすることで達成できる。 この 場合、 メディアデータベース 1 1 2には各向きに対応した鳥瞰画像データ D 4が 蓄積されている。 なお、 鳥瞰画像の向きの変更は座標変換処理によっても達成で きる。 また、 各表示領域の表示画像の変更は、 上述したように各地点の全周囲画 像から切り出す部分を向きに応じて変更することで達成できる。
この鳥瞰モードで、 ユーザは、 タツチパネル 1 1 8で、 撮影地点 M l〜M 5の 'うちいずれかをタツチすることで、 撮影地点を選択できる。 これにより、 メディ アデニタベース 1 1 2からその選^ ¾された地点の全周囲画像データ D 3が読み出 され、 背景画像表示部 1 1 5には、 選択された撮影地点の画像が、 鳥瞰モードで 選択された向きで表示される。 このとき、 鳥瞰画像表示部 1 1 7の表示状態は、 第 3 2 B図に示すように、 没入モードとなり、 背景画像表示部 1 1 5に表示され る画像と同じ画像が表示される状態となる。
この没入モードでは、 鳥瞰画像表示部 1 1 7には、 画像に重畳されて向き選択 ボタン B L， B Rが表示されている。 ユーザは、 タツチパネル 1 1 8で選択ボタ ン B L , B Rを操作することで、 向きを任意に選択できる。 この向きの選択に応 じて、 背景画像表示部 1 1 5に表示される画像が変更されると共に、 この鳥瞰画 像表示部 1 1 7に表示される画像もそれに対応して変更される。 この画像の変更 は、 上述したように選択された地点の全周囲画像から切り出す部分を向きに応じ て変更することで達成できる。
また、 この没入モードでは、 鳥瞰画像表示部 1 1 7には、 画像に重畳されて.、 その画像内に存在する他の撮影地点を示すマーク N 2 , N 3が表示されている。 ユーザは、 タツチパネル 1 1 8で撮影地点のマークをタツチすることで、 他の撮 影地点を直接選択できる。 このように、 没入モ ドで他の撮影地点が選択される 場合には、 メディアデータベース 1 1 2からその撮影地点の全周囲画像データ D 3が読み出され、 背景画像表示部 1 1 5には、 その撮影地点の画像がその選択時 点における向きで表示される。 この場合、 鳥瞰画像表示部 1 1 7に表示されてい る画像もその撮影地点のものに変更される。
また、 この没入モードでは、 鳥瞰画像表示部 1 1 7には、 画像に重畳されてリ ターンボタン R Bが表示されている。 ユーザは、 タッチパネル 1 1 8でこのリタ ーンボタン R Bを操作することで、 没入モードから鳥瞰モードに移行し、 鳥瞰画 像表示部 1 1 7に、 第 3 2 A図に示すように、 鳥瞰画像が表示された状態に復帰 する。
第 3 3図は、 上述した鳥瞰画像表示部 1 1 7の表示状態の遷移図を示している' 。 鳥瞰 ΐードではモードを変更せずに向きの変更を行うことができる。 そして、 この鳥瞰モードで地点選択があると、 没入モードに遷移する。 '没入モードではモ 一ドを変更せずに向きの変更を行うことができる。 また、 この没入モードでは、 モードを変更せずに地点選択を行うことができる。 そして、 この没入モードでリ ターン操作がされることで、 鳥瞰モードに遷移する。
ところで、 有名観光地、 テーマパーク等を鳥瞰画像により表示する場合、 マー クが密に配置される場合が予測され、 これにより鳥瞰画像によっては、 所望する 場所の画像を簡易に表示できなくなる恐れがある。 またこの場合、 上述の背景画 像表示部 1 1 5の表示画面上のマークにより移動する場合にあっても、 マークが 密に表示され、 これによりこの場合も所望する場所の画像を簡易に表示できなく なる恐れがある。
そのため、 制御部 1 1 3は、 タツチパネル 1 1 8の操作によりユーザが全周囲 画像の並列表示を指示すると、 第 3 4図に示すように、 背景画像表示部 1 1 5に 、 ユーザにより指示された 2つの癍影地点に係る全周囲画像 D 3 Aの全部を並べ て表示する。 なおこの場合に、 要は、 2つの撮影地点に係る全周囲画像を上下に 並べて表示すればよく、 背景画像表示部 1 1 5で表示可能な範囲で、 全周囲画像 の一部だけを表示するようにしてもよい。 また背景画像表示部 1 1 5と、 鳥瞰画 像表示都 1 1 7とに 2つの画像を分けて表示してもよく、 鳥瞰画像表示部 1 1 7 にまとめて表示するようにしてもよい。 またさらに、 第 3の表示装置を設けて、 表示するようにしてよい。 制御部 1 1 3は、 ユーザによる指示によりこの表示を スクロールさせ、 移動先の入力を受け付ける。
すなわち、 桊 3 5図は、 この全周囲画像の並列表示に係る制御部 1 1 3の処理 手順を示すフローチャートである。 制御部 1 1 3は、 この処理手順を開始すると 、 ステップ S P 2 1からステップ S P 2 2に移り、 鳥瞰画像表示部 1 1 7により 鳥瞰画像を表示し、 続くステップ S P 2 3において、 この鳥瞰画像で表示したマ ーク M l〜M 5の選択をタツチパネル 1 1 8により検出し、 これによりユーザに より指示された撮影地点を受け付ける。 このとき制御部 1 1 3は、 2つのマーク M l〜M 5の選択を受け付け、 これにより並列表示に供する 2つの画像について 、 撮影地点の選択を受け付ける。
続いで、 制御部 1 1 3は、 ステップ S P '2 .4に移り、 ステップ S P 2 3で取得 した撮影地点に係る 2つの全周囲画像データ D 3をメディァデータベース 1 1 2 から読み出し、 この読み出した 2つの全周囲画像データ D 3による全周囲画像 D 3 Aを第 3 4図に示すように、 上下に並べて表示する。
続いて、 制御部 1 1 3は、 ステップ S P 2 5に移り、 タツチパネル 1 1 8の操 作により、 ユーザが上側に表示した全周囲画像のスクロールを指示レたか否か判 断し、. ここで肯定結果が得られると、 ステップ S P 2 6に移り、 第 3 4図におい て矢印 Dにより示すように、 上側に表示した全周囲画像 D 3 Aをスクロールさせ 、 ステップ S P 2 5に戻る。 これに対してステップ S P 2 5で否定結果が得られ ると、 制御部 1 1 3は、 ステップ S P 2 5からステップ S P 2 7に移り、 タツチ パネル 1 1 8の操作により、 ユーザが下側に表示した全周囲画像 D 3 Aのスクロ ールを指示したか否か判断する。 ここで肯定結果が得られると、 制御部 1 1 3は 、 ステップ S P 2 7からステップ S P 2 8に移り、 第 3 4図において矢印 Eによ り示すように、 下側に表示した全周囲画像をスクロールさせ、 ステップ S P 2 5 に戻る。
これに対して、 ステップ S P 2 7で否定結果が得られると、 制御部 1 1 3は、 ステップ S P 2 9に移り、 タツチパネル 1 1 8の操作により、 ユーザが決定のメ ニューを操作したか否かを判断する。 ここで、 否定結果が得られると、 制御部 1 1 3は、 ステップ S P 2 9からステップ S P 2 5に戻る。 これらにより、 制御部 1 1 3は、 ユーザ操作に応動して上下に表示した全周囲画像 D 3 Aをそれぞれス ク.ローノレさせる。
これに対して、 ステップ S P 2 9で肯定結果が得られると、 制御部 1 1 3は、 ステップ S P 3 0に移る。 ここで制御部 1 1 3は、 上下に表示した全周囲画像 D 3 Aの水平方向の中央位置が、 複数の撮影地点のうち何れの方向であるかを検出 する。 また、 第 3 6図により鳥瞰画像 1 3 1上で示すように、 この検出結果によ り、 各撮影地点より検出した方向に延長する直線 L 1および L 2の交点 Pを検出 し、 この交点 Pの最近傍の撮影地点 （この場合、 マーク M 3による撮影地点であ る） を検出する。 これにより制御部 1 1 3は、 ユーザの所望する移動 を検出し 、 続くステップ S P 3 1において、 この移動先に係る全周囲画像データ D 3を取 得して背景画像表示部 1 1 5で表示した後、 ステップ S P 3 2に移ってこの処理 手順を終了する。 . '
これにより制御部 1 1 3は、 全周囲画像の全画面表示において、 移動先が画面 中央になるように、 2.つの全周囲画像の表示をスクロールさせ、 これら 2つの全 周囲画像により移動先の入力を受け付けて表示を切り換え、 これらにより一段と 使い勝手を向上させる。
なお、 このようなスクロールにより移動先方向の設定に代えて、 全周囲画像上 にカーソルを表示して移動させることにより、 移動先方向の設定を受け付けるよ うにしてもよい。 またこのような並列的な全周囲画像の表示にあっては、 鳥瞰画 像表示部 1 1 7で表示する場合には、 タツチパネル 1 1 8の操作により移動先方 向の設定を受け付けるようにしてもよレ、。
このような背景画像表示部 1 1 5における一連の画像表示に係る処理と同時並 列的に、 制御部 1 3は、 照明用コントローラ 1 1 9の制御により、 背景画像表示 部 1 1 5に表示する画像に応じて照明 1 2 0を種々に変ィヒさせる。
このため、 制御部 1 1 3は、 上述した一連の処理において、 最初に全周囲画像 データ D 3を取得すると、 この全周囲画像データ D 3について照明制御情報 D 5 を生成してメディアデータベース 1 1 2に記録する。
すなわち、 制御部 1 1 3は、 全周囲画像データ D 3を構成する部分画像毎に、 部分画像を構成する画素値の平均値を計算し、 これにより各部分画像の平均輝度 レベルを検出する。 ここで第 3 7図に示すように、 部分画像は、 1つの撮影地点 で撮像装置を順次パンして撮影しているこ.とにより、 太陽の方向を背にした撮影 では輝度レベルの高い撮像結果を得ることができるのに対し、 太陽の方向を向い た撮影では、 いわゆる逆光であることにより輝度レベルの低い撮像結果が得られ る。
これにより、 第 3 8図に示すように、 このようにして検出される平均輝度レべ ルは、 太陽の方向に対する部分画像の位置に応じて正弦波形状により変化するこ とになる。 制御部 1 1 3は、 このようにして検出される全周囲画像の各部の平均 輝度レベルに応じて、 照明 1 2 0を変化させるように照明制御情報 D 5を生成す る。
具体的に、 この実施の形態では、 各部分画像で検出された平均輝度レベルに照 明 1 2 0の明るさが比例するように、.各部分画像毎に、 照明制御情報 D 5を生成 する。 また各部分画像で検出された平均輝度レベルに照明の色温度が比例するよ うに、'各部分画像毎に.、 照明制御情報 D 5を生成する。 これらにより背景画像表 示部 1 1 5で表示する画像が明るい程、 照明 1 2 0が明るくなるように設定し、 背景画像表示部 1 1 5に表示した画像の見かけのコントラストを増大させる。 す なわちこの場合、 輝度レベルの高い部分をより明るく見せ、 これにより見かけの コントラストを増大させる。 また輝度レベルの高い部分の色温度を高くし、 これ により輝度レベルの高い画像程、 太陽光による画像であるように見せ、 これによ つても見かけのコントラストを増大させる。
制御部 1 1 3は、 第 3 9図に示すように、 このようにして生成した照明制御情 報 D 5を、 対応する部分画像を識別する識別コードである画像 I Dと共にメディ ァデータベース 1 1 2に記録して保持する。 また背景画像表示部 1 1 5に表示す る全周囲画像の部分に応じて、.このメディアデータベース 1 1 2に記録した照明 制御情報 D 5を検索して対応する照明制御情 ^RD 5を検出し、.この検出した照明 制御情報 D 5による照明用コントローラ 1 1 9の制御により照明 1 2 0の明るさ 、 色温度を制御する。
第 4 0図は、 この照明 1 2 0の制御に係る制御部 1 1 3の処理手順を示すフロ 一チャートである。 制御部 1 1 3は、 この処理手順を開始すると、 ステップ S P 4 1からステップ S P 4 2に移り、'全周囲画像を取得する。'また続くステップ S P 4 3において、 この取得した全周囲画像から上述したよう.にして照明制御情報 D 5を生成し、 メディアデータベース 1 1 2に記録して保持する。
また、 続くステップ S P 4 4において、 背景画像表示部 1 1 5で表示する画像 が選択されると、 続くステップ S P 4 5において、 この表示に供する画像に対応 する照明制御情報 D 5をメディアデータベース 1 1 2より取得し、 続くステップ S P 4 6においてステップ S P 4 4で選択された画像を背景画像表示部 1 1 5で 表示する。 また続くステップ S P 4 7において、 ステップ S P 4 5で取得した照 明制御情報 D 5〖こより照明 1 2 0を制御する。 また、 鲩くステップ S P 4 8でュ 一ザにより背景画像表示部 1. 1 5で表示する画像の変更指 が得られると、 ステ ップ S P 4 4に戻る。
なお、 制御部 1 1 3に充分な処理能力を確保できる場合等にあっては、 このよ うな事前の照明制御情報の生成に代えて、 リアルタイムで照明制御情報を生成す るようにしてもよく、..またこれとは逆に、 全周囲画像データ D 3の生成時に作成 して、 全周囲画像データ D 3と共に提供するようにしてもよい。
以上の構成によれば、 鳥瞰画像におけるユーザによる操作により、、撮影地点の 異なる広角の画像表示を切り換え、 またこの画像表示をスクロールさせることに より、 実写による画像の表示に関して、 従来に比して高い没入感を確保すること ができる。
また、 広角の画像に対応する音声データにより、 広角の画像表示の切り換え、 スクロールに連動させて、 ユーザに提供する音声データを切り換え、 音像の位置 を可変することにより、 音声によってもさらに臨場感を向上することができ、 さ らに一段と高い没入感を得ることができる。 また、 広角に係る表示画像上におけるユーザによる入力よつても、 広角の画像 表示を.切り換え、 またこの画像表示をスクロールさせることにより、 ユーザの使 い勝手を向上することができる。
また、 広角画像を並べて表示し、 ユーザによる指示に係る方向の撮影場所に係 る画像に表示を切り換えることによつても、 ユーザの使い勝手を向上することが できる。
また、 背景画像表示部の表示の切り換え、 広角画像に係るスクロールに連動し て、 室内の照明を可変することにより、 画像に応じて雰囲気を可変して、 さらに はコントラストを増大させて、 一段と没入感を向上することができる。
具体的に、 この照明の可変が、 明るさおよび色温度のいずれかまたは双方の可 変であり、 さらに輝度レベルに応じて、 明るさを増大させ、 色温度を高くする可 変であることにより、 一段と没入感を向上することができる。
なお、 上述した照明の制御とは逆に、 各部分画像で検出された平均輝度レベル に照明の明るさ、 色温度が逆比例するように、 各部分画像毎に、 照明制御情報 D 5を生成するようにしてもよレ、。
すなわち、 背景画像表示部 1 1 5で表示する画像が明るい程、 照明 1 2 0が暗 くなるように設定し、 背景画像表示部 1 1 5に表示した画像の見かけのコントラ ストを増大させる。 すなわちこの場合、 輝度レベルの低い部^をより暗く見せ、 これにより見かけのコントラストを増大させる。.また輝度レベルの低い部分の色 温度を高くし、 これにより輝度レベルの低い画像程、 太陽光による画像であるよ うに見せ、 これによつても見かけのコントラストを増大させる。
照明に係る明るさ、 色温度の可変が、 背景画像表示部で表示する画像の輝度レ 'ベルに応じて、 明るさを低下させ、 色温度を低くする可変であることによつても 、 コントラストを増大させて、 一段と没入感を向上することができる。
また、 表示に供する画像に応じて、 各部分画像で検出された平均輝度レベルに 照明の明るさ、 色温度を比例させる比例制御と、 それとは逆に各部分画像で検出 された平均輝度レベルに照明の明るさ、 色温度を反比例させる反比例制御とを切 り換えるようにしてもよい。 これにより、 表示に供する画像に応じて照明の制御 を適応的に切り換える。 具体的に、 例えば海辺の風景等の表示では、 比例制御に より照明を制御し、 屋内で撮影した画像の表示では、 反比例制御により照明を制 御する。 このように、 表示に供する画像に応じて、 照明に係る制御を切り換える ようにしても、 一段と没入感を向上することができる。
また、 全周囲画像データの生成に供する画像の撮影時、 太陽の方向を記録して 保持し、 全周囲画像データ D 3にこの太陽の方向を特定する情報を付加するよう にしてもよい。 画像表示装置 1 1 1では、 この太陽の方向を特定する情報により 、 背景画像表示部 1 1 5で表示する画像の、 撮影時における太陽の方角に応じて 照明の明るさ、 色温度を可変する。 このように、 背景画像表示部 1 1 5で表示す る画像の、 撮影時における太陽の方角に応じて照明の明るさ、. 色温度を可変する ことでも、 没入感を向上させることができる。
また、 全周囲画像データ D 3に、 撮影時刻を特定する撮影時の時刻情報を付加 し、 この撮影時の時刻情報により照明を制御するようにしてもよい。 具体的に、 撮影時刻が夕方の場合、 照明の明るさを暗くし、 また色温度を低下させる。 また 撮影時刻が夜間の場合、 一段と照明の明るさを喑くし、 また色温度を低下させる 。 また撮影時刻が昼間の場合、 照明の明るさを明るくし、 また色温度を高くする 。 このように、 背景画像表示部 1 1 5で表示する'画像の撮影時刻に応じて照明を 可変するようにしても、 没入感を向上させることができる。
第 4 1図は、 他の画像表示システム 1 4 1の構成を示すプロック図である。 こ の画像表示システム 1 4 1は、 ネットワーク上のサーバであるメディアデータべ ース 1 4 4 Α〜1 4 4' Cに全周囲画像データ、.鳥瞰画像データが保持される。 こ れにより、 この画像表示システム 1 4 1において、 画像表示装置 1 4 2は、 広帯 域ネットワーク 1 4 3を介してメディアデータベース 1 4 4 A〜l 4 4 Cをァク セスして全周囲画像データ、 鳥瞰画像データを取得する点を除いて、 上述した画 像表示装置 1 1 1 (第 1 9図参照） と同一に構成される。 このように、 画像デー タに係る記録再生部をネットワーク上に配置する場合であっても、 上述の実施の 形態と同様の効果を得ることができる。
なお、 上述の実施の形態においては、 全周囲画像より部分画像を生成して全画 像データとする場合について述べたが、 本発明はこれに限らず、 元の撮像結果に よる複数画像の画像ファィルにより全画像データを構成するようにしてもよく、 また 1つの全周囲画像により全周囲画像データを構成するようにしてもよい。 また.、 上述の実施の形態においては、 静止画による画像を表示する場合につい て述べたが、 本発明はこれに限らず、 動画による画像を表示する場合にも広く適 用することができる。 この場合、 第 4 1図について上述したようなネットワーク により全周囲画像データを供給するサーバに接続することが考えられる。 また、 サーバにあっては、 上述の全周囲画像データの生成に供する複数の撮像結果を動 画により提供し、 画像表示装置側にあっては、 この複数の動画による撮像結果の 画像合成により、 種々に向きを変化させて、 背景画像表示部に動画による映像を 表示することができる。
また、 全周囲より動画を撮像 ·Τる専用の撮像機構により動画による撮像結果を 取得して提供し、 この動画による撮像結果の画像処理により、 種々に向きを変化 させて、 背景画像表示部に動画による映像を表示することもできる。 なおこのよ うな全周囲より動画を撮像する専用の撮像機構は、 例えば曲面ミラーを用いる方 法、.角錐ミラーを用いる場合等があり、 画像表示装置側では、 この場合、 撮像機 構に応じて、 伝送された撮像結果を画像変換させることが必要になる。 .
また、 上述の実施の形態においては、 1画面に'より表示困難な広角の画像とし て、 全周囲画像を適用する場合について述べ.たが、 本発明はこれに限らず、 例え ば前方だけの画像を適用する場合等、 必要に応じて種々の広がりを有する画像の 表示に広く適用することができる。
また、 上述の実施の形態においては、 水平方向に広がりを有する広角画像の表 示に本発明を適用する場合について述べたが、 本発明はこれに限らず、 これに代 えて、 又はこれに加えて上下方向に広がりを有する広角画像の表示 も広く適用 する とができる。
また、 上述の実施の形態においては、 照明の明るさ、 色温度を制御する場合に ついて述べたが、 本発明はこれに限らず、 照明の分布を制御するようにしてもよ レ、。 すなわち、 例えば逆光による画像を表示する場合に、 この画像を表示してい る側を明るくし、 これとは逆側を暗くすることにより、 照明の分布により太陽の 方向を感じ取ることができ、 一段と臨場感を向上することができる。 またこれと は逆に、 太陽を背にして撮影した画像を表示する場合に、 背景側を明るくするこ とによっても、 照明の分布により i:陽の方向を感じ取ることができ、 一段と臨場 感を向上することができる。
また、 上述の実施の形態においては、 音声、 照明により没入感を増大する場合 について述べたが、 本発明はこれに限らず、 さらに風、 温度等の制御によりさら に没入感を増大させるようにしてもよい。
( 3 ) プロジェクタの配置例
上述したように、 天井と天井裏との間の空間、 床と床下との間の空間、 あるい は内壁と外壁との間の空間を有する視聴覚室 （部屋） で、 これらの空間にプロジ ェクタを配置する場合の種々の例を説明する。
第 4 2図は、 内壁 2、 天井 2 A、 床 2 Bで囲まれた視聴覚室 （部屋） 4 0 1の 内部の様子を示している。 この視聴覚室 4 0 1は、 それぞれ天井 2 Aおよぴ床 2 Bの複数個所、 図示の例では 2箇所に、 開口部としての投影用窓 4 0 4が設けら れている。 ここで、 投影用窓 4 0 4は、 室内に設けられたスクリーン等に、 天井 2 Aと天井裏 3 A (第 1 5図、 第 1 6図参照） との間の空間、 床 2 Bと床下 3 B (翁 1 6図参照） との間の空間に配置されたプロ^ェクタ 4 0 2 (第 4 2図 は 図示せザ） から映像光を照 できるように： 開口部として、 あるいは開口部にガ ラス等の透明板材を配置して形成される。 なお、 投影用窓 4 0 4は、 単に開口部 により形成された場合は、 蓋 （図示せず） が設けられ、 未使用時はこの蓋により 覆われる。 '
天井 2 Aと天井裏 3 Aとの間に配置されるプロジェクタ 4 0 2は、 天井 2 Aの 面に沿って、 この天井 2 Aに形成された投影甩窓 4 0 4のいずれかの位置に選択 的に移動し、 当該投影用窓 4 0 4を介して視聴覚室 4 0 1の室内の所定位置に映 像光を照射し、 当該所定位置に映像を表示する。 同様に、 床 2 Bと床下 3 Bとの 間に配置されるプロジェクタ 4 0 2 1は、 床 2 Bの面に沿って、 この床 2 Bに形 成された投影用窓 4 0 4のいずれかの位置に選択的に移動し、 当該投影用窓 4 0 4を介して視聴覚室 4 0 1の室内の所定位置に映像光を照射し、 当該所定位置に 映像を表示する。 このようにプロジェクタ 4 0 2から投影用窓 4 0 4を介して映 像光を室内の所定位置に照射する構成とすることで、 プロジェクタ 4 0 2の使用 時にも、 このプロジェクタ 4ひ 2を室内に取り出すものではなく、 使用時におけ る室内'の雰囲気を乱すこともない。
プロジェクタ 4 0 2が、 2箇所の投影用窓 4 0 4の位置に選択的に移動できる ように、 例えばこれら 2箇所の投影用窓 4 0 4の間にガイド部材が配置された構 成とされる。 この場合、 ガイ卞部材は、 プロジヱクタ 4 0 2を案内すると共に、 当該プロジェクタ 4 0 2に電源を供給する電源ラインとしても使用される。 この ようにプロジェクタ 4 0 2は、 ガイド部材に案内されて 2箇所の投影用窓 4 0 4 の位置に選択的に移動するが、 当該投影用窓 4 0 4に対応レた位置に正しく移動 するように、 位置検出機構を有している。 この位置検出機構は、 各投影用窓 4 0 4の位置に設けられた位置検出用部材を検出することで、 当該位置にいるか否か を検出する。
例えば、 位置検出機構が光学的手法による場合には、 位置検出用部材としての 反射シート等が天井 2 Aの裏面あるいはガイド部材等に貼り付けられる ώ また例 えば位置検出機構が I Cタグを利用する場合には、 I Cタグが天井 2 Αの裏面あ るいはガイド部材等に取り付けられる。 このように、 位置検出機構が採用する位 置検出の手法に対応して、 種々の位置検出用部材が天井 2 Aの裏面などに配設ざ れる。 . . .
第 4 3図は、'プロジェクタ 4 0 2の移動機構の一例を示している。 プロジェク タ 4 0 2の底面の両端がスクリューのついた 2つの土台 4 5 1で支えられ、 それ ぞれの土台 4 5 1がスクリユーのついた 2本のレール 4 5 2に嚙み合わされて設 置される。 2本のレール 4 5 2がモータ 4 5 3によって同期して回転することで 、 プロジェクタ 4 0 2が前後 （X方向） に移動する。 、
また、 この 2本のレール 4 5 2のそれぞれの両端もスクリユーのついた構造と されており、 それぞれのレール 4 5 2がスクリユーのついた 2本のレール 4 5 4 に嚙み合わされて設置される。 2本のレールがモータ 4 5 5によって同期して回 転することで、 プロジェクタ 4 0 2が左右 （Y方向） に移動する。
第 4 3図に示すプロジェクタ 4 0 2の移動機構の場合、 上述したように 2箇所 の投影用窓 4 0 4の位置にプロジェクタ 4 0 2を案内するガイド部材は、 例えば レール 4 5 2あるいはレール 4 5 4によって構成されている。 また、 プロジェクタ 4 0 2は、 投影機構から出射される映像光を所定方向に反 射する'ミラーと、 このミラーの位置および角度を変化させるミラー可動機構とを 有している。 第 4 4図は、 ミラー可動機構の一例を示している。 'プロジェクタ 4 0 2の上面にシリンダ 4 6 1が取り付けられ、 このシリンダ 4 6 1の先端にミラ 一 4 6 2が取り付けられている。 このシリンダ 4 6 1により、 ミラー 4 6 2のプ ロジェクタ 4 0 2からの距離が調整可能とされて'いる。
また、 シリンダ 4 6 1のミラー 4 6 2の取付位置に 2軸めモータ 4 6 3が設け られている。 この 2軸のモータ 4 6 3によってミラー 4 6 2の向きが調整可能と されている。 このようにシリンダ 4 6 1および 2軸のモータ 4 6 3によってミラ 一 4 6 2の位置および角度を変えることができ、 これによりプロジェクタ 4 0 2 の投影機構から出射される映像光が向かう方向、 つまり映像が投影される室内位 置を調整でき、 映像表示位置の選択の自由度を高めることができる。
第 4 2図に戻って、 視聴覚室 4 0 1には、 上述した天井 2 Aおよぴ床' 2 Bのそ れぞれの一方の投影用窓 4 0 4に対応する箇所に、 事前の設置により、 またはュ 一ザによる移動により、 スクリーン 4 0 5 a , 4 0 5 bが配置されている。
第 4 5図は、 上述したプロジェクタ 4 0 2の構成を示している。 プロジェクタ 4 0 2は、 全体の動作を制御するコントローラ 4 0 2 aと、 上述した移動機構 4 0 2 b (第 4 3図参照） と、 ミラー可動機構 4 0 2 d (第 4 4図参照） と、 映像 光を投影するための投影機構 4 0 2 cと、 リモートコマンダ 4 7 1から無線送信 されるコントロール信号を受信するリモコン受信部 4 0 2 eと、 D V Dプレーヤ 、 パーソナルコンピュータ、 テレビチューナ等の映像機器 4 7 2から無線送信さ れる映像信号を受信する映像受信部 4 0 2 f と、 この映像受信部 4 0 2 f で受信 された映像信号に対し、 投影機構 4 0 2 cによって室内の所定位置に投影される 映像の歪み、 例えば台形歪みを補正するための捕正処理を行う補正処理部 4 0 2 gと、 位置検出機構 4 0 2 hを有している。 映像機器 4 7 2は、 例えば内壁 2お よび外壁 3との間の空間に収容されている。
なお、 リモコン受信部 4 0 2 eはリモートコマンダ 4 7 1から無線送信される コントロール信号を受信し、 また映像受信部 4 0 2 f は映像機器 4 7 2から無線 送信される映像信号を受信するものであり、 プロジヱクタ 4 0 2と映像機器 4 7 2との間、 およびプロジェクタ 4 0 2とリモートコマンダ 4 7 1との間が無線で 接続されるので、 プロジェクタ 4 0 2が空間内を移動する際にケーブルが邪魔に なるなどということはない。 .
投影機構 4 0 2 cは、 映像受信部 4 0 2 f で受信される映像信号に基づき、 映 像光を生成して出射する。 つまり、 この投影機構 4 0 2 cは、 従来周知のように 、 光源と、 この光源の出射光を映像信号により空間変調して映像光を生成する液 晶パネル等の光空間変調素子、 この映像光を出射する光学系等により形成されて いる。 .
リモコン受信部 4 0 2 eは、 リモートコマンダ 4 7 1からのコント口ール信号 を受信してコントローラ 4 0 2 aに通知する。 位置検出機構 4 0 2 hは、 上述し た位置検出用部材の検出により、 投影用窓 4 0 4が設けられた位置へのこのプロ ジェクタ 4 0 2の移動を検出してコントローラ 4 0 2に通知する。 移動機構 4 0 2 bは、 コントローラ 4 0 2 aの制御により、 モータの駆動力によってスクリュ 一を回転させ （第 4 3図参照） 、 これにより天井、 床などの空間に設けられたレ ールに沿ってこのプロジェクタ 4 0 2を移動させる。
笫 4 5図に示すプロジェグタ 4 0 2の動作を簡単に説明する。 ユーザがリモー トコマンダ 4 7 1を操作して、 所定の空間に配置されているプロジェクタ 4 0 2 から、 所定の投影用窓 4 0 4を通して室内の所定位置に映像光を照射することを 指示するコントロール信号を出した場合について述べる。
この場合、 リモートコマンダ 4 7 1からのコントロール信号がリモコン受信部 4 0 2 eで受信され、 このコントロール信号はコントローラ 4 0 2 aに供給され る。 コントローラ 4 0 2 aは、 このコントロール信号を受け、 移動機構 4 0 2 b を制御し、 プロジェクタ 4 0 2を上述した所定の投影用窓 4 0 4に対応した位置 に移動することを開始させる。 そして、 コントローラ 4 0 2 aは、 位置検出機構 4 0 2 hにより所定の投影用窓 4 0 4の位置へのプロジェクタ 4 0 2の移動が検 出されると、 移動機構 4 0 2 bを制御してプロジェクタ 4 0 2の移動を停止させ る。
この場合、 第 4 6図に示すように、 例えば天井 2 Aと天井裏 3 Aとの間の空間 に配置されたプロジェクタ 4 0 2は、 ユーザによる指示により、 天井面に沿って 、 それまで位置していた投影用窓 4 0 4の位置から次の投影用窓 （所定の投影用 窓 4 0 .4 ) の位置に移動する。 またこの場合、 第 4 7図に示すように、 例えば床 2 Bと床下 3 Bとの間の空間に配置されたプロジェクタ 4 0 2'は、 ユーザによる 指示により、 床面に沿って、 それまで位置していた投影用窓 4 0 4の位置から次 の投影用窓 （所定の投影用窓 4 0 4 ) の位置に移動する。
コントローラ 4 0 2 aは、 このようにプロジェクタ 4 0 2が所定の投影用窓 4 0 4の位置に移動すると、 ミラ一可動機構 4 0 2 dを制御し、 ミラー 4 6 3を、 映像光が当該所定の投影用窓 4 0 4を通って室内の所定位置に照射されるように 、 ミラー 4 0 2 dの位置および角度を調整する。
また、 コントローラ 4 0 2 aは、 このようにプロジェクタ 4 0 2が所定の投影 用窓 4 0 4の位置に移動すると、 投影機構 4 0 2 b、 補正処理部 4 0 2 gおよび 映像処理部 4 0 2 f の動作を立ち上げる。 映像受信部 4 0 2 f は映像機器 4 7 2 から映像信号を受信し、 この映像信号を、 捕正処理部 4 0 2 gを介して投影機構 4 0 2 cに供給する。
これにより、 投影機構 4 0 2 cから、 映像信号に基づく映像光が出射され、 こ の映像光はミラ 4 0 2 dで反射された後に、 室内の所定位置に照射される。 そ して、 この室内の所定位壅に.は、'映像機器 4 .7 2から映像受信部 4 0 2 f に供給 される映像信号による映像が表示される。
なお、 'コントローラ 4 0 2 aは、 このように室内の所定位置に映像を表示した 状態で、 リモコン受信'部からの通知により、 ユーザによるフォーカス、 ズームな どの操作に応じて、 投影機構 4 0 2 cのフォーカス、 ズーム倍率を調整する。 ここで、 第 4 8図に示すように、 天井 2 Aと天井裏 3 Aとの間の空間に配置さ れるプロジェクタ 4 0 2は、 投影機構 4 0 2 cより出射される映像光の光路上に ミラー 4 6 2が配置され、 このミラー 4 6 2により天井面に沿った方向に向かつ て出射した映像光の光路を折り曲げ、 天井 2 Aに設けられた投影用窓 4 0 4を介 して室内のスクリーン 4 0 5に照射する。 なおこの場合、 ミラー 4 6 2の傾きの 可変により照射位置を調整できる。
また、 第 4 9図に示すように、 床 2 Bと床下 3 Bとの間の空間に配置されるプ ロジェクタ 4 0 2は、 同様に、 投影機構 4 0 2 cより出射される映像光の光路上 にミラー 4 6 2が配置され、 このミラー 4 6 2により床面に沿った方向に向かつ て出射した映像光の光路を折り曲げ、 床 2 Bに設けられた投影用窓 4 0 4を介し てスクリーン 4 0 5に投影する。
なお、 これら第 4 8図および第 4 9図に示す構成では、 スクリーン 4 0 5に対 して斜めに映像光を照射していることにより、 台形歪み等が発生する。 これによ り、 プロジェクタ 4 0 2の補正処理部 4 0 2 gでは、 映像信号に対して、 この台 形歪み等を防止する処理が行われる'。
なお、 補正処理部 4 0 2 gでは、 上述したように、 投影機構 4 0 2 cによって 室内の所定位置に投影される映像の歪みが補正されるように、 映像受信部 4 0 2 f で受信された映像信号に補正処理が行われて投影機構 4 0 2 cに供給される。 これにより、 室内の所定位置には、 歪みのない良好な映像が表示される。
なお、 投影用窓 4 0 4が蓋を備えている場合には、 リモートコマンダ 4 7 1に より投影用窓 4 0 4の開閉が制御される。 すなわち、 上述したようにプロジェク タ 4 0 2から所定の投影用窓 4 0 4を通して室内の所定位置に映像光を照射する ことを指示するコント口ール信号がプロジェクタ 4 0 2のリモコン受信部 4 0 2 e ίこ送信される場合、 当該所定の投影用窓 4 0 4に蓋を開くように指示するコン トロール信号が供給される。 , ' .
また、 上述したように映像光が照射される室内の所定位置がスクリーン 4 0 5 であって、 常には巻き取られている場合には、 リモートコマンダ 4 7 1によりス クリーン 4 0 5の開閉が制御される。 すなわち、 上述したようにプロジェクタ 4 0 2から所定の投影用窓 4 0 4を通して室内の所定位置に映像光を照射すること を指示するコントロール信号がプロジェクタ 4 0 2のリモコン受信部 4 0 2 eに 送信される場合、 当該スクリーン 4 0 5に開くように指示するコントロール信号 が供給される。
上述したように、 プロジェクタ 4 0 2は天井 2 Aと天井裏 3 Aとの間の空間、 床 2 Bと床下 3 Bとの間の空間、 あるいは内壁 2と外壁 3との間の空間に配置さ れるものであって、 視聴覚室 4 0 1の室内に配置されるものでなく、 室内の雰囲 気を乱すことがない。 また、 プロジェクタ 4 0 2はユーザ操作に応じて空間内の 複数位置に選択的に移動して室内に映像光を照射できるものであり、 複数台のプ ロジェクタを用意することなく、 ユーザは室内の複数位置で映像を鑑賞できる。 第 5 0図は、 上述した第 4 2図との対比により、 視聴覚室 （部屋） 4 0 1の内 部の様子を示している。 第 4 2図では、 スクリーン 4 0 5に映像を投影している 力 第 5 0図では、 天井 2 A、 床 2 Bに映像を投影している。 すなわち、 天井 2 Aと天井裏 3 Aとの間の空間に配置されたプロジェクタ 4 0 2からの映像光が当 該天井 2 Aに設けられた投影用窓 4 0 4を通して床 2 Bに照射されている。 また 、 床 2 Bと床下 3 Bとの間の空間 配置されたプロジェクタ 4 0 2からの映像光 が当該'床 2 Bに設けられた投影用窓 4 0 4を通して天井 2 Aに照射されている。 なお、 第 5 0図には、 プロジェクタ 4 0 2、 天井裏 3 A、 床下 3 Bは、 図示して いない。
第 5 1図は、 上述した第 4 2図との対比により、 視聴覚室 （部屋） 4 0 1の内 部の様子を示している。 第 4 2図では、 スクリーン 4 0 5に映像を投影している 力 第 5 1図では、 内壁 2および窓 4 3 0に映像を投影している。 すなわち、 天 井 2 Aと天井裏 3 Aとの間の空間に配置されたプロジェクタ 4 0 2からの映像光 が当該天井 2 Aに'設けられた投影用窓 4 0 4を通して内壁 2に照射されている。 また、 床 2 Bと床下 3 Bとの間の空間に配置されたプロジェクタ 4 0 2からの映 像光が当該床 2 Bに設けられた投影用窓 4 0 4を通して内壁 2に形成された窓 4 3 0に照射されている。 なお、 第 5 1図には、 プロジェクタ 4 0 2、 天井裏 3 A 、 床下 3 Bは、 図示していない。
第 5 2図は、 上述した第 4 2図との対比により、 視聴覚室 （部屋） 4 0 1の内 部の様子を示している。 第 4 2図では、 スクリーン 4 0 5に映像を投影している 力 第 5 2図では、 テーブル 4 2 0に映像を投影している。 すなわち、 床 2 Bと 床下 3 Bとの間の空間に配置されたプロジェクタ 4 0 2からの映像光が当該床 2 Bに設けられた投影用窓 4 0 を通してテーブル 4 2 0に照射されている。 なお 、 第 5 2図には、 プロジェクタ 4 0 2、 床下 3 Bは、 図示していない。
ここで、 第 5 2図に示すように、 テーブル 4 2 0は、 上方から見てほぼ正方形 形状のテーブル面 4 2 3を有し、 このテーブル面 4 2 3の四隅をそれぞれ脚 4 2 2により支える構造となっている。 このテーブル面 4 2 3は、 第 5 3図に示すよ うに、 例えば強化ガラス等の透明板材で形成されている。 また、 テーブル面 4 2 3はほぼ全面に、 リアプロジェ.クシヨン用のスクリーン 4 2 5が配置される。 こ れによ.り、 テーブル 4 2 0は、 床 2 Bに設けられた投射窓 4ひ 4からの映像光を このスクリーン 4 2 5により受光し、 床 2 Bと床下 3 Bとの間の空間に配置され たプロジェクタ 4 0 2による映像を表示する。
第 5 4図は、 上述した第 4 2図との対比により、 視聴覚室 （部屋） 4 0 1の内 部の様子を示している。 第 4 2図では、 スクリーン 4 0 5に映像を投影している 、 第 5 4図では、 テーブル 4 2 0に映像を投影している。''すなわち、 天井 2 A と天井 ¾ 3 Aとの間の空間に配置されたプロジェクタ 4 0 2からの映像光が当該 天井 2 Aに設けられた投影用窓 4 0 4を通してテーブル 4 2 0に照射されている 。 なお、 第 5 4図には、 プロジェクタ 4 0 2、 天井裏 3 Aは、 図示していない。 第 5 5図、 第 5 6図は、 第 4 8図および第 4 9図との対比により、 視聴覚室シ ステムの一部構成を示している。 この視聴覚システムにおいては、 上下方向 （垂 直方向） に連続する 2つの視聴覚室 （部屋） 4 0 1 U, 4 0 1 Dに、 1台のプロ ジ クタ 4 0 2によって、 映像を表示する。 なお、 第 5 5図は、 階下の視聴覚室 4 0 1 Dにはスクリーン 4 0 5に映像が表示され、 階上の視聴覚室 4 0 1 Uにも スクリーン 4 0' 5に映像が表示'される例である。 これに対して、 第 5 6図は、 階 下の視碱覚室 4 0 1 Dにはスクリーン 4 0ちに映像が表示ざれ、 階上の視聴覚室 4 0 1 Uにはテーブル 4 2 0のテーブル面に映像が表示される例である。
すなわち、.プロジェクタ 4 0 2は、 階下の視聴覚室 4 0 1 Dの天井 2 Aと階上 の視聴覚室 4.0 1 Uの床 2 Bとの間の空間に配置されている。 そして、 このプロ ジェクタ 4 0 2は、 階下の視聴覚室 4 0 1 Dめ天井 2 Aに設けられた投影用'窓 4 0 の位置または階上の視聴覚室 4 0 1 Uの床.2 Bに設けられた投影用窓 4 0 4 の位置に、 選択的に移動可能とされている。 この場合、 図示せずも、 空間内には 、 これらの投影用窓 4 0 4の位置にプロジェクタ 4 0 2を案内するためのガイド 部材 （第 4 3図のレール参照） 力 設けられている。
プロジェクタ 4 0 2は、 階下の視聴覚室 4 0 1 Dのリモートコマンダ 4 7 1の 操作により、 当該視聴覚室 4 0 1 Dの天井 2 Aに設けられた投影用窓 4 0 4の位 置に移動する。 また、 階上の視聴覚室 4 0 1 Uのリモートコマンダ 4 7 1の操作 により、 当該視聴覚室 4 0 1 Uの床 2 Bに設けられた投影用窓 4 0 4の位置に移 動する。
プロジェクタ 4 0 2が階下の視聴覚室 4 0 1 Dの天井 2 Aに設けられた投影用 窓 4 0 4の位置に移動すると、 この投影用窓 4 0 4を介して視聴覚室 4 0 1 Dの 所定位置に映像を表示するように、 ミラー 4 6 2の向きが切り換えられる。'また 、 階下の視聴覚室 4 0 1 Dの天井 2 Aに設けられた投影用窓 4 0 4の位置に移動 すると、 この投影用窓 4 0 4を介して視聴覚室 4 0 1 Dの所定位置に映像を表示 するように、 ミラー 4 6 2の向きが切り換えられる。
この第 5 5図、 第 5 6図に示すように構成することで、 2つの視聴覚室 4 0 1 U , 4 0 1 Dで、 1台のプロジェクタ 4 0 2を兼用でき、 その分構成を簡略化で きる。
第 5 7図は、 第 5 5図， 第 5 6図との対比により、 視聴覚室システムの一部構 成を示している。 この視聴覚システムにおいては、 左右方向 （水平方向） に連続 する 2つの視聴覚室 （部屋） 4 0 1 L , 4 0 1 Rに、 1台のプ ジェクタ 4 0 2. によって、 映像を表示する。
すなわち、 プロジェクタ 4 0 2は、 視聴覚室 4 0 1 L， 4 0 1 1 の天井2八と 天弁裏 3 Aとの間の空間に配置されている。 そして、， このプロジェクタ 4 0 2は 、 左側の視聴覚室 4 0 1 Lの.天井 2 Aに設けちれた投影用窓 4 0 4の位置または 右側の視聴覚室 4 0 1 Rの天井 2 Aに設けら;^た投影用窓 4 0 4の位置に、 選択 的に 動可能とされている。 この場合、 図示せずも、 空間内には、 これらの投影 用窓 4 0 4の位置にプロジェクタ 4 0 2·を案内するためのガイド部材 （第 4 3図 のレール参照） 力 設けられている。
プロジェクタ 4 0 2は、 左側の視聴覚室 4 0 .1 Lのリモートコマンダ 4 7 1の 操作により、 当該視聴覚室 4 0 1 Lの天井 2 Aに設けられた投影用窓 4の位置に 移動する。 また、 右側の視聴覚室 4 0 1 Rのリモートコマンダ 4 7 1の操作によ り、 当該視聴覚室 4 0 1 Rの天井 2 Aに設けられた投影用窓 4 0 4の位置を移動 する。
プロジェクタ 4 0 2が左側の視聴覚室 4 0 1 Lの天井 2 Aに設けられた投影用 窓 4 0 4の位置に移動すると、 この投影用窓 4 0 4を介して視聴覚室 4 0 1 Lの 所定位置に映像を表示するように、 ミラー 4 6 2の向きが切り換えられる。 また 、 右側の視聴覚室 4 0 1 Rの天井 2 Aに設けられた投影用窓 4 0 4の位置に移動 すると.、 この投影用窓 4 0 4を介して視聴覚室 4 0 1 Rの所定位置に映像を表示 するように、 ミラー 4 6 2の向きが切り換えられる。 '
この第 5 7図に示すように構成することで、 2つの視聴覚室 4 O I L , 4 0 1 で、 1台のプロジェクタ 4 .0 2を兼用でき、 その分構成を簡略化できる。 なお 、 水平方向に並ぶさらに多くの視聴覚室で 1台のプロジェクタを同様にして兼用 できることは勿論である。 なお、 第 5 7図では、 天井 2 Aと天井裏 3 Aの間の空 間にプロジェクタ 4 0 2を配置したものであるが、 このプロジェクタ 4 0 2を床 と床下との間の空間に配置するものも同様に構成できる。
第 5 8図は、 上述した第 5 0図との対比により、 視聴覚室 （部屋） 4 0 1の内 部の様子を示している。 第 5 0図では、 天井 2 Aに 2個の投影用窓 4 0 4が設け られたものを示したが、 第 5 8図では、 天井 2 Aには 1個の帯状の投影用窓 4 0 4が設けられている。 この投影用窓 4 0 4は、 例えば透明ガラスにより覆われて 作成される。 この場合、 プロジヱクタ 4 0 2をこの帯状の投影用窓 4 0 4の各部 に移動して、 映像の投影位置を種々に変更できる。
第 5 9図は、 '上述した第 5 8図との対比により、 視聴覚室 （部屋). 4 0 1の内' 部の様子を示している。 第 5 8図では、 天井 2 Aに 1個の帯状の投影用窓 4 0 4 が設けられたものを示したが、 第 5. 9図では、 内壁 2に 1個の帯状の投影用窓 4 0 4が設けられている。 この投影用窓 4 0 4は、.例えば透明ガラスにより覆われ て作成される。 この場合、 内壁 2と外壁 3との間の空間に配置されるプロジェク タ 4 0 2をこの帯状の投影用窓 4 0 4の各部に移動して、 反対側の内壁 2におけ る映像の投影位置を種々に変更できる。
なお、 上述実施の形態においては、 プロジェクタ 4 0 2のガイド部材がレール であるものを示したが、 この発明はこれに限定されるものではなく、 種々の手法 を広く適用することができる。
また、 上述実施の形態においては、 スクリーン 4 0 5、 テーブル 4 2 0、 床 2 B、 天井 2 A、 内壁 2等に映像を投影する場合について述べたが、 これに限らず 、 例えばテーブル以外の家具に投影する場合等、 投影場所にあっては種々に設定 することができる。 また、 上述の実施の形態においては、 天井、 床、 壁を二重構造により形成する 場合について述べたが、 これに限らず、 要は、 天井面、 床面、 壁面に沿ってプロ ジェクタを移動可能に、 天井の裏側、 床の裏側、 壁の裏側に配置すればよく、 種 々の構造による視聴覚室に広く適用することができる。
( 4 ) リモートコマンダの構成例
上述した画像表示システム 1 0 1のリモートコマンダ 1 1 6、 あるいは上述し たプロジェクタ 4 0 2を制御するリモートコマンダ 4 7 1として使用し得る'リモ 一トコマンダについて説明する。 .
第 6 0図は、 リモートコマンダ 2 0 1の構成を示す略線図である。 このリモー トコマンダ 2 0 1は、 テーブル 2 0 2によりユーザによる操作を受け付ける。 こ こで、 テーブル 2 0 2は、 第 6 1図に示すように、 上方から見てほぼ正方形形状 のテーブル面 2 0 3持ち、 このテープル面 2 0 3の四隅がそれぞれ脚 2 0 4によ り えられた構造となっている。 このテーブル面 2 0 3は、 強化ガラス等の透明 板材により形成されている。 このテーブル面 2 0 3のほぼ全面に、 背面投射型プ ロジェクタのスクリーン 2ひ 6および透明タッチパネル 2 0 7がこの順に積層配 置されている。 タツチパネル 2 0 7は、 'ュ ザ操作による指示を検出するセンシ ング部を構成している。 ここで、 テーブル面 2 0 3は全部が透明部分からなって いてもよいが、 少なくともスクリーン 2 0 6に対応した一部が透明部分であれば よい。'
また、 第 6 1図に示すように、 テーブル 2 0 2は、 テーブル面 2 0 3の下側で あって、 脚 2 0 4の内側に、 テーブル台 2 0 8を備えている。 すなわち、 第 6 2 Α図および第 6 2 B図にそれぞれ側面図および底面図を示すように、 テーブル台 2 0 8はテーブル面 2 0 3の下側の全面をほぼ覆う角筒形状に形成されている。 後述するようにテーブル 2 0 2の下方位置に配置されるプロジェクタ 2 1 0は、 このテーブル台 2 0 8で覆い隠された状態とされる。 なおここで、 このテーブル 台 2 0 8によりテーブル面 2 0 3の全体を支えるようにし、 脚 2 0 4を省略する ようにしてもよレ、。
ここで、 プロジェクタ 2 1 0は、 背面投射型プロジェクタであり、 D V Dプレ ーャ、 ビデオテープレコーダ、 テレビチューナ等の映像機器 （図示せず） から無 線送信されて送受信部 2 1 2で受信された映像信号 S Vによる映像光を上方に向 , けて出射する。 これにより、 第 6 3図に模式的に示すように、 テーブル面 2 0 3 に設けられたスクリーン 2 0 6に、 当該映像信号 S Vによる映像が表示される。 信号処理部 2 1 1は、 ユーザによるタツチパネル 2 0 7の操作による指示を検 出し、 この指示を送受信部 2 1 2に通知する。 送受信部 2 1 2は、 このユーザ操 作による指示を、 映像機器に無線送信する。 また、 送受信部 2 1 2は、 映像機器 と無線通信し、 当該映像機器から映像信号 S Vを受信し、 これをプロジェクタ 2 1 0に供給する。
第 6 0図に示すリモートコマンダ 2 0 1の動作を説明する。 例えば、 一ザが タツチパネル 2 0 7の有効画面外をタツチ操作すると、 信号処理部 2 1 1ではメ ニュー画面の要求指示が検出される。 このメニュー画面の要求指示は、 送受信部 2 1 2を通じて映像機器に送信される。 '
そして、 このメニュー画面の要求指示により映像機器から送られてくるメニュ 一画面用の映像信号が送受信部 2 1 2で受信され、 この映像信号 S Vはプロジェ クタ 2 1 0に供給される。 プロジェクタ 2 1 0からは、 この映像信号 S Vによる' 映像光が出射され、 テーブル面 2 0 3に配置されたスクリーン 2 0 6に照射され る。 これにより、 スクリーン 2 0 6には、 メニュー画面が表示きれる。
また、 このようにスクリーン 2 0 6にメニュー画面が表示されている状態で、 ユーザがタツチパネル 2 0 7を操作することで、 信号処理部 2 1 1では所定のメ ニューの選択指示が検出される。 このメニューの選択指示は、 送受信部 2 1 2を 通じて映像機器に送信される。 これにより、 映像機器の動作を種々 制御できる 。 この映像機器の動作には、 リモートコマンダ 2 0 1に所定の映像信号を送る動 作も含まれる。
また、 この映像機器の動作には、 上述した第 1 9図の画像表示システムの制御 部 1 1 3の動作も含まれる。 この場合、 スクリーン 2 0 6は、 鳥瞰画像表示部 1 1 7を構成し、 例えば第 3 2 A図， 第 3 2 B図に示すような鳥瞰モード、 没入モ 一'ドの操作画面の表示が行われる。 なおこの場合、 上述したようなメェユー画面 の表示はなく、 最初はスクリーン 2 0 6に鳥瞰モードの表示が行われ、 そして、 その後のユーザ操作に応じて鳥瞰モード、 没入モードの操作画面のいずれかが表 示される。 このような操作画面に係る映像信号は、 画面内容が変更する毎に、 映 像機器 （第 1 9図の画像処理部 1 1 3 B対応） から無線送信され、 送受信部 2 1 2で受信されることになる。
このように、 第 6 0図に示すリモートコマンダ 2 0 1によれば、 家具としての テーブル 2 0 2に配置されたスクリーン 2 0 6に映像を表示し、 このスクリーン 2 0 6上におけるユーザ操作による指示をセンシング部としてのタツチパネル 2 0.7で検出するものであり、 従来のリモートコマンダのように操作しようとした とき見つからないということがなく、 ユーザの使い勝手を向上できる。
第 6 4図は、 第 6 0図との対比により、 リモートコマンダ 2 0 1 Aの一部を示 している。 この第 6 4図において、 第 6 0図と対応する部分には同一符号を付し て示している。 このリモートコマンダ 2 0 1 Aにおいて、 テーブル 2 0 2は、 床 2 Bの一定個所に固定して保持される。 このようにテーブル 2 0 2が固定保持さ れる床 2 Bの部分には、 プロジェクタ 2 1 0からの映像光を通すための投影用窓 2 1 3が設けられている。
この投影用窓.2 1 3は、 開口により形成してもよく、 また開口にガラス等の透 明板材を配置して形成してもよい。 また、 ：この投影用窓 2 1 3に対応して蓋 （図 示せず).を設け、 使用時のみこの蓋を開けるようにしてもよい。
プロジェクタ 2 1 0は、 床 2 Bと床下 3 Bとの間の空間に、 上述した投影用窓 2 1 3に対応して配置されている。 このプロジェクタ 2 1 0から出射される映像 光は、 床 2 Bに設けられた投影用窓 2 1 3を介して、 テーブル 2 0 2のテーブル 面 2 0 3に配置されたスクリーン 2 0 6に照射され、 このスクリー 2 0 6に映 像が表示される。
このリモートコマンダ 2 0 1 Aは、 上述したようなプロジェクタ 2 1 0の配置 位置に関する構成を除いて、 第 6 0図に示すリモートコマンダ 2 0 1と同様に構 成されている。 このリモートコマンダ 2 0 1 Aは、 リモートコマンダ 2 0 1と同 様の効果を得ることができる他、 プロジェクタ 2 1 0は床 2 Bと床下 3 Bとの間 の空間に配置され、 室内には配置されていないので、 上述した第 6 0図に示すリ モートコマンダ 2 0 1におけるような、 プロジェクタ 2 1 0を覆い隠すためのテ 一ブル台 2 0 8を省略でき、 さら ίこプロジェクタ 2 1 0を床 2 Βと床下 3 Βとの 間の空間に配置しているので、 プロジェクタ 2 1 0からスクリーン 2 0 6までの •光路を稼ぐことができ、 テーブル 2 0 2の下側構成の厚みを薄くして大画面によ る映像表示が可能となる。
第 6 5図は、 第 6 0図との対比により、 リモートコマンダ 2 0 1 Βの一部を示 している。 この第 6 5図において、 第 6 0図と対応する部分には同一符号を付し て示している。 このリモートコマンダ 2 0 1 Βにおいては、 プロジェクタ 2 1 0 は床 2 Βの上に配置されていると共に、 このプロジェクタ 2 1 0の光路上には光 路短縮用のレンズ 2 2 2が設けられている。 この場合、 プロジェクタ 2 1 0から 出射された映像光は、 レンズ 2 2 2を介してスクリーン 2 0 6に照射される。 このリモートコマンダ 2 0 1 Βは、 上述したようなレンズ 2 2 2に係る構成を 除いて、 第 6 0図に示すリモートコマンダ 2 0 1と同様に構成されている。 この リモートコマンダ 2 0 1 Βは、 リモートコマンダ 2 0 1と同様の効果を得ること ができる他、 レンズ 2 2 2によりプロジェクタ 2 1 0からスクリーン 2 0 6まで の光路が短縮されるので、 テーブル 2 0 2の下側構成の厚みを薄くして大画面に よる映像表示が可能となる。 ' .
第 6 6図は、 第 6 4図との対比により、 'リモートコマンダ 2 0 1 Cの一部を示 している。 この第 6 6図において、.第 6 4図と対応する部分には同一符号を付し て示している。 このリモートコマンダ 2 0 1 Cにおいては、 プロジェクタ 2 1 0 は、 床 2 Βと床下 3 B'との間の空間に配置されていると共に、 プロジェクタ 2 1 0から出射される映像光の光路を折り曲げるためのミラー 2 3 4が設けられてい る。
この場合、 プロジェクタ 2 1 0は、 映像光が床面に沿った方向に出射されるよ うに配置されている。 このようにプロジェクタ 2 1 0から出射された映像光は、 ミラー 2 3 4によって直交する方向に反射され、 床 2 Βに設けられた投影用窓 2 1 3を介してスクリーン 2 0 6に照射される。
このリモートコマンダ 2 0 1 Cは、 上述したようなミラー 2 3 4に係る構成を 除いて、 第 6 4図に示すリモートコマンダ 2 0 1 Αと同様に構成されている。 こ のリモートコマンダ 2 0 1 Cは、 リモートコマンダ 2 0 1 Aと同様の効果を得る ことができる他、 ミラー 2 3 4で光路を折り曲げるものであり、 テーブル 2 0 2 の下側構成の厚みを薄くしても、 スクリーン 2 0 6に照射する映像光の光路を十 分に確保でき、 大画面による映像表示が可能となる。 '
第 6 7図は、 第 6 6図との対比により、 リモートコマンダ 2 0 1 Dの一部を示 している。 この第 6 7図において、 第 6 6図と対応する部分には同一符号を付し て示している。 このリモートコマンダ 2 0 1 Dにおいては、 プロジェクタ 2 1 0 の光路上には光路短縮用のレンズ 2 4 5が設けられている。' この場合、 プロジェ クタ 2 1 0から出射された映像光は、 レンズ 2 4 5およびミラー 2 3 4を介して スクリーン 2 0 6に照射される。
このリモートコマンダ 2 0 1 Dは、 上述したようなレンズ 2 4 5に係る構成を 除いて、 第 6 6図に示すリモートコマンダ 2 0 1 Cと同様に構成されている。 こ のリモートコマンダ 2 0 1 Dは、 リモートコマンダ 2 0 1 Cと同様の効果を得る ことができる他、 レンズ 2 4 5によりプロジェクタ 2 1 0からズクリーン 2 0 6 までの光路が短縮されるので、 テーブル 2 0 2の下側構成の厚みをさらに薄くし て大画面による映像表示が可能となる。
第 6 8図おょぴ第 6 9図は、 '第 6 0図および第 6 1図との対比により、 リモー トコマンダ 2 0 1 Eが配置された視聴覚室'（部屋） 4 0 1の様子を示している。 この第 6 8図および第 6 9図において、 第 6 0図、 第 6 1図と対応する部分には 同一符号を付して示している。 ここで、 視聴覚室 4 0 1は、 内壁 2、 天井 2 Aお よび床 2 Bで囲まれている。 リモートコマンダ 2 0 1 Eを構成するテーブル 2 0 2は床 2 Bの上に置かれている。 '
テーブル 2 0 2の透明板材で構成されるテーブル面 2 0 3のほぼ全面に、 液晶 フィルム 2 0 6 Aおよび透明タツチパネル 2 0 7がこの順に積層配置される。 つ まり、 このリモートコマンダ 2 0 1 Eでは、 第 6 0図および第 6 1図に示すリモ 一トコマンダ 2 0 1の背面投射型プロジェクタのスクリーン 2 0 6の代わりに液 晶フィルム 2 0 6 Aが配置された状態とされる。
この液晶フィルム 2 0 6 Aは、 2枚の透明電極を有する透明フィルムの間に液 晶を配置して形成されたシート材である。 この液晶フィルム 2 0 6 Aは、 透明電 極に印加される電圧値によって厚み方向の透過率が大きく変化する。 ここでは、 例えばテーブル 2 0 2の側面に設 ί'ナられたスィツチの操作により、 この液晶フィ ルム 2. 0 6 Αへの印加電圧を切り換え、 当該液晶フィルム 2 0 6 Aを透明の状態 と、 プロジェクタ 2 1 0のスクリーンとして使用可能な程度の半透明な状態とに 、 選択的に切り換え可能とされている。
この場合、 第 6 8図に示すように、 液晶フィルム 2 0 6 Aを半透明状態として 、 プロジェクタ 2 1 0からの映像光をこの液晶フィルム 2 0 6 Aに照射すること で、 テーブル 2 0 2のテーブル面 2 0 3 (液晶フィルム 2 0 6 A) に映像を表示 できる。 また、 第 6 9図に示すように、 液晶フィルム 2 0 6 Aを透明状態として 、 プロジェクタ 2 1 0からの映像光をこの液晶フィルム 2 0 6 Aを通過させて天 井 2 Aに照射し、 この天井 2 Aに映像を表示できる。 なお、 プロジェクタ 2 1 0 は、 このような映像光の照射対象の切り換えに追従して、 フォーカス調整できる ように構成されている。
このリモートコマンダ 2 0 1 Eは、 上述したような液晶フィルム 2 0 '6 Aに係 る構成を除いて、 リモートコマンダ 2 0 1と同様に構成されている。 このリモー トコマンダ 2 0 1 Eは、 リモートコマンダ 2 0 1と同様の効果を得ることができ る他、 液晶フィルム 2 0 6 を¾明状態として天井 2 Aに映像を表示でき、 ユー ザの使い勝手をさらに向上できる。
第 7 0図は、 第 6 0図との対比により、 リモートコマンダ 2 0 1 Fの構成を示 している。 この第 7 0図において、 第 6 0図と対応する部分には同一符号を付し て示している。 このリモートコマンダ 2 0 1 Fにおいては、 リモートコマンダ 2 0 1におけるタツチパネル 2 0 7および信号処理部 2 1 1に変えて、 撮像装置 （ カメラ） 2 6 6および画像処理部 2 6 7が設けられている。 これら撮像装置 2 6 6および画像処理部 2 6 7は、 ユーザ操作による指示を検出するセンシング部を 構成している。
ここで、 撮像装置 2 6 6は、 プロジェクタ 2 1 0に隣接して配置され、 スクリ ーン 2 0 6上におけるユーザによる指等の操作を、 スクリーン 2 0 6に表示され た映像と共に撮像し、 撮像結果としてのビデオデータを画像処理部 2 6 7に出力 する。 画像処理部 2 6 7は、 このビデオデータを処理することにより、 スクリー ン 2 0 6上におけるユーザによる指等の操作による指示を検出し、 この指示を送 受信部 2 1 2に通知する。 送受信 15 2 1 2は、 このユーザ操作による指示を、 映 像機器に無線送信する。
このリモートコマンダ 2 0 1 Fは、 上述したようなセンシング部に係る構成を 除いて、 第 6 0図に示すリモートコマンダ 2 0 1と同様に構成されている。 この リモートコマンダ 2 0 1 Fにおいても、 リモートコマンダ 2 0 1と同様の効果を 得ることができる他、 テーブル面 2 0 3にユーザ操作のためのタツチパネル 2 0 7を配置する必要がなくなるという'効果がある。
第 7 1図は、 第 7 0図との対比により、 リモートコマンダ 2 0 1 Gの一部を示 している。 この第 7 1図において、 第 7 0図と対応する部分には同一符号を付し て示している。 このリモートコマンダ 2 0 1 Gにおいて、 テーブル 2 0 2は、 床 2 . Bの一定個所に固定して保持される。 このようにテーブル 2 0 2が固定保持さ れる床 2 Bの部分には、 第 6 4図に示すリモートコマンダ 2 0 1 Aと同様に、 プ ロジェクタ 2 1 0からの映像光を通すための投影用窓 2 1 3が設けられている。 . プロジヱクタ 2 1 0および撮像装置 2 6 6は、 床 2 Bと床下 3 Bとの間の空間 に、 上述した投影用窓 2 1 3に対応して配置されている。 このプロジ; πクタ 2 1 0から出射される.映像光は、 床' 2 Bに設けられた投影用窓.2 1 3を介して、 テー ブル 2 0 2のテーブル面 2 0 3に配置され'たスクリーン 2 0 6に照射され、 この スクリーン 2 0 6に映像が表示される。 また、 撮像装置 2 6 6は、 床 2 Βに設け られた投影用窓 2 1 3を介して、 スクリーン 2 0 6上におけるユーザによる指等 の操作を、 スクリーン 2 0 6に表示された映像と共に撮像する。
このリモートコマンダ 2 0 1 Gは、 上述したようなプロジェクタ 2 1 0および 撮像装置 2 6 6の配置位置に関する構成を除いて、 第 7 0図に示すリモートコマ ンダ 2 0 1 Fと同様に構成されている。 このリモートコマンダ 2 0 1 Gは、 リモ 一トコマンダ 2 0 1 Fと同様の効果を得ることができる他、 プロジェクタ 2 1 0 および撮像装置 2 6 6は床 2 Βと床下 3 Βとの間の空間に配置され、 室内には配 置されていないので、 室内の雰囲気を乱すことがない。
第 7 2図は、 第 7 0図との対比により、 リモートコマンダ 2 0 1 Ηの一部を示 している。 この第 7 1図において、 第 7 0図と対応する部分には同一符号を付し て示している。 このリモートコマンダ 2 0 1 Ηにおいて、 撮像装置 2 6 6からの ビデオデータを処理する画像処理部 2 6 7 Aは、 スクリーン 2 0 6上における移 動体の.ドラッグの操作による指示を、 単なるスクリーン 2 0 6へのタツチ操作に よる指示とは識別して検出し、 この指示を送受信部 2 1 2に通知する。
このリモートコマンダ 2 0 1 Hは、 画像処理部 2 6 7 Aに係る構成を除いて、 第 7 0図に示すリモートコマンダ 2 0 1 Fと同捧に構成されている。 このリモー トコマンダ 2り 1 Hにおいても、 リモートコマンダ 2 0 1 Fと同様の効果を得る ことができる他、 画像処理部 2 6 7 Aではスクリーン 2 0 6への単なるタツチ操 作による指示と移動体のドラッグによる指示とを識別して検出するものであり、 ユーザ操作による指示の種類を増すことができる。
なお、 上述実施の形態においては、 透明板材からなるテーブル面 2 0 3にスク リーン 2 0 6が配置されるものを示したが、 スクリーン 2 0 6自体がテーブル面 2 0 3を構成している場合であってもよい。 また、 上述実施の形態においては、 テーブルを用いたリモートコマンダについて説明したが、 それぞれの構成を適宜 組み合わせるようにしてもよい。
また、 上述の実施の形態においては、 背面投射型のプロジェクタ 2 0により 映像を投影する場合について述べた力 本発明はこれに限らず、 フロント投射型 のプロジェクタにより映像を投影するようにしてもよい。 なおこの場合、 床下等 へのプロジェクタの配置に代えて、 .天井等にプロジェクタを配置することになる また、 上述の実施例の形態においては、 家具がテーブルであるものを示したが 、 例えば本棚、 机、 タンス等、 その他の家具によっても同様のリモートコマンダ を得ることができる。 また、 上述実施の形態においては、 映像機器 リモートコ マンダについて述べたが、 これに限らず、 種々の機器のリモートコマンダに広く 適用することができる。
( 5 ) 鳥瞰画像表示部における表示
上述した第 1 9図に示す画像表示システム 1 0 1で、 リモートコマンダ 1 1 6 を構成する鳥瞰画像表示部 1 1 7には、 例えば鳥瞰画像と共に、 この鳥瞰画像上 で特定される撮影地点 （撮影個所） で撮影された撮影画像が同時に表示される （ 第 3 2 A図参照） 。 ここでは、 この表示のための画像処理の詳細を説明する。 第 7.3図は、 上述したように撮影画像が配置された鳥瞰画像を表示するための 画像処理装置 3 0 1の構成を示している。 この第 7 3図において、 第 1 9図と対 応する部分には同一符号を付し、 適宜その詳細説明を省略する。 この画像処理装 置 3 0 1は、 メディァデータベース 1 1 2と、 制御部 1 1 3と、 鳥瞰画像表示部 1 1 7と、 タツチパネル 1 1 8とを有している。' この画像表示装置 3 0 1は、 充 分な画像処理能力を有するコンピュータによって構成される。
メディアデータベース 1 1 2は、 上述したように、 記録再生部、 例えば大容量 のハードディスク装置により形成されている。 このメディアデータベース 1 1 2 は、 画像表示装置 3 0 1の動作に必要な各種プログラム、 複数種類の鳥瞰画像の 画像データ、 それぞれの鳥瞰画像上で特定される撮影地点で撮影された撮影画像 の画像データ等を記録保持し、 またこれら保持した画像データを再生して出力す る。
こで、 鳥瞰画像は撮影画像の撮影地点を上空より見た画像であって、 この鳥 瞰画像として実写による画像、 イラストによる画像、 コンピュータグラフィック スによる画像、 地図画像等を適角できる。 この実施の形態では鳥瞰画像として地 図画像が適用されている。 すなわち、 メデ'ィァデータベース 1 1 2は鳥瞰画像の 画像データとして、 地図画像の画像データ D 4を記録して保持する。
撮影画像は、 第 7 4図に地図 Mを用いて示すように、 地図画像に設定された撮 影地点 P 1〜P 3で撮影された各種の画像であり、 この実施の形態では撮影画像 としてパノラマ画像が適用されている。 すなわち、 メディアデータベース 1 1 2 は撮影画像の画像データとして、 パノラマ画像の画像データ D 3を記録して保持 する。. このパノラマ画像は、 魚眼レンズにより周囲を撮影して取得されたもので あり、 円形形状に形成されている。 各撮影地点のパノラマ画像には、 それぞれ、 地図画像上での撮影地点を特定する、 リンク情報としての撮影地点の情報が設定 されている。
なお、 このようなパノラマ画像側へのリンク情報の設定に代えて、 地図画像側 の撮影地点に、 対応するパノラマ画像を特定するリンク情報を設定するようにし てもよい。 また、 ·このパノラマ画像としては、 双曲面ミラーを使用した撮像結果 を適用してもよく、 撮像装置 （カメラ） を一定角度ずつパンさせて撮影した複数 画像による撮像結果を適用してもよく、 種々の方式によるパノラマ画像を広く適 用することができる。 また、 各パノラマ画像は、 特定の方向が一定の方位となる ように撮影され、 撮影地点の高度を示す高度情報が添付されて提供される。
なお、 メディアデータベース 1 1 2は、 これらパノラマ画像の画像データ D 3 、 地図画像の画像データ D 4、 さらにはこの画像処理装置 3 0 1の処理に必要な プログラムが、 事前にインストールされて提供されるが、 この事前のインスト一 ル.に代えて、 光ディスク、 磁気ディスク、 メモリカード等の種々の記録媒体に記 録して提供するようにしてもよく、 またインターネット等のネットワークを介し たダウンロードにより提供するようにしてもよい。
鳥瞰画像表示部 1 1 7は、 例えば液晶表示パネルにより形成され、 画像処理部 1 1 3 Bより出力されるビデオデータ D V 2による画像を表示し、 これにより地 図画像上にパノラマ画像を配置した画像を表示する。
タツチパネル 1 1 8はユーザ操作部を構成している。 このタツチパネル 1 1 8 により、 ユーザは、 視点の位置を変更するための操作、 シーン切り替えの操作な どを行うことができる。 このタツチ.パネル 1 1 8からの'操作情報は表示情報選択 部 1 1 3 Aに通知される。 なお、，ユーザ操作部 しては、 このタツチパネル 1 1 8の代わりに、 マウス、 加速度セ サ、 ジョイスティックなどの操作デバイスな どを用いることもできる。
制御部 1 1 3は、 メ.ディアデータベース 1 1 2に記録されたプログラムを実行 する演算手段であり、 このプログラムの実行により各種機能ブロックを構成する 。 すなわち、 この制御部 1 1 3は、 画像処理部 1 1 3 Bと、 表示画锋選択部 1 1 3 A を有している。 さらに、 この画像処理部 1 1 3 Bは、 全方位画像変換部 3 0 4 A、 地図画像/パノラマ画像配置部 3 0 4 Bおよび視点座標変換部 3 0 4 C を含んでいる。
全方位画像変換部 3 0 4 Aは、 第 7 5 A図， 第 7 5 B図に示すように、 撮像結 果 A 1〜A 3による円形形状のパノラマ画像を構成する各画素を、 水平方向に細 長い長方形形状の領域にマッピングし、 これによりこれら円形形状によるパノラ マ画像 A 1〜A 3を、 水平方向に広画角な長方形形状によるパノラマ画像 B 1〜 B 3に画像変換処理する。 なお、 双曲面ミラーを使用して撮影したパノラマ画像 については、 同様のマッピング処理による画像変換処理により、 このように水平 方向に広画角な長方形形状によるパノラマ画像 B 1〜B 3を生成することができ る。 また、 撮像装置を一定角度ずつパンさせて撮影した複数画像によるパノラマ 画像は、 これら複数画像を繋ぎ合わせることにより、 このようなパノラマ画像 B 1〜B 3を作成することができる。 ,
地図画像 Zパノラマ画像配置部 3 0 4 Bは、 地図画像データ D 4による地図画 像上にパノラマ画像を配置する。 .この場合、 パノラマ画像を視点に向くように配 置する。 視点座標変換部 3 0 4 Cは、 このようにパノラマ画像が配置された画像 を、 視点方向から見た画像に変換する視点座標変換処理を行い、 その処理結果に よるビデオデータ D V 2を鳥瞰画像表示部 1 1 7に出力する。
表示情報選択部 1 1 3 Aは、 タツチパネル 1 1 8から操作情報の通知に従って 、 画像処理部 1 1 3 Bで処理すべき、 つまり鳥瞰'画像表示部 1 1 7に表示すべき 、 地図画像およびパノラマ画像を選択する。 この場合、 選択された地図画像およ びパノラマ画像の画像データがメディアデータベース 1 1 2から読み されて画 像処理部 1 1 3 Βに供給される。 また、 表示情報.選択部 1 .1 3 Αは、 タツチパネ ル 1' 1 8から操作情報の通知に従って、 視点の情報を画像処理部 1 1 3 Bの視点 座標変換部 3 0. 4 Cに与える。
次に、 パノラマ画像が配置された地図画像の表示に係る制御部 1 1 3の処理手 順を、'第 7 6図〜第 7 .9図のフローチャートを参照して説明する。
制御部 1 1 3は、 ステップ S T 1で、 電源の投入により、 あるいはユーザがタ ツチパネル 1 1 8をタツチすることで、 表示処理を開始し、 ステップ S T 2に進 む。 ここで、 制御部 1 1 3は、 メディアデータベース 1 1 2から、 初期状態で表 示すベき地図画像の画像データ D 4およびその地図画像上で特定される撮影地点 で撮影されたパノラマ画像の画像データ D 3、 さらには撮影地点を示す撮影地点 の情報を読み込む。 この初期状態で表示すべき地図画像は、 予め設定されている 固定したもの、 あるいは前回の最後に表示されていたもの等とされる。
続いて、 制御部 1 1 3は、 ステップ S T 3で、 全方位画像変換部 3 0 4 Aの機 能プロックに係る処理により、 ステップ S T 2で取得した円形形状によるパノラ マ画像 A 1〜A 3を、 横長の長方形形状のパノラマ画像 B 1〜B 3に画像変換処 理する. （第 7 5図参照） 。 以上のステップ S T 2およびステップ S T 3の処理が 初期化の処理となる。 '
続いて、 制御部 1 1 3は、 テツプ S T 4に進み、 風景画像の表示処理をする。 第 7 7図は、 風景画像表示処理の手順を示している。 すなわち、 制御部 1 1 3は 、 ステップ S T 1 1 1で、 風景画像表示処理を開始し、 ステップ S T 1 1 2に進 む。 ここで、 制御部 1 1 3は、 第 8 0図に示すように、 地図画像/パノラマ画像 配置部 3ひ 4 Bの機能プロックに係る処理により、 撮影地点 情報に基づいて、 地図画像 M上の撮影地点 P：!〜 P 3に一定の大きさの平面である風景画像表示ボ ード C 1〜C 3を配置すると共に、 このボード C 1〜C 3を視点 P Sの方向に正 対するように、 傾ける。
なおここで、 正対とは、 各ボード C 1〜C 3の中央と視点 P Sとを結ぶ直線が 各ボードの面と直交する関係である。 またここで、 地図画像 Mに沿った方向につ いてだけ視点 P Sの方向に正対するようにして、 各ボード C 1〜C 3の視点 P S を見上げる方向の傾き （仰角） にあっては、 必要に応じて変更するよ にしても よく、 各ボード C 1〜C 3が地図画像 M上に直立するよ にしてもよい。
続いて、 制御部 1 1 3は、 ステップ S T 1 . 1 3で、 地図画像/パノラマ画像配 置部 3 0 4 Bの機能ブロックに係る処理により、 第 8 1図に示すように、 パノラ 'マ画像 B 1〜B 3を、 各ボード C 1〜C 3の大きさに対応した一定幅の領域. A R により切り出す。 このようにパノラマ画像 B 1〜B 3から一定幅の領域 A Rを切 り出し、 後述するように各ボード C 1〜C 3に表示されるパノラマ画像 D 1〜D 3の横方向の長さを制限することで、 移動する.視点 P Sに対して各ギード C 1〜 C 3、. 従ってパノラマ画像 D 1〜D 3を正対させるようにしても、 パノラマ画像 D 1〜D 3同士が干渉しないようにし （ぶっかり合わないようにし） 、 さらには 見易さを向上するためである。
なおここで、 パノラマ画像 B 1〜B 3から切り出す切り出し領域 A Rを、 視点 P Sに応じたものとする。 すなわち、 制御部 1 1 3は、 この切り出し領域 A Rを 、 視点方向から見て取られる領域に設定する。 例えば、 視点が地図画像 Mの北方 向に存在する場合には、 パノラマ画像 B 1〜B 3の南側の部分を切り出す。 また これとは逆に、 視点が地図画像 Mめ南方向に存在する場合には、 パノラマ画像 B 1〜B .3の北側の部分を切り出す。 制御部 1 1 3は、 視点の移動により、 矢印 C で示すように、 切り出し領域 A Rを順次移動させる。
続いて、 制御部 1 1 3は、 ステップ S T 1 1 4で、 上述したようにパノラマ画 像 B 1〜B 3から切り出した切り出し領域 A Rの画像 D 1〜D 3を、 それぞれ、 ボード C 1〜C 3に貼り付け、 これにより地図画像 Mの撮影地点 P 1 ~ P 3に、 この撮影地点 P 1〜 P 3で撮影されたパノラマ画像 D 1〜 D '3が配置される。 続いて、 制御部 Ί 1 3は、 ステップ S T 1 1 5で、 視点座標変換部 3 0 4 Cの 機能プロックに係る処理により、 ノ ノラマ画像 D 1〜D 3が配置された地図画像 Mを、 視点 P Sから見た画像どなるように視点座標変換処理を実行し、 この処理 で得られる表示画像のビデオデータ D V 2を鳥瞰画像表示部 1 1 7に供給する。 なお、 この実施の形態では平行変換処理により視点座標変換処理を実行するが、 必要に応じて種々の手法を適用することができる。 これにより、 鳥瞰画像表示部 1 1 7には、 第 8 2 A図， 第 8 2 B図に示すように、 地図画像 Mにパノラマ画像 D 1〜D 3を配置した画像が、 視点 P Sから見た状態で表示される。 なおここで 、.第 8 2 A図， 第 8 2 B図の表示例は、 それぞれ、 逆側に視点 P Sを配置した闋 係にある。 ， '
なおこの場合、 制御部 1 1 3は、.地図画像 M上に、 撮影地点を先端により指し 示すように、 頂点を下向きとした三角形形状によるマーク M l〜M 3を配置し、 このマーク M l〜M 3の上方にパノラマ画像 D 1〜D 3を表示し、 これによりパ ノラマ画像 D 1〜D 3に対応した撮影地点を詳細に把握できるようにする。' また、 各パノラマ画像データに設定された高度情報に基づいて、 撮影地点の高 度に比例するようにこのマーク M 1〜M 3の長さ Lを設定し、 これにより撮影地 点の高度を大まかに把握できるようにする。 なお、 このようなマークにあっては 、 種々の形状を広く適用することができ、 例えば地面に刺したポールの上に看板 を表示するかのような形態によりマークとパノラマ画像とを表示し、 このポール の長さにより高度を示すようにしてもよレ、。 さらに、 制御部 1 1 3は、 ユーザが 視点の移動を制御するためのボタン B 1、 B 2を手前側に表示する。
なお、 これらにより制御部 1 1 3は、 実際上、 このように地図画像 M上にパノ ラマ画像 D 1〜D 3を配置して視点 P Sの方向より見た 2次元画像を形成した後 、 この. 2次元画像上に、 地図画像 M、 パノラマ画像 A 1〜A 3の対応する画素値 をマッピングしてこれら一連の処理を実行する。
制御部 1 1 3は、 ステップ S T 1 1 5の処理の後、 ステップ S T 1 1 6で、 風 景画像表示処理を終了し、 第.7 6図のステップ S T 5に進み、 視点変換の処理を する。 第 7 8図は、 視点変換処理の手順を示している。 すなわち、 制御部 1 1 3 は、 ステップ S T 2 1 1で、 視点変換処理を開始し、 ステップ S T 2 1 2に進む 。 .ここで、 制御部 1 1 3は、 タツチパネル 1 1 8からの操作情報に基づき、 表示 画像選択部 1 1 3 Aの機能ブロックに係る処理により、 ズームィン操作がなされ ているか否かを判断し、 ズームイン操作がなされているときは、 ステップ S T 2 1 3に進み、 ズームインの視点移動処理を行い、 その後にステップ S T 2 1 8で 、 視点変換処理を終了する。
ステップ S T 2 1 2でズームイン操作がなされていないときは、 制御部 1 1 3 は、.ステップ S T 2 1 4に進み、 ズームァゥト操作がなされているか否かを判断 する。 ズームアウト操作がなされているときは、 ステップ S T 2 1 5に進み、 ズ 一ムァゥトの視点移動処理を行い、 その後にステップ S T.2 1 8で、.視点変換処 理を終了する。 , '
ここで、 上述したズームインおよびズームアウトの視点移動処理は、 第 8 3図 に示すように、 地図画像 Mから視点 Sまでの距離 Dを一定値だけ変化させる処 理である。 この場合、.,ズームインの視点移動処理では、 距離 Dを一定値だけ小さ くし、 視点 P Sを地図画像 Mに一定値だけ近づける。 一方、 ズームアウトの視点 移動処理では、 距離 Dを一定値だけ大きくし、 視点 P Sを地図画像 Mから一定値 だけ遠ざける。 表示画像選択部 1 1 3 Aは、 このように変更された視点の情報を 上述した視点座標変換部 3 0 4 Cに与える。
ズームイン操作あるいはズームアウト操作が継続してなされている場合、 ステ ップ S T 2 1 3あるいはステップ S T 2 1 5の視点移動処理が繰り返し行われ、 視点 P Sが連続的に変化していく。 このようにズームインあるいはズームァゥト の視点移動処理によって変更された視点の情報が視点座標変換部 3 0 4 Cに与え られ、 この視点座標変換部 3 0 4 Cで変更された視点から見た画像となるように 視点座標変換処理が実行されるこ'とで、 第 8 4図に示すように、 鳥瞰画像表示部 1 1 7.に表示される画像がズームインあるいはズームァゥトされる。
ステップ S T 2 1 4で、 ズームアウト操作がなされていないときは、 ステップ S T 2 1 6で、 鳥瞰視点移動操作がなされているか否かを判定する。 鳥瞰視点移 動操作がなされているときは、 制御部 1 1 3は、 ステップ S T 2 1 7に進み、 表 示画像選択部 1 1 3 Aの機能プロックに係る処理により、 鳥瞰視点移動処理を行 レ、、 その後にステップ S T 2 1 8で、 視点変換処理を終了する。
.こごで、 上述した鳥瞰視点移動処理は、 例えば第 8 5 A図〜第 8 5 C図に示す ように、 視点 P Sの位置を移動する処理である。 第 8 5 A図は、 注目点を中心に 上空を旋回するように視点 P Sを所定の速度で移動させる例である。 第 8 5 B図 は、 注目点を中心とする半球の球面上を所定の速度および経路で移動させる例で ある。 これら第 8 5 A図， 第 8 5 B図の例は一旦設定されると、 その設定を解除 するまで鳥瞰視点移動操作がなされているものと判断する。 これに対して、 第 8 5 C図は、 ユーザが例えば画面上をドラッグすることで視点 P Sを水平移動させ る例である。 なお、 画面上にされる表示される視点の移動を制御するボタン B 1 , B 2 (第 8 2図参照） の操作も、 この鳥瞰視点移動操作に含まれる。
鳥瞰視点移動操作が継続してなされてレ、'る場合、 ステップ S T 2 1 7の視点移 動処理が繰り返し行われこととなり、 視点 P Sが連続的に変化していく。 このよ うに鳥瞰視点移動処理によつて変更された視点の情報が視点座標変換部 3ひ 4 C に与えられ、 この視点座標変換部 3 0 4 Cで変更された視点から見た画像となる ように視点座標変換処理が実行される。 これにより、 例えば第 8 0図において、 矢印 Dおよび E 1〜E 3により示すように、 視点 P Sの移動に追従きせて、 地図 画像] iおよびポード C 1〜C 3の向きを変更し、 またこのボード C 1〜C 3に表 示するパノラマ画像 D 1〜D 3の内容も変更する。
制御部 1 1 3は、 ステップ S T 2 1 8で、 視点変換処理を終了した後、 第 7 6 図のステップ S T 6に進む。 ここで、 制御部 1 1 3は、 タツチパネル 1 1 8から の操作情報に基づき、 表示画像選択部 1 1 3 Aの機能ブロックに係る処理により 、 シーン切り替えの操作があつたか否かを判断する。 シーン切り替え操作がある ときは、 ステップ S T 7に進む。 ユーザによるシーン切り替え操作は、 タツチパネル 1 1 8により、 鳥瞰画像表 示部 1. 1 7に表示すべき新たな地図画像 （鳥瞰画像） を選択することで行われる • 。 なおこの場合、 ユーザの要求によって、 制御部 1 1 3は鳥瞰画像表示部 1 1 7 にメニュー画面を単独であるいは地図画像と共に表示し、 ユーザはそのメニュー 画面に基づいて所望する地図画像を選択するようにしてもよい。
第 7 9図は、 シーン切り替え処理の手順を示している。 すなわち、 制御部 1 1 3は、 ステップ S T 3 1 1で、 シーン切り替え処理を開始し、 ステップ S T 3 1 2.に進む。 ここで、 制御部 1 1 3は、 メディアデータベース 1 1 2から、 選択さ れた地図画像の画像データ D 4およびその地図画像上で特定される撮影地点で撮 影されたパノラマ画像の画像データ D 3、 さらには撮影地点を示す撮影地点の情 報を isみ込む。
続いて、 制御部 1 1 3は、 ステップ S T 3 1 3で、 全方位画像変換部 3 0 4 A の機能ブロックに係る処理により、 ステップ S T 3 1 2で取得した円形形状によ るパノラマ画像 A 1〜A 3を、 横長の長方形形状のパノラマ画像 B 1〜B 3に画 像変換処 ¾する （第 7 5図参照） 。 以上のステップ S T 3 1 2およびステップ S T 3 1 3の処理は、 上述したステップ S T 2およびステップ S T 3の初期化処理 に相当する処理である。 ， · . .
制御部 1 1 3は、 ステップ S T 3 1 3の処理の後、 ステップ S T 3 1 4で、 シ ーン切り替え理を終了し、 第 7 6図のステップ § T 8に進む。 シーン切り替え処 理で、' 上述したようにメディアデータベース 1. 1 2から新たな地図画像データ D 4等を読み込むことで、 上述した風景画像表示処理では、 この新たな地図画像デ ータ D 4等を用いて処理が行われため、 鳥瞰画像表示部 1 1 7には新たな地図画 像 Μ等が表示され、 シーン切り替えが行われる。
第 7 6図のフローチャートで、 ステップ S T 6で、 シーン切り替え操作がなさ れていないときは、 直ちにステップ S T 8に進む。 ここで、 制御部 1 1 3は、 鳥 瞰画像表示部 1 1 7への表示を終了するか否かを判断する。 例えば、 制御部 1 1 3は、 電源オフ、 あるいはタツチパネル 1 1 8の所定部分をユーザが 2回連続し てタツチする操作を行った場合には終了と判断する。 また例えば、 制御部 1 1 3 は、 ユーザによるタツチパネル 1 1 8による操作の最終時刻から所定時間が経過 した場合には終了と判断する。 なお、 終了の判断条件はこれに限定されるもので はない。
終了と判断しないとき、 制御部 1 1 3は、 ステップ S T 4に戻って、 上述した と同様の処理を繰り返す。 一方、 終了と判断するとき、 制御部 1 1 3は、 ステツ プ S T 9に進み、 表示処理を終了する。
上述したように、 第 7 3図の画像表示装置 3 0 1では、 電源の投入により、 あ るいはユーザがタツチパネル 1 1 8のいずれかをタツチすることで、 表示処理が 開始される。 そして、 最初は、 メディアデータベース 1 1 2から制御部 1 1 3に 、 初期状態で表示すべき地図画像の画像データ D 4およびその地図画像上で特定 される撮影地点で撮影されたパノラマ画像の画像データ D 3、 さらには撮影地点 を示す撮影地点の情報が読み込まれる。 制御部 1 1 3では、 それらの画像データ 等を用いて表示画像が生成される。 この場合、 地図画像の各撮影地点にそこで撮 影されて得られたパノラマ画像が配置され、 しかもそれが視点から見た画像に変 換される。 これにより、 鳥瞰画像表示部 1 1 7に、 地図画像にパノラマ画像を配 置した画像が視点から見た状態で表示される （第 8 2 A図， 第 8 2 B図参照） 。 このように鳥瞰画像表示部 Ί 1 7にパノラマ画像が配置された地図画像が表示 された後、 タツチパネル 1 1.8でユーザがネ見点変換のための操作 （ズームイン操 作、 ズームアウト操作、 鳥瞰視点移動操作など） を行うと、 (l御部 1 1 3で視点 移動処理が行われ、 鳥瞰画像表示部 1 1 7に表示される地図画像にパノラマ画像 を配置した画像は、 視点位置の移動に伴って変化したものとなる。
また、 このように鳥瞰画像表示部 1 1 7にパノラマ画像が配置された地図画像 が表示されたのち、 タツチパネル 1 1 8でユーザがシーン切り替えの操作を行う と、 メディアデータベース 1 1 2から制御部 1 1 3に、 新たに選択された地図画 像の画像データ D 4およびその地図画像上で特定される撮影地点で撮影されたパ ノラマ画像の画像データ D 3、 さらには撮影地点の情報が読み込まれ、 鳥瞰画像 表示部 1 1 7に新たな地図画像データ D 4等による画像が表示され、 シーン切り 替えが行われる。
このように、 第 7 3図に示す画像表示装置 3 0 1によれば、 鳥瞰画像表示部 1 1 7に表示される画像は、 地図画像 M (鳥瞰画像） の撮影地点にそこで撮影され たパノラマ画像 （撮影画像） が配置されたものとなる。 そのため、 複数のパノラ マ画像、 上述の実施の形態ではパノラマ画像 D 1〜D 3の地理的な関係を容易に 把握できる。
また、 第 7 3図に示す画像表示装置 3 0 1によれば、 地図画像 Mの撮影地点に 配置されるパノラマ画像ほ視点 P Sに向くように配置され、 さらにこのパノラマ 画像が配置された地図画像 Mが視点より見た画像に変換されて表示画像が得られ るものである。 そのため、 視点 P Sから見た状態で地図画像 Mが表示され、 しか もこの視点 P Sに正対した状態でパノラマ画像が表示されるので、 見る方向との 整合性の図られた画像を表示することができ、 複数のパノラマ画像の地理的な関 係の把握がより容易となる。
また、 第 7 3図に示す画像表示装置 3 0 1によれば、 地図画像 Mの撮影地点に 、 広角画像であるパノラマ画像から視点に対応した一部領域が切り出されて配置 されるものである （第 8 1図参照） p そのため、 地図画像 M上に表示されるパノ ラマ画像は、 視点に対応したもの、 つまり視点方向から見ることができる画像と なり、 ユーザはその画像を確認できるので、 地図画像、 パノラマ画像により紹介 される場所の理解を十分に図ることができる。 . '
また、'第 7 3図に示す画像表示装置 3 0 '1 .によれば、 ユーザがユーザ操作部で あるタツチパネル 1 1 8を用いて視点 P Sの位置を変更できる。 そのため、 ユー ザは視点位置を変更して表示される地図画像 方向を変えることができ、 これ に伴って地図画像 M上に配置されるパノラマ画像の内容も変わるので、 複数のパ ノラマ画像の地理的な関係の把握がより容易となる。
また、 第 7 3図に示す画像表示装置によれば、 地図画像 M上へのノ ノラマ画像 の配置が、 パノラマ画像の一部領域が切り出されて配置されることにより実行さ れる （第 8 1図参照） 。 そのため、 横長のパノラマ画像を多数表示する場合でも 、 パノラマ画像間の重なり合いが防止されて見易さが確保され、 またこれによつ てもパノラマ画像間の地理的な関係を容易に把握することが可能となる。
なお、 地図画像 M上に配置するパノラマ画像が少ない場合には、 切り出す処理 を省略して直接パノラマ画像を配置するようにしてもよく、 この場合には、 地図 画像 M上に配置したパノラマ画像において、 視点方向から見て取ることができる 部分が、 パノラマ画像の水平方向、' 中央となるように、 パノラマ画像中における 各部の表示をスクロールさせることにより、 視点により見る方向と、 実際に現場 にて見て取ることができる風景との整合を図ることができる。 ' '
なお、 上述実施の形態においては、 第 7 3図に示す画像表示装置 3 0 1を、 第 1 9図に示す画像表示システム 1ひ 1のリモートコマンダ 1 1 6における鳥瞰画 像表示部 1 1 7への鳥瞰画像の表示に適用したものである。 第 8 6図は、 リモー トコマンダ 1 1 6を家具であるテーブルに形成し、 テーブル面に鳥瞰画像表示部 1 . 1 6が配置されている例を示している。 . .
また、 第 7 3図に示す画像表示装置 3 0 1は、 第 8 7図に示すように、 カーナ ピゲーシヨン装置にも適用できる。
この場合、 例えば、 G P S (Global Positioning System ) 等により検出され る現在位置、 ユーザにより指示された目的地に対応する地図画像上に、 対応する パノラマ画像を配置して表示する。 またこのとき、 デフォルトの方向に視点を設 定レて、 さらには G P S等により検出される自動車の向きに応じて視点を設定し て、 地図画像およびパノラマ画像を表示する。
また、 表示画面上に配置した'タツチパネルの操作により、 地図画像上で目的地 の選択を受け付け、 さらにはパノラマ画像'の選択により目的地の選択を受け付け る。 また同様のタツチパネルの操作により、 視点の位置を種々の方向に移動させ る。 なおこの視点の移動にあっては、 表示した地図の中央個所を中心にした回転 等による移動と、 表示した地図に対する平行移動とであり、 回転の場合には、 所 望する場所を種々の方向から眺めて確認することができ、 平行移動の場合には、 例えば移動経路の沿った経路を確認することができる。
また、 第 7 3図に示す画像表示装置 3 0 1は、 第 8 8図に示すように、 駅、 コ ンビニエンスストァ等に配置される端末装置等にも同様に適用できる。
また、 上述実施の形態においては、 地図画像上にパノラマ画像を配置して表示 する場合について述べたが、 これに限らず、 パノラマ画像に代えて、 一画面によ つては表示困難な大きさの広角の画像を表示する場合、 さらには通常の画角によ る画像を表示する場合等にも広く適用することができる。
また、 上述実施の形態においては、 H D D等で構成されるメディアデータべ一 ス 1 1 2より画像データを取得し 表示する場合について述べたが、 これに限ら ず、 例えばネットワーク上のサーバをアクセスして画像データを取得する場合に も広く適用することができる。
また、 上述実施の形態においては、 撮像画像に静止画を適用する場合について 述べたが、 これに限らず、 撮像画像に動画を適用するようにしてもよい。 また、 上述実施の形態においては、 画像表示システムのリモートコマンダ、 カーナビゲ ーシヨン装置に適用する場合について述べたが、 これに限らず、 例えば画像ビュ ァ一等、 種々の画像表示に広く適用することができる。 . 産業上の利用可能性
この発明は、 室内の雰囲気を乱さずにコンテンツの視聴を良好に行うことがで きるものであり、 映像コンテンツや音声コンテンツ等を視聴するための視聴覚シ ステムに適用できる。

Claims

請求の範囲
1 . コンテンツを視聴するための視聴覚システムであって、
少なくとも一の面の壁が所定の間隔をもつて配された内壁およぴ外壁からなる 部屋と、
上記部屋の上記内壁および上記外壁の間の空間に配置され、 上記内壁に少なく とも映像表示機能または音声出力機能を発揮させるための機材と
を備えることを特徴とする視聴覚システム。
2 . 上記内壁および上記外壁の間の空間は、 人が侵入可能な大きさを持つ
ことを特徴とする請求の範囲第 1項に記載の視聴覚システム。
3 . 上記部屋は、 全ての壁が所定の間隔をもって配された内壁および外壁からな る
ことを特徴とする請求の範囲第 1項に記載の視聴覚システム。
4 . 上記部屋は、 天井裏と該天井裏に対して所定の間隔をもって配された天井と からなる二重天井構造を有する
ことを特徴とする請求の範囲第 1項に記載の視聴覚システム。
5 . 上記部屋は、 床下と該床下に対して所定の間隔をもって配された床とからな る二重床構造を有する
ことを特徴とする請求の範囲第 1項に記載の視聴覚システム。
6 . 上記部屋は、
全ての壁が所定の間隔をもって配された内壁およぴ外壁からなり、
天井裏と該天井裏に対して所定の間隔をもって配された二重天井構造を有し、 床下と該床下に対して所定の間隔をもって配された床とからなる二重床構造を 有し、 上記内壁、 上記天井および上記^で構成される構造体が、 上記床下に対して複 数の脚.をもって支持されている
ことを特徴とする請求の範囲第 1項に記載の視聴覚システム。
7 . 上記部屋は、
全ての壁が所定の間隔をもつて配された内壁および外壁からなり、
天井裏と該天井裏に対して所定の'間隔をもって配された二重天井構造を有し、 床下と該床下に対して所定の間隔をもって配された床とからなる二重床構造を 有し、
上記天井および上記床は上記外壁に固定され、 上記内壁は上記天井および上記床 に固定されている
ことを特徴とする請求の範囲第 1項に記載の視聴覚システム。
8 ..上記部屋の一部または全部の内壁は、 交換可能に保持された複数の板状部材 からなつている
ことを特徴とする請求の範囲第 1項に記載の視職覚システム。
9 . 上記部屋は、 外部から上記外壁および上記内壁を通じて内部に入るための部 屋用入り口を有し、.
該部屋用入り口の側面に上記内壁および上記外壁の間の空間に入るための空間 用入り口が設けられている
ことを特徴とする請求の範囲第 1項に記載の視聴覚システム。
1 0 . 上記内壁の一部または全部がリアプロジ工クシヨン用のスクリーンを構成 し、
上記内壁および上記外壁の間の空間に配置される機材として、 上記スクリーン に映像を投影するプロジヱクタを含む
ことを特徴とする請求の範囲第 1項に記載の視聴覚システム。
1 1 . 上記プロジェクタは短辺方 が壁厚方向となるように上記外壁に固定され 該プロジェクタから上記外壁に沿った方向に出射される映像光はミラーで反射 されて上記スクリーンに入射される
ことを特徴とする請求の範囲第 1 0項に記載の視聴覚システム。
1 2 . 上記内壁の一部または全部が、 振動子が取り付けられた振動板を構成し、 上記内壁おょぴ上記外壁の間の空間に配置される機材として、 音声信号に基づ いて上記振動子を駆動する駆動機器を含む
ことを特徴とする請求の範囲第 1項に記載の視聴覚システム。
PCT/JP2006/318670 2005-09-14 2006-09-14 視聴覚システム WO2007032553A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US12/066,663 US7980704B2 (en) 2005-09-14 2006-09-14 Audiovisual system including wall-integrated audiovisual capabilities

Applications Claiming Priority (10)

Application Number Priority Date Filing Date Title
JP2005-266259 2005-09-14
JP2005266259 2005-09-14
JP2005266262 2005-09-14
JP2005-266260 2005-09-14
JP2005-266262 2005-09-14
JP2005266260 2005-09-14
JP2005-267803 2005-09-15
JP2005267803 2005-09-15
JP2005-269556 2005-09-16
JP2005269556 2005-09-16

Publications (1)

Publication Number Publication Date
WO2007032553A1 true WO2007032553A1 (ja) 2007-03-22

Family

ID=37865123

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2006/318670 WO2007032553A1 (ja) 2005-09-14 2006-09-14 視聴覚システム

Country Status (2)

Country Link
US (1) US7980704B2 (ja)
WO (1) WO2007032553A1 (ja)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011087839A (ja) * 2009-10-26 2011-05-06 Seiko Epson Corp 画像投写システム、および画像投写システムの制御方法
CN102444298A (zh) * 2010-10-12 2012-05-09 崔海龙 屏幕舞蹈房系统
JP2012170088A (ja) * 2012-03-08 2012-09-06 Sony Corp 電子機器、表示制御方法およびプログラム
JP2013542454A (ja) * 2010-08-06 2013-11-21 ザ プロクター アンド ギャンブル カンパニー 視覚ディスプレイシステム
CN111316637A (zh) * 2019-12-19 2020-06-19 威创集团股份有限公司 一种拼接墙图像内容识别开窗显示方法和相关装置

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100838239B1 (ko) * 2007-04-17 2008-06-17 (주)에스엠인스트루먼트 음질 표시 장치, 음질 표시 방법, 음질 표시 프로그램을 기록한 컴퓨터로 읽을 수 있는 매체
US7990394B2 (en) 2007-05-25 2011-08-02 Google Inc. Viewing and navigating within panoramic images, and applications thereof
US20110094453A1 (en) * 2009-04-30 2011-04-28 Brown University, Brown Technology Partnerships Improved apparatus and method for assessing visual learning
US8342691B2 (en) * 2010-02-03 2013-01-01 International Business Machines Corporation Information technology system with micro projector display
KR20110139375A (ko) * 2010-06-23 2011-12-29 삼성전자주식회사 위치 정보가 포함된 이미지의 디스플레이 방법 및 장치
JP5678324B2 (ja) * 2011-02-10 2015-03-04 パナソニックＩｐマネジメント株式会社 表示装置、コンピュータプログラム、及び表示方法
WO2012173001A1 (ja) * 2011-06-13 2012-12-20 シチズンホールディングス株式会社 情報入力装置
KR101305249B1 (ko) 2012-07-12 2013-09-06 씨제이씨지브이 주식회사 다면 상영 시스템
JP2014126693A (ja) * 2012-12-26 2014-07-07 Funai Electric Co Ltd 映像投影装置、及び映像表示装置
JPWO2015159548A1 (ja) * 2014-04-18 2017-04-13 Ｎｅｃソリューションイノベータ株式会社 投影制御装置、投影制御方法及び投影制御プログラム
JP6149825B2 (ja) * 2014-08-22 2017-06-21 トヨタ自動車株式会社 車両用操作装置
US9948908B2 (en) * 2015-03-09 2018-04-17 Sony Corporation Display control device and display control method
JP5967504B1 (ja) * 2015-05-18 2016-08-10 パナソニックＩｐマネジメント株式会社 全方位カメラシステム
KR102605411B1 (ko) 2015-10-26 2023-11-22 량 콩 몰입식 올인원 pc 시스템
GB2533201B (en) * 2015-10-26 2016-12-14 Kong Liang Immersive display enclosure
US10217283B2 (en) 2015-12-17 2019-02-26 Google Llc Navigation through multidimensional images spaces
EP3378055A1 (en) * 2015-12-31 2018-09-26 Vstream Digital Media, Ltd Display arrangement utilizing internal display screen tower surrounded by external display screen sides
DE202016101370U1 (de) * 2016-03-11 2016-03-30 P.R. Agentur für transparente Kommunikation GmbH Anzeigeeinrichtung

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04204842A (ja) * 1990-11-30 1992-07-27 Toppan Printing Co Ltd 映像シミュレーション・システム
JPH0658669U (ja) * 1992-09-25 1994-08-12 株式会社グループ・エヌ 映像音響再生装置
JPH07219448A (ja) * 1994-02-09 1995-08-18 Hitachi Ltd マルチビジョン装置の画面変更装置及び方法
JP2001107586A (ja) * 1999-10-04 2001-04-17 Aoki Ryutsu Kk 露天雰囲気風呂
JP3105332U (ja) * 2004-05-19 2004-10-28 株式会社アサツーディ・ケイ 全球型映像施設

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH03105332A (ja) 1989-09-19 1991-05-02 Fuji Photo Film Co Ltd カメラの露出制御方法
JPH05168080A (ja) 1991-12-13 1993-07-02 Matsushita Electric Ind Co Ltd リスニングルームとスピーカシステム
JPH0658669A (ja) 1992-08-07 1994-03-04 Toho Gas Co Ltd 浸漬型加熱炉
US5580249A (en) * 1994-02-14 1996-12-03 Sarcos Group Apparatus for simulating mobility of a human
US5546469A (en) * 1994-08-15 1996-08-13 Donahoe; Danny T. Sound transducer
DE19807243C2 (de) * 1998-02-20 2002-07-11 Siemens Ag Medizinischer Arbeitsplatz
US6431711B1 (en) * 2000-12-06 2002-08-13 International Business Machines Corporation Multiple-surface display projector with interactive input capability
US7317955B2 (en) * 2003-12-12 2008-01-08 Conmed Corporation Virtual operating room integration

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04204842A (ja) * 1990-11-30 1992-07-27 Toppan Printing Co Ltd 映像シミュレーション・システム
JPH0658669U (ja) * 1992-09-25 1994-08-12 株式会社グループ・エヌ 映像音響再生装置
JPH07219448A (ja) * 1994-02-09 1995-08-18 Hitachi Ltd マルチビジョン装置の画面変更装置及び方法
JP2001107586A (ja) * 1999-10-04 2001-04-17 Aoki Ryutsu Kk 露天雰囲気風呂
JP3105332U (ja) * 2004-05-19 2004-10-28 株式会社アサツーディ・ケイ 全球型映像施設

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011087839A (ja) * 2009-10-26 2011-05-06 Seiko Epson Corp 画像投写システム、および画像投写システムの制御方法
JP2013542454A (ja) * 2010-08-06 2013-11-21 ザ プロクター アンド ギャンブル カンパニー 視覚ディスプレイシステム
CN102444298A (zh) * 2010-10-12 2012-05-09 崔海龙 屏幕舞蹈房系统
CN102444298B (zh) * 2010-10-12 2014-10-08 崔海龙 屏幕舞蹈房系统
JP2012170088A (ja) * 2012-03-08 2012-09-06 Sony Corp 電子機器、表示制御方法およびプログラム
CN111316637A (zh) * 2019-12-19 2020-06-19 威创集团股份有限公司 一种拼接墙图像内容识别开窗显示方法和相关装置

Also Published As

Publication number Publication date
US7980704B2 (en) 2011-07-19
US20090100767A1 (en) 2009-04-23

Similar Documents

Publication Publication Date Title
WO2007032553A1 (ja) 視聴覚システム
JP4853149B2 (ja) 画像処理装置、画像表示装置、画像処理方法、プログラムおよび記録媒体
JP5168834B2 (ja) 視聴覚システム
US10397556B2 (en) Perspective altering display system
US7488079B2 (en) System and method for projecting images onto a moving screen
JP4929887B2 (ja) 画像表示装置、画像表示方法、プログラムおよび記録媒体
CN101577801B (zh) 投射型影像显示装置
JP5272293B2 (ja) リモートコマンダおよび電子機器の操作入力方法
US20090091711A1 (en) Image Projection Kit and Method and System of Distributing Image Content For Use With The Same
US20020075295A1 (en) Telepresence using panoramic imaging and directional sound
US20140146024A1 (en) Display control device, display control method, and recording medium
JP2015119277A (ja) 表示機器、表示方法及び表示プログラム
JPH1042264A (ja) テレビ会議システム
US11657574B2 (en) Systems and methods for providing an audio-guided virtual reality tour
KR101462835B1 (ko) 영상장치를 갖는 모형 건축물
JP4997853B2 (ja) 視聴覚システム
JP2010056710A (ja) 指向性スピーカ反射方向制御機能付プロジェクタ
JPH09138368A (ja) 合成映像表示システム
CN109741464B (zh) 用于显示实景的方法和装置
JP2006081128A (ja) 撮影システム、カラオケシステム、撮影方法
US6341868B1 (en) Image forming apparatus and method for live performances
JP4195844B2 (ja) 移動可能な移動体撮像装置
CN113590251B (zh) 单屏多窗口的数字化互动展示系统及方法
JP2002269298A (ja) 展示物解説システム
JP2001298733A (ja) パノラマ再現装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application
NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 12066663

Country of ref document: US

122 Ep: pct application non-entry in european phase

Ref document number: 06798167

Country of ref document: EP

Kind code of ref document: A1