WO2013021881A1 - 情報システム、情報再現装置、情報生成方法、および記録媒体 - Google Patents

情報システム、情報再現装置、情報生成方法、および記録媒体 Download PDF

Info

Publication number
WO2013021881A1
WO2013021881A1 PCT/JP2012/069543 JP2012069543W WO2013021881A1 WO 2013021881 A1 WO2013021881 A1 WO 2013021881A1 JP 2012069543 W JP2012069543 W JP 2012069543W WO 2013021881 A1 WO2013021881 A1 WO 2013021881A1
Authority
WO
WIPO (PCT)
Prior art keywords
information
reproduction
acquisition
unit
output
Prior art date
Application number
PCT/JP2012/069543
Other languages
English (en)
French (fr)
Inventor
近藤　哲二郎
Original Assignee
アイキューブド研究所株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by アイキューブド研究所株式会社 filed Critical アイキューブド研究所株式会社
Priority to CN201280038670.1A priority Critical patent/CN103733249B/zh
Priority to EP12821614.0A priority patent/EP2743917B1/en
Priority to US14/237,765 priority patent/US9979766B2/en
Priority to KR1020147001086A priority patent/KR101873086B1/ko
Publication of WO2013021881A1 publication Critical patent/WO2013021881A1/ja

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00—Details of electrophonic musical instruments
    • G10H1/0033—Recording/reproducing or transmission of music for electrophonic musical instruments
    • G10H1/0041—Recording/reproducing or transmission of music for electrophonic musical instruments in coded form
    • G10H1/0058—Transmission between separate instruments or between individual components of a musical system
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2240/00—Data organisation or data communication aspects, specifically adapted for electrophonic musical tools or instruments
    • G10H2240/171—Transmission of musical instrument data, control or status information; Transmission, remote access or control of music data for electrophonic musical instruments
    • G10H2240/175—Transmission of musical instrument data, control or status information; Transmission, remote access or control of music data for electrophonic musical instruments for jam sessions or musical collaboration through a network, e.g. for composition, ensemble playing or repeating; Compensation of network or internet delays therefor
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2240/00—Data organisation or data communication aspects, specifically adapted for electrophonic musical tools or instruments
    • G10H2240/325—Synchronizing two or more audio tracks or files according to musical features or musical timings
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis

Definitions

  • the present invention relates to an information system that composes and outputs new information from information received from one or more remote locations.
  • the electronic musical instrument is an electronic musical instrument played at different points via a network, and transmitting means for transmitting input musical tone information based on human movements to the different points via the network, and an electronic musical instrument played at the different points.
  • Receiving means for receiving performance information from a musical instrument; delay means for delaying the input musical sound information by a predetermined delay time; input musical sound information delayed by the delay means; and performance information received by the receiving means.
  • An electronic musical instrument comprising a musical sound generating means for generating and mixing a musical sound signal, wherein the musical sound based on the musical sound signal from the performance information provides a performance timing of the electronic musical instrument.
  • the information system of the first aspect of the present invention is a space that is different from the acquisition space and one or more information acquisition devices that acquire information from one or more acquisition spaces that are information acquisition spaces, and is a space to be reproduced.
  • An information system comprising information reproduction apparatus that constitutes reproduction information corresponding to reproduction space, and one or more information output apparatuses that output reproduction information in each of one or more output spaces that output reproduction information
  • the information acquisition device includes an information acquisition unit that acquires information and an acquisition information transmission unit that transmits information to the information reproduction device, and the information reproduction device is information for configuring reproduction information.
  • a reproduction source information storage unit that can store reproduction source information, an acquisition information reception unit that receives one or more information from one or more information acquisition devices, one or more information received by the acquisition information reception unit, and a reproduction source With information
  • a reproduction information acquisition unit that acquires reproduction information
  • a reproduction information transmission unit that transmits reproduction information configured by the reproduction information acquisition unit to one or more information output devices.
  • the information output device reproduces information from the information reproduction device.
  • An information system including a first reproduction information receiving unit that receives information and a first reproduction information output unit that outputs reproduction information received by the first reproduction information receiving unit.
  • the information system of the second invention is an information system comprising two or more information acquisition devices that acquire information from each of two or more acquisition spaces with respect to the first invention.
  • An acquisition information receiving unit that receives two or more pieces of information from two or more information acquisition devices, an acquisition information output unit that outputs two or more pieces of information received by the acquisition information receiving unit, and an output of the acquisition information output unit 2
  • the information system includes a reproduction information acquisition unit that acquires reproduction information having the above information, and a reproduction information transmission unit that transmits the reproduction information acquired by the reproduction information acquisition unit to one or more information output devices.
  • the information acquisition device includes a second reproduction information reception unit that receives reproduction information from the information reproduction device, and a second reproduction information reception.
  • a reproduction information output unit that outputs the reproduction information received by the reproduction unit, and the reproduction information transmission unit of the information reproduction device converts the reproduction information constituted by the reproduction information acquisition unit into one or more information acquisition devices and 1 This is an information system to be sent to the above information output device.
  • the information system of the fourth aspect of the invention is an information system comprising two or more information acquisition devices with respect to any one of the first to third aspects, wherein the reproduction information acquisition unit receives the acquisition information.
  • Information synthesizing means for synthesizing two or more pieces of information received by the unit, obtaining synthetic information, reproduction information constituting means for constituting reproduction information using the synthetic information obtained by the information synthesizing means, and reproduction source information; Is an information system.
  • the information system according to the fifth aspect of the present invention provides two or more information acquisition devices, one or more information reproduction devices, one information aggregation device, and one or more information items as compared with any one of the first to fourth inventions.
  • the information system according to claim 1 or 2 comprising an output device, wherein the information aggregation device includes an acquisition information receiving unit that receives one or more pieces of information from one or more information acquisition devices, and one or more pieces of information.
  • one or more information Reproduction information sending unit of the reproducing apparatus is an information system that transmits reproduction information reproducing information acquisition unit of the information reproducing apparatus is constructed to information aggregating apparatus.
  • information received from two or more remote locations can be synthesized, and information obtained by further synthesizing information of two or more devices that output information with added value can be output.
  • the information aggregating apparatus further includes a reproduction source information storage unit capable of storing reproduction source information which is information for constituting the reproduction information.
  • the reproduction information acquisition unit of the information aggregating apparatus outputs the reproduction source information, the one or more pieces of information received by the acquisition information reception unit, and the one or more pieces of reproduction information received by the reproduction information collection unit. It is an information system that constitutes reproduction information.
  • information received from two or more remote locations can be synthesized, and information obtained by further synthesizing information of two or more devices that output information with added value can be output.
  • the information system of the seventh aspect of the present invention provides two or more information acquisition devices, two or more information reproduction devices, an information synthesis device, An information system comprising an information output device, wherein a reproduction information transmission unit of the information reproduction device transmits reproduction information configured by the reproduction information acquisition unit to the information synthesis device, and the information synthesis device includes two or more A reproduction information collection unit that receives reproduction information from the information reproduction apparatus, two or more reproduction information received by the reproduction information collection unit, and a reproduction information synthesis unit that constitutes reproduction information to be output, and one or more information outputs
  • the information system includes a third reproduction information sending unit that sends reproduction information configured by the reproduction information combining unit to the apparatus, or one or more information acquisition devices and one or more information output devices.
  • the information system of the present invention it is possible to output information obtained by adding value to information received from one or more remote locations.
  • Block diagram of the information system A flowchart for explaining the operation of the information acquisition apparatus Flow chart for explaining the operation of the information reproduction apparatus A flowchart for explaining a first example of the reproduction information acquisition process A flowchart for explaining a second example of the reproduction information acquisition process A flowchart for explaining a third example of the reproduction information acquisition process
  • Conceptual diagram of the information system in the second embodiment Block diagram of the information system Flow chart for explaining the operation of the information reproduction apparatus Flowchart explaining the reproduction information composition process Conceptual diagram of an information system according to Embodiment 3 Block diagram of the information system A flowchart for explaining the operation of the information synthesizing apparatus Overview of the computer system Block diagram of the computer system
  • the space may be a real place or region or a virtual space.
  • the acquisition space is a space for acquiring information.
  • the acquisition space is preferably a space where information is generated, such as a space where a musical instrument is played or a space where a play is performed.
  • the reproduction space is a space from which reproduction information that is output information is acquired, is a space different from the acquisition space, and may be a virtual space.
  • the reproduction information is information that a constituent (person) of an information system wants to reproduce, for example.
  • the output space is a space where information is output. In the case where the reproduction information is viewed, the output space may be referred to as a viewing space.
  • FIG. 1 is a conceptual diagram of the information system 1 in the present embodiment.
  • the information system 1 includes one or more information acquisition devices 11, an information reproduction device 12, and one or more information output devices 13.
  • FIG. 2 is a block diagram of the information system 1 in the present embodiment.
  • the information acquisition apparatus 11 includes an information acquisition unit 111, an acquisition information transmission unit 112, a second reproduction information reception unit 113, and a second reproduction information output unit 114. Note that the information acquisition apparatus 11 may not include the second reproduction information receiving unit 113 and the second reproduction information output unit 114.
  • the information reproduction device 12 includes a reproduction source information storage unit 121, an acquisition information reception unit 122, a reproduction information acquisition unit 123, a reproduction information transmission unit 124, and an acquisition information output unit 125. Note that the information reproduction device 12 may not include the reproduction source information storage unit 121.
  • the reproduction information acquisition unit 123 includes, for example, an information synthesis unit 1231 and a reproduction information configuration unit 1232. Note that the reproduction information acquisition unit 123 may have other configurations.
  • the information output device 13 includes a first reproduction information receiving unit 131 and a first reproduction information output unit 132.
  • the information acquisition part 111 which comprises the information acquisition apparatus 11 acquires information.
  • the information acquired by the information acquisition unit 111 is sound information, video information, trigger information, or information on a combination thereof.
  • the sound information is, for example, voice, music, performance information, sound effects, and the like.
  • the video information may be a still image or a video.
  • the trigger information is information indicating the performance content of the musical instrument, for example, information including a set of sound identifiers and timing identifiers.
  • the trigger information may further include a musical instrument identifier.
  • the information acquisition unit 111 can be realized by one or more combinations of a microphone, a camera, a video camera, a device for acquiring a musical performance signal, and the like.
  • the acquisition information transmission unit 112 transmits the information acquired by the information acquisition unit 111 to the information reproduction device 12.
  • the acquired information transmission unit 112 holds in advance transmission destination information (such as an IP address) of the information reproducing device 12 that is an information transmission destination.
  • the acquired information transmission unit 112 is normally realized by a wireless or wired communication unit, but may be realized by a broadcasting unit.
  • the second reproduction information receiving unit 113 receives reproduction information from the information reproduction device 12.
  • the reproduction information is information configured by the information reproduction device 12, and details thereof will be described later.
  • the second reproduction information receiving unit 113 is usually realized by a wireless or wired communication unit, but may be realized by a unit that receives a broadcast.
  • the second reproduction information output unit 114 outputs the reproduction information received by the second reproduction information receiving unit 113.
  • output refers to display on a display, projection using a projector, printing with a printer, sound output, transmission to an external device, storage in a recording medium, and output to other processing devices or other programs. It is a concept that includes delivery of processing results.
  • the second reproduction information output unit 114 may be considered as including or not including an output device such as a display or a speaker.
  • the second reproduction information output unit 114 can be implemented by output device driver software, or output device driver software and an output device.
  • the reproduction source information storage unit 121 constituting the information reproduction device 12 can store reproduction source information that is information for constituting reproduction information.
  • the reproduction source information is, for example, a look-up table, video information, sound information, a combination thereof, or the like.
  • the lookup table has one or more correspondence information.
  • the correspondence information is information for taking correspondence between all or part of the one or more first information and all or part of the one or more second information.
  • the first information and the second information are, for example, image and sound information.
  • the correspondence information included in the lookup table is one
  • the correspondence information is, for example, an arithmetic expression for converting information such as image and sound information, or one or more parameter groups given to the arithmetic expression for converting information.
  • the correspondence information may be, for example, an arithmetic expression for calculating the median of the pixel values of the spatiotemporal block.
  • the first information and the second information are images
  • the first information is also referred to as a first image
  • the second information is also referred to as a second image. *
  • the correspondence information is associated with a feature quantity vector that is a set of information feature quantities.
  • the second image means that the brain has texture, perspective, presence, presence, weight, warmth, coolness, speed, dynamics, smoothness of movement, freshness, luxury, etc. It is an image that feels one or more of the attributes more than the first image. Note that the attribute varies depending on the image.
  • the texture is a texture of a target included in an image such as a material feeling, a glossy feeling, a transparent feeling, a soft feeling, and a moist feeling.
  • the sense of perspective can be said to be a sense of resolution, a stereoscopic effect, a sense of depth, a feeling of air, and the like.
  • the second information is, for example, one or more pieces of information that can be acquired in an environment different from the one or more pieces of first information. That is, in such a case, for example, one or more pieces of first information and one or more pieces of second information have different environments for acquiring information.
  • the different environments are, for example, an urban area and a suburb (may be called the countryside).
  • the first information is music that played one song on a noisy urban street
  • the second information is almost no noise, for example, an environment where you can hear a bird singing
  • the music is the one that has been played in the environment where the wind of 1 / f fluctuation is blowing.
  • the second information is, for example, one or more images that can be taken in another environment different from the one or more first images.
  • the other environment is an environment different from the one environment, and is an environment in which an image that matches the purpose can be taken from the one environment.
  • the other environment is an environment such as the following (1) to (9). (1) an environment where the amount of light of the illumination (light source) is larger than that of one environment, (2) an environment of the position of the light source where the shade of the object on the image is well expressed compared to the one environment, (3) one The environment of the light source position that expresses the stereoscopic effect of the object on the image better than the environment, and (4) The camera position that expresses the stereoscopic effect of the object on the image better than the one environment.
  • the shooting environment such as the light amount, the position of the light source, the color of the light source, the position of the camera, and the camera setting is different between the one environment and the other environment.
  • the environment is usually a shooting environment, but may be anything as long as it relates to an environment for acquiring an image.
  • the reproduction source information storage unit 121 is preferably a non-volatile recording medium, but can also be realized by a volatile recording medium.
  • the process of storing the reproduction source information in the reproduction source information storage unit 121 is not limited.
  • the reproduction source information may be stored in the reproduction source information storage unit 121 via a recording medium, and the reproduction source information transmitted via a communication line or the like is stored in the reproduction source information storage unit 121.
  • the reproduction source information input via the input device may be stored in the reproduction source information storage unit 121.
  • the acquisition information receiving unit 122 receives one or more pieces of information from each of the one or more pieces of information acquisition devices 11.
  • the acquisition information receiving unit 122 is usually realized by a wireless or wired communication means, but may be realized by a means for receiving a broadcast.
  • the reproduction information acquisition unit 123 acquires the reproduction information using one or more pieces of information received by the acquisition information reception unit 122 and the reproduction source information. For example, the reproduction information acquisition unit 123 uses one or more pieces of correspondence information among one or more pieces of correspondence information, and uses one or more pieces of information corresponding to all or a part of one or more pieces of information received by the acquisition information reception unit 122. All or part of the second information is acquired, and reproduction information is acquired from all or part of the acquired one or more second information. In such a case, the reproduction source information is a lookup table.
  • the reproduction information acquisition unit 123 can usually be realized by an MPU, a memory, or the like.
  • the processing procedure of the reproduction information acquisition unit 123 is usually realized by software, and the software is recorded on a recording medium such as a ROM. However, it may be realized by hardware (dedicated circuit).
  • the reproduction information acquisition unit 123 may acquire reproduction information having two or more pieces of information output by an acquisition information output unit 125 described later.
  • the reproduction information acquisition unit 123 can be realized by, for example, a microphone and its driver software.
  • the information synthesizing unit 1231 constituting the reproduction information acquiring unit 123 combines two or more pieces of information received by the acquisition information receiving unit 122 and acquires combined information.
  • the synthesis of two or more pieces of information is, for example, the following processes (1) to (3).
  • the reproduction information forming unit 1232 forms reproduction information using the combination information acquired by the information combining unit 1231 and the reproduction source information.
  • the reproduction information transmission unit 124 transmits the reproduction information acquired by the reproduction information acquisition unit 123.
  • the reproduction information transmission unit 124 transmits the reproduction information acquired by the reproduction information acquisition unit 123 to one or more information output devices 13.
  • the reproduction information transmission unit 124 may transmit the reproduction information acquired by the reproduction information acquisition unit 123 to one or more information acquisition devices 11 and one or more information output devices 13. It is assumed that the reproduction information sending unit 124 holds information (for example, the IP address of each device) that specifies the transmission destination of the reproduction information.
  • the reproduction information sending unit 124 is usually realized by a wireless or wired communication unit, but may be realized by a broadcasting unit.
  • the reproduction information sending unit 124 may write the reproduction information acquired by the reproduction information acquisition unit 123 on one or more recording media (not shown). That is, sending is a concept including transmission, storage in a recording medium, delivery to another device (usually an output device), and the like.
  • the acquisition information output unit 125 outputs two or more pieces of information received by the acquisition information reception unit 122.
  • the output here is, for example, sound output.
  • the acquisition information output unit 125 can be realized by, for example, a speaker.
  • the first reproduction information receiving unit 131 constituting the information output device 13 receives the reproduction information from the information reproduction device 12.
  • the first reproduction information receiving unit 131 may read the reproduction information from a recording medium on which the reproduction information acquired by the information reproduction device 12 is recorded.
  • the first reproduction information receiving unit 131 is usually realized by a wireless or wired communication means, but may be realized by a means for receiving a broadcast. The reception includes reading from the recording medium.
  • the first reproduction information output unit 132 outputs the reproduction information received by the first reproduction information receiving unit 131.
  • the first reproduction information output unit 132 may or may not include an output device such as a display or a speaker.
  • the first reproduction information output unit 132 can be implemented by output device driver software, or output device driver software and an output device.
  • Step S301 The information acquisition unit 111 acquires information.
  • Step S302 The acquisition information transmission unit 112 transmits the information acquired in Step S301 to the information reproduction device 12.
  • Step S303 The second reproduction information receiving unit 113 determines whether or not reproduction information has been received from the information reproduction device 12. If the reproduction information is received, the process goes to step S304, and if the reproduction information is not received, the process returns to step S301. Here, when the reproduction information is not received, the WAIT may be performed until the reproduction information is received.
  • Step S304 The second reproduction information output unit 114 outputs the reproduction information received in Step S303. The process returns to step S301.
  • Step S401 The acquisition information receiving unit 122 determines whether information has been received from all the information acquisition apparatuses 11. If information is received from all the information acquisition devices 11, the process goes to step S402, and if not received, the process returns to step S401.
  • Step S402 The reproduction information acquisition unit 123 reads the reproduction source information from the reproduction source information storage unit 121.
  • Step S403 The reproduction information acquisition unit 123 acquires reproduction information using the reproduction source information read in step S402 and one or more pieces of information received in step S401. Reproduction information acquisition processing for acquiring reproduction information will be described with reference to the flowcharts of FIGS. 5, 6, and 7.
  • Step S404 The reproduction information sending unit 124 sends the reproduction information configured in Step S403 to one or more information acquisition devices 11 and one or more information output devices 13. The process returns to step S401.
  • step S403 a first example of the reproduction information acquisition process in step S403 will be described using the flowchart of FIG.
  • Step S501 The reproduction information acquisition unit 123 assigns 1 to the counter i.
  • Step S502 The reproduction information acquisition unit 123 determines whether or not the i-th information exists in the received information. If the i-th information exists, the process goes to step S503, and if the i-th information does not exist, the process goes to step S508.
  • the i-th information is information transmitted from the i-th information acquisition device 11.
  • the reproduction information acquisition unit 123 extracts one or more feature amounts of the i-th information.
  • the feature amount is, for example, a neighborhood feature amount that is a partial feature amount of one or more images and a feature amount of one or more entire images.
  • the neighborhood feature amount includes, for example, a pixel value, activity, spatiotemporal correlation, motion vector, frequency distribution, and the like.
  • the activity is, for example, a maximum value and a minimum value of a plurality of pixels, a dynamic range (DR), a difference value between the plurality of pixels, and the like.
  • the difference value between a plurality of pixels may be a difference value between a plurality of pixels in the space, a difference value between a plurality of pixels in the time direction, or a difference value between a plurality of pixels in the space and the time direction.
  • the total feature amount relates to, for example, a pixel value distribution of the entire image, a motion vector distribution of the entire image, a spatiotemporal correlation of one or more images, a noise amount of the entire image, an image format, and editing of the entire image.
  • Information whether it is PinP, whether it is PoutP, presence / absence of a telop, etc.
  • content information related to content that is one or more images, pattern detection results (face, etc.), and the like.
  • the content information is, for example, the program genre, title, performer name, and the like included in the electronic program guide (EPG).
  • One or more feature quantities are also referred to as feature quantity vectors as appropriate.
  • the feature amount is, for example, a feature amount based on a mel-frequency cepstrum coefficient (mel-frequency cepstral coefficient; MFCC), a musical sound feature amount (pitch, intensity, pronunciation time , Sound value, etc.).
  • MFCC mel-frequency cepstral coefficient
  • a musical sound feature amount pitch, intensity, pronunciation time , Sound value, etc.
  • Step S504 The reproduction information acquisition unit 123 acquires, from the lookup table, correspondence information corresponding to the feature amount vector that is closest to the one or more feature amounts (feature amount vectors) acquired in Step S503.
  • Step S505 The reproduction information acquisition unit 123 applies the correspondence information (for example, an arithmetic expression) acquired in Step S504 to the i-th information to generate new information.
  • the correspondence information for example, an arithmetic expression
  • Step S506 The reproduction information acquisition unit 123 temporarily stores the information generated in Step S505 in a buffer (not shown).
  • Step S507 The reproduction information acquisition unit 123 increments the counter i by 1. The process returns to step S502.
  • the reproduction information acquisition unit 123 configures reproduction information from one or more pieces of information stored in the buffer.
  • the reproduction information acquisition unit 123 for example, combines the two or more information and acquires the reproduction information.
  • the reproduction information acquisition unit 123 acquires the information stored in the buffer as reproduction information. Return to upper process.
  • Step S601 The reproduction information acquisition unit 123 reads the reproduction source information (lookup table) from the reproduction source information storage unit 121.
  • the n information is information received from the n information acquisition devices 11.
  • Step S603 The reproduction information acquisition unit 123 acquires one or more feature amounts of the information acquired in Step S602.
  • Step S604 The reproduction information acquisition unit 123 acquires correspondence information corresponding to the feature quantity vector closest to the one or more feature quantities (feature quantity vectors) acquired in Step S603 from the lookup table.
  • Step S605 The reproduction information acquisition unit 123 applies the correspondence information (for example, an arithmetic expression) acquired in Step S604 to the information acquired in Step S602 to configure the reproduction information. Return to upper process.
  • correspondence information for example, an arithmetic expression
  • step S603 a third example of the reproduction information acquisition process in step S603 will be described using the flowchart in FIG.
  • the reproduction information acquisition unit 123 reads reproduction source information (for example, video) from the reproduction source information storage unit 121.
  • Step S703 The reproduction information acquisition unit 123 configures reproduction information including the reproduction source information read in Step S701 and the information acquired in Step S702. Return to upper process.
  • the information transmitted from one or more information acquisition devices 11 is the same type of information (for example, sound information), and the reproduction source information is different from the information transmitted from the information acquisition device 11. This is effective when the type of information (for example, video information).
  • reproduction information acquisition process is not limited to the process described with reference to the flowcharts of FIGS.
  • the reproduction information acquisition process may be a process of collecting two or more pieces of information output by the acquisition information output unit 125 using a microphone.
  • the performer 1 plays the piano, and the first information acquisition device 11 acquires sound information of the played piano music.
  • the performer 2 plays the violin, and the second information acquisition device 11 acquires sound information of the music of the violin played.
  • the performer 3 plays a trumpet, and the second information acquisition device 11 acquires sound information of the played trumpet music.
  • the reproduction source information storage unit 121 of the information reproduction device 12 stores a lookup table for converting music information (a kind of sound information).
  • This lookup table is a set of correspondence information for converting music information as if music is being played in a certain space. That is, the correspondence information constituting the lookup table is an arithmetic expression for converting the sound information so that the bass of each instrument becomes a more reverberant sound, and a parameter group given to the arithmetic expression. It is assumed that the lookup table stores two or more pairs of correspondence information and feature quantity vectors.
  • the feature quantity vector has, for example, a feature quantity “volume” and a feature quantity “frequency”.
  • the information reproduction device 12 transmits a performance start trigger to the three information acquisition devices 11, and the information acquisition device 11 receives the trigger and outputs a performance start signal to each acquisition space.
  • performer 1, performer 2, and performer 3 each play their assigned instruments.
  • the information acquisition part 111 of the information acquisition apparatus 11 of each acquisition space acquires the sound information emitted by the performance.
  • the acquisition information transmission unit 112 of the information acquisition device 11 in each acquisition space transmits sound information to the information reproduction device 12.
  • the acquisition information receiving unit 122 of the information reproduction device 12 receives sound information from the three information acquisition devices 11.
  • the reproduction information acquisition unit 123 divides the sound information received from the first information acquisition device 11 into processing units (for example, sound information of 0.1 ms), and one or more feature amounts (feature amounts) of each processing unit. Vector). Next, the reproduction information acquisition unit 123 acquires correspondence information corresponding to the feature vector closest to the acquired feature vector of each processing unit from the lookup table for each processing unit. Then, the reproduction information acquisition unit 123 applies the correspondence information acquired for each processing unit for each processing unit, and generates new sound information (referred to as “first new sound information”).
  • the reproduction information acquisition unit 123 divides the sound information received from the second information acquisition device 11 into processing units, and acquires one or more feature amounts (feature amount vectors) of each processing unit. Next, the reproduction information acquisition unit 123 acquires correspondence information corresponding to the feature vector closest to the acquired feature vector of each processing unit from the lookup table for each processing unit. Then, the reproduction information acquisition unit 123 applies the correspondence information acquired for each processing unit for each processing unit, and generates new sound information (referred to as “second new sound information”).
  • the reproduction information acquisition unit 123 divides the sound information received from the third information acquisition device 11 into processing units, and acquires one or more feature amounts (feature amount vectors) of each processing unit. Next, the reproduction information acquisition unit 123 acquires correspondence information corresponding to the feature vector closest to the acquired feature vector of each processing unit from the lookup table for each processing unit. Then, the reproduction information acquisition unit 123 applies the correspondence information acquired for each processing unit for each processing unit, and generates new sound information (referred to as “third new sound information”).
  • the reproduction information acquisition unit 123 synthesizes the first new sound information, the second new sound information, and the third new sound information in synchronization with timing. Sound information acquired by such synthesis is reproduction information.
  • the timing synchronization method can be performed by a known method, for example, by matching the start point of performance, and thus detailed description thereof is omitted.
  • the reproduction information sending unit 124 of the information reproduction device 12 sends the obtained reproduction information to the three information acquisition devices 11 and the three information output devices 13.
  • the second reproduction information receiving unit 113 of each of the three information acquisition apparatuses 11 receives the reproduction information.
  • the second reproduction information output unit 114 outputs the received reproduction information. With this process, the music listened to by the listener can be played while being listened to by three remote players.
  • the first reproduction information receiving unit 131 of each of the three information output devices 13 receives the reproduction information.
  • the first reproduction information output unit 132 outputs the received reproduction information. With this process, the listener can listen to music information in which value is added to the synthesized music information, not just the synthesized music information.
  • the reproduction source information storage unit 121 of the information reproducing apparatus 12 stores a video taken in the reproduction space in addition to the lookup table.
  • the reproduction information includes a video in addition to the music information that has been synthesized and further increased in value. Note that the numbers of acquisition spaces and output spaces are the same as in the first specific example.
  • the information reproduction device 12 transmits a performance start trigger to the three information acquisition devices 11, and the information acquisition device 11 receives the trigger and outputs a performance start signal to each acquisition space.
  • performer 1, performer 2, and performer 3 each play their assigned instruments.
  • the information acquisition part 111 of the information acquisition apparatus 11 of each acquisition space acquires the sound information emitted by the performance.
  • the acquisition information transmission unit 112 of the information acquisition device 11 in each acquisition space transmits sound information to the information reproduction device 12.
  • the acquisition information receiving unit 122 of the information reproduction device 12 receives sound information from the three information acquisition devices 11.
  • the reproduction information acquisition unit 123 divides the sound information received from the first information acquisition device 11 into processing units, and acquires one or more feature amounts (feature amount vectors) of each processing unit. Next, the reproduction information acquisition unit 123 acquires correspondence information corresponding to the feature vector closest to the acquired feature vector of each processing unit from the lookup table for each processing unit. Then, the reproduction information acquisition unit 123 applies the correspondence information acquired for each processing unit for each processing unit, and generates new sound information (referred to as “first new sound information”).
  • the reproduction information acquisition unit 123 divides the sound information received from the second information acquisition device 11 into processing units, and acquires one or more feature amounts (feature amount vectors) of each processing unit. Next, the reproduction information acquisition unit 123 acquires correspondence information corresponding to the feature vector closest to the acquired feature vector of each processing unit from the lookup table for each processing unit. Then, the reproduction information acquisition unit 123 applies the correspondence information acquired for each processing unit for each processing unit, and generates new sound information (referred to as “second new sound information”).
  • the reproduction information acquisition unit 123 divides the sound information received from the third information acquisition device 11 into processing units, and acquires one or more feature amounts (feature amount vectors) of each processing unit. Next, the reproduction information acquisition unit 123 acquires correspondence information corresponding to the feature vector closest to the acquired feature vector of each processing unit from the lookup table for each processing unit. Then, the reproduction information acquisition unit 123 applies the correspondence information acquired for each processing unit for each processing unit, and generates new sound information (referred to as “third new sound information”).
  • the reproduction information acquisition unit 123 synthesizes the first new sound information, the second new sound information, and the third new sound information in synchronization with timing.
  • the sound information acquired by such synthesis constitutes reproduction information.
  • the reproduction information acquisition unit 123 acquires a part of the video stored in the reproduction source information storage unit 121. Note that this part of the video is a video having the same output time as the sound information acquired by the synthesis, and is the next video after the video acquired recently.
  • the reproduction information acquisition unit 123 configures reproduction information having sound information acquired by synthesis and acquired video.
  • the reproduction information sending unit 124 of the information reproduction device 12 sends the obtained reproduction information to the three information acquisition devices 11 and the three information output devices 13.
  • the second reproduction information receiving unit 113 of each of the three information acquisition apparatuses 11 receives the reproduction information.
  • the second reproduction information output unit 114 outputs sound information constituting the received reproduction information from the speaker. Further, the second reproduction information output unit 114 outputs the video constituting the received reproduction information to the display.
  • the first reproduction information receiving unit 131 of each of the three information output devices 13 receives the reproduction information.
  • the 1st reproduction information output part 132 outputs the sound information which comprises the received reproduction information from a speaker.
  • the first reproduction information output unit 132 outputs the video constituting the received reproduction information to the display.
  • information acquired by the information acquisition unit 111 of the information acquisition device 11 in each acquisition space is trigger information.
  • the trigger information includes the loudness of the musical instrument, the sound identification information, and the timing information for outputting the sound.
  • the trigger information may include an instrument identifier.
  • the reproduction source information storage unit 121 of the information reproduction apparatus 12 stores images taken in the reproduction space.
  • Example 3 the numbers of acquisition spaces and output spaces are the same as in Example 1.
  • the information reproduction device 12 transmits a performance start trigger to the three information acquisition devices 11, and the information acquisition device 11 receives the trigger and outputs a performance start signal to each acquisition space.
  • performer 1, performer 2, and performer 3 each play their assigned instruments.
  • the information acquisition part 111 of the information acquisition apparatus 11 of each acquisition space acquires the sound information emitted by the performance, and converts the said sound information into trigger information.
  • the information acquisition unit 111 can communicate with a musical instrument, and may acquire trigger information directly from the musical instrument.
  • the acquisition information transmission unit 112 of the information acquisition device 11 in each acquisition space transmits trigger information to the information reproduction device 12.
  • the acquisition information receiving unit 122 of the information reproduction device 12 receives trigger information from the three information acquisition devices 11.
  • the reproduction information acquisition unit 123 converts the trigger information received from each of the three information acquisition devices 11 into sound information, and obtains first sound information, second sound information, and third sound information.
  • the reproduction information acquisition unit 123 synthesizes the first sound information, the second sound information, and the third sound information in synchronization with timing.
  • the sound information acquired by such synthesis constitutes reproduction information.
  • the reproduction information acquisition unit 123 acquires a part of the video stored in the reproduction source information storage unit 121. Note that this part of the video is a video having the same output time as the sound information acquired by the synthesis, and is the next video after the video acquired recently.
  • the reproduction information acquisition unit 123 configures reproduction information having sound information acquired by synthesis and acquired video.
  • the reproduction information sending unit 124 of the information reproduction device 12 sends the obtained reproduction information to the three information acquisition devices 11 and the three information output devices 13.
  • the second reproduction information receiving unit 113 of each of the three information acquisition apparatuses 11 receives the reproduction information.
  • the second reproduction information output unit 114 outputs sound information constituting the received reproduction information from the speaker. Further, the second reproduction information output unit 114 outputs the video constituting the received reproduction information to the display.
  • the first reproduction information receiving unit 131 of each of the three information output devices 13 receives the reproduction information.
  • the 1st reproduction information output part 132 outputs the sound information which comprises the received reproduction information from a speaker.
  • the first reproduction information output unit 132 outputs the video constituting the received reproduction information to the display.
  • the reproduction source information storage unit 121 of the information reproduction device 12 stores a look-up table in addition to the video imaged in the reproduction space.
  • this lookup table two or more pieces of correspondence information indicating correspondence between trigger information and acquired sound information are stored.
  • the correspondence information may be a set of trigger information and acquired sound information, or may be an arithmetic expression for generating trigger information and sound information.
  • the lookup table may include two or more pieces of correspondence information and trigger information corresponding to each piece of correspondence information.
  • the correspondence information is information that improves the quality of the sound information.
  • the number of acquisition spaces and output spaces is the same as in the first specific example.
  • the information reproduction device 12 transmits a performance start trigger to the three information acquisition devices 11, and the information acquisition device 11 receives the trigger and outputs a performance start signal to each acquisition space.
  • performer 1, performer 2, and performer 3 each play their assigned instruments.
  • the information acquisition part 111 of the information acquisition apparatus 11 of each acquisition space acquires the sound information emitted by the performance, and converts the said sound information into trigger information.
  • the information acquisition unit 111 can communicate with a musical instrument, and may acquire trigger information directly from the musical instrument.
  • the acquisition information transmission unit 112 of the information acquisition device 11 in each acquisition space transmits trigger information to the information reproduction device 12.
  • the acquisition information receiving unit 122 of the information reproduction device 12 receives trigger information from the three information acquisition devices 11.
  • the reproduction information acquisition unit 123 searches the lookup table using each trigger information received from each of the three information acquisition devices 11 as a key, and acquires correspondence information corresponding to each trigger information. Then, the reproduction information acquisition unit 123 acquires sound information corresponding to the trigger information from each information acquisition device 11 using the correspondence information. Then, it is assumed that the reproduction information acquisition unit 123 has obtained the first sound information, the second sound information, and the third sound information.
  • the reproduction information acquisition unit 123 synthesizes the first sound information, the second sound information, and the third sound information in synchronization with timing. Sound information acquired by such synthesis is reproduction information.
  • the reproduction information sending unit 124 of the information reproduction device 12 sends the obtained reproduction information to the three information acquisition devices 11 and the three information output devices 13.
  • the second reproduction information receiving unit 113 of each of the three information acquisition apparatuses 11 receives the reproduction information.
  • the second reproduction information output unit 114 outputs sound information constituting the received reproduction information from the speaker. With this process, the music listened to by the listener can be played while being listened to by three remote players.
  • the first reproduction information receiving unit 131 of each of the three information output devices 13 receives the reproduction information.
  • the 1st reproduction information output part 132 outputs the sound information which comprises the received reproduction information from a speaker. With this process, the viewer can listen to music information in which value is added to the synthesized music information, not just the synthesized music information.
  • information similar to reproduction information output in the output space can be output in the acquisition space.
  • a person who creates information for example, a performer
  • the processing in the present embodiment may be realized by software. Then, this software may be distributed by software download or the like. Further, this software may be recorded on a recording medium such as a CD-ROM and distributed.
  • the software that implements the information reproduction apparatus 12 in the present embodiment is the following program. That is, this program stores reproduction source information, which is information for configuring reproduction information, in a storage medium, and the computer receives one or more pieces of information from the one or more pieces of information acquisition devices.
  • a reproduction information acquisition unit that acquires reproduction information using one or more information received by the acquisition information reception unit and the reproduction source information, and the reproduction information acquired by the reproduction information acquisition unit, A program for functioning as a reproduction information transmission unit for transmission to one or more information output devices.
  • the reproduction information sending unit causes the computer to function as sending the reproduction information acquired by the reproduction information acquisition unit to the one or more information acquisition devices and the one or more information output devices. Is preferred.
  • the reproduction information acquisition unit combines two or more pieces of information received by the acquisition information reception unit, and combines information obtained by the information synthesis unit, It is preferable that the computer is caused to function as a reproduction information forming unit that forms reproduction information using the reproduction source information.
  • the reproduction information acquisition unit converts information that can output one or more pieces of trigger information received by the acquisition information reception unit, the one or more converted information, the reproduction source information, and It is preferable to make the computer function as a component of the reproduction information using the.
  • the reproduction source information includes all or a part of one or more received first information and all or a part of second information that is information about the same object as the first information.
  • An information system presented in the space and the viewing space will be described.
  • FIG. 8 is a conceptual diagram of the information system 2 in the present embodiment.
  • the information system 1 includes two or more information acquisition devices 11, one or more information reproduction devices 21, one information aggregation device 22, and one or more information output devices 13.
  • the information aggregating apparatus 22 is an apparatus that receives the information configured by one or more information reproducing apparatuses 21 and configures reproduced information to be output.
  • FIG. 9 is a block diagram of the information system 2 in the present embodiment.
  • the information reproduction device 21 includes a reproduction source information storage unit 121, an acquisition information reception unit 122, a reproduction information acquisition unit 123, a temporary reproduction information transmission unit 214, and an acquisition information output unit 125.
  • the information aggregating apparatus 22 includes a reproduction source information storage unit 121, an acquisition information reception unit 122, a reproduction information collection unit 221, a reproduction information acquisition unit 222, a reproduction information transmission unit 124, and an acquisition information output unit 125.
  • the information aggregating apparatus 22 may not include the reproduction source information storage unit 121.
  • the acquired information output unit 125 here outputs the information received by the acquired information receiving unit 122 and the reproduction information received by the reproduction information collecting unit 221.
  • the temporary reproduction information sending unit 214 constituting the information reproduction device 21 transmits the reproduction information acquired by the reproduction information acquisition unit 123 to one information aggregation device 22.
  • Temporary reproduction information sending unit 214 is usually realized by wireless or wired communication means, but may be realized by broadcasting means.
  • the reproduction information collection unit 221 constituting the information aggregating apparatus 22 receives one or more pieces of reproduction information from one or more information reproduction apparatuses 21.
  • the reproduction information collection unit 221 is usually realized by a wireless or wired communication means, but may be realized by a means for receiving a broadcast.
  • the reproduction information acquisition unit 222 includes one or more pieces of information received by the acquisition information reception unit 122, one or more types of information of the reproduction source information stored in the reproduction source information storage unit 121, and one received by the reproduction information collection unit 221.
  • the reproduction information to be output is configured using the above reproduction information.
  • the reproduction information acquisition unit 222 acquires reproduction information having two or more information output by the acquisition information output unit 125, and uses the acquired reproduction information and one or more reproduction information received by the reproduction information collection unit 221.
  • the reproduction information to be output may be configured.
  • the reproduction information acquisition unit 222 composes one or more pieces of information received by the acquisition information reception unit 122 and one or more pieces of reproduction information received by the reproduction information collection unit 221 to constitute reproduction information to be output.
  • the one or more pieces of information received by the acquired information receiving unit 122 and the one or more pieces of reproduction information received by the reproduction information collecting unit 221 may be the same type of information (for example, music information) or different types.
  • music information for example, music information
  • a known technique can be used as a method of constructing the same type of information.
  • combining different types of information includes superimposing or configuring synchronized multimedia data, and a known technique can be used.
  • the reproduction information acquisition unit 222 configures reproduction information using, for example, one or more pieces of information received by the acquisition information reception unit 122 and the reproduction source information of the reproduction source information storage unit 121, and the configured reproduction information and The received one or more pieces of reproduction information may be combined.
  • the process of configuring the reproduction information using one or more pieces of information received by the acquisition information receiving unit 122 and the reproduction source information has been described above.
  • the two or more reproduction informations are (1) one type of information of the same type, (2) two or more types of information of the same type, and (3) different types of reproduction information. Is a single type of information, (4) there are different types, and there may be reproduction information including two or more types of information.
  • the reproduction information acquisition unit 222 synthesizes two or more pieces of reproduction information of the same type.
  • the reproduction information acquisition unit 222 synthesizes each type of information included in two or more pieces of reproduction information for each type of information and superimposes two or more types of acquired information.
  • the reproduction information to be output is configured by, for example, configuring multimedia data based on the above.
  • the reproduction information acquisition unit 222 is output by superimposing two or more types of reproduction information or configuring synchronized multimedia data from two or more types of reproduction information. Configure reproducible information.
  • the reproduction information acquisition unit 222 acquires the same type of information from each reproduction information for each same type of information, and synthesizes the acquired information. Then, the reproduction information to be output is configured by superimposing two or more types of information obtained by synthesis or by configuring synchronized multimedia data.
  • the reproduction information acquisition unit 222 can be usually realized by an MPU, a memory, or the like.
  • the processing procedure of the reproduction information acquisition unit 222 is usually realized by software, and the software is recorded on a recording medium such as a ROM. However, it may be realized by hardware (dedicated circuit).
  • the operation of the information system 2 will be described.
  • the difference between the information reproduction device 21 and the information reproduction device 12 is a difference in destination to which reproduction information is transmitted. Therefore, the operation of the information reproduction device 21 is substantially the same as that in FIG. 4 except that the temporary reproduction information sending unit 214 transmits the reproduction information to the information aggregation device 22 in step S404.
  • Step S1001 The acquisition information receiving unit 122 determines whether information has been received from one or more information acquisition apparatuses 11. If the information is received, the process goes to step S1002, and if not received, the process returns to step S1001.
  • the one or more information acquisition devices 11 that transmit information received by the acquisition information receiving unit 122 are devices that are determined in advance to transmit information to the information aggregation device 22. Further, one or more information acquisition devices 11 that transmit information to each information reproduction device 21 are also determined in advance.
  • Step S1002 The reproduction information collection unit 221 determines whether or not reproduction information has been received from one or more information reproduction apparatuses 21. If the reproduction information is received, the process goes to step S1003, and if not, the process returns to step S1002.
  • Step S1003 The reproduction information acquisition unit 222 synthesizes two or more pieces of reproduction information. Processing for combining two or more pieces of reproduction information will be described with reference to the flowchart of FIG.
  • the two or more pieces of reproduction information are the reproduction information configured in step S403 and the one or more pieces of reproduction information received in step S1002.
  • Step S1004 The reproduction information acquisition unit 222 transmits the reproduction information configured in Step S1003 to two or more information acquisition devices 11 and one or more information output devices 13. The process returns to step S1001.
  • step S1003 the reproduction information synthesizing process in step S1003 will be described using the flowchart of FIG.
  • Step S1101 The reproduction information acquisition unit 222 substitutes 1 for the counter i.
  • Step S1102 The reproduction information acquisition unit 222 determines whether or not the i-th type of information exists in any of the two or more pieces of reproduction information. If the i-th type information exists, the process goes to step S1103, and if not, the process goes to step S1111.
  • Step S1103 The reproduction information acquisition unit 222 substitutes 1 for the counter j.
  • Step S1104 The reproduction information acquisition unit 222 determines whether or not the j-th reproduction information exists. If the j-th reproduction information exists, the process goes to step S1105, and if not, the process goes to step S1109.
  • Step S1105) The reproduction information acquisition unit 222 acquires the i-th type of information from the j-th reproduction information.
  • Step S1106 The reproduction information acquisition unit 222 determines whether or not the i-th type of information has been acquired. If the i-th type information can be acquired, the process proceeds to step S1107. If the i-th type information cannot be acquired, the process proceeds to step S1108.
  • Step S1107 The reproduction information acquisition unit 222 temporarily stores the acquired i-th type information in a buffer (not shown).
  • Step S1108 The reproduction information acquisition unit 222 increments the counter j by 1. The process returns to step S1104.
  • Step S1109) The reproduction information acquisition unit 222 synthesizes all i-th types of information in a buffer (not shown). It should be noted that the composition method is preferably different depending on the type and content of information. In addition, information acquired by the synthesis in this step is referred to as synthesis information.
  • Step S1110 The reproduction information acquisition unit 222 increments the counter i by one. The process returns to step S1102.
  • Step S1111 The reproduction information acquisition unit 222 configures reproduction information to be output from all types of synthesis information. Return to upper process.
  • FIG. 1 A conceptual diagram of the information system 2 is shown in FIG. 1
  • the performer 1 plays the piano, and the first information acquisition device 11 acquires sound information of the played piano music.
  • the performer 2 plays the violin, and the second information acquisition device 11 acquires sound information of the music of the violin played.
  • the performer 3 plays a trumpet, and the third information acquisition device 11 acquires sound information of the music of the played trumpet.
  • the reproduction source information storage unit 121 of the information reproduction device 21 stores a lookup table for converting piano and violin music information (a kind of sound information).
  • the reproduction source information storage unit 121 of the information aggregating apparatus 22 stores a look-up table for converting trumpet music information (a type of sound information) and video captured in the reproduction space.
  • a performance start trigger is transmitted from the information aggregating device 22 to the three information acquisition devices 11, and the information acquisition device 11 receives the trigger and outputs a performance start signal to each acquisition space.
  • performer 1, performer 2, and performer 3 each play their assigned instruments.
  • the information acquisition part 111 of the information acquisition apparatus 11 of each acquisition space acquires the sound information emitted by the performance.
  • the acquisition information transmission unit 112 of the information acquisition device 11 in the first and second acquisition spaces transmits sound information to the information reproduction device 21.
  • the acquisition information transmission unit 112 of the information acquisition device 11 in the third acquisition space transmits sound information to the information aggregation device 22.
  • the acquisition information receiving unit 122 of the information reproduction device 21 receives sound information from the first and second information acquisition devices 11. Further, the acquisition information receiving unit 122 of the information aggregation device 22 receives sound information from the third information acquisition device 11.
  • the reproduction information acquisition unit 123 of the information reproduction device 21 divides the sound information received from the first information acquisition device 11 into processing units, and acquires one or more feature amounts (feature amount vectors) of each processing unit. .
  • the reproduction information acquisition unit 123 acquires correspondence information corresponding to the feature vector closest to the acquired feature vector of each processing unit from the lookup table for each processing unit. Then, the reproduction information acquisition unit 123 applies the correspondence information acquired for each processing unit for each processing unit, and generates new sound information (referred to as “first new sound information”).
  • the reproduction information acquisition unit 123 of the information reproduction device 21 divides the sound information received from the second information acquisition device 11 into processing units, and acquires one or more feature amounts (feature amount vectors) of each processing unit. Next, the reproduction information acquisition unit 123 acquires correspondence information corresponding to the feature vector closest to the acquired feature vector of each processing unit from the lookup table for each processing unit. Then, the reproduction information acquisition unit 123 applies the acquired correspondence information for each processing unit, and generates new sound information (referred to as “second new sound information”).
  • the reproduction information acquisition unit 123 of the information reproduction device 21 synthesizes the first new sound information and the second new sound information in synchronization with timing.
  • the sound information acquired by such synthesis is reproduction information transmitted to the information aggregation device 22.
  • the temporary reproduction information sending unit 214 of the information reproduction device 21 transmits the acquired reproduction information to the information aggregation device 22.
  • the reproduction information collection unit 221 of the information aggregation device 22 receives the reproduction information from the information reproduction device 21.
  • the reproduction information acquisition unit 222 of the information aggregation device 22 divides the sound information received from the third information acquisition device 11 into processing units, and acquires one or more feature amounts (feature amount vectors) of each processing unit. .
  • the reproduction information acquisition unit 123 acquires correspondence information corresponding to the feature vector closest to the acquired feature vector of each processing unit from the lookup table for each processing unit. Then, the reproduction information acquisition unit 123 applies the correspondence information acquired for each processing unit for each processing unit, and generates new sound information (referred to as “third new sound information”).
  • the reproduction information acquisition unit 222 of the information aggregating apparatus 22 synchronizes the timing of the reproduction information received from the information reproduction apparatus 21 (information obtained by synthesizing the piano and violin sound information) and the third new sound information. To obtain synthesized sound information.
  • the method for synthesizing the sound information is a known technique.
  • the reproduction information acquisition unit 222 of the information aggregation device 22 acquires a part of the video stored in the reproduction source information storage unit 121.
  • this part of the video is a video having the same output time as the synthesized sound information, and is the video next to the video acquired recently.
  • the reproduction information acquisition unit 222 of the information aggregating apparatus 22 constitutes reproduction information having synthesized sound information and the acquired video.
  • the reproduction information transmission unit 124 of the information aggregation device 22 transmits the acquired reproduction information to the three information acquisition devices 11 and the three information output devices 13.
  • the second reproduction information receiving unit 113 of each of the three information acquisition apparatuses 11 receives the reproduction information.
  • the second reproduction information output unit 114 outputs sound information constituting the received reproduction information from the speaker. Further, the second reproduction information output unit 114 outputs the video constituting the received reproduction information to the display.
  • the first reproduction information receiving unit 131 of each of the three information output devices 13 receives the reproduction information.
  • the 1st reproduction information output part 132 outputs the sound information which comprises the received reproduction information from a speaker.
  • the first reproduction information output unit 132 outputs the video constituting the received reproduction information to the display.
  • the type and content of information acquired by the information acquisition device 11, the type and content of reproduction source information, the method of synthesizing information, etc. are not limited.
  • the software that realizes the information aggregating apparatus in the present embodiment is the following program. That is, the program includes a computer that acquires one or more pieces of information from one or more information acquisition devices, and a reproduction information collection unit that receives one or more pieces of reproduction information from one or more information reproduction devices.
  • a reproduction information acquisition unit for acquiring reproduction information to be output using one or more pieces of information received by the acquisition information reception unit and one or more pieces of reproduction information received by the reproduction information collection unit; and one or more information outputs
  • reproduction source information that is information for configuring reproduction information is stored in a storage medium, and the reproduction information acquisition unit includes reproduction source information, one or more information received by the acquisition information reception unit, It is preferable that the program is for causing a computer to function as a component of the reproduction information to be output using one or more pieces of reproduction information received by the reproduction information collection unit.
  • the software that realizes the information reproduction device is the following program. That is, this program stores reproduction source information that is information for configuring reproduction information in a storage medium, and the computer receives one or more pieces of information from one or more pieces of information acquisition devices. Then, using the one or more pieces of information received by the acquisition information receiving unit and the reproduction source information, the reproduction information acquisition unit that acquires the reproduction information and the reproduction information configured by the reproduction information acquisition unit are transmitted to the information aggregation device A program for functioning as a reproduction information sending unit.
  • an information system having an information synthesizing apparatus that receives information from two or more information reproduction apparatuses, synthesizes the information, and forms reproduction information to be output will be described.
  • FIG. 12 is a conceptual diagram of the information system 3 in the present embodiment.
  • the information system 3 includes two or more information acquisition devices 11, two or more information reproduction devices 32, an information synthesis device 34, and one or more information output devices 13.
  • FIG. 13 is a block diagram of the information system 3 in the present embodiment.
  • the information reproduction device 32 includes a reproduction source information storage unit 121, an acquisition information reception unit 122, a reproduction information acquisition unit 123, a temporary reproduction information transmission unit 324, and an acquisition information output unit 125. Note that the information reproduction device 32 may not include the reproduction source information storage unit 121.
  • the information synthesis device 34 includes a reproduction information collection unit 341, a reproduction information synthesis unit 342, and a third reproduction information transmission unit 343.
  • the temporary reproduction information sending unit 324 configuring the information reproduction device 32 transmits the reproduction information configured by the reproduction information acquisition unit 123 to the information synthesis device 34.
  • Temporary reproduction information sending unit 324 is usually realized by wireless or wired communication means, but may be realized by broadcasting means.
  • the reproduction information collecting unit 341 constituting the information synthesizing apparatus 34 receives reproduction information from two or more information reproduction apparatuses 32.
  • the reproduction information collection unit 341 is usually realized by a wireless or wired communication means, but may be realized by a means for receiving a broadcast.
  • the reproduction information synthesizing unit 342 synthesizes two or more pieces of reproduction information received by the reproduction information collecting unit 341 and constitutes reproduction information to be output.
  • the method for synthesizing the reproduction information is, for example, the method described with reference to FIG.
  • the reproduction information synthesizing unit 342 can be usually realized by an MPU, a memory, or the like.
  • the processing procedure of the reproduction information combining unit 342 is usually realized by software, and the software is recorded on a recording medium such as a ROM. However, it may be realized by hardware (dedicated circuit).
  • the third reproduction information sending unit 343 sends the reproduction information configured by the reproduction information combining unit 342 to one or more information acquisition devices 11 and one or more information output devices 13.
  • the third reproduction information sending unit 343 is usually realized by a wireless or wired communication unit, but may be realized by a broadcasting unit. Further, transmission from the third reproduction information transmission unit 343 to one or more information output devices 13 may be performed by writing to one or more recording media.
  • the operation of the information system 3 will be described.
  • the difference between the information reproduction device 32 and the information reproduction device 12 is a difference in destination to which reproduction information is transmitted. Therefore, the operation of the information reproduction device 32 is substantially the same as that in FIG. 4 except that the temporary reproduction information transmission unit 324 transmits the reproduction information to the information synthesis device 34 in step S404.
  • Step S1401 The reproduction information collection unit 341 determines whether reproduction information has been received from two or more information reproduction devices 32. If the reproduction information is received, the process goes to step S1003. If the reproduction information is not received, the process returns to step S1401.
  • FIG. 1 The conceptual diagram of the information system 3 is FIG.
  • the performer 1 plays the piano, and the first information acquisition device 11 acquires sound information of the played piano music.
  • the performer 2 plays the violin, and the second information acquisition device 11 acquires sound information of the music of the violin played.
  • the performer 3 plays a trumpet, and the third information acquisition device 11 acquires sound information of the music of the played trumpet.
  • the reproduction source information storage unit 121 of the first information reproduction device 32 stores a lookup table for converting music information (a kind of sound information) of piano and violin.
  • the reproduction source information storage unit 121 of the second information reproduction device 32 stores a look-up table for converting trumpet music information (a type of sound information) and an image captured in the reproduction space. .
  • a performance start trigger is transmitted from the information synthesizer 34 to the three information acquisition devices 11, and the information acquisition device 11 receives the trigger and outputs a performance start signal to each acquisition space.
  • performer 1, performer 2, and performer 3 each play their assigned instruments.
  • the information acquisition part 111 of the information acquisition apparatus 11 of each acquisition space acquires the sound information emitted by the performance.
  • the acquisition information transmission unit 112 of the information acquisition device 11 in the first and second acquisition spaces transmits sound information to the first information reproduction device 32.
  • the acquisition information transmission unit 112 of the information acquisition device 11 in the third acquisition space transmits sound information to the second information reproduction device 32.
  • the acquisition information receiving unit 122 of the first information reproduction device 32 receives sound information from the first and second information acquisition devices 11. Further, the acquisition information receiving unit 122 of the second information reproduction device 32 receives sound information from the third information acquisition device 11.
  • the reproduction information acquisition unit 123 of the first information reproduction device 32 divides the sound information received from the first information acquisition device 11 into processing units, and one or more feature amounts (feature amount vectors) of each processing unit. To get. Next, the reproduction information acquisition unit 123 acquires correspondence information corresponding to the feature vector closest to the acquired feature vector of each processing unit from the lookup table for each processing unit. Then, the reproduction information acquisition unit 123 applies the correspondence information acquired for each processing unit for each processing unit, and generates new sound information (referred to as “first new sound information”).
  • the reproduction information acquisition unit 123 of the first information reproduction device 32 divides the sound information received from the second information acquisition device 11 into processing units, and one or more feature amounts (feature amount vectors) of each processing unit. get. Next, the reproduction information acquisition unit 123 acquires correspondence information corresponding to the feature vector closest to the acquired feature vector of each processing unit from the lookup table for each processing unit. Then, the reproduction information acquisition unit 123 applies the correspondence information acquired for each processing unit for each processing unit, and generates new sound information (referred to as “second new sound information”).
  • the reproduction information acquisition unit 123 of the first information reproduction device 32 synthesizes the first new sound information and the second new sound information in synchronization with timing.
  • the sound information acquired by such synthesis is reproduction information transmitted to the information synthesis device 34.
  • the temporary reproduction information sending unit 324 of the first information reproduction device 32 transmits the acquired reproduction information to the information synthesis device 34.
  • the reproduction information acquisition unit 123 of the second information reproduction device 32 divides the sound information received from the third information acquisition device 11 into processing units, and one or more feature amounts (feature amount vectors) of each processing unit. To get. Next, the reproduction information acquisition unit 123 acquires correspondence information corresponding to the feature vector closest to the acquired feature vector of each processing unit from the lookup table for each processing unit. Then, the reproduction information acquisition unit 123 applies the correspondence information acquired for each processing unit for each processing unit, and generates new sound information (referred to as “third new sound information”).
  • the reproduction information acquisition unit 123 of the second information reproduction device 32 constitutes reproduction information having third new sound information and video.
  • the temporary reproduction information sending unit 324 of the second information reproduction device 32 transmits the acquired reproduction information to the information synthesis device 34.
  • the reproduction information collection unit 341 of the information synthesizing device 34 receives the reproduction information from the two information reproduction devices 32.
  • the reproduction information combining unit 342 of the information synthesizing apparatus 34 combines the two pieces of reproduction information and configures the reproduction information to be output.
  • the reproduction information synthesis unit 342 synthesizes the reproduction information transmitted from the first information reproduction device 32 and the sound information in the reproduction information transmitted from the second information reproduction device 32. Then, the synthesized sound information (information obtained by synthesizing the performance of the piano, violin, and trumpet) and the video in the reproduction information transmitted from the second information reproduction device 32 are superimposed, for example, at a timing. Configure the reproduction information to be output.
  • the third reproduction information transmission unit 343 of the information synthesis device 34 transmits the reproduction information acquired by the reproduction information synthesis unit 342 to the three information acquisition devices 11 and the three information output devices 13.
  • the second reproduction information receiving unit 113 of each of the three information acquisition apparatuses 11 receives the reproduction information.
  • the second reproduction information output unit 114 outputs sound information constituting the received reproduction information from the speaker. Further, the second reproduction information output unit 114 outputs the video constituting the received reproduction information to the display.
  • the first reproduction information receiving unit 131 of each of the three information output devices 13 receives the reproduction information.
  • the 1st reproduction information output part 132 outputs the sound information which comprises the received reproduction information from a speaker.
  • the first reproduction information output unit 132 outputs the video constituting the received reproduction information to the display.
  • the software that implements the information synthesizing apparatus 34 in the present embodiment is the following program.
  • this program combines a reproduction information collection unit that receives reproduction information from two or more information reproduction apparatuses and two or more reproduction information received by the reproduction information collection unit, and outputs reproduction information.
  • a reproduction information composition unit that constitutes the information and the one or more information output devices, or the one or more information acquisition devices and the one or more information output devices.
  • the software that realizes the information reproduction device 32 in the present embodiment is the following program. That is, this program stores reproduction source information, which is information for configuring reproduction information, in a storage medium, and the computer receives one or more pieces of information from the one or more pieces of information acquisition devices.
  • a reproduction information acquisition unit that configures reproduction information and reproduction information configured by the reproduction information acquisition unit using information obtained from the reproduction unit, one or more pieces of information received by the acquisition information reception unit, and the reproduction source information
  • the information system described in the above embodiment can be applied as, for example, a remote performance system, a remote play system, or the like.
  • the information acquired by the information acquisition device 11 is musical instrument performance information (sound information)
  • the information system can be a remote performance system.
  • the information acquired by the information acquisition device 11 is a video of a play performed by a theater performer and an acquired audio
  • the information system can be a remote theater system.
  • FIG. 15 shows the appearance of a computer that executes the program described in this specification to realize the information acquisition device, the information reproduction device, the information synthesis device, and the information output device according to the various embodiments described above. .
  • the above-described embodiments can be realized by computer hardware and a computer program executed thereon.
  • FIG. 15 is an overview of the computer system 340
  • FIG. 16 is a block diagram of the system 340.
  • the computer system 340 includes a computer 341 including an FD drive and a CD-ROM drive, a keyboard 342, a mouse 343, a monitor 344, a microphone 345, a camera 346, a speaker 347, and the like.
  • the computer 341 executes an MPU 3413, a bus 3414 connected to the MPU 3413, the CD-ROM drive 3412 and the FD drive 3411, and a program such as a bootup program.
  • ROM 3415 for storing, RAM 3416 for temporarily storing application program instructions and providing a temporary storage space, and hard disk 3417 for storing application programs, system programs, and data, connected to MPU 3413 including.
  • the computer 341 may further include a network card that provides connection to the LAN.
  • a program that causes the computer system 340 to execute the functions of the information system of the above-described embodiment is stored in the CD-ROM 3501 or FD 3502, inserted into the CD-ROM drive 3412 or FD drive 3411, and further transferred to the hard disk 3417. May be.
  • the program may be transmitted to the computer 341 via a network (not shown) and stored in the hard disk 3417.
  • the program is loaded into the RAM 3416 at the time of execution.
  • the program may be loaded directly from the CD-ROM 3501, the FD 3502, or the network.
  • the program does not necessarily include an operating system (OS) or a third-party program that causes the computer 341 to execute the functions of the information system according to the above-described embodiment.
  • the program only needs to include an instruction portion that calls an appropriate function (module) in a controlled manner and obtains a desired result. How the computer system 340 operates is well known and will not be described in detail.
  • processing performed by hardware for example, processing performed by a modem or an interface card in the transmitting step (only performed by hardware). Not included).
  • the computer that executes the program may be singular or plural. That is, centralized processing may be performed, or distributed processing may be performed.
  • two or more communication means existing in one apparatus may be physically realized by one medium.
  • each process may be realized by centralized processing by a single device (system), or by distributed processing by a plurality of devices. May be.
  • the information system according to the present invention has the effect of being able to output information that is further added to information received from one or more remote locations, and is useful as a remote performance system, a remote theater system, etc. It is.
  • Information acquisition device 12 1, 2, 3 Information system 11 Information acquisition device 12, 21, 32 Information reproduction device 13 Information output device 22 Information aggregation device 34 Information synthesis device 111 Information acquisition unit 112 Acquisition information transmission unit 113 Second reproduction information reception unit 114 Second Reproduction information output unit 121 Reproduction source information storage unit 122 Acquisition information reception unit 123, 222 Reproduction information acquisition unit 124 Reproduction information transmission unit 214, 324 Temporary reproduction information transmission unit 125 Acquisition information output unit 131 First reproduction information reception unit 132 First Reproduction information output unit 221, 341 Reproduction information collection unit 342 Reproduction information synthesis unit 343 Third reproduction information transmission unit 1231 Information synthesis unit 1232 Reproduction information configuration unit

Abstract

再現情報を構成するための情報である再現元情報を格納し得る再現元情報格納部と、１以上の各情報取得装置から１以上の情報を受信する取得情報受信部と、取得情報受信部が受信した１以上の情報と、再現元情報とを用いて、再現情報を構成する再現情報取得部と、再現情報取得部が構成した再現情報を、１以上の情報出力装置に送出する再現情報送出部とを具備する情報再現装置により、１以上の遠隔地から受信した情報に、さらに価値を加えた情報を出力できる。

Description

情報システム、情報再現装置、情報生成方法、および記録媒体
　本発明は、１以上の遠隔地から受信した情報から新しい情報を構成し、出力する情報システム等に関するものである。
　従来、違和感の少ない遠隔地合奏を可能にした電子楽器があった（例えば、特許文献１参照）。本電子楽器は、ネットワークを介して異なる地点で合奏する電子楽器において、人間の動作に基づく入力楽音情報を、上記ネットワークを介して上記異なる地点に送信する送信手段と、上記異なる地点で合奏する電子楽器からの演奏情報を受信する受信手段と、上記入力楽音情報を所定の時間の遅延時間遅らせる遅延手段と、上記遅延手段により遅延された入力楽音情報と、上記受信手段で受信した演奏情報とから楽音信号を生成すると共に混合する楽音生成手段とを具備し、上記演奏情報からの楽音信号に基づく楽音が、上記電子楽器の演奏タイミングを提供することを特徴とする電子楽器である。
特開２００７－１７８８６０号公報（第１頁、第１図等）
　しかしながら、従来の電子楽器においては、１以上の遠隔地から受信した情報に、さらに価値を加えた情報を出力できなかった。
　また、遠隔地で情報を作り出している人に対して、視聴者等に対して出力される情報を提示できなかった。そのため、例えば、視聴者から離れた遠隔地で演奏する演奏者は、視聴者に提示されるコンテンツを感じながら演奏できなかった。
　本第一の発明の情報システムは、情報を取得する空間である１以上の各取得空間から情報を取得する１以上の情報取得装置と、取得空間とは異なる空間であり、再現する対象の空間である再現空間に対応する再現情報を構成する情報再現装置と、再現情報を出力する空間である１以上の各出力空間において、再現情報を出力する１以上の情報出力装置とを具備する情報システムであって、情報取得装置は、情報を取得する情報取得部と、情報を情報再現装置に送信する取得情報送信部とを具備し、情報再現装置は、再現情報を構成するための情報である再現元情報を格納し得る再現元情報格納部と、１以上の各情報取得装置から１以上の情報を受信する取得情報受信部と、取得情報受信部が受信した１以上の情報と、再現元情報とを用いて、再現情報を取得する再現情報取得部と、再現情報取得部が構成した再現情報を、１以上の情報出力装置に送出する再現情報送出部とを具備し、情報出力装置は、情報再現装置から再現情報を受信する第一再現情報受付部と、第一再現情報受付部が受信した再現情報を出力する第一再現情報出力部とを具備する情報システムである。
　かかる構成により、１以上の遠隔地から受信した情報に、さらに価値を加えた情報を出力できる。ことができる。
　また、本第二の発明の情報システムは、第一の発明に対して、２以上の各取得空間から情報を取得する２以上の情報取得装置を具備する情報システムであって、情報再現装置は、２以上の各情報取得装置から２以上の情報を受信する取得情報受信部と、取得情報受信部が受信した２以上の情報を出力する取得情報出力部と、取得情報出力部が出力した２以上の情報を有する再現情報を取得する再現情報取得部と、再現情報取得部が取得した再現情報を、１以上の情報出力装置に送出する再現情報送出部とを具備する情報システムである。
　かかる構成により、２以上の遠隔地から受信した情報を合成した情報を出力できる。
　また、本第三の発明の情報システムは、第一または第二の発明に対して、情報取得装置は、情報再現装置から再現情報を受信する第二再現情報受付部と、第二再現情報受付部が受信した再現情報を出力する第二再現情報出力部とをさらに具備し、情報再現装置の再現情報送出部は、再現情報取得部が構成した再現情報を、１以上の情報取得装置および１以上の情報出力装置に送出する情報システムである。
　かかる構成により、取得空間において、出力空間において出力される再現情報と同様の情報が出力できる。
　また、本第四の発明の情報システムは、第一から第三のいずれかの発明に対して、２以上の情報取得装置を具備する情報システムであって、再現情報取得部は、取得情報受信部が受信した２以上の情報を合成し、合成情報を取得する情報合成手段と、情報合成手段が取得した合成情報と、再現元情報とを用いて、再現情報を構成する再現情報構成手段とを具備する情報システムである。
　かかる構成により、２以上の遠隔地から受信した情報を合成し、かつ、さらに価値を加えた情報を出力できる。
　また、本第五の発明の情報システムは、第一から第四のいずれかの発明に対して、２以上の情報取得装置、１以上の情報再現装置、一の情報集約装置および１以上の情報出力装置を具備する請求項１または請求項２記載の情報システムであって、情報集約装置は、１以上の各情報取得装置から１以上の情報を受信する取得情報受信部と、１以上の情報再現装置から１以上の再現情報を受信する再現情報収集部と、取得情報受信部が受信した１以上の情報と、再現情報収集部が受信した１以上の再現情報とを用いて、出力される再現情報を取得する再現情報取得部と、１以上の情報出力装置、または１以上の情報出力装置および２以上の情報取得装置に、再現情報取得部が構成した再現情報を送信する再現情報送出部とを具備し、１以上の情報再現装置の再現情報送出部は、当該情報再現装置の再現情報取得部が構成した再現情報を情報集約装置に送信する情報システムである。
　かかる構成により、２以上の遠隔地から受信した情報を合成し、価値を加えた情報を出力する２以上の装置の情報を、さらに合成した情報を出力できる。
　また、本第六の発明の情報システムは、第五の発明に対して、情報集約装置は、再現情報を構成するための情報である再現元情報を格納し得る再現元情報格納部をさらに具備し、情報集約装置の再現情報取得部は、再現元情報と、取得情報受信部が受信した１以上の情報と、再現情報収集部が受信した１以上の再現情報とを用いて、出力される再現情報を構成する情報システムである。
　かかる構成により、２以上の遠隔地から受信した情報を合成し、価値を加えた情報を出力する２以上の装置の情報を、さらに合成した情報を出力できる。
　また、本第七の発明の情報システムは、第一から第六のいずれかの発明に対して、２以上の情報取得装置と、２以上の情報再現装置と、情報合成装置と、１以上の情報出力装置とを具備する情報システムであって、情報再現装置の再現情報送出部は、再現情報取得部が構成した再現情報を、情報合成装置に送信し、情報合成装置は、２以上の各情報再現装置から再現情報を受信する再現情報収集部と、再現情報収集部が受信した２以上の再現情報を合成し、出力される再現情報を構成する再現情報合成部と、１以上の情報出力装置、または１以上の情報取得装置および１以上の情報出力装置に、再現情報合成部が構成した再現情報を送出する第三再現情報送出部とを具備する情報システムである。
　本発明による情報システムによれば、１以上の遠隔地から受信した情報に、さらに価値を加えた情報を出力できる。
実施の形態１における情報システムの概念図 同情報システムのブロック図 同情報取得装置の動作について説明するフローチャート 同情報再現装置の動作について説明するフローチャート 同再現情報取得処理の第一の例について説明するフローチャート 同再現情報取得処理の第二の例について説明するフローチャート 同再現情報取得処理の第三の例について説明するフローチャート 実施の形態２における情報システムの概念図 同情報システムのブロック図 同情報再現装置の動作について説明するフローチャート 同再現情報合成処理について説明するフローチャート 実施の形態３における情報システムの概念図 同情報システムのブロック図 同情報合成装置の動作について説明するフローチャート 同コンピュータシステムの概観図 同コンピュータシステムのブロック図
　以下、情報システム等の実施形態について図面を参照して説明する。なお、実施の形態において同じ符号を付した構成要素は同様の動作を行うので、再度の説明を省略する場合がある。
　（実施の形態１）
　本実施の形態において、１以上の取得空間で取得された情報を再現空間に送信し、再現空間で、さらに価値を加えて、再現情報を取得し、１以上の出力空間で再現情報を出力する情報システムについて説明する。ここで、空間とは、現実の場所、領域でも良いし、仮想的な空間でも良い。取得空間とは、情報を取得する空間である。取得空間は、楽器が演奏される空間、演劇が行われる空間等、情報が生成される空間であることが好適である。また、再現空間は、出力される情報である再現情報が取得される空間であり、取得空間とは異なる空間であり、仮想的な空間でも良い。再現情報とは、例えば、情報システムの構成者（人）が、再現したいと考える情報である。また、出力空間とは、情報が出力される空間であり、再現情報を視聴する空間の場合には、視聴空間と言っても良い。
　図１は、本実施の形態における情報システム１の概念図である。情報システム１は、１以上の情報取得装置１１、情報再現装置１２、および１以上の情報出力装置１３を備える。
　図２は、本実施の形態における情報システム１のブロック図である。
　情報取得装置１１は、情報取得部１１１、取得情報送信部１１２、第二再現情報受付部１１３、および第二再現情報出力部１１４を備える。なお、情報取得装置１１は、第二再現情報受付部１１３、および第二再現情報出力部１１４を具備しない場合もあり得る。
　情報再現装置１２は、再現元情報格納部１２１、取得情報受信部１２２、再現情報取得部１２３、再現情報送出部１２４、および取得情報出力部１２５を備える。なお、情報再現装置１２は、再現元情報格納部１２１を具備しない場合もあり得る。
　再現情報取得部１２３は、例えば、情報合成手段１２３１、および再現情報構成手段１２３２を備える。なお、再現情報取得部１２３は、他の構成でも良い。
　情報出力装置１３は、第一再現情報受付部１３１、および第一再現情報出力部１３２を備える。
　情報取得装置１１を構成する情報取得部１１１は、情報を取得する。ここで、情報取得部１１１が取得する情報は、音情報、映像情報、トリガ情報、またはこれらの組み合わせの情報などである。音情報は、例えば、音声、音楽、演奏情報、効果音などである。映像情報は、静止画でも動画でも良い。トリガ情報とは、楽器の演奏内容を示す情報であり、例えば、音識別子とタイミング識別子の集合とからなる情報である。トリガ情報は、さらに楽器識別子を有しても良い。情報取得部１１１は、マイク、カメラ、ビデオカメラ、楽器の演奏信号を取得する装置などの１以上の組み合わせにより実現され得る。
　取得情報送信部１１２は、情報取得部１１１が取得した情報を情報再現装置１２に送信する。取得情報送信部１１２は、情報の送信先である情報再現装置１２の送信先情報（ＩＰアドレス等）を予め保持している。取得情報送信部１１２は、通常、無線または有線の通信手段で実現されるが、放送手段で実現されても良い。
　第二再現情報受付部１１３は、情報再現装置１２から再現情報を受信する。再現情報は、情報再現装置１２が構成した情報であり、その詳細については、後述する。第二再現情報受付部１１３は、通常、無線または有線の通信手段で実現されるが、放送を受信する手段で実現されても良い。
　第二再現情報出力部１１４は、第二再現情報受付部１１３が受信した再現情報を出力する。ここで、出力とは、ディスプレイへの表示、プロジェクターを用いた投影、プリンタでの印字、音出力、外部の装置への送信、記録媒体への蓄積、他の処理装置や他のプログラムなどへの処理結果の引渡しなどを含む概念である。第二再現情報出力部１１４は、ディスプレイやスピーカー等の出力デバイスを含むと考えても含まないと考えても良い。第二再現情報出力部１１４は、出力デバイスのドライバーソフトまたは、出力デバイスのドライバーソフトと出力デバイス等で実現され得る。
　情報再現装置１２を構成する再現元情報格納部１２１は、再現情報を構成するための情報である再現元情報を格納し得る。再現元情報は、例えば、ルックアップテーブル、映像情報、音情報、これらの組み合わせ等である。
　ルックアップテーブルは、１または２以上の対応情報を有する。対応情報は、１以上の第一の情報の全部または一部分と、１以上の第二の情報の全部または一部分との対応を取るための情報である。なお、第一の情報と第二の情報は、例えば、画像や音情報などである。ルックアップテーブルが有する対応情報が一つの場合、かかる対応情報は、例えば、画像や音情報などの情報を変換する演算式や、情報を変換する演算式に与える１以上のパラメータ群である。対応情報は、例えば、時空間ブロックの画素値の中央値を算出する演算式などでも良い。なお、第一の情報と第二の情報が画像である場合、第一の情報は第一の画像とも言い、第二の情報は第二の画像とも言う。　
　また、ルックアップテーブルに対応情報が２以上含まれる場合、対応情報は、情報の特徴量の集合である特徴量ベクトルに対応付けられていることは好適である。
　前記第二の画像とは、脳が、質感、遠近感、存在感、臨場感、重量感、温もり感、ひんやり感、スピード感、躍動感、動きの滑らかさ、新鮮な感じ、高級感などのうちの１以上の属性を、前記第一の画像よりもより感じる画像である。なお、属性は画像によって異なる。なお、質感とは、材質感、光沢感、透明感、ふんわり感、しっとり感など、画像に含まれる対象の質感である。また、遠近感とは、解像感、立体感、奥行き感、空気感などとも言える。
　前記第二の情報は、例えば、１以上の第一の情報と異なる環境で取得され得る１以上の情報である。つまり、かかる場合、例えば、１以上の第一の情報と、１以上の第二の情報は、情報を取得する環境が異なる。異なる環境とは、例えば、都市部と郊外（田舎と言っても良い。）である。かかる場合、第一の情報は、雑音の多い都市部の路上で一の曲を演奏した音楽であり、第二の情報は、雑音がほとんどなく、例えば、鳥のさえずりが聞こえるような環境、または１／ｆのゆらぎの風が吹いているような環境で、前記一の曲を演奏した音楽である。
　また、前記第二の情報は、例えば、１以上の第一の画像と異なる他の環境で撮影され得る１以上の画像である。なお、他環境とは、一の環境とは異なる環境であり、一の環境より目的に合致した画像を撮影できる環境である。他環境とは、例えば、以下の（１）から（９）のような環境である。（１）一の環境より照明（光源）の光量が多い環境、（２）一の環境と比較して、画像上のオブジェクトの陰が良く表出する光源の位置の環境、（３）一の環境と比較して、画像上のオブジェクトの立体感が良く表出する光源の位置の環境、（４）一の環境と比較して、画像上のオブジェクトの立体感が良く表出するカメラ位置の環境、（５）一の環境と照明の色が異なる環境、（６）一の環境と異なる天候の環境、（７）一の環境と異なる温度や湿度の環境、（８）一の環境と異なる被写界深度の環境、（９）一の環境と異なるシャッター速度の環境などである。つまり、かかる場合、一の環境と他環境とでは、例えば、光量、光源の位置、光源の色、カメラの位置、カメラの設定などの撮影環境が異なる。また、環境とは、通常、撮影環境であるが、画像を取得する環境に関するものであれば何でも良い。
　再現元情報格納部１２１は、不揮発性の記録媒体が好適であるが、揮発性の記録媒体でも実現可能である。再現元情報格納部１２１に再現元情報が記憶される過程は問わない。例えば、記録媒体を介して再現元情報が再現元情報格納部１２１で記憶されるようになってもよく、通信回線等を介して送信された再現元情報が再現元情報格納部１２１で記憶されるようになってもよく、あるいは、入力デバイスを介して入力された再現元情報が再現元情報格納部１２１で記憶されるようになってもよい。
　取得情報受信部１２２は、１以上の各情報取得装置１１から１以上の情報を受信する。取得情報受信部１２２は、通常、無線または有線の通信手段で実現されるが、放送を受信する手段で実現されても良い。
　再現情報取得部１２３は、取得情報受信部１２２が受信した１以上の情報と、再現元情報とを用いて、再現情報を取得する。再現情報取得部１２３は、例えば、１または２以上の対応情報のうちのいずれかの対応情報を用いて、取得情報受信部１２２が受信した１以上の情報の全部または一部分に対応する１以上の第二の情報の全部または一部分を取得し、取得した１以上の第二の情報の全部または一部分から再現情報を取得する。なお、かかる場合、再現元情報はルックアップデーブルである。再現情報取得部１２３は、通常、ＭＰＵやメモリ等から実現され得る。再現情報取得部１２３の処理手順は、通常、ソフトウェアで実現され、当該ソフトウェアはＲＯＭ等の記録媒体に記録されている。但し、ハードウェア（専用回路）で実現しても良い。
　また、再現情報取得部１２３は、後述する取得情報出力部１２５が出力した２以上の情報を有する再現情報を取得しても良い。かかる場合、再現情報取得部１２３は、例えば、マイクとそのドライバーソフトにより実現され得る。
　再現情報取得部１２３を構成する情報合成手段１２３１は、取得情報受信部１２２が受信した２以上の情報を合成し、合成情報を取得する。なお、２以上の情報の合成とは、例えば、以下の（１）から（３）等の処理である。（１）２以上の情報がすべて画像である場合、２以上の画像を重ね合わせる処理、２以上の画像の各画像のα値を変更した後に２以上の画像を重ね合わせる処理、２以上の画像から特定のオブジェクト（例えば、人や顔）を認識して抽出し、抽出したオブジェクトを含む画像を構成する処理などである。（２）２以上の情報がすべて音情報である場合、タイミングを合わせて合成する処理等である。（３）２以上の情報が異なる種類の情報である場合、２以上の情報を重畳したり、タイミングを合わせてマルチメディア情報を構成したりする処理等である。
　再現情報構成手段１２３２は、情報合成手段１２３１が取得した合成情報と、再現元情報とを用いて、再現情報を構成する。
　再現情報送出部１２４は、再現情報取得部１２３が取得した再現情報を送出する。再現情報送出部１２４は、再現情報取得部１２３が取得した再現情報を、１以上の情報出力装置１３に送信する。再現情報送出部１２４は、再現情報取得部１２３が取得した再現情報を、１以上の情報取得装置１１および１以上の情報出力装置１３に送信しても良い。再現情報送出部１２４は、再現情報の送信先を特定する情報（例えば、各装置のＩＰアドレス等）を保持している、とする。再現情報送出部１２４は、通常、無線または有線の通信手段で実現されるが、放送手段で実現されても良い。また、再現情報送出部１２４は、再現情報取得部１２３が取得した再現情報を、１以上の記録媒体（図示しない）に書き込んでも良い。つまり、送出とは、送信、記録媒体への蓄積、他の装置（通常、出力装置）への引き渡し等を含む概念である。
　取得情報出力部１２５は、取得情報受信部１２２が受信した２以上の情報を出力する。ここでの出力とは、例えば、音出力である。取得情報出力部１２５は、例えば、スピーカー等により、実現され得る。
　情報出力装置１３を構成する第一再現情報受付部１３１は、情報再現装置１２から再現情報を受信する。第一再現情報受付部１３１は、情報再現装置１２で取得された再現情報が記録された記録媒体から、再現情報を読み出しても良い。第一再現情報受付部１３１は、通常、無線または有線の通信手段で実現されるが、放送を受信する手段で実現されても良い。また、受信とは、前記記録媒体からの読み出しも含む。
　第一再現情報出力部１３２は、第一再現情報受付部１３１が受信した再現情報を出力する。第一再現情報出力部１３２は、ディスプレイやスピーカー等の出力デバイスを含むと考えても含まないと考えても良い。第一再現情報出力部１３２は、出力デバイスのドライバーソフトまたは、出力デバイスのドライバーソフトと出力デバイス等で実現され得る。
　次に、情報システム１の動作について説明する。まず、図３のフローチャートを用いて、情報取得装置１１の動作について説明する。
　（ステップＳ３０１）情報取得部１１１は、情報を取得する。
　（ステップＳ３０２）取得情報送信部１１２は、ステップＳ３０１で取得された情報を情報再現装置１２に送信する。
　（ステップＳ３０３）第二再現情報受付部１１３は、情報再現装置１２から再現情報を受信したか否かを判断する。再現情報を受信すればステップＳ３０４に行き、再現情報を受信しなければステップＳ３０１に戻る。なお、ここで、再現情報を受信しない場合、受信するまでＷＡＩＴしても良い。
　（ステップＳ３０４）第二再現情報出力部１１４は、ステップＳ３０３で受信された再現情報を出力する。ステップＳ３０１に戻る。
　なお、図３のフローチャートにおいて、電源オフや処理終了の割り込みにより処理は終了する。
　次に、図４のフローチャートを用いて、情報再現装置１２の動作について説明する。
　（ステップＳ４０１）取得情報受信部１２２は、すべての情報取得装置１１から情報を受信したか否かを判断する。すべての情報取得装置１１から情報を受信すればステップＳ４０２に行き、受信しなければステップＳ４０１に戻る。
　（ステップＳ４０２）再現情報取得部１２３は、再現元情報格納部１２１から再現元情報を読み出す。
　（ステップＳ４０３）再現情報取得部１２３は、ステップＳ４０２で読み出した再現元情報と、ステップＳ４０１で受信された１以上の情報とを用いて、再現情報を取得する。再現情報を取得する再現情報取得処理について、図５、図６、および図７のフローチャートを用いて説明する。
　（ステップＳ４０４）再現情報送出部１２４は、ステップＳ４０３で構成された再現情報を１以上の情報取得装置１１および１以上の情報出力装置１３に送出する。ステップＳ４０１に戻る。
　なお、図４のフローチャートにおいて、電源オフや処理終了の割り込みにより処理は終了する。
　次に、ステップＳ４０３の再現情報取得処理の第一の例について、図５のフローチャートを用いて説明する。
　（ステップＳ５０１）再現情報取得部１２３は、カウンタｉに１を代入する。
　（ステップＳ５０２）再現情報取得部１２３は、受信された情報の中に、ｉ番目の情報が存在するか否かを判断する。ｉ番目の情報が存在すればステップＳ５０３に行き、ｉ番目の情報が存在しなければステップＳ５０８に行く。なお、ｉ番目の情報とは、ｉ番目の情報取得装置１１から送信された情報である。
　（ステップＳ５０３）再現情報取得部１２３は、ｉ番目の情報の１以上の特徴量を抽出する。なお、情報が画像（動画、静止画の両方を含む）の場合、特徴量は、例えば、１以上の画像の一部の特徴量である近傍特徴量と、１以上の画像全体の特徴量である全体特徴量とがある。近傍特徴量には、例えば、画素値、アクティビティ、時空間相関、動きベクトル、周波数分布などがある。また、アクティビティとは、例えば、複数の画素の最大値および最小値、ダイナミックレンジ（ＤＲ）、複数の画素の間の差分値などである。複数の画素の間の差分値は、空間内の複数画素間の差分値でも良いし、時間方向の複数画素間の差分値でも良いし、空間内および時間方向の複数画素間の差分値でも良い。また、全体特徴量には、例えば、画像全体の画素値分布、画像全体の動きベクトル分布、１または２以上の画像全体の時空間相関、画像全体のノイズ量、画像フォーマット、画像全体の編集に関する情報（ＰｉｎＰであるか否か、ＰｏｕｔＰであるか否か、テロップの有無など）、１以上の画像であるコンテンツに関するコンテンツ情報、パターン検出結果（顔など）などである。ここで、コンテンツ情報とは、例えば、電子番組表（ＥＰＧ）が有する番組のジャンル、タイトル、出演者名等である。なお、１以上の特徴量を、適宜、特徴量ベクトルとも言う。
　また、情報が音情報（音楽、音声など）の場合、特徴量は、例えば、メル周波数ケプストラム係数 (mel-frequency cepstral coefficient; MFCC) に基づく特徴量、楽音特徴量（音高、強度、発音時刻、音価など）である。
　なお、画像や音情報から１以上の特徴量を抽出する技術は公知技術であるので、詳細な説明を省略する。
　（ステップＳ５０４）再現情報取得部１２３は、ステップＳ５０３で取得した１以上の特徴量（特徴量ベクトル）に最も距離が近い特徴量ベクトルに対応する対応情報を、ルックアップデーブルから取得する。
　（ステップＳ５０５）再現情報取得部１２３は、ステップＳ５０４で取得した対応情報（例えば、演算式）をｉ番目の情報に適用し、新しい情報を生成する。
　（ステップＳ５０６）再現情報取得部１２３は、ステップＳ５０５で生成した情報を、図示しないバッファに一時蓄積する。
　（ステップＳ５０７）再現情報取得部１２３は、カウンタｉを１、インクリメントする。ステップＳ５０２に戻る。
　（ステップＳ５０８）再現情報取得部１２３は、バッファに蓄積されている１以上の情報から再現情報を構成する。バッファに蓄積されている情報が２以上の場合、再現情報取得部１２３は、例えば、２以上の情報を合成し、再現情報を取得する。また、バッファに蓄積されている情報が一つの場合、再現情報取得部１２３は、バッファに蓄積されている情報を再現情報として取得する。上位処理にリターンする。
　次に、ステップＳ５０３の再現情報取得処理の第二の例について、図６のフローチャートを用いて説明する。
　（ステップＳ６０１）再現情報取得部１２３は、再現元情報格納部１２１から再現元情報（ルックアップデーブル）を読み出す。
　（ステップＳ６０２）再現情報取得部１２３は、ｎ（ｎ＞＝１）の情報を合成する。なお、「ｎ＝１」の場合、再現情報取得部１２３は、その情報を取得するだけである。また、ｎの情報とは、ｎ個の情報取得装置１１から受信された情報である。
　（ステップＳ６０３）再現情報取得部１２３は、ステップＳ６０２で取得した情報の１以上の特徴量を取得する。
　（ステップＳ６０４）再現情報取得部１２３は、ステップＳ６０３で取得した１以上の特徴量（特徴量ベクトル）に最も距離が近い特徴量ベクトルに対応する対応情報を、ルックアップデーブルから取得する。
　（ステップＳ６０５）再現情報取得部１２３は、ステップＳ６０４で取得した対応情報（例えば、演算式）を、ステップＳ６０２で取得した情報に適用し、再現情報を構成する。上位処理にリターンする。
　次に、ステップＳ６０３の再現情報取得処理の第三の例について、図７のフローチャートを用いて説明する。
　（ステップＳ７０１）再現情報取得部１２３は、再現元情報格納部１２１から再現元情報（例えば、映像）を読み出す。
　（ステップＳ７０２）再現情報取得部１２３は、ｎ（ｎ＞＝１）の情報を合成する。なお、「ｎ＝１」の場合、再現情報取得部１２３は、その情報を取得するだけである。
　（ステップＳ７０３）再現情報取得部１２３は、ステップＳ７０１で読み出した再現元情報と、ステップＳ７０２で取得した情報とからなる再現情報を構成する。上位処理にリターンする。
　なお、図７のフローチャートにおいて、１以上の情報取得装置１１から送信される情報が同一種類の情報（例えば、音情報）であり、再現元情報が情報取得装置１１から送信される情報とは異なる種類の情報（例えば、映像情報）である場合に有効である。
　また、再現情報取得処理は、図５から図７のフローチャートを用いて説明した処理に限られない。再現情報取得処理は、取得情報出力部１２５が出力した２以上の情報を、マイクにより集音する処理等でも良い。
　以下、本実施の形態における情報システム１の具体的な動作の例について説明する。情報システム１の概念図は図１である。以下、４つの具体例について説明する。
（具体例１）
　今、取得空間は３つであり、それぞれ遠隔地である。また、第一の取得空間では、演奏者１がピアノを演奏し、第一の情報取得装置１１は、演奏されたピアノの音楽の音情報を取得するものとする。また、第二の取得空間では、演奏者２がバイオリンを演奏し、第二の情報取得装置１１は、演奏されたバイオリンの音楽の音情報を取得するものとする。さらに、第三の取得空間では、演奏者３がトランペットを演奏し、第二の情報取得装置１１は、演奏されたトランペットの音楽の音情報を取得するものとする。
　また、情報再現装置１２の再現元情報格納部１２１は、音楽情報（音情報の一種）を変換するルックアップテーブルを格納している。このルックアップテーブルは、ある空間で音楽を演奏しているように音楽情報を変換する対応情報の集合である。つまり、ルックアップテーブルを構成する対応情報は、各楽器の低音がより反響する音になるように音情報を変換するための演算式や、演算式に与えるパラメータ群である。ルックアップテーブルは、対応情報と特徴量ベクトルの組を２以上格納している、とする。特徴量ベクトルは、例えば、特徴量「音量」と特徴量「周波数」とを有する。
　また、出力空間は３つであり、３人の聴者が３人の演奏が合成された演奏を聴くもの、とする。
　かかる状況において、情報再現装置１２から、３つの情報取得装置１１に、演奏開始のトリガを送信し、情報取得装置１１はトリガを受信し、演奏開始の合図を各取得空間に出力する。
　そして、演奏者１、演奏者２、および演奏者３は、それぞれ担当の楽器を演奏する。そして、各取得空間の情報取得装置１１の情報取得部１１１は、演奏により発せられた音情報を取得する。次に、各取得空間の情報取得装置１１の取得情報送信部１１２は、音情報を情報再現装置１２に送信する。
　次に、情報再現装置１２の取得情報受信部１２２は、３つの情報取得装置１１から音情報を受信する。
　次に、再現情報取得部１２３は、第一の情報取得装置１１から受信した音情報を処理単位（例えば、０．１ｍｓの音情報）に区切り、各処理単位の１以上の特徴量（特徴量ベクトル）を取得する。次に、再現情報取得部１２３は、取得した各処理単位の特徴量ベクトルに最も距離が近い特徴量ベクトルに対応する対応情報を、処理単位ごとに、ルックアップテーブルから取得する。そして、再現情報取得部１２３は、処理単位ごとに、各処理単位に対して取得した対応情報を適用し、新しい音情報（「第一の新音情報」という。）を生成する。
　また、再現情報取得部１２３は、第二の情報取得装置１１から受信した音情報を処理単位に区切り、各処理単位の１以上の特徴量（特徴量ベクトル）を取得する。次に、再現情報取得部１２３は、取得した各処理単位の特徴量ベクトルに最も距離が近い特徴量ベクトルに対応する対応情報を、処理単位ごとに、ルックアップテーブルから取得する。そして、再現情報取得部１２３は、処理単位ごとに、各処理単位に対して取得した対応情報を適用し、新しい音情報（「第二の新音情報」という。）を生成する。
　次に、再現情報取得部１２３は、第三の情報取得装置１１から受信した音情報を処理単位に区切り、各処理単位の１以上の特徴量（特徴量ベクトル）を取得する。次に、再現情報取得部１２３は、取得した各処理単位の特徴量ベクトルに最も距離が近い特徴量ベクトルに対応する対応情報を、処理単位ごとに、ルックアップテーブルから取得する。そして、再現情報取得部１２３は、処理単位ごとに、各処理単位に対して取得した対応情報を適用し、新しい音情報（「第三の新音情報」という。）を生成する。
　次に、再現情報取得部１２３は、第一の新音情報と第二の新音情報と第三の新音情報とを、タイミングの同期をとって、合成する。かかる合成により取得された音情報が再現情報である。なお、タイミングの同期をとる方法は、例えば、演奏の開始時点を合わせる等、公知の方法で可能であるので、詳細な説明を省略する。
　次に、情報再現装置１２の再現情報送出部１２４は、取得された再現情報を、３つの情報取得装置１１、および３つの情報出力装置１３に送出する。
　そして、３つの各情報取得装置１１の第二再現情報受付部１１３は、再現情報を受信する。次に、第二再現情報出力部１１４は、受信された再現情報を出力する。かかる処理により、聴者が聴く音楽を、各々遠隔に居る３人の演奏者が聞きながら、演奏をすることができる。
　また、３つの各情報出力装置１３の第一再現情報受付部１３１は、再現情報を受信する。次に、第一再現情報出力部１３２は、受信された再現情報を出力する。かかる処理により、聴者は、単に合成された音楽情報ではなく、合成された音楽情報にさらに価値が加えられた音楽情報を聴くことができる。
　そして、演奏が終了するまで、または、終了の指示が、情報取得装置１１または情報再現装置１２等から入力されるまで、上記の処理が繰り返される。
（具体例２）
　具体例２において、具体例１と比較して、情報再現装置１２の再現元情報格納部１２１には、ルックアップテーブルに加えて、再現空間で撮影した映像が格納されている。そして、再現情報には、合成され、さらに価値が高まった音楽情報に加えて、映像が含まれる。なお、取得空間と出力空間の数は、具体例１と同じである。
　かかる状況において、情報再現装置１２から、３つの情報取得装置１１に、演奏開始のトリガを送信し、情報取得装置１１はトリガを受信し、演奏開始の合図を各取得空間に出力する。
　そして、演奏者１、演奏者２、および演奏者３は、それぞれ担当の楽器を演奏する。そして、各取得空間の情報取得装置１１の情報取得部１１１は、演奏により発せられた音情報を取得する。次に、各取得空間の情報取得装置１１の取得情報送信部１１２は、音情報を情報再現装置１２に送信する。
　次に、情報再現装置１２の取得情報受信部１２２は、３つの情報取得装置１１から音情報を受信する。
　次に、再現情報取得部１２３は、第一の情報取得装置１１から受信した音情報を処理単位に区切り、各処理単位の１以上の特徴量（特徴量ベクトル）を取得する。次に、再現情報取得部１２３は、取得した各処理単位の特徴量ベクトルに最も距離が近い特徴量ベクトルに対応する対応情報を、処理単位ごとに、ルックアップテーブルから取得する。そして、再現情報取得部１２３は、処理単位ごとに、各処理単位に対して取得した対応情報を適用し、新しい音情報（「第一の新音情報」という。）を生成する。
　また、再現情報取得部１２３は、第二の情報取得装置１１から受信した音情報を処理単位に区切り、各処理単位の１以上の特徴量（特徴量ベクトル）を取得する。次に、再現情報取得部１２３は、取得した各処理単位の特徴量ベクトルに最も距離が近い特徴量ベクトルに対応する対応情報を、処理単位ごとに、ルックアップテーブルから取得する。そして、再現情報取得部１２３は、処理単位ごとに、各処理単位に対して取得した対応情報を適用し、新しい音情報（「第二の新音情報」という。）を生成する。
　次に、再現情報取得部１２３は、第三の情報取得装置１１から受信した音情報を処理単位に区切り、各処理単位の１以上の特徴量（特徴量ベクトル）を取得する。次に、再現情報取得部１２３は、取得した各処理単位の特徴量ベクトルに最も距離が近い特徴量ベクトルに対応する対応情報を、処理単位ごとに、ルックアップテーブルから取得する。そして、再現情報取得部１２３は、処理単位ごとに、各処理単位に対して取得した対応情報を適用し、新しい音情報（「第三の新音情報」という。）を生成する。
　次に、再現情報取得部１２３は、第一の新音情報と第二の新音情報と第三の新音情報とを、タイミングの同期をとって、合成する。かかる合成により取得された音情報が再現情報を構成する。
　次に、再現情報取得部１２３は、再現元情報格納部１２１に格納されている映像中の一部の映像を取得する。なお、この一部の映像は、合成により取得された音情報と同様の出力時間を有する映像であり、最近に取得された映像の次の映像である。
　そして、再現情報取得部１２３は、合成により取得された音情報と取得した映像とを有する再現情報を構成する。
　次に、情報再現装置１２の再現情報送出部１２４は、取得された再現情報を、３つの情報取得装置１１、および３つの情報出力装置１３に送出する。
　そして、３つの各情報取得装置１１の第二再現情報受付部１１３は、再現情報を受信する。次に、第二再現情報出力部１１４は、受信された再現情報を構成する音情報をスピーカーから出力する。また、第二再現情報出力部１１４は、受信された再現情報を構成する映像をディスプレイに出力する。かかる処理により、聴者が聴く音楽を、各々遠隔に居る３人の演奏者が聞きながら、かつ、再現空間の雰囲気を感じながら演奏をすることができる。
　また、３つの各情報出力装置１３の第一再現情報受付部１３１は、再現情報を受信する。次に、第一再現情報出力部１３２は、受信された再現情報を構成する音情報をスピーカーから出力する。また、第一再現情報出力部１３２は、受信された再現情報を構成する映像をディスプレイに出力する。かかる処理により、視聴者は、単に合成された音楽情報ではなく、合成された音楽情報にさらに価値が加えられた音楽情報を聴くことができる。また、視聴者は、再現空間の雰囲気を感じながら演奏を聴くことができる。
　そして、演奏が終了するまで、または、終了の指示が、情報取得装置１１または情報再現装置１２等から入力されるまで、上記の処理が繰り返される。
（具体例３）
　具体例３において、各取得空間の情報取得装置１１の情報取得部１１１が取得する情報は、トリガ情報である。ここで、トリガ情報は、楽器の音の大きさ、音の識別情報、音を出力したタイミング情報を有する。また、トリガ情報は、楽器の識別子を有しても良い。
　また、情報再現装置１２の再現元情報格納部１２１には、再現空間で撮影した映像が格納されている。
　なお、具体例３において、取得空間と出力空間の数は、具体例１と同じである。
　かかる状況において、情報再現装置１２から、３つの情報取得装置１１に、演奏開始のトリガを送信し、情報取得装置１１はトリガを受信し、演奏開始の合図を各取得空間に出力する。
　そして、演奏者１、演奏者２、および演奏者３は、それぞれ担当の楽器を演奏する。そして、各取得空間の情報取得装置１１の情報取得部１１１は、演奏により発せられた音情報を取得し、当該音情報をトリガ情報に変換する。なお、情報取得部１１１は、楽器と通信可能であり、直接、楽器からトリガ情報を取得しても良い。次に、各取得空間の情報取得装置１１の取得情報送信部１１２は、トリガ情報を情報再現装置１２に送信する。
　次に、情報再現装置１２の取得情報受信部１２２は、３つの情報取得装置１１からトリガ情報を受信する。
　次に、再現情報取得部１２３は、３つの各情報取得装置１１から受信したトリガ情報を音情報に変換し、第一の音情報と第二の音情報と第三の音情報とを得る。
　次に、再現情報取得部１２３は、第一の音情報と第二の音情報と第三の音情報とを、タイミングの同期をとって、合成する。かかる合成により取得された音情報が再現情報を構成する。
　次に、再現情報取得部１２３は、再現元情報格納部１２１に格納されている映像中の一部の映像を取得する。なお、この一部の映像は、合成により取得された音情報と同様の出力時間を有する映像であり、最近に取得された映像の次の映像である。
　そして、再現情報取得部１２３は、合成により取得された音情報と取得した映像とを有する再現情報を構成する。
　次に、情報再現装置１２の再現情報送出部１２４は、取得された再現情報を、３つの情報取得装置１１、および３つの情報出力装置１３に送出する。
　そして、３つの各情報取得装置１１の第二再現情報受付部１１３は、再現情報を受信する。次に、第二再現情報出力部１１４は、受信された再現情報を構成する音情報をスピーカーから出力する。また、第二再現情報出力部１１４は、受信された再現情報を構成する映像をディスプレイに出力する。かかる処理により、聴者が聴く音楽を、各々遠隔に居る３人の演奏者が聞きながら、かつ、再現空間の雰囲気を感じながら演奏をすることができる。
　また、３つの各情報出力装置１３の第一再現情報受付部１３１は、再現情報を受信する。次に、第一再現情報出力部１３２は、受信された再現情報を構成する音情報をスピーカーから出力する。また、第一再現情報出力部１３２は、受信された再現情報を構成する映像をディスプレイに出力する。かかる処理により、視聴者は、単に合成された音楽情報ではなく、合成された音楽情報にさらに価値が加えられた音楽情報を聴くことができる。また、視聴者は、再現空間の雰囲気を感じながら演奏を聴くことができる。
　そして、演奏が終了するまで、または、終了の指示が、情報取得装置１１または情報再現装置１２等から入力されるまで、上記の処理が繰り返される。
（具体例４）
　具体例４において、具体例３と比較して、情報再現装置１２の再現元情報格納部１２１には、再現空間で撮影した映像に加えて、ルックアップテーブルが格納されている。このルックアップテーブルには、トリガ情報と取得される音情報との対応を示す対応情報が２以上、格納されている。対応情報は、トリガ情報と取得される音情報の組でも良いし、トリガ情報と、音情報を生成するための演算式でも良い。また、ルックアップテーブルは、２以上の対応情報と、各対応情報に対応するトリガ情報とを有しても良い。なお、対応情報は、音情報の品質を向上する情報である、とする。また、取得空間と出力空間の数は、具体例１と同じである。
　かかる状況において、情報再現装置１２から、３つの情報取得装置１１に、演奏開始のトリガを送信し、情報取得装置１１はトリガを受信し、演奏開始の合図を各取得空間に出力する。
　そして、演奏者１、演奏者２、および演奏者３は、それぞれ担当の楽器を演奏する。そして、各取得空間の情報取得装置１１の情報取得部１１１は、演奏により発せられた音情報を取得し、当該音情報をトリガ情報に変換する。なお、情報取得部１１１は、楽器と通信可能であり、直接、楽器からトリガ情報を取得しても良い。次に、各取得空間の情報取得装置１１の取得情報送信部１１２は、トリガ情報を情報再現装置１２に送信する。
　次に、情報再現装置１２の取得情報受信部１２２は、３つの情報取得装置１１からトリガ情報を受信する。
　次に、再現情報取得部１２３は、３つの各情報取得装置１１から受信した各トリガ情報をキーとしてルックアップテーブルを検索し、各トリガ情報に対応する対応情報を取得する。そして、再現情報取得部１２３は、対応情報を用いて、各情報取得装置１１からのトリガ情報に対応する音情報を取得する。そして、再現情報取得部１２３は、第一の音情報と第二の音情報と第三の音情報とを得た、とする。
　次に、再現情報取得部１２３は、第一の音情報と第二の音情報と第三の音情報とを、タイミングの同期をとって、合成する。かかる合成により取得された音情報が再現情報である。
　次に、情報再現装置１２の再現情報送出部１２４は、取得された再現情報を、３つの情報取得装置１１、および３つの情報出力装置１３に送出する。
　そして、３つの各情報取得装置１１の第二再現情報受付部１１３は、再現情報を受信する。次に、第二再現情報出力部１１４は、受信された再現情報を構成する音情報をスピーカーから出力する。かかる処理により、聴者が聴く音楽を、各々遠隔に居る３人の演奏者が聞きながら演奏をすることができる。
　また、３つの各情報出力装置１３の第一再現情報受付部１３１は、再現情報を受信する。次に、第一再現情報出力部１３２は、受信された再現情報を構成する音情報をスピーカーから出力する。かかる処理により、視聴者は、単に合成された音楽情報ではなく、合成された音楽情報にさらに価値が加えられた音楽情報を聴くことができる。
　そして、演奏が終了するまで、または、終了の指示が、情報取得装置１１または情報再現装置１２等から入力されるまで、上記の処理が繰り返される。
　以上、本実施の形態によれば、１以上の遠隔地から受信した情報に、さらに価値を加えた情報を出力できる。
　また、本実施の形態によれば、取得空間において、出力空間において出力される再現情報と同様の情報が出力できる。その結果、情報を作り出す人（例えば、演奏者）は、最終的に視聴者に対して出力される情報を視聴しながら、情報を作り出す（例えば、演奏する）ことができる。
　なお、本実施の形態における処理は、ソフトウェアで実現しても良い。そして、このソフトウェアをソフトウェアダウンロード等により配布しても良い。また、このソフトウェアをＣＤ－ＲＯＭなどの記録媒体に記録して流布しても良い。なお、このことは、本明細書における他の実施の形態においても該当する。なお、本実施の形態における情報再現装置１２を実現するソフトウェアは、以下のようなプログラムである。つまり、このプログラムは、記憶媒体に再現情報を構成するための情報である再現元情報を格納しており、コンピュータを、前記１以上の各情報取得装置から１以上の情報を受信する取得情報受信部と、前記取得情報受信部が受信した１以上の情報と、前記再現元情報とを用いて、再現情報を取得する再現情報取得部と、前記再現情報取得部が取得した再現情報を、前記１以上の情報出力装置に送出する再現情報送出部として機能させるためのプログラム、である。
　また、上記プログラムにおいて、前記再現情報送出部は、前記再現情報取得部が取得した再現情報を、前記１以上の情報取得装置および前記１以上の情報出力装置に送出するものとして、コンピュータを機能させることが好適である。
　また、上記プログラムにおいて、前記再現情報取得部は、前記取得情報受信部が受信した２以上の情報を合成し、合成情報を取得する情報合成手段と、前記情報合成手段が取得した合成情報と、前記再現元情報とを用いて、再現情報を構成する再現情報構成手段とを具備するものとして、コンピュータを機能させることが好適である。
　また、上記プログラムにおいて、前記再現情報取得部は、前記取得情報受信部が受信した１以上の各トリガ情報を出力可能な情報を変換し、当該１以上の変換した情報と、前記再現元情報とを用いて、再現情報を構成するものとして、コンピュータを機能させることが好適である。
　また、上記プログラムにおいて、前記再現元情報は、１以上の受信された第一の情報の全部または一部分と、前記第一の情報と同一の対象についての情報である第二の情報の全部または一部分との対応を取るための情報である１または２以上の対応情報を有するルックアップテーブルであり、前記再現情報取得部は、前記１または２以上の対応情報のうちのいずれかの対応情報を用いて、前記取得情報受信部が受信した１以上の情報の全部または一部分に対応する１以上の第二の情報の全部または一部分を取得し、当該取得した１以上の第二の情報の全部または一部分から再現情報を取得するものとして、コンピュータを機能させることが好適である。
　（実施の形態２）
　本実施の形態において、２以上の情報再現装置が存在し、それぞれの情報再現装置で取得された２以上の情報が、一の情報再現装置で混合されて、一の再現情報が構成される取得空間および視聴空間で提示される情報システムについて説明する。
　図８は、本実施の形態における情報システム２の概念図である。情報システム１は、２以上の情報取得装置１１、１以上の情報再現装置２１、一の情報集約装置２２、および１以上の情報出力装置１３を備える。なお、情報集約装置２２は、１以上の情報再現装置２１により構成された情報を受信し、出力される再現情報を構成する装置である。
　図９は、本実施の形態における情報システム２のブロック図である。
　情報再現装置２１は、再現元情報格納部１２１、取得情報受信部１２２、再現情報取得部１２３、一時再現情報送出部２１４および取得情報出力部１２５を備える。
　情報集約装置２２は、再現元情報格納部１２１、取得情報受信部１２２、再現情報収集部２２１、再現情報取得部２２２、再現情報送出部１２４および取得情報出力部１２５を備える。なお、情報集約装置２２は、再現元情報格納部１２１を具備しない場合もあり得る。また、ここでの取得情報出力部１２５は、取得情報受信部１２２が受信した情報、再現情報収集部２２１が受信した再現情報を出力する。
　情報再現装置２１を構成する一時再現情報送出部２１４は、再現情報取得部１２３が取得した再現情報を一の情報集約装置２２に送信する。一時再現情報送出部２１４は、通常、無線または有線の通信手段で実現されるが、放送手段で実現されても良い。
　情報集約装置２２を構成する再現情報収集部２２１は、１以上の情報再現装置２１から１以上の再現情報を受信する。再現情報収集部２２１は、通常、無線または有線の通信手段で実現されるが、放送を受信する手段で実現されても良い。
　再現情報取得部２２２は、取得情報受信部１２２が受信した１以上の情報と、再現元情報格納部１２１の再現元情報のうちの１種類以上の情報と、再現情報収集部２２１が受信した１以上の再現情報とを用いて、出力される再現情報を構成する。再現情報取得部２２２は、取得情報出力部１２５が出力した２以上の情報を有する再現情報を取得し、当該取得した再現情報と、再現情報収集部２２１が受信した１以上の再現情報とを用いて、出力される再現情報を構成しても良い。
　再現情報取得部２２２は、例えば、取得情報受信部１２２が受信した１以上の情報と、再現情報収集部２２１が受信した１以上の再現情報とを合成し、出力される再現情報を構成する。なお、取得情報受信部１２２が受信した１以上の情報と、再現情報収集部２２１が受信した１以上の再現情報とは同種類の情報（例えば、音楽情報）であっても良いし、異種類の情報（例えば、映像と音楽情報）であっても良い。同種類の情報を構成する方法は公知技術が利用できる。また、異種類の情報（例えば、映像と音楽情報）を合成することは、重畳したり、同期をとったマルチメディアデータを構成したりすること等であり、公知技術が利用できる。
　また、再現情報取得部２２２は、例えば、取得情報受信部１２２が受信した１以上の情報と再現元情報格納部１２１の再現元情報とを用いて再現情報を構成し、当該構成した再現情報と、受信した１以上の再現情報とを合成しても良い。取得情報受信部１２２が受信した１以上の情報と再現元情報とを用いて再現情報を構成する処理は上述した。ここで、２以上の再現情報は、（１）同一種の一種類の情報である場合、（２）同一種の２種類以上の情報である場合、（３）異種類であり、各再現情報は一種類の情報である場合、（４）異種類であり、２種類以上の情報を含む再現情報が存在する場合があり得る。（１）の場合は、再現情報取得部２２２は、同一種の２以上の再現情報を合成する。（２）の場合は、再現情報取得部２２２は、各種類の情報ごとに、２以上の各再現情報が有する各種類の情報を合成し、取得した２種類以上の情報を重畳したり、同期をとったマルチメディアデータを構成したりすること等により、出力される再現情報を構成する。（３）の場合は、再現情報取得部２２２は、２種類以上の再現情報を重畳したり、２種類以上の再現情報から同期をとったマルチメディアデータを構成したりすること等により、出力される再現情報を構成する。さらに（４）の場合は、再現情報取得部２２２は、同一の種類の情報ごとに、同一の種類の情報を各再現情報から取得し、当該取得した情報を合成する。そして、合成して取得した２種類以上の情報を重畳したり、同期をとったマルチメディアデータを構成したりすること等により、出力される再現情報を構成する。
　再現情報取得部２２２は、通常、ＭＰＵやメモリ等から実現され得る。再現情報取得部２２２の処理手順は、通常、ソフトウェアで実現され、当該ソフトウェアはＲＯＭ等の記録媒体に記録されている。但し、ハードウェア（専用回路）で実現しても良い。
　次に、情報システム２の動作について説明する。まず、情報再現装置２１の動作について説明する。情報再現装置２１と情報再現装置１２との相違は、再現情報を送信する先の相違である。したがって、情報再現装置２１の動作は、図４と概ね同様であり、ステップＳ４０４において、一時再現情報送出部２１４が、再現情報を情報集約装置２２に送信する点が異なる。
　次に、情報集約装置２２の動作について、図１０のフローチャートを用いて説明する。図１０のフローチャートにおいて、図４のフローチャートと同一の処理について説明を省略する。
　（ステップＳ１００１）取得情報受信部１２２は、１以上の情報取得装置１１から、情報を受信したか否かを判断する。情報を受信すればステップＳ１００２に行き、受信しなければステップＳ１００１に戻る。なお、取得情報受信部１２２が受信する情報を送信する１以上の情報取得装置１１は、情報集約装置２２に対して情報を送信することが予め決められている装置である。また、各情報再現装置２１へ情報を送信する１以上の情報取得装置１１も、予め決められている。
　（ステップＳ１００２）再現情報収集部２２１は、１以上のすべての情報再現装置２１から再現情報を受信したか否かを判断する。再現情報を受信すればステップＳ１００３に行き、受信しなければステップＳ１００２に戻る。
　（ステップＳ１００３）再現情報取得部２２２は、２以上の再現情報を合成する。２以上の再現情報を合成する処理について、図１１のフローチャートを用いて説明する。なお、２以上の再現情報とは、ステップＳ４０３で構成した再現情報と、ステップＳ１００２で受信した１以上の再現情報である。
　（ステップＳ１００４）再現情報取得部２２２は、ステップＳ１００３で構成された再現情報を、２以上の情報取得装置１１および１以上の情報出力装置１３に送信する。ステップＳ１００１に戻る。
　なお、図１０のフローチャートにおいて、電源オフや処理終了の割り込みにより処理は終了する。
　次に、ステップＳ１００３の再現情報合成処理について、図１１のフローチャートを用いて説明する。
　（ステップＳ１１０１）再現情報取得部２２２は、カウンタｉに１を代入する。
　（ステップＳ１１０２）再現情報取得部２２２は、２以上の再現情報のいずれかに、ｉ番目の種類の情報が存在するか否かを判断する。ｉ番目の種類の情報が存在すればステップＳ１１０３に行き、存在しなければステップＳ１１１１に行く。
　（ステップＳ１１０３）再現情報取得部２２２は、カウンタｊに１を代入する。
　（ステップＳ１１０４）再現情報取得部２２２は、ｊ番目の再現情報が存在するか否かを判断する。ｊ番目の再現情報が存在すればステップＳ１１０５に行き、存在しなければステップＳ１１０９に行く。
　（ステップＳ１１０５）再現情報取得部２２２は、ｊ番目の再現情報からｉ番目の種類の情報を取得する。
　（ステップＳ１１０６）再現情報取得部２２２は、ｉ番目の種類の情報が取得できたか否かを判断する。ｉ番目の種類の情報が取得できればステップＳ１１０７に行き、ｉ番目の種類の情報が取得できなければステップＳ１１０８に行く。
　（ステップＳ１１０７）再現情報取得部２２２は、取得したｉ番目の種類の情報を、図示しないバッファに一時蓄積する。
　（ステップＳ１１０８）再現情報取得部２２２は、カウンタｊを１、インクリメントする。ステップＳ１１０４に戻る。
　（ステップＳ１１０９）再現情報取得部２２２は、図示しないバッファ内のすべてのｉ番目の種類の情報を合成する。なお、合成方法は、情報の種類や内容によって異なることは好適である。また、本ステップで、合成により取得された情報を合成情報という。
　（ステップＳ１１１０）再現情報取得部２２２は、カウンタｉを１、インクリメントする。ステップＳ１１０２に戻る。
　（ステップＳ１１１１）再現情報取得部２２２は、すべての種類の合成情報から、出力する再現情報を構成する。上位処理にリターンする。
　以下、本実施の形態における情報システム２の具体的な動作について説明する。情報システム２の概念図は図８である。
　今、取得空間は３つであり、それぞれ遠隔地である。また、第一の取得空間では、演奏者１がピアノを演奏し、第一の情報取得装置１１は、演奏されたピアノの音楽の音情報を取得するものとする。また、第二の取得空間では、演奏者２がバイオリンを演奏し、第二の情報取得装置１１は、演奏されたバイオリンの音楽の音情報を取得するものとする。さらに、第三の取得空間では、演奏者３がトランペットを演奏し、第三の情報取得装置１１は、演奏されたトランペットの音楽の音情報を取得するものとする。
　また、情報再現装置２１には、第一の情報取得装置１１と、第二の情報取得装置１１から情報が送信される。そして、情報再現装置２１の再現元情報格納部１２１は、ピアノとバイオリンの音楽情報（音情報の一種）を変換するルックアップテーブルを格納している。
　また、情報集約装置２２には、第三の情報取得装置１１から情報が送信される、とする。そして、情報集約装置２２の再現元情報格納部１２１は、トランペットの音楽情報（音情報の一種）を変換するルックアップテーブルと、再現空間で撮影した映像を格納している、とする。
　また、出力空間は３つであり、３人の聴者が３人の演奏が合成された演奏を聴くもの、とする。
　かかる状況において、例えば、情報集約装置２２から、３つの情報取得装置１１に、演奏開始のトリガを送信し、情報取得装置１１はトリガを受信し、演奏開始の合図を各取得空間に出力する。
　そして、演奏者１、演奏者２、および演奏者３は、それぞれ担当の楽器を演奏する。そして、各取得空間の情報取得装置１１の情報取得部１１１は、演奏により発せられた音情報を取得する。次に、第一および第二の取得空間の情報取得装置１１の取得情報送信部１１２は、音情報を情報再現装置２１に送信する。また、第三の取得空間の情報取得装置１１の取得情報送信部１１２は、音情報を情報集約装置２２に送信する。
　次に、情報再現装置２１の取得情報受信部１２２は、第一および第二の情報取得装置１１から音情報を受信する。また、情報集約装置２２の取得情報受信部１２２は、第三の情報取得装置１１から音情報を受信する。
　次に、情報再現装置２１の再現情報取得部１２３は、第一の情報取得装置１１から受信した音情報を処理単位に区切り、各処理単位の１以上の特徴量（特徴量ベクトル）を取得する。次に、再現情報取得部１２３は、取得した各処理単位の特徴量ベクトルに最も距離が近い特徴量ベクトルに対応する対応情報を、処理単位ごとに、ルックアップテーブルから取得する。そして、再現情報取得部１２３は、処理単位ごとに、各処理単位に対して取得した対応情報を適用し、新しい音情報（「第一の新音情報」という。）を生成する。
　また、情報再現装置２１の再現情報取得部１２３は、第二の情報取得装置１１から受信した音情報を処理単位に区切り、各処理単位の１以上の特徴量（特徴量ベクトル）を取得する。次に、再現情報取得部１２３は、取得した各処理単位の特徴量ベクトルに最も距離が近い特徴量ベクトルに対応する対応情報を、処理単位ごとに、ルックアップテーブルから取得する。そして、再現情報取得部１２３は、処理単位ごとに、取得した対応情報を適用し、新しい音情報（「第二の新音情報」という。）を生成する。
　次に、情報再現装置２１の再現情報取得部１２３は、第一の新音情報と第二の新音情報とを、タイミングの同期をとって、合成する。かかる合成により取得された音情報が、情報集約装置２２に送信される再現情報である。
　次に、情報再現装置２１の一時再現情報送出部２１４は、取得された再現情報を、情報集約装置２２に送信する。
　次に、情報集約装置２２の再現情報収集部２２１は、情報再現装置２１から再現情報を受信する。
　次に、情報集約装置２２の再現情報取得部２２２は、第三の情報取得装置１１から受信した音情報を処理単位に区切り、各処理単位の１以上の特徴量（特徴量ベクトル）を取得する。次に、再現情報取得部１２３は、取得した各処理単位の特徴量ベクトルに最も距離が近い特徴量ベクトルに対応する対応情報を、処理単位ごとに、ルックアップテーブルから取得する。そして、再現情報取得部１２３は、処理単位ごとに、各処理単位に対して取得した対応情報を適用し、新しい音情報（「第三の新音情報」という。）を生成する。
　次に、情報集約装置２２の再現情報取得部２２２は、情報再現装置２１から受信した再現情報（ピアノとバイオリンの音情報を合成した情報）と、第三の新音情報とを、タイミングの同期をとって合成し、合成音情報を取得する。なお、音情報の合成方法は公知技術である。
　次に、情報集約装置２２の再現情報取得部２２２は、再現元情報格納部１２１に格納されている映像中の一部の映像を取得する。なお、この一部の映像は、合成音情報と同様の出力時間を有する映像であり、最近に取得された映像の次の映像である。
　そして、情報集約装置２２の再現情報取得部２２２は、合成音情報と取得した映像とを有する再現情報を構成する。
　次に、情報集約装置２２の再現情報送出部１２４は、取得された再現情報を、３つの情報取得装置１１、および３つの情報出力装置１３に送信する。
　そして、３つの各情報取得装置１１の第二再現情報受付部１１３は、再現情報を受信する。次に、第二再現情報出力部１１４は、受信された再現情報を構成する音情報をスピーカーから出力する。また、第二再現情報出力部１１４は、受信された再現情報を構成する映像をディスプレイに出力する。かかる処理により、聴者が聴く音楽を、各々遠隔に居る３人の演奏者が聞きながら、かつ、再現空間の雰囲気を感じながら演奏をすることができる。
　また、３つの各情報出力装置１３の第一再現情報受付部１３１は、再現情報を受信する。次に、第一再現情報出力部１３２は、受信された再現情報を構成する音情報をスピーカーから出力する。また、第一再現情報出力部１３２は、受信された再現情報を構成する映像をディスプレイに出力する。かかる処理により、視聴者は、単に合成された音楽情報ではなく、合成された音楽情報にさらに価値が加えられた音楽情報を聴くことができる。また、視聴者は、再現空間の雰囲気を感じながら演奏を聴くことができる。
　そして、演奏が終了するまで、または、終了の指示が、情報取得装置１１、または情報再現装置２１、または情報集約装置２２等から入力されるまで、上記の処理が繰り返される。
　以上、本実施の形態によれば、２以上の遠隔地から受信した情報を合成し、価値を加えた情報を出力する２以上の装置の情報を、さらに合成した情報を出力できる。
　なお、本実施の形態の具体例において、情報取得装置１１が取得する情報の種類や内容、再現元情報の種類や内容、情報の合成方法等は問わない。
　さらに、本実施の形態における、情報集約装置を実現するソフトウェアは、以下のようなプログラムである。つまり、このプログラムは、コンピュータを、１以上の各情報取得装置から１以上の情報を受信する取得情報受信部と、１以上の情報再現装置から１以上の再現情報を受信する再現情報収集部と、取得情報受信部が受信した１以上の情報と、再現情報収集部が受信した１以上の再現情報とを用いて、出力される再現情報を取得する再現情報取得部と、１以上の情報出力装置、または１以上の情報出力装置および２以上の情報取得装置に、再現情報取得部が構成した再現情報を送信する再現情報送出部として機能させるためのプログラム、である。
　上記プログラムにおいて、記憶媒体に再現情報を構成するための情報である再現元情報を格納しており、再現情報取得部は、再現元情報と、取得情報受信部が受信した１以上の情報と、再現情報収集部が受信した１以上の再現情報とを用いて、出力される再現情報を構成するものとして、コンピュータを機能させるためのプログラムであることは好適である。
　また、情報再現装置を実現するソフトウェアは、以下のようなプログラムである。つまり、このプログラムは、記憶媒体に再現情報を構成するための情報である再現元情報を格納しており、コンピュータを、１以上の各情報取得装置から１以上の情報を受信する取得情報受信部と、取得情報受信部が受信した１以上の情報と、再現元情報とを用いて、再現情報を取得する再現情報取得部と、再現情報取得部が構成した再現情報を、情報集約装置に送信する再現情報送出部として機能させるためのプログラム、である。
　（実施の形態３）
　本実施の形態において、２以上の情報再現装置から情報を受信し、当該情報を合成して、出力される再現情報を構成する情報合成装置を有する情報システムについて説明する。
　図１２は、本実施の形態における情報システム３の概念図である。情報システム３は、２以上の情報取得装置１１、２以上の情報再現装置３２、情報合成装置３４、および１以上の情報出力装置１３を備える。
　図１３は、本実施の形態における情報システム３のブロック図である。
　情報再現装置３２は、再現元情報格納部１２１、取得情報受信部１２２、再現情報取得部１２３、一時再現情報送出部３２４、および取得情報出力部１２５を備える。なお、情報再現装置３２は、再現元情報格納部１２１を具備しない場合もあり得る。
　情報合成装置３４は、再現情報収集部３４１、再現情報合成部３４２、第三再現情報送出部３４３を備える。
　情報再現装置３２を構成する一時再現情報送出部３２４は、再現情報取得部１２３が構成した再現情報を情報合成装置３４に送信する。一時再現情報送出部３２４は、通常、無線または有線の通信手段で実現されるが、放送手段で実現されても良い。
　情報合成装置３４を構成する再現情報収集部３４１は、２以上の各情報再現装置３２から再現情報を受信する。再現情報収集部３４１は、通常、無線または有線の通信手段で実現されるが、放送を受信する手段で実現されても良い。
　再現情報合成部３４２は、再現情報収集部３４１が受信した２以上の再現情報を合成し、出力される再現情報を構成する。再現情報の合成方法は、例えば、上記の図１１を用いて説明した方法である。再現情報合成部３４２は、通常、ＭＰＵやメモリ等から実現され得る。再現情報合成部３４２の処理手順は、通常、ソフトウェアで実現され、当該ソフトウェアはＲＯＭ等の記録媒体に記録されている。但し、ハードウェア（専用回路）で実現しても良い。
　第三再現情報送出部３４３は、再現情報合成部３４２が構成した再現情報を、１以上の情報取得装置１１および１以上の情報出力装置１３に送出する。第三再現情報送出部３４３は、通常、無線または有線の通信手段で実現されるが、放送手段で実現されても良い。また、第三再現情報送出部３４３から、１以上の情報出力装置１３への送出は、１以上の記録媒体に書き込むことで行ってもよい。
　次に、情報システム３の動作について説明する。まず、情報再現装置３２の動作について説明する。情報再現装置３２と情報再現装置１２との相違は、再現情報を送信する先の相違である。したがって、情報再現装置３２の動作は、図４と概ね同様であり、ステップＳ４０４において、一時再現情報送出部３２４が、再現情報を情報合成装置３４に送信する点が異なる。
　次に、情報合成装置３４の動作について、図１４のフローチャートを用いて説明する。図１４のフローチャートにおいて、図１０のフローチャートと異なるステップについてのみ説明する。
　（ステップＳ１４０１）再現情報収集部３４１は、２以上の情報再現装置３２から再現情報を受信したか否かを判断する。再現情報を受信すればステップＳ１００３に行き、受信しなければステップＳ１４０１に戻る。
　なお、図１４のフローチャートにおいて、電源オフや処理終了の割り込みにより処理は終了する。
　以下、本実施の形態における情報システム３の具体的な動作について説明する。情報システム３の概念図は、図１２である。
　今、取得空間は３つであり、それぞれ遠隔地である。また、第一の取得空間では、演奏者１がピアノを演奏し、第一の情報取得装置１１は、演奏されたピアノの音楽の音情報を取得するものとする。また、第二の取得空間では、演奏者２がバイオリンを演奏し、第二の情報取得装置１１は、演奏されたバイオリンの音楽の音情報を取得するものとする。さらに、第三の取得空間では、演奏者３がトランペットを演奏し、第三の情報取得装置１１は、演奏されたトランペットの音楽の音情報を取得するものとする。
　また、情報再現装置３２は二つである、とする。そして、第一の情報再現装置３２には、第一の情報取得装置１１と、第二の情報取得装置１１とから情報が送信される。そして、第一の情報再現装置３２の再現元情報格納部１２１は、ピアノとバイオリンの音楽情報（音情報の一種）を変換するルックアップテーブルを格納している、とする。
　また、第二の情報再現装置３２には、第三の情報取得装置１１から情報が送信される、とする。そして、第二の情報再現装置３２の再現元情報格納部１２１は、トランペットの音楽情報（音情報の一種）を変換するルックアップテーブルと、再現空間で撮影した映像を格納している、とする。
　また、出力空間は３つであり、３人の視聴者が３人の演奏が合成された演奏を聴き、再現空間で撮影した映像を視るもの、とする。
　かかる状況において、例えば、情報合成装置３４から、３つの情報取得装置１１に、演奏開始のトリガを送信し、情報取得装置１１はトリガを受信し、演奏開始の合図を各取得空間に出力する。
　そして、演奏者１、演奏者２、および演奏者３は、それぞれ担当の楽器を演奏する。そして、各取得空間の情報取得装置１１の情報取得部１１１は、演奏により発せられた音情報を取得する。次に、第一および第二の取得空間の情報取得装置１１の取得情報送信部１１２は、音情報を第一の情報再現装置３２に送信する。また、第三の取得空間の情報取得装置１１の取得情報送信部１１２は、音情報を第二の情報再現装置３２に送信する。
　次に、第一の情報再現装置３２の取得情報受信部１２２は、第一および第二の情報取得装置１１から音情報を受信する。また、第二の情報再現装置３２の取得情報受信部１２２は、第三の情報取得装置１１から音情報を受信する。
　次に、第一の情報再現装置３２の再現情報取得部１２３は、第一の情報取得装置１１から受信した音情報を処理単位に区切り、各処理単位の１以上の特徴量（特徴量ベクトル）を取得する。次に、再現情報取得部１２３は、取得した各処理単位の特徴量ベクトルに最も距離が近い特徴量ベクトルに対応する対応情報を、処理単位ごとに、ルックアップテーブルから取得する。そして、再現情報取得部１２３は、処理単位ごとに、各処理単位に対して取得した対応情報を適用し、新しい音情報（「第一の新音情報」という。）を生成する。
　また、第一の情報再現装置３２の再現情報取得部１２３は、第二の情報取得装置１１から受信した音情報を処理単位に区切り、各処理単位の１以上の特徴量（特徴量ベクトル）を取得する。次に、再現情報取得部１２３は、取得した各処理単位の特徴量ベクトルに最も距離が近い特徴量ベクトルに対応する対応情報を、処理単位ごとに、ルックアップテーブルから取得する。そして、再現情報取得部１２３は、処理単位ごとに、各処理単位に対して取得した対応情報を適用し、新しい音情報（「第二の新音情報」という。）を生成する。
　次に、第一の情報再現装置３２の再現情報取得部１２３は、第一の新音情報と第二の新音情報とを、タイミングの同期をとって、合成する。かかる合成により取得された音情報が、情報合成装置３４に送信される再現情報である。
　次に、第一の情報再現装置３２の一時再現情報送出部３２４は、取得された再現情報を、情報合成装置３４に送信する。
　次に、第二の情報再現装置３２の再現情報取得部１２３は、第三の情報取得装置１１から受信した音情報を処理単位に区切り、各処理単位の１以上の特徴量（特徴量ベクトル）を取得する。次に、再現情報取得部１２３は、取得した各処理単位の特徴量ベクトルに最も距離が近い特徴量ベクトルに対応する対応情報を、処理単位ごとに、ルックアップテーブルから取得する。そして、再現情報取得部１２３は、処理単位ごとに、各処理単位に対して取得した対応情報を適用し、新しい音情報（「第三の新音情報」という。）を生成する。
　次に、第二の情報再現装置３２の再現情報取得部１２３は、第三の新音情報と映像とを有する再現情報を構成する。
　次に、第二の情報再現装置３２の一時再現情報送出部３２４は、取得された再現情報を、情報合成装置３４に送信する。
　次に、情報合成装置３４の再現情報収集部３４１は、２つの情報再現装置３２から再現情報を受信する。
　そして、情報合成装置３４の再現情報合成部３４２は、２つの再現情報を合成し、出力される再現情報を構成する。なお、再現情報合成部３４２は、第一の情報再現装置３２から送信された再現情報と、第二の情報再現装置３２から送信された再現情報の中の音情報とを合成する。そして、合成した音情報（ピアノ、バイオリン、トランペットの演奏を合成した情報）と、第二の情報再現装置３２から送信された再現情報の中の映像とを、タイミングをとって、例えば、重畳し、出力する再現情報を構成する。
　次に、情報合成装置３４の第三再現情報送出部３４３は、再現情報合成部３４２が取得した再現情報を、３つの情報取得装置１１、および３つの情報出力装置１３に送信する。
　そして、３つの各情報取得装置１１の第二再現情報受付部１１３は、再現情報を受信する。次に、第二再現情報出力部１１４は、受信された再現情報を構成する音情報をスピーカーから出力する。また、第二再現情報出力部１１４は、受信された再現情報を構成する映像をディスプレイに出力する。かかる処理により、聴者が聴く音楽を、各々遠隔に居る３人の演奏者が聞きながら、かつ、再現空間の雰囲気を感じながら演奏をすることができる。
　また、３つの各情報出力装置１３の第一再現情報受付部１３１は、再現情報を受信する。次に、第一再現情報出力部１３２は、受信された再現情報を構成する音情報をスピーカーから出力する。また、第一再現情報出力部１３２は、受信された再現情報を構成する映像をディスプレイに出力する。かかる処理により、視聴者は、単に合成された音楽情報ではなく、合成された音楽情報にさらに価値が加えられた音楽情報を聴くことができる。また、視聴者は、再現空間の雰囲気を感じながら演奏を聴くことができる。
　そして、演奏が終了するまで、または、終了の指示が、情報取得装置１１、または情報再現装置３２、または情報合成装置３４等から入力されるまで、上記の処理が繰り返される。
　以上、本実施の形態によれば、２以上の遠隔地から受信した情報を合成し、価値を加えた情報を出力する２以上の装置の情報を、さらに合成した情報を出力できる。
　なお、本実施の形態における情報合成装置３４を実現するソフトウェアは、以下のようなプログラムである。つまり、このプログラムは、コンピュータを、２以上の各情報再現装置から再現情報を受信する再現情報収集部と、前記再現情報収集部が受信した２以上の再現情報を合成し、出力される再現情報を構成する再現情報合成部と、前記１以上の情報出力装置、または前記１以上の情報取得装置および前記１以上の情報出力装置に、前記再現情報合成部が構成した再現情報を送信する第三再現情報送出部として機能させるためのプログラム、である。
　また、本実施の形態における情報再現装置３２を実現するソフトウェアは、以下のようなプログラムである。つまり、このプログラムは、記憶媒体に再現情報を構成するための情報である再現元情報を格納しており、コンピュータを、前記１以上の各情報取得装置から１以上の情報を受信する取得情報受信部と、前記取得情報受信部が受信した１以上の情報と、前記再現元情報とを用いて、再現情報を構成する再現情報取得部と、前記再現情報取得部が構成した再現情報を情報合成装置に送信する再現情報送出部として機能させるためのプログラム、である。
　また、上記実施の形態で説明した情報システムは、例えば、遠隔演奏システム、遠隔演劇システム等として応用できる。情報取得装置１１が取得する情報が楽器の演奏情報（音情報）である場合、情報システムは、遠隔演奏システムとなり得る。また、情報取得装置１１が取得する情報が、演劇者が行う芝居を撮影した映像と、取得した音声である場合、情報システムは、遠隔演劇システムとなり得る。
　また、図１５は、本明細書で述べたプログラムを実行して、上述した種々の実施の形態の情報取得装置、情報再現装置、情報合成装置、および情報出力装置を実現するコンピュータの外観を示す。上述の実施の形態は、コンピュータハードウェア及びその上で実行されるコンピュータプログラムで実現され得る。図１５は、このコンピュータシステム３４０の概観図であり、図１６は、システム３４０のブロック図である。
　図１５において、コンピュータシステム３４０は、ＦＤドライブ、ＣＤ－ＲＯＭドライブを含むコンピュータ３４１と、キーボード３４２と、マウス３４３と、モニタ３４４と、マイク３４５、カメラ３４６、スピーカー３４７等を含む。
　図１６において、コンピュータ３４１は、ＦＤドライブ３４１１、ＣＤ－ＲＯＭドライブ３４１２に加えて、ＭＰＵ３４１３と、ＭＰＵ３４１３、ＣＤ－ＲＯＭドライブ３４１２及びＦＤドライブ３４１１に接続されたバス３４１４と、ブートアッププログラム等のプログラムを記憶するためのＲＯＭ３４１５と、ＭＰＵ３４１３に接続され、アプリケーションプログラムの命令を一時的に記憶するとともに一時記憶空間を提供するためのＲＡＭ３４１６と、アプリケーションプログラム、システムプログラム、及びデータを記憶するためのハードディスク３４１７とを含む。ここでは、図示しないが、コンピュータ３４１は、さらに、ＬＡＮへの接続を提供するネットワークカードを含んでも良い。
　コンピュータシステム３４０に、上述した実施の形態の情報システムの機能を実行させるプログラムは、ＣＤ－ＲＯＭ３５０１、またはＦＤ３５０２に記憶されて、ＣＤ－ＲＯＭドライブ３４１２またはＦＤドライブ３４１１に挿入され、さらにハードディスク３４１７に転送されても良い。これに代えて、プログラムは、図示しないネットワークを介してコンピュータ３４１に送信され、ハードディスク３４１７に記憶されても良い。プログラムは実行の際にＲＡＭ３４１６にロードされる。プログラムは、ＣＤ－ＲＯＭ３５０１、ＦＤ３５０２またはネットワークから直接、ロードされても良い。
　プログラムは、コンピュータ３４１に、上述した実施の形態の情報システムの機能を実行させるオペレーティングシステム（ＯＳ）、またはサードパーティープログラム等は、必ずしも含まなくても良い。プログラムは、制御された態様で適切な機能（モジュール）を呼び出し、所望の結果が得られるようにする命令の部分のみを含んでいれば良い。コンピュータシステム３４０がどのように動作するかは周知であり、詳細な説明は省略する。
　なお、上記プログラムにおいて、情報を送信するステップや、情報を受信するステップなどでは、ハードウェアによって行われる処理、例えば、送信するステップにおけるモデムやインターフェースカードなどで行われる処理（ハードウェアでしか行われない処理）は含まれない。
　また、上記プログラムを実行するコンピュータは、単数であってもよく、複数であってもよい。すなわち、集中処理を行ってもよく、あるいは分散処理を行ってもよい。
　また、上記各実施の形態において、一の装置に存在する２以上の通信手段は、物理的に一の媒体で実現されても良いことは言うまでもない。
　また、上記各実施の形態において、各処理（各機能）は、単一の装置（システム）によって集中処理されることによって実現されてもよく、あるいは、複数の装置によって分散処理されることによって実現されてもよい。
　本発明は、以上の実施の形態に限定されることなく、種々の変更が可能であり、それらも本発明の範囲内に包含されるものであることは言うまでもない。
　以上のように、本発明にかかる情報システムは、１以上の遠隔地から受信した情報に、さらに価値を加えた情報を出力できる、という効果を有し、遠隔演奏システム、遠隔演劇システム等として有用である。
　１、２、３　情報システム
　１１　情報取得装置
　１２、２１、３２　情報再現装置
　１３　情報出力装置
　２２　情報集約装置
　３４　情報合成装置
　１１１　情報取得部
　１１２　取得情報送信部
　１１３　第二再現情報受付部
　１１４　第二再現情報出力部
　１２１　再現元情報格納部
　１２２　取得情報受信部
　１２３、２２２　再現情報取得部
　１２４　再現情報送出部
　２１４、３２４　一時再現情報送出部
　１２５　取得情報出力部
　１３１　第一再現情報受付部
　１３２　第一再現情報出力部
　２２１、３４１　再現情報収集部
　３４２　再現情報合成部
　３４３　第三再現情報送出部
　１２３１　情報合成手段
　１２３２　再現情報構成手段

Claims (21)

  1. 情報を取得する空間である１以上の各取得空間から情報を取得する１以上の情報取得装置と、前記取得空間とは異なる空間であり、再現する対象の空間である再現空間に対応する再現情報を構成する情報再現装置と、前記再現情報を出力する空間である１以上の各出力空間において、前記再現情報を出力する１以上の情報出力装置とを具備する情報システムであって、
    前記情報取得装置は、
    情報を取得する情報取得部と、
    前記情報を前記情報再現装置に送信する取得情報送信部とを具備し、
    前記情報再現装置は、
    再現情報を構成するための情報である再現元情報を格納し得る再現元情報格納部と、
    前記１以上の各情報取得装置から１以上の情報を受信する取得情報受信部と、
    前記取得情報受信部が受信した１以上の情報と、前記再現元情報とを用いて、再現情報を取得する再現情報取得部と、
    前記再現情報取得部が構成した再現情報を、前記１以上の情報出力装置に送信する再現情報送出部とを具備し、
    前記情報出力装置は、
    前記情報再現装置から再現情報を受信する第一再現情報受付部と、
    前記第一再現情報受付部が受信した再現情報を出力する第一再現情報出力部とを具備する情報システム。
  2. ２以上の各取得空間から情報を取得する２以上の情報取得装置を具備する請求項１記載の情報システムであって、
    前記情報再現装置は、
    前記２以上の各情報取得装置から２以上の情報を受信する取得情報受信部と、
    前記取得情報受信部が受信した２以上の情報を出力する取得情報出力部と、
    前記取得情報出力部が出力した２以上の情報を有する再現情報を取得する再現情報取得部と、
    前記再現情報取得部が取得した再現情報を、前記１以上の情報出力装置に送信する再現情報送出部とを具備する請求項１記載の情報システム。
  3. 前記情報取得装置は、
    前記情報再現装置から再現情報を受信する第二再現情報受付部と、
    前記第二再現情報受付部が受信した再現情報を出力する第二再現情報出力部とをさらに具備し、
    前記情報再現装置の再現情報送出部は、
    前記再現情報取得部が構成した再現情報を、前記１以上の情報取得装置および前記１以上の情報出力装置に送信する請求項１記載の情報システム。
  4. ２以上の情報取得装置を具備する請求項１記載の情報システムであって、
    前記再現情報取得部は、
    前記取得情報受信部が受信した２以上の情報を合成し、合成情報を取得する情報合成手段と、
    前記情報合成手段が取得した合成情報と、前記再現元情報とを用いて、再現情報を構成する再現情報構成手段とを具備する請求項１記載の情報システム。
  5. ２以上の情報取得装置、１以上の情報再現装置、一の情報集約装置および１以上の情報出力装置を具備する請求項１記載の情報システムであって、
    前記情報集約装置は、
    前記１以上の各情報取得装置から１以上の情報を受信する取得情報受信部と、
    前記１以上の情報再現装置から１以上の再現情報を受信する再現情報収集部と、
    前記取得情報受信部が受信した１以上の情報と、前記再現情報収集部が受信した１以上の再現情報とを用いて、出力される再現情報を取得する再現情報取得部と、
    前記１以上の情報出力装置、または前記１以上の情報出力装置および前記２以上の情報取得装置に、前記再現情報取得部が構成した再現情報を送信する再現情報送出部とを具備し、
    前記１以上の情報再現装置の再現情報送出部は、
    当該情報再現装置の再現情報取得部が構成した再現情報を前記情報集約装置に送信する請求項１記載の情報システム。
  6. 前記情報集約装置は、
    再現情報を構成するための情報である再現元情報を格納し得る再現元情報格納部をさらに具備し、
    前記情報集約装置の再現情報取得部は、
    前記再現元情報と、前記取得情報受信部が受信した１以上の情報と、前記再現情報収集部が受信した１以上の再現情報とを用いて、出力される再現情報を構成する請求項５記載の情報システム。
  7. ２以上の情報取得装置と、２以上の情報再現装置と、情報合成装置と、１以上の情報出力装置とを具備する請求項１記載の情報システムであって、
    前記情報再現装置の再現情報送出部は、
    前記再現情報取得部が構成した再現情報を、前記情報合成装置に送信し、
    前記情報合成装置は、
    前記２以上の各情報再現装置から再現情報を受信する再現情報収集部と、
    前記再現情報収集部が受信した２以上の再現情報を合成し、出力される再現情報を構成する再現情報合成部と、
    前記１以上の情報出力装置、または前記１以上の情報取得装置および前記１以上の情報出力装置に、前記再現情報合成部が構成した再現情報を送信する第三再現情報送出部とを具備する請求項１記載の情報システム。
  8. 前記情報取得装置が取得する情報は、音情報である請求項１記載の情報システム。
  9. 前記情報取得装置が取得する情報は、映像情報である請求項１記載の情報システム。
  10. 前記情報取得装置が取得する情報は、他の装置を動作させるためのトリガ情報であり、
    前記情報再現装置の再現情報取得部は、
    前記取得情報受信部が受信した１以上の各トリガ情報を出力可能な情報を変換し、当該１以上の変換した情報と、前記再現元情報とを用いて、再現情報を構成する請求項１記載の情報システム。
  11. 前記情報取得装置が取得する情報は、
    音情報、映像情報、トリガ情報のうちの２種類以上の情報である請求項１記載の情報システム。
  12. 前記再現元情報は、
    １以上の受信された第一の情報の全部または一部分と、前記第一の情報と同一の対象についての情報である第二の情報の全部または一部分との対応を取るための情報である１または２以上の対応情報を有するルックアップテーブルであり、
    前記再現情報取得部は、
    前記１または２以上の対応情報のうちのいずれかの対応情報を用いて、前記取得情報受信部が受信した１以上の情報の全部または一部分に対応する１以上の第二の情報の全部または一部分を取得し、当該取得した１以上の第二の情報の全部または一部分から再現情報を構成する請求項１記載の情報システム。
  13. 請求項１記載の情報システムを構成する情報再現装置。
  14. 再現情報を構成するための情報である再現元情報を格納し得る再現元情報格納部と、
    １以上の各情報取得装置から１以上の情報を受信する取得情報受信部と、
    前記取得情報受信部が受信した１以上の情報と、前記再現元情報とを用いて、再現情報を取得する再現情報取得部と、
    前記再現情報取得部が取得した再現情報を送出する再現情報送出部とを具備する情報再現装置。
  15. ２以上の各情報取得装置から２以上の情報を受信する取得情報受信部と、
    前記取得情報受信部が受信した２以上の情報を出力する取得情報出力部と、
    前記取得情報出力部が出力した２以上の情報を有する再現情報を取得する再現情報取得部と、
    前記再現情報取得部が取得した再現情報を送出する再現情報送出部とを具備する情報再現装置。
  16. 前記再現情報送出部は、
    前記再現情報取得部が構成した再現情報を、前記１以上の情報取得装置、または前記１以上の情報取得装置および前記１以上の情報出力装置に送信する請求項１４記載の情報再現装置。
  17. 前記再現情報送出部は、
    前記再現情報取得部が構成した再現情報を、前記１以上の情報取得装置、または前記１以上の情報取得装置および前記１以上の情報出力装置に送信する請求項１５記載の情報再現装置。
  18. 記録媒体に、
    再現情報を構成するための情報である再現元情報を格納しており、
    取得情報受信部、再現情報取得部、および再現情報送出部により実現される情報生成方法であって、
    前記取得情報受信部が、１以上の各情報取得装置から１以上の情報を受信する取得情報受信ステップと、
    前記再現情報取得部が、前記取得情報受信ステップで受信した１以上の情報と、前記再現元情報とを用いて、再現情報を取得する再現情報取得ステップと、
    前記再現情報送出部が、前記再現情報取得ステップで取得された再現情報を送出する再現情報送出ステップとを具備する情報生成方法。
  19. 取得情報受信部、取得情報出力部、再現情報取得部、および再現情報送出部により実現される情報生成方法であって、
    前記取得情報受信部が、２以上の各情報取得装置から２以上の情報を受信する取得情報受信ステップと、
    前記取得情報出力部が、前記取得情報受信ステップで受信された２以上の情報を出力する取得情報出力部と、
    前記再現情報取得部が、前記取得情報出力ステップで出力された２以上の情報を有する再現情報を取得する再現情報取得ステップと、
    前記再現情報送出部が、前記再現情報取得ステップで取得された再現情報を送出する再現情報送出ステップとを具備する情報生成方法。
  20. 記録領域に、
    再現情報を構成するための情報である再現元情報を格納しており、
    コンピュータを、
    １以上の各情報取得装置から１以上の情報を受信する取得情報受信部と、
    前記取得情報受信部が受信した１以上の情報と、前記再現元情報とを用いて、再現情報を取得する再現情報取得部と、
    前記再現情報取得部が取得した再現情報を送出する再現情報送出部として機能させるためのプログラムを記録した記録媒体。
  21. コンピュータを、
    ２以上の各情報取得装置から２以上の情報を受信する取得情報受信部と、
    前記取得情報受信部が受信した２以上の情報を出力する取得情報出力部と、
    前記取得情報出力部が出力した２以上の情報を有する再現情報を取得する再現情報取得部と、
    前記再現情報取得部が取得した再現情報を送出する再現情報送出部として機能させるためのプログラムを記録した記録媒体。
PCT/JP2012/069543 2011-08-08 2012-08-01 情報システム、情報再現装置、情報生成方法、および記録媒体 WO2013021881A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201280038670.1A CN103733249B (zh) 2011-08-08 2012-08-01 信息系统、信息再现装置、信息生成方法及记录介质
EP12821614.0A EP2743917B1 (en) 2011-08-08 2012-08-01 Information system, information reproducing apparatus, information generating method, and storage medium
US14/237,765 US9979766B2 (en) 2011-08-08 2012-08-01 System and method for reproducing source information
KR1020147001086A KR101873086B1 (ko) 2011-08-08 2012-08-01 정보 시스템, 정보 재현 장치, 정보 생성 방법, 및 기록 매체

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2011172948A JP5877973B2 (ja) 2011-08-08 2011-08-08 情報システム、情報再現装置、情報生成方法、およびプログラム
JP2011-172948 2011-08-08

Publications (1)

Publication Number Publication Date
WO2013021881A1 true WO2013021881A1 (ja) 2013-02-14

Family

ID=47668391

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2012/069543 WO2013021881A1 (ja) 2011-08-08 2012-08-01 情報システム、情報再現装置、情報生成方法、および記録媒体

Country Status (7)

Country Link
US (1) US9979766B2 (ja)
EP (1) EP2743917B1 (ja)
JP (1) JP5877973B2 (ja)
KR (1) KR101873086B1 (ja)
CN (1) CN103733249B (ja)
TW (1) TWI584266B (ja)
WO (1) WO2013021881A1 (ja)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014137311A1 (en) * 2013-03-04 2014-09-12 Empire Technology Development Llc Virtual instrument playing scheme
JP5933860B2 (ja) * 2014-01-21 2016-06-15 三菱電機株式会社 動画再生装置
CN104811485A (zh) * 2015-04-10 2015-07-29 深圳市金立通信设备有限公司 一种资源分享方法
CN104901945A (zh) * 2015-04-10 2015-09-09 深圳市金立通信设备有限公司 一种终端
US10454982B1 (en) 2016-03-18 2019-10-22 Audio Fusion Systems, Inc. Monitor mixing system that distributes real-time multichannel audio over a wireless digital network
US10182093B1 (en) * 2017-09-12 2019-01-15 Yousician Oy Computer implemented method for providing real-time interaction between first player and second player to collaborate for musical performance over network
CN110460800B (zh) * 2019-08-28 2021-02-23 长沙市回音科技有限公司 远程排演系统和排演方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004094683A (ja) * 2002-08-30 2004-03-25 Casio Comput Co Ltd サーバ、通信方法及び観客端末
JP2004325775A (ja) * 2003-04-24 2004-11-18 Kawai Musical Instr Mfg Co Ltd 合奏用ミキシングサーバ及び合奏用演奏装置
JP2007178860A (ja) 2005-12-28 2007-07-12 Nippon Telegr & Teleph Corp <Ntt> 遠隔地における合奏方法及びそれに用いる電子楽器及びそのプログラム
JP2010113278A (ja) * 2008-11-10 2010-05-20 Yamaha Corp 楽曲処理装置およびプログラム
JP2010128482A (ja) * 2008-12-01 2010-06-10 Yamaha Corp 電子音楽装置及び音楽コンテンツ利用プログラム
JP2011075652A (ja) * 2009-09-29 2011-04-14 Nec Corp 合奏システム、合奏装置および合奏方法

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10260692A (ja) * 1997-03-18 1998-09-29 Toshiba Corp 音声の認識合成符号化／復号化方法及び音声符号化／復号化システム
US6598074B1 (en) * 1999-09-23 2003-07-22 Rocket Network, Inc. System and method for enabling multimedia production collaboration over a network
US6915261B2 (en) * 2001-03-16 2005-07-05 Intel Corporation Matching a synthetic disc jockey's voice characteristics to the sound characteristics of audio programs
JP4713129B2 (ja) * 2004-11-16 2011-06-29 ソニー株式会社 音楽コンテンツの再生装置、音楽コンテンツの再生方法および音楽コンテンツおよびその属性情報の記録装置
JP4422656B2 (ja) * 2005-08-03 2010-02-24 独立行政法人科学技術振興機構 ネットワークを用いた遠隔多地点合奏システム
US20070260634A1 (en) * 2006-05-04 2007-11-08 Nokia Corporation Apparatus, system, method, and computer program product for synchronizing the presentation of media content
CN101657817A (zh) * 2007-02-14 2010-02-24 缪斯亚米有限公司 基于音乐的搜索引擎
US7838755B2 (en) * 2007-02-14 2010-11-23 Museami, Inc. Music-based search engine
JP2009031357A (ja) * 2007-07-24 2009-02-12 Yamaha Corp 楽曲配信システム、楽曲編集装置、楽曲再生装置、楽曲記憶装置およびプログラム
US8825468B2 (en) * 2007-07-31 2014-09-02 Kopin Corporation Mobile wireless display providing speech to speech translation and avatar simulating human attributes
EP2141689A1 (en) * 2008-07-04 2010-01-06 Koninklijke KPN N.V. Generating a stream comprising interactive content
JP2010081321A (ja) * 2008-09-26 2010-04-08 Fujitsu Ltd コンテンツの再生を指示するためのコントロール端末、コンテンツ中継装置及びリモートコンテンツ再生システム

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004094683A (ja) * 2002-08-30 2004-03-25 Casio Comput Co Ltd サーバ、通信方法及び観客端末
JP2004325775A (ja) * 2003-04-24 2004-11-18 Kawai Musical Instr Mfg Co Ltd 合奏用ミキシングサーバ及び合奏用演奏装置
JP2007178860A (ja) 2005-12-28 2007-07-12 Nippon Telegr & Teleph Corp <Ntt> 遠隔地における合奏方法及びそれに用いる電子楽器及びそのプログラム
JP2010113278A (ja) * 2008-11-10 2010-05-20 Yamaha Corp 楽曲処理装置およびプログラム
JP2010128482A (ja) * 2008-12-01 2010-06-10 Yamaha Corp 電子音楽装置及び音楽コンテンツ利用プログラム
JP2011075652A (ja) * 2009-09-29 2011-04-14 Nec Corp 合奏システム、合奏装置および合奏方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP2743917A4

Also Published As

Publication number Publication date
CN103733249B (zh) 2016-04-06
CN103733249A (zh) 2014-04-16
EP2743917A4 (en) 2015-07-08
EP2743917B1 (en) 2019-03-13
US20140181273A1 (en) 2014-06-26
KR101873086B1 (ko) 2018-06-29
TW201320056A (zh) 2013-05-16
US9979766B2 (en) 2018-05-22
TWI584266B (zh) 2017-05-21
KR20140058495A (ko) 2014-05-14
EP2743917A1 (en) 2014-06-18
JP5877973B2 (ja) 2016-03-08
JP2013037524A (ja) 2013-02-21

Similar Documents

Publication Publication Date Title
JP5877973B2 (ja) 情報システム、情報再現装置、情報生成方法、およびプログラム
JP7014176B2 (ja) 再生装置、再生方法、およびプログラム
AU756265B2 (en) Apparatus and method for presenting sound and image
KR101235832B1 (ko) 실감 멀티미디어 서비스 제공 방법 및 장치
KR101414217B1 (ko) 실시간 영상합성 장치 및 그 방법
EP1784049A1 (en) A method and system for sound reproduction, and a program product
JP5109496B2 (ja) データ配信装置、データ配信方法およびプログラム
CN114598917B (zh) 显示设备及音频处理方法
JP5256682B2 (ja) 情報処理装置、情報処理方法及びプログラム
JP2005086537A (ja) 高臨場音場再現情報送信装置、高臨場音場再現情報送信プログラム、高臨場音場再現情報送信方法および高臨場音場再現情報受信装置、高臨場音場再現情報受信プログラム、高臨場音場再現情報受信方法
KR101193152B1 (ko) 객체 기반 음원간 객체 정합 방법 및 장치
US20230269552A1 (en) Electronic device, system, method and computer program
WO2021065496A1 (ja) 信号処理装置および方法、並びにプログラム
JP2002300434A (ja) 番組送出システム及びこれに用いる番組送出装置
JP2024001600A (ja) 再生装置、再生方法、および再生プログラム
JP2017092832A (ja) 再生方法および再生装置
JP2017044765A (ja) 映像提供装置、映像提供システム及びプログラム
Bates et al. Recording and Composing Site-Specific Spatial Music for 360 Video
Fung Live electronics: Sounding (of) the coil
JP5510435B2 (ja) カラオケ装置及びプログラム

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 201280038670.1

Country of ref document: CN

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 12821614

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 20147001086

Country of ref document: KR

Kind code of ref document: A

WWE Wipo information: entry into national phase

Ref document number: 14237765

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE