WO2018142705A1 - 情報処理装置、および情報処理方法 - Google Patents

情報処理装置、および情報処理方法 Download PDF

Info

Publication number
WO2018142705A1
WO2018142705A1 PCT/JP2017/040128 JP2017040128W WO2018142705A1 WO 2018142705 A1 WO2018142705 A1 WO 2018142705A1 JP 2017040128 W JP2017040128 W JP 2017040128W WO 2018142705 A1 WO2018142705 A1 WO 2018142705A1
Authority
WO
WIPO (PCT)
Prior art keywords
imaging
information processing
imaging device
information
notification
Prior art date
Application number
PCT/JP2017/040128
Other languages
English (en)
French (fr)
Inventor
伸穂 池田
広志 池田
秀幸 佐藤
優太 中尾
靖二郎 稲葉
Original Assignee
ソニー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニー株式会社 filed Critical ソニー株式会社
Priority to CN201780084762.6A priority Critical patent/CN110226324B/zh
Priority to EP17894904.6A priority patent/EP3579547B1/en
Priority to US16/480,335 priority patent/US20190387179A1/en
Priority to JP2018565944A priority patent/JP7215173B2/ja
Publication of WO2018142705A1 publication Critical patent/WO2018142705A1/ja

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/695—Control of camera direction for changing a field of view, e.g. pan, tilt or based on tracking of objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30244—Camera pose
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24—Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Definitions

  • This disclosure relates to an information processing apparatus and an information processing method.
  • an area where sports are performed is imaged with an imaging device. Yes.
  • the position of the player and the position of the ball may move far off the tennis court, basket court, volleyball court, soccer ground, table tennis table, etc. is there.
  • the arrangement of the imaging device for imaging sports as described above is often performed in a state where no player and no ball exist.
  • an imaging device so that a player and a ball are imaged when sports are performed, that is, to arrange an imaging device so that an area where the sports are performed is imaged. It has become a thing. Further, when a person who does not know the sport to be imaged arranges the imaging device, the difficulty of arrangement further increases.
  • This disclosure proposes a new and improved information processing apparatus and information processing method capable of assisting the arrangement of the imaging apparatus.
  • the image processing apparatus includes a processing unit that performs notification regarding the relationship between the area and the imaging device based on the area information that defines the area to be imaged by the imaging apparatus and the information about the imaging apparatus that is arranged.
  • An information processing apparatus is provided.
  • this indication has the step which performs the notification regarding the relationship between the said area
  • an example in which the information processing method according to the present embodiment is applied is not limited to an example in which an area in which sports is performed is captured by an imaging device.
  • the information processing method according to the present embodiment can be applied when an arbitrary predetermined region (three-dimensional space) is imaged by the imaging device, such as when an image capturing device captures a crime prevention region. Is possible.
  • the information processing apparatus performs notification regarding the relationship between the imaging apparatus arranged and the area to be imaged by the imaging apparatus.
  • the notification related to the relationship between the area to be imaged by the imaging apparatus according to the present embodiment and the imaging apparatus is a notification for assisting the arrangement of the imaging apparatus by a person who arranges the imaging apparatus, for example, as illustrated in an example described later.
  • the notification regarding the relationship between the area to be imaged by the imaging device according to the present embodiment and the imaging device may be referred to as “notification regarding the relationship between imaging devices” or simply “notification regarding the relationship”.
  • the information processing apparatus performs notification regarding the relationship between the imaging devices based on, for example, the region information and the information regarding the arranged imaging devices.
  • the area information according to the present embodiment is data that defines an area to be imaged by the imaging apparatus.
  • the information processing apparatus according to the present embodiment specifies an area to be imaged by the imaging apparatus based on the area information.
  • an area to be imaged by the imaging apparatus for example, an area where sports such as those described above are performed can be given.
  • region made to image-capture an imaging device is not restricted to the area
  • the area defined by the area information is defined for each sport. That is, the area defined by the area information includes, for example, an area corresponding to the type of sport.
  • the area to be imaged by the imaging device is an area to be protected, the area is defined based on map information indicating a map, for example.
  • the information processing apparatus When there are a plurality of area information, such as when the area specified by the area information is specified for each sport, the information processing apparatus according to the present embodiment specifies the area information set from the plurality of area information. Notification regarding the relationship between the imaging devices is performed based on the area to be processed.
  • the information processing apparatus sets, for example, area information corresponding to the detected predetermined setting operation, and based on the area defined by the set area information, Notify about relationships.
  • the predetermined setting operation according to the present embodiment is, for example, one of an operation using an operation unit (described later), an operation using an external operation device such as a remote controller, an operation using a gesture, and an operation using voice. Or two or more.
  • the person who arranges the imaging device sets the sport by an operation using an operation unit (described later). For example, a person who arranges the imaging apparatus sets a sport by performing an operation of selecting a type of sport displayed on the display screen.
  • the information processing apparatus according to the present embodiment corresponds to sports, for example, by reading area information corresponding to sports set by the setting operation as described above from a recording medium such as a storage unit (not shown). Set the region information. Then, the information processing apparatus according to the present embodiment performs notification regarding the relationship between the imaging apparatuses based on the area defined by the set area information.
  • the area defined by the area information corresponding to the sport set by the setting operation as described above may be referred to as “area corresponding to the set sport”.
  • the notification regarding the relationship between the imaging devices is performed based on the region corresponding to the set sport, thereby assisting the arrangement of the imaging device corresponding to the set sport.
  • the information regarding the imaging device according to the present embodiment is data indicating the arrangement state of the arranged imaging devices, for example.
  • the information regarding the imaging apparatus according to the present embodiment indicates, for example, the position of the imaging apparatus, the attitude of the imaging apparatus, and the parameters of the imaging apparatus.
  • Examples of the parameters of the imaging device include parameters representing the internal state of the imaging device such as focal length and distortion in the lens optical axis direction.
  • the information processing apparatus estimates, for example, the position of the imaging apparatus, the attitude of the imaging apparatus, and the parameters of the imaging apparatus based on the captured image captured by the imaging apparatus. Then, the information processing apparatus according to the present embodiment performs notification regarding the relationship between the imaging devices based on the information regarding the imaging device indicating the estimated position of the imaging device, the attitude of the imaging device, and the parameters of the imaging device.
  • the information related to the imaging device may be data indicating the position of the imaging device, the orientation of the imaging device, and the parameters of the imaging device, the data indicating the position of the imaging device, the data indicating the orientation of the imaging device, and the imaging device It may be a data group including data indicating these parameters.
  • the information processing apparatus is information related to the imaging apparatus that indicates the position of the imaging apparatus, the attitude of the imaging apparatus, and the parameters of the imaging apparatus estimated in the external apparatus of the information processing apparatus according to the present embodiment. Based on the above, notification regarding the relationship between the imaging devices may be made.
  • the information processing apparatus provides a visual notification by displaying notification content on a display screen, an auditory notification by causing a sound output device such as a speaker to output a sound indicating the notification content, or
  • the notification regarding the relationship between the imaging devices is performed by a combination of these.
  • Examples of the notification regarding the relationship according to the present embodiment include one or both of the notification shown in the following (a) and the notification shown in the following (b).
  • the information processing device provides notification of the state of the imaging device with respect to a region to be imaged by the imaging device, such as a region where the sport is performed, as a notification regarding the relationship. Do.
  • the region to be imaged by the imaging device is specified based on the region information.
  • the state of the imaging device with respect to the region according to the present embodiment is represented by, for example, the imaging range of the imaging device with respect to the region to be captured by the imaging device. That is, the information processing apparatus according to the present embodiment performs notification of the imaging range of the imaging apparatus for the area as the notification of the state of the imaging apparatus for the area to be imaged by the imaging apparatus.
  • the “state of the imaging device with respect to the region represented by the imaging range of the imaging device with respect to the region to be imaged by the imaging device” can be rephrased as “the state of arrangement of the imaging device with respect to the region to be imaged by the imaging device”. is there. That is, the information processing apparatus according to the present embodiment performs notification of the arrangement of the imaging device with respect to the region as the notification of the state of the imaging device with respect to the region to be imaged by the imaging device.
  • the notification regarding the relationship according to the first example enables the person who arranges the imaging device to grasp the relationship between the area to be imaged by the imaging device and the imaging range of the imaging device. Therefore, the person who arranges the imaging apparatus can more easily change the arrangement of the imaging apparatus to a more suitable arrangement.
  • the notification regarding the relationship according to the first example is performed, whereby the placement of the imaging device by the person who places the imaging device can be assisted.
  • a specific example of the notification related to the relationship according to the first example will be described later.
  • the information processing apparatus performs notification that assists in changing the arrangement of the imaging device as the notification regarding the relationship.
  • the notification for assisting the change of the arrangement of the imaging device includes a notification for changing the arrangement of the imaging device so that the area to be imaged by the imaging device is included in the imaging range of the imaging device. .
  • the information processing apparatus when the information processing apparatus according to the present embodiment targets a plurality of imaging devices, that is, when the information processing apparatus according to the present embodiment makes a notification regarding the relationship between each of the plurality of imaging devices, The information processing apparatus further performs notification for changing the arrangement of the imaging devices so that a region where the imaging ranges of the plurality of imaging devices overlap in a region to be imaged by the imaging device becomes larger.
  • notification for changing the arrangement of imaging devices so that the area where the imaging ranges of a plurality of imaging devices overlap becomes larger
  • “the result of aggregating information of a plurality of imaging devices described later is a predetermined state. “Notification that assists in changing the arrangement of the imaging device so as to satisfy”.
  • making the region where the imaging ranges of the plurality of imaging devices overlap as described above larger corresponds to the condition relating to the first restriction in the change in the arrangement of the imaging devices.
  • the information processing apparatus according to the present embodiment when the information processing apparatus according to the present embodiment makes a notification regarding the relationship between each of the plurality of imaging apparatuses, the information processing apparatus according to the present embodiment further performs imaging so as to satisfy the effective imaging distance of the plurality of imaging apparatuses. You may perform notification which changes arrangement
  • the effective imaging distance of the imaging apparatus according to the present embodiment is, for example, “a distance to a subject where the imaging apparatus can focus and image the subject, and the imaging apparatus can normally capture the subject. "Distance to subject”.
  • the effective imaging distance of the imaging apparatus according to the present embodiment is, for example, “large enough that the subject included in the captured image captured by the imaging apparatus can be identified by predetermined image processing such as image recognition.
  • the effective imaging distance of the imaging apparatus according to the present embodiment is estimated from the parameters of the imaging apparatus, for example.
  • each of the plurality of imaging devices can obtain sufficient performance for the subject existing in the region to be imaged by the imaging device. It is possible to take an image.
  • satisfying the effective imaging distance of the plurality of imaging devices described above corresponds to the condition relating to the second restriction in the change in the arrangement of the imaging devices.
  • the information processing apparatus performs notification for changing the arrangement of the imaging apparatus so as to satisfy, for example, one of the condition related to the first constraint and the condition related to the second constraint.
  • the information processing apparatus may perform notification that the arrangement of the imaging apparatus is changed within a range that satisfies the condition related to the first constraint and the condition related to the second constraint, for example.
  • the information processing apparatus is an arrangement in which an evaluation value is maximized based on a predetermined evaluation function, such as an evaluation function using an area of a region overlapping with an effective imaging distance as a parameter (for example, (Optimized arrangement) is calculated, and notification is made to change the arrangement of the imaging device so as to be the calculated arrangement.
  • condition relating to the restriction in the change of the arrangement of the imaging device according to the present embodiment is not limited to the condition relating to the first restriction and the condition relating to the second restriction.
  • the information processing apparatus according to the present embodiment uses a predetermined evaluation function for two or more constraints that are in a trade-off relationship with each other, such as a direction in which the imaging apparatus is moved away and a direction in which the imaging apparatus is moved closer. It is possible to optimize the arrangement of the imaging device by setting.
  • the information processing apparatus provides a notification that changes one or more of the angle of view, the orientation, and the position of the imaging device as a notification that assists in changing the arrangement of the imaging device. Do.
  • the information processing apparatus specifies the position of the imaging device with respect to the region to be imaged by the imaging device based on the position of the imaging device indicated by the information related to the imaging device, for example.
  • the information processing apparatus determines, for example, the orientation of the imaging device with respect to the region to be imaged by the imaging device (the orientation of the imaging device with respect to the region) based on the orientation of the imaging device indicated by the information related to the imaging device. Identify.
  • the information processing apparatus specifies the angle of view of the imaging device based on, for example, the parameters of the imaging device indicated by the information related to the imaging device.
  • the information processing apparatus is changed, for example, so that “one or more of the angle of view, the orientation, and the position of the identified imaging apparatus is suitable for imaging of an area to be captured by the imaging apparatus.
  • Notification As an example of the notification to be changed so as to be suitable for the imaging of the area to be imaged by the imaging device according to the present embodiment, for example, imaging is performed so that the result of “aggregating information of a plurality of imaging devices described later satisfies a predetermined state” Notification to assist in changing the arrangement of the device ”.
  • the information processing apparatus notifies, for example, how to change the angle of view, orientation, and position of the imaging apparatus in a set order.
  • the information processing apparatus according to the present embodiment notifies how to change each item, for example, in the order of the angle of view, the direction, and the position.
  • the information processing apparatus according to the present embodiment notifies, for example, how to change each item by rotating every set time.
  • the information processing apparatus may notify simultaneously how to change two or more of the angle of view, orientation, and position of the imaging apparatus.
  • the information processing device according to the present embodiment rotates at every set time as in the case of notification in the set order. Notice.
  • a person who arranges the imaging device can change the arrangement of the imaging device according to the notification content. Therefore, the person who arranges the imaging apparatus can more easily change the arrangement of the imaging apparatus to a more suitable arrangement.
  • the notification regarding the relationship according to the second example is performed, so that it is possible to assist the person who places the imaging device to place the imaging device.
  • a specific example of the notification related to the relationship according to the second example will be described later.
  • the information processing apparatus includes, for example, a notification regarding the relationship according to the first example illustrated in (a) above and a notification regarding the relationship according to the second example illustrated in (b) above as the notification regarding the relationship. Do one or both of the following:
  • the information processing apparatus can assist the arrangement of the imaging apparatus.
  • notification regarding the relationship according to the present embodiment is not limited to the notification regarding the relationship according to the first example illustrated in (a) above and the notification regarding the relationship according to the second example illustrated in (b) above.
  • notification related to the relationship according to the present embodiment “notification that the arrangement of the imaging apparatus is completed” described later is given.
  • FIG. 1 is an explanatory diagram showing an example of an information processing system 1000 to which the information processing method according to this embodiment is applied.
  • the information processing system 1000 includes, for example, the information processing device 100 and the imaging devices 200A, 200B, and 200C.
  • one of the imaging devices 200A, 200B, and 200C may be indicated, or the imaging devices 200A, 200B, and 200C may be collectively referred to as “imaging device 200”.
  • the imaging apparatus may be referred to as a “camera”.
  • the information processing apparatus 100 and the imaging apparatus 200 are connected, for example, wirelessly or by wire via the network 300, and perform communication by communication via the network 300.
  • the network 300 for example, a wired network such as a LAN (Local Area Network) or a WAN (Wide Area Network), a wireless network such as a WLAN (Wireless Local Area Network), or TCP / IP (Transmission Control). Internet using a communication protocol such as Protocol / Internet Protocol).
  • the information processing apparatus 100 and the imaging apparatus 200 can directly communicate with each other without using the network 300.
  • FIG. 1 shows a configuration having three imaging devices 200
  • the information processing system according to the present embodiment includes one imaging device 200, two imaging devices, or four or more imaging devices 200.
  • the information processing system according to the present embodiment may further include a relay device (not shown) that relays communication between the information processing device 100 and the imaging device 200.
  • the relay device has a function of aggregating various data such as image data and a function of aggregating various data, for example. It may also serve as a dispensing device. Examples of the relay device (not shown) include a router.
  • Information processing apparatus 100 is an apparatus that performs processing related to the information processing method according to the above-described embodiment.
  • FIG. 2 is a block diagram illustrating an example of the configuration of the information processing apparatus 100 according to the present embodiment.
  • the information processing apparatus 100 includes, for example, a communication unit 102 and a control unit 104.
  • the information processing apparatus 100 is operated by, for example, a ROM (Read Only Memory. Not shown), a RAM (Random Access Memory. Not shown), a storage unit (not shown), or a user of the information processing apparatus 100.
  • a possible operation unit (not shown), a display unit (not shown) for displaying various screens on the display screen, and the like may be provided.
  • the information processing apparatus 100 connects the above constituent elements by, for example, a bus as a data transmission path.
  • a ROM (not shown) stores control data such as a program used by the control unit 104 and calculation parameters.
  • a RAM (not shown) temporarily stores a program executed by the control unit 104.
  • the storage unit (not shown) is a storage unit included in the information processing apparatus 100 and stores various data such as data related to the information processing method according to the present embodiment such as region information and various applications.
  • examples of the storage unit (not shown) include a magnetic recording medium such as a hard disk, and a nonvolatile memory such as a flash memory. Further, the storage unit (not shown) may be detachable from the information processing apparatus 100.
  • an operation input device to be described later can be cited.
  • a display part (not shown), the display device mentioned later is mentioned.
  • FIG. 3 is an explanatory diagram illustrating an example of a hardware configuration of the information processing apparatus 100 according to the present embodiment.
  • the information processing apparatus 100 includes, for example, an MPU 150, a ROM 152, a RAM 154, a recording medium 156, an input / output interface 158, an operation input device 160, a display device 162, and a communication interface 164.
  • the information processing apparatus 100 connects each component with a bus 166 as a data transmission path, for example.
  • the information processing apparatus 100 is driven by, for example, power supplied from an internal power supply such as a battery provided in the information processing apparatus 100, or power supplied from a connected external power supply.
  • the MPU 150 includes, for example, one or more processors configured with arithmetic circuits such as an MPU (Micro Processing Unit) and various processing circuits, and functions as the control unit 104 that controls the entire information processing apparatus 100. . Further, the MPU 150 plays a role of, for example, the processing unit 110 described later in the information processing apparatus 100.
  • the processing unit 110 may be configured with a dedicated (or general-purpose) circuit (for example, a processor separate from the MPU 150).
  • the ROM 152 stores programs used by the MPU 150, control data such as calculation parameters, and the like.
  • the RAM 154 temporarily stores a program executed by the MPU 150, for example.
  • the recording medium 156 functions as a storage unit (not shown), and stores various data such as data related to the information processing method according to the present embodiment such as region information and various applications.
  • examples of the recording medium 156 include a magnetic recording medium such as a hard disk and a non-volatile memory such as a flash memory. Further, the recording medium 156 may be detachable from the information processing apparatus 100.
  • the input / output interface 158 connects, for example, the operation input device 160 and the display device 162.
  • the operation input device 160 functions as an operation unit (not shown)
  • the display device 162 functions as a display unit (not shown).
  • examples of the input / output interface 158 include a USB (Universal Serial Bus) terminal, a DVI (Digital Visual Interface) terminal, an HDMI (High-Definition Multimedia Interface) (registered trademark) terminal, and various processing circuits. .
  • the operation input device 160 is provided on the information processing apparatus 100, for example, and is connected to the input / output interface 158 inside the information processing apparatus 100.
  • Examples of the operation input device 160 include a button, a direction key, a rotary selector such as a jog dial, or a combination thereof.
  • the display device 162 is provided on the information processing apparatus 100, for example, and is connected to the input / output interface 158 inside the information processing apparatus 100.
  • Examples of the display device 162 include a liquid crystal display (Liquid Crystal Display), an organic EL display (Organic Electro-Luminescence Display, or an OLED display (Organic Light Emitting Diode Display)), and the like.
  • the input / output interface 158 can be connected to an external device such as an operation input device (for example, a keyboard or a mouse) external to the information processing apparatus 100 or an external display device.
  • the display device 162 may be a device capable of display and user operation, such as a touch panel.
  • the communication interface 164 is a communication unit included in the information processing apparatus 100, and a communication unit 102 for performing wireless or wired communication with an external apparatus such as the imaging apparatus 200 via the network 300 (or directly). Function as.
  • the communication interface 164 for example, a communication antenna and an RF (Radio Frequency) circuit (wireless communication), an IEEE 802.15.1 port and a transmission / reception circuit (wireless communication), an IEEE 802.11 port and a transmission / reception circuit (wireless communication). ), Or a LAN (Local Area Network) terminal and a transmission / reception circuit (wired communication).
  • the communication interface 164 may have an arbitrary configuration corresponding to the network 300.
  • the information processing apparatus 100 performs processing related to the information processing method according to the present embodiment, for example, with the configuration illustrated in FIG. 3. Note that the hardware configuration of the information processing apparatus 100 according to the present embodiment is not limited to the configuration illustrated in FIG. 3.
  • the information processing apparatus 100 may not include the communication interface 164 when communicating with an external apparatus or the like via a connected external communication device.
  • the communication interface 164 may be configured to be able to communicate with one or more external devices or the like by a plurality of communication methods.
  • the information processing apparatus 100 may further include an imaging device, for example.
  • the imaging device functions as an imaging unit (not shown) that generates a captured image (moving image or still image) by imaging.
  • the information processing apparatus 100 may further include an audio output device such as a speaker, for example.
  • the information processing apparatus 100 can have a configuration that does not include the recording medium 156, the operation input device 160, and the display device 162, for example.
  • the information processing apparatus 100 can take a configuration according to an application example of the information processing apparatus 100 described later, for example.
  • part or all of the configuration shown in FIG. 3 may be realized by one or two or more ICs (Integrated Circuits).
  • the communication unit 102 is a communication unit included in the information processing apparatus 100, and communicates with an external apparatus such as the imaging apparatus 200 wirelessly or via a network 300 (or directly).
  • the communication of the communication unit 102 is controlled by the control unit 104, for example.
  • examples of the communication unit 102 include a communication antenna and an RF circuit, a LAN terminal, and a transmission / reception circuit, but the configuration of the communication unit 102 is not limited to the above.
  • the communication unit 102 can have a configuration corresponding to an arbitrary standard capable of performing communication such as a USB terminal and a transmission / reception circuit, or an arbitrary configuration capable of communicating with an external device via the network 300.
  • the communication unit 102 may be configured to be able to communicate with one or more external devices or the like by a plurality of communication methods.
  • the control unit 104 is configured by, for example, an MPU and plays a role of controlling the entire information processing apparatus 100.
  • the control unit 104 includes, for example, a processing unit 110 and plays a role of leading the processing related to the information processing method according to the present embodiment.
  • the processing unit 110 plays a role of leading the processing related to the information processing method according to the present embodiment. For example, the processing unit 110 notifies the relationship between the imaging devices based on the region information and the information related to the imaging device. For example, the processing unit 110 may notify one or both of the notification regarding the relationship according to the first example illustrated in (a) and the notification regarding the relationship according to the second example illustrated in (b) above. Do.
  • the information processing apparatus 100 performs processing related to the information processing method according to the present embodiment, for example, with the configuration illustrated in FIG. Therefore, the information processing apparatus 100 can assist the arrangement of the imaging apparatus with the configuration illustrated in FIG. 2, for example.
  • the information processing apparatus 100 can exhibit the effect that is achieved by performing the processing according to the information processing method according to the present embodiment.
  • the information processing apparatus can include the processing unit 110 illustrated in FIG. 2 separately from the control unit 104 (for example, realized by another processing circuit).
  • the configuration for realizing the processing related to the information processing method according to the present embodiment is not limited to the configuration illustrated in FIG. 2, and takes a configuration according to the method of dividing the processing according to the information processing method according to the present embodiment. It is possible.
  • the information processing apparatus when communicating with an external device via an external communication device having the same function and configuration as the communication unit 102, does not include the communication unit 102. Also good.
  • Imaging apparatus 200 The imaging device 200 is an imaging device that is arranged to capture an area where sports are performed, for example, and generates a captured image (moving image or still image) by imaging.
  • the imaging apparatus 200 includes, for example, a lens / imaging element and a signal processing circuit.
  • the lens / imaging device includes, for example, an optical lens and an image sensor using a plurality of imaging devices such as CMOS (Complementary Metal Oxide Semiconductor).
  • the signal processing circuit includes, for example, an AGC (Automatic Gain Control) circuit and an ADC (Analog to Digital Converter), and converts an analog signal generated by the image sensor into a digital signal (image data).
  • the signal processing circuit performs various processes related to, for example, RAW development.
  • the signal processing circuit may perform various signal processing such as, for example, White Balance correction processing, color tone correction processing, gamma correction processing, YCbCr conversion processing, and edge enhancement processing.
  • the image capturing apparatus 200 may be able to perform arbitrary image processing using the computation resources of the signal processing circuit.
  • the imaging apparatus 200 includes, for example, a communication device or an external communication device is connected.
  • the imaging apparatus 200 is wirelessly or wired with an external apparatus such as the information processing apparatus 100 via the network 300 (or directly) by a communication device provided or a connected external communication device. Communicate.
  • the imaging apparatus 200 may include a display device, or an external display device may be connected.
  • the configuration of the imaging apparatus 200 is not limited to the example described above, and can be configured according to an application example of the imaging apparatus 200 described later.
  • FIG. 4 is an explanatory diagram illustrating an example of a three-dimensional space in which the imaging devices 200 constituting the information processing system 1000 according to the present embodiment are arranged.
  • FIG. 4 shows an example in which the three-dimensional space in which the imaging device 200 is arranged is a gymnasium including a volleyball court.
  • the arrangement of an imaging device for imaging a sport is often performed in the absence of a player and a ball. More specifically, sports imaging by the imaging device includes, for example, “equipment preparation”, “arrangement of the imaging device”, “test imaging by the arranged imaging device”, “main imaging by the arranged imaging device”, It is performed in the flow of “withdrawal of equipment”.
  • the information processing method according to the present embodiment is applied to the “imaging device placement” stage in the above flow, for example.
  • FIG. 5 is a flowchart showing an example of processing related to the information processing method according to the present embodiment.
  • FIG. 5 shows an example of processing from when the imaging apparatus 200 is temporarily placed until the placement is completed.
  • the information processing apparatus 100 sets area information corresponding to sports (S100). For example, when the imaging device 200 is arranged in a gymnasium shown in FIG. 4, in step S100, area information corresponding to volleyball (an example of sports) is set.
  • the information processing apparatus 100 sets region information corresponding to a sport by reading region information corresponding to the detected setting operation from a recording medium such as a storage unit (not shown), for example. Further, the information processing apparatus 100 transmits the area information read from the recording medium to each of the imaging apparatuses 200.
  • the area information may be stored in part or all of the imaging devices 200 constituting the information processing system 1000, or part or all of the devices constituting the information processing system 1000 may be distributed. You may remember.
  • FIG. 6 is an explanatory diagram for explaining an example of the area information according to the present embodiment.
  • FIG. 6 shows an example of a table (or database) in which area information is recorded for each sport.
  • “Court” shown in FIG. 6A is data defining a court or ground area where each sport is performed. Further, the “player range” shown in B of FIG. 6 is data that defines an area where a player of each sport can move. Further, the “ball range” shown in C of FIG. 6 is data defining a region where a ball used in each sport can move.
  • the areas indicated by “court” shown in FIG. 6A, “player range” shown in FIG. 6B, and “ball range” shown in FIG. 6C are, for example, predetermined positions set on the court or ground. Is represented by a distance (each distance in the horizontal direction, the vertical direction, and the depth direction). Each of the “court” shown in FIG. 6A, the “player range” shown in FIG. 6B, and the “ball range” shown in FIG. An example expressed in [meter] is shown.
  • the predetermined position is not limited to the corner position on the court or ground.
  • the predetermined position may be a center position on a court or ground. When the predetermined position is the center position, by treating the court or ground as symmetrical, the “court” shown in FIG. 6A, the “player range” shown in FIG. 6B, and the FIG. It is possible to specify the area indicated by each “ball range” shown in C.
  • the data indicated by the “court” shown in FIG. 6A, the “player range” shown in FIG. 6B, and the “ball range” shown in FIG. 6C correspond to an example of the area information.
  • a table in which area information is recorded for each sport indicates “minimum number of cameras necessary for imaging the target sport area”.
  • the “number of cameras” and “camera effective distance” indicating an effective imaging distance in the imaging apparatus to be used may be included.
  • the “minimum number of cameras” shown in D of FIG. 6 and the “camera effective distance” shown in E of FIG. 6 vary depending on, for example, the focal length and image size of the imaging apparatus.
  • the “camera effective distance” corresponds to the effective imaging distance of the imaging apparatus described above.
  • the information processing apparatus 100 acquires a player / ball range (S102).
  • the player / ball range acquired in step S102 corresponds to an example of an area to be imaged by the imaging apparatus according to the present embodiment.
  • the information processing apparatus 100 acquires a player / ball range by performing a calculation for obtaining the player / ball range based on the area information set in step S100, for example.
  • the calculation for determining the player / ball range includes, for example, an area indicated by “court” shown in FIG. 6A, an area indicated by “player range” shown in FIG. 6B, and a “ball range” shown in FIG. 6C.
  • the method by which the information processing apparatus 100 acquires the player / ball range is not limited to the example shown above.
  • the information processing apparatus 100 can acquire the player / ball range by acquiring the result of the calculation for obtaining the player / ball range performed in the imaging apparatus 200 from the imaging apparatus 200 by communication. is there.
  • FIG. 7 is an explanatory diagram for explaining an example of processing related to the information processing method according to the present embodiment, and shows an example of the player / ball range acquired in step S102 of FIG.
  • step S100 the player / ball range is set as indicated by the symbol R in FIG.
  • the player / ball range acquired in step S102 of FIG. 5 as indicated by the symbol R in FIG. 7 is referred to as “player / ball range R”.
  • the information processing apparatus 100 acquires the position, orientation, and parameters of the imaging apparatus 200 (S104).
  • the information processing apparatus 100 associates the feature amount detected from the captured image acquired from each of the imaging devices 200 with the feature amount defined in the set sports-specific information, thereby associating the imaging device 200 with the feature amount.
  • the feature amount defined in the sports-specific information include “a plurality of predetermined positions on the court whose mutual positional relationship is known”.
  • Specific examples of the plurality of predetermined positions on the court when the sport is volleyball include, for example, the positions of the four corners of the court, the positions where the lines meet, the positions on the net, and the positions of the pillars supporting the net. It is done.
  • the information processing apparatus 100 obtains a feature amount from the captured image by performing image processing for detecting a predetermined position from the captured image, for example. Then, for example, the information processing apparatus 100 performs pattern matching between the feature amount detected from the captured image and the feature amount defined in the sports-specific information.
  • the information processing apparatus 100 can estimate the position of the imaging apparatus 200 with respect to the court indicated by the sports-specific information, for example, by performing pattern matching as described above.
  • the information processing apparatus 100 can estimate the orientation of the imaging apparatus 200 with respect to the court by estimating the posture of the imaging apparatus 200 with respect to the court indicated by the sports-specific information, for example, by performing pattern matching as described above. it can.
  • the method for estimating the position and orientation of the imaging apparatus 200 based on the captured image is not limited to the example described above.
  • the information processing apparatus 100 may perform an arbitrary process that can estimate the position and orientation of the imaging apparatus 200 based on the captured image, such as a method using Structure from Motion.
  • the information processing apparatus 100 estimates the parameters of the imaging apparatus 200 based on, for example, the feature quantities detected from the captured image and the feature quantities defined in the sports-specific information.
  • the information processing apparatus 100 can estimate the parameters of the imaging apparatus 200 by using a technique called camera calibration.
  • the information processing apparatus 100 estimates the parameters of the imaging apparatus 200 by using, for example, a calibrationCamera provided by OpenCV that is an image processing library.
  • the data indicating the position of the imaging device 200, the orientation of the imaging device 200, and the parameters of the imaging device 200 estimated in step S104 correspond to an example of information related to the imaging device.
  • the information processing apparatus 100 projects the player / ball range R acquired in step S102 onto each captured image of the imaging apparatus 200 (S106).
  • FIG. 8 is an explanatory diagram for explaining an example of processing according to the information processing method according to the present embodiment, and a player / ball range R is projected on a captured image in a certain imaging apparatus 200 in step S106 of FIG. An example of the captured image is shown.
  • the information processing apparatus 100 displays, on the display screen, a captured image on which a player / ball range R as shown in FIG. 8 is projected, for example.
  • a display screen on which a captured image on which the player / ball range R is projected is displayed, for example, a display device (or a connected external display device) included in the imaging device 200 that captures the captured image before projection is provided.
  • a display screen on which a captured image on which the player / ball range R is projected is displayed is confirmed by a person who arranges the imaging device 200, such as a display screen of a display unit (not shown) included in the information processing device 100. It may be a display screen of an arbitrary display device.
  • the person who arranges the imaging device 200 is an example of the player / ball range R (an area to be captured by the imaging device 200).
  • the imaging range of the imaging apparatus 200 can be visually grasped. That is, the fact that the information processing apparatus 100 displays the captured image on which the player / ball range R is projected on the display screen corresponds to an example of a notification regarding the relationship according to the first example shown in (a).
  • the information processing apparatus 100 determines whether all the imaging apparatuses 200 to be arranged have been processed (S108). As all the imaging devices 200 to be arranged, for example, all the imaging devices 200 constituting the information processing system 1000 can be cited.
  • the information processing apparatus 100 determines that all the imaging apparatuses 200 have been processed when, for example, the positions of all the imaging apparatuses 200 to be arranged are estimated.
  • step S108 If it is not determined in step S108 that all the imaging devices 200 have been processed, the information processing device 100 repeats the processing from step S104.
  • the information processing device 100 aggregates information of the plurality of imaging devices 200 (S110).
  • FIG. 9 is an explanatory diagram for explaining an example of processing related to the information processing method according to the present embodiment, and an example of a result of aggregating information of the imaging devices 200A, 200B, and 200C in step S110 of FIG. Show.
  • the player / ball range R is represented by a plane for reasons of increasing visibility.
  • the player / ball range R can be represented in a three-dimensional space, and the same aggregation as in FIG. 9 can be performed.
  • “0Cam” shown in FIG. 9 indicates an area of the player / ball range R that is not captured by any of the imaging devices 200A, 200B, and 200C. Further, “1Cam” illustrated in FIG. 9 indicates an area of the player / ball range R that is captured by only one of the imaging devices 200A, 200B, and 200C. Further, “2Cam” illustrated in FIG. 9 indicates an area of the player / ball range R that is imaged by the two imaging devices 200 of the imaging devices 200A, 200B, and 200C. “3Cam” shown in FIG. 9 indicates an area of the player / ball range R that is imaged by all of the imaging devices 200A, 200B, and 200C. That is, the example illustrated in FIG. 9 illustrates an example in which the player / ball range R is classified into four regions according to the state where the imaging ranges of the imaging device 200 overlap.
  • the result of aggregating information of the plurality of imaging devices 200 is not limited to the example illustrated in FIG.
  • the player / ball range R may be classified into two types of areas, that is, a good area and an unfavorable area (bad area) according to the state where the imaging ranges of the imaging device 200 overlap.
  • the “2Cam” and “3Cam” regions shown in FIG. 9 are classified as good regions, and the “0Cam” and “1Cam” regions are classified as poor regions.
  • the information processing apparatus 100 may display, on the display screen, an image indicating a result of aggregating information of the plurality of imaging apparatuses 200 as illustrated in FIG.
  • an image showing the result of aggregating the information of the plurality of imaging devices 200 is displayed on the display screen, the area into which the player / ball range R is classified is a different area, for example, by being color-coded for each area. Processing that is visually recognized as being present.
  • a display screen on which an image showing a result of aggregating information of a plurality of imaging devices 200 is displayed for example, a display device (or a connected external display) included in the imaging device 200 that captures a captured image before projection. Device).
  • a display screen on which an image indicating a result of aggregating information of the plurality of imaging devices 200 is displayed is a display screen of a display unit (not shown) included in the information processing device 100, such as a person who arranges the imaging device 200. It may be a display screen of an arbitrary display device that can be confirmed.
  • the image indicating the result of aggregating information of the plurality of imaging devices 200 is displayed on the display screen, so that the person who arranges the imaging device 200 causes the player / ball range R (the imaging device 200 to capture images).
  • An example of the region) and the relationship between the imaging range of the imaging device 200 can be visually grasped. That is, the fact that the information processing apparatus 100 causes the display screen to display an image indicating the result of aggregating information of the plurality of imaging apparatuses 200 corresponds to an example of the notification related to the relationship according to the first example shown in (a) above. To do.
  • the image which shows the result which aggregated the information of the several imaging device 200 is not restricted to the example shown in FIG.
  • the information processing apparatus 100 may cause the display screen to display a captured image in which a region in which the player / ball range R is classified as illustrated in FIG. 9 is superimposed.
  • the information processing apparatus 100 superimposes the region where the player / ball range R is classified on the captured image captured by each of the imaging apparatuses 200 by, for example, projection conversion.
  • FIG. 10 is an explanatory diagram for explaining an example of processing related to the information processing method according to the present embodiment, and shows another example of an image showing a result of aggregating information of a plurality of imaging devices 200.
  • the information processing apparatus 100 can also display, on the display screen, an image indicating the imaging range of the imaging apparatus 200 with respect to the player / ball range R for each imaging apparatus 200.
  • the information processing apparatus 100 proposes an arrangement plan for the imaging apparatus 200 (S112).
  • the information processing apparatus 100 proposes an arrangement plan of the imaging apparatus 200 by, for example, performing notification regarding the relationship according to the second example illustrated in (b) above.
  • FIG. 11 is an explanatory diagram for explaining an example of processing related to the information processing method according to the present embodiment, and is an arrangement proposal for an image showing a result of aggregating information of a plurality of imaging devices 200 shown in FIG. An example is shown.
  • the information processing apparatus 100 performs notification that changes one or more of the angle of view, the angle, and the position of the imaging apparatus 200.
  • the change in the angle of the imaging device 200 illustrated in FIG. 11 corresponds to the change in the orientation of the imaging device 200.
  • the image showing the result of collecting the information of the plurality of imaging devices 200 shown in FIG. 9 is an example in which the player / ball range R is represented by a plane. Therefore, in FIG. 11, “an example in which the information processing apparatus 100 performs notification to change the angle (orientation) in the planar direction of the imaging apparatus 200 and performs notification to change the position in the planar direction of the imaging apparatus 200”. Is shown.
  • the information processing device 100 calculates the angle between the plane direction and the angle in the vertical direction. One or both may be changed.
  • the information processing apparatus 100 may change one or both of the position in the plane direction and the position in the vertical direction.
  • the information processing apparatus 100 notifies, for example, how to change the angle of view, the angle (orientation), and the position of the imaging apparatus 200 in a set order. Further, the information processing apparatus 100 may simultaneously notify, for example, how to change two or more of the angle of view, the angle (orientation), and the position of the imaging apparatus 200.
  • FIG. 11 shows a state in which an arrangement plan is proposed for one imaging apparatus 200, but the information processing apparatus 100 is arranged for each of all the imaging apparatuses 200 to be arranged or arranged.
  • An arrangement plan is proposed for a part of the target imaging devices 200.
  • an arrangement plan is proposed for the imaging apparatus 200 to be arranged
  • a person who arranges the imaging apparatus 200 changes the arrangement of the imaging apparatus 200 according to the proposed arrangement plan (notification contents). be able to. Therefore, the person who arranges the imaging apparatus 200 can more easily change the arrangement of the imaging apparatus 200 to a more suitable arrangement.
  • the information processing apparatus 100 determines whether or not the arrangement of the arrangement target imaging apparatus 200 has been completed (S114).
  • the information processing apparatus 100 determines, for example, whether or not the result of aggregating information of the plurality of imaging apparatuses 200 satisfies a set predetermined state. Then, the information processing apparatus 100 determines that the arrangement of the imaging device 200 is completed when it is determined that the result of aggregating information of the plurality of imaging devices 200 satisfies the predetermined state.
  • FIG. 12 is an explanatory diagram for explaining an example of processing related to the information processing method according to the present embodiment, and an example of a case where a result of aggregating information of a plurality of imaging devices 200 satisfies the predetermined state. Is shown.
  • the entire player / ball range R is imaged by all the imaging devices 200 to be arranged (that is, the entire player / ball range R is “3Cam. In the state of “)”.
  • the predetermined state is not limited to the example shown above.
  • the predetermined state may be a state where the entire player / ball range R is in the above-described good region. That is, as the predetermined state according to the present embodiment, for example, the entire player / ball range R is included in the imaging range of the imaging device 200 and the region where the imaging ranges of the plurality of imaging devices 200 overlap is larger. Such a state is set.
  • the state in which the entire player / ball range R is included in the imaging range of the imaging device 200 and the region where the imaging ranges of the plurality of imaging devices 200 overlap is larger is set as the predetermined state.
  • the predetermined state may be a preset fixed state or a variable state that can be changed based on an operation of the user of the information processing apparatus 100 or the like.
  • step S114 If it is not determined in step S114 that the arrangement of the imaging device 200 has been completed, the information processing device 100 repeats the processing from step S104.
  • step S114 If it is determined in step S114 that the arrangement of the imaging device 200 has been completed, the information processing device 100 completes the processing illustrated in FIG.
  • the information processing device 100 may notify the person who arranges the imaging device 200 that the arrangement of the imaging device 200 is completed.
  • a notification that the arrangement of the imaging device 200 is completed a visual notification to be displayed on a display screen such as an image or a character indicating that the arrangement is completed, and a sound indicating that the arrangement is completed are output to the audio output device. An audible notification or a combination of these is given.
  • the person who arranges the imaging apparatus 200 confirms that the arrangement of the imaging apparatus 200 to be arranged is completed. Can be recognized by notification. Therefore, the notification that the arrangement of the imaging apparatus 200 is completed as described above can assist the person who arranges the imaging apparatus 200 to arrange the imaging apparatus 200. That is, the notification that the arrangement of the imaging device 200 as described above is completed corresponds to an example of a notification regarding the relationship between the imaging devices according to the present embodiment.
  • the arrangement of the imaging device 200 in the gymnasium shown in FIG. 4 is realized.
  • the information processing apparatus 100 performs notification that assists in changing the arrangement of the imaging apparatus 200 so that the result of aggregating information of the plurality of imaging apparatuses 200 satisfies a predetermined state.
  • the predetermined state for example, “a state where the entire player / ball range R is imaged by all the imaging devices 200 to be arranged” or “the entire player / ball range R is in the above-described good region”.
  • a state is set such that a region where the imaging ranges of the plurality of imaging devices 200 overlap becomes larger, such as “state”.
  • the person who arranges the imaging apparatus 200 can arrange the imaging apparatus 200 to be arranged so that tracking of the player and the ball by the arranged imaging apparatus 200 is performed with high accuracy and stability. .
  • the example of the process related to the information processing method according to the present embodiment is not limited to the example shown in FIG.
  • the information processing device has been described as a component of the information processing system according to the present embodiment. It is not limited to form.
  • the present embodiment includes, for example, “computers such as PCs (Personal Computers) and servers”, “tablet devices”, “game machines”, “cameras such as digital still cameras and digital video cameras”, and the like.
  • the present invention can be applied to various devices that can perform the processing related to the information processing method.
  • the present embodiment can be applied to a processing IC that can be incorporated in the above-described device, for example.
  • the information processing apparatus may be applied to a processing system that is premised on connection to a network (or communication between apparatuses), such as cloud computing.
  • a processing system in which processing according to the information processing method according to the present embodiment is performed for example, “a part of processing according to the information processing method according to the present embodiment is performed by one apparatus configuring the processing system.
  • a system in which processing other than the part of the processing according to the information processing method according to the present embodiment is performed by another device that configures the processing system.
  • the imaging apparatus has been described as a component of the information processing system according to the present embodiment, the present embodiment is not limited to such a form.
  • the present embodiment for example, “cameras such as digital still cameras and digital video cameras”, “communication devices capable of capturing images such as smartphones and mobile phones”, “tablet types capable of capturing images”
  • the information processing apparatus according to the present embodiment may serve as an imaging apparatus.
  • a program for causing a computer system to function as the information processing apparatus according to the present embodiment (for example, a program capable of executing processing related to the information processing method according to the present embodiment) is executed by a processor or the like in the computer system. By doing so, the arrangement of the imaging device can be assisted.
  • the computer system according to the present embodiment includes a single computer or a plurality of computers. A series of processing relating to the information processing method according to the present embodiment is performed by the computer system according to the present embodiment.
  • a program for causing a computer system to function as the information processing apparatus according to the present embodiment is executed by a processor or the like in the computer system, thereby performing the above-described processing according to the information processing method according to the present embodiment. Effects can be achieved.
  • a program for causing a computer system to function as the information processing apparatus according to the present embodiment is provided.
  • the present embodiment further stores the program.
  • a recording medium can also be provided.
  • An information processing apparatus comprising: a processing unit that performs notification regarding a relationship between the area and the imaging device based on area information that defines an area to be imaged by the imaging apparatus and information on the imaging apparatus that is arranged.
  • a processing unit that performs notification regarding a relationship between the area and the imaging device based on area information that defines an area to be imaged by the imaging apparatus and information on the imaging apparatus that is arranged.
  • the processing unit notifies the state of the imaging apparatus with respect to the area as a notification regarding the relationship.
  • the processing unit notifies the imaging range of the imaging apparatus to the area as a notification of the state of the imaging apparatus to the area.
  • the processing unit notifies the arrangement of the imaging device with respect to the region as a notification of the state of the imaging device with respect to the region.
  • the information processing apparatus performs a notification for assisting a change in the arrangement of the imaging device as a notification regarding the relationship.
  • the processing unit performs notification for changing the arrangement of the imaging device so that the region is included in the imaging range of the imaging device, as notification for assisting the change of the arrangement of the imaging device.
  • Information processing device (7) The information processing apparatus according to (6), wherein the processing unit further performs notification to change an arrangement of the imaging devices so that a region where imaging ranges of a plurality of the imaging devices overlap in the region becomes larger.
  • the processing unit makes a notification regarding the relationship between the imaging devices based on the region defined by the region information set from a plurality of the region information. Any one of (1) to (11) The information processing apparatus described in 1. (13) The information processing apparatus according to (12), wherein the processing unit sets the area information corresponding to the detected predetermined setting operation. (14) The information processing apparatus according to any one of (1) to (13), wherein the area defined by the area information includes an area corresponding to a type of sport. (15) The information processing apparatus according to any one of (1) to (14), wherein the information related to the imaging apparatus indicates a position of the imaging apparatus, an attitude of the imaging apparatus, and parameters of the imaging apparatus.
  • the processor is Based on the captured image captured by the imaging device, the position of the imaging device, the attitude of the imaging device, and the parameters of the imaging device are estimated, The information processing according to (15), wherein a notification regarding the relationship between the imaging devices is performed based on information on the imaging device indicating the estimated position of the imaging device, the attitude of the imaging device, and parameters of the imaging device. apparatus.
  • the information processing apparatus includes a step of notifying the relationship between the area and the imaging apparatus based on area information that defines an area to be imaged by the imaging apparatus and information on the imaging apparatus that is arranged. Information processing method.
  • the information processing method according to (17), wherein in the notification step, notification of the state of the imaging device with respect to the region is performed as the notification regarding the relationship.
  • the region information defines a plurality of regions, The information according to any one of (17) to (19), wherein in the notifying step, a notification regarding the relationship between the imaging devices is performed based on the region set out of a plurality of the regions. Processing method.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • User Interface Of Digital Computer (AREA)
  • Studio Devices (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Alarm Systems (AREA)

Abstract

撮像装置に撮像させる領域を規定する領域情報と、配置されている撮像装置に関する情報とに基づいて、領域と撮像装置との関係に関する通知を行う処理部を備える、情報処理装置が、提供される。

Description

情報処理装置、および情報処理方法
　本開示は、情報処理装置、および情報処理方法に関する。
　撮像装置の傾きを通知する技術が開発されている。撮像装置に設定されているモードに適した傾きガイド表示を行う技術としては、例えば下記の特許文献１に記載の技術が挙げられる。
特開２００８－１７０３６号公報
　スポーツを例に挙げると、テニスや、バスケット、バレーボール、サッカー、卓球などのスポーツの中継を行うために、スポーツが行われる領域（３次元空間）を、撮像装置で撮像することが、行われている。
　ここで、上記のようなスポーツでは、選手の位置およびボールの位置が、テニスコートや、バスケットコート、バレーボールコート、サッカーグラウンド、卓球台が配置されている場所などを、大きく外れて動きまわることがある。また、上記のようなスポーツを撮像するための撮像装置の配置は、選手およびボールが存在しない状態で実施されるケースが多い。
　そのため、スポーツが行われているときに選手やボールが撮像されるように撮像装置を配置すること、すなわち、上記スポーツが行われる領域が撮像されるように撮像装置を配置することは、困難なものとなっている。さらに、撮像の対象となるスポーツを知らない者が撮像装置を配置する場合には、配置の難易度は、さらに上がる。
　本開示では、撮像装置の配置を補助することが可能な、新規かつ改良された情報処理装置、および情報処理方法を提案する。
　本開示によれば、撮像装置に撮像させる領域を規定する領域情報と、配置されている撮像装置に関する情報とに基づいて、上記領域と上記撮像装置との関係に関する通知を行う処理部を備える、情報処理装置が、提供される。
　また、本開示によれば、撮像装置に撮像させる領域を規定する領域情報と、配置されている撮像装置に関する情報とに基づいて、上記領域と上記撮像装置との関係に関する通知を行うステップを有する、情報処理装置により実行される情報処理方法が、提供される。
　本開示によれば、撮像装置の配置を補助することができる。
　なお、上記の効果は必ずしも限定的なものではなく、上記の効果とともに、または上記の効果に代えて、本明細書に示されたいずれかの効果、または本明細書から把握されうる他の効果が奏されてもよい。
本実施形態に係る情報処理方法が適用される情報処理システムの一例を示す説明図である。 本実施形態に係る情報処理装置の構成の一例を示すブロック図である。 本実施形態に係る情報処理装置のハードウェア構成の一例を示す説明図である。 本実施形態に係る情報処理システムを構成する撮像装置が配置される３次元空間の一例を示す説明図である。 本実施形態に係る情報処理方法に係る処理の一例を示す流れ図である。 本実施形態に係る領域情報の一例を説明するための説明図である。 本実施形態に係る情報処理方法に係る処理の一例を説明するための説明図である。 本実施形態に係る情報処理方法に係る処理の一例を説明するための説明図である。 本実施形態に係る情報処理方法に係る処理の一例を説明するための説明図である。 本実施形態に係る情報処理方法に係る処理の一例を説明するための説明図である。 本実施形態に係る情報処理方法に係る処理の一例を説明するための説明図である。 本実施形態に係る情報処理方法に係る処理の一例を説明するための説明図である。
　以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
　また、以下では、下記に示す順序で説明を行う。
　　１．本実施形態に係る情報処理方法
　　２．本実施形態に係るプログラム
（本実施形態に係る情報処理方法）
　以下では、本実施形態に係る情報処理方法に係る処理を、本実施形態に係る情報処理装置が行う場合を例に挙げる。本実施形態に係る情報処理装置の構成の一例については、本実施形態に係る情報処理方法に係る処理の一例の説明と共に、説明する。
　また、以下では、本実施形態に係る情報処理方法が、テニスや、バスケット、バレーボール、卓球などのスポーツが行われる領域を、撮像装置で撮像する場合に適用される例を、主に説明する。
　なお、本実施形態に係る情報処理方法が適用される例は、スポーツが行われる領域を撮像装置で撮像する例に限られない。例えば、本実施形態に係る情報処理方法は、防犯の対象となる領域を撮像装置で撮像する場合など、任意の所定の領域（３次元空間）を撮像装置で撮像する場合に、適用することが可能である。
［１］本実施形態に係る情報処理方法の概要
　上述したように、スポーツが行われているときに選手やボールが撮像されるように撮像装置を配置することは、困難なものとなっている。
　そこで、本実施形態に係る情報処理装置は、配置されている撮像装置について、当該撮像装置に撮像させる領域と当該撮像装置との関係に関する通知を行う。
　本実施形態に係る撮像装置に撮像させる領域と撮像装置との関係に関する通知とは、例えば後述する例に示すように、撮像装置を配置する者による撮像装置の配置を補助するための通知である。以下では、本実施形態に係る撮像装置に撮像させる領域と撮像装置との関係に関する通知を、「撮像装置の関係に関する通知」または単に「関係に関する通知」と示す場合がある。
　本実施形態に係る情報処理装置は、例えば、領域情報と、配置されている撮像装置に関する情報とに基づいて、撮像装置の関係に関する通知を行う。
　本実施形態に係る領域情報とは、撮像装置に撮像させる領域を規定するデータである。本実施形態に係る情報処理装置は、領域情報に基づいて、撮像装置に撮像させる領域を特定する。
　撮像装置に撮像させる領域としては、例えば、上記のようなスポーツが行われる領域が挙げられる。なお、撮像装置に撮像させる領域は、上記のようなスポーツが行われる領域に限られず、例えば上述したように、防犯の対象となる領域であってもよい。
　撮像装置に撮像させる領域がスポーツが行われる領域である場合、領域情報が規定する領域は、スポーツごとに規定される。つまり、領域情報が規定する領域には、例えば、スポーツの種類に応じた領域が含まれる。また、撮像装置に撮像させる領域が防犯の対象となる領域である場合、例えばマップを示すマップ情報などに基づいて領域が規定される。
　領域情報が規定する領域がスポーツごとに規定される場合のように、領域情報が複数存在する場合、本実施形態に係る情報処理装置は、複数の領域情報の中から設定された領域情報が規定する領域に基づいて、撮像装置の関係に関する通知を行う。
　より具体的には、本実施形態に係る情報処理装置は、例えば、検出された所定の設定操作に対応する領域情報を設定し、設定された領域情報が規定する領域に基づいて、撮像装置の関係に関する通知を行う。本実施形態に係る所定の設定操作としては、例えば、操作部（後述する）を用いた操作や、リモートコントローラなどの外部の操作デバイスを用いた操作、ジェスチャによる操作、音声による操作のうちの１または２以上などが、挙げられる。
　領域情報が規定する領域がスポーツごとに規定される場合、撮像装置を配置する者は、操作部（後述する）を用いた操作などによってスポーツを設定する。撮像装置を配置する者は、例えば、表示画面に表示されるスポーツの種類を選択する操作を行うことによって、スポーツを設定する。
本実施形態に係る情報処理装置は、例えば、上記のような設定操作により設定されたスポーツに対応する領域情報を、記憶部（図示せず）などの記録媒体から読み出すことによって、スポーツに対応する領域情報を設定する。そして、本実施形態に係る情報処理装置は、設定された領域情報が規定する領域に基づいて、撮像装置の関係に関する通知を行う。以下では、上記のような設定操作により設定されたスポーツに対応する領域情報が規定する領域を、「設定されたスポーツに対応する領域」と示す場合がある。
　上記のように、設定されたスポーツに対応する領域に基づいて、撮像装置の関係に関する通知が行われることによって、設定されたスポーツに対応する撮像装置の配置の補助が、実現される。
　本実施形態に係る領域情報の一例、および領域情報を用いた処理の一例については、後述する。
　また、本実施形態に係る撮像装置に関する情報は、例えば、配置されている撮像装置の配置状態を示すデータである。本実施形態に係る撮像装置に関する情報は、例えば、撮像装置の位置と、撮像装置の姿勢と、撮像装置のパラメータとを示す。撮像装置のパラメータとしては、例えば、焦点距離やレンズ光軸方向の歪などの撮像装置の内部状態を表すパラメータが、挙げられる。
　本実施形態に係る情報処理装置は、例えば、撮像装置により撮像された撮像画像に基づいて、撮像装置の位置、撮像装置の姿勢、および撮像装置のパラメータをそれぞれ推定する。そして、本実施形態に係る情報処理装置は、推定された撮像装置の位置、撮像装置の姿勢、および撮像装置のパラメータそれぞれを示す撮像装置に関する情報に基づいて、撮像装置の関係に関する通知を行う。撮像装置に関する情報は、撮像装置の位置、撮像装置の姿勢、および撮像装置のパラメータを示すデータであってもよいし、撮像装置の位置を示すデータ、撮像装置の姿勢を示すデータ、および撮像装置のパラメータを示すデータを含むデータ群であってもよい。
　なお、本実施形態に係る情報処理装置は、本実施形態に係る情報処理装置の外部装置において推定された撮像装置の位置、撮像装置の姿勢、および撮像装置のパラメータそれぞれを示す、撮像装置に関する情報に基づいて、撮像装置の関係に関する通知を行ってもよい。
　撮像装置に関する情報を用いた処理の一例については、後述する。
　本実施形態に係る情報処理装置は、表示画面に通知内容を表示させることによる視覚的な方法による通知、スピーカなどの音声出力デバイスに通知内容を示す音声を出力させることによる聴覚的な通知、あるいは、これらの組み合わせなどによって、撮像装置の関係に関する通知を行う。
　本実施形態に係る関係に関する通知としては、例えば、下記の（ａ）に示す通知と、下記の（ｂ）に示す通知との一方または双方が、挙げられる。
（ａ）関係に関する通知の第１の例
　本実施形態に係る情報処理装置は、関係に関する通知として、上記スポーツが行われる領域のような、撮像装置に撮像させる領域に対する撮像装置の状態の通知を行う。
　ここで、撮像装置に撮像させる領域は、領域情報に基づき特定される。
　また、本実施形態に係る領域に対する撮像装置の状態は、例えば、撮像装置に撮像させる領域に対する撮像装置の撮像範囲で表される。つまり、本実施形態に係る情報処理装置は、撮像装置に撮像させる領域に対する撮像装置の状態の通知として、当該領域に対する撮像装置の撮像範囲の通知を行う。
　なお、上記“撮像装置に撮像させる領域に対する撮像装置の撮像範囲で表される領域に対する撮像装置の状態”は、“撮像装置に撮像させる領域に対する撮像装置の配置の状態”と言い換えることが可能である。つまり、本実施形態に係る情報処理装置は、撮像装置に撮像させる領域に対する撮像装置の状態の通知として、当該領域に対する撮像装置の配置の通知を行う。
　第１の例に係る関係に関する通知が行われることによって、撮像装置を配置する者は、撮像装置に撮像させる領域と撮像装置の撮像範囲との関係を、把握することができる。そのため、撮像装置を配置する者は、より容易に、撮像装置の配置をより適した配置に変更することができる。
　よって、第１の例に係る関係に関する通知が行われることによって、撮像装置を配置する者による撮像装置の配置を補助することができる。第１の例に係る関係に関する通知の具体例については、後述する。
（ｂ）関係に関する通知の第２の例
　本実施形態に係る情報処理装置は、関係に関する通知として、撮像装置の配置の変更を補助する通知を行う。
　ここで、本実施形態に係る撮像装置の配置の変更を補助する通知としては、撮像装置に撮像させる領域が撮像装置の撮像範囲に含まれるように撮像装置の配置を変更させる通知が、挙げられる。
　また、本実施形態に係る情報処理装置が複数の撮像装置を処理対象とする場合、すなわち、本実施形態に係る情報処理装置が複数の撮像装置それぞれにおける関係に関する通知を行う場合、本実施形態に係る情報処理装置は、さらに、撮像装置に撮像させる領域において複数の撮像装置の撮像範囲が重複する領域がより大きくなるように撮像装置の配置を変更させる通知を、行う。“複数の撮像装置の撮像範囲が重複する領域がより大きくなるように撮像装置の配置を変更させる通知”の例としては、後述する“複数の撮像装置の情報を集約した結果が所定の状態を満たすように、撮像装置の配置の変更を補助する通知”が、挙げられる。ここで、上記に示す複数の撮像装置の撮像範囲が重複する領域がより大きくなるようにすることは、撮像装置の配置の変更における第１の制約に係る条件に該当する。
　また、本実施形態に係る情報処理装置が複数の撮像装置それぞれにおける関係に関する通知を行う場合、本実施形態に係る情報処理装置は、さらに、複数の撮像装置の有効撮像距離を満たすように、撮像装置の配置を変更させる通知を行ってもよい。本実施形態に係る撮像装置の有効撮像距離としては、例えば“撮像装置が焦点を合わせて被写体を撮像することが可能な被写体までの距離など、撮像装置が正常に被写体を撮像することが可能な被写体までの距離”が挙げられる。また、本実施形態に係る撮像装置の有効撮像距離は、例えば“撮像装置により撮像された撮像画像に含まれる被写体の大きさが、画像認識などの所定の画像処理によって被写体を特定できる程度の大きさとなるように撮像することが可能な、被写体までの限界距離”であってもよい。本実施形態に係る撮像装置の有効撮像距離は、例えば、撮像装置のパラメータから推定される。つまり、本実施形態に係る情報処理装置による通知により撮像装置の配置が変更された結果、複数の撮像装置それぞれは、撮像装置に撮像させる領域内に存在する被写体を、十分な性能が得られるように撮像することが可能である。ここで、上記に示す複数の撮像装置の有効撮像距離を満たすことは、撮像装置の配置の変更における第２の制約に係る条件に該当する。
　本実施形態に係る情報処理装置は、例えば、第１の制約に係る条件と第２の制約に係る条件とのいずれか一方を満たすように撮像装置の配置を変更させる通知を行う。また、本実施形態に係る情報処理装置は、例えば、第１の制約に係る条件および第２の制約に係る条件を満たす範囲で撮像装置の配置を変更させる通知を行ってもよい。一例を挙げると、本実施形態に係る情報処理装置は、例えば、有効撮像距離と重複する領域の面積をパラメータとする評価関数などの、所定の評価関数に基づいて評価値が最大となる配置（最適化が図られた配置）を算出し、算出された配置となるように撮像装置の配置を変更させる通知を行う。
　なお、本実施形態に係る撮像装置の配置の変更における制約に係る条件は、上記第１の制約に係る条件と上記第２の制約に係る条件とに限られない。例えば、本実施形態に係る情報処理装置は、撮像装置を遠ざける方向と撮像装置を近づける方向とのように、互いにトレードオフの関係にある２つ以上の制約などを対象とする所定の評価関数を設定して、撮像装置の配置の最適化を図ることが可能である。
　より具体的には、本実施形態に係る情報処理装置は、撮像装置の配置の変更を補助する通知として、撮像装置の画角、向き、および位置のうちの１または２以上を変更させる通知を行う。
　本実施形態に係る情報処理装置は、例えば、撮像装置に関する情報が示す撮像装置の位置に基づいて、撮像装置に撮像させる領域に対する撮像装置の位置を特定する。また、本実施形態に係る情報処理装置は、例えば、撮像装置に関する情報が示す撮像装置の姿勢に基づいて、撮像装置に撮像させる領域に対する撮像装置の向き（当該領域に対する撮像装置の姿勢）とを特定する。また、本実施形態に係る情報処理装置は、例えば、撮像装置に関する情報が示す撮像装置のパラメータに基づいて、撮像装置の画角を特定する。そして、本実施形態に係る情報処理装置は、例えば、“特定された撮像装置の画角、向き、および位置のうちの１または２以上を、撮像装置に撮像させる領域の撮像に適するように変更させる通知”を、行う。本実施形態に係る撮像装置に撮像させる領域の撮像に適するように変更させる通知の一例としては、例えば、後述する“複数の撮像装置の情報を集約した結果が所定の状態を満たすように、撮像装置の配置の変更を補助する通知”が、挙げられる。
　ここで、本実施形態に係る情報処理装置は、例えば、撮像装置の画角、向き、および位置の変更の仕方を、設定された順序で通知する。本実施形態に係る情報処理装置は、例えば、画角、向き、位置の順序で、各項目の変更の仕方を通知する。本実施形態に係る情報処理装置は、例えば、各項目の変更の仕方を、設定された時間ごとにローテーションして通知する。
　また、本実施形態に係る情報処理装置は、撮像装置の画角、向き、および位置のうちの２以上の変更の仕方を、同時に通知してもよい。撮像装置の画角、向き、および位置の全てを同時に通知しない場合、本実施形態に係る情報処理装置は、上記設定された順序で通知する場合と同様に、設定された時間ごとにローテーションして通知する。
　第２の例に係る関係に関する通知が行われることによって、撮像装置を配置する者は、通知内容に従って撮像装置の配置を変更することができる。そのため、撮像装置を配置する者は、より容易に、撮像装置の配置をより適した配置に変更することができる。
　よって、第２の例に係る関係に関する通知が行われることによって、撮像装置を配置する者による撮像装置の配置を補助することができる。第２の例に係る関係に関する通知の具体例については、後述する。
　本実施形態に係る情報処理装置は、関係に関する通知として、例えば、上記（ａ）に示す第１の例に係る関係に関する通知と、上記（ｂ）に示す第２の例に係る関係に関する通知との一方または双方を、行う。
　したがって、本実施形態に係る情報処理装置は、撮像装置の配置を補助することができる。
　なお、本実施形態に係る関係に関する通知は、上記（ａ）に示す第１の例に係る関係に関する通知と、上記（ｂ）に示す第２の例に係る関係に関する通知とに限られない。例えば、本実施形態に係る関係に関する通知の他の例としては、後述する“撮像装置の配置が完了した旨の通知”が、挙げられる。
［２］本実施形態に係る情報処理方法に係る処理の一例
　次に、上述した本実施形態に係る情報処理方法に係る処理の一例を、本実施形態に係る情報処理方法が適用される情報処理システムの一例を示しつつ説明する。
［２－１］本実施形態に係る情報処理システムの構成の一例
　図１は、本実施形態に係る情報処理方法が適用される情報処理システム１０００の一例を示す説明図である。情報処理システム１０００は、例えば、情報処理装置１００と、撮像装置２００Ａ、２００Ｂ、２００Ｃとを有する。以下では、撮像装置２００Ａ、２００Ｂ、２００Ｃのうちの１つを指して、または、撮像装置２００Ａ、２００Ｂ、２００Ｃを総称して、「撮像装置２００」と示す場合がある。また、以下では、撮像装置を「カメラ」と示す場合がある。
　情報処理装置１００と撮像装置２００とは、例えば、ネットワーク３００を介して無線または有線で接続され、ネットワーク３００を介した通信によって、通信を行う。本実施形態に係るネットワーク３００としては、例えば、ＬＡＮ（Local　Area　Network）やＷＡＮ（Wide　Area　Network）などの有線ネットワーク、ＷＬＡＮ（Wireless　Local　Area　Network）などの無線ネットワーク、あるいは、ＴＣＰ／ＩＰ（Transmission　Control　Protocol/Internet　Protocol）などの通信プロトコルを用いたインターネットなどが挙げられる。なお、本実施形態に係る情報処理システムでは、情報処理装置１００と撮像装置２００とは、ネットワーク３００を介さずに、直接的に通信を行うことも可能である。
　なお、本実施形態に係る情報処理システムの構成は、図１に示す例に限られない。
　例えば、図１では３つの撮像装置２００を有する構成を示しているが、本実施形態に係る情報処理システムは、１つの撮像装置２００、２つの撮像装置、あるいは、４つ以上の撮像装置２００を有する構成であってもよい。つまり、本実施形態に係る情報処理システムは、１または２以上の撮像装置２００を有しうる。
　また、本実施形態に係る情報処理システムは、情報処理装置１００と撮像装置２００との間の通信を中継する中継装置（図示せず）を、さらに有していてもよい。また、本実施形態に係る情報処理システムにおいて、中継装置（図示せず）は、例えば、画像データなどの様々なデータを集約する機能と、様々なデータを分配する機能とを有する、データ集約・分配装置の役目を果たしていてもよい。中継装置（図示せず）としては、例えばルータなどが挙げられる。
［２－１－１］情報処理装置１００
　情報処理装置１００は、上述した本実施形態に係る情報処理方法に係る処理を行う装置である。
　図２は、本実施形態に係る情報処理装置１００の構成の一例を示すブロック図である。情報処理装置１００は、例えば、通信部１０２と、制御部１０４とを備える。
　また、情報処理装置１００は、例えば、ＲＯＭ（Read　Only　Memory。図示せず）や、ＲＡＭ（Random　Access　Memory。図示せず）、記憶部（図示せず）、情報処理装置１００の使用者が操作可能な操作部（図示せず）、様々な画面を表示画面に表示する表示部（図示せず）などを備えていてもよい。情報処理装置１００は、例えば、データの伝送路としてのバスにより上記各構成要素間を接続する。
　ＲＯＭ（図示せず）は、制御部１０４が使用するプログラムや演算パラメータなどの制御用データを記憶する。ＲＡＭ（図示せず）は、制御部１０４により実行されるプログラムなどを一時的に記憶する。
　記憶部（図示せず）は、情報処理装置１００が備える記憶手段であり、例えば、領域情報などの本実施形態に係る情報処理方法に係るデータや、各種アプリケーションなどの、様々なデータを記憶する。ここで、記憶部（図示せず）としては、例えば、ハードディスクなどの磁気記録媒体や、フラッシュメモリなどの不揮発性メモリなどが挙げられる。また、記憶部（図示せず）は、情報処理装置１００から着脱可能であってもよい。
　操作部（図示せず）としては、後述する操作入力デバイスが挙げられる。また、表示部（図示せず）としては、後述する表示デバイスが挙げられる。
［情報処理装置１００のハードウェア構成例］
　図３は、本実施形態に係る情報処理装置１００のハードウェア構成の一例を示す説明図である。情報処理装置１００は、例えば、ＭＰＵ１５０と、ＲＯＭ１５２と、ＲＡＭ１５４と、記録媒体１５６と、入出力インタフェース１５８と、操作入力デバイス１６０と、表示デバイス１６２と、通信インタフェース１６４とを備える。また、情報処理装置１００は、例えば、データの伝送路としてのバス１６６で各構成要素間を接続する。また、情報処理装置１００は、例えば、情報処理装置１００が備えているバッテリなどの内部電源から供給される電力、または、接続されている外部電源から供給される電力などによって、駆動する。
　ＭＰＵ１５０は、例えば、ＭＰＵ（Micro　Processing　Unit）などの演算回路で構成される、１または２以上のプロセッサや、各種処理回路などで構成され、情報処理装置１００全体を制御する制御部１０４として機能する。また、ＭＰＵ１５０は、情報処理装置１００において、例えば、後述する処理部１１０の役目を果たす。なお、処理部１１０は、専用の（または汎用の）回路（例えば、ＭＰＵ１５０とは別体のプロセッサなど）で構成されていてもよい。
　ＲＯＭ１５２は、ＭＰＵ１５０が使用するプログラムや演算パラメータなどの制御用データなどを記憶する。ＲＡＭ１５４は、例えば、ＭＰＵ１５０により実行されるプログラムなどを一時的に記憶する。
　記録媒体１５６は、記憶部（図示せず）として機能し、例えば、領域情報などの本実施形態に係る情報処理方法に係るデータや、各種アプリケーションなどの、様々なデータを記憶する。ここで、記録媒体１５６としては、例えば、ハードディスクなどの磁気記録媒体や、フラッシュメモリなどの不揮発性メモリが挙げられる。また、記録媒体１５６は、情報処理装置１００から着脱可能であってもよい。
　入出力インタフェース１５８は、例えば、操作入力デバイス１６０や、表示デバイス１６２を接続する。操作入力デバイス１６０は、操作部（図示せず）として機能し、また、表示デバイス１６２は、表示部（図示せず）として機能する。ここで、入出力インタフェース１５８としては、例えば、ＵＳＢ（Universal　Serial　Bus）端子や、ＤＶＩ（Digital　Visual　Interface）端子、ＨＤＭＩ（High-Definition　Multimedia　Interface）（登録商標）端子、各種処理回路などが挙げられる。
　また、操作入力デバイス１６０は、例えば、情報処理装置１００上に備えられ、情報処理装置１００の内部で入出力インタフェース１５８と接続される。操作入力デバイス１６０としては、例えば、ボタンや、方向キー、ジョグダイヤルなどの回転型セレクタ、あるいは、これらの組み合わせなどが挙げられる。
　また、表示デバイス１６２は、例えば、情報処理装置１００上に備えられ、情報処理装置１００の内部で入出力インタフェース１５８と接続される。表示デバイス１６２としては、例えば、液晶ディスプレイ（Liquid　Crystal　Display）や有機ＥＬディスプレイ（Organic　Electro-Luminescence　Display。または、ＯＬＥＤディスプレイ（Organic　Light　Emitting　Diode　Display）ともよばれる。）などが挙げられる。
　なお、入出力インタフェース１５８が、情報処理装置１００の外部の操作入力デバイス（例えば、キーボードやマウスなど）や外部の表示デバイスなどの、外部デバイスと接続することも可能であることは、言うまでもない。また、表示デバイス１６２は、例えばタッチパネルなど、表示とユーザ操作とが可能なデバイスであってもよい。
　通信インタフェース１６４は、情報処理装置１００が備える通信手段であり、ネットワーク３００を介して（あるいは、直接的に）、撮像装置２００などの外部装置と、無線または有線で通信を行うための通信部１０２として機能する。ここで、通信インタフェース１６４としては、例えば、通信アンテナおよびＲＦ（Radio　Frequency）回路（無線通信）や、ＩＥＥＥ８０２．１５．１ポートおよび送受信回路（無線通信）、ＩＥＥＥ８０２．１１ポートおよび送受信回路（無線通信）、あるいはＬＡＮ（Local　Area　Network）端子および送受信回路（有線通信）などが挙げられる。また、通信インタフェース１６４は、ネットワーク３００に対応する任意の構成であってもよい。
　情報処理装置１００は、例えば図３に示す構成によって、本実施形態に係る情報処理方法に係る処理を行う。なお、本実施形態に係る情報処理装置１００のハードウェア構成は、図３に示す構成に限られない。
　例えば、情報処理装置１００は、接続されている外部の通信デバイスを介して外部装置などと通信を行う場合には、通信インタフェース１６４を備えていなくてもよい。また、通信インタフェース１６４は、複数の通信方式によって、１または２以上の外部装置などと通信を行うことが可能な構成であってもよい。
　また、情報処理装置１００は、例えば、撮像デバイスをさらに備えていてもよい。情報処理装置１００が撮像デバイスを備える場合、当該撮像デバイスは、撮像により撮像画像（動画像または静止画像）を生成する撮像部（図示せず）として機能する。
　また、情報処理装置１００は、例えば、スピーカなどの音声出力デバイスをさらに備えていてもよい。
　また、情報処理装置１００は、例えば、記録媒体１５６や、操作入力デバイス１６０、表示デバイス１６２を備えない構成をとることが可能である。
　また、情報処理装置１００は、例えば、後述する情報処理装置１００の適用例に応じた構成をとることが可能である。
　また、例えば、図３に示す構成（または変形例に係る構成）の一部または全部は、１、または２以上のＩＣ（Integrated　Circuit）で実現されてもよい。
　再度図２を参照して、情報処理装置１００の構成の一例について説明する。通信部１０２は、情報処理装置１００が備える通信手段であり、ネットワーク３００を介して（あるいは、直接的に）、撮像装置２００などの外部装置と、無線または有線で通信を行う。また、通信部１０２は、例えば制御部１０４により通信が制御される。
　ここで、通信部１０２としては、例えば、通信アンテナおよびＲＦ回路や、ＬＡＮ端子および送受信回路などが挙げられるが、通信部１０２の構成は、上記に限られない。例えば、通信部１０２は、ＵＳＢ端子および送受信回路などの通信を行うことが可能な任意の規格に対応する構成や、ネットワーク３００を介して外部装置と通信可能な任意の構成をとることができる。また、通信部１０２は、複数の通信方式によって、１または２以上の外部装置などと通信を行うことが可能な構成であってもよい。
　制御部１０４は、例えばＭＰＵなどで構成され、情報処理装置１００全体を制御する役目を果たす。また、制御部１０４は、例えば、処理部１１０を有し、本実施形態に係る情報処理方法に係る処理を主導的に行う役目を果たす。
　処理部１１０は、本実施形態に係る情報処理方法に係る処理を主導的に行う役目を果たす。処理部１１０は、例えは、領域情報と撮像装置に関する情報とに基づいて、撮像装置の関係に関する通知を行う。処理部１１０は、関係に関する通知として、例えば、上記（ａ）に示す第１の例に係る関係に関する通知と、上記（ｂ）に示す第２の例に係る関係に関する通知との一方または双方を、行う。
　情報処理装置１００は、例えば図２に示す構成によって、本実施形態に係る情報処理方法に係る処理を行う。したがって、情報処理装置１００は、例えば図２に示す構成によって、撮像装置の配置を補助することができる。
　また、例えば図２に示す構成によって、情報処理装置１００は、本実施形態に係る情報処理方法に係る処理が行われることにより奏される効果を、奏することができる。
　なお、本実施形態に係る情報処理装置の構成は、図２に示す構成に限られない。
　例えば、本実施形態に係る情報処理装置は、図２に示す処理部１１０を、制御部１０４とは個別に備える（例えば、別の処理回路で実現する）ことができる。
　また、本実施形態に係る情報処理方法に係る処理を実現するための構成は、図２に示す構成に限られず、本実施形態に係る情報処理方法に係る処理の切り分け方に応じた構成をとることが可能である。
　また、例えば、通信部１０２と同様の機能、構成を有する外部の通信デバイスを介して外部装置と通信を行う場合には、本実施形態に係る情報処理装置は、通信部１０２を備えていなくてもよい。
［２－１－２］撮像装置２００
　撮像装置２００は、例えばスポーツが行われる領域を撮像するように配置される撮像装置であり、撮像により撮像画像（動画像または静止画像）を生成する。
　撮像装置２００は、例えば、レンズ／撮像素子と信号処理回路とを含んで構成される。レンズ／撮像素子は、例えば、光学系のレンズと、ＣＭＯＳ（Complementary　Metal　Oxide　Semiconductor）などの撮像素子を複数用いたイメージセンサとで構成される。信号処理回路は、例えば、ＡＧＣ（Automatic　Gain　Control）回路やＡＤＣ（Analog　to　Digital　Converter）を備え、撮像素子により生成されたアナログ信号をデジタル信号（画像データ）に変換する。また、信号処理回路は、例えばＲＡＷ現像に係る各種処理を行う。さらに、信号処理回路は、例えば、Ｗｈｉｔｅ　Ｂａｌａｎｃｅ補正処理や、色調補正処理、ガンマ補正処理、ＹＣｂＣｒ変換処理、エッジ強調処理など各種信号処理を行ってもよい。さらに、撮像装置２００では、信号処理回路の演算リソースを利用して、任意の画像処理を行うことが可能であってもよい。
　また、撮像装置２００は、例えば、通信デバイスを備え、または、外部の通信デバイスが接続される。撮像装置２００は、備えている通信デバイス、または、接続されている外部の通信デバイスによって、ネットワーク３００を介して（あるいは、直接的に）、情報処理装置１００などの外部装置と、無線または有線で通信を行う。
　また、撮像装置２００は、表示デバイスを備えていてもよいし、外部の表示デバイスが接続されていてもよい。
　なお、撮像装置２００の構成は、上記に示す例に限られず、後述する撮像装置２００の適用例に応じた構成をとることが可能である。
［２－２］本実施形態に係る情報処理方法に係る処理の一例
　図１に示す情報処理システム１０００を例に挙げて、本実施形態に係る情報処理方法に係る処理の一例について、説明する。
　図４は、本実施形態に係る情報処理システム１０００を構成する撮像装置２００が配置される３次元空間の一例を示す説明図である。図４では、撮像装置２００が配置される３次元空間が、バレーボールコートを含む体育館である例を示している。
　また、以下では、図４に示す体育館に撮像装置２００が配置される場合、すなわち、本実施形態に係る情報処理方法がスポーツが行われる領域の撮像に適用される場合を、例に挙げて、本実施形態に係る情報処理方法に係る処理の一例を説明する。
　上述したように、スポーツを撮像するための撮像装置の配置は、選手およびボールが存在しない状態で実施されるケースが多い。より具体的には、撮像装置によるスポーツの撮像は、例えば、“機材準備”、“撮像装置の配置”、“配置された撮像装置によるテスト撮像”、“配置された撮像装置による本撮像”、“機材の撤収”という流れで、行われる。本実施形態に係る情報処理方法は、例えば、上記の流れにおける“撮像装置の配置”段階に適用される。
　図５は、本実施形態に係る情報処理方法に係る処理の一例を示す流れ図である。図５は、撮像装置２００が仮に配置された後、配置を完了するまでの処理の一例を示している。
　情報処理装置１００は、スポーツに対応する領域情報を設定する（Ｓ１００）。例えば、図４に示す体育館に撮像装置２００が配置される場合、ステップＳ１００では、バレーボール（スポーツの一例）に対応する領域情報が、設定される。
　情報処理装置１００は、例えば、記憶部（図示せず）などの記録媒体から、検出された設定操作に対応する領域情報を読み出すことによって、スポーツに対応する領域情報を設定する。また、情報処理装置１００は、記録媒体から読み出した領域情報を、撮像装置２００それぞれに対して送信する。
　なお、領域情報は、情報処理システム１０００を構成する撮像装置２００の一部または全部が、それぞれ記憶していてもよいし、情報処理システム１０００を構成する一部または全部の装置が、分散して記憶していてもよい。
　図６は、本実施形態に係る領域情報の一例を説明するための説明図である。図６では、スポーツごとに領域情報が記録されているテーブル（またはデータベース）の一例を示している。
　図６のＡに示す“コート”は、各スポーツが行われるコートまたはグランドの領域を規定するデータである。また、図６のＢに示す“選手レンジ”は、各スポーツの選手が移動しうる領域を規定するデータである。また、図６のＣに示す“ボールレンジ”は、各スポーツで使用されるボールが動きうる領域を規定するデータである。
　図６のＡに示す“コート”、図６のＢに示す“選手レンジ”、および図６のＣに示す“ボールレンジ”それぞれが示す領域は、例えば、コートまたはグラウンドに設定された所定の位置を原点としたときの距離（水平方向、垂直方向、および奥行方向それぞれの距離）で表される。図６のＡに示す“コート”、図６のＢに示す“選手レンジ”、および図６のＣに示す“ボールレンジ”それぞれは、コートまたはグラウンドのある隅の位置を原点とし、距離を単位［メートル］で表した例を示している。なお、上記所定の位置は、コートまたはグラウンドにおける隅の位置に限られない。例えば、上記所定の位置は、コートまたはグラウンドにおける中心位置であってもよい。上記所定の位置が上記中心位置である場合、コートまたはグラウンドを対称なものとして処理することによって、図６のＡに示す“コート”、図６のＢに示す“選手レンジ”、および図６のＣに示す“ボールレンジ”それぞれが示す領域を特定することが可能である。
　ここで、図６のＡに示す“コート”、図６のＢに示す“選手レンジ”、および図６のＣに示す“ボールレンジ”それぞれが示すデータが、領域情報の一例に該当する。
　また、例えば図６のＤ、図６のＥに示すように、スポーツごとに領域情報が記録されているテーブルには、対象のスポーツの領域を撮像するために必要な最低カメラ台数を示す“最低カメラ台数”と、使用される撮像装置における有効な撮像距離を示す“カメラ有効距離”とが、含まれていてもよい。ここで、図６のＤに示す“最低カメラ台数”および図６のＥに示す“カメラ有効距離”それぞれは、例えば、撮像装置の焦点距離や画サイズなどに依存して変動する。ここで、上記“カメラ有効距離”は、上述した撮像装置の有効撮像距離に該当する。
　再度図５を参照して、本実施形態に係る情報処理方法に係る処理の一例について説明する。情報処理装置１００は、選手・ボールレンジを取得する（Ｓ１０２）。ここで、ステップＳ１０２において取得される選手・ボールレンジは、本実施形態に係る撮像装置に撮像させる領域の一例に、該当する。
　情報処理装置１００は、例えば、ステップＳ１００において設定された領域情報に基づいて、選手・ボールレンジを求める演算を行うことによって、選手・ボールレンジを取得する。選手・ボールレンジを求める演算としては、例えば、図６のＡに示す“コート”が示す領域、図６のＢに示す“選手レンジ”が示す領域、および図６のＣに示す“ボールレンジ”が示す領域を含む、最小の領域を求める演算が、挙げられる。
　なお、情報処理装置１００が選手・ボールレンジを取得する方法は、上記に示す例に限られない。例えば、情報処理装置１００は、撮像装置２００において行われた選手・ボールレンジを求める演算の結果を、当該撮像装置２００から通信により取得することによって、選手・ボールレンジを取得することも、可能である。
　図７は、本実施形態に係る情報処理方法に係る処理の一例を説明するための説明図であり、図５のステップＳ１０２において取得される選手・ボールレンジの一例を示している。
　例えば、図４に示す体育館に撮像装置２００が配置される場合、ステップＳ１００では、図７において符号Ｒで示されるように、選手・ボールレンジが設定される。以下では、図７において符号Ｒで示されるような、図５のステップＳ１０２において取得される選手・ボールレンジを、「選手・ボールレンジＲ」と示す。
　再度図５を参照して、本実施形態に係る情報処理方法に係る処理の一例について説明する。情報処理装置１００は、撮像装置２００の位置、向き、パラメータを取得する（Ｓ１０４）。
　情報処理装置１００は、例えば、撮像装置２００それぞれから取得される撮像画像から検出される特徴量と、設定されているスポーツ固有の情報に規定されている特徴量とを対応付けることによって、撮像装置２００それぞれの位置と向きとを取得する。スポーツ固有の情報に規定されている特徴量としては、例えば“互いの位置関係が既知である、コートにおける複数の所定の位置”などが、挙げられる。スポーツがバレーボールである場合における、上記コートにおける複数の所定の位置の具体例としては、例えば、コートの四隅の位置、ラインが交わる位置、ネット上の位置、ネットを支える支柱の位置などが、挙げられる。
　情報処理装置１００は、例えば撮像画像から所定の位置を検出する画像処理を行うことによって、撮像画像から特徴量を得る。そして、情報処理装置１００は、例えば、撮像画像から検出される特徴量とスポーツ固有の情報に規定されている特徴量とをパターンマッチングする。情報処理装置１００は、例えば上記のようなパターンマッチングを行うことによって、スポーツ固有の情報が示すコートに対する撮像装置２００の位置を、推定することができる。また、情報処理装置１００は、例えば上記のようなパターンマッチングを行うことによって、スポーツ固有の情報が示すコートに対する撮像装置２００の姿勢を推定して、コートに対する撮像装置２００の向きを推定することができる。
　なお、撮像画像に基づく撮像装置２００の位置、向きの推定方法は、上記に示す例にかぎられない。情報処理装置１００は、Ｓｔｒｕｃｔｕｒｅ　ｆｒｏｍ　Ｍｏｔｉｏｎを利用する方法などの、撮像画像に基づき撮像装置２００の位置、向きを推定することが可能な、任意の処理を行ってもよい。
　また、情報処理装置１００は、例えば、撮像画像から検出される特徴量とスポーツ固有の情報に規定されている特徴量とに基づいて、撮像装置２００のパラメータを推定する。情報処理装置１００は、カメラのキャリブレーションとよばれる技術を用いることによって、撮像装置２００のパラメータを推定することができる。一例を挙げると、情報処理装置１００は、例えば、画像処理ライブラリであるＯｐｅｎＣＶが提供しているｃａｌｉｂｒａｔｅＣａｍｅｒａを用いることによって、撮像装置２００のパラメータを推定する。
　例えばステップＳ１０４において推定された撮像装置２００の位置、撮像装置２００の向き、および撮像装置２００のパラメータそれぞれを示すデータは、撮像装置に関する情報の一例に該当する。
　再度図５を参照して、本実施形態に係る情報処理方法に係る処理の一例について説明する。情報処理装置１００は、ステップＳ１０２において取得された選手・ボールレンジＲを、撮像装置２００それぞれの撮像画像に投影する（Ｓ１０６）。
　図８は、本実施形態に係る情報処理方法に係る処理の一例を説明するための説明図であり、ある撮像装置２００において撮像画像に対して図５のステップＳ１０６において選手・ボールレンジＲが投影された撮像画像の一例を、示している。
　情報処理装置１００は、例えば、図８に示すような選手・ボールレンジＲが投影された撮像画像を、表示画面に表示させる。選手・ボールレンジＲが投影された撮像画像が表示される表示画面としては、例えば、投影前の撮像画像を撮像した撮像装置２００が備える表示デバイス（または、接続されている外部の表示デバイス）が、挙げられる。また、選手・ボールレンジＲが投影された撮像画像が表示される表示画面は、情報処理装置１００が備える表示部（図示せず）の表示画面など、撮像装置２００を配置する者が確認することが可能な、任意の表示デバイスの表示画面であってもよい。
　上記のように、選手・ボールレンジＲが投影された撮像画像が表示画面に表示されることによって、撮像装置２００を配置する者は、選手・ボールレンジＲ（撮像装置２００に撮像させる領域の一例）と撮像装置２００の撮像範囲との関係を、視覚的に把握することができる。つまり、情報処理装置１００が、選手・ボールレンジＲが投影された撮像画像を表示画面に表示させることは、上記（ａ）に示す第１の例に係る関係に関する通知の一例に該当する。
　再度図５を参照して、本実施形態に係る情報処理方法に係る処理の一例について説明する。情報処理装置１００は、配置対象の全ての撮像装置２００が処理されたか否かを判定する（Ｓ１０８）。配置対象の全ての撮像装置２００としては、例えば、情報処理システム１０００を構成する全ての撮像装置２００が、挙げられる。
　情報処理装置１００は、例えば、配置対象の全ての撮像装置２００の位置が推定されている場合に、全ての撮像装置２００が処理されたと判定する。
　ステップＳ１０８において全ての撮像装置２００が処理されたと判定されない場合には、情報処理装置１００は、ステップＳ１０４からの処理を繰り返す。
　また、ステップＳ１０８において全ての撮像装置２００が処理されたと判定された場合には、情報処理装置１００は、複数の撮像装置２００の情報を集約する（Ｓ１１０）。
　図９は、本実施形態に係る情報処理方法に係る処理の一例を説明するための説明図であり、図５のステップＳ１１０において撮像装置２００Ａ、２００Ｂ、２００Ｃの情報が集約された結果の一例を示している。ここで、図９では、視認性を挙げるためなどの理由により、選手・ボールレンジＲを平面で表している。なお、選手・ボールレンジＲを３次元空間で表した上で、図９と同様の集約を行うことが可能であることは、言うまでもない。
　図９に示す“０Ｃａｍ”は、選手・ボールレンジＲのうち、撮像装置２００Ａ、２００Ｂ、２００Ｃのいずれの撮像装置２００からも撮像されていない領域を示している。また、図９に示す“１Ｃａｍ”は、選手・ボールレンジＲのうち、撮像装置２００Ａ、２００Ｂ、２００Ｃのうちの１つの撮像装置２００のみで撮像されている領域を示している。また、図９に示す“２Ｃａｍ”は、選手・ボールレンジＲのうち、撮像装置２００Ａ、２００Ｂ、２００Ｃのうちの２つの撮像装置２００で撮像されている領域を示している。そして、図９に示す“３Ｃａｍ”は、選手・ボールレンジＲのうち、撮像装置２００Ａ、２００Ｂ、２００Ｃの全てで撮像されている領域を示している。つまり、図９に示す例は、選手・ボールレンジＲが、撮像装置２００の撮像範囲が重複している状態に応じて、４つの領域に分類される例を示している。
　なお、複数の撮像装置２００の情報を集約した結果は、図９に示す例に限られない。例えば、撮像装置２００の撮像範囲が重複している状態に応じて、選手・ボールレンジＲが、良好な領域と、良好ではない領域（悪い領域）という２種類の領域に分類されてもよい。一例を挙げると、図９に示す“２Ｃａｍ”および“３Ｃａｍ”の領域が、良好な領域に分類され、“０Ｃａｍ”および“１Ｃａｍ”の領域が、良好ではない領域に分類される。
　また、ステップＳ１１０において、情報処理装置１００は、例えば、図９に示すような複数の撮像装置２００の情報を集約した結果を示す画像を、表示画面に表示させてもよい。複数の撮像装置２００の情報を集約した結果を示す画像が表示画面に表示される場合、選手・ボールレンジＲが分類された領域は、例えば領域ごとに色分けされることなどによって、別な領域であると視覚的に認識されるような加工がなされる。
　複数の撮像装置２００の情報を集約した結果を示す画像が表示される表示画面としては、例えば、投影前の撮像画像を撮像した撮像装置２００が備える表示デバイス（または、接続されている外部の表示デバイス）が、挙げられる。また、複数の撮像装置２００の情報を集約した結果を示す画像が表示される表示画面は、情報処理装置１００が備える表示部（図示せず）の表示画面など、撮像装置２００を配置する者が確認することが可能な、任意の表示デバイスの表示画面であってもよい。
　上記のように、複数の撮像装置２００の情報を集約した結果を示す画像が表示画面に表示されることによって、撮像装置２００を配置する者は、選手・ボールレンジＲ（撮像装置２００に撮像させる領域の一例）と撮像装置２００の撮像範囲との関係を、視覚的に把握することができる。つまり、情報処理装置１００が、複数の撮像装置２００の情報を集約した結果を示す画像を表示画面に表示させることは、上記（ａ）に示す第１の例に係る関係に関する通知の一例に該当する。
　なお、複数の撮像装置２００の情報を集約した結果を示す画像は、図９に示す例に限られない。
　例えば、情報処理装置１００は、図９に示すような選手・ボールレンジＲが分類された領域が重畳された撮像画像を、表示画面に表示させてもよい。情報処理装置１００は、例えば投影変換によって、撮像装置２００それぞれにより撮像された撮像画像に、選手・ボールレンジＲが分類された領域を重畳させる。
　図１０は、本実施形態に係る情報処理方法に係る処理の一例を説明するための説明図であり、複数の撮像装置２００の情報を集約した結果を示す画像の他の例を示している。
　図１０に示すように、情報処理装置１００は、撮像装置２００ごとに、選手・ボールレンジＲに対する撮像装置２００の撮像範囲を示す画像を、表示画面に表示させることも可能である。
　例えば、“選手・ボールレンジＲが分類された領域が重畳された撮像画像を、表示画面に表示させること”、または、“図１０に示すような選手・ボールレンジＲに対する撮像装置２００の撮像範囲を示す画像を、表示画面に表示させること”によって、複数の撮像装置２００の情報を集約した結果を、撮像装置２００ごとに確認することが可能な仕組みが、実現される。
　再度図５を参照して、本実施形態に係る情報処理方法に係る処理の一例について説明する。情報処理装置１００は、撮像装置２００の配置案を提案する（Ｓ１１２）。情報処理装置１００は、例えば上記（ｂ）に示す第２の例に係る関係に関する通知を行うことによって、撮像装置２００の配置案を提案する。
　図１１は、本実施形態に係る情報処理方法に係る処理の一例を説明するための説明図であり、図９に示す複数の撮像装置２００の情報を集約した結果を示す画像に対する配置の提案の一例を示している。
　図１１に示すように、情報処理装置１００は、撮像装置２００の画角、角度、および位置のうちの１または２以上を変更させる通知を行う。図１１に示す撮像装置２００の角度の変更は、撮像装置２００の向きの変更に該当する。
　ここで、図９に示す複数の撮像装置２００の情報を集約した結果を示す画像は、選手・ボールレンジＲが平面で表されている例である。よって、図１１では、“情報処理装置１００が、撮像装置２００の平面方向の角度（向き）をに変更させる通知を行い、また、撮像装置２００の平面方向の位置を変更させる通知を行う例”を、示している。なお、複数の撮像装置２００の情報を集約した結果を示す画像において、選手・ボールレンジＲが３次元空間で表される場合、情報処理装置１００は、平面方向の角度と垂直方向の角度との一方または双方を、変更させてもよい。また、選手・ボールレンジＲが３次元空間で表される場合、情報処理装置１００は、平面方向の位置と垂直方向の位置との一方または双方を、変更させてもよい。
　上述したように、情報処理装置１００は、例えば、撮像装置２００の画角、角度（向き）、および位置の変更の仕方を、設定された順序で通知する。また、情報処理装置１００は、例えば、撮像装置２００の画角、角度（向き）、および位置のうちの２以上の変更の仕方を、同時に通知してもよい。
　なお、図１１では、１つの撮像装置２００に対して配置案が提案されている状態を示しているが、情報処理装置１００は、配置対象の全ての撮像装置２００それぞれに対して、または、配置対象の撮像装置２００のうちの一部の撮像装置２００に対して、配置案を提案する。
　上記のように、配置対象の撮像装置２００に対して配置案が提案されることによって、撮像装置２００を配置する者は、提案された配置案（通知内容）に従って撮像装置２００の配置を変更することができる。そのため、撮像装置２００を配置する者は、より容易に、撮像装置２００の配置をより適した配置に変更することができる。
　再度図５を参照して、本実施形態に係る情報処理方法に係る処理の一例について説明する。情報処理装置１００は、配置対象の撮像装置２００の配置が完了したか否かを判定する（Ｓ１１４）。
　情報処理装置１００は、例えば、複数の撮像装置２００の情報を集約した結果が、設定された所定の状態を満たしているか否かを判定する。そして、情報処理装置１００は、複数の撮像装置２００の情報を集約した結果が上記所定の状態を満たしていると判定された場合に、撮像装置２００の配置が完了したと判定する。
　図１２は、本実施形態に係る情報処理方法に係る処理の一例を説明するための説明図であり、複数の撮像装置２００の情報を集約した結果が上記所定の状態を満たしている場合の一例を示している。
　設定された所定の状態としては、例えば図１２に示すように、選手・ボールレンジＲ全体が配置対象の全ての撮像装置２００で撮像される状態（すなわち、選手・ボールレンジＲ全体が、“３Ｃａｍ”の領域である状態）が、挙げられる。
　なお、本実施形態に係る所定の状態の例は、上記に示す例に限られない。例えば、所定の状態は、選手・ボールレンジＲ全体が上述した良好な領域にある状態であってもよい。つまり、本実施形態に係る所定の状態としては、例えば、選手・ボールレンジＲ全体が撮像装置２００の撮像範囲に含まれ、かつ、複数の撮像装置２００の撮像範囲が重複する領域がより大きくなるような状態が、設定される。
　上記のように、選手・ボールレンジＲ全体が撮像装置２００の撮像範囲に含まれ、かつ、複数の撮像装置２００の撮像範囲が重複する領域がより大きくなるような状態が、所定の状態として設定されることによって、配置された撮像装置２００によって、精度が高く、かつ安定した選手およびボールのトラッキングを、実現することが可能となる。
　また、所定の状態は、予め設定された固定の状態であってもよいし、情報処理装置１００のユーザなどの操作に基づき変更することが可能な、可変の状態であってもよい。
　再度図５を参照して、本実施形態に係る情報処理方法に係る処理の一例について説明する。ステップＳ１１４において撮像装置２００の配置が完了したと判定されない場合、情報処理装置１００は、ステップＳ１０４からの処理を繰り返す。
　また、ステップＳ１１４において撮像装置２００の配置が完了したと判定された場合には、情報処理装置１００は、図５に示す処理を完了する。
　なお、撮像装置２００の配置が完了したと判定された場合、情報処理装置１００は、撮像装置２００の配置が完了した旨の通知を、撮像装置２００を配置する者に対して行ってもよい。撮像装置２００の配置が完了した旨の通知としては、配置が完了したことを示す画像や文字などの表示画面に表示させる視覚的な通知、配置が完了したことを示す音声を音声出力デバイスに出力させることによる聴覚的な通知、あるいは、これらの組み合わせなどが、挙げられる。
　情報処理装置１００が、上記のような撮像装置２００の配置が完了した旨の通知を行うことによって、撮像装置２００を配置する者は、配置対象の撮像装置２００の配置が完了したことを、当該通知によって認識することができる。よって、上記のような撮像装置２００の配置が完了した旨の通知が行われることによって、撮像装置２００を配置する者による撮像装置２００の配置を補助することができる。つまり、上記のような撮像装置２００の配置が完了した旨の通知は、本実施形態に係る撮像装置の関係に関する通知の一例に該当する。
　例えば図５に示す処理が行われることによって、図４に示す体育館への撮像装置２００の配置が、実現される。
　ここで、図５を参照して説明した処理では、例えば、“選手・ボールレンジＲが投影された撮像画像を表示画面に表示させること”、“複数の撮像装置２００の情報を集約した結果を示す画像を表示画面に表示させること”、および“撮像装置２００の配置案を提案すること”などによって、関係に関する通知が行われる。
　したがって、例えば図５に示す処理が行われることによって、撮像装置２００を配置する者による撮像装置２００の配置を補助することができる。
　また、情報処理装置１００は、複数の撮像装置２００の情報を集約した結果が所定の状態を満たすように、撮像装置２００の配置の変更を補助する通知を行う。
　ここで、所定の状態としては、例えば、“選手・ボールレンジＲ全体が配置対象の全ての撮像装置２００で撮像される状態”や、“選手・ボールレンジＲ全体が上述した良好な領域にある状態”のように、複数の撮像装置２００の撮像範囲が重複する領域がより大きくなるような状態が、設定される。
　よって、撮像装置２００を配置する者は、配置された撮像装置２００による選手およびボールのトラッキングが、精度が高く、かつ安定して行われるように、配置対象の撮像装置２００を配置することができる。
　なお、本実施形態に係る情報処理方法に係る処理の例が、図５に示す例に限られないことは、言うまでもない。
［３］本実施形態に係る情報処理システムを構成する各装置の適用例
　以上、本実施形態に係る情報処理システムの構成要素として、情報処理装置を挙げて説明したが、本実施形態は、かかる形態に限られない。本実施形態は、例えば、“ＰＣ（Personal　Computer）やサーバなどのコンピュータ”や、“タブレット型の装置”、“ゲーム機”、“デジタルスチルカメラやデジタルビデオカメラなどのカメラ”など、本実施形態に係る情報処理方法に係る処理を行うことが可能な、様々な機器に適用することができる。また、本実施形態は、例えば、上記のような機器に組み込むことが可能な、処理ＩＣに適用することもできる。
　また、本実施形態に係る情報処理装置は、例えばクラウドコンピューティングなどのように、ネットワークへの接続（または各装置間の通信）を前提とした処理システムに適用されてもよい。本実施形態に係る情報処理方法に係る処理が行われる処理システムの一例としては、例えば“処理システムを構成する一の装置によって本実施形態に係る情報処理方法に係る処理の一部の処理が行われ、処理システムを構成する他の装置によって本実施形態に係る情報処理方法に係る処理の当該一部の処理以外の処理が行われるシステム”などが、挙げられる。
　また、本実施形態に係る情報処理システムの構成要素として、撮像装置を挙げて説明したが、本実施形態は、かかる形態に限られない。本実施形態は、例えば、“デジタルスチルカメラやデジタルビデオカメラなどのカメラ”や、“スマートホンや携帯電話などの撮像を行うことが可能な通信装置”、“撮像を行うことが可能なタブレット型の装置”、“撮像を行うことが可能なゲーム機”など、撮像機能を有する任意の装置が、挙げられる。また、上述したように、本実施形態に係る情報処理システムでは、本実施形態に係る情報処理装置が撮像装置の役目を果たしてもよい。
（本実施形態に係るプログラム）
　コンピュータシステムを、本実施形態に係る情報処理装置として機能させるためのプログラム（例えば、本実施形態に係る情報処理方法に係る処理を実行することが可能なプログラム）が、コンピュータシステムにおいてプロセッサなどにより実行されることによって、撮像装置の配置を補助することができる。ここで、本実施形態に係るコンピュータシステムとしては、単体のコンピュータ、または、複数のコンピュータが挙げられる。本実施形態に係るコンピュータシステムによって、本実施形態に係る情報処理方法に係る一連の処理が行われる。
　また、コンピュータシステムを、本実施形態に係る情報処理装置として機能させるためのプログラムが、コンピュータシステムにおいてプロセッサなどにより実行されることによって、上述した本実施形態に係る情報処理方法に係る処理によって奏される効果を、奏することができる。
　以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
　例えば、上記では、コンピュータシステムを、本実施形態に係る情報処理装置として機能させるためのプログラム（コンピュータプログラム）が提供されることを示したが、本実施形態は、さらに、上記プログラムを記憶させた記録媒体も併せて提供することができる。
　上述した構成は、本実施形態の一例を示すものであり、当然に、本開示の技術的範囲に属するものである。
　また、本明細書に記載された効果は、あくまで説明的または例示的なものであって限定的ではない。つまり、本開示に係る技術は、上記の効果とともに、または上記の効果に代えて、本明細書の記載から当業者には明らかな他の効果を奏しうる。
　なお、以下のような構成も本開示の技術的範囲に属する。
（１）
　撮像装置に撮像させる領域を規定する領域情報と、配置されている撮像装置に関する情報とに基づいて、前記領域と前記撮像装置との関係に関する通知を行う処理部を備える、情報処理装置。
（２）
　前記処理部は、前記関係に関する通知として、前記領域に対する前記撮像装置の状態の通知を行う、（１）に記載の情報処理装置。
（３）
　前記処理部は、前記領域に対する前記撮像装置の状態の通知として、前記領域に対する前記撮像装置の撮像範囲の通知を行う、（２）に記載の情報処理装置。
（４）
　前記処理部は、前記領域に対する前記撮像装置の状態の通知として、前記領域に対する前記撮像装置の配置の通知を行う、（２）に記載の情報処理装置。
（５）
　前記処理部は、前記関係に関する通知として、前記撮像装置の配置の変更を補助する通知を行う、（１）～（４）のいずれか１つに記載の情報処理装置。
（６）
　前記処理部は、前記撮像装置の配置の変更を補助する通知として、前記領域が前記撮像装置の撮像範囲に含まれるように前記撮像装置の配置を変更させる通知を、行う、（５）に記載の情報処理装置。
（７）
　前記処理部は、さらに、前記領域において複数の前記撮像装置の撮像範囲が重複する領域がより大きくなるように前記撮像装置の配置を変更させる通知を行う、（６）に記載の情報処理装置。
（８）
　前記処理部は、さらに、複数の前記撮像装置の有効撮像距離を満たすように、前記撮像装置の配置を変更させる通知を行う、（７）に記載の情報処理装置。
（９）
　前記処理部は、前記撮像装置の配置の変更を補助する通知として、前記撮像装置の画角、向き、および位置のうちの１または２以上を変更させる通知を行う、（５）～（８）のいずれか１つに記載の情報処理装置。
（１０）
　前記処理部は、前記画角、前記向き、および前記位置の変更の仕方を、設定された順序で通知する、（９）に記載の情報処理装置。
（１１）
　前記処理部は、前記画角、前記向き、および前記位置のうちの２以上の変更の仕方を、同時に通知する、（９）に記載の情報処理装置。
（１２）
　前記処理部は、複数の前記領域情報の中から設定された前記領域情報が規定する前記領域に基づいて、前記撮像装置の関係に関する通知を行う、（１）～（１１）のいずれか１つに記載の情報処理装置。
（１３）
　前記処理部は、検出された所定の設定操作に対応する前記領域情報を設定する、（１２）に記載の情報処理装置。
（１４）
　前記領域情報が規定する領域には、スポーツの種類に応じた領域が含まれる、（１）～（１３）のいずれか１つに記載の情報処理装置。
（１５）
　前記撮像装置に関する情報は、前記撮像装置の位置と、前記撮像装置の姿勢と、前記撮像装置のパラメータとを示す、（１）～（１４）のいずれか１つに記載の情報処理装置。
（１６）
　前記処理部は、
　前記撮像装置により撮像された撮像画像に基づいて、前記撮像装置の位置と、前記撮像装置の姿勢と、前記撮像装置のパラメータとを推定し、
　推定された前記撮像装置の位置、前記撮像装置の姿勢、および前記撮像装置のパラメータを示す前記撮像装置に関する情報に基づいて、前記撮像装置の関係に関する通知を行う、（１５）に記載の情報処理装置。
（１７）
　撮像装置に撮像させる領域を規定する領域情報と、配置されている撮像装置に関する情報とに基づいて、前記領域と前記撮像装置との関係に関する通知を行うステップを有する、情報処理装置により実行される情報処理方法。
（１８）
　前記通知を行うステップでは、前記関係に関する通知として、前記領域に対する前記撮像装置の状態の通知が行われる、（１７）に記載の情報処理方法。
（１９）
　前記通知を行うステップでは、前記関係に関する通知として、前記撮像装置の配置の変更を補助する通知が行われる、（１７）または（１８）に記載の情報処理方法。
（２０）
　前記領域情報には、複数の領域が規定され、
　前記通知を行うステップでは、複数の前記領域の中から設定された前記領域に基づいて、前記撮像装置の関係に関する通知が行われる、（１７）～（１９）のいずれか１つに記載の情報処理方法。
　１００　　情報処理装置
　１０２　　通信部
　１０４　　制御部
　１１０　　処理部
　２００、２００Ａ、２００Ｂ、２００Ｃ　　撮像装置
　３００　　ネットワーク
　１０００　　情報処理システム

Claims (20)

  1. 　撮像装置に撮像させる領域を規定する領域情報と、配置されている撮像装置に関する情報とに基づいて、前記領域と前記撮像装置との関係に関する通知を行う処理部を備える、情報処理装置。
  2. 　前記処理部は、前記関係に関する通知として、前記領域に対する前記撮像装置の状態の通知を行う、請求項１に記載の情報処理装置。
  3. 　前記処理部は、前記領域に対する前記撮像装置の状態の通知として、前記領域に対する前記撮像装置の撮像範囲の通知を行う、請求項２に記載の情報処理装置。
  4. 　前記処理部は、前記領域に対する前記撮像装置の状態の通知として、前記領域に対する前記撮像装置の配置の通知を行う、請求項２に記載の情報処理装置。
  5. 　前記処理部は、前記関係に関する通知として、前記撮像装置の配置の変更を補助する通知を行う、請求項１に記載の情報処理装置。
  6. 　前記処理部は、前記撮像装置の配置の変更を補助する通知として、前記領域が前記撮像装置の撮像範囲に含まれるように前記撮像装置の配置を変更させる通知を、行う、請求項５に記載の情報処理装置。
  7. 　前記処理部は、さらに、前記領域において複数の前記撮像装置の撮像範囲が重複する領域がより大きくなるように前記撮像装置の配置を変更させる通知を行う、請求項６に記載の情報処理装置。
  8. 　前記処理部は、さらに、複数の前記撮像装置の有効撮像距離を満たすように、前記撮像装置の配置を変更させる通知を行う、請求項７に記載の情報処理装置。
  9. 　前記処理部は、前記撮像装置の配置の変更を補助する通知として、前記撮像装置の画角、向き、および位置のうちの１または２以上を変更させる通知を行う、請求項５に記載の情報処理装置。
  10. 　前記処理部は、前記画角、前記向き、および前記位置の変更の仕方を、設定された順序で通知する、請求項９に記載の情報処理装置。
  11. 　前記処理部は、前記画角、前記向き、および前記位置のうちの２以上の変更の仕方を、同時に通知する、請求項９に記載の情報処理装置。
  12. 　前記処理部は、複数の前記領域情報の中から設定された前記領域情報が規定する前記領域に基づいて、前記撮像装置の関係に関する通知を行う、請求項１に記載の情報処理装置。
  13. 　前記処理部は、検出された所定の設定操作に対応する前記領域情報を設定する、請求項１２に記載の情報処理装置。
  14. 　前記領域情報が規定する領域には、スポーツの種類に応じた領域が含まれる、請求項１に記載の情報処理装置。
  15. 　前記撮像装置に関する情報は、前記撮像装置の位置と、前記撮像装置の姿勢と、前記撮像装置のパラメータとを示す、請求項１に記載の情報処理装置。
  16. 　前記処理部は、
    　前記撮像装置により撮像された撮像画像に基づいて、前記撮像装置の位置と、前記撮像装置の姿勢と、前記撮像装置のパラメータとを推定し、
    　推定された前記撮像装置の位置、前記撮像装置の姿勢、および前記撮像装置のパラメータを示す前記撮像装置に関する情報に基づいて、前記撮像装置の関係に関する通知を行う、請求項１５に記載の情報処理装置。
  17. 　撮像装置に撮像させる領域を規定する領域情報と、配置されている撮像装置に関する情報とに基づいて、前記領域と前記撮像装置との関係に関する通知を行うステップを有する、情報処理装置により実行される情報処理方法。
  18. 　前記通知を行うステップでは、前記関係に関する通知として、前記領域に対する前記撮像装置の状態の通知が行われる、請求項１７に記載の情報処理方法。
  19. 　前記通知を行うステップでは、前記関係に関する通知として、前記撮像装置の配置の変更を補助する通知が行われる、請求項１７に記載の情報処理方法。
  20. 　前記領域情報には、複数の領域が規定され、
    　前記通知を行うステップでは、複数の前記領域の中から設定された前記領域に基づいて、前記撮像装置の関係に関する通知が行われる、請求項１７に記載の情報処理方法。
PCT/JP2017/040128 2017-02-02 2017-11-07 情報処理装置、および情報処理方法 WO2018142705A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201780084762.6A CN110226324B (zh) 2017-02-02 2017-11-07 信息处理设备和信息处理方法
EP17894904.6A EP3579547B1 (en) 2017-02-02 2017-11-07 Information processing device and information processing method
US16/480,335 US20190387179A1 (en) 2017-02-02 2017-11-07 Information processing apparatus and information processing method
JP2018565944A JP7215173B2 (ja) 2017-02-02 2017-11-07 情報処理装置、および情報処理方法

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017017480 2017-02-02
JP2017-017480 2017-02-02

Publications (1)

Publication Number Publication Date
WO2018142705A1 true WO2018142705A1 (ja) 2018-08-09

Family

ID=63040421

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2017/040128 WO2018142705A1 (ja) 2017-02-02 2017-11-07 情報処理装置、および情報処理方法

Country Status (5)

Country Link
US (1) US20190387179A1 (ja)
EP (1) EP3579547B1 (ja)
JP (1) JP7215173B2 (ja)
CN (1) CN110226324B (ja)
WO (1) WO2018142705A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021002889A (ja) * 2020-10-09 2021-01-07 キヤノン株式会社 情報処理装置、情報処理方法、及びプログラム

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008017036A (ja) 2006-07-04 2008-01-24 Canon Inc 撮像装置、撮像装置の制御方法、及びコンピュータプログラム
JP2016123004A (ja) * 2014-12-25 2016-07-07 三菱電機株式会社 撮像装置の設置支援装置、撮像装置の設置支援方法および映像記録再生装置

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002135765A (ja) 1998-07-31 2002-05-10 Matsushita Electric Ind Co Ltd カメラキャリブレーション指示装置及びカメラキャリブレーション装置
JP4757142B2 (ja) * 2006-08-10 2011-08-24 キヤノン株式会社 撮影環境校正方法及び情報処理装置
JP4663700B2 (ja) * 2007-09-28 2011-04-06 富士フイルム株式会社 撮影装置、及び撮影方法
JP5428210B2 (ja) 2008-06-11 2014-02-26 ソニー株式会社 情報処理装置、撮像システム、録画制御方法及びプログラム
KR101208427B1 (ko) 2008-12-22 2012-12-05 한국전자통신연구원 동기화된 다중 영상 취득을 위한 다중 카메라 제어 및 영상저장 장치 및 방법
JP2011205345A (ja) * 2010-03-25 2011-10-13 Nec Casio Mobile Communications Ltd 撮像装置及びプログラム
TWI584647B (zh) * 2012-07-12 2017-05-21 Chi Lin Hong A method and apparatus for preventing defocusing
WO2014027567A1 (ja) 2012-08-15 2014-02-20 日本電気株式会社 画像処理システム、画像処理方法、及びプログラム
US9731714B2 (en) * 2014-06-25 2017-08-15 Fujitsu Ten Limited Vehicle apparatus
JP6299492B2 (ja) 2014-07-03 2018-03-28 ソニー株式会社 情報処理装置、情報処理方法、およびプログラム
CN104123732B (zh) * 2014-07-14 2017-06-16 中国科学院信息工程研究所 一种基于多摄像头的在线目标跟踪方法及系统
EP3176756A4 (en) 2014-07-28 2017-08-09 Panasonic Intellectual Property Management Co., Ltd. Augmented reality display system, terminal device and augmented reality display method
CN104796612B (zh) * 2015-04-20 2017-12-19 河南弘金电子科技有限公司 高清雷达联动跟踪控制摄像系统及联动跟踪方法
EP3293960A4 (en) 2015-04-28 2018-12-05 Sony Corporation Information processing device, information processing method, and program
US10129483B2 (en) * 2015-06-23 2018-11-13 Light Labs Inc. Methods and apparatus for implementing zoom using one or more moveable camera modules

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008017036A (ja) 2006-07-04 2008-01-24 Canon Inc 撮像装置、撮像装置の制御方法、及びコンピュータプログラム
JP2016123004A (ja) * 2014-12-25 2016-07-07 三菱電機株式会社 撮像装置の設置支援装置、撮像装置の設置支援方法および映像記録再生装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3579547A4

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021002889A (ja) * 2020-10-09 2021-01-07 キヤノン株式会社 情報処理装置、情報処理方法、及びプログラム

Also Published As

Publication number Publication date
JPWO2018142705A1 (ja) 2019-11-21
EP3579547A1 (en) 2019-12-11
CN110226324B (zh) 2021-12-14
US20190387179A1 (en) 2019-12-19
CN110226324A (zh) 2019-09-10
EP3579547B1 (en) 2024-06-26
EP3579547A4 (en) 2020-12-02
JP7215173B2 (ja) 2023-01-31

Similar Documents

Publication Publication Date Title
US10375377B2 (en) Information processing to generate depth information of an image
US10026207B2 (en) Image display device, image display method and storage medium
US9704028B2 (en) Image processing apparatus and program
JP6299492B2 (ja) 情報処理装置、情報処理方法、およびプログラム
WO2017094317A1 (ja) 制御装置、制御方法、およびプログラム
CN108702445A (zh) 一种图像显示方法及电子设备
US11785292B2 (en) Information processing terminal and system
WO2021018115A1 (zh) 一种目标跟踪监控展示方法、装置、电子设备及存储介质
JP6593922B2 (ja) 画像監視システム
JPWO2017018043A1 (ja) 電子機器、電子機器の動作方法及び制御プログラム
WO2018142705A1 (ja) 情報処理装置、および情報処理方法
JP6720966B2 (ja) 情報処理装置、情報処理方法、およびプログラム
WO2019187493A1 (ja) 情報処理装置、情報処理方法、およびプログラム
CN102905057A (zh) 图像处理设备、图像处理方法和程序
JP5914992B2 (ja) 表示制御装置、表示制御方法、およびプログラム
JPWO2019017046A1 (ja) 情報処理装置、および情報処理方法
WO2018135095A1 (ja) 情報処理装置、情報処理方法、および情報処理システム
US20130336598A1 (en) Effect control device, effect control method, and program
WO2016129154A1 (ja) 情報処理装置、情報処理方法、およびプログラム
US20200045234A1 (en) Image display method, image display system and virtual window
JP2013037462A (ja) 情報処理装置、および情報処理方法
JP2017208699A (ja) 制御装置、制御方法、およびプログラム
JPWO2015193977A1 (ja) 電子機器、方法、及びプログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 17894904

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2018565944

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 2017894904

Country of ref document: EP

Effective date: 20190902