WO2017014126A1 - 画像管理システム、画像管理方法及びプログラム - Google Patents

画像管理システム、画像管理方法及びプログラム Download PDF

Info

Publication number
WO2017014126A1
WO2017014126A1 PCT/JP2016/070681 JP2016070681W WO2017014126A1 WO 2017014126 A1 WO2017014126 A1 WO 2017014126A1 JP 2016070681 W JP2016070681 W JP 2016070681W WO 2017014126 A1 WO2017014126 A1 WO 2017014126A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
communication terminal
parameter
management system
image management
Prior art date
Application number
PCT/JP2016/070681
Other languages
English (en)
French (fr)
Inventor
聡 種市
和憲 若松
毅 前鼻
Original Assignee
株式会社リコー
聡 種市
和憲 若松
毅 前鼻
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社リコー, 聡 種市, 和憲 若松, 毅 前鼻 filed Critical 株式会社リコー
Priority to CN201680041392.3A priority Critical patent/CN107925740A/zh
Priority to JP2017529571A priority patent/JPWO2017014126A1/ja
Priority to CA2991882A priority patent/CA2991882A1/en
Priority to EP16827686.3A priority patent/EP3328073A4/en
Publication of WO2017014126A1 publication Critical patent/WO2017014126A1/ja
Priority to US15/859,946 priority patent/US20180124310A1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/27Server based end-user applications
    • H04N21/274Storing end-user multimedia data in response to end-user request, e.g. network recorder
    • H04N21/2743Video hosting of uploaded data from client
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234363Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the spatial resolution, e.g. for clients with a lower screen resolution
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/414Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65Transmission of management data between client and server
    • H04N21/658Transmission by the client directed to the server
    • H04N21/6587Control parameters, e.g. trick play commands, viewpoint selection
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/45Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/66Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/661Transmitting camera control signals through networks, e.g. control via the Internet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/698Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure

Definitions

  • the present invention relates to an image management system, an image management method, and a program.
  • the conventional method may not be able to perform flexible image processing such as a thumbnail image cannot be generated with a predetermined shape.
  • the present invention has been made in view of the above problems, and an object of the present invention is to provide an image management system capable of flexible image processing, such as being able to generate thumbnail images with a predetermined shape.
  • an image management system having a communication terminal and an image management apparatus that communicates with the communication terminal via a network includes a receiving unit that receives image data including a parameter that specifies a partial region of the image, and the parameter And a thumbnail image data generation unit for generating thumbnail image data in a predetermined shape.
  • an image management system that can perform flexible image processing such as being able to generate thumbnail images and the like in a predetermined shape.
  • FIG. 1 is a diagram illustrating an example of an overall configuration of an image management system according to an embodiment. It is a figure which shows an example of the external appearance of the imaging device which concerns on embodiment. It is another figure which shows an example of the external appearance of the imaging device which concerns on embodiment. It is another figure which shows an example of the external appearance of the imaging device which concerns on embodiment. It is a figure which shows the usage example of the imaging device which concerns on embodiment. It is a figure which shows an example of the image imaged with the imaging device which concerns on embodiment, and the produced
  • FIG. 1 is a diagram illustrating an example of the overall configuration of an image management system according to an embodiment.
  • the image management system 200 includes a first communication terminal 3a and a first server 5 which is an example of an image management apparatus.
  • the first communication terminal 3 a and the first server 5 are connected via the network 9.
  • the network 9 is constructed by base stations such as the first base station 9a and the second base station 9b.
  • the second communication terminal 3b and the second server 7 are connected to the image management system 200 via the network 9, respectively.
  • the imaging device 1 is connected to the first communication terminal 3a.
  • the image management system 200 may be further connected with devices other than those illustrated.
  • “communication terminal 3” when referring to arbitrary communication terminals among a plurality of communication terminals, “communication terminal 3” is indicated.
  • the imaging device 1 is a digital camera that captures panoramic images.
  • the imaging device 1 may be a general digital camera that captures an image other than the omnidirectional panoramic image.
  • the imaging device 1 and the first communication terminal 3a may be integrated.
  • the imaging apparatus 1 is a digital camera that captures an omnidirectional panoramic image.
  • the communication terminal 3 is a computer such as a smartphone, a tablet terminal, a notebook personal computer, a desktop personal computer, or a PDA (Personal Data Assistance). Further, each of the first server 5 and the second server 7 is a computer such as a server.
  • the imaging device 1 can communicate with the communication terminal 3 by a short-range wireless technology such as NFC (Near Field Communication) standard, BlueTooth (registered trademark), Wi-Fi (Wireless Fidelity), or a combination thereof. it can.
  • the communication terminal 3 can communicate with the first server 5 and the second server 7 via the network 9.
  • This network 9 includes, for example, a first base station 9a and a second base station 9b, and a wireless communication network such as 3G (3rd Generation), WiMAX (Worldwide Interoperability for Microwave Access), LTE (Long Term Evolution), or the like. It is constructed by the Internet or a combination thereof.
  • wired communication may be performed between the imaging device 1 and the communication terminal 3 and between the communication terminal 3 and the network 9.
  • FIGS. 2A to 2C are diagrams illustrating an example of the appearance of the imaging apparatus according to the embodiment.
  • 2A is a left side view of the imaging apparatus 1
  • FIG. 2B is a front view
  • FIG. 2C is a plan view.
  • the imaging device 1 is a size that a human can hold with one hand.
  • an imaging device 103a is provided on the front side (front side) and an imaging device 103b is provided on the back side (rear side) on the upper part of the imaging device 1.
  • an operation unit 115 such as a shutter button is provided on the front side of the imaging apparatus 1.
  • optical axis AXa of the image sensor 103a and the optical axis AXb of the image sensor 103b as shown in the figure are used.
  • FIG. 3 is a diagram illustrating a usage example of the imaging apparatus according to the embodiment.
  • the imaging device 1 is moved around the first user USERA. Capture the subject.
  • the imaging device 1 can capture two hemispheric images, respectively.
  • the position where the first user USERA has taken an image is the origin, and the image to be picked up indicates 360 ° in the horizontal direction of the first user USERA.
  • FIGS. 4A to 4C are diagrams illustrating an example of an image captured and an image generated by the imaging apparatus according to the embodiment.
  • FIG. 4A shows an example of a hemispherical image captured by the image sensor 103a provided on the front side (front side).
  • FIG. 4B shows an example of a hemispheric image captured by the image sensor 103b provided on the back side (rear side).
  • FIG. 4C shows an example of an image (hereinafter referred to as “Merkattle image”) generated by combining the images shown in FIGS. 4A and 4B by the Mercator projection method or the like.
  • the Mercator image shown in FIG. 4C will be described as an example.
  • the imaging element 103a uses a lens that captures a wide-angle range such as a fisheye lens. Therefore, as illustrated in FIG. 4A, the hemispheric image captured by the image sensor 103a is an image curved by distortion or the like.
  • the imaging element 103b uses a lens that captures a wide-angle range, such as a fisheye lens. Therefore, similarly to FIG. 4A, as illustrated in FIG. 4B, the hemispheric image captured by the image sensor 103b is an image curved by distortion or the like. Then, the hemispherical image captured by the imaging element 103a and the hemispherical image captured by the imaging element 103b are combined by the imaging device 1, and a Mercator image shown in FIG. 4C is generated.
  • FIG. 5A and FIG. 5B are diagrams illustrating an example of the sharing selection image according to the embodiment.
  • the image shown in FIG. 5B is an example of an image (hereinafter referred to as “shared selection image”) used by the user to select an image.
  • the share selection image is an image transmitted from the imaging device 1 (FIG. 1) to the first communication terminal 3a (FIG. 1).
  • the share selection image is generated from the Mercator image.
  • FIG. 5A it is assumed that a partial range AR1 of the Mercator image shown in FIG. 4C is selected.
  • the image shown in FIG. 5B is an example of the shared selection image showing the range AR1 among the images shown in FIG. 5A.
  • FIG. 6 is a diagram illustrating an example of a list for selecting a share selection image according to the embodiment.
  • the share selection image CE shown in FIG. 5B is transmitted from the imaging apparatus 1 (FIG. 1) to the first communication terminal 3a, the first communication terminal 3a, for example, another share selection image and a share selection image.
  • the list has a format such as an image list SL shown in FIG.
  • FIG. 6 shows an example in which the image list SL is displayed on the display 315 included in the first communication terminal 3a.
  • the share selection image CE shown in FIG. 5B is displayed as one of the images indicated by the image list SL.
  • information related to the share selection image CE is displayed in the image list SL. In this example, “September 20, 2011 11:21”, which is the date and time when the share selection image CE is captured. Is displayed.
  • FIG. 7 is a diagram illustrating an example of the entire process performed by the imaging apparatus or the like according to the embodiment.
  • an example of an overall process performed by a device included in an image management system such as an imaging device and a connected device when the share selection image CE is selected from the image list SL illustrated in FIG. 6 will be described.
  • step S1 when the share selection image CE is selected on the image list SL, the first communication terminal 3a acquires the original image from the imaging device 1.
  • the original image is, for example, each hemispherical image DImg1 shown in FIGS. 4A and 4B.
  • the first communication terminal 3a first generates an omnidirectional panoramic image. Specifically, the first communication terminal 3a generates a Mercator image shown in FIG. 4C generated from the hemispherical image DImg1. Next, based on the Mercator image, the first communication terminal 3a generates an omnidirectional panoramic image using OpenGL ES (registered trademark) (Open Graphics Library for Embedded Systems) or the like. OpenGL ES® is an example of a graphic library used to visualize 2D and 3D data. In this example, when the Mercator image shown in FIG. 4C is pasted on the solid sphere, an omnidirectional panoramic image is generated.
  • OpenGL ES registered trademark
  • OpenGL ES® is an example of a graphic library used to visualize 2D and 3D data.
  • FIG. 8 is a diagram illustrating an example of an omnidirectional panoramic image generated by the imaging apparatus according to the embodiment.
  • FIG. 8 is an example of an omnidirectional panoramic image generated based on the Mercator image shown in FIG. 4C.
  • the omnidirectional panoramic image is a moving image or a still image.
  • step S2 the first communication terminal 3a generates a parameter for specifying a partial region of the image.
  • the parameter is generated, for example, in the format of “Photo Sphere (registered trademark) XMP Metadata”.
  • the parameter is a parameter determined by the standard, and can be used in many application softwares.
  • FIG. 9 is a diagram showing an example of parameters.
  • the parameter Par includes, for example, a direction parameter HPar indicating a direction, an elevation angle parameter PPar indicating an elevation angle, an angle of view parameter FOVPar indicating an angle of view, a position parameter DPar indicating a camera position, and the like.
  • a predetermined region in the omnidirectional panoramic image can be specified.
  • the specified area is referred to as a “predetermined area”, and the position and the like in the omnidirectional panoramic image will be described.
  • FIG. 10 is a diagram illustrating an example of a predetermined area according to the embodiment.
  • FIG. 10 shows an example where the omnidirectional panoramic image is a three-dimensional solid sphere CS.
  • 10 shows a front view of the image sensor 103a (FIG. 1), a side view of the image sensor 103a seen from the side, and a plan view of the image sensor 103a seen from above.
  • the optical axis AXa of the image sensor 103a that is, the depth direction
  • the horizontal direction with respect to the Z axis that is, the horizontal direction
  • the vertical direction that is, the vertical direction is referred to as “Y-axis”.
  • the virtual camera IC corresponds to the user's viewpoint with respect to the panoramic image displayed as the solid sphere CS. That is, when the omnidirectional panoramic image is a solid sphere CS, the virtual camera IC is located at the center of the solid sphere CS as shown in the figure. At this position, when the virtual camera IC is rotated up and down (Pitch (PPar)), left and right (Yaw (HPar)), or the optical axis center (Roll), the predetermined region T moves. Further, when the virtual camera IC is translated in any direction of the X axis, the Y axis, or the Z axis, the predetermined region T moves. When the predetermined area T moves, the location displayed in the omnidirectional panoramic image changes, so that the image generated based on the predetermined area T changes.
  • FIG. 11 is a diagram illustrating an example of a direction parameter according to the embodiment.
  • the direction parameter HPar is a parameter indicating a left-right rotation amount, that is, a rotation amount in the so-called Yaw direction.
  • an angle that coincides with the optical axis AXa of the image sensor 103a is set to “0.0 °” of the direction parameter HPar and is set as the origin. That is, for example, when the value of the direction parameter HPar increases, the virtual camera IC rotates in the Yaw direction in FIG. Along with this, the predetermined region T also rotates in the Yaw direction. Therefore, when the direction parameter HPar is set, the “direction” of the virtual camera IC can be specified.
  • FIG. 12 is a diagram illustrating an example of an elevation angle parameter according to the embodiment.
  • the elevation angle parameter PPar is a parameter indicating the vertical rotation amount, that is, the rotation amount in the so-called Pitch direction.
  • an angle that coincides with the optical axis AXa of the image sensor 103a is set to “0.0 °” of the elevation angle parameter PPar and is set as the origin. That is, for example, when the value of the elevation angle parameter PPar increases, the virtual camera IC rotates in the pitch direction of FIG. Along with this, the predetermined region T also rotates in the pitch direction. Therefore, when the elevation angle parameter PPar is set, the “elevation angle” of the virtual camera IC can be specified.
  • FIG. 13 is a diagram illustrating an example of an angle of view parameter according to the embodiment.
  • FIG. 13 corresponds to a plan view of the diagram shown in FIG.
  • the view angle parameter FOVPar is a parameter indicating a predetermined area corresponding to the range displayed in the image.
  • an equal angle of view is set in the left-right direction around the optical axis AXa of the image sensor 103a. That is, for example, when the value of the view angle parameter FOVPar is increased, the view angle Ang shown in FIG. 10 is increased, and the range of the predetermined region T is increased. Therefore, when the view angle parameter FOVPar is set, the “view angle” of the virtual camera IC can be specified.
  • FIG. 14 is a diagram illustrating an example of position parameters according to the embodiment.
  • FIG. 14 corresponds to a plan view of the diagram shown in FIG.
  • the position parameter DPar is a parameter indicating the position of the virtual camera IC.
  • the center of the solid sphere CS is set to “0.0” of the position parameter DPar, and is set as the origin.
  • the radius of the solid sphere CS is set to “1.0”.
  • the position parameter DPar indicates the distance from the origin. That is, for example, when the value of the position parameter DPar increases, the virtual camera IC moves on the Z axis and moves to a position far from the origin indicated by “0.0” in FIG. Therefore, when the position parameter DPar is set, the “position” of the virtual camera IC can be specified.
  • each parameter does not have to be based on the optical axis AXa of the image sensor 103a.
  • the origin in each parameter may be arbitrarily selected.
  • FIG. 15A and FIG. 15B are diagrams illustrating an example of the predetermined area specified by the parameter according to the embodiment.
  • the first communication terminal can calculate the direction, the elevation angle, the angle of view, and the position of the virtual camera indicating the point.
  • the omnidirectional panoramic image it is assumed that a portion that becomes the predetermined region T is cut out and displayed as an image on the display 315 included in the first communication terminal 3a as illustrated in FIG. 15B. Further, the image displayed by the first communication terminal 3a in FIG. 15B is referred to as “first image P1”.
  • FIG. 15B shows an example in which a comment display area 3130 which is a GUI (Graphical User Interface) for inputting a user comment is displayed.
  • GUI Graphic User Interface
  • the first user USERA (FIG. 1) operates the first communication terminal 3a to select a range to be displayed as a thumbnail image. Specifically, when the first communication terminal 3a has a touch panel, the first user USERA touches and operates the display 315 with a finger. Next, the first communication terminal 3a moves the predetermined area T in accordance with the finger motion detected by the touch panel, and cuts out and displays a portion that becomes the predetermined area T after the movement as an image on the display 315. In this case, the first communication terminal 3a changes the image to be displayed from the first image P1.
  • the first communication terminal 3a is an information processing device such as a PC
  • the first user USERA may perform an operation with an input device such as a mouse instead of a touch panel.
  • FIG. 16 is a diagram illustrating an example of determining a thumbnail image according to the embodiment.
  • second image P2 a thumbnail image
  • the first communication terminal 3a calculates the value of each parameter that specifies the predetermined region T (FIG. 15A) that becomes the second image P2.
  • the first communication terminal 3a calculates values such as “direction” and “elevation angle” that specify the range of the second image P2.
  • the first communication terminal 3a incorporates the calculated value and generates the parameter shown in FIG.
  • step S ⁇ b> 3 the first communication terminal 3 a transmits the image data DImg ⁇ b> 2 to the first server 5.
  • the image data DImg2 is data indicating the Mercator image shown in FIG. 4C. Further, the image data DImg2 includes the parameter Par shown in FIG. 9 generated in step S2.
  • step S4 the first server 5 generates thumbnail image data DImg3. Since the image data DImg2 transmitted in step S3 includes the parameter Par, the first server 5 can generate an area to be a thumbnail image by cutting it out from the Mercator image. The first server 5 can generate a thumbnail image in a predetermined shape. For example, the first server 5 can generate a thumbnail image with a square shape. Hereinafter, an example in which the thumbnail image has a square shape will be described.
  • the first server 5 determines the shape of the thumbnail image based on, for example, the display size of the communication terminal.
  • FIG. 17A and FIG. 17B are diagrams illustrating an example of a display according to the embodiment.
  • the shape of the thumbnail image is determined based on the size of the display 315 included in the first communication terminal 3a.
  • the first server 5 determines one side of the thumbnail image based on the length in the longitudinal direction of the display 315 (hereinafter referred to as “long side LS”).
  • the thumbnail image includes the range indicated by the second image P2 (FIG. 16). That is, the first server 5 can generate the thumbnail image so that the range determined by the first user is included.
  • the long side LS is the one with many pixels among the horizontal direction and the vertical direction which comprise the display 315 which the 1st communication terminal 3a has.
  • the long side LS is in the vertical direction of the drawing.
  • the long side LS is a vertical side that is 960 pixels. Therefore, for example, when the first communication terminal 3a is used in the orientation as shown in FIG. 17B, the long side LS is in the horizontal direction of the drawing.
  • the first server 5 generates image ID data DID and the like for specifying the image data DImg2 indicated by the thumbnail image data DImg3.
  • the first server 5 manages the image data DImg2, the thumbnail image data DImg3, and the image ID data DID in association with each other. That is, when the ID indicated by the image ID data DID is specified, the first server 5 can specify one image data DImg2 among the plurality of image data DImg2 to be stored.
  • step S5 the first server 5 transmits the thumbnail image data DImg3 and the image ID data DID to the second server 7.
  • step S6 the second server 7 manages the thumbnail image data DImg3 and the image ID data DID received in step S6.
  • step S7 when the second communication terminal 3b is connected to the second server 7 by an operation by the second user USERB, in step S7, the second server 7 sends the thumbnail image data DImg3 and the image ID data DID to the second communication terminal 3b. Send. Next, the second communication terminal 3b displays the received thumbnail image data DImg3.
  • FIG. 18 is a diagram showing a display example of thumbnail images according to the embodiment.
  • the thumbnail image is displayed as a display screen 3200 or the like.
  • the display screen 3200 includes a user image 3210 indicating the first user USERA (FIG. 1), a user name 3220, a thumbnail image 3230, a comment 3240 indicating a comment by the first user USERA, and the like.
  • the second communication terminal 3b may perform display in a so-called list format in which other thumbnail image data and the like are further transmitted to the second communication terminal 3b and there are a plurality of display screens 3200.
  • the format in which thumbnail images are displayed is not limited to the format shown in FIG. 18, and may be a format in which a plurality of thumbnail images 3230 are arranged, for example.
  • step S8 the second communication terminal 3b transmits the image ID data DID of the selected thumbnail image to the first server 5. This means that the second communication terminal 3b requests the first server 5 for image data such as a Mercator image indicated by the thumbnail image.
  • step S9 the first server 5 transmits the image data DImg2 to the second communication terminal 3b.
  • the second communication terminal 3b cuts out a range specified based on the parameters included in the image data DImg2 from the received image data DImg2, and displays the image.
  • FIG. 19 is a diagram illustrating an example of an image displayed by the communication terminal according to the embodiment.
  • the second communication terminal 3b displays an image on the display 315 included in the second communication terminal 3b based on the received image data DImg2 (FIG. 7).
  • FIG. 20 is a block diagram illustrating an example of a hardware configuration of the imaging apparatus according to the embodiment.
  • the imaging device 1 will be described using the imaging device 1 having two imaging elements and imaging so-called all directions as an example.
  • the imaging apparatus 1 may have a configuration including three or more imaging elements.
  • the imaging device 1 is not limited to a device dedicated to imaging, and may be, for example, a device integrated with a smartphone or the like, or a device attached to another device such as a smartphone.
  • the imaging apparatus 1 includes an imaging unit 101, an image processing unit 104, an imaging control unit 105, a CPU (Central Processing Unit) 111, a ROM (Read Only Memory) 112, and the like. Further, the imaging apparatus 1 includes an SRAM (Static Random Access Memory) 113, a DRAM (Dynamic Random Access Memory) 114, and the like. Furthermore, the imaging apparatus 1 includes an operation unit 115, a network I / F 116, a communication unit 117, an antenna 117a, and the like.
  • the imaging unit 101 includes wide-angle lenses (so-called fisheye lenses) 102a and 102b having an angle of view of 180 ° or more in order to capture each hemispherical image.
  • the imaging unit 101 includes two imaging elements 103a and 103b provided in correspondence with the wide-angle lenses.
  • the image sensors 103a and 103b are image sensors that convert the light collected through the wide-angle lens into an electric signal and output the electric signal.
  • the image sensor is a CMOS (Complementary Metal Oxide Semiconductor) sensor, a CCD (Charge Coupled Device) sensor, or the like.
  • the image sensors 103a and 103b have a timing signal generation circuit that generates a horizontal synchronization signal, a vertical synchronization signal, a pixel clock, and the like of the image sensor. Further, the image sensors 103a and 103b include a register group in which various commands and parameters necessary for the operation of these image sensors are set.
  • the imaging elements 103a and 103b included in the imaging unit 101 are connected to the image processing unit 104 by a parallel I / F bus or the like.
  • the imaging elements 103 a and 103 b are connected to a serial I / F bus (I2C (registered trademark) (Inter-Integrated Circuit) bus or the like) separately from the imaging control unit 105.
  • the image processing unit 104 and the imaging control unit 105 are connected to the CPU 111 via the bus 110, respectively.
  • the ROM 110, the SRAM 113, the DRAM 114, the operation unit 115, the network I / F 116, the communication unit 117, the electronic compass 118, and the like are connected to the bus 110.
  • the image processing unit 104 inputs image data respectively output from the image sensors 103a and 103b via a parallel I / F bus. Next, the image processing unit 104 performs predetermined processing on each image data. Subsequently, the image processing unit 104 synthesizes the image data subjected to these processes, and generates the Mercator image data and the like shown in FIG. 4C.
  • the imaging control unit 105 uses the I2C (registered trademark) bus to execute commands to register groups included in the imaging elements 103a and 103b. Etc. are set. Necessary commands and the like are input from the CPU 111. Further, the imaging control unit 105 uses the I2C bus to output status data of register groups included in the imaging elements 103a and 103b to the CPU 111.
  • I2C registered trademark
  • the imaging control unit 105 instructs the imaging elements 103a and 103b to output image data at the timing when the shutter button of the operation unit 115 is pressed.
  • the imaging apparatus may have a function corresponding to a preview display function or a moving image display using a display. In this case, images corresponding to the respective signals output from the image sensors 103a and 103b are displayed as moving images having a predetermined frame rate.
  • the imaging control unit 105 also functions as a synchronization control unit that synchronizes the output timing of the image data output from the CPU 111 and the imaging elements 103a and 103b.
  • the imaging apparatus may include a display unit.
  • the CPU 111 controls the overall operation of the imaging apparatus 1.
  • the ROM 112 stores various programs executed by the CPU 111.
  • the SRAM 113 and the DRAM 114 are so-called work memories, and store programs executed by the CPU 111 and data being processed.
  • the DRAM 114 stores image data being processed by the image processing unit 104 and processed Mercator image data.
  • the operation unit 115 includes various operation buttons, a power switch, a shutter button, a touch panel having both display and operation functions, or a combination thereof.
  • the user inputs various imaging modes and imaging conditions to the imaging apparatus 1 by operating the operation buttons.
  • the network I / F 116 is an interface circuit (USB I / F or the like) with media such as an SD (registered trademark) card or an external device such as a PC.
  • the network I / F 116 may be a wireless or wired network interface. Further, data such as a Mercator image stored in the DRAM 114 is stored in a medium or transmitted to an external device such as the communication terminal 3 via the network I / F 116.
  • the communication unit 117 performs communication via the antenna 117a included in the imaging device 1.
  • the communication unit 117 communicates with an external device such as the communication terminal 3 by a short-range wireless technology such as Wi-Fi (registered trademark) (wireless fidelity) or NFC (Near Field Communication).
  • Wi-Fi registered trademark
  • NFC Near Field Communication
  • the electronic compass 118 calculates the azimuth and inclination (Roll rotation amount) of the imaging apparatus 1 from the earth's magnetism, and outputs azimuth / tilt information.
  • This azimuth / tilt information is an example of metadata along Exif (Exchangeable image file format) and the like, and is used for correcting a captured image.
  • the metadata may include data such as image data thumbnails, image capturing date and time, and image data data capacity.
  • FIG. 21 is a block diagram illustrating an example of a hardware configuration of the communication terminal according to the embodiment.
  • FIG. 21 shows an example where the communication terminal is a smartphone.
  • the communication terminal 3 includes a CPU 301 that controls the operation of the entire communication terminal 3, a ROM 302 that stores a basic input / output program, and a RAM (Random Access Memory) 303 that is used as a work area of the CPU 301.
  • the communication terminal 3 also has an EEPROM (Electrically Erasable and Programmable ROM) 304. Under the control of the CPU 301, the communication terminal 3 captures an object and generates various image data such as a CMOS sensor 305, which is an example of an image sensor that generates image data, an electronic magnetic compass that detects geomagnetism, a gyrocompass, and an acceleration sensor.
  • It has a media drive 308 that controls reading and writing (storage) of data to a recording medium 307 such as an orientation sensor 306 and a flash memory.
  • the recording medium 307 is detachable from the media drive 308.
  • the EEPROM 304 stores an operating system (OS) executed by the CPU 301, other programs, and various data.
  • OS operating system
  • the CMOS sensor 305 may be a CCD sensor.
  • the communication terminal 3 includes a voice input unit 311 that converts voice into a voice signal, a voice output unit 312 that converts voice signals into voice, an antenna 313a, and a wireless communication using the antenna 313a to communicate with the nearest base station. And a communication unit 313 for communicating with the first base station 9a (FIG. 1).
  • the communication terminal 3 is a GPS receiving unit that receives a GPS signal including position information (latitude, longitude, altitude, etc.) of the communication terminal 3 by means of a GPS (Global Positioning Systems) satellite or IMES (Indoor Messaging System) as an indoor GPS. 314.
  • the communication terminal 3 includes a display 315 such as a liquid crystal display or an organic EL that displays an image of the subject or various icons, and a pressure-sensitive or electrostatic touch panel 316 placed on the display 315.
  • the touch panel 316 detects a touch position on the display 315 by touching with a finger or a touch pen.
  • the communication terminal 3 includes a bus line 310 such as an address bus and a data bus in order to electrically connect the above-described units.
  • the voice input unit 311 includes a microphone that inputs voice
  • the voice output unit 312 includes a speaker that outputs voice.
  • FIG. 22 is a block diagram illustrating an example of a hardware configuration of the server according to the embodiment.
  • FIG. 22 shows an example of the hardware configuration of the first server 5 and the second server 7 which are examples of the image management apparatus.
  • the first server 5 will be described as an example.
  • the first server 5 includes a CPU 501 that controls the operation of the entire first server 5, a ROM 502 that stores a program used to drive the CPU 501 such as an IPL, and a RAM 503 that is used as a work area for the CPU 501.
  • the first server 5 also includes an HD 504 that stores various data such as programs, and an HDD (Hard Disk Drive) 505 that controls reading or writing of various data with respect to the HD 504 based on control by the CPU 501.
  • the first server 5 includes a media drive 507 for controlling reading and writing (storage) of data with respect to a recording medium 506 such as a flash memory.
  • the first server 5 includes an output device such as a display 508 that displays various information such as a cursor, menu, window, character, or image, and a network I / F 509 that performs data communication using the network 9 (FIG. 1).
  • a display 508 that displays various information such as a cursor, menu, window, character, or image
  • the first server 5 includes a keyboard 511 having a plurality of keys for inputting characters, numerical values, various instructions, and the like, and a mouse 512 that performs operations such as selection and execution of various instructions, selection of a processing target, or movement of a cursor. And so on. Further, the first server 5 includes a CD-ROM drive 514 that controls reading or writing of various data with respect to a CD-ROM (Compact Disc Only Memory) 513 as an example of a removable recording medium. Furthermore, the first server 5 includes a bus line 510 such as an address bus or a data bus for electrical connection as shown in the drawing.
  • FIG. 23 is a functional block diagram illustrating an example of a functional configuration of the image management system according to the embodiment.
  • the communication terminal 3 includes a transmission / reception unit 31, an operation input reception unit 32, a display control unit 33, and a storage / reading unit 39. These units are realized by, for example, the CPU 301 (FIG. 21).
  • the communication terminal 3 includes a storage unit 3000.
  • the storage unit 3000 is realized by the ROM 302 (FIG. 21), the RAM 303 (FIG. 21), and the like.
  • the communication terminal 3 transmits / receives data to / from an external device such as the first server 5 or the second server 7 by the transmission / reception unit 31 via the network 9.
  • the operation input receiving unit 32 is realized by, for example, the touch panel 316 (FIG. 21) and the CPU 301 (FIG. 21), and receives various operations by the user.
  • the display control unit 33 is realized by the CPU 301 and performs control to display an image or the like on the display 315 (FIG. 21).
  • the storage / reading unit 39 stores various data in the storage unit 3000.
  • the storage / reading unit 39 reads various data from the storage unit 3000.
  • the first server 5 includes a transmission / reception unit 51, an identification information allocation unit 52, a thumbnail image data generation unit 53, an extraction unit 54, and a storage / readout unit 59. These units are realized by, for example, the CPU 501 (FIG. 22).
  • the first server 5 includes a storage unit 5000, and the storage unit 5000 is realized by the ROM 502 (FIG. 22), the HD 504 (FIG. 22), and the like.
  • the following (Table 1) shows an example of an image management table.
  • the image management table shown below (Table 1) is an example in which a user ID for identifying a user, an image ID for identifying image data, and a file name of the image data are associated and managed.
  • the user ID is an example of user identification information that can uniquely identify a user.
  • the user identification information is, for example, a service use number, an employee number, a student ID number, or a national number.
  • the image ID is an example of image identification information.
  • thumbnail management table The following (Table 2) shows an example of the thumbnail management table.
  • the thumbnail management table shown in Table 2 below is an example in which thumbnail IDs for identifying thumbnail images, image IDs, and file names of thumbnail data are associated and managed.
  • the thumbnail ID is an example of thumbnail identification information.
  • the transmission / reception unit 51 is realized by the network I / F 509 (FIG. 22), the CPU 501 (FIG. 22), and the like.
  • the first server 5 transmits / receives various data to / from an external device such as the communication terminal 3 or the second server 7 via the network 9 by the transmission / reception unit 51.
  • the identification information allocation unit 52 is realized by the CPU 501.
  • the first server 5 manages data such as a Mercator image received by the transmission / reception unit 51. Specifically, the identification information assigning unit 52 assigns an image ID to the image data and assigns the image ID to the header portion of the image data.
  • the identification information assigning unit 52 assigns a thumbnail ID to the thumbnail image data generated by the thumbnail image data generating unit 53, and assigns a thumbnail ID to the header portion of the thumbnail image data.
  • the thumbnail image data generation unit 53 is realized by the CPU 501.
  • the thumbnail image data generation unit 53 generates thumbnail image data from a predetermined area in the image data based on the image data received by the transmission / reception unit 51 and the parameters included in the image data.
  • the extraction unit 54 is realized by the CPU 501.
  • the extraction unit 54 specifies image data indicated by the image ID data received by the transmission / reception unit 51, and extracts a part of the area from the specified image data.
  • the storage / reading unit 59 stores various data in the storage unit 5000.
  • the storage / reading unit 59 reads various data from the storage unit 5000.
  • the second server 7 includes a transmission / reception unit 71, a posting list creation unit 72, and a storage / reading unit 79. These units are realized by, for example, the CPU 501 (FIG. 22).
  • the second server 7 includes a storage unit 7000, and the storage unit 7000 is realized by the ROM 502 (FIG. 22), the HD 504 (FIG. 22), and the like.
  • Table 3 shows an example of the user management table.
  • the user management table shown below (Table 3) is an example in which a user ID, a password used for user authentication, a user image indicating a user image, and user personal information indicating a user name are associated and managed. .
  • the related person management table shown in the following (Table 4) is for each user ID that identifies the registrant (first user USERA in FIG. 1), the registrant's related persons (second user USERB shown in FIG. 1, etc.). This is an example in which a user ID for identifying is managed in association with each other.
  • the related person is, for example, a registrant's friend, family member or company colleague.
  • the post data management table shown below (Table 5) is an example in which the file name of thumbnail image data and the comment posted by the user are associated and managed for each user ID.
  • the transmission / reception unit 71 is realized by the network I / F 509 (FIG. 22) and the CPU 501 (FIG. 22), and transmits / receives data to / from the communication terminal 3 or the first server 5 via the network 9.
  • the posting list creation unit 72 is realized by the CPU 501 and creates the display screen 3200 shown in FIG. 18 in a list format or the like based on the posting data management table.
  • the storage / reading unit 79 stores various data such as image data in the storage unit 7000.
  • the storage / reading unit 79 reads various data such as image data from the storage unit 7000.
  • FIG. 24 is a sequence diagram illustrating an example of processing such as upload by the image management system according to the embodiment.
  • the same processes as those in FIG. 7 are described with the same reference numerals.
  • FIG. 24 shows an example in which the first user USERA is a registrant who registers an image as in FIG. 7. From the processing shown in FIG. 7 until the thumbnail image data is generated from the registration by the first user USERA. Will be explained.
  • the communication terminal 3, the first server 5, and the second server 7 perform HTTP communication using a hypertext communication protocol (HTTP).
  • HTTP hypertext communication protocol
  • the first communication terminal 3a is an HTTP client
  • the first server 5 and the second server 7 are each an HTTP server.
  • step S1 in the first communication terminal 3a, the first user USERA (FIG. 1) performs an operation of selecting the share selection image shown in FIG.
  • the 1st communication terminal 3a acquires each hemispherical image DImg1 shown to FIG. 4A and FIG. 4B from the imaging device 1 based on operation.
  • step S2 the first communication terminal 3a first generates image data DImg2 such as a Mercator image shown in FIG. 4C and an omnidirectional panoramic image shown in FIG. 8 based on the hemispherical image DImg1.
  • image data DImg2 such as a Mercator image shown in FIG. 4C and an omnidirectional panoramic image shown in FIG. 8 based on the hemispherical image DImg1.
  • the first communication terminal 3a displays the image data DImg2.
  • the first user USERA displays a location to be a thumbnail image and performs an operation of determining a predetermined region to be a thumbnail image among the omnidirectional panoramic images.
  • the first communication terminal 3a calculates the value of each parameter included in the parameter Par shown in FIG. 9 based on the determined predetermined area. Further, the first communication terminal 3a generates parameters shown in FIG. 9 based on the calculated values of the parameters.
  • step S3 the first communication terminal 3a transmits the image data DImg2 including the parameter Par to the first server 5 based on the operation by the first user USERA.
  • Transmission of the image data DImg2 from the first communication terminal 3a to the first server 5 is a registration request, that is, uploading to the first server 5. Further, at the time of uploading or in advance, the first communication terminal 3 a transmits the user ID of the first user USERA to the first server 5.
  • step S4 the first server 5 first generates image ID data DID in order to manage the image data DImg2 received in step S3.
  • the first server 5 can specify the image data DImg2 from the image ID data DID.
  • step S4 the first server 5 generates thumbnail image data DImg3 of the image data DImg2. Specifically, since the image data DImg2 includes the parameters shown in FIGS. 11 to 14, based on each parameter, the first server 5 cuts out a part from the image data DImg2 and thumbnail image data DImg3. Can be generated.
  • the thumbnail image data DImg3 is generated in a predetermined shape such as a square as shown in FIG. Specifically, the display area is determined based on the received parameter.
  • the first server 5 generates thumbnail image data DImg3 indicating a display area with a predetermined size. Accordingly, the first server 5 can generate thumbnail image data DImg3 including the range determined in FIG. 16 with the length of the long side LS. That is, the thumbnail image data DImg3 corresponding to the long side LS is an image showing the range determined in FIG.
  • the image management system 200 can perform flexible image processing such as generation of a thumbnail image or the like in a predetermined shape.
  • the first server 5 may notify the first communication terminal 3a when the registration is completed. For example, as shown in the figure, the first server 5 transmits image ID data DID and the like to the first communication terminal 3a to notify the first user USERA that the registration has been completed. In this case, the first communication terminal 3a manages the image ID by the storage unit 3000 (FIG. 23).
  • the first server 5 may generate thumbnail IDs for identifying the thumbnail image data DImg3 as shown in the above (Table 2).
  • the thumbnail ID and the image ID may be input and used as header data in the image data DImg2 or the thumbnail image data DImg3.
  • the thumbnail ID and the image ID may be transmitted as header data included in the thumbnail image data DImg3, or may be transmitted separately. Further, either one or both of the thumbnail ID and the image ID may be transmitted. In the following description, an example in which an image ID is transmitted will be described.
  • FIG. 25 is a sequence diagram illustrating an example of processing for uploading thumbnail image data to the second server.
  • the generated thumbnail image data DImg3 is used as shown in FIG.
  • FIG. 25 the same processing as in FIG. 7 is described with the same reference numerals.
  • step S5 the first server 5 transmits the thumbnail image data DImg3 and the image ID data DID to the second server 7.
  • step S5 is performed when there is a request for posting by the first user USERA.
  • the first server 5 may transmit the comments and user IDs shown in the above (Table 5) simultaneously with or before or after the image ID data DID.
  • step S6 the second server 7 manages the thumbnail image data DImg3 and the like, for example, as described above (Table 5).
  • FIG. 26 is a sequence diagram illustrating an example of a process of downloading to the second communication terminal.
  • the uploaded thumbnail image data DImg3 as shown in FIG. 25 is used as shown in FIG.
  • FIG. 26 the same processes as in FIG. 7 are described with the same reference numerals.
  • the second user USERB performs an operation such as so-called login or the like when connecting to the second server 7 or in advance. Specifically, the second user USERB inputs the user ID and password of the second user USERB. On the other hand, the second server 7 performs so-called authentication. Next, the second server 7 searches the user ID of the authenticated second user USERB from the table shown in the above (Table 4), and specifies the parties concerned.
  • the second server 7 generates, for example, a posting list screen. Specifically, the display screen 3200 shown in FIG. 18 is generated. The display screen 3200 displays data related to the first user USERA who has registered by the processing shown in FIG.
  • step S7 the second server 7 transmits a posting list screen including thumbnail image data DImg3 and image ID data DID to the second communication terminal 3b.
  • the second communication terminal 3b displays a display screen 3200 including the thumbnail image data DImg3.
  • the second user USERB looks at the display screen 3200 displayed by the second communication terminal 3b and performs an operation of selecting an image to be downloaded when there is an image to be downloaded.
  • the second user USERB selects an image uploaded by the first user USERA post by the process shown in FIG.
  • the second user USERB selects the thumbnail image indicated by the thumbnail image data DImg3 posted by the first user USERA.
  • step S8 the second communication terminal 3b transmits the image ID data DID to the first server 5.
  • the image ID data DID is data corresponding to the thumbnail image data DImg3 selected in step S7.
  • the image ID data DID may be transmitted to the first server 5 via the second server 7 or the like, for example.
  • step S9 the first server 5 transmits the image data DImg2 specified by the image ID data DID to the second communication terminal 3b. Thereby, the second user USERB can see the image indicated by the thumbnail image data DImg3 on the second communication terminal 3b.
  • the first server 5 extracts the predetermined area specified by the parameter and transmits the image data DImg2 to be transmitted to the second communication terminal 3b.
  • the first user USERA can set an image displayed first by the second communication terminal 3b, that is, a so-called initial screen (sometimes referred to as "1stView").
  • a so-called initial screen (sometimes referred to as "1stView").
  • an image specified by the parameter Par shown in FIG. 9 is displayed. That is, an initial screen when an image is downloaded can be set by the parameter Par.
  • each processing according to the present invention is executed by a computer described in a legacy programming language or an object-oriented programming language such as an assembler, C, C ++, C #, and Java (registered trademark). It may be realized by the program. That is, the program is a computer program for causing a computer such as an information processing apparatus such as an image management apparatus or an information processing apparatus included in the information processing system to execute each process.
  • the program can be stored and distributed in a computer-readable recording medium such as ROM or EEPROM (Electrically Erasable Programmable ROM).
  • a computer-readable recording medium such as ROM or EEPROM (Electrically Erasable Programmable ROM).
  • the recording medium is EPROM (Erasable Programmable ROM), flash memory, flexible disk, CD-ROM, CD-RW, DVD-ROM, DVD-RAM, DVD-RW, Blu-ray disc, SD (registered trademark) card or MO Etc.
  • the program can be distributed through a telecommunication line.
  • the image management system has two or more information processing devices connected to each other via a network or the like, and a plurality of information processing devices perform processing in a distributed, parallel or redundant manner, respectively, for all or part of various processes. May be.
  • a device different from that described above may perform processing.

Abstract

通信端末及び前記通信端末とネットワークを介して通信する画像管理装置を有する画像管理システムが、画像の一部の領域を特定するパラメータを含む画像データを受信し、前記パラメータにより特定された領域の画像から、所定の形状でサムネイル画像データを生成する。

Description

画像管理システム、画像管理方法及びプログラム
 本発明は、画像管理システム、画像管理方法及びプログラムに関する。
 近年、デジタルカメラ等で撮像された画像データは、ユーザによってインターネット上のサーバにアップロードされる。一方、他のユーザが上記画像データをサーバからダウンロードすることにより、複数のユーザが同じ画像を共有するシステムが提供されている(特許文献1参照)。
特開2011-120201号公報
 しかしながら、従来の方法では、所定の形状でサムネイル画像等を生成できない等の柔軟な画像処理ができない場合がある。
 本発明は、上記課題に鑑みてなされたものであり、所定の形状でサムネイル画像等を生成できる等の柔軟な画像処理ができる画像管理システムを提供することを目的とする。
 一態様における、通信端末及び前記通信端末とネットワークを介して通信する画像管理装置を有する画像管理システムは、画像の一部の領域を特定するパラメータを含む画像データを受信する受信部と、前記パラメータに基づいて、所定の形状でサムネイル画像データを生成するサムネイル画像データ生成部とを有する。
 本発明の各実施形態によれば、所定の形状でサムネイル画像等を生成できる等の柔軟な画像処理ができる画像管理システムを提供することができる。
実施形態に係る画像管理システムの全体構成の一例を示す図である。 実施形態に係る撮像装置の外観の一例を示す図である。 実施形態に係る撮像装置の外観の一例を示す別の図である。 実施形態に係る撮像装置の外観の一例を示す別の図である。 実施形態に係る撮像装置の使用例を示す図である。 実施形態に係る撮像装置によって撮像される画像及び生成される画像の一例を示す図である。 実施形態に係る撮像装置によって撮像される画像及び生成される画像の一例を示す別の図である。 実施形態に係る撮像装置によって撮像される画像及び生成される画像の一例を示す図である。 実施形態に係る共有選択用画像の一例を示す図である。 実施形態に係る共有選択用画像の一例を示す別の図である。 実施形態に係る共有選択用画像を選択するための一覧の一例を示す図である。 実施形態に係る撮像装置等による全体処理の一例を示す図である。 実施形態に係る撮像装置によって生成される全天球パノラマ画像の一例を示す図である。 実施形態に係る撮像装置等によって生成されるパラメータの一例を示す図である。 実施形態に係る所定領域の一例を示す図である。 実施形態に係る方向パラメータの一例を示す図である。 実施形態に係る仰角パラメータの一例を示す図である。 実施形態に係る画角パラメータの一例を示す図である。 実施形態に係る位置パラメータの一例を示す図である。 実施形態に係るパラメータによって特定される所定領域の一例を示す図である。 第2画像となる所定領域を説明する図である。 実施形態に係るサムネイル画像の決定の一例を示す図である。 実施形態に係るディスプレイの一例を示す図である。 実施形態に係るディスプレイの一例を示す別の図である。 実施形態に係るサムネイル画像の表示例を示す図である。 実施形態に係る通信端末によって表示される画像の一例を示す図である。 実施形態に係る撮像装置のハードウェア構成の一例を示すブロック図である。 実施形態に係る通信端末のハードウェア構成の一例を示すブロック図である。 実施形態に係るサーバのハードウェア構成の一例を示すブロック図である。 実施形態に係る画像管理システム等の機能構成の一例を示す機能ブロック図である。 実施形態に係る画像管理システムによるアップロード等の処理の一例を示すシーケンス図である。 第2サーバへサムネイル画像データをアップロードする処理の一例を示すシーケンス図である。 第2通信端末へダウンロードする処理の一例を示すシーケンス図である。
以下、本発明の実施形態について添付の図面を参照しながら説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付し、重複した説明を省く。
 <<実施形態の概略>>
 はじめに、本実施形態に係る画像管理システムの全体構成の一例について説明する。
 図1は、実施形態に係る画像管理システムの全体構成の一例を示す図である。図示するように、画像管理システム200は、第1通信端末3aと、画像管理装置の例である第1サーバ5とを有する。第1通信端末3aと、第1サーバ5とは、ネットワーク9を介して接続される。また、ネットワーク9は、第1基地局9a及び第2基地局9b等の基地局によって構築される。
 さらに、画像管理システム200には、第2通信端末3b及び第2サーバ7とがそれぞれネットワーク9を介して接続される。さらにまた、第1通信端末3aには、撮像装置1が接続される。なお、画像管理システム200には、図示される以外の装置が更に接続されてもよい。また、以下の説明では、複数の通信端末のうち、任意の通信端末を指す場合には、「通信端末3」と示す。
 図1では、第1通信端末3a及び撮像装置1を第1ユーザUSERAが操作するとし、第2通信端末3bを第2ユーザUSERBが操作するとする。
 撮像装置1は、全天球パノラマ画像を撮像するデジタルカメラである。なお、撮像装置1は、全天球パノラマ画像以外の画像を撮像する一般的なデジタルカメラでもよい。さらに、撮像装置1と、第1通信端末3aとは、一体であってもよい。以下、撮像装置1が全天球パノラマ画像を撮像するデジタルカメラである例で説明する。
 通信端末3は、スマートフォン、タブレット端末、ノート型パソコン、デスクトップ型パソコン又はPDA(Personal Data Assistance)等のコンピュータである。さらに、第1サーバ5及び第2サーバ7は、それぞれサーバ等のコンピュータである。
 また、撮像装置1は、例えば、NFC(Near Field Communication)規格、BlueTooth(登録商標)、Wi-Fi(Wireless Fidelity)又はこれらの組み合わせ等による短距離無線技術によって、通信端末3と通信することができる。さらに、通信端末3は、ネットワーク9を介して、第1サーバ5及び第2サーバ7と通信することができる。このネットワーク9は、例えば、第1基地局9a及び第2基地局9bを含み、3G(3rd Generation)、WiMAX(Worldwide Interoperability for Microwave Access)若しくはLTE(Long Term Evolution)等の無線通信網、若しくは、インターネット、又はこれらの組み合わせによって構築される。なお、撮像装置1と通信端末3との間及び通信端末3とネットワーク9との間には、それぞれ有線による通信が行われてもよい。
 図2A乃至図2Cは、実施形態に係る撮像装置の外観の一例を示す図である。なお、図2Aは、撮像装置1の左側面図であり、図2Bは、正面図、図2Cは、平面図をそれぞれ示す。
 図2Aに図示するように、撮像装置1は、人間が片手で持つことができる大きさである。また、図2A、図2B及び図2Cにそれぞれ示すように、撮像装置1の上部には、正面側(前側)に撮像素子103aが設けられ、背面側(後側)に撮像素子103bが設けられる。また、図2Bに図示するように、撮像装置1の正面側には、シャッターボタン等の操作部115が設けられる。
 なお、以下の説明では、図示するような撮像素子103aの光軸AXa及び撮像素子103bの光軸AXbとする。
 図3は、実施形態に係る撮像装置の使用例を示す図である。図3に図示するように、第1ユーザUSERAが、撮像装置1を手に持ち、第1ユーザUSERAが操作部115(図2)を押すと、撮像装置1は、第1ユーザUSERAの周辺の被写体を撮像する。この場合には、図2に示す撮像素子103a及び撮像素子103bによってそれぞれ撮像が行われるため、撮像装置1は、2つの半球画像をそれぞれ撮像することができる。以下の説明では、図3に示すように、第1ユーザUSERAが撮像を行った位置を原点とし、撮像される画像は、第1ユーザUSERAの水平方向360°を示すとする。
 図4A乃至図4Cは、実施形態に係る撮像装置によって撮像される画像及び生成される画像の一例を示す図である。具体的には、図4Aは、正面側(前側)に設けられる撮像素子103aによって撮像される半球画像の一例を示す。また、図4Bは、背面側(後側)に設けられる撮像素子103bによって撮像される半球画像の一例を示す。さらに、図4Cは、図4A及び図4Bに示す画像をメルカトル図法等によって合成して生成される画像(以下「メルカトル画像」という。)の一例を示す。以下、図4Cに示すメルカトル画像を例に説明する。
 撮像素子103aは、魚眼レンズ等の広角な範囲を撮像するレンズを用いる。そのため、図4Aで図示するように、撮像素子103aによって撮像される半球画像は、歪曲収差等によって湾曲した画像となる。同様に、撮像素子103bも魚眼レンズ等の広角な範囲を撮像するレンズを用いる。そのため、図4Aと同様に、図4Bで図示するように、撮像素子103bによって撮像される半球画像は、歪曲収差等によって湾曲した画像となる。そして、撮像素子103aによって撮像される半球画像及び撮像素子103bによって撮像される半球画像は、撮像装置1によって合成され、図4Cに示すメルカトル画像が生成される。
 図5Aおよび図5Bは、実施形態に係る共有選択用画像の一例を示す図である。図5Bに示す画像は、ユーザが画像を選択するのに使用される画像(以下「共有選択用画像」という。)の一例である。なお、共有選択用画像は、撮像装置1(図1)から第1通信端末3a(図1)に送信される画像である。共有選択用画像は、メルカトル画像から生成される。
 具体的には、図5Aに示すように、図4Cに示すメルカトル画像の一部の範囲AR1が選択されるとする。この場合には、図5Bに示す画像は、図5Aが示す画像のうち、範囲AR1を示す共有選択用画像の例である。
 図6は、実施形態に係る共有選択用画像を選択するための一覧の一例を示す図である。撮像装置1(図1)から第1通信端末3aに図5Bに示す共有選択用画像CEが送信されると、第1通信端末3aは、例えば、他の共有選択用画像と、共有選択用画像CEとを一覧にして表示する。一覧は、例えば、図6に示す画像リストSL等の形式である。
 図6は、画像リストSLが第1通信端末3aが有するディスプレイ315上に表示される例を示す。この例では、図5Bに示す共有選択用画像CEは、画像リストSLが示す画像の1つとして表示される。また、図示するように、共有選択用画像CEに係る情報が、画像リストSLに表示され、この例では、共有選択用画像CEを撮像した日時である「2011年9月20日 11:21」が、表示されている。
 <<全体処理例>>
 図7は、実施形態に係る撮像装置等による全体処理の一例を示す図である。以下、図6に示す画像リストSLから共有選択用画像CEが選択された場合に、撮像装置等の画像管理システムが有する装置及び接続される装置が行う全体処理を例に説明する。
 ステップS1では、画像リストSL上で共有選択用画像CEが選択されると、第1通信端末3aは、撮像装置1から元画像を取得する。なお、元画像は、例えば、図4A及び図4Bに示すそれぞれの半球画像DImg1である。
 ステップS2では、第1通信端末3aは、まず、全天球パノラマ画像を生成する。具体的には、第1通信端末3aは、半球画像DImg1から生成される図4Cに示すメルカトル画像を生成する。次に、メルカトル画像に基づいて、第1通信端末3aは、OpenGL ES(登録商標)(Open Graphics Library for for Embedded Systems)等によって全天球パノラマ画像を生成する。OpenGL ES(登録商標)は、2次元及び3次元のデータを視覚化するのに使用されるグラフィックライブラリの例である。この例では、図4Cに示すメルカトル画像が立体球に貼り付けられると、全天球パノラマ画像が、生成される。
 図8は、実施形態に係る撮像装置によって生成される全天球パノラマ画像の一例を示す図である。図8は、図4Cに示すメルカトル画像に基づいて生成される全天球パノラマ画像の一例である。なお、全天球パノラマ画像は、動画又は静止画である。
 次に、ステップS2(図7)では、第1通信端末3aは、画像の一部の領域を特定するパラメータを生成する。パラメータは、例えば、「Photo Sphere(登録商標) XMP Metadata」の形式で生成される。また、「Photo Sphere(登録商標) XMP Metadata」の形式でパラメータが生成されると、パラメータは、規格で定まるパラメータであるため、多くのアプリケーションソフト等で使用することができる。
 図9は、パラメータの一例を示す図である。以下、通信端末がパラメータを生成する例で説明する。パラメータParは、図示するように、例えば、方向を示す方向パラメータHPar、仰角を示す仰角パラメータPPar、画角を示す画角パラメータFOVPar及びカメラ位置を示す位置パラメータDPar等から構成される。パラメータParが有する各パラメータがそれぞれ定まると、全天球パノラマ画像における所定の領域が特定できる。以下、特定される領域を「所定領域」といい、全天球パノラマ画像における位置等を説明する。
 図10は、実施形態に係る所定領域の一例を示す図である。図10は、全天球パノラマ画像を3次元の立体球CSとした場合の例を示す。なお、図10は、撮像素子103a(図1)に対する正面図、撮像素子103aを横から見た側面図及び撮像素子103aを上から見た平面図を示す。さらに、以下の説明では、撮像素子103aの光軸AXa、即ち、奥行き方向を「Z軸」といい、Z軸に対して左右方向、即ち、水平方向を「X軸」といい、Z軸に対して上下方向、即ち、垂直方向を「Y軸」という。
 また、図10では、仮想カメラICは、立体球CSとして表示されるパノラマ画像に対するユーザの視点に相当する。即ち、全天球パノラマ画像を立体球CSとすると、図示するように、仮想カメラICは、立体球CSの中心に位置する。この位置で、仮想カメラICが上下(Pitch (PPar))、左右(Yaw (HPar))又は光軸中心(Roll)に回転すると、所定領域Tが動く。また、仮想カメラICがX軸、Y軸又はZ軸のいずれかの方向に平行移動すると、所定領域Tが動く。所定領域Tが動くと、全天球パノラマ画像の中で表示される箇所が変化するので、所定領域Tに基づいて生成される画像が変化する。
 図11は、実施形態に係る方向パラメータの一例を示す図である。なお、図11は、図10に示す図のうち、平面図に相当する図である。図示するように、方向パラメータHParは、左右回転量、いわゆるYaw方向に係る回転量を示すパラメータである。例えば、撮像素子103aの光軸AXaと一致する角度を方向パラメータHParの「0.0°」とし、原点とする。即ち、例えば、方向パラメータHParの値が大きくなると、図10のYaw方向に仮想カメラICが回転する。これに伴って、所定領域TもYaw方向に回転する。したがって、方向パラメータHParが設定されると、仮想カメラICの「方向」が特定できる。
 図12は、実施形態に係る仰角パラメータの一例を示す図である。なお、図12は、図10に示す図のうち、側面図に相当する図である。図示するように、仰角パラメータPParは、上下回転量、いわゆるPitch方向に係る回転量を示すパラメータである。例えば、撮像素子103aの光軸AXaと一致する角度を仰角パラメータPParの「0.0°」とし、原点とする。即ち、例えば、仰角パラメータPParの値が大きくなると、図10のPitch方向に仮想カメラICが回転する。これに伴って、所定領域TもPitch方向に回転する。したがって、仰角パラメータPParが設定されると、仮想カメラICの「仰角」が特定できる。
 図13は、実施形態に係る画角パラメータの一例を示す図である。なお、図13は、図10に示す図のうち、平面図に相当する図である。図示するように、画角パラメータFOVParは、画像に表示される範囲に相当する所定領域を示すパラメータである。例えば、撮像素子103aの光軸AXaを中心に、左右方向に均等の画角が設定されるとする。即ち、例えば、画角パラメータFOVParの値が大きくなると、図10に示す画角Angが広くなり、所定領域Tとなる範囲が広くなる。したがって、画角パラメータFOVParが設定されると、仮想カメラICの「画角」が特定できる。
 図14は、実施形態に係る位置パラメータの一例を示す図である。なお、図14は、図10に示す図のうち、平面図に相当する図である。図示するように、位置パラメータDParは、仮想カメラICの位置を示すパラメータである。例えば、立体球CSの中心を位置パラメータDParの「0.0」とし、原点とする。また、立体球CSの半径を「1.0」とする。位置パラメータDParは、原点からの距離を示す。即ち、例えば、位置パラメータDParの値が大きくなると、仮想カメラICは、Z軸上を動き、図14に「0.0」で示す原点から遠い位置に動く。したがって、位置パラメータDParが設定されると、仮想カメラICの「位置」が特定できる。
 なお、各パラメータは、撮像素子103aの光軸AXaを原点としなくともよい。各パラメータにおける原点は、任意に選択されてよい。
 図15Aおよび図15Bは、実施形態に係るパラメータによって特定される所定領域の一例を示す図である。第1通信端末は、全天球パノラマ画像のうち、ある任意の点が決定されると、その点を示す仮想カメラの方向、仰角、画角及び位置をそれぞれ計算することができる。全天球パノラマ画像のうち、所定領域Tとなる箇所が、図15Bで図示するように、第1通信端末3aが有するディスプレイ315上に画像として切り出されて表示されるとする。また、図15Bで第1通信端末3aが表示する画像を「第1画像P1」という。なお、図15Bは、ユーザのコメントを入力するGUI(Graphical User Interface)であるコメント表示領域3130が表示される例を示す。
 例えば、第1ユーザUSERA(図1)は、サムネイル画像として表示させたい範囲を第1通信端末3a上で操作して選択する。具体的には、第1通信端末3aがタッチパネルを有する場合には、第1ユーザUSERAは、指でディスプレイ315上を触って操作する。次に、第1通信端末3aは、タッチパネルによって検出した指の動作に応じて所定領域Tを動かし、動いた後の所定領域Tとなる箇所をディスプレイ315上に画像として切り出して表示する。この場合には、第1通信端末3aは、第1画像P1から表示する画像を変更する。なお、第1通信端末3aがPC等の情報処理装置である場合には、タッチパネルではなく、マウス等の入力装置によって、第1ユーザUSERAは、操作を行ってもよい。
 図16は、実施形態に係るサムネイル画像の決定の一例を示す図である。例えば、図示する画像(以下「第2画像P2」という。)をサムネイル画像にする場合を例に説明する。この場合には、第1ユーザUSERAによる操作によって、第2画像P2が表示されると、全天球パノラマ画像のうち、第2画像P2が示す領域をサムネイル画像とすることが決定される。次に、第1通信端末3aは、第2画像P2となる所定領域T(図15A)を特定する各パラメータの値をそれぞれ算出する。即ち、第1通信端末3aは、第2画像P2となる範囲を特定する「方向」及び「仰角」等の値をそれぞれ算出する。次に、第1通信端末3aは、算出した値を組み込んで図9に示すパラメータを生成する。
 図7に戻り、ステップS3では、第1通信端末3aは、画像データDImg2を第1サーバ5に送信する。画像データDImg2は、図4Cに示すメルカトル画像を示すデータとされる。また、画像データDImg2には、ステップS2で生成される図9に示すパラメータParが含まれる。
 ステップS4では、第1サーバ5は、サムネイル画像データDImg3を生成する。ステップS3で送信される画像データDImg2には、パラメータParが含まれるため、第1サーバ5は、サムネイル画像となる領域をメルカトル画像から切り出して生成することができる。なお、第1サーバ5は、サムネイル画像の形状を所定の形状で生成することができる。例えば、第1サーバ5は、サムネイル画像の形状を正方形にして生成することができる。以下、サムネイル画像の形状を正方形とする例で説明する。
 第1サーバ5は、サムネイル画像の形状を、例えば、通信端末が有するディスプレイのサイズに基づいて決定する。
 図17Aおよび図17Bは、実施形態に係るディスプレイの一例を示す図である。例えば、サムネイル画像は、第1通信端末3aが有するディスプレイ315のサイズに基づいて形状が決定される。具体的には、第1サーバ5は、サムネイル画像の一辺をディスプレイ315の長手方向の長さ(以下「長辺LS」という。)等に基づいて決定する。サムネイル画像が長辺LS等に基づいて生成されると、サムネイル画像には、第2画像P2(図16)が示す範囲が含まれる。即ち、第1サーバ5は、第1ユーザが決定した範囲が含まれるように、サムネイル画像を生成することができる。
 なお、第1通信端末3aが有するディスプレイ315を構成する横方向及び縦方向のうち、長辺LSは、画素数が多い方である。例えば、図17Aに示すような向きの第1通信端末3aでは、長辺LSは、図面の上下方向となる。具体的には、ディスプレイ315の上下方向が960pixel、左右方向が640pixelであるとすると、長辺LSは、960pixelである上下方向の辺である。したがって、例えば、図17Bに示すような向きで第1通信端末3aを使用する場合には、長辺LSは、図面の左右方向となる。
 図7に戻り、ステップS4では、第1サーバ5は、サムネイル画像データDImg3が示す画像データDImg2を特定する画像IDデータDID等を生成する。この場合には、第1サーバ5は、画像データDImg2、サムネイル画像データDImg3及び画像IDデータDIDを関連付けして管理する。つまり、画像IDデータDIDが示すIDが特定されると、第1サーバ5は、記憶する複数の画像データDImg2のうち、1つの画像データDImg2を特定できる。
 ステップS5では、第1サーバ5は、第2サーバ7に、サムネイル画像データDImg3及び画像IDデータDIDを送信する。
 ステップS6では、第2サーバ7は、ステップS6で受信したサムネイル画像データDImg3及び画像IDデータDIDを管理する。
 そして、第2ユーザUSERBによる操作によって、第2通信端末3bが第2サーバ7に接続すると、ステップS7では、第2サーバ7は、第2通信端末3bにサムネイル画像データDImg3及び画像IDデータDIDを送信する。次に、第2通信端末3bは、受信したサムネイル画像データDImg3を表示する。
 図18は、実施形態に係るサムネイル画像の表示例を示す図である。例えば、サムネイル画像は、表示画面3200等のように表示される。具体的には、図18では、表示画面3200は、第1ユーザUSERA(図1)を示すユーザ画像3210、ユーザ名3220、サムネイル画像3230及び第1ユーザUSERAによるコメントを示すコメント3240等を有する。なお、第2通信端末3bに他のサムネイル画像データ等が更に送信され、表示画面3200が複数ある、いわゆる一覧形式で、第2通信端末3bは、表示を行ってもよい。さらに、サムネイル画像が表示される形式は、図18に示す形式に限られず、例えば、複数のサムネイル画像3230が並ぶ形式等でもよい。
 図7に戻り、次に、第2ユーザUSERBが複数のサムネイル画像から1つのサムネイル画像を選択したとする。この場合には、ステップS8では、第2通信端末3bは、選択されたサムネイル画像の画像IDデータDIDを第1サーバ5に送信する。これは、第1サーバ5に対して、サムネイル画像が示すメルカトル画像等の画像データを第2通信端末3bが要求することになる。
 したがって、ステップS9では、第1サーバ5は、第2通信端末3bに、画像データDImg2を送信する。第2通信端末3bは、受信した画像データDImg2の画像から、画像データDImg2に含まれるパラメータに基づいて特定される範囲を切り出して画像を表示する。
 図19は、実施形態に係る通信端末によって表示される画像の一例を示す図である。図示するように、第2通信端末3bは、受信する画像データDImg2(図7)に基づいて、第2通信端末3bが有するディスプレイ315上に画像を表示する。
 <<ハードウェア構成例>>
 以下、実施形態に係る各装置のハードウェア構成の一例をそれぞれ説明する。
 図20は、実施形態に係る撮像装置のハードウェア構成の一例を示すブロック図である。以下、撮像装置1は、図2に示すように、2つの撮像素子を有し、いわゆる全方位を撮像する撮像装置1を例として説明する。なお、撮像装置1は、3つ以上の撮像素子を有する構成でもよい。また、撮像装置1は、撮像専用の装置に限られず、例えば、スマートフォン等と一体であったり、スマートフォン等の他の装置に取り付けられる装置等でもよい。
 図示するように、撮像装置1は、撮像ユニット101、画像処理ユニット104、撮像制御ユニット105、CPU(Central Processing Unit)111及びROM(Read Only Memory)112等を有する。また、撮像装置1は、SRAM(Static Random Access Memory)113、DRAM(Dynamic Random Access Memory)114等を有する。さらに、撮像装置1は、操作部115、ネットワークI/F116、通信部117及びアンテナ117a等を有する。
 このうち、撮像ユニット101は、各半球画像を撮像するため、180°以上の画角を有する広角レンズ(いわゆる魚眼レンズ)102a及び102bを有する。また、撮像ユニット101は、各広角レンズに対応させて設けられる2つの撮像素子103a及び103bをそれぞれ有する。さらに、撮像素子103a及び103bは、広角レンズを通して集光された光を電気信号に変換して出力する画像センサである。具体的には、画像センサは、CMOS(Complementary Metal Oxide Semiconductor)センサ又はCCD(Charge Coupled Device)センサ等である。
 また、撮像素子103a及び103bは、画像センサの水平同期信号、垂直同期信号及び画素クロック等を生成するタイミング信号生成回路を有する。さらに、撮像素子103a及び103bは、これらの撮像素子の動作に必要な種々のコマンド及びパラメータ等が設定されるレジスタ群等を有する。
 撮像ユニット101が有する撮像素子103a及び103bは、それぞれ画像処理ユニット104とパラレルI/Fバス等で接続される。一方、撮像素子103a及び103bは、撮像制御ユニット105とは別に、シリアルI/Fバス(I2C(登録商標)(Inter-Integrated Circuit)バス等)で接続される。また、画像処理ユニット104及び撮像制御ユニット105は、バス110を介してCPU111とそれぞれ接続される。さらに、バス110には、ROM112、SRAM113、DRAM114、操作部115、ネットワークI/F116、通信部117及び電子コンパス118等が接続される。
 画像処理ユニット104は、撮像素子103a及び103bからそれぞれ出力される画像データをパラレルI/Fバスを介して入力する。次に、画像処理ユニット104は、それぞれの画像データに対して所定の処理を行う。続いて、画像処理ユニット104は、これらの処理が行われた画像データを合成処理して、図4Cに示すメルカトル画像データ等を生成する。
 例えば、撮像制御ユニット105をマスタデバイスとし、撮像素子103a及び103bをスレーブデバイスとすると、撮像制御ユニット105は、I2C(登録商標)バスを利用して、撮像素子103a及び103bが有するレジスタ群にコマンド等を設定する。また、必要なコマンド等は、CPU111から入力される。さらに、撮像制御ユニット105は、I2Cバスを利用して、撮像素子103a及び103bが有するレジスタ群のステータスデータ等をCPU111に出力する。
 また、撮像制御ユニット105は、操作部115が有するシャッターボタンが押下されたタイミングで、撮像素子103a及び103bに、画像データの出力を指示する。なお、撮像装置は、ディスプレイによるプレビュー表示機能又は動画表示に対応する機能を有してもよい。この場合には、撮像素子103a及び103bから出力されるそれぞれの信号に対応する画像が、所定のフレームレートの動画像として表示される。
 次に、撮像制御ユニット105は、CPU111と、撮像素子103a及び103bが出力する画像データの出力タイミングの同期をとる同期制御手段としても機能する。なお、撮像装置は、表示部を有してもよい。
 CPU111は、撮像装置1の全体の動作を制御する。また、ROM112は、CPU111が実行する種々のプログラムを記憶する。さらに、SRAM113及びDRAM114は、いわゆるワークメモリであり、CPU111が実行するプログラム及び処理途中のデータ等を記憶する。特に、DRAM114は、画像処理ユニット104による処理途中の画像データ及び処理済みのメルカトル画像のデータを記憶する。
 操作部115は、種々の操作ボタン、電源スイッチ、シャッターボタン、表示と操作の機能を兼ねるタッチパネル又はこれらの組み合わせ等である。例えば、ユーザは、操作ボタンを操作することで、種々の撮像モード及び撮像条件等を撮像装置1に入力する。
 ネットワークI/F116は、SD(登録商標)カード等のメディア又はPC等の外部装置とのインターフェース回路(USBI/F等)である。また、ネットワークI/F116は、無線又は有線のネットワークインタフェースであってもよい。さらに、DRAM114に記憶されるメルカトル画像等のデータは、ネットワークI/F116を介して、メディアに記憶されたり、通信端末3等の外部装置に送信される。
 通信部117は、撮像装置1が有するアンテナ117aを介して通信を行う。例えば、通信部117は、Wi-Fi(登録商標)(wireless fidelity)又はNFC(Near Field Communication)等の短距離無線技術によって、通信端末3等の外部装置と通信を行う。この通信部117によって、撮像装置1は、メルカトル画像等のデータを通信端末3等の外部装置に送信できる。
 電子コンパス118は、地球の磁気から撮像装置1の方位及び傾き(Roll回転量)を算出し、方位・傾き情報を出力する。この方位・傾き情報は、Exif(Exchangeable image file format)等に沿ったメタデータの一例であり、撮像画像の補正等に利用される。なお、メタデータには、画像データのサムネイル、画像の撮像日時及び画像データのデータ容量等の各データが含まれてもよい。
 図21は、実施形態に係る通信端末のハードウェア構成の一例を示すブロック図である。なお、図21は、通信端末がスマートフォンである場合の例を示す。
 図示するように、通信端末3は、通信端末3全体の動作を制御するCPU301、基本入出力プログラムを記憶するROM302、CPU301のワークエリアとして使用されるRAM(Random Access Memory)303を有する。また、通信端末3は、EEPROM(Electrically Erasable and Programmable ROM)304を有する。通信端末3は、CPU301による制御に基づいて、被写体を撮像し、画像データを生成する撮像素子の例であるCMOSセンサ305、地磁気を検出する電子磁気コンパス、ジャイロコンパス並びに加速度センサ等の各種加速度・方位センサ306及びフラッシュメモリ等の記録メディア307に対するデータの読み出し並びに書き込み(記憶)を制御するメディアドライブ308を有する。記録メディア307は、メディアドライブ308に着脱自在とされる。
 なお、EEPROM304には、CPU301が実行するオペレーティングシステム(OS)、その他のプログラム及び種々データが記憶される。また、CMOSセンサ305は、CCDセンサでもよい。
 さらに、通信端末3は、音声を音声信号に変換する音声入力部311、音声信号を音声に変換する音声出力部312、アンテナ313a、このアンテナ313aを利用して無線通信により、最寄りの基地局となる第1基地局9a(図1)等と通信を行う通信部313を有する。また、通信端末3は、GPS(Global Positioning Systems)衛星又は屋内GPSとしてのIMES(Indoor MEssaging System)によって通信端末3の位置情報(緯度、経度及び高度等)を含むGPS信号を受信するGPS受信部314を有する。
 さらにまた、通信端末3は、被写体の画像又は各種アイコン等を表示する液晶又は有機EL等のディスプレイ315、このディスプレイ315上に載せられる感圧式又は静電式のタッチパネル316を有する。タッチパネル316は、指又はタッチペン等によるタッチによってディスプレイ315上におけるタッチ位置を検出する。また、通信端末3は、上記各部を電気的に接続するため、アドレスバス及びデータバス等のバスライン310を有する。なお、音声入力部311には、音声を入力するマイクが含まれ、音声出力部312には、音声を出力するスピーカが含まれる。
 図22は、実施形態に係るサーバのハードウェア構成の一例を示すブロック図である。なお、図22は、画像管理装置の例である第1サーバ5及び第2サーバ7等のハードウェア構成の一例を示す。以下、第1サーバ5を例に説明する。
 第1サーバ5は、第1サーバ5全体の動作を制御するCPU501、IPL等のCPU501の駆動に用いられるプログラムを記憶したROM502及びCPU501のワークエリアとして使用されるRAM503等を有する。また、第1サーバ5は、プログラム等の各種データを記憶するHD504及びCPU501による制御に基づいてHD504に対する各種データの読み出し又は書き込みを制御するHDD(Hard Disk Drive)505等を有する。さらに、第1サーバ5は、フラッシュメモリ等の記録メディア506に対するデータの読み出し及び書き込み(記憶)を制御するメディアドライブ507等を有する。さらにまた、第1サーバ5は、カーソル、メニュー、ウィンドウ、文字若しくは画像等の各種情報を表示するディスプレイ508等の出力装置及びネットワーク9(図1)を利用してデータ通信するネットワークI/F509等を有する。
 また、第1サーバ5は、文字、数値若しくは各種指示等を入力するための複数のキーを持つキーボード511及び各種指示の選択、実行、処理対象の選択又はカーソルの移動等の操作を行うマウス512等の入力装置を有する。さらに、第1サーバ5は、着脱可能な記録媒体の一例としてのCD-ROM(Compact Disc Read Only Memory)513に対する各種データの読み出し又は書き込みを制御するCD-ROMドライブ514等を有する。さらにまた、第1サーバ5は、上記各構成要素を図示するように、電気的に接続するため、アドレスバス又はデータバス等のバスライン510を有する。
 <<機能構成例>>
 図23は、実施形態に係る画像管理システムの機能構成の一例を示す機能ブロック図である。図示するように、通信端末3は、送受信部31、操作入力受付部32、表示制御部33及び記憶・読出部39を含む。これら各部は、例えば、CPU301(図21)等によって実現される。また、通信端末3は、記憶部3000を有し、記憶部3000は、ROM302(図21)及びRAM303(図21)等によって実現される。
 通信端末3は、ネットワーク9を介して、送受信部31によって、第1サーバ5又は第2サーバ7等の外部装置とデータを送受信する。
 操作入力受付部32は、例えば、タッチパネル316(図21)及びCPU301(図21)によって実現され、ユーザによる各種操作を受け付ける。
 表示制御部33は、CPU301によって実現され、ディスプレイ315(図21)に画像等を表示する制御を行う。
 記憶・読出部39は、記憶部3000に各種データを記憶する。また、記憶・読出部39は、記憶部3000から各種データを読み出す。
 第1サーバ5は、送受信部51、識別情報割当部52、サムネイル画像データ生成部53、抽出部54及び記憶・読出部59を含む。これら各部は、例えば、CPU501(図22)等によって実現される。また、第1サーバ5は、記憶部5000を有し、記憶部5000は、ROM502(図22)及びHD504(図22)等によって実現される。
 (画像管理テーブル例)
 下記(表1)は、画像管理テーブルの一例を示す。下記(表1)に示す画像管理テーブルでは、ユーザを識別するためのユーザID、画像データを識別するための画像ID及び画像データのファイル名が関連付けされて管理される例である。なお、ユーザIDは、ユーザを一意に識別できるユーザ識別情報の一例である。そして、ユーザ識別情報は、例えば、サービス利用番号、従業員番号、学籍番号又は国民番号等である。また、画像IDは、画像識別情報の一例である。
Figure JPOXMLDOC01-appb-T000001
 (サムネイル管理テーブル例)
 下記(表2)は、サムネイル管理テーブルの一例を示す。下記(表2)に示すサムネイル管理テーブルでは、サムネイル画像を識別するためのサムネイルID、画像ID及びサムネイルデータのファイル名が関連付けされて管理される例である。なお、サムネイルIDは、サムネイル識別情報の一例である。
Figure JPOXMLDOC01-appb-T000002
 図23に戻り、送受信部51は、ネットワークI/F509(図22)及びCPU501(図22)等によって実現される。送受信部51によって、第1サーバ5は、ネットワーク9を介して通信端末3又は第2サーバ7等の外部装置と各種データを送受信する。
 識別情報割当部52は、CPU501によって実現される。第1サーバ5は、送受信部51によって受信されるメルカトル画像等のデータを管理する。具体的には、識別情報割当部52は、画像データに対して画像IDを割り当て、この画像データのヘッダ部分等に画像IDを付与する。また、識別情報割当部52は、サムネイル画像データ生成部53によって生成されるサムネイル画像データに対してサムネイルIDを割り当て、このサムネイル画像データのヘッダ部分等にサムネイルIDを付与する。
 サムネイル画像データ生成部53は、CPU501によって実現される。サムネイル画像データ生成部53は、送受信部51によって受信される画像データ及び画像データに含まれるパラメータに基づいて、画像データにおける所定領域からサムネイル画像データを生成する。
 抽出部54は、CPU501によって実現される。抽出部54は、送受信部51が受信する画像IDデータ等が示す画像データを特定し、特定される画像データから一部の領域を抽出する。
 記憶・読出部59は、記憶部5000に各種データを記憶する。また、記憶・読出部59は、記憶部5000から各種データを読み出す。
 第2サーバ7は、送受信部71、投稿一覧作成部72及び記憶・読出部79を含む。これら各部は、例えば、CPU501(図22)等によって実現される。また、第2サーバ7は、記憶部7000を有し、記憶部7000は、ROM502(図22)及びHD504(図22)等によって実現される。
 (ユーザ管理テーブル例)
 下記(表3)は、ユーザ管理テーブルの一例を示す。下記(表3)に示すユーザ管理テーブルでは、ユーザID、ユーザ認証に用いられるパスワード、ユーザの画像を示すユーザ画像及びユーザの氏名等を示すユーザ個人情報が関連付されて管理される例である。
Figure JPOXMLDOC01-appb-T000003
 (関係者管理テーブル例)
 下記(表4)は、関係者管理テーブルの一例を示す。下記(表4)に示す関係者管理テーブルは、登録者(図1では、第1ユーザUSERA)を識別するユーザIDごとに、この登録者の関係者(図1に示す第2ユーザUSERB等)を識別するユーザIDが関連付けて管理される例である。なお、関係者は、例えば、登録者の友達、家族又は会社の同僚等である。
Figure JPOXMLDOC01-appb-T000004
 (投稿データ管理テーブル例)
 下記(表5)は、投稿データ管理テーブルの一例を示す。下記(表5)に示す投稿データ管理テーブルでは、ユーザIDごとに、サムネイル画像データのファイル名及びユーザによって投稿されるコメントが関連付けされて管理される例である。
Figure JPOXMLDOC01-appb-T000005
 送受信部71は、ネットワークI/F509(図22)及びCPU501(図22)によって実現され、ネットワーク9を介して通信端末3又は第1サーバ5とデータを送受信する。
 投稿一覧作成部72は、CPU501によって実現され、投稿データ管理テーブルに基づいて、図18に示す表示画面3200を一覧形式等にして作成する。
 記憶・読出部79は、記憶部7000に画像データ等の各種データを記憶する。また、記憶・読出部79は、記憶部7000から画像データ等の各種データを読み出す。
 <<アップロード例>>
 図24は、実施形態に係る画像管理システムによるアップロード等の処理の一例を示すシーケンス図である。なお、図24では、図7と同一の処理は、同一の符号を付して説明する。また、図24では、図7と同様に第1ユーザUSERAが画像を登録する登録者である例で、図7に示す処理のうち、第1ユーザUSERAによる登録からサムネイル画像データが生成されるまでを説明する。
 例えば、通信端末3、第1サーバ5及び第2サーバ7は、ハイパーテキスト通信プロトコル(HTTP)によってHTTP通信を行う。この例では、第1通信端末3aは、HTTPクライアントとなり、第1サーバ5及び第2サーバ7は、それぞれHTTPサーバとなる。
 ステップS1では、第1通信端末3aにおいて、第1ユーザUSERA(図1)により、図6等に示す共有選択用画像を選択する操作が行われる。次に、第1通信端末3aは、操作に基づいて、図4A及び図4Bに示すそれぞれの半球画像DImg1を撮像装置1から取得する。
 ステップS2では、第1通信端末3aは、まず、半球画像DImg1に基づいて、図4Cに示すメルカトル画像及び図8に示す全天球パノラマ画像等の画像データDImg2を生成する。
 次に、第1通信端末3aは、画像データDImg2を表示する。これに対して、第1ユーザUSERAは、図16等のように、サムネイル画像となる箇所を表示して、全天球パノラマ画像のうち、サムネイル画像となる所定領域を決定する操作を行う。
 続いて、第1通信端末3aは、決定された所定領域に基づいて、図9に示すパラメータParが有する各パラメータの値をそれぞれ計算する。さらに、第1通信端末3aは、計算された各パラメータの値に基づいて図9に示すパラメータを生成する。
 ステップS3では、第1ユーザUSERAによる操作に基づいて、第1通信端末3aは、パラメータParを含む画像データDImg2を第1サーバ5に送信する。第1通信端末3aから画像データDImg2を第1サーバ5に送信することが、登録要求、即ち、第1サーバ5へのアップロードとなる。また、アップロードの際、又は事前に、第1通信端末3aは、第1ユーザUSERAのユーザIDを第1サーバ5に送信する。
 ステップS4では、第1サーバ5は、まず、ステップS3で受信する画像データDImg2を管理するため、画像IDデータDIDを生成する。このように、画像IDデータDIDが生成され、上記(表1)に示すように画像データDImg2に関連付けされると、第1サーバ5は、画像IDデータDIDから画像データDImg2が特定できる。
 次に、ステップS4では、第1サーバ5は、画像データDImg2のサムネイル画像データDImg3をそれぞれ生成する。具体的には、画像データDImg2には、図11乃至図14に示す各パラメータが含まれるため、各パラメータに基づいて、第1サーバ5は、画像データDImg2から一部を切り出してサムネイル画像データDImg3を生成できる。
 また、サムネイル画像データDImg3は、図18等に示すように、正方形等の所定の形状で生成される。具体的には、受信するパラメータに基づいて表示領域が定まる。次に、第1サーバ5は、予め決めたサイズで表示領域を示すサムネイル画像データDImg3を生成する。これによって、第1サーバ5は、図16で決定される範囲を含むサムネイル画像データDImg3を長辺LSの長さで生成できる。即ち、長辺LSに対応するサムネイル画像データDImg3は、図16で決定される範囲を欠けることなく示す画像となる。
 このように、画像管理システム200は、所定の形状でサムネイル画像等を生成できる等の柔軟な画像処理ができる。
 なお、第1サーバ5は、登録が完了した場合には、第1通信端末3aに通知してもよい。例えば、図示するように、第1サーバ5は、画像IDデータDID等を第1通信端末3aに送信して、第1ユーザUSERAに登録が完了したことを通知する。この場合には、第1通信端末3aは、記憶部3000(図23)によって、画像IDを管理する。
 また、第1サーバ5は、上記(表2)が示すように、サムネイル画像データDImg3を識別するサムネイルIDをそれぞれ生成してもよい。なお、サムネイルID及び画像IDは、画像データDImg2又はサムネイル画像データDImg3にヘッダデータとして入力されて使用されてもよい。また、サムネイルID及び画像IDは、例えば、サムネイル画像データDImg3が送信される場合には、ヘッダデータとしてサムネイル画像データDImg3に含まれて送信されてもよいし、別々に送信されてもよい。さらに、サムネイルID及び画像IDは、いずれか一方又は両方が送信されてもよい。以下の説明では、画像IDが送信される例で説明する。
 図25は、第2サーバへサムネイル画像データをアップロードする処理の一例を示すシーケンス図である。例えば、生成されたサムネイル画像データDImg3は、図25に示すように使用される。なお、図25では、図7と同一の処理は、同一の符号を付して説明する。
 ステップS5では、第1サーバ5は、第2サーバ7に、サムネイル画像データDImg3及び画像IDデータDIDを送信する。例えば、ステップS5は、第1ユーザUSERAによる投稿の要求があると行われる。また、ステップS5では、第1サーバ5は、上記(表5)に示すコメント及びユーザID等を画像IDデータDID等と同時又は前後に送信してもよい。
 ステップS6では、第2サーバ7は、例えば、上記(表5)のように、サムネイル画像データDImg3等を管理する。
 図26は、第2通信端末へダウンロードする処理の一例を示すシーケンス図である。例えば、図25に示すようにアップロードされたサムネイル画像データDImg3は、図26に示すように使用される。なお、図26では、図7と同一の処理は、同一の符号を付して説明する。
 例えば、図7と同様に、第2ユーザUSERBが第2サーバ7に接続する例で説明する。なお、第2ユーザUSERBは、第2サーバ7に接続する際、又は事前にいわゆるログイン等の操作を行う。具体的には、第2ユーザUSERBは、第2ユーザUSERBのユーザID及びパスワード等を入力する。これに対して、第2サーバ7は、いわゆる認証を行う。次に、第2サーバ7は、上記(表4)に示すテーブルから認証した第2ユーザUSERBのユーザIDを検索し、関係者を特定する。
 続いて、第2サーバ7は、例えば、投稿一覧画面を生成する。具体的には、図18に示す表示画面3200等を生成する。表示画面3200には、図24に示す処理によって、登録を行った第1ユーザUSERAに係るデータが表示される。
 ステップS7では、第2サーバ7は、第2通信端末3bにサムネイル画像データDImg3及び画像IDデータDIDを含む投稿一覧画面を送信する。次に、第2通信端末3bは、サムネイル画像データDImg3を含む表示画面3200を表示する。これに対して、第2ユーザUSERBは、第2通信端末3bが表示する表示画面3200を見て、ダウンロードしたい画像がある場合には、ダウンロードする画像を選択する操作を行う。
 例えば、図24に示す処理による第1ユーザUSERAの投稿でアップロードされた画像を第2ユーザUSERBが選択したとする。この場合には、第2ユーザUSERBは、第1ユーザUSERAが投稿したサムネイル画像データDImg3が示すサムネイル画像を選択する。
 ステップS8では、第2通信端末3bは、画像IDデータDIDを第1サーバ5に送信する。なお、画像IDデータDIDは、ステップS7で選択されるサムネイル画像データDImg3に対応するデータである。なお、画像IDデータDIDは、例えば、第2サーバ7等を介して第1サーバ5に送信されてもよい。
 ステップS9では、第1サーバ5は、第2通信端末3bに画像IDデータDIDによって特定される画像データDImg2を送信する。これによって、第2ユーザUSERBは、第2通信端末3bで、サムネイル画像データDImg3が示す画像を見ることができる。
 なお、第1サーバ5は、第2通信端末3bに送信する画像データDImg2をパラメータによって特定される所定領域を抽出して送信する。
 また、第2通信端末3bが最初に表示する画像、即ち、いわゆる初期画面(「1stView」という場合もある。)は、第1ユーザUSERAが設定できる。初期画面では、例えば、図9に示すパラメータParによって特定される画像が表示される。即ち、パラメータParによって、画像をダウンロードした際の初期画面が設定できる。
 なお、本発明に係る各処理の全部又は一部は、アセンブラ、C、C++、C#、及びJava(登録商標)等のレガシープログラミング言語又はオブジェクト指向プログラミング言語等で記述されたコンピュータに実行させるためのプログラムによって実現されてもよい。即ち、プログラムは、画像管理装置等の情報処理装置又は情報処理システムに含まれる情報処理装置等のコンピュータに各処理を実行させるためのコンピュータプログラムである。
 また、プログラムは、ROM又はEEPROM(Electrically Erasable Programmable ROM)等のコンピュータが読み取り可能な記録媒体に格納して頒布することができる。さらに、記録媒体は、EPROM(Erasable Programmable ROM)、フラッシュメモリ、フレキシブルディスク、CD-ROM、CD-RW、DVD-ROM、DVD-RAM、DVD-RW、ブルーレイディスク、SD(登録商標)カード又はMO等でもよい。さらにまた、プログラムは、電気通信回線を通じて頒布することができる。
 さらに、画像管理システムは、ネットワーク等によって相互に接続される2以上の情報処理装置を有し、各種処理の全部又は一部を複数の情報処理装置が分散、並列又は冗長してそれぞれ処理を行ってもよい。また、画像管理システムでは、上述で説明したのとは別の装置が処理を行ってもよい。
 以上、本発明の好ましい実施例について詳述したが、本発明は係る特定の実施形態に限定されるものではなく、特許請求の範囲に記載された本発明の要旨の範囲内において、種々の変形又は変更が可能である。
 本国際特許出願は2015年7月21日に出願した日本国特許出願第2015-144098号に基づきその優先権を主張するものであり、日本国特許出願第2015-144098号の全内容を本願に援用する。
3a 第1通信端末
3b 第2通信端末
5 第1サーバ
7 第2サーバ

Claims (10)

  1.  通信端末及び前記通信端末とネットワークを介して通信する画像管理装置を有する画像管理システムであって、
     画像の一部の領域を特定するパラメータを含む画像データを受信する受信部と、
     前記パラメータにより特定された領域の画像から、所定の形状でサムネイル画像データを生成するサムネイル画像データ生成部と
    を有する画像管理システム。
  2.  前記画像データは、全天球パノラマ画像として表示可能なメルカトル画像のデータである請求項1に記載の画像管理システム。
  3.  前記パラメータは、前記領域を示す仮想カメラの方向、仰角、画角及び位置を示す請求項1又は2に記載の画像管理システム。
  4.  前記パラメータが示す方向により、前記仮想カメラのYaw方向に係る回転量が特定される請求項3に記載の画像管理システム。
  5.  前記パラメータが示す仰角により、前記仮想カメラのPitch方向に係る回転量が特定される請求項3に記載の画像管理システム。
  6.  前記パラメータが示す画角により、前記仮想カメラの画角が特定される請求項3に記載の画像管理システム。
  7.  前記が特定される位置により、前記仮想カメラの光軸上の位置が特定される請求項3に記載の画像管理システム。
  8.  前記所定の形状は、前記通信端末が有するディスプレイの長辺に基づく正方形である請求項1乃至7のいずれか一項に記載の画像管理システム。
  9.  通信端末及び前記通信端末とネットワークを介して通信する画像管理装置を有する画像管理システムが行う画像管理方法であって、
     前記画像管理システムが、画像の一部の領域を特定するパラメータを含む画像データを受信する受信手順と、
     前記画像管理システムが、前記パラメータにより特定された領域の画像から、所定の形状でサムネイル画像データを生成するサムネイル画像データ生成手順と
    を有する画像管理方法。
  10.  コンピュータに、請求項9に記載の方法に含まれる各手順をそれぞれ実行させることを特徴とするプログラム。
PCT/JP2016/070681 2015-07-21 2016-07-13 画像管理システム、画像管理方法及びプログラム WO2017014126A1 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
CN201680041392.3A CN107925740A (zh) 2015-07-21 2016-07-13 图像管理系统、图像管理方法及程序
JP2017529571A JPWO2017014126A1 (ja) 2015-07-21 2016-07-13 画像管理システム、画像管理方法及びプログラム
CA2991882A CA2991882A1 (en) 2015-07-21 2016-07-13 Image management system, image management method and program
EP16827686.3A EP3328073A4 (en) 2015-07-21 2016-07-13 Image management system, image management method and program
US15/859,946 US20180124310A1 (en) 2015-07-21 2018-01-02 Image management system, image management method and recording medium

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2015-144098 2015-07-21
JP2015144098 2015-07-21

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US15/859,946 Continuation US20180124310A1 (en) 2015-07-21 2018-01-02 Image management system, image management method and recording medium

Publications (1)

Publication Number Publication Date
WO2017014126A1 true WO2017014126A1 (ja) 2017-01-26

Family

ID=57834900

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2016/070681 WO2017014126A1 (ja) 2015-07-21 2016-07-13 画像管理システム、画像管理方法及びプログラム

Country Status (6)

Country Link
US (1) US20180124310A1 (ja)
EP (1) EP3328073A4 (ja)
JP (1) JPWO2017014126A1 (ja)
CN (1) CN107925740A (ja)
CA (1) CA2991882A1 (ja)
WO (1) WO2017014126A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019031468A1 (ja) * 2017-08-07 2019-02-14 ソニー株式会社 送信装置、送信方法、受信装置、受信方法および撮像装置

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018043135A1 (ja) * 2016-08-31 2018-03-08 ソニー株式会社 情報処理装置、情報処理方法、並びにプログラム
KR102561274B1 (ko) * 2016-12-01 2023-07-31 삼성전자주식회사 디스플레이 장치 및 디스플레이 장치의 제어 방법
KR20180070297A (ko) * 2016-12-16 2018-06-26 삼성전자주식회사 디스플레이장치 및 그 제어방법
EP3461124B1 (en) * 2017-09-25 2024-05-01 Ricoh Company, Ltd. Communication terminal, image communication system, display control method, and carrier means
US20220343595A1 (en) * 2021-04-23 2022-10-27 The Boeing Company Generating equirectangular imagery of a 3d virtual environment

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012132267A1 (ja) * 2011-03-31 2012-10-04 パナソニック株式会社 全方向ステレオ画像出力装置
JP2013250470A (ja) * 2012-06-01 2013-12-12 Nintendo Co Ltd 情報処理プログラム、情報処理装置、情報処理システム、および情報処理方法
JP2014006880A (ja) * 2012-05-31 2014-01-16 Ricoh Co Ltd 通信端末、表示方法、及びプログラム
JP2014010612A (ja) * 2012-06-29 2014-01-20 Ricoh Co Ltd 付加情報管理システム、画像共有システム、付加情報管理方法、及びプログラム
JP2014112302A (ja) * 2012-12-05 2014-06-19 Ricoh Co Ltd 所定領域管理システム、通信方法、及びプログラム
JP2014131215A (ja) * 2012-12-28 2014-07-10 Ricoh Co Ltd 画像管理システム、画像管理方法、及びプログラム

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103942290B (zh) * 2014-04-11 2017-12-29 北京金山网络科技有限公司 用于在终端中提供网页中的图像的方法和设备

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012132267A1 (ja) * 2011-03-31 2012-10-04 パナソニック株式会社 全方向ステレオ画像出力装置
JP2014006880A (ja) * 2012-05-31 2014-01-16 Ricoh Co Ltd 通信端末、表示方法、及びプログラム
JP2013250470A (ja) * 2012-06-01 2013-12-12 Nintendo Co Ltd 情報処理プログラム、情報処理装置、情報処理システム、および情報処理方法
JP2014010612A (ja) * 2012-06-29 2014-01-20 Ricoh Co Ltd 付加情報管理システム、画像共有システム、付加情報管理方法、及びプログラム
JP2014112302A (ja) * 2012-12-05 2014-06-19 Ricoh Co Ltd 所定領域管理システム、通信方法、及びプログラム
JP2014131215A (ja) * 2012-12-28 2014-07-10 Ricoh Co Ltd 画像管理システム、画像管理方法、及びプログラム

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3328073A4 *

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019031468A1 (ja) * 2017-08-07 2019-02-14 ソニー株式会社 送信装置、送信方法、受信装置、受信方法および撮像装置
JPWO2019031468A1 (ja) * 2017-08-07 2020-07-09 ソニー株式会社 送信装置、送信方法、受信装置、受信方法および撮像装置
US11012619B2 (en) 2017-08-07 2021-05-18 Sony Corporation Transmission device, transmission method, reception device, reception method, and imaging device
JP7107318B2 (ja) 2017-08-07 2022-07-27 ソニーグループ株式会社 送信装置、送信方法、受信装置、受信方法および撮像装置

Also Published As

Publication number Publication date
EP3328073A1 (en) 2018-05-30
CN107925740A (zh) 2018-04-17
JPWO2017014126A1 (ja) 2018-06-14
US20180124310A1 (en) 2018-05-03
CA2991882A1 (en) 2017-01-26
EP3328073A4 (en) 2018-05-30

Similar Documents

Publication Publication Date Title
US11509825B2 (en) Image management system, image management method, and computer program product
WO2017014126A1 (ja) 画像管理システム、画像管理方法及びプログラム
JP5920057B2 (ja) 送信装置、画像共有システム、送信方法、及びプログラム
JP2014112302A (ja) 所定領域管理システム、通信方法、及びプログラム
US11740850B2 (en) Image management system, image management method, and program
JP6011117B2 (ja) 受信装置、画像共有システム、受信方法、及びプログラム
JP6304300B2 (ja) 送信装置、通信方法、プログラムおよび受信装置
JP6115113B2 (ja) 所定領域管理システム、所定領域管理方法、及びプログラム
JP5942637B2 (ja) 付加情報管理システム、画像共有システム、付加情報管理方法、及びプログラム
JP6508288B2 (ja) システム、画像共有システム、通信方法、及びプログラム
JP6233451B2 (ja) 画像共有システム、通信方法及びプログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16827686

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2017529571

Country of ref document: JP

Kind code of ref document: A

ENP Entry into the national phase

Ref document number: 2991882

Country of ref document: CA

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 2016827686

Country of ref document: EP