WO2014050180A1 - 映像表示システム、操作端末、操作方法およびプログラム - Google Patents

映像表示システム、操作端末、操作方法およびプログラム Download PDF

Info

Publication number
WO2014050180A1
WO2014050180A1 PCT/JP2013/060325 JP2013060325W WO2014050180A1 WO 2014050180 A1 WO2014050180 A1 WO 2014050180A1 JP 2013060325 W JP2013060325 W JP 2013060325W WO 2014050180 A1 WO2014050180 A1 WO 2014050180A1
Authority
WO
WIPO (PCT)
Prior art keywords
video
area
display
touch
camera
Prior art date
Application number
PCT/JP2013/060325
Other languages
English (en)
French (fr)
Inventor
博典 高埜
貴理 山田
Original Assignee
株式会社日立国際電気
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社日立国際電気 filed Critical 株式会社日立国際電気
Priority to JP2014538213A priority Critical patent/JP6254945B2/ja
Publication of WO2014050180A1 publication Critical patent/WO2014050180A1/ja

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/485End-user interface for client configuration
    • H04N21/4858End-user interface for client configuration for modifying screen layout parameters, e.g. fonts, size of the windows
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2624Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects for obtaining an image which is composed of whole input images, e.g. splitscreen

Definitions

  • the present invention relates to an operation using an operation terminal in a video display system that displays an acquired video.
  • video surveillance systems have been introduced in various public and private facilities such as hotels, buildings, convenience stores, financial institutions, dams, roads, etc. for the purpose of crime and accident prevention, post-mortem analysis of incidents and accidents, etc. Yes.
  • a camera captures an image of an area to be monitored, transmits the captured video to a monitoring center or recording device such as a management office or a security room via a network, and a supervisor uses the transmitted video.
  • the monitoring target is monitored to give warnings and warnings according to the purpose and necessity, and the transmitted video is recorded on a recording device.
  • a monitor uses a computer such as a personal computer equipped with a monitor and a pointing device such as a mouse to operate pan / tilt / zoom of the camera from a GUI (Graphical User Interface) screen,
  • GUI Graphic User Interface
  • Patent Document 1 a video monitoring system that controls a camera from a GUI screen displayed in a Web browser format on a monitoring terminal or displays a captured video is disclosed (see Patent Document 1).
  • the present invention has been made in view of such a demand.
  • a desired image is displayed on a video display device such as a large screen
  • the touch panel type operation terminal can be used for a more sensory operation.
  • An object of the present invention is to provide a video monitoring interface for easily setting a display video.
  • the video display system of the present invention includes a camera that acquires video, a recording device that records video acquired by the camera, a display device that displays video, display means that displays an operation screen on a display surface, and the display
  • a touch panel arranged on the means for detecting an operation involving a touch and a control means for determining and controlling the detected operation are connected to each other via a network, and the operation terminal is connected to the display device.
  • a predetermined operation that displays a video layout area for setting a layout of a video to be displayed and a video display area for displaying information about the acquired video, and touches the information about the video in the video information display area
  • the video corresponding to the information related to the video is determined in the predetermined area of the video arrangement area.
  • the display device Place into position, displays an image corresponding to the said image placed by the operation terminal, the video information on a position corresponding to a predetermined position of the image arrangement area.
  • the video display system of the present invention includes a camera that acquires video, a recording device that records video acquired by the camera, a display device that displays video, and display means that displays an operation screen on a display surface, A touch panel that is arranged on the display means and detects an operation involving a touch and a control means that determines and controls the detected operation are connected to each other via a network, Displaying a video layout area for setting a layout of a video to be displayed on a display device, a map area for displaying map information of the camera installation location together with a camera icon, and touching the camera icon in the map area When a selection by a predetermined operation and a drag operation to a predetermined position in the video arrangement area are detected, a video corresponding to the information related to the video is displayed. Place into a predetermined position of the placement area, the display device displays an image corresponding to image positioned by the operation terminal, to the video information on a position corresponding to a predetermined position of the image arrangement area.
  • the operation terminal further detects a selection by an operation accompanied by a touch on the video arranged in the video arrangement area and a drag operation to another position of the video arrangement area. If the video is already arranged at the destination of the selected video, the selected video and the video already arranged at the destination are switched and arranged, and the selected video is If no video is placed at the destination, the previously selected video is placed at the destination location.
  • the video display system of the present invention includes a camera that acquires video, a recording device that records video acquired by the camera, a display device that displays video, and display means that displays an operation screen on a display surface, A touch panel that is arranged on the display means and detects an operation involving a touch and a control means that determines and controls the detected operation are connected to each other via a network, Display a video layout area divided into a plurality of areas for setting the layout of the video to be displayed on the display device, and integrate a plurality of divided areas by detecting a predetermined operation with a touch. Change to
  • the operation terminal of the present invention includes a display unit that displays an operation screen on a display surface, a touch panel that is disposed on the display unit and detects an operation involving a touch, a control unit that determines and controls the detected operation, A video arrangement area for setting the arrangement of the video and a video display area for displaying information relating to the video, and selection by a predetermined operation accompanied by touching information relating to the video in the video information display area; When a drag operation to a predetermined position in the video arrangement area is detected, the video corresponding to the information related to the video is arranged at a predetermined position in the video arrangement area.
  • the operation terminal of the present invention includes a display unit that displays an operation screen on a display surface, a touch panel that is disposed on the display unit and detects an operation involving a touch, and a control unit that determines and controls the detected operation. And a map area for displaying map information of a camera installation location together with a camera icon, and a predetermined touch screen with a touch to the camera icon. When the selection by the operation and the drag operation to the predetermined position of the video arrangement area are detected, the video corresponding to the information related to the video is arranged at the predetermined position of the video arrangement area.
  • the operation terminal of the present invention further detects the selection of the selected video by detecting selection by an operation accompanied by a touch to the video arranged in the video arrangement area and a drag operation to another position of the video arrangement area. If the video is already arranged at the destination of the video, the selected video and the video already arranged at the destination are swapped, and the video is moved to the destination of the selected video. If not, the previously selected video is placed at the destination position.
  • the operation terminal of the present invention includes a display unit that displays an operation screen on a display surface, a touch panel that is disposed on the display unit and detects an operation involving a touch, and a control unit that determines and controls the detected operation.
  • the operation method of the present invention includes a display unit that displays an operation screen on a display surface, a touch panel that is disposed on the display unit and detects an operation involving a touch, a control unit that determines and controls the detected operation, A video display area for setting the video layout and a video display area for displaying information related to the video, and a predetermined operation involving touching the video information in the video information display area
  • the video corresponding to the information related to the video is arranged at the predetermined position of the video arrangement area.
  • the operation method of the present invention includes a display unit that displays an operation screen on a display surface, a touch panel that is disposed on the display unit and detects an operation involving a touch, and a control unit that determines and controls the detected operation. And a map area for displaying map information of a camera installation location together with a camera icon, and touching the camera icon in the map area.
  • a selection by a predetermined operation accompanied with a drag operation to a predetermined position of the video arrangement area is detected, an image corresponding to the information related to the video is arranged at a predetermined position of the video arrangement area.
  • the operation method of the present invention further detects the selected video when a selection by an operation accompanied by a touch on the video arranged in the video arrangement area and a drag operation to another position of the video arrangement area are detected. If the video is already arranged at the destination of the video, the selected video and the video already arranged at the destination are swapped, and the video is moved to the destination of the selected video. If not, the previously selected video is placed at the destination position.
  • the operation method of the present invention includes a display unit that displays an operation screen on a display surface, a touch panel that is disposed on the display unit and detects an operation involving a touch, and a control unit that determines and controls the detected operation. And displaying an image arrangement area divided into a plurality of areas for setting the arrangement of the video, and integrating the plurality of areas divided by detecting a predetermined operation with a touch. Change to a larger area.
  • the program of the present invention is a video for setting the video layout on a computer comprising display means for displaying an operation screen on a display surface, and a touch panel arranged on the display means for detecting an operation involving a touch.
  • Display processing for displaying an arrangement area and a video display area for displaying information relating to the video, selection by a predetermined operation involving touching information relating to the video in the video information display area, and a predetermined position in the video arrangement area
  • a selection operation detection process for detecting a drag operation and an arrangement process for arranging the video corresponding to the information related to the video at a predetermined position in the video arrangement area in response to the operation detection process.
  • the program of the present invention is for setting a video layout on a computer including a display unit that displays an operation screen on a display surface, and a touch panel that is disposed on the display unit and detects an operation involving a touch.
  • Display processing for displaying a map area for displaying map information of a camera installation location together with a camera icon, selection by a predetermined operation involving touching the camera icon in the map area, and the video layout area
  • a selection operation detection process for detecting a drag operation to a predetermined position of the image, and an arrangement process for arranging an image corresponding to the information related to the image at a predetermined position in the image arrangement area in response to the selection operation detection process. Let it run.
  • the program of the present invention further includes a movement operation detection process for detecting selection by an operation accompanied by a touch on the video arranged in the video arrangement area and a drag operation to another position of the video arrangement area, In the case where a video is already arranged at the destination of the selected video after receiving the movement operation detection process, the selected video and the video already arranged at the destination are switched and arranged. If no video is arranged at the movement destination of the selected video, the computer is caused to execute an arrangement change process for arranging the previously selected video at the movement destination position.
  • the program of the present invention is for setting a video layout on a computer including a display unit that displays an operation screen on a display surface, and a touch panel that is disposed on the display unit and detects an operation involving a touch.
  • an area change process for changing to a larger area.
  • a video monitoring interface that can be operated more intuitively can be realized by performing operations such as mode switching and video selection by a gesture operation accompanied by a touch, particularly using a touch panel type operation terminal.
  • FIG. 1 is a block diagram showing the overall configuration of the video monitoring system of the present invention and the internal configuration of the operation terminal.
  • the video surveillance system shown in FIG. 1 is a camera 1-1 to 1-n equipped with a pan / tilt / zoom function for capturing an image of a surveillance area (referred to as camera 1 unless otherwise specified), HDD (Hard Disk Drive) or SSD. Display that reproduces the specified video on a recording device 2 having a large-capacity recording medium such as (Solid State Drive), a touch panel type operation terminal 3, a large display or a pseudo large screen display that combines multiple displays. It is comprised from the apparatus 4, and is connected by networks, such as the internet, respectively.
  • the camera 1 is equipped with a pan / tilt / zoom function. However, the camera 1 may be a fixed camera, and may not be plural. Further, the number of recording apparatuses 2 is one for the sake of simplicity, but a plurality of recording apparatuses 2 may be provided.
  • the camera 1 captures an image of the monitoring area, acquires a video, and outputs it to the recording device 2 via the network.
  • the recording device 2 records the input video on a recording medium.
  • the operation terminal 3 outputs a control signal to the camera 1 and the recording device 2 according to the operation and setting of the operator.
  • the camera 1 When a real-time video is requested from the operation terminal 3 to the designated camera 1, the camera 1 outputs the acquired video to the operation terminal 3, and the operation terminal 3 displays the received video.
  • the operation terminal 3 requests the designated camera 1 to control pan / tilt / zoom, the camera 1 controls pan / tilt / zoom according to the contents of the request.
  • the recording device 2 requests the recording device 2 for the recording video designated by the date and time, the camera name, etc. from the operation terminal 3, the recording device 2 outputs the designated recording video to the operation terminal 3, and the operation terminal 3 displays the received recording video. indicate.
  • the camera 1 or the recording device 2 outputs a video to the display device 4, and the display device 4 displays the video according to the video display setting.
  • the display setting an image to be displayed on the display device 4 is set by the operator operating the operation terminal 3.
  • the operation screen will be described later.
  • the screen is divided.
  • an operation for assigning the arrangement of each display is performed, and display setting is performed on the display device 4.
  • the display device 4 often displays real-time video from the cameras 1-1 to 1-n, but the video recorded in the recording device 2 is specified and displayed by camera name, date, or the like. It is also possible to make it.
  • the operation terminal 3 of the video monitoring system shown in FIG. 1 controls the communication unit 301 that converts data into a communicable format and transmits / receives it, controls each unit of the operation terminal 3, and executes a gesture information determination process and the like Unit 302, storage unit 303 for storing gesture information 303A and program 303B in ROM (Read Only Memory), RAM (Random Access Memory), etc., touch sensor 304A for recognizing the gesture of the operator, and display for displaying characters, images, etc.
  • the touch panel 304 includes a unit 304B, and an input unit 305 such as a return button or a power button.
  • the touch sensor 304A is provided over the entire surface of the display unit 304B.
  • the touch sensor 304A recognizes a gesture accompanied by an operator's touch using a surface acoustic wave method or a capacitance method, and the display unit 304B The characters and video drawn by the control unit 302 are displayed.
  • the gesture information 303A is information related to operation commands stored corresponding to the characteristics of the operator's gesture recognized by the touch sensor 304A
  • the program 303B is a determination processing program using, for example, an OS (Operating System) and the gesture information 304A. And various application programs.
  • the gesture means an operation that involves an operator touching the touch panel 304, and tap (touch and release immediately), drag (slide while touching), pinch-in (two touches and two touches). Such as pinching out (touching two points and sliding them apart), swiping (touching and sliding and releasing them), hold (long press), etc. is there.
  • the specific operation of the terminal by gesture operation is as follows.
  • the operator performs a gesture operation on the touch panel 304
  • the operator's gesture is recognized by the touch sensor 304A
  • the control unit 302 generates an operation command by referring to the gesture information 304, and executes the program 303B based on the operation command. To do.
  • the program execution result is drawn and displayed on the display unit 304B.
  • an operation by operating the input unit 305 is also realized by generating an operation command with reference to information stored in the storage unit 303 and executing the program 303B.
  • the communication unit 301 transmits data such as a control signal from the control unit 302 to a wireless network, LAN, or the like using a system such as a 3G line or Wi-Fi. Is converted to a format communicable with a wired network of the above system, and is output to the network toward the camera 1, the recording device 2, and the display device 4.
  • the recording device 2 when the camera 1 includes a large-capacity recording medium such as a memory card and records the captured image on itself, the recording device 2 is not necessary, and the camera 1 includes the function of the recording device 2. It communicates with the operation terminal 3. In this case, all the communication contents between the recording device 2 and the operation terminal 3 described above can be replaced with communication between the camera 1 and the operation terminal 3, and the camera 1 records whether the request from the operation terminal 3 relates to the camera control function. It works by determining whether it is related to the function or not. Therefore, this video surveillance system can be realized only by at least the camera 1 and the operation terminal 3, and the physical system configuration can be simplified.
  • FIG. 2 is a diagram showing a video layout operation on the horizontal operation screen on the operation screen of the video monitoring system of the present invention.
  • FIG. 3 is a diagram showing a state of setting a video layout area on a horizontal operation screen on the operation screen of the video monitoring system of the present invention.
  • FIG. 4 is a diagram illustrating a state after the setting area of the arrangement image on the horizontal operation screen is expanded as a result of the operation in FIG. 3 on the operation screen of the video monitoring system of the present invention.
  • the operation screen displayed on the touch panel 304 includes a video placement area 501 for placing a video to be displayed on the screen of the display device 4, videos and camera names of the connected cameras 1-1 to 1-n, and installation locations. And a thumbnail display area 502 for displaying floor information in a thumbnail form, a map display area 503 for displaying a map of the floor of a site or building together with a camera icon displayed corresponding to the location where the camera is actually installed,
  • the menu button 504 is used to switch between screens and modes and to change to other various setting screens. In the present embodiment, a single floor is displayed in the map display area 503, but a plurality of floors and buildings may be displayed simultaneously.
  • the video arrangement area 501 is an area for setting where the video of which camera is to be arranged on the screen of the display device 4.
  • the video of the selected camera is reproduced on the video arrangement area 501 and the same on the display device 4. Or not displayed on the video arrangement area 501 and displayed only on the display device 4.
  • the area delimited by the dotted line indicates that nine screens are divided or nine displays are combined, and the video is arranged in a size delimited by the dotted line.
  • This division may be set by selecting a division setting prepared in advance, or may be set according to the number obtained by obtaining display information from the display device 4.
  • the areas separated by dotted lines can be combined by tapping intersections, or the range can be arbitrarily adjusted by tapping or holding dotted lines and dragging.
  • the region or video is selected by tapping or holding, but may be determined to be selected at the time of touch.
  • thumbnail display area 502 a plurality of videos of the cameras 1-1 to 1-n that are actually connected are displayed together with the camera information in order of the camera name, etc., and by dragging and swiping up and down, When there are many camera images, images that are not displayed slide and are displayed one after another.
  • a 1F map of the building (floor plan), a camera icon corresponding to the location where the camera is actually placed, and an image corresponding to the camera icon are displayed in a small size.
  • the currently selected location is displayed in the lower right, such as “1F”.
  • the locations to be monitored are displayed in a pull-down / up list, and the desired monitoring location is tapped.
  • the thumbnail display area 502 jumps so that the video of the camera installed at the monitoring location is at the top of the screen, or displays only the video of the camera installed at the monitoring location. You may make it let you do.
  • the camera icon corresponding to the video “4” or the small video “4” is touched or held to select the video to be arranged.
  • the video “4” is set in the upper left area of the video arrangement area 501 and reproduced.
  • the video “1” arranged in the video arrangement area 501 is touched or held and dragged out of the frame of the video arrangement area 501, or the video arranged in the video arrangement area 501.
  • the arrangement setting of the video “1” can be cancelled, and another video such as the video “2” can be displayed by the above operation.
  • the placement of video “1” is canceled and video “2” is placed.
  • the image “1” is arranged in the upper left area of the image arrangement area 501 by the above-described operation.
  • the placed video “1” is selected by a tap or hold operation, the lower right frame portion of the video “1” is touched, dragged to a desired enlargement position, and the touch is released.
  • the display area of the video “1” is enlarged from the position where the touch is released to the nearest dotted frame, and in this embodiment, the four areas at the upper left of the video arrangement area 501 are combined, as shown in FIG. A large display area is set.
  • the upper left four areas are selected, the touch is released, and further the hold operation is performed to display the menu.
  • the four regions at the upper left can be combined. Further, this operation may be performed even when an image is arranged in an area to be combined. In that case, if only one video is arranged in the plurality of areas, it is automatically arranged in the area where the videos are combined, and if there are a plurality of arranged, for example, the area where the video arranged in the upper left corner is combined. It may be arranged automatically, or the arrangement may be reset when combined.
  • the area can be enlarged by the same operation.
  • tapping or holding the intersections of the dotted lines in the upper left four areas of the video arrangement area 501 and selecting the menu display to select the large area as shown in FIG. It can be. Even if it is not the intersection of the dotted lines of the four areas, they can be combined by tapping or holding the dotted line between the two areas to display a menu for selection.
  • the reverse operation of the above operation may be performed.
  • the enlarged area is selected by a tap or hold operation, the lower right frame of the area is touched, dragged to a desired reduction position, and the touch is released. Then, the display area from the position where the touch is released to the nearest dotted frame is reduced, and in this embodiment, the combination of the four areas at the upper left of the video arrangement area 501 is released, and the display as shown in FIG. An area is set. It is also possible to hold a display area to be reduced or uncoupled, pop up a menu, and select an item for reduction or uncoupling.
  • FIG. 5 shows a state of an image moving operation on the operation screen
  • FIG. 6 shows a state after an image moving operation on the operation screen.
  • the video “1” is arranged in the upper left area of the video arrangement area 501 and the video “4” is arranged in the lower area by the above-described operation.
  • the placed image “1” is selected by a tap or hold operation, dragged to the area below it, and the touch is released.
  • the video “4” is already arranged here, the video “4” moves to the upper right area where the video “1” was arranged, and the video “1” is arranged with the video “4”.
  • the video “1” and the video “4” are arranged as shown in FIG. That is, when another video is already arranged at the destination, the positions of each other are switched.
  • the video “3” is arranged in the upper center area of the video arrangement area 501 by the above-described operation.
  • the placed video “3” is selected by a tap or hold operation, dragged to the lower right area, and the touch is released. Since no video is arranged here, the video “3” moves to the lower right area, and the video “3” is arranged as shown in FIG. That is, when another video is not already arranged at the destination, the video is arranged in the destination area, and the video arrangement setting is deleted from the area where the video was originally arranged.
  • the image “2” is arranged in the central area of the image arrangement area 501 by the above-described operation.
  • the thumbnail image “5” is touched or held, the image to be arranged is selected, dragged to the central area of the image arrangement area 501, and the touch is released.
  • the video “2” is already arranged there, the video “2” is deleted, the video “5” is arranged, and the video “5” is arranged as shown in FIG. That is, if another video has already been placed at the placement destination, the already placed video is overwritten with the video placed later.
  • FIG. 7 is a diagram showing an operation state of video arrangement on the vertical operation screen on the operation screen of the video surveillance system of the present invention.
  • the horizontal operation screen shown in FIGS. 2 to 4 is arranged vertically. It is.
  • the main difference is that the thumbnail images in the thumbnail display area 502 are arranged in a horizontal row, and the thumbnail images are slid horizontally by dragging or swiping left and right.
  • Other operations described with reference to FIGS. 2 to 4 can be similarly performed.
  • FIG. 1 a video acquisition request is transmitted from the operation terminal 3 to the recording device 2 by designating a video of a desired recording device using the operation terminal 3, and the recording device displays the designated video as the operation terminal. 3 and / or display device 4.
  • FIG. 2 by selecting a recorded video search item with the menu button 504, information (recording date, camera name, etc.) for specifying information and video of the recording device 2 is displayed in the thumbnail display area 502.
  • the map display area 503 may automatically display a map of the floor or building corresponding to the designated video, and in this case, it is effective when it is desired to select a video from a surrounding camera.
  • the display can be set by the above-described arrangement operation while switching between the real-time video selection screen and the recorded video selection screen by the menu button 504. Thereby, it is possible to easily compare the current video and the past video when it is desired to watch them simultaneously.
  • the display setting is determined using the operation terminal 3, and the video is displayed on the display device 4 according to this setting.
  • the present invention is not limited to the above embodiments.
  • a portable terminal using a touch panel has been described.
  • the present invention is not limited to this, and a fixed touch panel type operation terminal may be used. It may be a terminal that is used and operated. Further, the arrangement of the video to be displayed on the operation terminal itself may be set.
  • the display device may be a television or PC monitor. In this case, a control signal is transmitted from the operation terminal using infrared rays or the Internet.
  • the present invention is not limited to the above-described embodiments as they are, and can be embodied by modifying the components without departing from the scope of the invention in the implementation stage.
  • various inventions can be formed by appropriately combining a plurality of constituent elements disclosed in the above embodiments. For example, some components may be deleted from all the components shown in each embodiment. Furthermore, you may combine suitably the component covering different embodiment.
  • the present invention is applicable to a video display system that displays an acquired video, particularly to an operation terminal using a touch panel.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

課題:例えばカメラで規模の異なる複数の場所を撮影する映像表示システムにおいて、大画面表示装置に所望の映像を表示させる際に、タッチパネル式の操作端末を用いて、より感覚的な操作で表示映像を設定し易い映像表示インターフェースを提供することを目的とする。 解決手段:本発明によれば、映像表示システムの操作端末にタッチパネル式の操作端末を用いて、大画面表示装置に所望の表示映像を設定する操作を、タッチを伴うジェスチャ操作によって実行することで、より感覚的に操作し易い映像表示インターフェースを実現できる。

Description

映像表示システム、操作端末、操作方法およびプログラム
 本発明は、取得した映像を表示する映像表示システムにおける、操作端末を用いる操作に関する。
 例えば映像監視システムは、ホテルやビル、コンビニエンスストア、金融機関、ダム、道路等といった様々な公共施設や民間施設等において、犯罪や事故の防止、事件や事故の事後解析等の目的で導入されている。一般的な映像監視システムでは、カメラで監視対象エリアを撮像し、撮像した映像をネットワークを介して管理事務所や警備室等の監視センタや記録装置に伝送し、伝送された映像により監視者が監視対象を監視して目的や必要に応じて注意や警告をしたり、伝送された映像を記録装置に記録したりしている。
 この様な従来の監視システムの場合、監視者がモニタとマウス等のポインティングデバイスを備えるパソコンなどのコンピュータを用いて、GUI(Graphical User Interface)画面からカメラのパン・チルト・ズームを操作したり、映像を閲覧したりすることで、監視対象領域を監視している。
 なお、従来技術として、監視端末にWebブラウザ形式で表示したGUI画面からカメラを制御したり、撮像した映像を表示したりする映像監視システムが開示されている(特許文献1を参照)。
 一方、近年、スマートフォンやタブレットと呼ばれるタッチパネルを用いた可搬型の通信端末が普及しており、これらを大画面等の表示装置への映像表示に用いることが望まれている。
特開2011-055423号公報
 本発明は、この様な要望を鑑みて為されたものであり、大画面等の映像表示装置に所望の映像を表示させる際に、タッチパネル式の操作端末を用いて、より感覚的な操作で表示映像を設定し易い映像監視インターフェースを提供することを目的とする。
 本発明の映像表示システムは、映像を取得するカメラと、前記カメラで取得した映像を記録する記録装置と、映像を表示する表示装置と、表示面に操作画面を表示する表示手段と、前記表示手段の上に配置されタッチを伴う操作を検出するタッチパネルと、検出した操作を判定して制御する制御手段と、を備える操作端末と、がそれぞれネットワークで接続され、前記操作端末は、前記表示装置に表示する映像の配置を設定するための映像配置領域と、取得した前記映像に関する情報を表示する映像表示領域とを表示し、前記映像情報表示領域の映像に関する情報へのタッチを伴う所定の操作による選択と前記映像配置領域の所定の位置へのドラッグ操作を検出すると、前記映像に関する情報に対応する前記映像を前記映像配置領域の所定の位置へ配置し、前記表示装置は、前記操作端末により配置された前記映像を、前記映像配置領域の所定の位置に対応する位置に前記映像に関する情報に対応する映像を表示する。
 また、本発明の映像表示システムは、映像を取得するカメラと、前記カメラで取得した映像を記録する記録装置と、映像を表示する表示装置と、表示面に操作画面を表示する表示手段と、前記表示手段の上に配置されタッチを伴う操作を検出するタッチパネルと、検出した操作を判定して制御する制御手段と、を備える操作端末と、がそれぞれネットワークで接続され、前記操作端末は、前記表示装置に表示する映像の配置を設定するための映像配置領域と、前記カメラの設置場所の地図情報をカメラアイコンとともに表示するマップ領域とを表示し、前記マップ領域のカメラアイコンへのタッチを伴う所定の操作による選択と前記映像配置領域の所定の位置へのドラッグ操作を検出すると、前記映像に関する情報に対応する映像を前記映像配置領域の所定の位置へ配置し、前記表示装置は、前記操作端末により配置された映像を、前記映像配置領域の所定の位置に対応する位置に前記映像に関する情報に対応する映像を表示する。
 また、本発明の映像表示システムは、さらに、前記操作端末は、前記映像配置領域に配置された映像へのタッチを伴う操作による選択と前記映像配置領域の他の位置へのドラッグ操作を検出すると、前記選択された映像の移動先に既に映像が配置されている場合には、前記選択された映像と前記移動先に既に配置されている映像の位置を入れ替えて配置し、前記選択された映像の移動先に映像が配置されていない場合には、移動先の位置に前選択された記映像を配置する。
 また、本発明の映像表示システムは、映像を取得するカメラと、前記カメラで取得した映像を記録する記録装置と、映像を表示する表示装置と、表示面に操作画面を表示する表示手段と、前記表示手段の上に配置されタッチを伴う操作を検出するタッチパネルと、検出した操作を判定して制御する制御手段と、を備える操作端末と、がそれぞれネットワークで接続され、前記操作端末は、前記表示装置に表示する映像の配置を設定するための複数領域に分割された映像配置領域を表示し、タッチを伴う所定の操作を検出することで分割された複数の領域を統合してより大きな領域に変更する。
 本発明の操作端末は、表示面に操作画面を表示する表示手段と、前記表示手段の上に配置されタッチを伴う操作を検出するタッチパネルと、検出した操作を判定して制御する制御手段と、を備え、映像の配置を設定するための映像配置領域と、映像に関する情報を表示する映像表示領域とを表示し、前記映像情報表示領域の映像に関する情報へのタッチを伴う所定の操作による選択と前記映像配置領域の所定の位置へのドラッグ操作を検出すると、前記映像に関する情報に対応する前記映像を前記映像配置領域の所定の位置へ配置する。
 また、本発明の操作端末は、表示面に操作画面を表示する表示手段と、前記表示手段の上に配置されタッチを伴う操作を検出するタッチパネルと、検出した操作を判定して制御する制御手段と、を備え、映像の配置を設定するための映像配置領域と、カメラの設置場所の地図情報をカメラアイコンとともに表示するマップ領域とを表示し、前記マップ領域のカメラアイコンへのタッチを伴う所定の操作による選択と前記映像配置領域の所定の位置へのドラッグ操作を検出すると、前記映像に関する情報に対応する映像を前記映像配置領域の所定の位置へ配置する。
 また、本発明の操作端末は、さらに、前記映像配置領域に配置された映像へのタッチを伴う操作による選択と前記映像配置領域の他の位置へのドラッグ操作を検出すると、前記選択された映像の移動先に既に映像が配置されている場合には、前記選択された映像と前記移動先に既に配置されている映像の位置を入れ替えて配置し、前記選択された映像の移動先に映像が配置されていない場合には、移動先の位置に前選択された記映像を配置する。
 また、本発明の操作端末は、表示面に操作画面を表示する表示手段と、前記表示手段の上に配置されタッチを伴う操作を検出するタッチパネルと、検出した操作を判定して制御する制御手段と、を備え、前記表示装置に表示する映像の配置を設定するための複数領域に分割された映像配置領域を表示し、タッチを伴う所定の操作を検出することで分割された複数の領域を統合してより大きな領域に変更する。
 本発明の操作方法は、表示面に操作画面を表示する表示手段と、前記表示手段の上に配置されタッチを伴う操作を検出するタッチパネルと、検出した操作を判定して制御する制御手段と、を備える操作端末において、映像の配置を設定するための映像配置領域と、映像に関する情報を表示する映像表示領域とを表示し、前記映像情報表示領域の映像に関する情報へのタッチを伴う所定の操作による選択と前記映像配置領域の所定の位置へのドラッグ操作を検出すると、前記映像に関する情報に対応する前記映像を前記映像配置領域の所定の位置へ配置する。
 また、本発明の操作方法は、表示面に操作画面を表示する表示手段と、前記表示手段の上に配置されタッチを伴う操作を検出するタッチパネルと、検出した操作を判定して制御する制御手段と、を備える操作端末において、映像の配置を設定するための映像配置領域と、カメラの設置場所の地図情報をカメラアイコンとともに表示するマップ領域とを表示し、前記マップ領域のカメラアイコンへのタッチを伴う所定の操作による選択と前記映像配置領域の所定の位置へのドラッグ操作を検出すると、前記映像に関する情報に対応する映像を前記映像配置領域の所定の位置へ配置する。
 また、本発明の操作方法は、さらに、前記映像配置領域に配置された映像へのタッチを伴う操作による選択と前記映像配置領域の他の位置へのドラッグ操作を検出すると、前記選択された映像の移動先に既に映像が配置されている場合には、前記選択された映像と前記移動先に既に配置されている映像の位置を入れ替えて配置し、前記選択された映像の移動先に映像が配置されていない場合には、移動先の位置に前選択された記映像を配置する。
 また、本発明の操作方法は、表示面に操作画面を表示する表示手段と、前記表示手段の上に配置されタッチを伴う操作を検出するタッチパネルと、検出した操作を判定して制御する制御手段と、を備える操作端末において、映像の配置を設定するための複数領域に分割された映像配置領域を表示し、タッチを伴う所定の操作を検出することで分割された複数の領域を統合してより大きな領域に変更する。
 本発明のプログラムは、表示面に操作画面を表示する表示手段と、前記表示手段の上に配置されタッチを伴う操作を検出するタッチパネルと、を備えるコンピュータに、映像の配置を設定するための映像配置領域と、映像に関する情報を表示する映像表示領域とを表示させる表示処理と、前記映像情報表示領域の映像に関する情報へのタッチを伴う所定の操作による選択と前記映像配置領域の所定の位置へのドラッグ操作を検出する選択操作検出処理と、前記操作検出処理を受けて前記映像に関する情報に対応する前記映像を前記映像配置領域の所定の位置へ配置する配置処理と、を実行させる。
 また、本発明のプログラムは、表示面に操作画面を表示する表示手段と、前記表示手段の上に配置されタッチを伴う操作を検出するタッチパネルと、を備えるコンピュータに、映像の配置を設定するための映像配置領域と、カメラの設置場所の地図情報をカメラアイコンとともに表示するマップ領域とを表示する表示処理と、前記マップ領域のカメラアイコンへのタッチを伴う所定の操作による選択と前記映像配置領域の所定の位置へのドラッグ操作を検出する選択操作検出処理と、前記選択操作検出処理を受けて前記映像に関する情報に対応する映像を前記映像配置領域の所定の位置へ配置する配置処理と、を実行させる。
 また、本発明のプログラムは、さらに、前記映像配置領域に配置された映像へのタッチを伴う操作による選択と前記映像配置領域の他の位置へのドラッグ操作を検出する移動操作検出処理と、前記移動操作検出処理を受けて、前記選択された映像の移動先に既に映像が配置されている場合には、前記選択された映像と前記移動先に既に配置されている映像の位置を入れ替えて配置し、前記選択された映像の移動先に映像が配置されていない場合には、移動先の位置に前選択された記映像を配置する配置変更処理と、を前記コンピュータに実行させる。
 また、本発明のプログラムは、表示面に操作画面を表示する表示手段と、前記表示手段の上に配置されタッチを伴う操作を検出するタッチパネルと、を備えるコンピュータに、映像の配置を設定するための複数領域に分割された映像配置領域を表示する表示処理と、タッチを伴う所定の操作を検出する変更操作検出処理と、前記変更操作検出処理を受けて分割された複数の領域を統合してより大きな領域に変更する領域変更処理と、を実行させる。
 本発明によれば、特にタッチパネル式の操作端末を用いて、タッチを伴うジェスチャ操作によってモード切替えや映像選択などの操作を実行することで、より感覚的に操作し易い映像監視インターフェースを実現できる。
本発明の映像監視システムの全体構成と操作端末の内部構成を示すブロック図である。 本発明の映像監視システムの操作画面で、横型の操作画面における映像配置の操作の様子を示す図である。 本発明の映像監視システムの操作画面で、横型の操作画面における映像配置の領域設定拡張の様子を示す図である。 本発明の映像監視システムの操作画面で、横型の操作画面における配置映像の設定領域拡張後の様子を示す図である。 本発明の映像監視システムの操作画面で、横型の操作画面における映像の移動操作の様子を示す図である。 本発明の映像監視システムの操作画面で、横型の操作画面における映像の移動操作後の様子を示す図である。 本発明の映像監視システムの操作画面で、縦型の操作画面における映像配置の操作の様子を示す図である。
 以下、図面を参照して本発明の実施形態について詳細に説明する。
 図1は、本発明の映像監視システムの全体構成と操作端末の内部構成を示すブロック図である。
 図1に示す映像監視システムは、監視領域を撮像するパン・チルト・ズーム機能搭載のカメラ1-1~1-n(特に区別しない場合はカメラ1と呼ぶ)、HDD(Hard Disk Drive)やSSD(Solid State Drive)などの大容量の記録媒体を備える記録装置2、タッチパネル式の操作端末3、大型のディスプレイまたは複数のディスプレイを組み合わせた疑似的な大画面ディスプレイに指定された映像を再生する表示装置4から構成され、それぞれインターネット等のネットワークによって接続される。
 なお、カメラ1はパン・チルト・ズーム機能搭載としたが固定型のカメラでもよく、複数でなくてもよい。また、記録装置2も説明を簡単にするために1つとしたが、複数あってもよい。
 カメラ1は監視領域を撮像して映像を取得し、ネットワークを介して記録装置2へ出力し、記録装置2は入力された映像を記録媒体に記録する。操作端末3は操作者の操作や設定に従ってカメラ1や記録装置2へ制御信号を出力する。操作端末3から指定されたカメラ1へリアルタイムの映像を要求すると、カメラ1は操作端末3へ取得した映像を出力し、操作端末3は受信した映像を表示する。また、操作端末3から指定されたカメラ1へパン・チルト・ズームを制御するよう要求すると、カメラ1は要求の内容に従ってパン・チルト・ズームを制御する。また、操作端末3から日時やカメラ名等で指定した記録映像を記録装置2へ要求すると、記録装置2は指定された記録映像を操作端末3へ出力し、操作端末3は受信した記録映像を表示する。
 また、カメラ1または記録装置2は映像を表示装置4へ出力し、表示装置4では映像の表示設定に従って映像を表示する。表示設定については、操作端末3において、操作者が操作することで表示装置4に表示する映像を設定する。操作画面については後述するが、大型ディスプレイの場合は画面分割、複数のディスプレイを組み合わせた疑似的な大画面ディスプレイの場合はディスプレイごとの配置を割り当てる操作をし、表示装置4に表示設定する。但し、ディスプレイの枠にこだわらず、自由なサイズ、配置で表示するように設定することも可能である。
 ここでは、表示装置4には、カメラ1-1~1-nからのリアルタイム映像を表示することが多いが、記録装置2に記録された映像をカメラ名ごとや日付ごと等で指定して表示させることも可能である。
 また、図1に示す映像監視システムの操作端末3は、データを通信可能な形式に変換して送受信する通信部301、操作端末3の各部を制御するとともにジェスチャ情報の判定処理等を実行する制御部302、ROM(Read Only Memory)やRAM(Random Access Memory)等でジェスチャ情報303Aやプログラム303Bを記憶する記憶部303、操作者のジェスチャを認識するタッチセンサ304Aと文字や映像等を表示する表示部304Bを備えるタッチパネル304、戻るボタンや電源ボタン等の入力部305から構成される。
 タッチセンサ304Aは表示部304Bの上に全面に渡って設けられ、タッチセンサ304Aは、表面弾性波方式や静電容量方式などを用いて操作者のタッチを伴うジェスチャを認識し、表示部304Bは、制御部302によって描画される文字や映像等を表示する。
 ジェスチャ情報303Aはタッチセンサ304Aによって認識された操作者のジェスチャの特徴に対応して記憶された操作コマンドに関する情報であり、プログラム303Bは例えばOS(Operating System)、ジェスチャ情報304Aを用いた判定処理プログラム、各種アプリケーションプログラム等である。
 なお、ここでジェスチャとは、操作者のタッチパネル304へのタッチを伴う操作を意味し、タップ(タッチしてすぐに離す)、ドラッグ(タッチしたままスライドさせる)、ピンチイン(2点タッチし2点間を狭める様にスライドさせる)、ピンチアウト(2点タッチし2点間を離す様にスライドさせる)、スワイプ(掃く様にタッチしてスライドして離す)、ホールド(長押し)等といったものがある。
 ジェスチャ操作による端末の具体的な動作は次の通り。
操作者がタッチパネル304に対してジェスチャ操作すると、タッチセンサ304Aによって操作者のジェスチャが認識され、制御部302はジェスチャ情報304を参照して操作コマンドを生成し、操作コマンドに基づいてプログラム303Bを実行する。そして、プログラム実行結果を描画し表示部304Bに表示する。
 また、入力部305が操作されることによる動作も、記憶部303に記憶された情報を参照して操作コマンドを生成し、プログラム303Bを実行することで実現される。
 上述した操作や自動実行プログラムにより通信が必要となった場合、通信部301は、制御部302からの制御信号等のデータを、3G回線やWi-Fi等の方式を用いた無線ネットワークやLAN等の方式の有線ネットワークで通信可能な形式に変換して、カメラ1、記録装置2、および表示装置4へ向けてネットワークに出力する。
 これにより、タッチパネル式の操作端末3を用いて映像監視することができる。
 なお、ここで、カメラ1がメモリーカード等の大容量の記録媒体を備え、撮像した映像を自らに記録する場合には、記録装置2は必要なく、カメラ1は記録装置2の機能も含めて操作端末3と通信する。この場合、上述した記録装置2と操作端末3との通信内容は全てカメラ1と操作端末3との通信に置き換えることができ、カメラ1は操作端末3からの要求がカメラ制御機能に関するものか記録機能に関するものかを判別して動作する。従って、この映像監視システムは少なくともカメラ1と操作端末3のみでも成立し、物理的なシステム構成を簡素化することもできる。
 次に、図2~図7を用いて、操作端末3に表示される映像監視インターフェースの操作について説明する。
 図2は、本発明の映像監視システムの操作画面で、横型の操作画面における映像配置の操作の様子を示す図である。図3は、本発明の映像監視システムの操作画面で、横型の操作画面における映像配置の領域設定の様子を示す図である。図4は、本発明の映像監視システムの操作画面で、図3における操作の結果、横型の操作画面における配置映像の設定領域拡張後の様子を示す図である。
 図2において、タッチパネル304に表示される操作画面は、表示装置4の画面に表示する映像を配置する映像配置領域501、接続されたカメラ1-1~1-nの映像とカメラ名、設置場所及びフロア情報をサムネイル状に表示するサムネイル表示領域502、敷地内や建物のフロアの地図を実際にカメラが設置されている場所に対応して表示されるカメラアイコンと共に表示するマップ表示領域503、操作画面やモードの切り替えや他の各種設定画面に遷移するためのメニューボタン504から構成される。本実施形態ではマップ表示領域503には単一のフロアが表示されているが、複数のフロアや建物を同時に表示する様にしてもよい。
 映像配置領域501は、表示装置4の画面にどのカメラの映像をどこに配置するかを設定するための領域で、選択されたカメラの映像は映像配置領域501上でも再生され表示装置4上でも同じように再生されるか、映像配置領域501上では再生されず表示装置4上でのみ表示される。点線で区切られた領域は、この場合9画面分割または9つのディスプレイが組み合わされていることを表し、点線で区切られたサイズで映像が配置される。この分割は、予め用意された分割設定を選択して設定する様にしてもよいし、表示装置4からディスプレイ情報を得てその数に応じて設定する様にしてもよい。なお、後述するがこの点線で区切られた領域は交点をタップすることで結合させることや、点線をタップまたはホールドしてドラッグすることで範囲を任意に調整可能である。ここで、タップまたはホールドすることで領域や映像が選択されることとしているが、タッチした時点で選択と判断されてもよい。
 サムネイル表示領域502は、実際に接続されているカメラ1-1~1-nの映像がカメラ情報と共にカメラ名順等で複数表示され、上下にドラッグやスワイプすることにより、表示されている分より多くのカメラ映像がある場合には表示されていない映像がスライドして次々と表示される。
 マップ表示領域503には、本実施例では建物の1Fの地図(間取り図)と、実際にカメラが配置されている場所に対応するカメラアイコンと、カメラアイコンのそばに対応する映像が小さく表示される。右下には「1F」の様に現在の選択している場所が表示され、右の三角をタップすることで監視対象の場所がプルダウン/アップでリスト表示され、所望の監視場所をタップすることでマップを切り替えることができる。またこのとき、マップ切り替えに伴って、サムネイル表示領域502にはその監視場所に設置されたカメラの映像が画面上部に来るようにジャンプさせたり、その監視場所に設置されたカメラの映像のみを表示させたりする様にしてもよい。
 ここで、カメラ映像を映像配置領域501に配置する操作について説明する。
 サムネイル表示領域502の映像を配置する場合には、まず、例えば映像“1”をタッチまたはホールドし、配置したい映像を選択する。次に、矢印の様に、映像配置領域501の例えば左上の領域までドラッグしタッチを離す。すると、映像”1”が映像配置領域501の左上の領域に設定され、再生される。
 また、マップ表示領域503の映像を配置する場合には、まず、例えば映像“4”に対応するカメラアイコンまたは小さな映像“4”をタッチまたはホールドし、配置したい映像を選択する。次に、矢印の様に、映像配置領域501の例えば中段左の領域までドラッグしタッチを離す。すると、映像“4”が映像配置領域501の左上の領域に設定され、再生される。
 また、映像配置領域501の所望の領域をホールドしてメニューをポップアップ表示させ、そこから所望のカメラの映像をタッチで選択することによっても、映像配置領域501に映像を配置することができる。
 また、配置した映像“1”を解除する際には、映像配置領域501の配置した映像“1”をタッチまたはホールドし映像配置領域501の枠外へドラッグするか、映像配置領域501の配置した映像”1”をホールドしてメニュー表示させ、削除を選択することで、映像“1”の配置設定を解除することができ、また、他の映像である例えば映像“2”を上述の操作により映像“1”が配置されている左上の領域に再配置することで、映像“1”の配置が解除されて映像“2”が配置される。
 次に、図3,4を用いて、映像配置領域501の領域設定を変更する操作について、映像配置領域501の左上の4領域を結合および結合解除する場合を例に説明する。
 まず、図3において、上述した操作により、映像配置領域501の左上の領域に映像“1”を配置する。次に、配置した映像“1”をタップまたはホールド操作により選択状態にしておき、映像“1”の右下の枠部分をタッチし、所望の拡大したい位置までドラッグして、タッチを離す。すると、タッチを離した位置から一番近い点線の枠まで映像“1”の表示領域が拡大され、本実施例だと映像配置領域501の左上の4領域が結合されて、図4に示す様に大きな表示領域が設定される。
 また、映像が配置されていない状態において、例えば中段左の領域をタッチし、右上の領域までドラッグすることで左上の4領域が選択状態になり、タッチを離し、さらにホールド操作することでメニューを表示させ、結合を選択することで、左上の4領域を結合することができる。また、結合したい領域に映像が配置されている場合でもこの操作が可能なようにしてもよい。その場合、その複数領域に映像が1つだけ配置されていたらその映像を結合した領域に自動で配置されるようにし、複数配置されていたら例えば1番左上に配置されている映像を結合した領域に自動で配置されるようにしてもよいし、結合したら配置をリセットするようにしてもよい。
 また、結合したい領域に映像が配置されていない状態においても同様の操作により領域を拡大することができる。他にも、例えば、映像配置領域501の左上の4領域の点線の交点をタップまたはホールドしてメニュー表示させて選択することによっても、左上の4領域を結合して図4のような大きな領域とすることができる。4領域の点線の交点でなくても、2領域間の点線をタップまたはホールドしてメニュー表示させて選択することによって結合可能である。
(領域の結合を解除する場合)
 一方、拡大した領域を縮小または結合解除する場合には、上記操作の逆の操作をすればよい。拡大した領域をタップまたはホールド操作により選択状態にしておき、領域の右下の枠部分をタッチし、所望の縮小したい位置までドラッグして、タッチを離す。すると、タッチを離した位置から一番近い点線の枠までの表示領域が縮小され、本実施例だと映像配置領域501の左上の4領域の結合が解除されて、図3に示す様な表示領域が設定される。また、縮小または結合解除したい表示領域をホールドしてメニューをポップアップ表示させ、縮小または結合解除の項目を選択することでも可能である。
 次に、図5,6を用いて、既に配置した映像を別の領域へ移動させる操作について、移動先に映像が配置されている場合とされていない場合に分けて説明する。図5は操作画面における映像の移動操作の様子を示し、図6は操作画面における映像の移動操作後の様子を示す。
(移動先に映像が配置されている場合)
 まず、図5において、上述した操作により、映像配置領域501の左上の領域に映像“1”、その下の領域に映像“4”を配置する。次に、配置した映像“1”をタップまたはホールド操作により選択状態にしておき、その下の領域へドラッグして、タッチを離す。しかし、ここには映像“4”が既に配置されているため、映像“4”は映像“1”が配置されていた右上の領域へ移動し、映像“1”は映像“4”が配置されていた領域へ配置され、映像“1”および映像“4”は図6に示す様に配置される。すなわち、移動先に既に別の映像が配置されている場合には、お互いの位置が入れ替わることになる。
(移動先に映像が配置されていない場合)
 まず、図5において、上述した操作により、映像配置領域501の中央上の領域に映像“3”を配置する。次に、配置した映像“3”をタップまたはホールド操作により選択状態にしておき、その右下の領域へドラッグして、タッチを離す。ここには映像が配置されていないため、映像“3”はその右下の領域へ移動し、映像“3”は図6に示す様に配置される。すなわち、移動先に既に別の映像が配置されていない場合には、移動先の領域に映像が配置され、映像が元々配置された領域からは映像の配置設定が削除される。
 また、サムネイルまたはカメラアイコンもしくは小さな映像からドラッグして映像配置領域501に映像を配置する際に、配置先に既に別の映像が配置されていた場合について、図5,7を用いて説明する。
 まず、図5において、上述した操作により、映像配置領域501の中央の領域に映像“2”を配置する。次に、サムネイル映像“5”をタッチまたはホールドし、配置したい映像を選択し、映像配置領域501の中央の領域までドラッグし、タッチを離す。しかし、そこには既に映像“2”が配置してあるが、映像“2”は削除され、映像“5”が配置され、映像“5”は図6に示す様に配置される。すなわち、配置先に既に別の映像が配置されていた場合には、既に配置されていた映像は後から配置される映像で上書きされる。
 なお、これらの操作は、拡大した領域に対して操作した場合も同様であるが、既に拡大した領域に配置してあった映像が移動する先の領域のサイズは拡大するわけではなく、移動先のサイズが変わることはない。しかし、ユーザーの希望に応じて、拡大した領域の映像を選択してドラッグすることで、移動先に同サイズで移動し、拡大した領域の映像が元々あった場所には、移動先の領域に配置してあった映像が元々の移動前のサイズで表示される様にしてもよい(入れ替わり)。
 図7は、本発明の映像監視システムの操作画面で、縦型の操作画面における映像配置の操作の様子を示す図であり、図2~4に示す横型の操作画面を縦型に配置した物である。主な違いは、サムネイル表示領域502のサムネイル映像が横一列に配置されて左右のドラッグまたはスワイプ操作によりサムネイル映像を横にスライドさせる点である。その他の図2~4を用いて説明した操作については同様に操作可能である。
 以上、カメラからのリアルタイム映像を表示する場合について説明したが、記録装置2に記録された映像を選択して配置することも可能である。この場合、図1において、操作端末3を用いて所望の記録装置の映像を指定することで、操作端末3から記録装置2へ映像取得要求が送信され、記録装置は指定された映像が操作端末3および/または表示装置4へ送信される。図2においては、メニューボタン504により記録映像検索の項目を選択することで、サムネイル表示領域502に記録装置2の情報と映像を特定する項目(日時、カメラ名など)が表示される。そして、これに基づいて映像を指定すると、候補映像情報がサムネイルとともに表示され、カメラ映像を配置する場合と同様の操作で表示映像を設定することができる。
 また、マップ表示領域503には指定した映像に対応したフロアや建物のマップが自動で表示されるようにしてもよく、その場合、周辺のカメラの映像を選択したい場合に有効である。
 以上、記録装置2に記録された映像を選択する場合について説明したが、カメラ1で取得したリアルタイム映像と記録装置2に記録された記録映像を同時に表示する様にしてもよい。この場合、メニューボタン504によりリアルタイム映像選択画面と記録映像選択画面を切り替えながら、それぞれ上述した配置操作により表示設定することができる。これにより、現在の映像と過去の映像を同時に観たい場合に容易に見比べることができる。
 以上の操作により、操作端末3を用いて表示設定が決定され、この設定に応じて表示装置4に映像が表示される。これにより、タッチパネル式の操作端末を用いた映像監視インターフェースにおいて、大画面表示装置に所望の表示映像を設定する操作を、より感覚的に簡易に操作することができる。
 なお、本発明は上記各実施形態に限定されるものではない。例えば、上記実施形態では、タッチパネルを用いた携帯端末の場合で説明したが、これに限定されるものではなく、この他にも固定されたタッチパネル式の操作端末であってもよいし、マウスを用いて操作する端末であってもよい。また、操作端末自体に表示させる映像の配置を設定するものであってもよい。また、表示装置はテレビやPC用のモニタであってもよく、この場合、操作端末から赤外線やインターネットを用いて制御信号が送信される。
 要するに本発明は、上記各実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記各実施形態に開示されている複数の構成要素の適宜な組み合せにより種々の発明を形成できる。例えば、各実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに、異なる実施形態に亘る構成要素を適宜組み合せてもよい。
 本発明は、取得した映像を表示する映像表示システムにおいて、特にタッチパネルを用いた操作端末などに適用可能である。
1:カメラ、2:記録装置、3:操作端末、301:通信部、302:制御部、303:記憶部、303A:ジェスチャ情報、303B:プログラム、304:タッチパネル、304A:タッチセンサ、304B:表示部、305:入力部、501:映像配置領域、502:サムネイル表示領域、503:マップ表示領域、504:メニューボタン。

Claims (16)

  1. 映像を取得するカメラと、
    前記カメラで取得した映像を記録する記録装置と、
    映像を表示する表示装置と、
    表示面に操作画面を表示する表示手段と、前記表示手段の上に配置されタッチを伴う操作を検出するタッチパネルと、検出した操作を判定して制御する制御手段と、を備える操作端末と、がそれぞれネットワークで接続され、
    前記操作端末は、前記表示装置に表示する映像の配置を設定するための映像配置領域と、取得した前記映像に関する情報を表示する映像表示領域とを表示し、前記映像情報表示領域の映像に関する情報へのタッチを伴う所定の操作による選択と前記映像配置領域の所定の位置へのドラッグ操作を検出すると、前記映像に関する情報に対応する前記映像を前記映像配置領域の所定の位置へ配置し、
    前記表示装置は、前記操作端末により配置された前記映像を、前記映像配置領域の所定の位置に対応する位置に前記映像に関する情報に対応する映像を表示することを特徴とする映像表示システム。
  2. 映像を取得するカメラと、
    前記カメラで取得した映像を記録する記録装置と、
    映像を表示する表示装置と、
    表示面に操作画面を表示する表示手段と、前記表示手段の上に配置されタッチを伴う操作を検出するタッチパネルと、検出した操作を判定して制御する制御手段と、を備える操作端末と、がそれぞれネットワークで接続され、
    前記操作端末は、前記表示装置に表示する映像の配置を設定するための映像配置領域と、前記カメラの設置場所の地図情報をカメラアイコンとともに表示するマップ領域とを表示し、前記マップ領域のカメラアイコンへのタッチを伴う所定の操作による選択と前記映像配置領域の所定の位置へのドラッグ操作を検出すると、前記映像に関する情報に対応する映像を前記映像配置領域の所定の位置へ配置し、
    前記表示装置は、前記操作端末により配置された映像を、前記映像配置領域の所定の位置に対応する位置に前記映像に関する情報に対応する映像を表示することを特徴とする映像表示システム。
  3. 前記操作端末は、前記映像配置領域に配置された映像へのタッチを伴う操作による選択と前記映像配置領域の他の位置へのドラッグ操作を検出すると、前記選択された映像の移動先に既に映像が配置されている場合には、前記選択された映像と前記移動先に既に配置されている映像の位置を入れ替えて配置し、前記選択された映像の移動先に映像が配置されていない場合には、移動先の位置に前選択された記映像を配置することを特徴とする請求項1または請求項2に記載の映像表示システム。
  4. 映像を取得するカメラと、
    前記カメラで取得した映像を記録する記録装置と、
    映像を表示する表示装置と、
    表示面に操作画面を表示する表示手段と、前記表示手段の上に配置されタッチを伴う操作を検出するタッチパネルと、検出した操作を判定して制御する制御手段と、を備える操作端末と、がそれぞれネットワークで接続され、
    前記操作端末は、前記表示装置に表示する映像の配置を設定するための複数領域に分割された映像配置領域を表示し、タッチを伴う所定の操作を検出することで分割された複数の領域を統合してより大きな領域に変更することを特徴とする映像表示システム。
  5. 表示面に操作画面を表示する表示手段と、前記表示手段の上に配置されタッチを伴う操作を検出するタッチパネルと、検出した操作を判定して制御する制御手段と、を備え、
    映像の配置を設定するための映像配置領域と、映像に関する情報を表示する映像表示領域とを表示し、前記映像情報表示領域の映像に関する情報へのタッチを伴う所定の操作による選択と前記映像配置領域の所定の位置へのドラッグ操作を検出すると、前記映像に関する情報に対応する前記映像を前記映像配置領域の所定の位置へ配置することを特徴とする操作端末。
  6. 表示面に操作画面を表示する表示手段と、前記表示手段の上に配置されタッチを伴う操作を検出するタッチパネルと、検出した操作を判定して制御する制御手段と、を備え、
    映像の配置を設定するための映像配置領域と、カメラの設置場所の地図情報をカメラアイコンとともに表示するマップ領域とを表示し、前記マップ領域のカメラアイコンへのタッチを伴う所定の操作による選択と前記映像配置領域の所定の位置へのドラッグ操作を検出すると、前記映像に関する情報に対応する映像を前記映像配置領域の所定の位置へ配置することを特徴とする操作端末。
  7. 前記映像配置領域に配置された映像へのタッチを伴う操作による選択と前記映像配置領域の他の位置へのドラッグ操作を検出すると、前記選択された映像の移動先に既に映像が配置されている場合には、前記選択された映像と前記移動先に既に配置されている映像の位置を入れ替えて配置し、前記選択された映像の移動先に映像が配置されていない場合には、移動先の位置に前選択された記映像を配置することを特徴とする請求項5または請求項6に記載の操作端末。
  8. 表示面に操作画面を表示する表示手段と、前記表示手段の上に配置されタッチを伴う操作を検出するタッチパネルと、検出した操作を判定して制御する制御手段と、を備え、
    前記表示装置に表示する映像の配置を設定するための複数領域に分割された映像配置領域を表示し、タッチを伴う所定の操作を検出することで分割された複数の領域を統合してより大きな領域に変更することを特徴とする操作端末。
  9. 表示面に操作画面を表示する表示手段と、前記表示手段の上に配置されタッチを伴う操作を検出するタッチパネルと、検出した操作を判定して制御する制御手段と、を備える操作端末において、
    映像の配置を設定するための映像配置領域と、映像に関する情報を表示する映像表示領域とを表示し、前記映像情報表示領域の映像に関する情報へのタッチを伴う所定の操作による選択と前記映像配置領域の所定の位置へのドラッグ操作を検出すると、前記映像に関する情報に対応する前記映像を前記映像配置領域の所定の位置へ配置することを特徴とする操作方法。
  10. 表示面に操作画面を表示する表示手段と、前記表示手段の上に配置されタッチを伴う操作を検出するタッチパネルと、検出した操作を判定して制御する制御手段と、を備える操作端末において、
    映像の配置を設定するための映像配置領域と、カメラの設置場所の地図情報をカメラアイコンとともに表示するマップ領域とを表示し、前記マップ領域のカメラアイコンへのタッチを伴う所定の操作による選択と前記映像配置領域の所定の位置へのドラッグ操作を検出すると、前記映像に関する情報に対応する映像を前記映像配置領域の所定の位置へ配置することを特徴とする操作方法。
  11. 前記映像配置領域に配置された映像へのタッチを伴う操作による選択と前記映像配置領域の他の位置へのドラッグ操作を検出すると、前記選択された映像の移動先に既に映像が配置されている場合には、前記選択された映像と前記移動先に既に配置されている映像の位置を入れ替えて配置し、前記選択された映像の移動先に映像が配置されていない場合には、移動先の位置に前選択された記映像を配置することを特徴とする請求項9または請求項10に記載の操作方法。
  12. 表示面に操作画面を表示する表示手段と、前記表示手段の上に配置されタッチを伴う操作を検出するタッチパネルと、検出した操作を判定して制御する制御手段と、を備える操作端末において、
    映像の配置を設定するための複数領域に分割された映像配置領域を表示し、タッチを伴う所定の操作を検出することで分割された複数の領域を統合してより大きな領域に変更することを特徴とする操作方法。
  13. 表示面に操作画面を表示する表示手段と、前記表示手段の上に配置されタッチを伴う操作を検出するタッチパネルと、を備えるコンピュータに、
    映像の配置を設定するための映像配置領域と、映像に関する情報を表示する映像表示領域とを表示させる表示処理と、前記映像情報表示領域の映像に関する情報へのタッチを伴う所定の操作による選択と前記映像配置領域の所定の位置へのドラッグ操作を検出する選択操作検出処理と、前記操作検出処理を受けて前記映像に関する情報に対応する前記映像を前記映像配置領域の所定の位置へ配置する配置処理と、を実行させることを特徴とするプログラム。
  14. 表示面に操作画面を表示する表示手段と、前記表示手段の上に配置されタッチを伴う操作を検出するタッチパネルと、を備えるコンピュータに、
    映像の配置を設定するための映像配置領域と、カメラの設置場所の地図情報をカメラアイコンとともに表示するマップ領域とを表示する表示処理と、前記マップ領域のカメラアイコンへのタッチを伴う所定の操作による選択と前記映像配置領域の所定の位置へのドラッグ操作を検出する選択操作検出処理と、前記選択操作検出処理を受けて前記映像に関する情報に対応する映像を前記映像配置領域の所定の位置へ配置する配置処理と、を実行させることを特徴とするプログラム。
  15. 前記映像配置領域に配置された映像へのタッチを伴う操作による選択と前記映像配置領域の他の位置へのドラッグ操作を検出する移動操作検出処理と、前記移動操作検出処理を受けて、前記選択された映像の移動先に既に映像が配置されている場合には、前記選択された映像と前記移動先に既に配置されている映像の位置を入れ替えて配置し、前記選択された映像の移動先に映像が配置されていない場合には、移動先の位置に前選択された記映像を配置する配置変更処理と、を前記コンピュータに実行させることを特徴とする請求項13または請求項14に記載のプログラム。
  16. 表示面に操作画面を表示する表示手段と、前記表示手段の上に配置されタッチを伴う操作を検出するタッチパネルと、を備えるコンピュータに、
    映像の配置を設定するための複数領域に分割された映像配置領域を表示する表示処理と、タッチを伴う所定の操作を検出する変更操作検出処理と、前記変更操作検出処理を受けて分割された複数の領域を統合してより大きな領域に変更する領域変更処理と、を実行させることを特徴とするプログラム。
PCT/JP2013/060325 2012-09-26 2013-04-04 映像表示システム、操作端末、操作方法およびプログラム WO2014050180A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014538213A JP6254945B2 (ja) 2012-09-26 2013-04-04 映像表示システム、操作端末、操作方法およびプログラム

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2012-212459 2012-09-26
JP2012212459 2012-09-26

Publications (1)

Publication Number Publication Date
WO2014050180A1 true WO2014050180A1 (ja) 2014-04-03

Family

ID=50387602

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2013/060325 WO2014050180A1 (ja) 2012-09-26 2013-04-04 映像表示システム、操作端末、操作方法およびプログラム

Country Status (2)

Country Link
JP (1) JP6254945B2 (ja)
WO (1) WO2014050180A1 (ja)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014171054A (ja) * 2013-03-01 2014-09-18 Toa Corp 表示装置、表示装置を有する監視システム、および表示制御プログラム
JP2015226089A (ja) * 2014-05-26 2015-12-14 株式会社日立国際電気 アプリケーション管理システム
WO2016157330A1 (ja) * 2015-03-27 2016-10-06 日本電気株式会社 モバイル監視装置、プログラム、及び制御方法
US11963477B2 (en) 2019-06-24 2024-04-23 Grimme Landmaschinenfabrik Gmbh & Co. Kg Method for observing working processes of an agricultural machine, digital video system and agricultural machine

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6559759B2 (ja) * 2017-12-06 2019-08-14 三和コンピュータ株式会社 監視装置および監視システム
JP7276213B2 (ja) 2020-03-18 2023-05-18 株式会社デンソー センサ装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000092483A (ja) * 1998-09-17 2000-03-31 Toshiba Corp 監視画像表示装置および監視画像表示方法と監視画像表示装置を動作させるための記録媒体
JP2009017312A (ja) * 2007-07-05 2009-01-22 Canon Marketing Japan Inc 画像データ表示指示装置及び画像データ表示制御装置
JP2009055180A (ja) * 2007-08-24 2009-03-12 Hitachi Kokusai Electric Inc 監視カメラシステム
JP2010161679A (ja) * 2009-01-09 2010-07-22 Murata Machinery Ltd 画像処理装置及び画像処理装置のプログラム
JP2011055423A (ja) * 2009-09-04 2011-03-17 Hitachi Kokusai Electric Inc 監視用cctvシステム

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5282627B2 (ja) * 2009-03-30 2013-09-04 ソニー株式会社 電子機器、表示制御方法およびプログラム
JPWO2011074149A1 (ja) * 2009-12-14 2013-04-25 パナソニック株式会社 コンテンツ再生装置、コンテンツ再生方法、プログラム及び記録媒体

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000092483A (ja) * 1998-09-17 2000-03-31 Toshiba Corp 監視画像表示装置および監視画像表示方法と監視画像表示装置を動作させるための記録媒体
JP2009017312A (ja) * 2007-07-05 2009-01-22 Canon Marketing Japan Inc 画像データ表示指示装置及び画像データ表示制御装置
JP2009055180A (ja) * 2007-08-24 2009-03-12 Hitachi Kokusai Electric Inc 監視カメラシステム
JP2010161679A (ja) * 2009-01-09 2010-07-22 Murata Machinery Ltd 画像処理装置及び画像処理装置のプログラム
JP2011055423A (ja) * 2009-09-04 2011-03-17 Hitachi Kokusai Electric Inc 監視用cctvシステム

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014171054A (ja) * 2013-03-01 2014-09-18 Toa Corp 表示装置、表示装置を有する監視システム、および表示制御プログラム
JP2015226089A (ja) * 2014-05-26 2015-12-14 株式会社日立国際電気 アプリケーション管理システム
WO2016157330A1 (ja) * 2015-03-27 2016-10-06 日本電気株式会社 モバイル監視装置、プログラム、及び制御方法
JP6229816B2 (ja) * 2015-03-27 2017-11-15 日本電気株式会社 モバイル監視装置、プログラム、及び制御方法
US10192128B2 (en) 2015-03-27 2019-01-29 Nec Corporation Mobile surveillance apparatus, program, and control method
US10650263B2 (en) 2015-03-27 2020-05-12 Nec Corporation Mobile surveillance apparatus, program, and control method
US10769468B2 (en) 2015-03-27 2020-09-08 Nec Corporation Mobile surveillance apparatus, program, and control method
US11144776B2 (en) 2015-03-27 2021-10-12 Nec Corporation Mobile surveillance apparatus, program, and control method
US11644968B2 (en) 2015-03-27 2023-05-09 Nec Corporation Mobile surveillance apparatus, program, and control method
US11963477B2 (en) 2019-06-24 2024-04-23 Grimme Landmaschinenfabrik Gmbh & Co. Kg Method for observing working processes of an agricultural machine, digital video system and agricultural machine

Also Published As

Publication number Publication date
JP6254945B2 (ja) 2017-12-27
JPWO2014050180A1 (ja) 2016-08-22

Similar Documents

Publication Publication Date Title
JP6254945B2 (ja) 映像表示システム、操作端末、操作方法およびプログラム
US11550420B2 (en) Quick review of captured image data
US8671344B2 (en) Information display device
JP6362207B2 (ja) 映像表示システム、操作端末、操作方法およびプログラム
US20190212901A1 (en) Manipulation of content on display surfaces via augmented reality
KR20140147059A (ko) 사용자 단말 장치 및 그 홈 네트워크 관리 방법
JP6229816B2 (ja) モバイル監視装置、プログラム、及び制御方法
CN107113477A (zh) 动态图像再现方法、动态图像再现设备和其中存储动态图像再现程序的计算机可读存储介质
KR20150032066A (ko) 화면 미러링 방법 및 그에 따른 소스 기기
CN103777882A (zh) 基于触摸屏的多项选中方法及装置
JP4943899B2 (ja) 画像表示方法及び画像表示プログラム
TWI578798B (zh) 監控視訊顯示方法及電腦程式產品
WO2015040732A1 (ja) 映像監視システム及び映像表示方法
JP3989473B2 (ja) 画像表示方法及び画像表示プログラム
US9548894B2 (en) Proximity based cross-screen experience App framework for use between an industrial automation console server and smart mobile devices
JP6449613B2 (ja) ガス供給エリア監視カメラシステム
WO2016132864A1 (ja) 映像監視システムおよび映像監視方法
KR20180011608A (ko) 검색 장치
JP6484405B2 (ja) アプリケーション管理システム
WO2013145448A1 (ja) 操作端末、操作方法およびプログラム
TWI395485B (zh) 監控系統與畫面顯示方法
KR20060016527A (ko) 디지털 비디오 레코더에서 분할 화면에 표시되는 영상의이동 방법
JP6068137B2 (ja) 画像表示装置、画像表示方法及び画像表示用プログラム
JP6515975B2 (ja) モバイル監視装置、モバイル監視システム、プログラム、及び制御方法
JP7046866B2 (ja) プログラム及び画像表示方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 13841303

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2014538213

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 13841303

Country of ref document: EP

Kind code of ref document: A1