WO2010125999A1 - 表示装置、表示方法及びそれを実行するためのプログラム - Google Patents

表示装置、表示方法及びそれを実行するためのプログラム Download PDF

Info

Publication number
WO2010125999A1
WO2010125999A1 PCT/JP2010/057354 JP2010057354W WO2010125999A1 WO 2010125999 A1 WO2010125999 A1 WO 2010125999A1 JP 2010057354 W JP2010057354 W JP 2010057354W WO 2010125999 A1 WO2010125999 A1 WO 2010125999A1
Authority
WO
WIPO (PCT)
Prior art keywords
video
display
data
display device
quality
Prior art date
Application number
PCT/JP2010/057354
Other languages
English (en)
French (fr)
Inventor
啓子 綿貫
育雄 芥子
Original Assignee
シャープ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by シャープ株式会社 filed Critical シャープ株式会社
Priority to CN201080028981.0A priority Critical patent/CN102484697B/zh
Priority to US13/266,656 priority patent/US20120044254A1/en
Priority to JP2011511389A priority patent/JP5133454B2/ja
Publication of WO2010125999A1 publication Critical patent/WO2010125999A1/ja

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/4424Monitoring of the internal components or processes of the client device, e.g. CPU or memory load, processing speed, timer, counter or percentage of the hard disk space used
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8126Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts

Definitions

  • the present invention relates to a video thumbnail list display, and relates to a display device, a display method, and a program for executing the same for displaying a thumbnail list without burdening a device and without stressing a user when displaying a plurality of videos. .
  • a thumbnail display is often used as a means for efficiently presenting and managing a large number of videos recorded on a recording medium such as an SD memory card or HDD (Hard-Disk Drive).
  • thumbnail refers to a small image representing a video that is displayed instead of the video (usually a reduced image of the original image), and thumbnail display refers to a list display format using multiple video thumbnails (represented reduced images).
  • thumbnails are usually still images, so-called moving image thumbnails that display thumbnails as moving images instead of still images are gradually being seen as the processing capabilities of the devices improve. If the processing capability of the display device is sufficient, it is possible in principle to display all thumbnails as moving images.
  • Patent Document 1 the user's interest level is estimated from the difference in display state of a plurality of videos displayed on the screen, and the priority of the video display quality is determined according to the interest level. It is described that the video data transfer amount or the data amount related to the display process is reduced by changing the video display specification based on the priority.
  • FIG. 16 is a schematic configuration diagram showing the video display processing system of Patent Document 1.
  • This video information processing system communicates various data by mutually connecting a video input unit 301 that captures video into the system, a display device 200 that displays the captured video, and the video input unit 301 and the display device 200.
  • the display device 200 includes a transmission / reception unit 201, a video display unit 204, a video display control unit 205, a display state management table 206, and an interest level measurement unit 207.
  • the video display control unit 205 stores the display status data of each displayed video in the display status management table 206.
  • the interest level measurement unit 207 estimates the user interest level of each video based on the display state data.
  • the video display control unit 205 changes the display specifications of each video to display a video with high interest level with high display quality and a video with low interest level with low display quality.
  • the data is transferred from the unit 201 via the network 300.
  • the video input unit 301 controls the input video data to be compressed based on the changed display specification, and transmits the video data to the display device 200 via the network 300.
  • Patent Document 1 the display specification of each video is changed from the video display state on the screen, the video data is compressed by the video input unit 301, and the transfer amount of the video data or the data amount related to the display processing is set. It is characterized by mitigation.
  • Patent Document 2 in the video on demand device, when the telephone function is executed while the video on demand function is being executed, the program playback is temporarily stopped and the telephone function prevents the program from being made unviewable. It is described that after the telephone function is finished, the program pause is canceled and playback is resumed from the stop position.
  • Patent Document 2 when viewing a video, there is a case where an interruption occurs in the viewing due to an incoming call or an incoming mail. As a method for dealing with these interruptions, there is an interruption or termination of the viewing of the video. However, there is a need to talk with friends over the phone while watching the thumbnail display, and even when an incoming call is received, it is required to play the video without interrupting or ending it.
  • Patent Document 1 In the technique disclosed in Patent Document 1, in a system in which a display device is connected to a communication network and data is transmitted via the network, reception of a video stream or the like occurs while the video data is being viewed and is displayed on the display device. It is possible that the number of images will increase. If this happens, a load is applied to the device for processing these additional videos, which may affect the video display currently being viewed, but Patent Document 1 does not assume such a situation.
  • Patent Document 1 the display specification of the video is determined on the display device side. However, the specification is transferred to the video input unit via the network, and after the video data is compressed, it is again sent to the display device via the network. Therefore, it is required that only the processing on the display device side be performed.
  • the present invention has been made in view of the above problems, and even if external data different from the currently viewed video data is input, the video display of the currently viewed multiple thumbnails is interrupted or terminated.
  • a display device capable of continuing reproduction, a display method, and a program for executing the display method.
  • the present invention is a display device that controls and displays the display quality of a plurality of video data, wherein the data detection means detects input of data different from the displayed video data, and the separate data is the display Load estimation means for estimating a load given to the processing capability of the device, and when the load exceeds the processing capability of the display device, the quality of a plurality of videos displayed on the display device is changed so that display processing can be continued Video display control means.
  • the separate data is external data that is data other than video.
  • the display device further includes processing delay means for delaying processing of external data by a predetermined time when the data detecting means detects reception of external data.
  • the different data is another video data that is additionally displayed on the display video data.
  • the display device further includes processing delay means for delaying processing of the separate video data by a predetermined time when the data detecting means detects reception of the separate video data.
  • the present invention is a display device that controls and displays the display quality of a plurality of video data, and is different from video data and video detection means for detecting video data displayed in addition to the display video data.
  • External data detection means for detecting the input of external data that is data
  • load estimation means for estimating the load that additional video data or / and external data gives to the display of a plurality of videos displayed on the display device
  • Video display control means for changing the quality of the displayed video so that the display process can be continued when the load exceeds the processing capacity of the display device.
  • the display delay unit delays the display of the additional video by a predetermined time, and the external data detection unit detects the reception of the external data.
  • a processing delay means for delaying processing of the external data by a predetermined time is further provided.
  • the display device of the present invention is characterized in that the video display control means changes display quality by switching to real time reproduction, slow reproduction, and skip reproduction according to the load level estimated by the load estimation means. To do.
  • the video display control means simplifies the decoding process and changes the display quality within a range in which image quality degradation can be allowed according to the load level estimated by the load estimation means.
  • the video display control unit may simultaneously switch the display quality of all the videos, or may change the display quality for videos other than the video that the user is paying attention to. Alternatively, the display quality may be changed only for a newly added video.
  • the display device of the present invention is characterized in that the video display control means has a function of notifying the user that the video display quality changes during the delay.
  • the present invention relates to a display method for controlling display quality of a plurality of video data to display on a display device, a data detection step for detecting input of data different from the displayed video data, and the separate data Estimating the load on the processing capacity of the display device, and the quality of a plurality of videos displayed on the display device so that the display process can be continued when the load exceeds the processing capacity of the display device And a video display control step for changing.
  • the separate data is external data that is data other than video.
  • This display method further includes a processing delay step of delaying processing of external data by a predetermined time when reception of external data is detected in the data detection step.
  • the different data is another video data that is additionally displayed on the display video data.
  • the display method further includes a processing delay step of delaying the processing of the separate video data by a predetermined time when the reception of the separate video data is detected in the data detecting step.
  • the present invention also provides a display method for controlling the display quality of a plurality of video data to display on a display device, a video detection step for detecting video data displayed in addition to the display video data, and video data External data detection step for detecting the input of external data that is different from the data, and load estimation for estimating the load that additional video data or / and external data has on the display of a plurality of videos displayed on the display device And a video display control step of changing the quality of the displayed video so that the display process can be continued when the load exceeds the processing capability of the display device.
  • the display delay step of delaying the display of the additional video by a predetermined time and the reception of the external data in the external data detection step are detected.
  • the method further includes a processing delay step of delaying processing of the external data by a predetermined time.
  • the display method of the present invention is characterized in that, in the video display control step, the display quality is changed by switching between real-time playback, slow playback and skip playback according to the load level estimated by the load estimation means. To do.
  • the display method of the present invention is characterized in that, in the video display control step, the decoding process is simplified and the display quality is changed within a range in which image quality deterioration is allowed according to the load level estimated by the load estimation means.
  • the display quality of all the videos may be switched at the same time, or the display quality may be changed for a video other than the video that the user is paying attention to. Alternatively, the display quality may be changed only for a newly added video.
  • the display method of the present invention is characterized in that the video display control step has a function of notifying the user that the video display quality changes during the delay.
  • the present invention is a program for causing a computer to execute the display method.
  • the playback can be continued without interrupting or ending the playback of the plurality of videos currently being viewed. You can operate the equipment without.
  • the display quality of a plurality of videos of the display device in accordance with the reception status of external data and additional videos, it is possible to display a plurality of videos efficiently with respect to the processing capability of the device.
  • the processing of actual external data and additional video is delayed for a predetermined time, and during that time (before the CPU load increases), the video display quality of the display device is changed to meet the processing capability of the device. Enables multiple video display.
  • multiple video playback is switched to real-time (real-time) playback, slow playback, or skip playback, so that multiple videos that match the processing capabilities of the device. Enable display.
  • a display device 1 configured by applying to a communication device such as a mobile phone with a display device will be described as an example.
  • the configuration of the present application is shown in FIG.
  • the display device 1 includes a display quality control unit 2, an external data output unit 3, a video display unit 4, and a video storage unit 5.
  • the display quality control unit 2 includes an external data detection unit 6, a load estimation unit 7, and a video display control unit 8. Based on this figure, each part which comprises the display apparatus 1 is demonstrated.
  • the display device 1 displays the thumbnails displayed as a list in a so-called moving image thumbnail display, for example, when external data such as a phone call or e-mail different from the display video data is input.
  • the display quality control unit (display quality control means) 2 is provided so that a plurality of images displayed on the screen can be continuously displayed without being interrupted or terminated.
  • the function of the display quality control unit 2 will be described in detail.
  • the external data detection unit (external data detection means) 6 detects that external data such as an incoming call or mail is input from the network 10 to the display device 1 via the communication function. For example, when an incoming call is detected, an incoming call detection signal is sent to the load estimation unit 7.
  • the load estimation unit (load estimation means) 7 estimates the load level that the processing related to the external data gives to the display of a plurality of videos.
  • the load at this time is estimated to the CPU (not shown) of the display device 1 estimated from the processing amount required for displaying a plurality of images, the processing amount of external data, and the remaining battery level of the display device 1. Total load.
  • the video display control unit (video display control unit) 8 determines the display quality of all videos displayed on the display device 1 according to the load level estimated by the load estimation unit (load estimation unit) 7, and displays the video.
  • the unit 4 controls playback of each thumbnail video displayed on the screen (including decoding processing in the case of encoded data) and arrangement of thumbnails on the screen. For example, when the load level increases, the frame rate and resolution of the video are reduced, the degree of compression is increased, and the decoding process is simplified.
  • As a decoding process simplification method there are motion compensation simplification, deblocking filter omission, frame skip, and the like.
  • the video display quality is determined to be real time (real time) playback, slow playback, or skip playback, The arrangement is controlled. Details will be described later.
  • the video display control unit (video display control means) 8 may change the display quality only for videos other than the video that the user is paying attention to.
  • the video focused on by the user is, for example, a video on which a cursor or the like is placed on the display device 1, a video displayed at the center of the screen of the display device 1, or a video selected by a user operation.
  • the video display unit (video display means) 4 is constituted by, for example, a liquid crystal panel, and is distributed via the video stored in the video storage unit 5 or a video in an external memory connected to the display device 1 or a network 10 (not shown).
  • the image is displayed as a thumbnail with the image quality and arrangement determined by the image display control unit 8.
  • FIG. 2 is a diagram illustrating an example in which a plurality of videos (thumbnails) are displayed on the video display unit 4 of the display device 1. In this example, four images 11 are displayed. These multiple images 11 continue to be displayed without disappearing when an incoming call or mail is received.
  • External data output unit (external data output means) 3 executes processing of external data detected by external data detection unit 6, such as ringing a telephone call bell.
  • thumbnail video display control function will be described.
  • one video is reproduced or a still image such as a three-dimensional video or a photo is displayed. Since this may occur, it goes without saying that the function of this embodiment can be applied even during the display (reproduction) of such a video. This is the same for the other embodiments.
  • FIG. 3 is a flowchart showing a processing procedure of the display device 1 according to the first embodiment. It is assumed that the user is browsing a plurality of videos (thumbnails) of the display example shown in FIG. At this time, the external data detection unit 6 is in a detection standby state (step S1: subsequent steps are omitted). When the external data detection unit 6 detects external data such as an incoming call (YES in S1), it sends an incoming detection signal to the load estimation unit 7.
  • step S1 subsequent steps are omitted
  • the load estimation unit 7 estimates the load level that the process related to the external data gives to the display of a plurality of videos on the display device 1 (S2).
  • the video display control unit 8 determines the display quality of the video in accordance with the load level estimated by the load estimation unit 7 and controls the video displayed on the video display unit 4 (S3).
  • the video display unit 4 displays a plurality of videos with the video quality controlled by the video display control unit 8 (S4), and ends the process.
  • the video display control unit (video display control unit) 8 determines the display quality of the video according to the load level estimated by the load estimation unit (load estimation unit) 7, and each thumbnail displayed on the screen by the video display unit. Control playback of video (including decoding processing in the case of encoded data) and arrangement of thumbnails on the screen.
  • the video display quality is determined as one of real-time (real-time) playback, slow playback, and skip playback.
  • the CPU of the display device 1 needs to process both the display of the plurality of images 11 and the telephone function. Further, when the display device 1 is battery-driven like a mobile phone, the CPU load is also affected by the battery capacity.
  • the load estimation unit 7 determines the display device based on the amount of processing required to display a plurality of currently displayed images, the amount of processing required to execute external data, the remaining battery level of the display device, and the like. The load level applied to one CPU is estimated.
  • the video display control unit (video display control means) 8 includes a display quality management table 15 as shown in FIG. 4, and the video quality level according to the load level 16 estimated by the load estimation unit (load estimation means) 7. 17 is determined as one of real time (real time) playback, slow playback, and skip playback.
  • low load refers to a case where it is determined that the load level is small and thus the influence on the video playback is small. Therefore, real-time (real time) without changing the quality of the video that the user has been browsing until then. Reproduce.
  • Low load means that the video playback is judged to have a moderate impact. Therefore, the video quality previously viewed by the user is controlled so that it is played back at a slow speed, for example, half speed.
  • Low load refers to a case where it is determined that the effect on the playback of multiple images is large. In this case, skip playback of the quality of the video that the user has been browsing so far, for example, playback of only I pictures. Control.
  • the video quality is changed in the order of real-time playback ⁇ slow playback ⁇ skip playback as the load level increases. This is a subjective evaluation experiment of viewers for multiple video playback. As a result, the user's tolerance is based on this order.
  • the video quality type and the change order are not limited to this.
  • the display control function when external data different from the video data being viewed is input has been described.
  • the input of the external data is terminated (for example, the telephone is disconnected)
  • the external data detection unit 6 shown in FIG. 1 detects and the video is displayed with the optimal video quality at that time (that is, the display quality before the external data is input) according to the flowchart of FIG. Yes. This is the same for the other embodiments.
  • the processing load on the display device is estimated, and the display quality of the video is changed to reduce the processing load on the display device. Allows playback to continue to be displayed without interruption or termination.
  • the configuration of the display device of the second embodiment is shown in FIG.
  • the display device 21 includes a display quality control unit 22, an external data output unit 23, a video display unit 24, and a video storage unit 25.
  • the display quality control unit 22 includes an external data detection unit 26, a load estimation unit 27, a video display control unit 28, and a processing delay unit 29.
  • the display device 21 of the second embodiment is characterized in that the display quality control unit 22 includes a processing delay unit (processing delay means) 29 in addition to the configuration of the first embodiment.
  • processing delay unit processing delay means
  • the external data detection unit (external data detection means) 26 detects the input of external data such as incoming calls and mails to the display device 21 via the communication function. For example, when an incoming call is detected, an incoming call detection signal is sent to the processing delay unit 29 and the load estimation unit 27.
  • the processing delay unit (processing delay means) 29 delays processing of the detected external data, for example, telephone incoming call processing (ringing a ringing tone, etc.) for a predetermined time.
  • the delay time may be set in advance, or may be delayed until a video is displayed on the video display unit 24 shown below.
  • the load estimation unit (load estimation means) 27 estimates the load level that the processing related to the external data gives to the display of a plurality of videos.
  • the load at this time is the total load on the CPU of the display device 21 estimated from the processing amount required for displaying a plurality of images, the processing amount of external data, and the remaining battery level of the display device 21. .
  • the video display control unit (video display control means) 28 determines the display quality of the video according to the load level estimated by the load estimation unit (load estimation means) 27, and is displayed on the screen by the video display unit 24. Control playback of thumbnail video (including decoding processing in the case of encoded data) and arrangement of thumbnails on the screen. For example, when the load level increases, the frame rate and resolution of the video are reduced, the degree of compression is increased, and the decoding process is simplified. As a decoding process simplification method, there are motion compensation simplification, deblocking filter omission, frame skip, and the like. In this embodiment, according to the load level estimated by the load estimator 27, the video display quality is determined as one of real-time (real time) playback, slow playback, and skip playback, The arrangement is controlled. Details are the same as in the first embodiment.
  • the video display control unit (video display control means) 28 may also have a display timing control function so that all the plurality of videos are simultaneously switched to the display quality after the processing delay.
  • the video display control unit (video display control means) 28 may change the display quality only for videos other than the video that the user is paying attention to.
  • the video focused by the user is, for example, a video on which a cursor or the like is placed on the display device, a video displayed in the center of the screen of the display device, or a video selected by a user operation.
  • the video display control unit (video display control means) 28 may have a function of notifying the user that the video display quality changes during the processing delay. For example, before changing the display quality, display text (characters) around the video whose display quality is changed, or display video effects such as shining a frame of the video whose display quality is changed. Notify the user.
  • the video display unit (video display means) 24 is configured by, for example, a liquid crystal panel, and is distributed via the video stored in the video storage unit 25 or the video in the external memory connected to the display device 21 or the network 30 (not shown).
  • the displayed video is displayed as a thumbnail with the video quality and arrangement determined by the video display control unit 28.
  • the external data output unit (external data output means) 23 executes processing of external data delayed by the processing delay unit 29, for example, processing of ringing a telephone call bell.
  • FIG. 6 is a flowchart showing a processing procedure of the display device 21 in the second embodiment.
  • the external data detection unit 26 is in a detection standby state (S11).
  • the external data detection unit detects external data such as an incoming call (YES in S11)
  • an incoming detection signal is sent to the processing delay unit 29 and the load estimation unit 27.
  • the processing delay unit 29 delays the telephone incoming call processing (ringing a ringing tone, etc.) by a predetermined time (S12).
  • the load estimating unit 27 estimates the load level that the processing related to the external data gives to the display of a plurality of videos on the display device (S13). In this processing flow, the load level is estimated after the processing delay is performed. However, the processing delay may be performed after the load level is estimated, or the processing may be performed simultaneously.
  • the video display control unit 28 determines the display quality of the video according to the load level estimated by the load estimation unit 27, and controls the video displayed on the video display unit 24 (S14).
  • the video display unit 24 displays a plurality of videos with the video quality controlled by the video display control unit 28 (S15).
  • the external data output unit 23 executes external data processing such as telephone incoming call processing (ringing a ringing tone, etc.) after a predetermined time has elapsed (S16), and ends the processing.
  • the processing delay of S12 is set to a predetermined time, and the processing execution of S16 is performed after the predetermined time has elapsed.
  • the processing delay time in S12 is not set, and although not shown in FIG. 6, the delay time may be determined according to the load level estimated by the load estimation unit 27 in S13.
  • a flow for determining whether or not the video display in S15 has ended may be provided, and when the video display ends, the process may proceed to S16.
  • the incoming call processing (ringing a ringing tone, etc.) is delayed for a predetermined time, and during that time (the CPU load increases). Before) By changing the display quality of the video, it is possible to display multiple videos that match the processing capability of the equipment.
  • a display device 31 configured by applying to a communication device such as a mobile phone with a display device will be described as an example, as in the first embodiment.
  • the configuration of the present application is shown in FIG. 7, and each part constituting the display device 31 will be described based on this diagram.
  • the display device 31 includes a display quality control unit 32, a video display unit 34, and a video storage unit 35.
  • the display quality control unit 32 includes a video detection unit 36, a load estimation unit 37, and a video display control unit 38.
  • a plurality of videos can be distributed from the video server 41 to the display device 31 as well as the video storage unit 35 built in the display device 31.
  • video data is added from the video storage unit 35 and / or the video server 41 to the display device 31 on which the video is displayed, the video currently being displayed and the addition are added so that the display processing capacity of the display device 31 is not exceeded.
  • the purpose is to control the display quality of the video to be changed.
  • an image in an external memory connected to the display device 31 may be captured.
  • the video detection unit (video detection means) 36 detects that video data is input from the video storage unit 35 or the video server 41 via the network 40 and sends a detection signal to the load estimation unit 37.
  • the load estimation unit (load estimation means) 37 estimates the load level that the processing for displaying the additional video gives to the display of the currently reproduced video.
  • the load at this time is the total load on the CPU of the display device 31 estimated from the processing amount required for displaying the current video, the processing amount required for displaying the additional video, and the remaining battery level of the display device 31. To do. For example, when three other images are received while three images are being displayed, the CPU of the display device 31 determines from the amount of processing required for a total of six image reproduction processes and the remaining battery level of the display device 31. Estimate the load level. Note that the amount of processing required to display a plurality of images depends on the number of images displayed on the screen, the size of each image, the number of frame rates, the resolution, and the like.
  • the video display control unit (video display control means) 38 displays the display quality of all the videos (currently displayed video and added video) according to the load level estimated by the load estimation unit (load estimation unit) 37. Then, playback of each thumbnail video displayed on the screen in the video display unit (including decoding processing in the case of encoded data) and the arrangement of the thumbnails on the screen are controlled. For example, when the load level increases, the frame rate and resolution of all videos are reduced, the degree of compression is increased, and the decoding process is simplified. As a decoding process simplification method, there are motion compensation simplification, deblocking filter omission, frame skip, and the like.
  • the display quality management table 15 as shown in FIG. 4 is provided, and an image is displayed according to the load level 16 estimated by the load estimation unit (load estimation means) 37. It is assumed that the quality level 17 is determined as one of real time (real time) playback, slow playback, and skip playback.
  • low load is a case where the additional input video is judged to have little influence on video playback because the load level is low, such as a low-quality video such as 1Seg. Real-time (real time) playback without changing the quality of the video that the user was browsing.
  • Loading is a case where it is determined that the influence on the video playback is moderate. Therefore, the quality of the video that has been viewed by the user so far is controlled to be slow playback, for example, playback at 1/2 times speed. By doing so, the load is reduced to 1 ⁇ 2.
  • “Large load” means, for example, a case where it is determined that the influence on the reproduction of multiple images is large, such as a high pixel / high frame rate video. Is controlled so as to reproduce only the I picture, for example, by skipping the quality of the image.
  • the video display control unit (video display control means) 38 may also have a function of executing display quality change only for videos other than the video that the user is paying attention to.
  • the video focused on by the user is, for example, a video on which a cursor or the like is placed on the display device 31, a video displayed at the center of the screen of the display device, or a video selected by a user operation.
  • the video display control unit (video display control means) 38 may have a function of changing the display quality only for the additional video. For example, as shown in FIG. 8A, three images 45 are displayed on the image display unit 34. In addition to this video 45, three videos 46 are added, and in the case of FIG. 8B, if the lower three images are the additional videos 46, only the display quality of the lower three videos 46 is changed.
  • the video display unit (video display means) 34 is constituted by a liquid crystal panel, for example, and displays all videos (currently displayed video and added video) as thumbnails with the video quality and arrangement determined by the video display control unit 38. To do.
  • the load estimation unit 37 estimates the load level applied to the video display of the display device 31 by the processing related to the video playback of the total of three current videos and three additional videos (S22).
  • the video display control unit 38 determines the display quality and arrangement of the video according to the load level estimated by the load estimation unit 37, and controls the video displayed on the video display unit 34 (S23).
  • the load level is determined to be “medium”
  • the display quality is “slow playback”
  • the arrangement is, for example, an arrangement as shown in the display example of FIG. 8B.
  • the video display unit 34 displays six videos with the video quality and arrangement controlled by the video display control unit 38 (S24), and ends the process.
  • the video quality has been described as “real time (real time) playback”, “slow playback”, and “skip playback”, but of course not limited to this.
  • the frame rate and resolution of all videos may be reduced, the degree of compression may be increased, or the video size may be reduced.
  • the video quality may be changed only for the video other than the user's attention or the additional video.
  • the display control function when a video different from the video being viewed is input has been described.
  • the number of videos is reduced because some of the displayed multiple videos are terminated.
  • the video detection unit 36 shown in FIG. 7 also detects (for example, reduction from six videos as in the display example of FIG. 8B to three videos as in the display example of FIG. 8A), and follows the flowchart of FIG. Needless to say, the video is displayed with the optimum video quality at that time. This is the same for the other embodiments.
  • the currently displayed video and the added video so as not to exceed the processing capability of the display device 31.
  • the display quality it is possible to continue displaying a plurality of videos without interruption or termination.
  • the configuration of the display device of the fourth embodiment is shown in FIG.
  • the display device 51 includes a display quality control unit 52, a video display unit 54, and a video storage unit 55.
  • the display quality control unit 52 includes a video detection unit 56, a load estimation unit 57, a video display control unit 58, and a display delay unit 59.
  • the fourth embodiment is characterized by including a display delay unit (display delay means) 59 in addition to the configuration of the third embodiment.
  • a display delay unit display delay means
  • the display of the video is delayed for a predetermined time, and during that time, the number of videos increases, which is applied to the CPU of the display device 51.
  • the video detection unit (video detection means) 56 detects that video data is input from the video storage unit or video server via the network, and sends a detection signal to the load estimation unit 57 and the display delay unit 59.
  • the display delay unit (display delay means) 59 delays processing of the detected video, that is, video display (playback) for a predetermined time.
  • the load estimation unit (load estimation means) 57 estimates the load level that the processing related to the video gives to the display of a plurality of videos currently being reproduced.
  • the load at this time is the total load on the CPU of the display device 51 estimated from the processing amount required for the current video display, the processing amount related to the video data, and the remaining battery level of the display device 51.
  • the CPU load level is estimated from the total amount of video playback processing, the remaining battery level of the display device 51, and the like. To do. Note that the amount of processing required to display a plurality of images depends on the number of images displayed on the screen, the size of each image, the number of frame rates, the resolution, and the like.
  • the video display control unit (video display control unit) 58 displays the display quality of all the videos (the currently displayed video and the video that is additionally displayed) according to the load level estimated by the load estimation unit (load estimation unit) 57.
  • the video display unit 54 controls playback of each thumbnail video displayed on the screen (including decoding processing in the case of encoded data) and arrangement of thumbnails on the screen. For example, when the load level increases, the frame rate and resolution of all videos are reduced, the degree of compression is increased, and the decoding process is simplified.
  • As a decoding process simplification method there are motion compensation simplification, deblocking filter omission, frame skip, and the like.
  • the display quality management table as shown in FIG. 4 is provided, and the video quality level is reproduced in real time (real time) according to the load level estimated by the load estimation unit (load estimation means). Either slow playback or skip playback is determined. Details are the same as in the third embodiment.
  • the video display control unit (video display control means) 58 may also have a display timing control function so that all the plurality of videos are simultaneously switched to the display quality after the display delay.
  • the video display control unit (video display control means) 58 may change the display quality only for videos other than the video that the user is paying attention to.
  • the video that the user is paying attention to is, for example, a video with a cursor or the like on the display device 51, a video displayed at the center of the screen of the display device 51, or a video selected by a user operation.
  • the video display control unit (video display control means) 58 may have a function of executing display quality change only for the additional video.
  • the video display control unit (video display control means) 58 may have a function of notifying the user that the video display quality changes during the display delay.
  • the video display unit (video display means) 54 is composed of, for example, a liquid crystal panel, and the video quality determined by the video display control unit 58 after a predetermined (delay) time between the video distributed on the Internet and the currently displayed video. And thumbnails are displayed by arrangement.
  • the video detection unit 56 detects the distribution of the three video data via the network 60 by the video server 61 (YES in S31)
  • the incoming detection signal is sent to the load estimation unit 57 and the display delay unit 59.
  • the display delay unit 59 delays the display of the video for a predetermined time (S32).
  • the load estimation unit 57 estimates the load level that the processing related to the video playback of the total of three current videos and three videos gives to the video display of the display device 51 (S33). In this processing flow, the load level is estimated after the display delay is performed, but the display delay may be performed after the load level is estimated, or the processing may be performed simultaneously.
  • the video display control unit 58 determines the display quality and arrangement of the video according to the load level estimated by the load estimation unit 57, and controls the video displayed on the video display unit 54 (S34).
  • the load level is determined to be “medium”
  • the display quality is “slow playback”
  • the arrangement is, for example, an arrangement as shown in the display example of FIG. 8B.
  • the video display unit 54 displays six videos with the video quality and arrangement controlled by the video display control unit after a predetermined time has elapsed (S35), and ends the process.
  • the display delay in S32 is set to a predetermined time, and the display execution in S35 is performed after the predetermined time has elapsed.
  • the processing delay time in S32 is not set, and although not shown in FIG. 11, the delay time may be determined according to the load level estimated by the load estimation unit 57 in S33.
  • a flow may be provided for determining whether or not the video quality has been determined in S34, and when the video quality has been determined, the process may proceed to display execution in S35.
  • the display of the video distributed on the Internet or the video selected from the video storage unit 55 is delayed for a predetermined time, By changing the display quality of the video (before the CPU load increases), it is possible to display a plurality of videos in accordance with the processing capability of the device, and to continue to display the video without interruption or termination.
  • each unit will be described based on a display device 71 (FIG. 12) configured to be applied to communication equipment such as a mobile phone device.
  • the display device 71 includes a display quality control unit 72, an external data output unit 73, a video display unit 74, and a video storage unit 75.
  • the display quality control unit 72 includes an external data detection unit 76, a video detection unit 86, a load estimation unit 77, and a video display control unit 78.
  • the first embodiment and the third embodiment coexist, external data such as incoming calls and mails, a video storage unit 75 built in the display device 71 and a network. Allows both processed video to be processed.
  • video data from the video server 81 is received via the video storage unit 75 or the network 80.
  • the video playback can be continuously displayed without being interrupted or terminated.
  • the load estimation unit 77 in the display quality control unit 72 estimates the load related to the processing of both the external data described in the first embodiment and the video described in the second embodiment, and the video display control unit 78
  • the processing capability of the display device 71 The display quality of the video displayed on the screen is controlled so as not to exceed the threshold value, and the plurality of video reproductions can be continuously displayed without being interrupted or terminated.
  • the external data detection unit (external data detection means) 76 detects the input of external data such as incoming calls or mails to the display device 71 via the communication function, and uses the detection signal as a load estimation unit 77. Send to.
  • the video detection unit (video detection means) 86 detects that a plurality of videos are distributed from the video storage unit 75 and the video server 81 and sends detection signals to the load estimation unit 77.
  • the load estimation unit (load estimation means) 77 receives the incoming detection signal of the external data and / or video data, the process related to the external data and / or video data gives the display of a plurality of videos currently being reproduced. Estimate the load level. At this time, the load on the CPU of the display device 71 estimated from the processing amount required for the current video display, the processing amount related to external data and / or video data, and the remaining battery level of the display device 71 is estimated. Total load.
  • the video display control unit (video display control unit) 78 determines the display quality of all the videos (the currently displayed video and the added video) according to the load level estimated by the load estimation unit (load estimation unit) 77.
  • the video display unit 74 controls the reproduction (including decoding processing in the case of encoded data) of each thumbnail video displayed on the screen and the arrangement of the thumbnails on the screen. For example, when the load level increases, the frame rate and resolution of all videos are reduced, the degree of compression is increased, and the decoding process is simplified.
  • a decoding process simplification method there are motion compensation simplification, deblocking filter omission, frame skip, and the like.
  • the display quality management table 15 as shown in FIG.
  • the quality level 17 is determined to be any one of real time (real time) playback, slow playback, and skip playback. Details are the same as in the above embodiment.
  • the video display control unit (video display control means) 78 may also have a function of executing display quality change only for videos other than the video that the user is paying attention to. Further, the video display control unit (video display control means) 78 may have a function of executing display quality change only for the additional video.
  • the video display unit (video display means) 74 is constituted by, for example, a liquid crystal panel, and displays the currently displayed video and the additional video as thumbnails with the video quality and arrangement determined by the video display control unit.
  • the external data output unit (external data output means) 73 executes processing of external data (for example, in the case of telephone incoming call processing, a ringing tone is sounded).
  • the load estimator 77 estimates the load level applied to the video display of the display device 71 by the reproduction of the total of six videos and three videos, and the processing of external data (S42).
  • the video display control unit 78 determines the display quality and arrangement of the video according to the load level estimated by the load estimation unit 77, and controls the video displayed on the video display unit 74 (S43).
  • the load level is determined to be “high”
  • the display quality is “skip reproduction”
  • the arrangement is, for example, an arrangement as shown in the display example of FIG. 8B.
  • the video display unit 74 displays six videos with the video quality and arrangement controlled by the video display control unit 78 (S44), and ends the process.
  • the current display is being performed so as not to exceed the processing capacity of the display device 71.
  • the display quality of the video and the added video it is possible to continue displaying the video without interrupting or ending the video reproduction.
  • FIG. 14 shows the configuration of the display device 91 according to the sixth embodiment.
  • the display device 91 includes a display quality control unit 92, an external data output unit 93, a video display unit 94, and a video storage unit 95.
  • the display quality control unit 92 includes an external data detection unit 96, a video detection unit 106, a processing delay unit 99, a display delay unit 109, a load estimation unit 97, and a video display control unit 98.
  • the display quality control unit 92 includes a display delay unit (display delay unit) 109 and a processing delay unit (processing delay unit) 99. It is characterized by providing.
  • a display delay unit display delay unit
  • processing delay unit processing delay unit
  • the external data detection unit (external data detection means) 96 detects the input of external data such as incoming calls and mails to the display device 91 via the communication function. For example, when an incoming call is detected, an incoming detection signal is sent to the processing delay unit 99 and the load estimation unit 97.
  • the video detection unit (video detection means) 106 detects that video data is distributed from the video storage unit 95 and the video server 101 and sends a detection signal to the display delay unit 109 and the load estimation unit 97.
  • the processing delay unit (processing delay means) 99 delays the processing of the detected external data (for example, ringing a ringing tone when receiving a telephone call) for a predetermined time.
  • the display delay unit (display delay means) 109 delays the video processing for a predetermined time.
  • the video processing is, for example, playback processing of distributed video.
  • the load estimation unit (load estimation means) 97 Upon receiving the external data and / or video data incoming detection signal, the load estimation unit (load estimation means) 97 gives the processing related to the external data and / or video data to the display of a plurality of videos currently being reproduced. Estimate the load level. At this time, the load on the CPU of the display device 91 is estimated from the processing amount required for the current video display, the processing amount related to external data and / or video data, and the remaining battery level of the display device 91. Total load.
  • the video display control unit (video display control means) 98 displays the display quality of all the videos (the currently displayed video and the video that is additionally displayed) according to the load level estimated by the load estimation unit (load estimation unit) 97.
  • the video display unit 94 controls reproduction of each thumbnail video displayed on the screen (including decoding processing in the case of encoded data) and arrangement of the thumbnails on the screen. For example, when the load level increases, the frame rate and resolution of all videos are reduced, the degree of compression is increased, and the decoding process is simplified.
  • a decoding process simplification method there are motion compensation simplification, deblocking filter omission, frame skip, and the like. Details are the same as in the above embodiment.
  • the video display control unit (video display control means) 98 may also have a display timing control function so that all the plurality of videos are simultaneously switched to the display quality after a predetermined time has elapsed (delayed).
  • the video display control unit (video display control means) 98 may change the display quality only for videos other than the video that the user is paying attention to.
  • the video display control unit (video display control means) 98 may have a function of changing the display quality only for the additional video.
  • the video display control unit (video display control means) 98 may have a function of notifying the user that the video display quality changes during the display delay.
  • the video display unit (video display means) 94 is composed of, for example, a liquid crystal panel, and displays all videos as thumbnails with the video quality and arrangement determined by the video display control unit.
  • the external data output unit (external data output means) 93 executes processing of the external data delayed by the processing delay unit 99 (for example, in the case of telephone incoming call processing, a ringing tone is generated).
  • the display delay unit 109 delays the display of the video for a predetermined time (S52).
  • the processing delay unit 99 delays the processing of the data (such as ringing a ringing tone) for a predetermined time (S53).
  • the load estimation unit 97 receives the incoming detection signal of the external data and / or video data, the current video 3 display and the video 3 total 6 video reproductions and external data processing are given to the video display of the display device 91.
  • the load level is estimated (S54). In this processing flow, processing is performed in the order of display delay, processing delay, and load level estimation. However, the processing order may be changed, or two or three processes may be performed simultaneously.
  • the video display control unit 98 determines the video display quality and arrangement according to the load level estimated by the load estimation unit 97, and controls the video displayed on the video display unit 94 (S55).
  • the load level is determined to be “high”
  • the display quality is “skip reproduction”
  • the arrangement is, for example, an arrangement as shown in the display example of FIG. 8B.
  • the video display unit 94 displays six videos with the video quality and arrangement controlled by the video display control unit 98 after a predetermined time has elapsed (S56).
  • the external data output unit 93 executes processing of external data such as incoming call processing (ringing a ringing tone, etc.) after a predetermined time has elapsed (S57), and ends the processing.
  • the display delay unit and the processing delay unit are provided, so that the quality and arrangement of a plurality of images can be reduced before the CPU is loaded due to an increase in images to be displayed or calls. By controlling the, it is possible to continue displaying the video without interrupting or ending.
  • the function of the display quality control unit according to each of the above embodiments can be realized by a computer.
  • a program describing the processing content of such a function is provided.
  • the said processing function is implement
  • the program describing the processing contents can be recorded on a computer-readable recording medium.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Digital Computer Display Output (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

 複数映像が表示されているとき、電話着信やメール着信等が割り込んでも、現在表示中の複数映像を中断あるいは終了することなく、再生を継続可能とする。 外的データ検出部6が、電話着信等の外的データを検出すると、着信検出信号を負荷推定部7へ送る。負荷推定部7は、外的データ着信検出信号を受けると、外的データに係る処理が表示装置1の複数映像の表示に与える負荷レベルを推定する。映像表示制御部8は、負荷推定部7が推定した負荷レベルに応じて、映像の表示品質を決定し、映像表示部4で表示される映像を制御する。映像表示部4は、映像表示制御部8で制御された映像品質で複数映像を表示する。

Description

表示装置、表示方法及びそれを実行するためのプログラム
 本発明は、映像サムネイル一覧表示に関し、複数の映像を表示する際に、機器に負担なく、またユーザにストレスなく、サムネイル一覧表示するための表示装置、表示方法及びそれを実行するためのプログラムに関する。
 映像の再生機器(プレーヤ)、録再機器(レコーダ)、あるいは、放送やネットワーク経由で取得される映像の録画・再生機能を有するPC等において、DVD(Digital Versatile Disc)、BD(Blu-ray Disc)、SDメモリカード、HDD(Hard-Disk Drive)など記録媒体に記録された多数の映像を効率的に提示・管理する手段として、サムネイル表示が多く用いられている。
 サムネイルとは映像の代わりに表示される映像を代表する小画像(通常は元の画像の縮小画像)を指し、サムネイル表示とは、複数映像のサムネイル(代表縮小画像)による一覧表示形式を指す。サムネイルは通常、静止画であるが、サムネイルを静止画でなく動画で表示する、いわゆる動画サムネイルも、機器の処理能力の向上に伴って徐々にみられつつある。表示機器の処理能力が十分なら、全てのサムネイルを動画表示することが原理的に可能である。
 特許文献1には、画面上に表示されている複数の映像の表示状態の違いからユーザの関心度を推定し、関心度に応じて映像の表示品質の優先度を決定する。優先度に基づいて映像の表示仕様を変更することで、映像データの転送量または表示処理に係るデータ量を軽減することが記載されている。
 図16に特許文献1の映像表示処理システムを示す概略構成図を示す。この映像情報処理システムは、映像をシステム内に取り込む映像入力部301と、取り込んだ映像を表示する表示装置200と、映像入力部301と表示装置200とを相互に接続して各種データを通信する通信ネットワーク300とから構成される。表示装置200は、送受信部201と、映像表示部204と、映像表示制御部205と、表示状態管理テーブル206と、関心度計測部207とから構成される。
 映像表示制御部205は、表示された各映像の表示状態データを表示状態管理テーブル206に格納する。関心度計測部207は、その表示状態データに基づいて各映像のユーザ関心度を推定する。映像表示制御部205は、関心度が高い映像は高い表示品質で表示し、関心度の低い映像は表示品質を落して表示すべく各映像の表示仕様を変更し、映像入力部301に、送受信部201からネットワーク300を介して転送する。映像入力部301は、変更された表示仕様に基づいて入力映像データを圧縮するよう制御して、その映像データをネットワーク300を介して表示装置200に送信する。
 すなわち、特許文献1の構成では、画面上の映像の表示状態から各映像の表示仕様を変更し、映像入力部301で映像データを圧縮し、映像データの転送量または表示処理に係るデータ量を軽減することを特徴とする。
 特許文献2には、ビデオオンデマンド装置において、ビデオオンデマンド機能実行中に電話機能を実行する場合に、番組再生を一時停止し、電話機能によって番組が視聴不能になることを防止する。電話機能終了後には番組一時停止を解除し、停止位置から再生を再開することが記載されている。
特開平6-324662号公報 特開平7-327221号公報
 特許文献2の技術では、映像を視聴しているとき、電話着信やメール着信等により視聴に割込みが入る場合があり、これらの割込みに対処する方法として、映像の視聴の中断もしくは終了がある。しかし、サムネイル表示を見ながら電話で友人とおしゃべりしたいというニーズもあり、電話着信しても、映像の再生を中断あるいは終了することなく再生することが求められる。
 また、特許文献1の技術では、表示装置が通信ネットワークに接続され、ネット経由でデータが送信されるシステムでは、映像データの視聴中に、映像ストリームの受信等が発生し、表示装置に表示される映像が増えることが考えられる。こうなると、これら追加映像の処理のために機器に負荷がかかり、そのために現在視聴中の映像表示に影響が及ぶ可能性があるが、特許文献1ではそのような状況は想定していない。
 さらに、特許文献1では、映像の表示仕様は表示装置側で決定するが、その仕様をネット経由で映像入力部に転送し、映像データを圧縮後、再度ネット経由で表示装置に送る構成になっており、表示装置側の処理のみで済ますことが求められる。
 そこで、本発明は、上記の問題を鑑みてなされたものであり、視聴中の映像データとは異なる外的データが入力されても、現在視聴中の複数サムネイルの動画表示を中断あるいは終了することなく、再生を継続可能な表示装置、表示方法及びそれを実行するためのプログラムを提供するものである。
 本発明は、複数の映像データの表示品質を制御して表示させる表示装置であって、表示されている映像データとは別のデータの入力を検出するデータ検出手段と、該別データが前記表示装置の処理能力に与える負荷を推定する負荷推定手段と、その負荷が前記表示装置の処理能力を超える場合に、表示処理が継続できるように前記表示装置に表示される複数映像の品質を変更する映像表示制御手段と、を備えることを特徴とする。
 ここで、前記別データは、映像以外のデータである外的データであることを特徴とする。この表示装置は、前記データ検出手段が外的データの受信を検知すると、外的データの処理を所定の時間だけ遅延させる処理遅延手段を更に備えることを特徴とする。
 また、前記別データは、表示映像データに追加表示される別映像データであることを特徴とする。この表示装置は、前記データ検出手段が別映像データの受信を検知すると、別映像データの処理を所定の時間だけ遅延させる処理遅延手段を更に備えることを特徴とする。
 また、本発明は、複数の映像データの表示品質を制御して表示させる表示装置であって、表示映像データに追加して表示される映像データを検知する映像検出手段と、映像データとは異なるデータである外的データの入力を検知する外的データ検出手段と、追加映像データあるいは/かつ外的データが前記表示装置に表示される複数映像の表示に与える負荷を推定する負荷推定手段と、その負荷が前記表示装置の処理能力を超える場合に、表示処理が継続できるように表示される映像の品質を変更する映像表示制御手段と、を備えることを特徴とする。
 この表示装置は、前記映像検出手段が追加映像の入力を検知した場合、追加映像の表示を所定の時間だけ遅延させる表示遅延手段と、前記外的データ検出手段が外的データの受信を検知した場合、外的データの処理を所定の時間だけ遅延させる処理遅延手段と、を更に備える。
 また、本発明の表示装置は、前記映像表示制御手段が、前記負荷推定手段により推定された負荷レベルに応じて、リアルタイム再生、スロー再生、スキップ再生に切り替えて表示品質を変更することを特徴とする。
 また、本発明の表示装置は、前記映像表示制御手段が、前記負荷推定手段により推定された負荷レベルに応じて、画質劣化が許容できる範囲で復号処理を簡略化し表示品質を変更することを特徴とする。 
 また、本発明の表示装置は、前記映像表示制御手段が、すべての映像の表示品質を同時に切り替えてもよいし、ユーザが注目している映像以外の映像に対して表示品質を変更してもよいし、新たに追加される映像に対してのみ表示品質の変更を行ってもよい。
 また、本発明の表示装置は、前記映像表示制御手段が、遅延の間にユーザに映像の表示品質が変わることを予告する機能を有することを特徴とする。
 本発明は、複数の映像データの表示品質を制御して表示装置に表示させる表示方法であって、表示されている映像データとは別のデータの入力を検出するデータ検出ステップと、該別データが前記表示装置の処理能力に与える負荷を推定する負荷推定ステップと、その負荷が前記表示装置の処理能力を超える場合に、表示処理が継続できるように前記表示装置に表示される複数映像の品質を変更する映像表示制御ステップと、を備えることを特徴とする。
 ここで、前記別データは、映像以外のデータである外的データであることを特徴とする。この表示方法は、前記データ検出ステップにおいて外的データの受信を検知すると、外的データの処理を所定の時間だけ遅延させる処理遅延ステップを更に備えることを特徴とする。
 また、前記別データは、表示映像データに追加表示される別映像データであることを特徴とする。この表示方法は、前記データ検出ステップにおいて別映像データの受信を検知すると、別映像データの処理を所定の時間だけ遅延させる処理遅延ステップを更に備えることを特徴とする。
 また、本発明は、複数の映像データの表示品質を制御して表示装置に表示させる表示方法であって、表示映像データに追加して表示される映像データを検知する映像検出ステップと、映像データとは異なるデータである外的データの入力を検知する外的データ検出ステップと、追加映像データあるいは/かつ外的データが前記表示装置に表示される複数映像の表示に与える負荷を推定する負荷推定ステップと、その負荷が前記表示装置の処理能力を超える場合に、表示処理が継続できるように表示される映像の品質を変更する映像表示制御ステップと、を備えることを特徴とする。
 この表示方法は、前記映像検出ステップにおいて追加映像の入力を検知した場合、追加映像の表示を所定の時間だけ遅延させる表示遅延ステップと、前記外的データ検出ステップにおいて外的データの受信を検知した場合、外的データの処理を所定の時間だけ遅延させる処理遅延ステップと、を更に備えることを特徴とする。
 また、本発明の表示方法は、前記映像表示制御ステップにおいて、前記負荷推定手段により推定された負荷レベルに応じて、リアルタイム再生、スロー再生、スキップ再生に切り替えて表示品質を変更することを特徴とする。
 また、本発明の表示方法は、前記映像表示制御ステップにおいて、前記負荷推定手段により推定された負荷レベルに応じて、画質劣化が許容できる範囲で復号処理を簡略化し表示品質を変更することを特徴とする。
 また、本発明の表示方法は、前記映像表示制御ステップにおいて、すべての映像の表示品質を同時に切り替えてもよいし、ユーザが注目している映像以外の映像に対して表示品質を変更してもよいし、新たに追加される映像に対してのみ表示品質の変更を行ってもよい。
 また、本発明の表示方法は、前記映像表示制御ステップにおいて、遅延の間にユーザに映像の表示品質が変わることを予告する機能を有することを特徴とする。
 本発明は、コンピュータに、前記表示方法を実行させるためのプログラムである。
 本発明によれば、電話着信等の外的データを受信しても、追加映像が入力されても、現在視聴中の複数映像の再生を中断あるいは終了することなく再生を継続でき、ユーザはストレスなく機器を操作できる。
 また、外的データおよび追加映像の受信状態に合せて表示装置の複数映像の表示品質を変更することで、機器の処理能力に対して効率的な複数映像の表示を可能にする。
 また、実際の外的データおよび追加映像の処理を所定の時間遅延させ、その間に(CPU負荷が増大する前に)表示装置の映像の表示品質を変更することで、機器の処理能力に見合った複数映像表示を可能にする。
 さらに映像あるいは外的データが複数映像表示に与える負荷レベルに応じて、複数映像の再生を、リアルタイム(実時間)再生、スロー再生、スキップ再生に切り替えることで、機器の処理能力に見合った複数映像表示を可能にする。
第1の実施形態における表示装置のブロック構成図である。 映像表示部におけるサムネイル表示例を示す説明図である。 第1の実施形態における表示装置の処理手順を示すフローチャートである。 表示品質管理テーブルの一例を示す説明図である。 第2の実施形態における表示装置のブロック構成図である。 第2の実施形態における表示装置の処理手順を示すフローチャートである。 第3の実施形態における表示装置のブロック構成図である。 映像が追加された時の表示例を示す説明図である。 第3の実施形態における表示装置の処理手順を示すフローチャートである。 第4の実施形態における表示装置のブロック構成図である。 第4の実施形態における表示装置の処理手順を示すフローチャートである。 第5の実施形態における表示装置のブロック構成図である。 第5の実施形態における表示装置の処理手順を示すフローチャートである。 第6の実施形態における表示装置のブロック構成図である。 第6の実施形態における表示装置の処理手順を示すフローチャートである。 従来技術(特許文献1)の映像情報処理システムの概略構成図である。
 以下、本発明の実施の形態を添付図面を参照して説明する。
<第1の実施形態>
 実施の形態として、ここでは表示装置つき携帯電話等の通信機器に適用して構成した表示装置1を例に説明する。本願の構成を図1に示す。表示装置1は、表示品質制御部2、外的データ出力部3、映像表示部4、並びに、映像蓄積部5を備えて構成される。表示品質制御部2は、外的データ検出部6と、負荷推定部7と、映像表示制御部8とから構成される。この図をもとに、表示装置1を構成する各部について説明する。
 本実施形態に係る表示装置1は、一覧表示されるサムネイルを動画表示する、いわゆる動画サムネイル表示において、例えば、表示映像データとは異なる電話やメール等の外的データが入力されたときに、画面に表示している複数の映像が中断あるいは終了することなく、表示され続けることを可能にするために、表示品質制御部(表示品質制御手段)2を有することを特徴とする。以下に、表示品質制御部2の機能を詳しく説明する。
 (表示品質制御部の機能)
 外的データ検出部(外的データ検出手段)6は、通信機能を介して表示装置1に電話やメールの着信等の外的データがネットワーク10から入力されるのを検出する。例えば、電話の着信を検出した時に着信検出信号を負荷推定部7へ送る。
 負荷推定部(負荷推定手段)7は、外的データ着信検出信号を受けると、その外的データに係る処理が複数映像の表示に与える負荷レベルを推定する。このときの負荷は、複数の映像表示に要している処理量と外的データの処理量、及び表示装置1の電池残量とから推定される表示装置1のCPU(図示せず)へのトータルな負荷とする。
 映像表示制御部(映像表示制御手段)8は、負荷推定部(負荷推定手段)7が推定した負荷レベルに応じて、表示装置1に表示されている全映像の表示品質を決定し、映像表示部4で画面に表示される各サムネイル映像の再生(符号化データの場合、復号処理を含む)と、サムネイルの画面上への配置とを制御する。たとえば負荷レベルが大きくなると、映像のフレームレートや解像度を落としたり、圧縮度を上げたり、復号処理を簡略化したりする。復号処理の簡略化方式としては、動き補償簡略化、デブロッキングフィルタ省略、フレームスキップなどがある。本実施形態では、負荷推定部7により推定された負荷レベルに応じて、映像の表示品質をリアルタイム(実時間)再生、スロー再生、スキップ再生のいずれかに決定し、それぞれに必要な再生処理と配置とを制御することを特徴とする。詳細は後述する。
 映像表示制御部(映像表示制御手段)8は、また、表示品質の変更を、ユーザが注目している映像以外の映像に対してのみ行うようにしてもよい。ユーザが注目している映像とは、たとえば、表示装置1上でカーソル等があたっている映像や、表示装置1の画面中央に表示されている映像、あるいはユーザ操作により選択された映像である。
 映像表示部(映像表示手段)4は、例えば液晶パネルによって構成され、映像蓄積部5の映像、あるいは、図示しないが、表示装置1に接続した外部メモリ内の映像やネットワーク10を介して配信される映像を、映像表示制御部8で決定した映像品質及び配置でサムネイル表示する。図2は表示装置1の映像表示部4に複数映像(サムネイル)が表示されている例を示す図である。本例では4枚の映像11が表示されている。これら複数映像11が電話やメール等の着信時も消えることなく、表示され続ける。
 外的データ出力部(外的データ出力手段)3は、外的データ検出部6が検出した外的データの処理、たとえば電話着信のベルを鳴らす等の処理を実行する。
 本実施形態ではサムネイル映像の表示制御機能について説明するが、実際の表示装置では、サムネイル映像以外にも、たとえば一つの映像を再生したり、あるいは3次元映像、写真等の静止画を表示したりということも起こり得ることから、このような映像の表示(再生)中においても、本実施形態の機能が適応可能であることは言うまでもない。この点は、他の実施形態についても同様である。
 (表示品質制御部の処理フロー)
 次に、表示装置1での処理フローを説明する。図3は第1の実施形態における表示装置1の処理手順を示すフローチャートである。
 ユーザが表示装置1で図2に示す表示例の複数映像(サムネイル)閲覧をしているものとする。このとき外的データ検出部6は検出の待機状態にある(ステップS1:以降ステップを省略する)。外的データ検出部6が、電話着信等の外的データを検出すると(S1のYES)、着信検出信号を負荷推定部7へ送る。負荷推定部7は、外的データ着信検出信号を受けると、外的データに係る処理が表示装置1の複数映像の表示に与える負荷レベルを推定する(S2)。映像表示制御部8は、負荷推定部7が推定した負荷レベルに応じて、映像の表示品質を決定し、映像表示部4で表示される映像を制御する(S3)。映像表示部4は、映像表示制御部8で制御された映像品質で複数映像を表示し(S4)、処理を終了する。
 (映像表示制御)
 次に、映像表示制御の方法を説明する。
 映像表示制御部(映像表示制御手段)8は、負荷推定部(負荷推定手段)7が推定した負荷レベルに応じて、映像の表示品質を決定し、映像表示部で画面に表示される各サムネイル映像の再生(符号化データの場合、復号処理を含む)と、サムネイルの画面上への配置とを制御する。ここでは、負荷推定部7により推定された負荷レベルに応じて、映像の表示品質をリアルタイム(実時間)再生、スロー再生、スキップ再生のいずれかに決定し、それぞれに必要な再生処理と配置とを制御する方法を説明する。
 ユーザが表示装置1で図2に示す表示例の複数映像閲覧をしているものとする。このとき、外的データである電話着信があったとすると、表示装置1のCPUは複数映像11の表示と電話機能の両方を処理する必要がある。さらに、表示装置1が携帯電話のように電池駆動である場合は、電池容量によってもCPUの負荷が左右される。
 そこで、負荷推定部7は、現在表示されている複数の映像表示に要している処理量と外的データを実行するのに必要な処理量、及び表示装置の電池残量などから、表示装置1のCPUにかかる負荷レベルを推定する。
 映像表示制御部(映像表示制御手段)8は、図4に示すような表示品質管理テーブル15を備えており、負荷推定部(負荷推定手段)7が推定した負荷レベル16に応じて映像品質レベル17をリアルタイム(実時間)再生、スロー再生、スキップ再生のいずれかに決定する。
 ここで「負荷小」とは負荷レベルが小さいため映像再生への影響が少ないと判断された場合であり、したがって、それまでユーザが閲覧していた映像の品質を変えることなくリアルタイム(実時間)再生する。「負荷中」とは映像再生への影響が中程度あると判断された場合であり、したがって、それまでユーザが閲覧していた映像の品質をスロー再生、たとえば1/2倍速で再生するよう制御する。「負荷大」とは、複数映像再生への影響が大きいと判断された場合であり、この場合は、それまでユーザが閲覧していた映像の品質をスキップ再生、たとえばIピクチャのみを再生するよう制御する。
 なお本実施形態では負荷レベルが大きくなるに従って映像品質をリアルタイム再生→スロー再生→スキップ再生の順で変更するようにしているが、これは複数映像再生に対して視聴者の主観評価実験を行った結果、ユーザの許容度がこの順になったことに基づいている。ただし、映像品質の種類も変更順序もこの限りではない。
 本実施形態では,視聴中の映像データとは異なる外的データが入力されたときの表示制御機能について説明したが、当該外的データの入力が終了した(例えば、電話を切るなど)ことも,図1に示す外的データ検出部6が検出し、図3のフローチャートに従って、その時点での最適な映像品質で映像が表示される(すなわち外的データ入力前の表示品質に戻る)ことは言うまでもない。この点は、他の実施形態についても同様である。
 このように、第1の実施形態では、外的データを受信したとき、表示装置にかかる処理負荷を推定し、映像の表示品質を変更することで、表示装置の処理負荷を軽減するとともに、映像再生が中断あるいは終了することなく、表示され続けることを可能にする。
<第2の実施形態>
 第2の実施形態の表示装置の構成を図5に示す。表示装置21は、表示品質制御部22、外的データ出力部23、映像表示部24、並びに、映像蓄積部25を備えて構成される。表示品質制御部22は、外的データ検出部26と、負荷推定部27と、映像表示制御部28と、処理遅延部29とから構成される。
 第2の実施形態の表示装置21では、第1の実施形態の構成に加えて、表示品質制御部22に処理遅延部(処理遅延手段)29を備えることを特徴とする。これにより、実際の外的データ処理(電話の呼び出し音を鳴らすなど)を所定の時間遅延させ、その間に(CPU負荷が増大する前に)表示装置21に表示されている映像の表示品質を変更することで、機器の処理能力に見合った複数映像表示を可能にする。
 以下に、第2の実施形態における表示品質制御部22の機能を詳しく説明する。
 (表示品質制御部の機能)
 外的データ検出部(外的データ検出手段)26は、通信機能を介して表示装置21に電話やメールの着信等の外的データが入力されるのを検出する。例えば、電話の着信を検出した時に着信検出信号を処理遅延部29と負荷推定部27へ送る。
 処理遅延部(処理遅延手段)29は、外的データ着信検出信号を受けると、検出された外的データの処理、たとえば電話着信処理(呼び出し音を鳴らすなど)を所定の時間、遅延させる。遅延時間は予め設定してもよいし、あるいは下記に示す映像表示部24に映像が表示されるまで遅延させるようにしてもよい。
 負荷推定部(負荷推定手段)27は、外的データ着信検出信号を受けると、その外的データに係る処理が複数映像の表示に与える負荷レベルを推定する。このときの負荷は、複数の映像表示に要している処理量と外的データの処理量、及び表示装置21の電池残量とから推定される表示装置21のCPUへのトータルな負荷とする。
 映像表示制御部(映像表示制御手段)28は、負荷推定部(負荷推定手段)27が推定した負荷レベルに応じて、映像の表示品質を決定し、映像表示部24で画面に表示される各サムネイル映像の再生(符号化データの場合、復号処理を含む)と、サムネイルの画面上への配置とを制御する。たとえば負荷レベルが大きくなると、映像のフレームレートや解像度を落としたり、圧縮度を上げたり、復号処理を簡略化したりする。復号処理の簡略化方式としては、動き補償簡略化、デブロッキングフィルタ省略、フレームスキップなどがある。本実施形態では、負荷推定部27により推定された負荷レベルに応じて、映像の表示品質をリアルタイム(実時間)再生、スロー再生、スキップ再生のいずれかに決定し、それぞれに必要な再生処理と配置とを制御することを特徴とする。詳細は第1の実施形態と同じである。
 映像表示制御部(映像表示制御手段)28は、また、処理遅延後にすべての複数映像が同時にその表示品質に切り替えわるよう、表示タイミング制御機能を有するようにしてもよい。
 映像表示制御部(映像表示制御手段)28は、また、表示品質の変更を、ユーザが注目している映像以外の映像に対してのみ行うようにしてもよい。ユーザが注目している映像とは、たとえば、表示装置上でカーソル等があたっている映像や、表示装置の画面中央に表示されている映像、あるいはユーザ操作により選択された映像である。
 さらに映像表示制御部(映像表示制御手段)28は、処理遅延の間にユーザに映像の表示品質が変わることを予告する機能を有するようにしてもよい。たとえば、表示品質を変更する前に、表示品質が変更される映像周辺にテキスト(文字)を表示したり、表示品質が変更される映像の枠を光らせる等の映像エフェクトを表示したりすることでユーザに予告する。
 映像表示部(映像表示手段)24は、例えば液晶パネルによって構成され、映像蓄積部25の映像や、あるいは、図示しないが、表示装置21に接続した外部メモリ内の映像やネットワーク30を介して配信される映像を、映像表示制御部28で決定した映像品質及び配置でサムネイル表示する。
 外的データ出力部(外的データ出力手段)23は、処理遅延部29で遅延されていた外的データの処理、たとえば電話着信のベルを鳴らす等の処理を実行する。
 (表示品質制御の処理フロー)
 次に、第2の実施形態における表示装置21での処理フローを説明する。図6は第2の実施形態における表示装置21の処理手順を示すフローチャートである。
 ユーザが表示装置21で図2に示す表示例の複数映像閲覧をしているものとする。このとき外的データ検出部26は検出の待機状態にある(S11)。外的データ検出部が電話着信等の外的データを検出すると(S11のYES)、着信検出信号を処理遅延部29と負荷推定部27へ送る。処理遅延部29は、外的データ着信検出信号を受けると、電話着信処理(呼び出し音を鳴らすなど)を所定の時間だけ遅延させる(S12)。負荷推定部27は、外的データ着信検出信号を受けると、外的データに係る処理が表示装置の複数映像の表示に与える負荷レベルを推定する(S13)。なお、この処理フローでは、処理遅延を行なってから負荷レベルの推定を行なっているが、負荷レベルの推定を行なってから処理遅延を行なってもよいし、同時に処理を行なってもよい。
 映像表示制御部28は、負荷推定部27が推定した負荷レベルに応じて、映像の表示品質を決定し、映像表示部24で表示される映像を制御する(S14)。映像表示部24は、映像表示制御部28で制御された映像品質で複数映像を表示する(S15)。外的データ出力部23は、所定の時間経過後、電話着信処理(呼び出し音を鳴らすなど)等外的データの処理を実行し(S16)、処理を終了する。
 なお、本処理フローでは、S12の処理遅延を所定の時間に設定するとし、S16の処理実行は所定の時間経過後、とした。しかしながら、S12の処理遅延の時間を設定せずに、図6には図示しないが、S13において負荷推定部27が推定した負荷レベルに応じて遅延時間を決定するようにしてもよいし、あるいはまた、S15における映像表示が終了したか否かを判定するフローを設けて、映像表示が終了したらS16の処理実行に移るようにしてもよい。
 このように、第2の実施形態では、外的データの処理遅延部29を備えることで、電話着信処理(呼び出し音を鳴らすなど)等を所定の時間遅延させ、その間に(CPU負荷が増大する前に)映像の表示品質を変更することで、機器の処理能力に見合った複数映像表示を可能にする。
<第3の実施形態>
 以下、実施の形態として、第1の実施形態と同じく、表示装置つき携帯電話等の通信機器に適用して構成した表示装置31を例に説明する。本願の構成を図7に示し、この図をもとに、表示装置31を構成する各部について説明する。
 表示装置31は、表示品質制御部32、映像表示部34、並びに、映像蓄積部35を備えて構成される。表示品質制御部32は、映像検出部36と、負荷推定部37と、映像表示制御部38とから構成される。
 第3の実施形態では、図7に示すように、表示装置31に内蔵の映像蓄積部35のみならず、表示装置31にビデオサーバー41から複数の映像をネット配信できるようになっており、現在映像が表示されている表示装置31に、映像蓄積部35あるいは/かつビデオサーバー41から映像データが追加されたとき、表示装置31の表示処理能力を超えないように、現在表示中の映像及び追加される映像の表示品質を変更するよう制御することを目的とする。なお、図7には図示しないが、表示装置31に接続された外部メモリ内の映像を取り込めるようにしてもよい。
 (表示品質制御部の機能)
 映像検出部(映像検出手段)36は、映像蓄積部35やビデオサーバー41からネットワーク40を介して映像データが入力されるのを検出し、検出信号を負荷推定部37へ送る。
 負荷推定部(負荷推定手段)37は、映像着信検出信号を受けると、その追加映像の表示にかかる処理が現在再生中の映像の表示に与える負荷レベルを推定する。このときの負荷は、現映像表示に要している処理量と追加映像の表示に要する処理量、及び表示装置31の電池残量とから推定される表示装置31のCPUへのトータルな負荷とする。たとえば、3つの映像を表示している時に、別の3つの映像を受信した場合、合計6つの映像再生処理に要する処理量、及び表示装置31の電池残量などから、表示装置31のCPUの負荷レベルを推定する。なお、複数の映像表示に要する処理量は、画面に表示される映像の個数や各映像の大きさ、フレームレート数、解像度等に依存する。
 映像表示制御部(映像表示制御手段)38は、負荷推定部(負荷推定手段)37が推定した負荷レベルに応じて、全映像(現在表示されている映像と追加される映像)の表示品質を決定し、映像表示部で画面に表示される各サムネイル映像の再生(符号化データの場合、復号処理を含む)と、サムネイルの画面上への配置とを制御する。たとえば負荷レベルが大きくなると、全映像のフレームレートや解像度を落としたり、圧縮度を上げたり、復号処理を簡略化したりする。復号処理の簡略化方式としては、動き補償簡略化、デブロッキングフィルタ省略、フレームスキップなどがある。第3の実施形態では、第1の実施形態と同じく、図4に示すような表示品質管理テーブル15を備えており、負荷推定部(負荷推定手段)37が推定した負荷レベル16に応じて映像品質レベル17をリアルタイム(実時間)再生、スロー再生、スキップ再生のいずれかに決定するものとする。
 ここで「負荷小」とは、たとえば追加入力される映像がワンセグ等の低画質映像のように、負荷レベルが小さいため映像再生への影響が少ないと判断された場合であり、したがって、それまでユーザが閲覧していた映像の品質を変えることなくリアルタイム(実時間)再生する。「負荷中」とは映像再生への影響が中程度あると判断された場合であり、したがって、それまでユーザが閲覧していた映像の品質をスロー再生、たとえば1/2倍速で再生するよう制御することで、負荷を1/2に軽減する。「負荷大」とは、たとえば、高画素/高フレームレートの映像のように、複数映像再生への影響が大きいと判断された場合であり、この場合は、それまでユーザが閲覧していた映像の品質をスキップ再生、たとえばIピクチャのみを再生するよう制御することで、負荷を数十分の1に軽減する。
 映像表示制御部(映像表示制御手段)38は、また、表示品質の変更を、ユーザが注目している映像以外の映像に対してのみ実行する機能を有するようにしてもよい。ユーザが注目している映像とは、たとえば、表示装置31上でカーソル等があたっている映像や、表示装置の画面中央に表示されている映像、あるいはユーザ操作により選択された映像である。
 さらに映像表示制御部(映像表示制御手段)38は、表示品質の変更を、追加映像に対してのみ実行する機能を有するようにしてもよい。たとえば図8Aに示すように、映像表示部34に、3つの映像45が表示されている。この映像45に加えて、3つの映像46が追加され、図8Bになるとき、下段3つが追加映像46とすると、下段3つの映像46の表示品質のみ変更される。
 映像表示部(映像表示手段)34は、例えば液晶パネルによって構成され、全映像(現在表示されている映像と追加される映像)を、映像表示制御部38で決定した映像品質及び配置でサムネイル表示する。
 (表示品質制御部の処理フロー)
 図8に示すように3つの映像を再生しているときに、映像検出部が3つの映像を検出した場合についての表示装置31の処理を図9のフローチャートで説明する。
 ユーザが表示装置31で、たとえば図8Aに示す表示例のように、3つの映像を閲覧しているものとする。このとき、映像検出部36がネットワーク40を介して3つの映像データの配信を検出すると(S21のYES)、検出信号を負荷推定部37へ送る。負荷推定部37は、映像検出信号を受けると、現映像3つと追加映像3つの計6つの映像再生に係る処理が表示装置31の映像表示に与える負荷レベルを推定する(S22)。
 映像表示制御部38は、負荷推定部37が推定した負荷レベルに応じて、映像の表示品質と配置を決定し、映像表示部34で表示される映像を制御する(S23)。ここで、表示品質は、たとえば負荷レベルが「中」と判定された場合は、「スロー再生」となり、配置は、たとえば、図8Bの表示例に示すような配置となる。映像表示部34は、映像表示制御部38で制御された映像品質と配置で6つの映像を表示し(S24)、処理を終了する。
 本フローでは、図8Bの表示例の映像45,46すべてがスロー再生されることになる。なお、本実施形態では映像品質を「リアルタイム(実時間)再生」「スロー再生」「スキップ再生」として説明したが、もちろん、この限りではない。負荷レベルが大きくなると、全映像のフレームレートや解像度を落としたり、圧縮度を上げたり、あるいは映像の大きさを小さくしたりすることでもよい。また、前述したように、ユーザが注目している以外の映像や追加映像に対してだけ、映像品質の変更を実行するようにしてもよい。
 なお、本実施形態では、視聴中の映像とは別の映像が入力されたときの表示制御機能について説明したが、表示されている複数映像の一部が終了するなどして、映像数が減少(例えば、図8Bの表示例のような6つの映像から図8Aの表示例のような3つの映像に減少)したことも、図7に示す映像検出部36が検出し、図9のフローチャートに従って、その時点での最適な映像品質で映像が表示されることは言うまでもない。この点は、他の実施形態についても同様である。
 この処理により、表示する映像が増えることで機器の処理能力に係る負荷が増大することが予測される場合、表示装置31の処理能力を超えないように、現在表示中の映像及び追加される映像の表示品質を変更することで、複数映像を中断あるいは終了することなく、表示し続けることを可能にする。
<第4の実施形態>
 第4の実施形態の表示装置の構成を図10に示す。表示装置51は、表示品質制御部52、映像表示部54、並びに、映像蓄積部55を備えて構成される。表示品質制御部52は、映像検出部56と、負荷推定部57と、映像表示制御部58と、表示遅延部59とから構成される。
 第4の実施形態は、図10に示すように、第3の実施形態の構成に加えて、表示遅延部(表示遅延手段)59を備えることを特徴とする。これにより、ネット配信される映像データや映像蓄積部55からの映像データを検出すると、該映像の表示を所定時間、遅延させ、その間に、映像数が増加することで表示装置51のCPUにかかる負荷を推定し、映像表示の品質と配置を制御することで、表示する映像が増えても映像再生が中断あるいは終了することなく、表示され続けることを可能にする。
 以下、図10をもとに、表示装置51を構成する各部について説明する。
 (表示品質制御部の機能)
 映像検出部(映像検出手段)56は、映像蓄積部やビデオサーバーからネットワークを介して映像データが入力されるのを検出し、検出信号を負荷推定部57と表示遅延部59へ送る。表示遅延部(表示遅延手段)59は、映像着信検出信号を受けると、検出された映像の処理、すなわち、映像の表示(再生)を所定の時間、遅延させる。
 負荷推定部(負荷推定手段)57は、映像着信検出信号を受けると、その映像に係る処理が現在再生中の複数映像の表示に与える負荷レベルを推定する。このときの負荷は、現映像表示に要している処理量と映像データに係る処理量、及び表示装置51の電池残量とから推定される表示装置51のCPUへのトータルな負荷とする。たとえば、3つの映像を表示している時に、別の3つの映像を受信した場合、合計6つの映像再生処理に係る処理量、及び表示装置51の電池残量などから、CPUの負荷レベルを推定する。なお、複数の映像表示に要する処理量は、画面に表示される映像の個数や各映像の大きさ、フレームレート数、解像度等に依存する。
 映像表示制御部(映像表示制御手段)58は、負荷推定部(負荷推定手段)57が推定した負荷レベルに応じて、全映像(現在表示されている映像と追加表示される映像)の表示品質を決定し、映像表示部54で画面に表示される各サムネイル映像の再生(符号化データの場合、復号処理を含む)と、サムネイルの画面上への配置とを制御する。たとえば負荷レベルが大きくなると、全映像のフレームレートや解像度を落としたり、圧縮度を上げたり、復号処理を簡略化したりする。復号処理の簡略化方式としては、動き補償簡略化、デブロッキングフィルタ省略、フレームスキップなどがある。第1の実施形態と同じく、図4に示すような表示品質管理テーブルを備えており、負荷推定部(負荷推定手段)が推定した負荷レベルに応じて映像品質レベルをリアルタイム(実時間)再生、スロー再生、スキップ再生のいずれか決定するものとする。詳細は第3の実施形態と同じである。
 映像表示制御部(映像表示制御手段)58は、また、表示遅延後にすべての複数映像が同時にその表示品質に切り替えわるよう、表示タイミング制御機能を有するようにしてもよい。
 映像表示制御部(映像表示制御手段)58は、また、表示品質の変更を、ユーザが注目している映像以外の映像に対してのみ行うようにしてもよい。ユーザが注目している映像とは、たとえば、表示装置51上でカーソル等があたっている映像や、表示装置51の画面中央に表示されている映像、あるいはユーザ操作により選択された映像である。
 映像表示制御部(映像表示制御手段)58は、また、表示品質の変更を、追加映像に対してのみ実行する機能を有するようにしてもよい。
 さらに映像表示制御部(映像表示制御手段)58は、表示遅延の間にユーザに映像の表示品質が変わることを予告する機能を有するようにしてもよい。
 映像表示部(映像表示手段)54は、例えば液晶パネルによって構成され、ネット配信される映像と現在表示されている映像を、所定の(遅延)時間後、映像表示制御部58で決定した映像品質及び配置でサムネイル表示する。
 (表示品質制御の処理フロー)
 ここで、3つの映像を再生しているときに、映像検出部56が3つの映像を検出した場合についての表示装置51の処理をフローチャート図11で説明する。
 ユーザが表示装置51で、たとえば図8Aに示す表示例のように、3つの映像を閲覧しているものとする。このとき、映像検出部56がビデオサーバー61によるネットワーク60を介しての3つの映像データの配信を検出すると(S31のYES)、着信検出信号を負荷推定部57と表示遅延部59へ送る。表示遅延部59は、映像着信検出信号を受けると、当該映像の表示を所定の時間、遅延させる(S32)。負荷推定部57は、映像着信検出信号を受けると、現映像3つと映像3つの計6つの映像再生に係る処理が表示装置51の映像表示に与える負荷レベルを推定する(S33)。なお、この処理フローでは、表示遅延を行なってから負荷レベルの推定を行なっているが、負荷レベルの推定を行なってから表示遅延を行なってもよいし、同時に処理を行なってもよい。
 映像表示制御部58は、負荷推定部57が推定した負荷レベルに応じて、映像の表示品質と配置を決定し、映像表示部54で表示される映像を制御する(S34)。ここで、表示品質は、たとえば負荷レベルが「中」と判定された場合は、「スロー再生」となり、配置は、たとえば、図8Bの表示例に示すような配置となる。映像表示部54は、所定の時間経過後、映像表示制御部で制御された映像品質と配置で6つの映像を表示し(S35)、処理を終了する。
 なお、本処理フローでは、S32の表示遅延を所定の時間に設定するとし、S35の表示実行は所定の時間経過後、とした。しかしながら、S32の処理遅延の時間を設定せずに、図11には図示しないが、S33において負荷推定部57が推定した負荷レベルに応じて遅延時間を決定するようにしてもよいし、あるいはまた、S34における映像品質が決定したか否かを判定するフローを設けて、映像品質が決定したらS35の表示実行に移るようにしてもよい。
 このように、第4の実施形態では、追加映像の表示遅延部59を備えることでネット配信される映像や映像蓄積部55から選択される映像の表示を所定の時間、遅延させ、その間に(CPU負荷が増大する前に)映像の表示品質を変更することで、機器の処理能力に見合った複数映像表示を可能にし、映像を中断あるいは終了することなく、表示し続けることを可能にする。
<第5の実施形態>
 以下、本発明の実施の形態について図面を用いて説明する。実施の形態として、第1及び第2の実施形態と同じく、携帯電話装置等の通信機器に適用して構成した表示装置71(図12)をもとに、各部について説明する。
 表示装置71は、表示品質制御部72、外的データ出力部73、映像表示部74、並びに映像蓄積部75を備えて構成される。表示品質制御部72は、外的データ検出部76と、映像検出部86と、負荷推定部77と、映像表示制御部78とから構成される。
 第5の実施形態は、第1の実施形態と第3の実施形態を共存させたものであり、電話やメールの着信などの外的データと、表示装置71に内蔵した映像蓄積部75やネット配信される映像の両方を処理することを可能にする。
 これにより、一画面に複数の映像を表示しているときに、電話着信等の外的データに加え、映像蓄積部75やネットワーク80を介してビデオサーバー81からの映像データを受信したときにも、映像再生が中断あるいは終了することなく、表示され続けることを可能にする。
 表示品質制御部72における負荷推定部77は、第1の実施形態で説明した外的データと第2の実施形態で説明した映像の両方の処理に係る負荷を推定し、映像表示制御部78は、電話着信等の外的データが入力されたとき、あるいは/かつ、現在表示中の映像にさらに映像蓄積部75あるいは/かつビデオサーバー81から映像データが追加されたとき、表示装置71の処理能力を超えないように、画面に表示される映像の表示品質を変更するよう制御し、複数の映像再生が中断あるいは終了することなく、表示され続けることを可能にする。
 (表示品質制御部の機能)
 外的データ検出部(外的データ検出手段)76は、通信機能を介して表示装置71に電話やメールの着信等の外的データが入力されるのを検出し、検出信号を負荷推定部77へ送る。映像検出部(映像検出手段)86は、映像蓄積部75やビデオサーバー81から複数の映像がネット配信されるのを検出し、検出信号を負荷推定部77へ送る。負荷推定部(負荷推定手段)77は、外的データあるいは/かつ映像データの着信検出信号を受けると、その外的データあるいは/かつ映像データに係る処理が現在再生中の複数映像の表示に与える負荷レベルを推定する。このときの負荷は、現映像表示に要している処理量と外的データあるいは/かつ映像データに係る処理量、及び表示装置71の電池残量とから推定される表示装置71のCPUへのトータルな負荷とする。
 映像表示制御部(映像表示制御手段)78は、負荷推定部(負荷推定手段)77が推定した負荷レベルに応じて、全映像(現在表示されている映像と追加される映像)の表示品質を決定し、映像表示部74で画面に表示される各サムネイル映像の再生(符号化データの場合、復号処理を含む)と、サムネイルの画面上への配置とを制御する。たとえば負荷レベルが大きくなると、全映像のフレームレートや解像度を落としたり、圧縮度を上げたり、復号処理を簡略化したりする。復号処理の簡略化方式としては、動き補償簡略化、デブロッキングフィルタ省略、フレームスキップなどがある。第5の実施形態では、第1の実施形態と同じく、図4に示すような表示品質管理テーブル15を備えており、負荷推定部(負荷推定手段)77が推定した負荷レベル16に応じて映像品質レベル17をリアルタイム(実時間)再生、スロー再生、スキップ再生のいずれか決定するものとする。詳細は前記実施形態と同じである。
 映像表示制御部(映像表示制御手段)78は、また、表示品質の変更を、ユーザが注目している映像以外の映像に対してのみ実行する機能を有するようにしてもよい。
 さらに映像表示制御部(映像表示制御手段)78は、表示品質の変更を、追加映像に対してのみ実行する機能を有するようにしてもよい。
 映像表示部(映像表示手段)74は、例えば液晶パネルによって構成され、現在表示されている映像と追加映像を、映像表示制御部で決定した映像品質及び配置でサムネイル表示する。
 外的データ出力部(外的データ出力手段)73は、外的データの処理(たとえば電話着信処理の場合は、呼び出し音を鳴らすなど)を実行する。
 (表示品質制御の処理フロー)
 第5の実施形態における表示装置71の処理フローを図13のフローチャートにて説明する。
 ユーザが表示装置71で、たとえば図8Aに示す表示例のように、3つの映像を閲覧しているものとする。このとき、映像検出部86がネットワーク80を介して3つの映像データの配信を検出すると、着信検出信号を負荷推定部77へ送る。一方、外的データ検出部76が、電話着信等、外的データを検出すると、着信検出信号を負荷推定部77へ送る。つまり、映像検出部86あるいは/かつ外的データ検出部76が、映像データあるいは/かつ外的データを検出すると着信検出信号を負荷推定部77へ送る(S41のYES)。
 負荷推定部77は、現映像3つと映像3つの計6つの映像再生、及び外的データの処理が表示装置71の映像表示に与える負荷レベルを推定する(S42)。映像表示制御部78は、負荷推定部77が推定した負荷レベルに応じて、映像の表示品質と配置を決定し、映像表示部74で表示される映像を制御する(S43)。ここで、表示品質は、たとえば負荷レベルが「大」と判定された場合は、「スキップ再生」となり、配置は、たとえば、図8Bの表示例に示すような配置となる。映像表示部74は、映像表示制御部78で制御された映像品質と配置で6つの映像を表示し(S44)、処理を終了する。
 この処理により、表示する映像が増えたり、電話などが掛ってくることで機器の処理能力に係る負荷が増大することが予測される場合、表示装置71の処理能力を超えないように現在表示中の映像及び追加される映像の表示品質を変更することで、映像再生を中断あるいは終了することなく、表示し続けることを可能にする。
<第6の実施形態>
 第6の実施形態の表示装置91の構成を図14に示す。表示装置91は、表示品質制御部92、外的データ出力部93、映像表示部94、並びに映像蓄積部95を備えて構成される。表示品質制御部92は、外的データ検出部96と、映像検出部106と、処理遅延部99と、表示遅延部109と、負荷推定部97と、映像表示制御部98とから構成される。
 第6の実施形態は、図14に示すように、第5の実施形態の構成に加えて、表示品質制御部92に表示遅延部(表示遅延手段)109と処理遅延部(処理遅延手段)99を備えることを特徴とする。これにより、画面に複数の映像を表示しているときに、電話着信等の外的データに加え、映像蓄積部95やネットワーク100を介してビデオサーバー101からの映像を受信したときに、外的データの処理と映像の表示を所定時間、遅延させ、その間に、機器のCPUにかかる負荷を推定し、映像表示の品質と配置を制御することで、映像再生が中断あるいは終了することなく、表示され続けることを可能にする。
 以下、図14をもとに、表示装置91を構成する各部について説明する。
 (表示品質制御部の機能)
 外的データ検出部(外的データ検出手段)96は、通信機能を介して表示装置91に電話やメールの着信等の外的データが入力されるのを検出する。例えば、電話の着信を検出した時に着信検出信号を処理遅延部99と負荷推定部97へ送る。映像検出部(映像検出手段)106は、映像蓄積部95やビデオサーバー101から映像データがネット配信されるのを検出し、検出信号を表示遅延部109と負荷推定部97へ送る。
 処理遅延部(処理遅延手段)99は、外的データ着信検出信号を受けると、検出された外的データの処理(たとえば、電話着信の場合は、呼び出し音を鳴らすなど)を所定の時間、遅延させる。表示遅延部(表示遅延手段)109は、映像受信信号を受けると、映像の処理を所定の時間、遅延させる。映像の処理とは、たとえば配信された映像の再生処理である。
 負荷推定部(負荷推定手段)97は、外的データあるいは/かつ映像データの着信検出信号を受けると、その外的データあるいは/かつ映像データに係る処理が現在再生中の複数映像の表示に与える負荷レベルを推定する。このときの負荷は、現映像表示に要している処理量と外的データあるいは/かつ映像データに係る処理量、及び表示装置91の電池残量とから推定される表示装置91のCPUへのトータルな負荷とする。
 映像表示制御部(映像表示制御手段)98は、負荷推定部(負荷推定手段)97が推定した負荷レベルに応じて、全映像(現在表示されている映像と追加表示される映像)の表示品質を決定し、映像表示部94で画面に表示される各サムネイル映像の再生(符号化データの場合、復号処理を含む)と、サムネイルの画面上への配置とを制御する。たとえば負荷レベルが大きくなると、全映像のフレームレートや解像度を落としたり、圧縮度を上げたり、復号処理を簡略化したりする。復号処理の簡略化方式としては、動き補償簡略化、デブロッキングフィルタ省略、フレームスキップなどがある。詳細は前記実施形態と同じである。
 映像表示制御部(映像表示制御手段)98は、また、所定の時間経過(遅延)後にすべての複数映像が同時にその表示品質に切り替えわるよう、表示タイミング制御機能を有するようにしてもよい。
 映像表示制御部(映像表示制御手段)98は、また、表示品質の変更を、ユーザが注目している映像以外の映像に対してのみ行うようにしてもよい。
 映像表示制御部(映像表示制御手段)98は、また、表示品質の変更を、追加映像に対してのみ実行する機能を有するようにしてもよい。
 さらに映像表示制御部(映像表示制御手段)98は、表示遅延の間にユーザに映像の表示品質が変わることを予告する機能を有するようにしてもよい。
 映像表示部(映像表示手段)94は、例えば液晶パネルによって構成され、全映像を、映像表示制御部で決定した映像品質及び配置でサムネイル表示する。
 外的データ出力部(外的データ出力手段)93は、処理遅延部99で遅延されていた外的データの処理(たとえば電話着信処理の場合は、呼び出し音を鳴らすなど)を実行する。
 (表示品質制御の処理フロー)
 第6の実施形態における表示装置91の処理フローを図15のフローチャートにて説明する。
 ユーザが表示装置91で、たとえば図8Aに示す表示例のように、3つの映像を閲覧しているものとする。このとき、映像検出部106が映像蓄積部95やネットワーク100を介してビデオサーバー101からの3つの映像データの配信を検出すると、着信検出信号を表示遅延部109と負荷推定部97へ送る(S51の映像データ)。一方、外的データ検出部96が、電話着信等、外的データを検出すると、着信検出信号を処理遅延部99と負荷推定部97へ送る(S51の外的データ)。つまり、映像検出部106あるいは/かつ外的データ検出部96が、映像データあるいは/かつ外的データを検出すると着信検出信号を負荷推定部97へ送る。
 表示遅延部109は、映像着信検出信号を受けると、当該映像の表示を所定の時間、遅延させる(S52)。処理遅延部99は、外的データ着信検出信号を受けると、当該データの処理(呼び出し音を鳴らすなど)を所定の時間、遅延させる(S53)。負荷推定部97は、外的データあるいは/かつ映像データの着信検出信号を受けると、現映像3つと映像3つの計6つの映像再生、及び外的データの処理が表示装置91の映像表示に与える負荷レベルを推定する(S54)。なお、この処理フローでは、表示遅延、処理遅延、負荷レベル推定の順で処理を行なっているが、処理順を入れ替えてもよいし、二つ乃至三つの処理を同時に行なってもよい。
 映像表示制御部98は、負荷推定部97が推定した負荷レベルに応じて、映像の表示品質と配置を決定し、映像表示部94で表示される映像を制御する(S55)。ここで、表示品質は、たとえば負荷レベルが「大」と判定された場合は、「スキップ再生」となり、配置は、たとえば、図8Bの表示例に示すような配置となる。映像表示部94は、所定の時間経過後、映像表示制御部98で制御された映像品質と配置で6つの映像を表示する(S56)。外的データ出力部93は、所定の時間経過後、電話着信処理(呼び出し音を鳴らすなど)等の外的データの処理を実行し(S57)、処理を終了する。
 このように、第6の実施形態では、表示遅延部と処理遅延部を備えることで、表示する映像が増えたり電話などが掛ってくるなどによりCPUに負荷がかかる前に複数映像の品質と配置を制御することで、映像を中断あるいは終了することなく、表示し続けることを可能にする。
 また、上記各実施の形態に係る表示品質制御部の機能は、コンピュータによって実現することができる。その場合、このような機能の処理内容を記述したプログラムが提供される。そして、そのプログラムをコンピュータで実行することにより、上記処理機能がコンピュータ上で実現される。処理内容を記述したプログラムは、コンピュータで読み取り可能な記録媒体に記録しておくことができる。
1、21、31、51、71、91 表示装置
2、22、32、52、72、92 表示品質制御部
3、23、73、93 外的データ出力部
4、24、34、54、74、94 映像表示部
5、25、35、55、75、95 映像蓄積部
6、26、76、96 外的データ検出部
7、27、37、57、77、97 負荷推定部
8、28、38、58、78、98 映像表示制御部
10、30、40、60、80、100 ネットワーク
15 表示品質管理テーブル
29、99 処理遅延部
41、61、81、101 ビデオサーバー
59、109 表示遅延部
36、56、86、106 映像検出部
 

Claims (27)

  1.  複数の映像データの表示品質を制御して表示させる表示装置であって、
     表示されている映像データとは別のデータの入力を検出するデータ検出手段と、
     該別データが前記表示装置の処理能力に与える負荷を推定する負荷推定手段と、
     その負荷が前記表示装置の処理能力を超える場合に、表示処理が継続できるように前記表示装置に表示される複数映像の品質を変更する映像表示制御手段と、
    を備えることを特徴とする表示装置。
  2.  前記別データは、映像以外のデータである外的データであることを特徴とする請求項1に記載の表示装置。
  3.  前記データ検出手段が外的データの受信を検知すると、外的データの処理を所定の時間だけ遅延させる処理遅延手段を更に備えることを特徴とする請求項2に記載の表示装置。
  4.  前記別データは、表示映像データに追加表示される別映像データであることを特徴とする請求項1に記載の表示装置。
  5.  前記データ検出手段が別映像データの受信を検知すると、別映像データの処理を所定の時間だけ遅延させる処理遅延手段を更に備えることを特徴とする請求項4に記載の表示装置。
  6.  複数の映像データの表示品質を制御して表示させる表示装置であって、
     表示映像データに追加して表示される映像データを検知する映像検出手段と、
     映像データとは異なるデータである外的データの入力を検知する外的データ検出手段と、
     追加映像データあるいは/かつ外的データが前記表示装置に表示される複数映像の表示に与える負荷を推定する負荷推定手段と、
     その負荷が前記表示装置の処理能力を超える場合に、表示処理が継続できるように表示される映像の品質を変更する映像表示制御手段と、
    を備えることを特徴とする表示装置。
  7.  前記映像検出手段が追加映像の入力を検知した場合、追加映像の表示を所定の時間だけ遅延させる表示遅延手段と、
     前記外的データ検出手段が外的データの受信を検知した場合、外的データの処理を所定の時間だけ遅延させる処理遅延手段と、
    を更に備えることを特徴とする請求項6に記載の表示装置。
  8.  前記映像表示制御手段は、前記負荷推定手段により推定された負荷レベルに応じて、リアルタイム再生、スロー再生、スキップ再生に切り替えて表示品質を変更することを特徴とする請求項1乃至7のいずれかに記載の表示装置。
  9.  前記映像表示制御手段は、前記負荷推定手段により推定された負荷レベルに応じて、画質劣化が許容できる範囲で復号処理を簡略化し表示品質を変更することを特徴とする請求項1乃至7のいずれかに記載の表示装置。
  10.  前記映像表示制御手段は、すべての映像の表示品質を同時に切り替えることを特徴とする請求項1乃至9のいずれかに記載の表示装置。
  11.  前記映像表示制御手段は、ユーザが注目している映像以外の映像に対して表示品質を変更することを特徴とする請求項1乃至9のいずれかに記載の表示装置。
  12.  前記映像表示制御手段は、新たに追加される映像に対してのみ表示品質の変更を行うことを特徴とする請求項1乃至9のいずれかに記載の表示装置。
  13.  前記映像表示制御手段は、遅延の間にユーザに映像の表示品質が変わることを予告する機能を有することを特徴とする請求項3、5又は7に記載の表示装置。
  14.  複数の映像データの表示品質を制御して表示装置に表示させる表示方法であって、
     表示されている映像データとは別のデータの入力を検出するデータ検出ステップと、
     該別データが前記表示装置の処理能力に与える負荷を推定する負荷推定ステップと、
     その負荷が前記表示装置の処理能力を超える場合に、表示処理が継続できるように前記表示装置に表示される複数映像の品質を変更する映像表示制御ステップと、
    を備えることを特徴とする表示方法。
  15.  前記別データは、映像以外のデータである外的データであることを特徴とする請求項14に記載の表示方法。
  16.  前記データ検出ステップにおいて外的データの受信を検知すると、外的データの処理を所定の時間だけ遅延させる処理遅延ステップを更に備えることを特徴とする請求項15に記載の表示方法。
  17.  前記別データは、表示映像データに追加表示される別映像データであることを特徴とする請求項14に記載の表示方法。
  18.  前記データ検出ステップにおいて別映像データの受信を検知すると、別映像データの処理を所定の時間だけ遅延させる処理遅延ステップを更に備えることを特徴とする請求項17に記載の表示方法。
  19.  複数の映像データの表示品質を制御して表示装置に表示させる表示方法であって、
     表示映像データに追加して表示される映像データを検知する映像検出ステップと、
     映像データとは異なるデータである外的データの入力を検知する外的データ検出ステップと、
     追加映像データあるいは/かつ外的データが前記表示装置に表示される複数映像の表示に与える負荷を推定する負荷推定ステップと、
     その負荷が前記表示装置の処理能力を超える場合に、表示処理が継続できるように表示される映像の品質を変更する映像表示制御ステップと、
    を備えることを特徴とする表示方法。
  20.  前記映像検出ステップにおいて追加映像の入力を検知した場合、追加映像の表示を所定の時間だけ遅延させる表示遅延ステップと、
     前記外的データ検出ステップにおいて外的データの受信を検知した場合、外的データの処理を所定の時間だけ遅延させる処理遅延ステップと、
    を更に備えることを特徴とする請求項19に記載の表示方法。
  21.  前記映像表示制御ステップにおいて、前記負荷推定手段により推定された負荷レベルに応じて、リアルタイム再生、スロー再生、スキップ再生に切り替えて表示品質を変更することを特徴とする請求項14乃至20のいずれかに記載の表示方法。
  22.  前記映像表示制御ステップにおいて、前記負荷推定手段により推定された負荷レベルに応じて、画質劣化が許容できる範囲で復号処理を簡略化し表示品質を変更することを特徴とする請求項14至20のいずれかに記載の表示装置。
  23.  前記映像表示制御ステップにおいて、すべての映像の表示品質を同時に切り替えることを特徴とする請求項14乃至21のいずれかに記載の表示方法。
  24.  前記映像表示制御ステップにおいて、ユーザが注目している映像以外の映像に対して表示品質を変更することを特徴とする請求項14乃至21のいずれかに記載の表示方法。
  25.  前記映像表示制御ステップにおいて、新たに追加される映像に対してのみ表示品質の変更を行うことを特徴とする請求項14乃至21のいずれかに記載の表示方法。
  26.  前記映像表示制御ステップにおいて、遅延の間にユーザに映像の表示品質が変わることを予告する機能を有することを特徴とする請求項16、18又は20に記載の表示方法。
  27.  コンピュータに、請求項14乃至26の表示方法を実行させるためのプログラム。
PCT/JP2010/057354 2009-04-28 2010-04-26 表示装置、表示方法及びそれを実行するためのプログラム WO2010125999A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201080028981.0A CN102484697B (zh) 2009-04-28 2010-04-26 显示设备和显示方法
US13/266,656 US20120044254A1 (en) 2009-04-28 2010-04-26 Display apparatus, display method and program for executing the same
JP2011511389A JP5133454B2 (ja) 2009-04-28 2010-04-26 表示装置、表示方法及びそれを実行するためのプログラム

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2009109096 2009-04-28
JP2009-109096 2009-04-28

Publications (1)

Publication Number Publication Date
WO2010125999A1 true WO2010125999A1 (ja) 2010-11-04

Family

ID=43032147

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2010/057354 WO2010125999A1 (ja) 2009-04-28 2010-04-26 表示装置、表示方法及びそれを実行するためのプログラム

Country Status (4)

Country Link
US (1) US20120044254A1 (ja)
JP (1) JP5133454B2 (ja)
CN (1) CN102484697B (ja)
WO (1) WO2010125999A1 (ja)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8928678B2 (en) 2012-08-02 2015-01-06 Intel Corporation Media workload scheduler
JP2014072662A (ja) * 2012-09-28 2014-04-21 Toshiba Corp 通信制御方法
JP5929719B2 (ja) * 2012-11-12 2016-06-08 ソニー株式会社 情報処理装置、通信システムおよび情報処理方法
US20140192207A1 (en) * 2013-01-07 2014-07-10 Jinsong Ji Method and apparatus to measure video characteristics locally or remotely

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005244382A (ja) * 2004-02-25 2005-09-08 Sanyo Electric Co Ltd サムネイル画像生成装置
JP2005269508A (ja) * 2004-03-22 2005-09-29 Casio Comput Co Ltd 通信端末装置および通信端末処理プログラム
JP2007243569A (ja) * 2006-03-08 2007-09-20 Casio Hitachi Mobile Communications Co Ltd コンテンツ処理装置および割込み制御プログラム
JP2007288559A (ja) * 2006-04-18 2007-11-01 Matsushita Electric Ind Co Ltd 再生方法および再生装置
JP2008245131A (ja) * 2007-03-28 2008-10-09 Toshiba Corp 動画像復号化装置及び動画像復号化方法

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7272295B1 (en) * 1999-11-10 2007-09-18 Thomson Licensing Commercial skip and chapter delineation feature on recordable media
US20020030843A1 (en) * 2000-02-02 2002-03-14 Tuli Raja Singh Portable high speed internet access device
JP3665615B2 (ja) * 2002-01-30 2005-06-29 株式会社東芝 外部記憶装置及び外部記憶装置におけるバッテリ残量通知方法
US7694318B2 (en) * 2003-03-07 2010-04-06 Technology, Patents & Licensing, Inc. Video detection and insertion
JP4790990B2 (ja) * 2004-01-27 2011-10-12 京セラ株式会社 携帯端末
JP4405419B2 (ja) * 2005-03-31 2010-01-27 株式会社東芝 画面送信装置
JP2007013315A (ja) * 2005-06-28 2007-01-18 Toshiba Corp 情報処理装置および動画像再生方法
JP5058462B2 (ja) * 2005-07-28 2012-10-24 京セラ株式会社 表示装置及び表示制御方法
JP5289733B2 (ja) * 2006-07-13 2013-09-11 オリンパスイメージング株式会社 燃料電池を用いた携帯端末機器及び携帯端末機器用の燃料電池システム
KR20080014329A (ko) * 2006-08-10 2008-02-14 삼성전자주식회사 영상표시장치 및 그 제어방법과 프로그램이 기록된 기록매체
CN100566401C (zh) * 2006-09-12 2009-12-02 腾讯科技(深圳)有限公司 即时通信视频质量调节方法及装置
JP2008107780A (ja) * 2006-09-29 2008-05-08 Matsushita Electric Ind Co Ltd 信号伝達回路,表示データ処理装置,および表示装置
KR101431003B1 (ko) * 2007-06-13 2014-08-20 삼성전자주식회사 영상신호의 디스플레이방법 및 이를 적용한 디스플레이시스템
KR101410696B1 (ko) * 2007-09-11 2014-06-24 삼성전자주식회사 높은 슬루율과 안정성을 갖는 연산 증폭기와 이의 동작 방법
US8249423B2 (en) * 2008-05-08 2012-08-21 Sony Ericsson Mobile Communications Ab Electronic devices and methods that insert addressable chapter marks relative to advertising content in video streams
WO2011119075A1 (en) * 2010-03-23 2011-09-29 Telefonaktiebolaget L M Ericsson (Publ) Uplink load prediction using kalman filters

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005244382A (ja) * 2004-02-25 2005-09-08 Sanyo Electric Co Ltd サムネイル画像生成装置
JP2005269508A (ja) * 2004-03-22 2005-09-29 Casio Comput Co Ltd 通信端末装置および通信端末処理プログラム
JP2007243569A (ja) * 2006-03-08 2007-09-20 Casio Hitachi Mobile Communications Co Ltd コンテンツ処理装置および割込み制御プログラム
JP2007288559A (ja) * 2006-04-18 2007-11-01 Matsushita Electric Ind Co Ltd 再生方法および再生装置
JP2008245131A (ja) * 2007-03-28 2008-10-09 Toshiba Corp 動画像復号化装置及び動画像復号化方法

Also Published As

Publication number Publication date
US20120044254A1 (en) 2012-02-23
JP5133454B2 (ja) 2013-01-30
JPWO2010125999A1 (ja) 2012-11-01
CN102484697A (zh) 2012-05-30
CN102484697B (zh) 2015-07-08

Similar Documents

Publication Publication Date Title
JP5082152B2 (ja) 映像再生装置、映像変換再生システム及びプログラム
US9509940B2 (en) Image output device, image output method, and recording medium
JP5133454B2 (ja) 表示装置、表示方法及びそれを実行するためのプログラム
KR101197436B1 (ko) 영상 장치, 영상 출력 제어 방법 및 재생 제어 방법
JP2011071965A (ja) 画像編集装置およびそれを搭載した撮像装置、ならびに画像再生装置およびそれを搭載した撮像装置
JP2005123754A (ja) 放送通信複合端末
JP2008244820A (ja) 映像表示システム及び映像出力装置
WO2006061935A1 (ja) 画像記録装置および方法、並びにプログラム
JP2005311776A (ja) 映像再生装置
JP5471328B2 (ja) 動画像再生装置及び動画像再生方法並びにプログラム
US8428439B2 (en) Broadcast program recording/reproducing device and broadcast program recording/reproducing method
JP2010073075A (ja) 画像信号処理装置、画像信号処理方法
JP2006262219A (ja) 情報記録装置
JP4506806B2 (ja) 放送通信複合端末
JPH10294939A (ja) 画像伝送システム及び画像伝送装置
WO2013001784A1 (ja) 信号処理装置、信号処理方法および映像再生装置
EP2312842B1 (en) Display apparatus and image playing method thereof
KR100813063B1 (ko) 고속 포워딩 및 리와인딩 디스플레이 기능을 갖는 영상장치 및 그 방법
KR101462116B1 (ko) 방송처리장치 및 그 제어방법
JP5932293B2 (ja) 画像出力装置
JP2006108742A (ja) 画像撮像装置
JP2011171833A (ja) 動画再生装置、動画再生方法、および動画再生プログラム
JP2007013379A (ja) 携帯端末装置、再生制御方法および再生制御プログラム
KR20080098735A (ko) 고속 영상 재생방법 및 이를 적용한 영상재생장치
Oujezdský Optimizing Video Clips in Educational Materials

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 201080028981.0

Country of ref document: CN

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 10769697

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2011511389

Country of ref document: JP

Kind code of ref document: A

WWE Wipo information: entry into national phase

Ref document number: 13266656

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 10769697

Country of ref document: EP

Kind code of ref document: A1