WO2015015584A1 - 映像伝送システム、送信装置、および受信装置 - Google Patents
映像伝送システム、送信装置、および受信装置 Download PDFInfo
- Publication number
- WO2015015584A1 WO2015015584A1 PCT/JP2013/070690 JP2013070690W WO2015015584A1 WO 2015015584 A1 WO2015015584 A1 WO 2015015584A1 JP 2013070690 W JP2013070690 W JP 2013070690W WO 2015015584 A1 WO2015015584 A1 WO 2015015584A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- video signal
- processing
- transmission
- information
- processing condition
- Prior art date
Links
- 230000005540 biological transmission Effects 0.000 title claims abstract description 71
- 238000012545 processing Methods 0.000 claims abstract description 119
- 230000008054 signal transmission Effects 0.000 claims abstract description 15
- 238000000034 method Methods 0.000 claims description 35
- 230000006835 compression Effects 0.000 claims description 13
- 238000007906 compression Methods 0.000 claims description 13
- 238000004148 unit process Methods 0.000 claims 1
- 238000003384 imaging method Methods 0.000 description 70
- 230000006854 communication Effects 0.000 description 8
- 238000004891 communication Methods 0.000 description 8
- 238000010586 diagram Methods 0.000 description 6
- 238000005286 illumination Methods 0.000 description 6
- 238000012546 transfer Methods 0.000 description 5
- 230000007175 bidirectional communication Effects 0.000 description 4
- 238000012937 correction Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 230000002411 adverse Effects 0.000 description 1
- 238000009792 diffusion process Methods 0.000 description 1
- 230000009931 harmful effect Effects 0.000 description 1
- 239000002184 metal Substances 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/4104—Peripherals receiving signals from specially adapted client devices
- H04N21/4122—Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/003—Details of a display terminal, the details relating to the control arrangement of the display terminal and to the interfaces thereto
- G09G5/006—Details of the interface to the display terminal
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
- H04N21/4363—Adapting the video stream to a specific local network, e.g. a Bluetooth® network
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2340/00—Aspects of display data processing
- G09G2340/04—Changes in size, position or resolution of an image
- G09G2340/045—Zooming at least part of an image, i.e. enlarging it or shrinking it
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2370/00—Aspects of data communication
- G09G2370/04—Exchange of auxiliary data, i.e. other than image data, between monitor and graphics controller
- G09G2370/042—Exchange of auxiliary data, i.e. other than image data, between monitor and graphics controller for monitor identification
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2370/00—Aspects of data communication
- G09G2370/06—Consumer Electronics Control, i.e. control of another device by a display or vice versa
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2370/00—Aspects of data communication
- G09G2370/12—Use of DVI or HDMI protocol in interfaces along the display data pipeline
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/765—Interface circuits between an apparatus for recording and another apparatus
- H04N5/775—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television receiver
Definitions
- the technical field relates to video signal transmission.
- Patent Document 1 states that “the image receiving side waits a time that cannot be ignored until it can be received as a high-quality image even when there is a part that the user wants to see with high image quality or moves within the screen. As a means for solving the problem, “the image receiving side sends attention information indicating the attention state of the received image to the image transmitting side by the user on the image receiving side”. It is described that the image transmission side sets image transmission conditions according to the information of interest from the image reception side, and transmits an image according to the image transmission conditions (Patent Document 1 [0011]).
- Patent Document 1 does not consider processing of a video signal in video transmission between a plurality of arbitrary devices.
- the present application includes a plurality of means for solving the above-described problems.
- the video signal transmission device is connected to the video signal reception device.
- the video signal receiving apparatus that has transmitted the information on the processing conditions of the video signal and received the information on the processing conditions of the video signal is processed by the video signal transmitting apparatus based on the information on the processing conditions of the received video signal to the video signal transmitting apparatus.
- the video signal transmitting apparatus that transmits the request for the condition and receives the request for the processing condition of the video signal transmits the processed video signal based on the request for the processing condition of the received video signal to the video signal receiving apparatus.
- a block diagram showing an example of a transmission system that connects a video signal transmitting device and a video signal receiving device using HDMI transmission The figure which shows the exchange and process of information of Example 1.
- the figure which shows an example of the setting of video signal acquisition conditions The figure which shows an example of the information transmission by CEC in Example 1.
- Block diagram showing an example of a transmission system for connecting one video signal receiving apparatus and a plurality of video signal transmitting apparatuses using HDMI transmission The figure which shows the structure which connects a display apparatus and several imaging devices using a switcher
- the figure which shows the normal signal format at the time of transmitting the video signal of 60 Hz The figure which shows an example of the video signal which transmits a standard-definition video signal and the high-definition video signal of a region of interest part
- the display performance and imaging performance (for example, resolution and frame rate) of other connected devices cannot be known in advance. For this reason, it is unclear whether the request from the video signal receiving apparatus can be executed by the video signal transmitting apparatus, and the function requested by the user may not be executed.
- FIG. 1 shows a transmission system in which a video signal transmitting device and a video signal receiving device are connected using HDMI (High-Definition Multimedia Interface, a registered trademark), which is a video transmission interface standard having a bidirectional communication function. It is a block diagram which shows an example.
- the imaging device 1 is illustrated as a video signal transmitting device
- the display device 2 is illustrated as a video signal receiving device.
- 3 is an HDMI cable for transmitting video
- 301 is a video signal transmission line
- 302 is a DDC (Display (Data Channel) line
- 303 is a CEC (Consumer Electronics Control) communication line
- other transmission lines are omitted.
- a system connected by wire will be described as an example, but the present invention can also be applied to a system that exchanges similar information wirelessly.
- the basic operation of video transmission / reception via HDMI is as follows. First, a +5 V voltage is applied from the imaging device 1 to the +5 V line (not shown in FIG. 1) between the imaging device 1 and the display device 2.
- the display device 2 that detects this voltage confirms the connection with the imaging device 1 and returns the voltage to an HPD (Hot Plug Detect) line (not shown in FIG. 1).
- the imaging device 1 detects this voltage and confirms the connection with the display device 2.
- the EDID (abbreviation of Enhanced Extended Display Identification) reading unit 104 of the imaging device 1 reads the EDID describing the specification of the reception capability of the display device 2 from the EDID storage unit 203 of the display device 2 through the DDC line 302 of the HDMI cable 3. read.
- the imaging device 1 determines a video format suitable for the display device 2 based on the read EDID, processes the video signal with the video signal processing unit 102, and transmits the video signal from the video transmission unit 103 to the HDMI cable 3.
- the data is transmitted to the display device 2 through the line 301.
- the display device 2 displays the video signal received by the video signal receiving unit 202 on the display unit 201.
- a + 5V voltage is applied from the imaging device 1 to the + 5V line.
- the display device 2 that has detected the voltage confirms the connection with the imaging device 1 and returns the voltage to the HPD line at 1002.
- the imaging device 1 detects this voltage and confirms the connection with the display device 2.
- the imaging device 1 reads the EDID of the display device 2.
- the display device 2 After completion of reading the EDID, in 1004, the display device 2 requests the imaging device 1 for information regarding items whose conditions can be set in the video signal processing. In response to this request, the imaging apparatus 1 transmits 1005 information about items whose conditions can be set in the video signal processing to the display apparatus 2.
- Examples of items whose conditions can be set include video compression rate, frame rate, resolution, gradation, data transfer rate, shooting environment, information addition, image processing, and the like.
- FIG. 3 shows an example of setting each item.
- Video compression rate”, “Frame rate”, “Resolution”, “Gradation”, etc. are related to the image quality of the video, and appropriate settings for monitoring, viewing, video recognition, etc. are required. This is an item. The numerical values applicable to each item and their ranges are transmitted as information.
- the restriction on the transmission amount there may be a case where there is a restriction on the transmission amount, and information regarding the restriction may be transmitted together.
- the upper limit of “X” defined by the product of the number of bits) may be set to 1.2 ⁇ 10 10 .
- This “X” is an example, and it is defined by using any two or only one of resolution, frame rate, and gradation, or defined by four or more items including other items, It may be defined in any way as long as the transmission amount can be constrained, such as defining only with items.
- the HDMI exemplified in this embodiment is an interface that transmits an uncompressed video signal, but may be applied to a system that uses an interface that transmits a compressed video signal.
- a system using a LAN (Local Area Network) such as Ethernet (registered trademark) the compression rate may be used as one of the items for which the above-described condition setting is possible.
- the display delay time can be set within an allowable range by setting the data transfer rate on the display device side, for example.
- the “imaging environment” includes, for example, items related to the illumination function attached to the imaging device 1, and setting this item enables illumination intensity, wavelength, direction, spot light / diffusion light source of the illumination device attached to the imaging device 1. And the like can be set from the display device 2. In addition, by including an item related to the camera direction, it is possible to set the camera direction of the imaging device 1 from the display device 2. As a result, an image with improved visibility can be taken in the imaging apparatus 1.
- “Addition of information” refers to whether or not the imaging apparatus 1 transmits information on the conditions set in the item of the shooting environment together with the video signal, and the material of the object shown in the video signal captured by the imaging apparatus 1
- the item includes information on the shape and color, information indicating the position of the object (for example, the center coordinates of the object) reflected in the video signal captured by the imaging apparatus 1, and the like.
- Examples of a method for acquiring information transmitted together with a video signal include a method performed by image recognition by the imaging apparatus 1 and a method in which a photographer who performs shooting using the imaging apparatus 1 inputs information.
- the object's Contains information about coordinate positions.
- image processing in the display device 2 special image processing for improving the texture by giving a luminance gradient or color peculiar to the attribute of the object.
- Image processing is information indicating whether or not to perform predetermined processing on the imaging apparatus side.
- the predetermined process include edge enhancement and contrast correction.
- edge enhancement and contrast correction For example, when compressing and transmitting a video signal, processing such as edge enhancement and contrast correction may be difficult with the compressed / decoded video signal, so processing such as edge enhancement and contrast correction is performed on the imaging device side. May have a function. If the same processing is performed twice on the display device side after the imaging device side performs these processings, it may cause adverse effects such as loss of the naturalness of the video, but information including the item “Image processing” By transmitting, it becomes possible for the display device to stop the image processing in the imaging device, and such a harmful effect can be prevented.
- the display device 2 determines the condition of the receivable video signal based on the information regarding the items whose conditions can be set in the received video signal processing of the imaging device 1. From the conditions of the video signal determined to be receivable, for example, determine the video signal processing conditions required for the imaging device, such as the conditions for determining the highest visibility and the conditions for the user of the display device to select. To do. Then, the determined request is transmitted to the imaging apparatus 1 at 1006.
- the imaging apparatus 1 Upon receiving a request regarding the processing conditions of the video signal, the imaging apparatus 1 captures a video in accordance with the request and processes the video signal in 1101, or performs video processing on the captured video according to the request.
- step 1007 the imaging apparatus 1 starts transmitting the processed video signal to the display apparatus 2. Thereafter, when there is no change in the processing conditions of the video signal, no request is made from the display device 2 side, and the imaging device 1 continues to transmit the video signal processed under the same conditions until the time point 1102 described later.
- a new request is made from the display device 2 side (10062), and the imaging device 1 performs video processing according to the conditions updated in 1102.
- the imaging apparatus 1 transmits a video signal processed based on the updated condition (10072).
- FIG. 4 is a CEC message exchange flow.
- ⁇ Give Video Signal Variable Condition> is set as a message corresponding to 1004 in FIG. This is a message for requesting the imaging apparatus 1 to transmit a ⁇ Video Signal Variable Condition_xxx> message described later.
- ⁇ Video Signal Variable Condition_xxx> is set as a message corresponding to 1005 in FIG. This indicates an item for which a plurality of conditions can be set, and a word for classifying the item name is inserted in the xxx portion. This is followed by configurable parameters.
- ⁇ Video Signal Requirements_xxx> is set as a message corresponding to 1006 in FIG. This is a request for video signal processing conditions, and only items that have already been received in ⁇ Video Signal Variable Condition_xxx> can be inserted into xxx. This is followed by parameters selected by the display device.
- XXX is set to “Frame Rate” in 10061 and the frame rate is set to 120 Hz, and “Imaging Illumination” is also set to “High” in 10063.
- the imaging device side arbitrarily sets conditions with reference to the EDID on the display device side.
- the parameter specified by 10051 may be set to [60/120 Hz], and the image pickup apparatus may be selected from 60 Hz or 120 Hz.
- a CEC line is used for information exchange corresponding to 1004 to 1006 in FIG. 2
- a DDC line or HEC abbreviation for HDMI Ethernet Channel
- HDMI is exemplified as a transmission line, but other transmission lines such as Ethernet, Displayport (registered trademark), and MHL (registered trademark) may be used as long as they can exchange various kinds of information through bidirectional communication with video signals.
- information relating to the video signal processing function is transmitted from the video signal transmitting device (imaging device), and the video signal receiving device (display device) that has received the information determines the applicable video signal processing conditions, and Information on the video signal processing condition is transmitted based on the determination, and the video signal transmitting device that receives the information processes the video signal based on the information, so that an arbitrary video signal transmitting device and video signal receiving device In the configured video system, the processing of the video signal transmitting apparatus can be controlled from the video signal receiving apparatus side. This improves usability in video transmission between any plurality of devices.
- the display device 2 designates a region of interest (ROI) of a video transmitted from the imaging device 1, and captures a request to perform signal processing different from the region other than the region of interest on the region of interest.
- ROI region of interest
- the region of interest is a region that the user particularly wants to pay attention to, and is set in order to perform image quality enhancement processing only on that portion.
- the blocks in FIG. 1 used for processing such as information transmission are the same as those in the first embodiment, and thus the description thereof is omitted.
- FIG. 7 is a diagram showing the exchange of information in the present embodiment. Since steps 1001 to 1003 are the same as those in FIG. In this embodiment, after 1003, as a request 1004 for information relating to the items whose conditions can be set as described with reference to FIG. 2, “request for transmission of sample video signal used for setting region of interest (1008)” “required region of interest” “Request for setting method (1009)” and “Request for information on items whose conditions can be set for the region of interest (1010)” are performed. In FIG. 7, the requests are transmitted in the order of 1008, 1009, and 1010. However, the order may be changed, and two requests or three requests may be transmitted simultaneously.
- the imaging apparatus 1 that has received the request from the display apparatus 2 transmits 1011, 1012, and 1013 as information 1005 relating to items whose conditions can be set.
- 1011, 1012, 1013 will be described.
- 1011 is a sample video signal used for setting a region of interest in the display device 2. This sample video signal transmission continues until time 1104 described later.
- the sample video signal request is transmitted (1008) and the sample video signal is transmitted (1011).
- the image signal is already transmitted from the imaging device 1 to the display device 2.
- 1008 and 1011 may be omitted, and the following processing may be performed using a video signal being transmitted from the imaging device 1 to the display device 2 instead of the sample video signal.
- a method of setting a region of interest for example, a method of designating the number of vertices of a region of interest composed of polygons by the number of vertices of the polygon using the coordinates on the pixels of the image (see FIG. 15A), A method of setting the coordinates of two diagonal points of the region of interest that is configured (see FIG. 15B), and a method of specifying the center point coordinates and the number of radius pixels of the region of interest configured in a circle (FIG. 15C) For example).
- 1013 is information on items for which conditions can be set for the region of interest.
- the items whose conditions can be set for the region of interest are the same as the items whose conditions can be set as described in the first embodiment.
- Information about a condition applicable only to the region of interest may be added to 1013. That is, for example, in setting conditions such as video compression rate, frame rate, resolution, and gradation, high quality conditions (video compression rate, frame rate, resolution, gradation) that are higher than a predetermined value can be applied only to the region of interest. By transmitting information indicating this to the display device 2, it is possible to set a high quality condition only for the region of interest.
- information is transmitted in the order of 1011, 1012, and 1013. However, the order may be changed, and two pieces of information or three pieces of information may be sent simultaneously.
- the display device 2 determines in 1202 whether or not the display device 2 corresponds to the method of setting the region of interest designated by the imaging device 1. Further, the display device 2 determines a video signal condition applicable to the display device 2 based on the information regarding the video signal processing function transmitted from the imaging device 1. If the region of interest can be set, the determination at this time includes determination of whether the condition can be applied only to the region of interest.
- a video signal to be performed on an imaging device such as a condition determined to be the highest image quality among applicable conditions, a condition selected by a user of the display device, from the processing conditions of the video signal determined to be applicable Determine requirements regarding acquisition conditions.
- 1014 and 1015 are transmitted as the request 1006 relating to the processing condition of the video signal.
- Reference numeral 1014 denotes information for designating a region of interest, such as coordinate information about the region of interest to be designated.
- Reference numeral 1015 denotes information relating to conditions for signal processing performed on the designated region of interest. In FIG. 7, information is transmitted in the order of 1014 and 1015. However, the order may be changed, and two pieces of information may be transmitted simultaneously.
- the imaging apparatus 1 that has received 1014 and 1015 performs signal processing on the region of interest designated by 1014 under the conditions of 1015.
- the video signal is transmitted to the display device 2. Thereafter, if there is no change in the region of interest or the processing conditions of the video signal, no request is made from the display device 2 side, and the imaging device 1 continues to transmit the video signal processed under the same conditions until a time point 1105 described later. .
- the display device 2 When changing the region of interest or the acquisition condition of the video signal, the display device 2 requests a condition update (10143, 10153). In 1105, the imaging device 1 performs video processing based on the updated condition request. Apply. In subsequent frames, the imaging apparatus 1 transmits a video signal processed based on the updated condition (10163).
- 1008 to 1010, 1011 to 1013, and 1014 to 1015 have been described as examples of 1004, 1005, and 1006 in FIG. 2, but in parallel with these information, other conditions described in the first embodiment are described.
- Information related to video compression rate, frame rate, resolution, gradation, data transfer rate, shooting environment, addition of information, image processing, etc.
- the signal processing conditions for the region of interest may be set by the method described in this embodiment, and the signal processing conditions for the region other than the region of interest may be set by the method described in the first embodiment.
- FIG. 8 is a CEC message exchange flow.
- ⁇ Give ROI Sample Image> is set as a message corresponding to “request for first video signal transmission” 1008 in FIG.
- ⁇ Give ROI Select Method> is set as a message corresponding to “request for information on setting method of region of interest” 1009.
- ⁇ Give ROI Variable Condition> is set as a message corresponding to “request for information on video signal processing function” 1010. Messages indicating these requests are transmitted from the display device 2 to the imaging device 1.
- the imaging apparatus 1 Upon receiving these requests, the imaging apparatus 1 first transmits a sample video signal used for setting the region of interest (1011, this item is not CEC communication, but is described for reference).
- ⁇ ROI Select Method> is set as a message corresponding to “information on region of interest setting method” 1012 in FIG. This shows the method of setting the region of interest. Further information follows about the specific setting method.
- Box ⁇ Diagonal Line shows a method of setting the coordinates of two diagonal points of a region of interest formed of a rectangle.
- ⁇ ROI Variable Condition_xxx> is set as a message corresponding to “information about video signal processing function” 1013 in FIG. 7. This indicates an item for which a plurality of conditions can be set for the region of interest, and a word for classifying the item name is inserted into the xxx portion.
- This is followed by configurable parameters. In FIG. 8, as an example, it is possible to set three frame rates of “60/120/240 Hz” by setting “xxx” to “Frame Rate” at 10091.
- ⁇ ROI Position> is set as a message corresponding to “information on the region of interest” 1014 in FIG. This indicates information on the coordinate position of the region of interest, followed by the coordinates of the two diagonal lines of the Box designated as the region of interest.
- ⁇ ROI Requirements_xxx> is set as a message corresponding to the “request regarding processing conditions of video signal” 1015 in FIG. This is a request for the video signal processing conditions of the region of interest, and only xxx that has already been received in ⁇ ROI Variable Condition_xxx> can be inserted into xxx. This is followed by parameters selected by the display device. In FIG. 8, as an example, “111” is requested to be “Frame Rate” in 10111 and the frame rate of the region of interest to be 240 Hz.
- FIG. 9 to 12 are explanatory diagrams of signal formats transmitted at 1016 in FIG. 7 when the image quality of only the region of interest is improved.
- FIG. 9 shows a normal signal format when transmitting a 60 Hz video signal, in which 21 indicates a vertical synchronization signal and 22 indicates a horizontal synchronization signal.
- One frame standard-definition video signal 23 is transmitted in the period between the synchronization signals.
- FIG. 10 is an example of a video signal in the case of transmitting a high-quality video signal 25 of the region of interest in addition to the standard-quality video signal 24. After the standard image quality video signal 24 is transmitted in the same manner as in FIG. 9, the high quality image signal 25 of the region of interest is transmitted in the next frame.
- the standard-definition video signal 24 may or may not include the video of the region of interest.
- the standard-definition video signal 24 does not include the video signal of the region of interest, the amount of information transmitted can be reduced accordingly.
- the display device can select whether the video of the region of interest has the standard image quality or the high image quality.
- the standard image quality video signal 24 may be an image including a region of interest, and the region of interest to be transmitted later may send only difference information from the standard image quality signal.
- the effect of suppressing the information to be transmitted can be expected by transmitting only the difference information.
- the video format of the standard-definition video signal 24 and the high-quality video signal 25 of the region of interest may differ, and in this case, packet data describing information about each video format is attached to the video signal.
- packet data In HDMI, packet data is transmitted in vertical and horizontal blanking periods. If the amount of information of the video signal of the high-quality video signal 25 in the region of interest is not so large, the remaining time of the video signal transmission period may be used.
- FIG. 11 shows an example of a video signal in the case of transmitting a high-quality video signal 25 of the region of interest in addition to the standard-quality video signal 24.
- the standard image quality video signal 24 is transmitted at a transmission rate twice as high as that of the standard signal 23 in FIG.
- the image is transmitted in half the time of the standard-definition video signal 23 in FIG. Then, after transmitting the standard quality video signal 24, the high quality video signal 25 of the region of interest is transmitted.
- FIG. 12 shows an example of a video signal in the case where the high-quality video signal 25 of the region of interest is transmitted together with the standard-quality video signal 24.
- This is a data structure in which the standard image quality video signal 24 and the high quality image signal 25 of the region of interest are arranged in the horizontal direction.
- Decrease the image quality such as data thinning, such as transmitting the standard-definition video signal 30 at twice the transmission speed, or decimating the number of pixels in the horizontal pixel direction to 1/2, compression of the video signal, or gradation
- the transmission in the horizontal direction in half the time by the method, etc. is the same as the example in FIG. 11 except that the vertical and horizontal directions are changed.
- FIG. 13 and 14 show examples of signal formats when the standard image quality video signal is 60 Hz and the high quality image signal of the region of interest is 240 Hz frame rate.
- FIG. 13 shows a signal format in which a standard-definition video signal is divided into four parts for each screen position and each is attached to a high-quality video signal in a region of interest.
- FIG. 14 is a signal system for transmitting a high-quality video signal of a region of interest after first transmitting a standard-definition video signal, as in FIG. Which signal format may be arbitrarily specified, and a signal method to be employed may be determined according to the width of the region of interest.
- the video signal transmitting device and the video signal receiving device in any combination can communicate with each other on the transmission line.
- the connected video system it is possible to specify the region of interest from the video signal receiving device side and specify the image quality of the region of interest of the video signal processed by the video signal transmitting device.
- FIG. 5 is a block diagram showing an example of a transmission system that connects one video signal receiving apparatus and two video signal transmitting apparatuses using HDMI.
- the display device 2 has two HDMI inputs, one connected to the imaging device 11 and the other connected to the imaging device 12.
- the display device 2 switches the HDMI input between the first input 2001 composed of 2021 to 2041 and the second input 2002 composed of 2021 to 2041, thereby transmitting / receiving a video signal to / from one of the imaging devices 11 and 12.
- the information exchange described in the first and second embodiments can be performed. Switching between the first input 2001 and the second input 2002 is performed by bringing one of the inputs into an active state.
- the display device 2 includes two HDMI inputs
- the processing of the video signal transmitting apparatus can be controlled from the signal receiving apparatus side. This improves usability in video transmission between any plurality of devices.
- FIG. 6 shows an example in which a display device that is a video signal receiving device is connected to imaging devices 13, 14, and 15 that are three video signal transmitting devices via a switcher 16 that is a repeater device.
- the network address of the device to be communicated is attached to the information to attach the communication partner.
- the imaging devices 13, 14, 15 correspond to the designation of the camera orientation of the “imaging environment” described in the first embodiment
- the display device 2 has three imaging devices 13, 14, 15. By controlling the direction of the camera, it is possible to take a wide range of images that are covered by three imaging devices.
- the transmission / reception of information described in the first and second embodiments and the designation of the network address of the device to communicate with each other can arbitrarily combine a plurality of video signal receiving devices or a plurality of video signal transmitting devices using a repeater device.
- imaging device 16: switcher
- 2 display device
- 3 HDMI cable
- 204 CEC communication unit
- 205 display device control unit
- 2042 Input 2 CEC communication unit
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Physics & Mathematics (AREA)
- Computer Hardware Design (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
従来技術においては、任意の複数の装置間での映像伝送における映像信号の処理ついては考慮されていないという課題があった。この課題を解決するために、例えば映像信号送信装置と映像信号受信装置とを含む映像伝送システムにおいて、映像信号送信装置が、映像信号受信装置へ、映像信号の処理条件に関する情報を送信し、映像信号の処理条件に関する情報を受信した映像信号受信装置が、映像信号送信装置へ、受信した映像信号の処理条件に関する情報に基づいて映像信号の処理条件の要求を送信し、映像信号の処理条件の要求を受信した映像信号送信装置が、映像信号受信装置へ、受信した映像信号の処理条件の要求に基づいて処理した映像信号を送信することを特徴とする。
Description
技術分野は、映像信号の伝送に関する。
特許文献1には、「画像受信側は、高画質で見たい部分があったり、それが画面内で移動した場合にも、高画質の画像として受信できるまでに、無視できない程度の時間を待たなければならなかった」(特許文献1[0008]参照)ことを課題とし、その解決手段として「画像受信側が、当該画像受信側のユーザが受信画像に対する着目状況を示す着目情報を画像送信側に伝達する。画像送信側は、画像受信側からの着目情報に従い、画像送信条件を設定し、その画像送信条件に従い画像を送信する」(特許文献1[0011])こと等が記載されている。
しかし、特許文献1はでは、任意の複数の装置間での映像伝送における映像信号の処理ついては考慮されていない。
上記課題を解決するために、例えば特許請求の範囲に記載の構成を採用する。
本願は上記課題を解決する手段を複数含んでいるが、その一例を挙げるならば、映像信号送信装置と映像信号受信装置とを含む映像伝送システムにおいて、映像信号送信装置が、映像信号受信装置へ、映像信号の処理条件に関する情報を送信し、映像信号の処理条件に関する情報を受信した映像信号受信装置が、映像信号送信装置へ、受信した映像信号の処理条件に関する情報に基づいて映像信号の処理条件の要求を送信し、映像信号の処理条件の要求を受信した映像信号送信装置が、映像信号受信装置へ、受信した映像信号の処理条件の要求に基づいて処理した映像信号を送信することを特徴とする。
本願は上記課題を解決する手段を複数含んでいるが、その一例を挙げるならば、映像信号送信装置と映像信号受信装置とを含む映像伝送システムにおいて、映像信号送信装置が、映像信号受信装置へ、映像信号の処理条件に関する情報を送信し、映像信号の処理条件に関する情報を受信した映像信号受信装置が、映像信号送信装置へ、受信した映像信号の処理条件に関する情報に基づいて映像信号の処理条件の要求を送信し、映像信号の処理条件の要求を受信した映像信号送信装置が、映像信号受信装置へ、受信した映像信号の処理条件の要求に基づいて処理した映像信号を送信することを特徴とする。
上記手段によれば、任意の複数の装置間での映像伝送における使い勝手が向上する。
任意の映像信号送信装置と映像信号受信装置とを接続するシステムでは、接続された他の装置の表示性能や撮像性能(例えば解像度やフレームレートなど)を前もって知ることができない。そのため、映像信号受信装置からの要求を映像信号送信装置が実行可能かどうかは不明確であり、ユーザが要求する機能を実行できないおそれがある。
図1は、双方向通信機能を備えた映像伝送インターフェース規格であるHDMI(High-Definition Multimedia Interfaceの略称、登録商標)を用いて映像信号送信装置と映像信号受信装置とが接続された伝送システムの一例を示すブロック図である。映像信号送信装置として撮像装置1を、映像信号受信装置として表示装置2を例示している。3は映像を伝送するHDMIケーブルであり、301は映像信号伝送ライン、302はDDC(Display Data Channelの略称)ライン、303はCEC(Consumer Electronics Control)通信ラインで、それ以外の伝送線は省略して図示している。なお、本実施例では有線で接続されたシステムを例に説明するが、無線で同様の情報をやり取りするシステムにも適用可能である。
HDMIを介した映像送受信の基本動作は以下の通りである。撮像装置1と表示装置2の間で、まず撮像装置1から+5Vライン(図1では省略)に+5V電圧が印加される。この電圧を検出した表示装置2は撮像装置1との接続を確認するとともに、HPD(Hot Plug Detectの略称)ライン(図1では省略)にその電圧を返す。この電圧を撮像装置1が検出して、表示装置2との接続を確認する。
次に、撮像装置1のEDID(Enhanced Extended Display Identificationの略称)読み出し部104がHDMIケーブル3のDDCライン302を通じて表示装置2のEDID記憶部203から表示装置2の受信能力の仕様を記述したEDIDを読み取る。撮像装置1は読み取ったEDIDを基に、表示装置2に適した映像フォーマット等を決定した上で、映像信号を映像信号処理部102で処理し、映像送信部103からHDMIケーブル3の映像信号伝送ライン301を通じて表示装置2に送信する。表示装置2は映像信号受信部202が受信した映像信号を表示部201で表示する。
次に、本実施例における撮像装置1と表示装置2との間の情報のやり取りと各装置の動作を、図2を用いて説明する。1001では、撮像装置1から+5Vラインに+5V電圧が印加される。電圧を検出した表示装置2は撮像装置1との接続を確認するとともに、1002でHPDラインにその電圧を返す。この電圧を撮像装置1が検出して、表示装置2との接続を確認する。1003で撮像装置1が表示装置2のEDIDを読み取る。
EDID読み込み完了後、1004では表示装置2が撮像装置1に対して、映像信号処理において条件設定が可能な項目に関する情報を要求する。この要求を受けた撮像装置1は1005で、映像信号処理において条件設定が可能な項目に関する情報を表示装置2に伝送する。
条件設定が可能な項目の例として、映像圧縮率、フレームレート、解像度、階調、データ転送レート、撮影環境、情報の付加、画像処理、などが挙げられる。図3に各項目の設定例を示す。
「映像圧縮率」、「フレームレート」、「解像度」、「階調」などは、映像の画質に関与するものであり、監視、視聴、映像認識など目的に対して適切な設定が必要とされる項目である。それぞれの項目について適用可能な数値やその範囲を情報として伝送する。
映像信号の伝送路の環境によっては、伝送量に制約が必要な場合もあり、その制約に関する情報を併せて伝送してもよい。例えば、図3中の解像度、フレームレート、階調の3項目を設定可能であるときに、水平解像度(本)と、垂直解像度(本)と、フレームレート(Hz)と、階調(RGB 総Bit数)との積で定義される「X」の上限を1.2×1010と設定する、などという場合が考えられる。この「X」は一例で、解像度、フレームレート、階調のうちいずれか2つ、あるいは1つのみを用いて定義したり、他の項目を加えた4以上の項目で定義したり、他の項目のみで定義したりする等、伝送量を制約可能であればどのように定義してもよい。
なお、本実施例で例示するHDMIは非圧縮の映像信号を伝送するインターフェースであるが、圧縮映像信号を伝送するインターフェースを用いたシステムに適用してもよい。例えば、Ethernet(登録商標)などのLAN(Local Area Networkの略称)を用いたシステムにおいては、圧縮率を前述の条件設定が可能な項目の一つとして用いてもよい。
「データ転送レート」は、データの伝送時間に関連する項目であるため、例えば表示装置側がデータ転送レートを設定することにより、表示遅延時間を許容範囲内に収めるようにすることが可能となる。
「撮影環境」とは、例えば撮像装置1に付属する照明機能に関する項目を含み、この項目を設定することで、撮像装置1に付属する照明装置の照明強度や波長、方向、スポット光/拡散光源の切り替え等を表示装置2から設定することが可能となる。また、カメラの向きに関する項目を含むことにより、表示装置2から撮像装置1のカメラの向きを設定することが可能となる。これにより、撮像装置1において視認性を向上した映像が撮影可能となる。
「情報の付加」とは、撮影環境の項目で設定された条件に関する情報を撮像装置1が映像信号とともに送信するか否か、撮像装置1で撮像した映像信号に中に映っているオブジェクトの素材・形状・色などに関する情報、撮像装置1で撮像した映像信号に中に映っているオブジェクトの位置(例えばオブジェクトの中心座標)を示す情報等を含む項目である。映像信号とともに送信される情報の取得方法は、撮像装置1による画像認識で行う方法や、撮像装置1を用いて撮影を行う撮影者が情報を入力する方法などが例として挙げられる。
図3の例では、映像信号とともに送信される情報として、映像信号内のオブジェクトの属性(オブジェクトが金属であるか、光源であるか、グラデーション素材であるかなど)を指定する情報、そのオブジェクトの座標位置に関する情報を含む。これらの情報を撮像装置1から表示装置2へ送信し、送信された情報が表示装置2における画像処理(オブジェクトの属性に特有の輝度勾配や色彩を与ええて質感を向上させる特殊な画像処理等)で用いられることで、表示装置2で表示される画像の画質が向上する。
「画像処理」とは、撮像装置側で所定の処理を行うかどうかを示す情報である。所定の処理の一例としては、エッジ強調、コントラスト補正等がある。例えば圧縮して映像信号を伝送する際に、圧縮・複号後の映像信号ではエッジ強調やコントラスト補正といった処理が困難になる場合があるので、撮像装置側でエッジ強調やコントラスト補正といった処理を行う機能を持つことがある。撮像装置側がこれらの処理を行った後に表示装置側で同様の処理を二重に行うと映像の自然さが失われるなどの弊害を生じる場合があるが、「画像処理」の項目を含む情報を伝送することで、表示装置が撮像装置での画像処理を停止させることが可能となり、このような弊害を防ぐことができる。
表示装置2は、1201において、受け取った撮像装置1の映像信号処理にあたって条件設定が可能な項目に関する情報を基に、受信可能な映像信号の条件を判定する。受信可能と判断した映像信号の条件から、例えば最も視認性が高まると判断される条件や、表示装置の利用者が選択する条件、等の撮像装置に対して要求する映像信号の処理条件を決定する。そして、決定した要求を、1006において、撮像装置1に伝達する。
映像信号の処理条件に関する要求を受け取った撮像装置1は、1101において、要求に従って映像を撮影して映像信号を処理するか、または撮影済みの映像を要求に従って映像処理を施す。
撮像装置1は、1007において、処理した映像信号の表示装置2への送信を開始する。以降、映像信号の処理条件に変更が無い場合には、表示装置2側からは要求は行われず、撮像装置1は後述する1102の時点まで同条件で処理した映像信号を送信し続ける。映像信号の取得条件を変更する場合には、表示装置2側からあらたな要求が行われ(10062)、撮像装置1では1102において更新された条件によって映像処理を施す。以降のフレームでは撮像装置1は更新された条件に基づいて処理した映像信号を送信する(10072)。以上が図2の情報のやり取りと処理の説明である。
図2の1004~1006における情報伝送の具体的な方法を、双方向通信可能なCECラインを用いた例で説明する。図4はCECメッセージ交換フローである。
図2の1004に相当するメッセージとして<Give Video Signal Variable Condition>を設定する。これは、後で説明する<Video Signal Variable Condition_xxx>メッセージを送信するように撮像装置1に要求するメッセージである。
図2の1005に相当するメッセージとして<Video Signal Variable Condition_xxx>を設定する。これは複数の条件の設定が可能である項目について示し、xxx部分に項目名を分類する語が挿入される。そのあとに設定可能なパラメータが続く。
図5では例として10051で「xxx」を「Frame Rate」とし、フレームレートを「30/60/120Hz」の3通り設定可能であること、10052で同じく「Color Depth」として階調を各色「8/10/12bit」の3通り設定可能であること、10043では同じく「Imageing Ilumination」として撮影時の照明を「通常/強/最強」の3通り設定可能であることをメッセージとしている。
次いで図2の1006に相当するメッセージとして<Video Signal Requirement_xxx>を設定する。これは映像信号処理条件に対する要求であり、xxxには<Video Signal Variable Condition_xxx>で既に受け取った項目のみが挿入され得る。そのあとには、表示装置側が選択したパラメータが続く。
図5では例として10061で「xxx」を「Frame Rate」としてフレームレートを120Hzとすること、10063で同じく「Imageing Ilumination」として撮影時の照明を「強」にとすることを要求している。
なお、10052で設定可能としたColor Depthこと階調については本例では要求をしていない。これは表示装置側では指定はせずに、撮像装置側の選択に任せることを意味する。撮像装置側は表示装置側のEDIDを参考に条件を任意に設定する。
また、10051で指定するパラメータを[60/120Hz]として、撮像装置側に60Hzまたは120Hzから選択させてもよい。
ここまで図2の1004~1006に相当する情報交換にCECラインを用いる例を説明したが、そのほかにもDDCラインや、HEC(HDMI Ethernet Channelの略称)を用いてもよい。
本実施例ではHDMIを伝送線の例として挙げたが、その他Ethernet、Displayport(登録商標)、MHL(登録商標)など、映像信号とともに双方向通信により各種情報をやりとりできる伝送線であればよい。
このように、映像信号送信装置(撮像装置)から映像信号処理機能に関する情報を送信し、その情報を受け取った映像信号受信装置(表示装置)が適用可能な映像信号の処理条件を判定し、その判定に基づいて映像信号処理条件に関する情報を送信し、その情報を受け取った映像信号送信装置がその情報に基づいて映像信号を処理することで、任意の映像信号送信装置と映像信号受信装置とで構成される映像システムにおいて、映像信号受信装置側から映像信号送信装置の処理が制御可能になる。これにより、任意の複数の装置間での映像伝送における使い勝手が向上する。
本実施例では、実施例1で説明した、「条件設定が可能な項目」として、「関心領域」を設定する実施例を説明する。本実施例では、表示装置2が撮像装置1から送信される映像の関心領域(Region of Interest:ROI)を指定し、関心領域対して関心領域以外の領域とは異なる信号処理を行う要求を撮像装置1に行う例について説明する。関心領域とは、ユーザが特に注視したい領域であって、その部分にのみ高画質化処理を行うなどするために設定されるものである。なお、情報伝達等の処理に用いる図1上のブロックは実施例1と同様であるので、説明は省略する。
図7は本実施例における情報のやりとりを示す図である。1001~1003までは図2と同様であるため、説明は省略する。本実施例においては、1003の後、図2で説明した条件設定が可能な項目に関する情報の要求1004として、「関心領域の設定に用いるサンプル映像信号の送信の要求(1008)」「関心領域の設定方法の要求(1009)」「関心領域に対して条件設定が可能な項目に関する情報の要求(1010)」が行われる。図7においては、1008、1009、1010の順番に要求が送信されているが、順番を変えてもよいし、2つの要求、あるいは3つの要求を同時に送信してもよい。
1103において、表示装置2からの要求を受信した撮像装置1は、条件設定が可能な項目に関する情報1005として、1011、1012、1013を送信する。以下、1011、1012、1013について説明する。
1011は、表示装置2における関心領域の設定に用いるサンプル映像信号である。このサンプル映像信号送信は後述する1104の時点まで継続する。なお、本実施例ではサンプル映像信号の要求の送信(1008)、サンプル映像信号の送信(1011)を行う構成としたが、既に撮像装置1から表示装置2へ映像信号の送信が行われている場合、1008、1011は省略し、サンプル映像信号に代えて撮像装置1から表示装置2へ送信中の映像信号を用いて以下の処理を行ってもよい。
1012は、関心領域の設定方法に関する情報である。関心領域の設定方法としては、例えば多角形で構成される関心領域の頂点を映像の画素上の座標を用いて多角形の頂点の数だけ指定する方法(図15(a)参照)、長方形で構成される関心領域の対角線の2点の座標を設定する方法(図15(b)参照)、円形に構成される関心領域の中心点座標と半径画素数を指定する方法(図15(c)参照)、などが挙げられる。
1013は、関心領域について条件設定が可能な項目に関する情報である。関心領域について条件設定が可能な項目は、実施例1で説明した条件設定が可能な項目と同様、映像圧縮率、フレームレート、解像度、階調、データ転送レート、撮影環境、情報の付加、画像処理、などが挙げられる。1013には、関心領域についてのみ適用可能な条件に関する情報を付加してもよい。すなわち、例えば映像圧縮率、フレームレート、解像度、階調といった条件の設定において、関心領域にのみ高品質の条件(所定値以上の映像圧縮率、フレームレート、解像度、階調)を適用可能であることを示す情報を表示装置2へ送信することで、関心領域についてのみ高品質の条件を設定可能となる。当該構成により、全体のデータ量を抑えつつ関心領域を高画質化した映像信号を伝送可能になる。なお、図7では1011、1012、1013の順番に情報が送信されているが、順番を変えてもよいし、2つの情報、あるいは3つの情報を同時に送信してもよい。
表示装置2は1202において、撮像装置1が指定した関心領域の設定方法に、表示装置2が対応しているかどうかを判断する。さらに表示装置2は撮像装置1から送信された映像信号処理機能に関する情報を基に、表示装置2が適用可能な映像信号の条件を判定する。関心領域の設定が可能である場合には、この時の判定には、関心領域にのみにその条件が適用可能であるかどうかの判定が含まれる。適用可能と判断した映像信号の処理条件から、例えば適用可能な条件の中で最も高画質と判断される条件や、表示装置の利用者が選択する条件、等の撮像装置に対して行う映像信号の取得条件に関する要求を決定する。
1202で決定した映像信号の取得条件に関する要求に関心領域の設定が必要な場合には、映像信号の処理条件に関する要求1006として、1014及び1015を送信する。1014は、指定する関心領域に関する座標情報等の、関心領域を指定する情報である。1015は、指定した関心領域に対して行われる信号処理の条件に関する情報である。なお、図7では1014、1015の順番に情報が送信されているが、順番を変えてもよいし、2つの情報を同時に送信してもよい。
1014、1015を受信した撮像装置1は、1104において、1014で指定された関心領域に対して、1015の条件で信号処理を行う。そして、1016において、その映像信号を表示装置2に送信する。以降、関心領域や映像信号の処理条件に変更が無い場合には、表示装置2側からは要求は行われず、撮像装置1は後述する1105の時点まで同条件で処理した映像信号を送信し続ける。
関心領域や映像信号の取得条件を変更する場合には、表示装置2側から条件更新の要求が行われ(10143、10153)、1105において撮像装置1は更新された条件要求に基づいて映像処理を施す。以降のフレームでは撮像装置1は更新された条件に基づいて処理した映像信号を送信する(10163)。
図7においては、図2における1004、1005、1006の一例としてそれぞれ1008~1010、1011~1013、1014~1015を説明したが、これらの情報と並行して、実施例1で説明した他の条件(映像圧縮率、フレームレート、解像度、階調、データ転送レート、撮影環境、情報の付加、画像処理等)に関する情報を送受信してもよい。例えば、関心領域に対する信号処理の条件は本実施例で説明した方法で設定し、関心領域以外の領域に対する信号処理の条件は実施例1で説明した方法で設定するようにしてもよい。
図7の1008~1009、1012~1015の情報伝送を、双方向通信可能なCECラインを用いた例で説明する。図8はCECメッセージ交換フローである。
図7の1008の「第一の映像信号送信の要求」に相当するメッセージとして<Give ROI Sample Image>を設定する。また、1009の「関心領域の設定方法の情報の要求」に相当するメッセージとして<Give ROI Select Method>を設定する。また、1010の「映像信号処理機能の情報の要求」に相当するメッセージとして<Give ROI Variable Condition>を設定する。これらの要求を意味するメッセージを表示装置2から撮像装置1へ送信する。
これらの要求を受けて、まず撮像装置1は関心領域の設定に用いるサンプル映像信号を送信する(1011、本項目はCEC通信ではないが、参考のため記載)。
次いで、図7の1012の「関心領域の設定方法に関する情報」に相当するメッセージとして<ROI Select Method>を設定する。これは関心領域の設定方法を示す。さらにその後に具体的設定方法に関する情報が続く。図8では具体的設定方法の例としてBox Diagonal Lineとして、長方形で構成される関心領域の対角線の2点の座標を設定する方法を示している。
次いで図7の1013の「映像信号処理機能に関する情報」に相当するメッセージとして<ROI Variable Condition_xxx>を設定する。これは関心領域に対して複数の条件の設定が可能である項目について示し、xxx部分に項目名を分類する語が挿入される。そのあとに設定可能なパラメータが続く。図8では例として10091で「xxx」を「Frame Rate」としてフレームレートを「60/120/240Hz」の3通り設定可能であることを示している。
次いで図7の1014の「関心領域の領域に関する情報」に相当するメッセージとして<ROI Position>を設定する。これは関心領域の座標位置の情報であることを示し、そのあとに関心領域に指定するBoxの対角線2点の座標が続く。
次いで図7の1015の「映像信号の処理条件に関する要求」に相当するメッセージとして<ROI Requirement_xxx>を設定する。これは関心領域の映像信号処理条件に対する要求であり、xxxには<ROI Variable Condition_xxx>で既に受け取ったxxxのみが挿入され得る。そのあとには、表示装置側が選択したパラメータが続く。図8では例として10111で「xxx」を「Frame Rate」として関心領域のフレームレートを240Hzとすることを要求している。
ここまで図7の1008~~1015に相当する情報交換にCECラインを用いる例を説明したが、そのほかにもDDCラインや、HEC(HDMI Ethernet Channelの略称)を用いてもよい。
図9~12に、関心領域の部分のみを高画質化する際に図7の1016で送信する信号形式の説明図を示す。図9は60Hzの映像信号を送信する際の通常の信号形式であり、21が垂直同期信号、22が水平同期信号を示している。各同期信号の間の期間で1フレームの標準画質映像信号23を送信している。
図10は標準画質映像信号24に加えて、関心領域部分の高画質映像信号25を併せて送信する場合の映像信号の一例である。標準画質映像信号24を図9と同様に送信した後、次のフレームで関心領域部分の高画質映像信号25を送信する。
この時に、標準画質映像信号24には関心領域の部分の映像を含めても含めなくても構わない。標準画質映像信号24に関心領域の映像信号を含めない場合にはその分だけ伝送する情報量の低減が可能となる。標準画質映像信号24に関心領域の映像信号を含める場合、表示装置側で関心領域の映像を標準画質とするか、高画質とするかを選択可能になる。
また、標準画質映像信号24は関心領域を含んだ映像をとし、後から送信する関心領域部分は標準画質信号との差分情報のみを送ってもよい。差分情報のみの伝送とすることで伝送する情報を抑える効果が期待できる。
標準画質映像信号24と関心領域部分の高画質映像信号25は映像フォーマットが異なることがあり、その場合それぞれの映像フォーマットに関する情報を記述したパケットデータを映像信号に添付する。HDMIでは、パケットデータは垂直、水平の各帰線期間で送信する。なお、関心領域部分の高画質映像信号25の映像信号の情報量があまり大きくない場合は、映像信号送信期間の余った時間を用いてもよい。
図11は標準画質映像信号24に加えて、関心領域部分の高画質映像信号25を併せて送信する場合の映像信号の一例である。標準画質映像信号24は、例えば図9における標準信号23よりも2倍の伝送速度で送信する、あるいは垂直画素方向の画素数を1/2に間引くというようなデータ間引き、あるいは映像信号の圧縮、あるいは階調などの画質を低下させる、などの方法で図11の標準画質映像信号23の半分の時間で伝送する。そして、標準画質映像信号24を送信した後、関心領域部分の高画質映像信号25を送信する。
図12は標準画質映像信号24に加えて、関心領域部分の高画質映像信号25を併せて送信する場合の映像信号の一例である。標準画質映像信号24と関心領域部分の高画質映像信号25とを水平方向に並べるデータ構造である。標準画質映像信号30を例えば2倍の伝送速度で送信する、あるいは水平画素方向の画素数を1/2に間引くというようなデータ間引き、あるいは映像信号の圧縮、あるいは階調などの画質を低下させる、などの方法で水平方向に1/2の時間で伝送すること等については図11の例と垂直、水平方向を変えた以外は同様である。
図13および図14は標準画質映像信号を60Hz、関心領域部分の高画質映像信号を240Hzのフレームレートとする場合の信号形式の例である。図13は標準画質映像信号を画面位置ごとに4分割し、それぞれ関心領域部分の高画質映像信号に添付する信号形式である。
図14は、図10と同じく、初めに標準画質映像信号を送信した後に関心領域部分の高画質映像信号を送る信号方式である。どちらの信号形式かを任意に指定してもよいし、関心領域の広さなどに応じて採用する信号方式を決定してもよい。
このように、実施例1に示した映像信号処理機能に関する情報と合わせて関心領域に関する情報をやり取りすることにより、任意の組み合わせの映像信号送信装置と映像信号受信装置が相互通信可能な伝送線で接続する映像システムにおいて、映像信号受信装置側から関心領域を指定して、映像信号送信装置が処理する映像信号の関心領域の画質を指定することが可能になる。
図5は、HDMIを用いて一つの映像信号受信装置と二つの映像信号送信装置とを接続する伝送システムの一例を示すブロック図である。
表示装置2は2個のHDMI入力を備え、1つは撮像装置11と、もう一つは撮像装置12と接続している。表示装置2は、HDMI入力を、2021~2041からなる第1の入力2001と2021~2041からなる第2の入力2002とに切り替えることにより、撮像装置11、12のどちらか一方と映像信号の送受信や実施例1、2で説明した情報のやり取りを行うことができる。第1の入力2001と第2の入力2002との切替えは、いずれかの入力をアクティブ状態にすることにより行われる。
従来例ではシステムの作成時に定められた組み合わせの映像信号送信装置と映像信号受信装置の組み合わせにしか対応できないが、本実施例では任意の数の映像信号送信装置と映像信号受信装置を組み合わせた場合でも、映像信号受信装置においてアクティブ状態にする入力を切替えることで、映像信号送信装置それぞれに対して撮影条件等の設定を行うことが可能になる。
なお、本実施例では表示装置2が2個のHDMI入力を備える例について説明したが、3個以上のHDMI入力を持つ場合についても同様である。また、撮像装置1側が2つ以上のHDMI出力を持つ場合についても同様である。
このように、実施例1、2で説明した情報のやりとりと、アクティブにする入出力端子の指定により、複数の映像信号受信装置または複数の映像信号送信装置を任意に組み合わせた映像システムにおいて、映像信号受信装置側から映像信号送信装置の処理が制御可能になる。これにより、任意の複数の装置間での映像伝送における使い勝手が向上する。
実施例3では、映像信号送信装置と映像信号受信装置とが直接接続するシステムについて説明したが、本実施例では映像信号送信装置と映像信号受信装置とがオーディオアンプやスイッチャーなどのリピータ機器を介して接続されたシステムについて説明する。図6は映像信号受信装置である表示装置がリピータ機器であるスイッチャー16を介して3台の映像信号送信装置である撮像装置13、14、15と接続する例を示す。リピータ機器を介することで入力または出力が1つしかない映像信号受信装置または映像信号送信装置でも、複数台の機器との接続が可能となる。
複数台の映像信号受信装置または映像信号送信装置が接続した構成において、図4を用いて説明した情報の送受信をする場合には、通信する機器のネットワークアドレスを情報に添付することで通信相手の指定が可能になる。このような場合、撮像装置13、14、15が実施例1で説明した「撮影環境」のカメラの向きの指定に対応していれば、表示装置2は3台の撮像装置13、14、15のカメラの向きを制御して、3台分の撮像装置でカバーする広い範囲の撮影が可能となる。
このように、実施例1、2で説明した情報の送受信と、通信する機器のネットワークアドレスの指定により、リピータ機器を用いて複数の映像信号受信装置または複数の映像信号送信装置を任意に組み合わせた映像システムにおいて、映像信号受信装置側から映像信号送信装置の処理を制御することが可能になる。これにより、任意の複数の装置間での映像伝送における使い勝手が向上する。
1、11、12、13、14、15:撮像機器、16:スイッチャー、2:表示機器、3:HDMIケーブル、101、1011、1012:撮像部、102、1021、1022:映像信号処理部、103、1031、1032:映像送信部、104、1041、1042:EDID読出部、105、1051、1052:CEC通信部、106、1061、1062:撮像装置制御部、201:表示部、202:映像受信部、203:EDID記憶部、204:CEC通信部、205:表示装置制御部、2021:入力1映像受信部、2031:入力1EDID記憶部、2041:入力1CEC通信部、2022:入力2映像受信部、2032:入力2EDID記憶部、2042:入力2CEC通信部、301、3011、3012:映像信号伝送ライン、302、3021、3022:DDCライン、303、3031、3032:CEC通信ライン、 2001:HDMI入力端子1、2002:HDMI入力端子2、21:垂直同期信号、22:水平同期信号、23、24:標準画質映像信号、25:関心領域部分の高画質映像信号
Claims (12)
- 映像信号送信装置と映像信号受信装置とを含む映像伝送システムであって、
前記映像信号送信装置が、前記映像信号受信装置へ、映像信号の処理条件に関する情報を送信し、
前記映像信号の処理条件に関する情報を受信した前記映像信号受信装置が、前記映像信号送信装置へ、受信した映像信号の処理条件に関する情報に基づいて映像信号の処理条件の要求を送信し、
前記映像信号の処理条件の要求を受信した前記映像信号送信装置が、前記映像信号受信装置へ、受信した映像信号の処理条件の要求に基づいて処理した映像信号を送信することを特徴とする映像伝送システム。 - 請求項1の映像伝送システムであって、
前記映像信号の処理条件に関する情報は、映像信号の領域の指定に関する情報を含み、
前記映像信号の処理条件の要求は、領域を指定する情報を含み、
前記映像信号送信装置が送信する映像信号は、前記領域を指定する情報により指定された領域に対して当該指定された領域以外の領域に対する処理とは異なる処理が行われた映像信号であることを特徴とする映像伝送システム。 - 請求項2の映像伝送システムであって、
前記映像信号の処理条件に関する情報は、指定する領域における映像信号の処理条件に関する情報
を含み、
前記映像信号の処理条件の要求は、指定する領域における映像信号の処理条件の要求を含み、
前記指定された領域以外の領域に対する処理とは異なる処理は、前記指定する領域における映像信号の処理条件の要求に基づく処理であることを特徴とする映像伝送システム。 - 請求項3の映像伝送システムであって、
前記指定する領域における映像信号の処理条件に関する情報は、映像圧縮率に関する情報、フレームレートに関する情報、解像度に関する情報及び、階調に関する情報のうちのいずれか1つ、または複数を含むことを特徴とする映像伝送システム。 - 映像信号を送信する送信装置であって、
映像信号を処理する映像信号処理部と、
映像信号を受信する受信装置との間で情報を送信及び/または受信する送受信部と、を有し、
前記送受信部は、前記映像信号処理部で処理された映像信号を前記受信装置へ送信する映像信号送信部を含み、
前記送受信部から前記受信装置へ映像信号の処理条件に関する情報を送信し、
前記送信部から送信した映像信号の処理条件に関する情報に基づく映像信号の処理条件の要求を前記送受信部が受信し、
前記映像信号処理部は、前記送受信部で受信した映像信号の処理条件の要求に基づいて映像信号を処理することを特徴とする送信装置。 - 請求項5の送信装置であって、
前記映像信号の処理条件に関する情報は、映像信号の領域の指定に関する情報を含み、
前記映像信号の処理条件の要求は、領域を指定する情報を含み、
前記映像信号処理部は、前記領域を指定する情報により指定された領域に対して当該指定された領域以外の領域に対する処理とは異なる処理を行うことを特徴とする送信装置。 - 請求項6の送信装置であって、
前記映像信号の処理条件に関する情報は、指定する領域における映像信号の処理条件に関する情報
を含み、
前記映像信号の処理条件の要求は、指定する領域における映像信号の処理条件の要求を含み、
前記指定された領域以外の領域に対する処理とは異なる処理は、前記指定する領域における映像信号の処理条件の要求に基づく処理であることを特徴とする送信装置。 - 請求項7の送信装置であって、
前記指定する領域における映像信号の処理条件に関する情報は、映像圧縮率に関する情報、フレームレートに関する情報、解像度に関する情報及び、階調に関する情報のうちのいずれか1つ、または複数を含むことを特徴とする送信装置。 - 映像信号を受信する受信装置であって、
映像信号を送信する送信装置との間で情報を送信及び/または受信する送受信部と、
前記送受信部で送信及び/または受信する情報を処理する制御部と、を有し、
前記送受信部は、前記送信装置から送信される映像信号を受信する映像信号受信部を含み、
前記送受信部は、前記送信装置から映像信号の処理条件に関する情報を受信し、
前記制御部は、前記送受信部で受信した映像信号の処理条件に関する情報に基づいて映像信号の処理条件の要求を生成し、
前記送受信部は、前記制御部で生成した映像信号の処理条件の要求を前記送信装置へ送信し、
前記映像信号受信部は、前記送受信部から送信された映像信号の処理条件の要求に基づいて処理された映像信号を受信することを特徴とする受信装置。 - 請求項9の受信装置であって、
前記映像信号の処理条件に関する情報は、映像信号の領域の指定に関する情報を含み、
前記映像信号の処理条件の要求は、領域を指定する情報を含み、
前記映像信号受信部が受信する映像信号は、前記領域を指定する情報により指定された領域に対して当該指定された領域以外の領域に対する処理とは異なる処理が行われた映像信号であることを特徴とする受信装置。 - 請求項10の受信装置であって、
前記映像信号の処理条件に関する情報は、指定する領域における映像信号の処理条件に関する情報
を含み、
前記映像信号の処理条件の要求は、指定する領域における映像信号の処理条件の要求を含み、
前記指定された領域以外の領域に対する処理とは異なる処理は、前記指定する領域における映像信号の処理条件の要求に基づく処理であることを特徴とする受信装置。 - 請求項11の受信装置であって、
前記指定する領域における映像信号の処理条件に関する情報は、映像圧縮率に関する情報、フレームレートに関する情報、解像度に関する情報及び、階調に関する情報のうちのいずれか1つ、または複数を含むことを特徴とする受信装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2013/070690 WO2015015584A1 (ja) | 2013-07-31 | 2013-07-31 | 映像伝送システム、送信装置、および受信装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2013/070690 WO2015015584A1 (ja) | 2013-07-31 | 2013-07-31 | 映像伝送システム、送信装置、および受信装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2015015584A1 true WO2015015584A1 (ja) | 2015-02-05 |
Family
ID=52431164
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/JP2013/070690 WO2015015584A1 (ja) | 2013-07-31 | 2013-07-31 | 映像伝送システム、送信装置、および受信装置 |
Country Status (1)
Country | Link |
---|---|
WO (1) | WO2015015584A1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017138458A1 (ja) * | 2016-02-09 | 2017-08-17 | 株式会社ソニー・インタラクティブエンタテインメント | 映像表示システム |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007194680A (ja) * | 2006-01-17 | 2007-08-02 | Sharp Corp | 動画視聴方法、通信端末およびプログラム |
JP2011024018A (ja) * | 2009-07-16 | 2011-02-03 | Gunzoo Inc | 送信装置、受信装置、送信方法、受信方法及び伝送システム |
JP2012209634A (ja) * | 2011-03-29 | 2012-10-25 | Nippon Telegr & Teleph Corp <Ntt> | 映像復号装置、映像送受信装置、映像復号方法、及び映像送受信方法 |
-
2013
- 2013-07-31 WO PCT/JP2013/070690 patent/WO2015015584A1/ja active Application Filing
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007194680A (ja) * | 2006-01-17 | 2007-08-02 | Sharp Corp | 動画視聴方法、通信端末およびプログラム |
JP2011024018A (ja) * | 2009-07-16 | 2011-02-03 | Gunzoo Inc | 送信装置、受信装置、送信方法、受信方法及び伝送システム |
JP2012209634A (ja) * | 2011-03-29 | 2012-10-25 | Nippon Telegr & Teleph Corp <Ntt> | 映像復号装置、映像送受信装置、映像復号方法、及び映像送受信方法 |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017138458A1 (ja) * | 2016-02-09 | 2017-08-17 | 株式会社ソニー・インタラクティブエンタテインメント | 映像表示システム |
JPWO2017138458A1 (ja) * | 2016-02-09 | 2018-09-13 | 株式会社ソニー・インタラクティブエンタテインメント | 映像表示システム |
CN108605148A (zh) * | 2016-02-09 | 2018-09-28 | 索尼互动娱乐股份有限公司 | 视频显示系统 |
JP2019197224A (ja) * | 2016-02-09 | 2019-11-14 | 株式会社ソニー・インタラクティブエンタテインメント | 映像表示システム |
US10810701B2 (en) | 2016-02-09 | 2020-10-20 | Sony Interactive Entertainment Inc. | Video display system |
US11270410B2 (en) | 2016-02-09 | 2022-03-08 | Sony Interactive Entertainment Inc. | Video display system |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11240463B2 (en) | Display system, display method, and display apparatus | |
JP6849011B2 (ja) | 送信装置、送信方法、受信装置および受信方法 | |
US9300938B2 (en) | Systems, apparatus and methods for mapping between video ranges of image data and display | |
US9071787B2 (en) | Display information feedback | |
KR102567633B1 (ko) | 오버레이 지시를 사용하는 적응적 하이 다이나믹 레인지 톤 매핑 | |
JP6331882B2 (ja) | 送信装置、送信方法、受信装置および受信方法 | |
WO2016197792A1 (zh) | 一种数据共享系统 | |
US10798354B2 (en) | Projection display apparatus and method for controlling the same | |
US20240054623A1 (en) | Image processing method and system, and device | |
TW201634974A (zh) | 頭戴式顯示系統及影像低頻寬傳輸方法 | |
US9699402B2 (en) | Method and apparatus for transmitting video signal | |
WO2015015584A1 (ja) | 映像伝送システム、送信装置、および受信装置 | |
WO2016190106A1 (ja) | 画像処理装置およびその制御方法、並びに集積回路 | |
US8411740B2 (en) | System and method for low bandwidth display information transport | |
JP5207846B2 (ja) | 映像処理装置およびその制御方法 | |
KR20090038660A (ko) | 미디어 싱크 디바이스 및 그 제어방법 | |
CN104836988A (zh) | 协议交换方法及装置 | |
JP2014225858A (ja) | 変換制御装置及びその制御方法 | |
CN104581109A (zh) | 一种3d数字视频信号处理方法及其装置 | |
KR20220163152A (ko) | 디스플레이 장치 및 그 동작 방법 | |
KR20230007792A (ko) | 클라우드 서버, 시스템 및 그 제어 방법 | |
US20130097636A1 (en) | Method and apparatus for displaying pictures during iptv channel switching | |
JP2019212964A (ja) | 撮像装置、クライアント装置、制御方法およびプログラム | |
JP2021192558A (ja) | 送信装置、送信方法、受信装置および受信方法 | |
JP2021005796A (ja) | 表示制御装置、表示装置、表示制御プログラム、および記録媒体 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 13890594 Country of ref document: EP Kind code of ref document: A1 |
|
NENP | Non-entry into the national phase |
Ref country code: DE |
|
122 | Ep: pct application non-entry in european phase |
Ref document number: 13890594 Country of ref document: EP Kind code of ref document: A1 |
|
NENP | Non-entry into the national phase |
Ref country code: JP |