WO2021200198A1 - 信号処理装置および信号処理方法 - Google Patents

信号処理装置および信号処理方法 Download PDF

Info

Publication number
WO2021200198A1
WO2021200198A1 PCT/JP2021/011004 JP2021011004W WO2021200198A1 WO 2021200198 A1 WO2021200198 A1 WO 2021200198A1 JP 2021011004 W JP2021011004 W JP 2021011004W WO 2021200198 A1 WO2021200198 A1 WO 2021200198A1
Authority
WO
WIPO (PCT)
Prior art keywords
metadata
data packet
signal
information
data
Prior art date
Application number
PCT/JP2021/011004
Other languages
English (en)
French (fr)
Inventor
木村 圭一
浩二 神谷
Original Assignee
ソニーグループ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニーグループ株式会社 filed Critical ソニーグループ株式会社
Priority to JP2022511875A priority Critical patent/JPWO2021200198A1/ja
Priority to CN202180023937.9A priority patent/CN115336258A/zh
Priority to US17/908,438 priority patent/US20240048784A1/en
Priority to EP21782198.2A priority patent/EP4106318A4/en
Publication of WO2021200198A1 publication Critical patent/WO2021200198A1/ja

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H04N21/2353Processing of additional data, e.g. scrambling of additional data or processing content descriptors specifically adapted to content descriptors, e.g. coding, compressing or processing of metadata
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/268Signal distribution or switching
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23602Multiplexing isochronously with the video sync, e.g. according to bit-parallel or bit-serial interface formats, as SDI
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H04N21/4353Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream involving decryption of additional data
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/66Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/661Transmitting camera control signals through networks, e.g. control via the Internet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84Generation or processing of descriptive data, e.g. content descriptors

Definitions

  • the present technology relates to a signal processing device and a signal processing method, and more particularly to a signal processing device suitable for application to a video system such as a broadcasting station.
  • Patent Document 1 discloses that by inserting metadata into an ancillary region of a serial digital signal in SDI format, metadata related to the video signal is transmitted together with the video signal.
  • the purpose of this technology is to suppress the increase in memory hardware on the transmitting side and receiving side of serial digital signals, and to reduce the load on the CPU.
  • a signal input unit for inputting a video signal and a digital signal for transmission including a data packet having metadata related to the video signal, and a signal input unit. It is in a signal processing apparatus including a data writing unit that extracts predetermined metadata from the transmission digital signal based on the designated information of the metadata and writes it to a storage register.
  • a video signal and a digital signal for transmission including a data packet having metadata related to the video signal are input by the signal input unit.
  • the transmission digital signal is a SDI format serial digital signal
  • the data packet may be inserted in the ancillary region of the SDI format serial digital signal.
  • the data writing unit extracts predetermined metadata from the transmission digital signal based on the specified information of the metadata and writes it in the storage register.
  • the designated information may include header information of a data packet having predetermined metadata.
  • the header information may be made to include classification information indicating the classification of predetermined metadata.
  • the classification information may be composed of a first classification information indicating the classification of a predetermined metadata and a second classification information indicating a subclassification within the classification according to the first classification information of the predetermined metadata. ..
  • the header information may further include auxiliary information of predetermined metadata.
  • the auxiliary information may be adapted to include information indicating that the predetermined metadata is historical data.
  • the auxiliary information may include information indicating that the predetermined metadata is metadata that requires immediacy.
  • the data writing unit may write the predetermined metadata to the register area of the storage register for holding the data until it is read by the software, and interrupt the software. good.
  • the auxiliary information may include information indicating that the predetermined metadata is a one-shot metadata.
  • the data writing unit may write the predetermined metadata to the register area of the storage register for holding the data until it is read by software.
  • predetermined metadata is extracted from the input digital signal for transmission based on the specified information of the metadata and written to the storage register. Therefore, even when the amount of metadata included in the transmission digital signal increases, it is possible to suppress an increase in the memory hardware and reduce the burden on the CPU that reads and processes the metadata from the storage register.
  • the data packet included in the input transmission digital signal is the metadata to be historicalized
  • the data packet is output when the input transmission digital signal is output.
  • an information addition unit that adds auxiliary information indicating that the metadata included in this data packet is historical data may be further provided.
  • a header information extraction unit for extracting header information of a data packet included in an input transmission digital signal and a register for holding the extracted header information are further provided. May be good. This makes it possible to check the list of metadata included in the input digital signal for transmission.
  • a signal input unit that inputs digital signals for transmission, including video signals
  • a signal output unit which superimposes and outputs a newly superimposed data packet having metadata related to the video signal on the designated line of the input transmission digital signal.
  • the signal output unit A terminal detector that detects the end of the last data packet already superimposed on the designated line of the input digital signal for transmission, and a terminal detector. Based on the termination detection, a signal process having a data superimposition unit that superimposes the new data packet following the termination of the last superposed data packet on the designated line of the input transmission digital signal. It is in the device.
  • a digital signal for transmission including a video signal is input by a signal input unit. Then, the signal output unit superimposes and outputs a newly superimposed data packet having metadata related to the video signal on the designated line of the input transmission digital signal.
  • the transmission digital signal is a SDI format serial digital signal, and the data packet may be inserted into the ancillary region of the SDI format serial digital signal.
  • the termination detection unit detects the termination of the last data packet that has already been superimposed on the designated line of the input digital signal for transmission. Then, the data superimposition unit superimposes a new data packet on the end of the last superposed data packet on the designated line of the input transmission digital signal based on the termination detection.
  • the end detector will terminate the end of the data packet and end the last data packet. It may be determined as. This makes it possible to correctly detect the end of the last data packet even when the next data packet is not superimposed on the previous data packet.
  • it further includes a register for holding information of the data packet to be newly superimposed, and indicates that the data packet to be newly superimposed is the metadata that the metadata of the data packet requires immediacy.
  • the signal output unit superimposes one frame of the data packet to be newly superimposed, and then in the subsequent frames, the information indicating that the data packet to be newly superimposed is the metadata requesting immediacy. May be changed to information indicating that the metadata does not require immediacy and the superimposition may be continued, or the superimposition may be continued as it is. This makes it possible to appropriately send metadata that requires immediacy.
  • a register for holding information of a data packet to be newly superimposed is further provided, and the data packet to be newly superimposed includes information indicating that the metadata contained in the data packet is a single-shot metadata.
  • the signal output unit superimposes one frame of data packets to be newly superposed, and then stops superimposing in the subsequent frames, or indicates that the information indicating that the data is single-shot metadata is not single-shot metadata. It may be changed to information and superimposition is continued. This makes it possible to appropriately send out single-shot metadata.
  • the end of the last data packet already superimposed on the designated line of the input transmission digital signal is detected, and a new data packet is superimposed following the end.
  • the software can automatically superimpose a new data packet at the correct position of the corresponding line only by specifying the information of the data packet to be superposed and the superimposing line.
  • LPM Flag flag information
  • FIG. 1 shows a configuration example of the video system 10 as an embodiment.
  • cables 102-1 to 102-3 are connected to a plurality of camera devices, three camera devices 101-1 to 101-3 in the illustrated example, and camera devices 101-1 to 101-3, respectively.
  • It has a CCU (camera control unit) 103-1 to 103-3 connected via a video tape recorder 104.
  • CCU camera control unit
  • the video system 10 includes a switcher 105, a server 106, a monitor 107, a monitor 108, a converter 109, a plurality of waveform monitors, and here, three waveform monitors (WFM: Wave Form Monitor) 110-1. It has ⁇ 110-3.
  • WFM Wave Form Monitor
  • the CCU 103 (103-1 to 103-3) is a transmission digital signal including a video signal supplied from the camera device 101 (101-1 to 101-3) via the cable 102 (102-1 to 102-3). Is generated and output.
  • the CCU 103 includes metadata related to a video signal in the digital signal for transmission.
  • the transmission digital signal is a SDI (Serial Digital Interface) format serial digital signal (hereinafter, appropriately referred to as “SDI signal”), and a data packet having metadata is inserted into the ancillary region.
  • SDI signal Serial Digital Interface
  • embe indicates that the metadata is inserted into the ancillary region of the SDI signal.
  • the metadata inserted in the ancillary region of the SDI signal in CCU103 includes lens information, live metadata, and the like.
  • the live metadata is the metadata used in a series of workflows for live video production, and more specifically, in addition to recording and transmitting data such as video, real-time data acquisition, confirmation, and reflection. This is metadata used for controlling various devices and executing applications in applications that require.
  • the live metadata includes camera setting data that summarizes the paint settings of the camera, data that summarizes the settings that determine the interrelationship between the high dynamic range (HDR) signal and the standard dynamic range (SDR) signal, and down of the video signal. It includes data that summarizes the settings required for conversion, data that summarizes various environmental data related to the camera, data that summarizes various identification information added to the video signal, and so on.
  • FIG. 2A shows an example of the SDI format structure of “HD-SDI / 3G-SDI Level-B” (hereinafter, appropriately referred to as “level B SDI format structure”). Further, FIG. 2B shows an example of the SDI format structure of "3G-SDI Level-A / 12G-SDI” (hereinafter, appropriately referred to as “level A SDI format structure”).
  • the 9th to 20th lines and the 571th to 583th lines are VANCE (Vertical Ancient) regions.
  • Lens metadata is superimposed on the 9th line, the 571th line, and the 572th line.
  • the material transmission auxiliary data specified by ARIB TR-B22 is superimposed on the 11th line and the 574th line.
  • Digital subtitle data specified by ARIB STD-B37 is superimposed on the 19th and 582nd lines.
  • the inter-broadcasting station control signal specified by ARIB STD-B39 and the data broadcasting trigger signal specified by ARIB STD-B35 are superimposed on the 20th and 583rd lines.
  • the line on which the live metadata is superimposed is not limited to the 14th line, the 15th line, and the 16th line, and it is possible that the live metadata is superimposed on other lines.
  • the types of live metadata to be superimposed may not be all of the illustrations, and it is also possible that other types of live metadata are superimposed.
  • the 9th to 41st lines are the VANC region.
  • Lens metadata is superimposed on the ninth line.
  • the material transmission auxiliary data specified by ARIB TR-B22 is superimposed on the 11th line.
  • the material transmission auxiliary data may be superimposed on the 32nd line and the 40th line as shown in the figure, for example.
  • Digital subtitle data specified by ARIB STD-B37 is superimposed on the 19th line.
  • the inter-broadcasting station control signal specified by ARIB STD-B39 and the data broadcasting trigger signal specified by ARIB STD-B35 are superimposed on the 20th line.
  • the inter-broadcasting station control signal and the data broadcasting trigger signal may be superimposed on the 41st line as shown in the figure, for example.
  • level A SDI format structure example As in the level B SDI format structure example (see FIG. 2A), various live metas are set on the 14th line, the 15th line, and the 16th line. The data is superimposed.
  • FIG. 3 shows a detailed configuration example of the camera device 101 and the CCU 103.
  • the camera device 101 is connected to the CCU 103 via a cable 102.
  • a lens device 111 is connected to the camera device 101.
  • the lens device 111 is attached to a lens mount portion at the front of the camera device 101.
  • the camera device 101 includes a camera CPU 112, a sensor unit 113, a camera signal processing unit 114, a pick me switch (PickMeSW) 115, and a USB terminal 116. Further, the CCU 103 has a CPU 131, a video processing unit 132, a video formatter 133, and a USB terminal 134.
  • the camera CPU 112 controls the operation of each part of the camera device 101.
  • the camera CPU 112 communicates necessary signals with the CPU 131 of the CCU 103.
  • the camera CPU 112 manages information such as the model name, serial number, and camera number of the camera device 101, and sends such information to the CPU 131 of the CCU 103 through the communication line of the cable 102.
  • the camera CPU 112 acquires information such as a cameraman name and a camera position from a USB memory (not shown) attached to the USB terminal 116, and sends the information to the CPU 131 of the CCU 103 through the communication line of the cable 102. Further, for example, the camera CPU 112 detects that the cameraman has pressed the pick me switch (PickMeSW) 115 during good shot shooting, and sends the detection signal to the CPU 131 of the CCU 103 through the communication line of the cable 102.
  • PickMeSW pick me switch
  • the sensor unit 113 has an image sensor such as HD, 4K or 8K, and outputs an captured video signal corresponding to the subject.
  • the lens device 111 described above forms an image of a subject on the imaging surface of the image sensor.
  • the camera signal processing unit 114 performs processing such as gain control, white balance adjustment, and gamma correction on the captured video signal output from the sensor unit 113, and outputs the camera video signal as the output of the camera device 101. Then, it is sent to the video processing unit 132 of the CCU 103 through the video line of the cable 102.
  • the CPU 131 controls the operation of each part of the CCU 103.
  • the CPU 131 communicates necessary signals with the camera CPU 112 of the camera device 101.
  • the video processing unit 132 performs processing such as color correction on the camera video signal sent from the camera device 101 through the video line of the cable 102, and outputs the processed video signal.
  • the video formatter 133 generates and outputs a transmission digital signal including a video signal output from the video processing unit 132, here, a SDI format serial digital signal (SDI signal).
  • SDI signal a transmission digital signal including a video signal output from the video processing unit 132, here, a SDI format serial digital signal (SDI signal).
  • the CPU 131 manages information such as the model name, serial number, and system name of the CCU 103, and is output from the video processing unit 132 based on these information and the information sent from the camera device 101 as described above.
  • the metadata related to the video signal the metadata of "ID Group Metadata” that summarizes various identification information added to the video signal is generated.
  • the video formatter 133 inserts the metadata of "ID Group Metadata" into the ancillary region of the SDI signal. Although the description is omitted, the video formatter 133 inserts other necessary metadata such as lens information and live metadata into the ancillary region of the SDI signal.
  • FIG. 4 shows a configuration example of a data packet (ancillary packet) inserted in the ancillary region of an SDI signal.
  • This data packet includes an ancient data flag (ADF) of the first to third words indicating the beginning of the packet, a data ID (DID) of the packet of the fourth word, and a packet of the fifth word.
  • Secondary data ID (SDID) data count indicating the number N of the payload of the 6th word (Data Count), and number information (LPM (Live)) indicating the data type of the live metadata of the 7th and 8th words. Production Metadata) Number), various flag information (LPM Flag) of the 9th word, the main data word (Main Data Word) containing the metadata of the 10th to Nth words, and the check sum (Check) of the N + 1th word. Sum).
  • the ancillary data flag (ADF), data ID (DID), secondary data ID (SDID) and data count (DataCount) are included in the header, and number information (LPMNumber) and various flag information (LPM) are included.
  • Flag) and main data (MainDataWord) are included in the payload.
  • the maximum of N is 255, that is, the maximum number of words in the payload is 255 words.
  • each word consists of 10 bits from bit 0 to bit 9.
  • the ancillary data flag (ADF) indicates a value of "000 3FF 3FF h”.
  • the 8th bit of the 4th to Nth words of this data packet is an even parity for the 0th to 7th bits of each word.
  • the 9th bit of the 4th word to the N + 1th word of this data packet is an inversion of the 8th bit, that is, "not bit8".
  • the payload includes number information (LPM Number) and various flag information (LPM Flag).
  • LPM Number number information
  • LPM Flag various flag information
  • the payload will include only the main data (MainDataWord).
  • LPMNumber indicates the subclassification of live metadata within the classification by data ID (DID) and secondary data ID (SDID). By using the number information in this way, it is possible to handle the live metadata as table data.
  • DID data ID
  • SDID secondary data ID
  • the live metadata is the camera setting data that summarizes the paint settings of the camera
  • the number information indicates "0100h”.
  • the live metadata is data that summarizes the settings for determining the interrelationship between the high dynamic range (HDR) signal and the standard dynamic range (SDR) signal
  • the number information is "02000h”. Is shown.
  • the number information indicates "0300h”.
  • the number information (LPMNumber) indicates "0400h”.
  • the number information (LPMNumber) indicates "10 01/10 02/10 03/10 04h”.
  • FIG. 5 shows an example of the contents of various flag information (LPM Flag) of the 9th word.
  • the various flag information (LPM Flag) constitutes auxiliary information of metadata.
  • the seventh bit is a "history" flag indicating that the metadata is historical data. For example, "0" indicates that it is not historical data, that is, it is valid latest data, and "1" indicates that it is historical data.
  • the "history” flag is set when there is a change in the data content of the metadata and you want to keep the original metadata when multiplexing new metadata, or when you want to keep it as historical data even though it is no longer valuable as live metadata. It can be set up, that is, it is set to "1".
  • a pick-me signal (a signal from the cameraman to the director that an important image is being taken) as live metadata
  • the meaning of Pick Me is lost.
  • the reproduced video signal it can be used as information indicating that the possibility of an important scene is added. That is, since it is meaningful as the history data in which the pick me is pressed, the metadata superimposed on the reproduced video signal can be distinguished by setting the "history" flag.
  • the sixth bit is an "Instancy” flag indicating that the metadata is metadata that requires immediacy (urgency). For example, “0" indicates that the metadata does not require immediacy, and “1" indicates that the metadata requires immediacy. If the metadata is important and requires immediacy, then this "Instancy" flag is flagged, or "1".
  • This "Instancy" flag requires (desirs) the immediate processing of metadata from the latter stage, but does not guarantee that it will be processed immediately in the latter stage. That is, since the processing in the latter stage (reception side) is determined by the convenience of the latter stage side, it cannot be determined in the first stage (transmission side).
  • the fifth bit is a "Single” flag indicating that the metadata is single-shot metadata. For example, “0” indicates that it is not single-shot metadata, and “1" indicates that it is single-shot metadata.
  • the metadata is multiplexed every frame, but if a single metadata is transmitted, there is a possibility that it will be relayed or missed in the subsequent stage. To avoid this, if the metadata indicates that it is important and one-off (precious), it is flagged as "Single", or "1".
  • This "Single” flag requires (desirs) the certainty of the metadata capture process from the latter stage, but does not guarantee that the data will not be missed in the latter stage. That is, since the processing in the latter stage (reception side) is determined by the convenience of the latter stage side, it cannot be determined in the first stage (transmission side).
  • the 1st bit and the 0th bit are flags indicating the size information of metadata (table data).
  • This size information is information that classifies the size of metadata by L (Large), M (Middle), and S (Small). For example, "00” indicates L (Large), that is, a maximum of 252 bytes (max 252 bytes), and "01" indicates M (Middle), that is, a maximum of 119 bytes (max 119 bytes). “10” indicates S (Small), that is, a maximum of 55 bytes (max 55 bytes).
  • This size information is to have the possibility of reducing the memory area required on the receiving side.
  • the maximum number of bytes in the payload of a data packet is 255 bytes, and when it is necessary to handle a large amount of metadata, a memory area of (255 + ⁇ ) bytes is usually required for each metadata.
  • size information is added to the metadata (table data)
  • the receiving side can allocate a small-sized memory area, and the entire receiving side prepares the entire area. It is possible to have the possibility of reducing the memory area. Further, in this case, it is possible to have a possibility that the entire memory area prepared by the transmitting side can be reduced as well as the receiving side.
  • the video tape recorder 104 outputs an SDI signal including a video signal during playback.
  • the SDI signal also includes metadata related to the video signal included in the SDI signal as well as the SDI signal output from the CCU 103-1 to 103-3 described above.
  • the switcher 105 inputs the SDI signal output from the CCU 103-1 to 103-3 or the video tape recorder 104.
  • the switcher 105 outputs an image display SDI signal to the monitor 107 and the monitor 108, outputs an on-air SDI signal, and outputs a predetermined SDI signal to the waveform monitors 110-1 to 110-3.
  • the switcher 105 outputs a predetermined SDI signal to the converter 109.
  • the SDI signal input to the converter 109 undergoes conversion processing and then becomes the input of the switcher 105 again.
  • metadata is extracted from the SDI signal ancillary region at the time of input, and metadata is inserted again into the SDI signal ancillary region at the time of output.
  • “get” indicates that the metadata is extracted from the ancillary region of the SDI signal
  • "embe” indicates that the metadata is inserted into the ancillary region of the SDI signal.
  • the switcher 105 outputs a predetermined SDI signal to the server 106. Further, the SDI signal reproduced by the server 106 becomes an input of the switcher 105.
  • the server 106 extracts metadata from the SDI signal ancillary region at the time of input, and inserts metadata into the SDI signal ancillary region at the time of output. In the illustrated example, “get” indicates that the metadata is extracted from the ancillary region of the SDI signal, and "embe” indicates that the metadata is inserted into the ancillary region of the SDI signal.
  • the switcher 105 has a CPU 151 as software, a router 152, and a video processor 153.
  • the CPU 151 controls the operation of each part of the switcher 105.
  • the SDI signal input to the switcher 105 from the CCU 103-1 to 103-3 or the video tape recorder 104 is input to the router 152. Further, the SDI signal input from the converter 109 or the server 106 to the switcher 105 is input to the router.
  • the predetermined SDI signal output from the router 152 is input to the video processor 153, and the obtained SDI signal processed by the video processor 153 is input to the router 152.
  • the identification information group is inserted into the ancillary region.
  • "embe" indicates that the metadata is inserted into the ancillary region of the SDI signal.
  • Metadata is extracted from the ancillary area of each SDI input to the router 152 and held in a register, and the metadata is read by the CPU 151.
  • the CPU 151 determines the output destination of each SDI signal input to the router 152 based on the metadata as the identification information of each SDI signal, and controls the router 152 based on the determination result. As a result, an appropriate SDI signal is output to each output unit of the router 152.
  • the CPU 151 controls the router 152 by determining the output destination of each SDI signal based on the correspondence table between the identification information and the output destination set in advance by the user operation, for example.
  • the output units P1, P2, and P3 of the router 152 for supplying the SDI signal to the video processor 153 are associated with the identification information of "VTR1,” "CAMERA1,” and "CAMERA2.”
  • the table is set. Therefore, the CPU 151 outputs the SDI signal from the video tape recorder 104, the SDI signal from the CCU 103-2, and the SDI signal from the CCU 103-4 to the output units P1, P2, and P3 of the router 152, respectively. Controls the routing of 152.
  • the CPU 151 is based on the identification information of the camera No. to the output unit of the router 152 to which the waveform monitors 110-1, 110-2, 110-3 are connected. Therefore, the router 152 is controlled so that the SDI signal from the CCU 103-1, the SDI signal from the CCU 103-2, and the SDI signal from the CCU 103-3 are output.
  • the CPU 151 outputs the SDI signal having the identification information of Pick Me to the output unit of the router 152 to which the monitor 108 is connected. , Controls the router 152. As a result, the monitor 108 is in a state in which the captured image of the camera device 101 in which the cameraman presses the pick me switch (PickMeSW) 115 is displayed.
  • the CPU 151 can also control the router 152 so that the SDI signal having the Pick Me identification information is output to the output unit of the router 152 to which the storage (not shown) is connected. As a result, the captured image of the camera device 101 in which the cameraman presses the pick me switch (PickMeSW) 115 is recorded in the storage.
  • the CPU 151 is based on the identification information indicating the role name (for example, the output unit (P1, P2, P3)) in the output unit of the router 152 to which the monitor 107 is connected.
  • the router 152 is controlled so that the SDI signal obtained by the video processor 153 is output.
  • the monitor 107 has a processed image based on the SDI signal obtained by the video processor 153, in the illustrated example.
  • the picture-in-picture image is displayed.
  • the CPU 151 is a router so that the SDI signal obtained by the video processor 153 is output to the output unit of the router 152 which should output the SDI signal for on-air. Control 152. As a result, the SDI signal obtained by the video processor 153 is output as an on-air SDI signal.
  • the extraction of metadata from the ancillary region of the SDI signal input to the router 152 is performed by the input unit (Input) 161 by hardware. Further, inserting the metadata into the ancillary region of the SDI signal output from the router 152 is performed by the output unit (Output) 162 by the hardware.
  • the detailed configuration of the input unit (Input) 161 and the output unit (Output) 162 will be described later.
  • the input unit (Input) 161 of each channel extracts the metadata sent every frame and stores it in a register.
  • the CPU 151 reads the metadata stored in the register at each input unit (Input) 161.
  • the register area by hardware in each input unit (Input) 161 is finite, and usually, the structure is generally refreshed every frame and overwritten by the metadata of the next frame.
  • a scan control signal S1 to the selector 171
  • the selector 171 sends each input unit accordingly.
  • a read control signal is sequentially sent to (Input) 161 to scan each input unit (Input) 161 by polling, and the CPU 151 sequentially acquires metadata.
  • each input unit (Input) 161 when the metadata is sequentially read from each input unit (Input) 161 at the timing of the CPU 151, and the read interval of each input unit (Input) 161 is longer than the frame rate, the metadata acquisition at each frame is performed. , Completely cannot be done. In such a case, when the one-time metadata is sent and the timing of acquiring the metadata from the CPU 151 is not met, the one-time metadata is overwritten and disappears.
  • the input unit (Input) 161 of each channel extracts the metadata sent every frame and stores it in a register.
  • the CPU 151 reads the metadata stored in the register at each input unit (Input) 161.
  • the register area by hardware in each input unit (Input) 161 is finite, and usually, the structure is generally refreshed every frame and overwritten by the metadata of the next frame.
  • a scan control signal S1 to the selector 171
  • the selector 171 sends each input unit accordingly.
  • a read control signal is sequentially sent to (Input) 161 to scan each input unit (Input) 161 by polling, and the CPU 151 sequentially acquires metadata.
  • the metadata is sent in a hurry in time, the acquisition of the data may be delayed.
  • the metadata in a hurry in time is sent with the flag of "Instancy" set.
  • the hardware of the input unit (Input) 161 is provided with a function for detecting the "Instancy” flag, and when the "Instancy" flag is set, the metadata is not automatically overwritten in the register area.
  • the detection signal S3 of the "Instancy” flag is sent to the interrupt circuit 172, and the interrupt signal S4 and the interrupt channel number S5 are sent from the interrupt circuit 172 to the CPU 151.
  • the CPU 151 can preferentially acquire the metadata of the interrupted channel.
  • FIG. 8A shows an example of an outline of the configuration of the SDI signal input unit.
  • the input SDI signal is supplied to the video processing circuit 182 through the metadata extraction unit 181.
  • the metadata extraction unit 181 extracts all data packets (ancillary packets) from the VANCE area of the SDI signal, and writes the data packet contents (header information and metadata) to the metadata register 183.
  • the CPU 184 reads and processes the contents of the data packet written in the metadata register 183.
  • FIG. 8B shows another example of the configuration outline of the SDI signal input unit.
  • the input SDI signal is supplied to the video processing circuit 192 through the metadata extraction unit 191.
  • the CPU 193 sets the metadata designation unit 194 with designated information (line information, header information) for designating the required metadata.
  • the metadata extraction unit 191 extracts a data packet (ancillary packet) specified by the specified information of the metadata specification unit 194 from the VANCE area of the SDI signal, and meta-distributes the data packet contents (header information and metadata). Write to data register 195. Then, the CPU 193 reads and processes the contents of the data packet written in the metadata register 195.
  • FIG. 9 shows a configuration example of the input unit (Input) 161 (see FIG. 1).
  • This configuration example is based on the configuration shown in FIG. 8 (b).
  • This configuration example is implemented by, for example, PLD (Programmable Logic Device).
  • the input unit (Input) 161 includes a VANCE extraction unit 201, a delay unit 202, a controller 203, a CRC (Cyclic Redundancy Check) unit 204, a header information extraction unit 205, an ID register 206, and a handling ID register 208. , It has a designation determination unit 207, a history generation target determination unit 209, and packet registers 211,212,213.
  • the VANCE extraction unit 201 extracts a signal in the VANCE region from the input SDI signal.
  • the delay unit 202 delays the SDI signal (same as the input SDI signal) output from the VANCE extraction unit 201 and inputs it to the controller 203. In this case, the SDI signal is given a delay time required for determining the designation of metadata for timing adjustment.
  • the header information extraction unit 205 detects all the data packets (ancillary packets) (see FIG. 4) inserted in the VANCE area from the signals in the VANCE area extracted by the VANCE extraction unit 201, and the header included in the data packets (ancillary packets). Information (DID, SDID, DataCount, LPMNumber, LPMFlag) is extracted and written to the ID register 206.
  • the ID register 206 has an area in which header information of 32 data packets can be written.
  • the header information of up to 32 data packets can be written to the ID register 206 for each frame.
  • LPMNumber 1-byte Various flag information
  • the CPU 151 can read and process the header information of each data packet written in the ID register 206. Thereby, the CPU 151 can confirm a list of what kind of metadata is superimposed on which line in the VANCE area. Although not shown, the CPU 151 can display the list on the display unit and present the list to the user.
  • the handling ID register 207 is set with designated information indicating which metadata is to be extracted from various metadata superimposed on the VANCE area. This setting is made by the CPU 151.
  • the handling ID register 207 has an area in which eight designated information can be written.
  • 1-byte condition flag information 2-byte line number (Line-No.), 1-byte data ID (DID), and 1-byte secondary data are stored.
  • An area for writing an ID (SDID), 2-byte number information (LPMNumber), and 1-byte various flag information (LPMFlag) is included.
  • FIG. 10C shows an example of the contents of the condition flag information.
  • the sixth bit is a flag indicating whether to handle only the metadata specified by the fifth bit or less or to exclude only the metadata specified by the fifth bit or less. For example, "0" indicates to handle and "1" indicates to exclude.
  • the 5th bit indicates whether the specification of the line number (Line-No.) Is invalid or valid. For example, “0" indicates invalidity and “1" indicates valid. If it is invalid, all lines will be covered.
  • the fourth bit indicates whether the designation of the data ID (DID) and the secondary data ID (SDID) is invalid or valid. For example, “0" indicates invalidity and "1" indicates valid.
  • the third bit indicates whether the designation of number information (LPMNumber) is invalid or valid. For example, "0" indicates invalidity and "1" indicates valid.
  • the second bit indicates whether the specification of "history” in various flag information (LPM Flag) is invalid or valid. For example, “0" indicates invalidity and “1" indicates valid.
  • the first bit indicates whether the specification of "Instancy” in various flag information (LPM Flag) is invalid or valid. For example, “0” indicates invalidity and “1” indicates valid.
  • the 0th bit indicates whether the specification of "Single” in various flag information (LPM Flag) is invalid or valid. For example, "0" indicates invalidity and "1" indicates valid.
  • the designation determination unit 208 is based on the header information sequentially extracted by the header information extraction unit 205 and the line information in which the data packet having the header information is inserted, and the header information extraction unit 205. It is determined whether or not the metadata included in the data packet having the header information extracted in is satisfied with the specified information set in the handling ID register 207.
  • the designation determination unit 208 determines that the designation information is satisfied, the designation determination unit 208 sends a write control signal to the controller 203 so as to write the header information and the metadata included in the data packet to the register. Further, when the designation determination unit 208 sends a write control signal to the controller 203, the size information (L, M, S) of the metadata (table data) indicated by the 1st bit and the 0th bit of the LPM Flag in the header information thereof. Information) is also sent to the controller 203. Further, when the 6th bit "Instancy" flag of the LPM Flag is set or the 5th bit “Single” flag is set, information indicating that is also sent to the controller 203.
  • the packet register (Packet Register (L)) 211 is a register for writing the metadata satisfying the specified information and the corresponding header information as described above.
  • the packet register 211 has eight register areas and 261 bytes are prepared as one register area in order to enable writing of eight metadata. .. That is, the packet register 211 is a meta when the size information of the metadata (table data) indicated by the 1st bit and the 0th bit of the LPM Flag is L (Large), that is, a maximum of 252 bytes (max 252 bytes). Used to write data.
  • the CPU 151 can read and process the metadata written in the packet register 211.
  • the packet register (Packet Register (M)) 212 is also a register for writing the metadata satisfying the specified information and the corresponding header information as described above.
  • the packet register 212 has six register areas in order to enable writing of eight metadata, and 128 bytes are prepared as one register area. That is, the packet register 212 is a meta when the size information of the metadata (table data) indicated by the 1st bit and the 0th bit of the LPM Flag is M (Middle), that is, a maximum of 119 bytes (max 119 bytes). Used to write data.
  • the CPU 151 can read and process the metadata written in the packet register 212.
  • the packet register (Packet Register (S)) 213 is also a register for writing the metadata satisfying the specified information and the corresponding header information as described above.
  • the packet register 213 has eight register areas and 64 bytes are prepared as one register area in order to enable writing of six metadata. .. That is, the packet register 213 is a meta when the size information of the metadata (table data) indicated by the 1st bit and the 0th bit of the LPM Flag is S (Small), that is, a maximum of 55 bytes (max 55 bytes). Used to write data.
  • the CPU 151 can read and process the metadata written in the packet register 213.
  • the user data when the "Instancy" or "Single" flag is set is written in the register area where overwriting can be prohibited.
  • information as shown in FIG. 11A is written in one register area in each of the packet registers 211, 212, and 213. That is, 1-byte status flag information, 2-byte line number (Line-No.), 1-byte data ID (DID), 1-byte secondary data ID (SDID), and 1-byte. Data count (DataCount), 2-byte number information (LPMNumber), 1-byte various flag information (LPMFlag), and main data (metadata) of a predetermined number of bytes are written.
  • FIG. 11B shows an example of the contents of the status flag information.
  • the seventh bit is a flag indicating the state of the “history” flag included in various flag information (LPM Flag). For example, “0" indicates that the "history” flag is “0” indicating that it is not historical data, and “1” indicates that the "history” flag is “1” indicating that it is historical data. Indicates that there is.
  • the sixth bit is a flag indicating the state of the "Instancy” flag included in various flag information (LPM Flag). For example, “0” indicates that the "Instancy” flag is “0” indicating that it is not metadata that requires immediacy, and “1” indicates that the "Instancy” flag is meta that requires immediacy. It indicates that it is "1” indicating that it is data.
  • LPM Flag flag information
  • the fifth bit is a flag indicating the state of the "Single” flag included in various flag information (LPM Flag). For example, “0" indicates that the "Single” flag is “0” indicating that it is not single-shot metadata, and "1" indicates that the "Single” flag is single-shot metadata. Indicates that it is “1”.
  • the fourth bit is a flag indicating whether the checksum (Check Sum) (see FIG. 4) of the N + 1 byte of the data packet (ancillary packet) is “OK” or “NG”. For example, "0" indicates “OK” and "1" indicates "NG”.
  • the 0th bit indicates whether or not to approve Overwrite. For example, “0" indicates approval, and "1" indicates disapproval. For example, when metadata with the "Instancy” or “Single” flag is written, the 0th bit is set to “1" and overwriting is disapproved, but the metadata is then read by the CPU 151. When this is done, the 0th bit is set to "0" and overwriting is approved.
  • the controller 203 extracts and specifies the metadata specified by extracting from the SDI signal whose timing is adjusted (delayed) by the delay unit 202 based on the write control signal sent from the designation determination unit 208.
  • the included data packet is detected, and the header information (DID, SDID, DataCount, LPMNumber, LPMFlag) and metadata contained therein are extracted.
  • the controller 203 writes the extracted header information and the metadata to any of the packet registers 211 to 213 according to the size information of the metadata (table data) sent from the designation determination unit 208.
  • the size information is L (Large)
  • M M
  • S Small
  • controller 203 is metadata in which the “Instancy” or “Single” flag is set based on the information sent from the designation determination unit 208 that the “Instancy” or “Single” flag is set. And the header information related thereto are written in the register area where overwriting of the packet registers 211 to 213 can be prohibited.
  • the metadata designated to be extracted is selectively extracted from the VANCE region of the SDI signal based on the write control signal sent from the designation determination unit 208.
  • the capacity of the entire packet register can be reduced, and the processing load of the CPU 151 can also be reduced.
  • the metadata designation information to be extracted is set in the handling ID register 207 as described above. It is customary for the same information to be superimposed over multiple frames for metadata other than the metadata for which the "Instancy" and "Single" flags are set. Therefore, by repeatedly extracting the metadata while changing the specified information set in the handling ID register 207, it is possible to extract all the metadata in a state where the capacity of the entire packet register is small, that is, with a small amount of hardware resources. It will be possible.
  • the LPM Flag includes the size information (1st bit and 0th bit) of the metadata, and the extracted header information and the metadata are obtained from the packet registers 211 to 213 based on this size information. It is selectively written to either. As a result, it is not necessary to set the register area for all one packet register to 261 bytes, and therefore the capacity of the entire packet register can be suppressed. In other words, it is possible to increase the number of metadata that can be written and held in the packet register while suppressing the capacity of the entire packet register.
  • the controller 203 adds status flag information and line number (Line-No.) And writes the extracted header information and metadata (Line-No.). See FIG. 11 (a)).
  • the controller 203 sets the 0th bit of the status flag information (see FIG. 11B) to "1" and moves to the register area. Overwrite is disapproved. After that, when the metadata is read by the CPU 151, the 0th bit is set to "0" and overwriting of the register area is approved.
  • the CPU 151 can acquire the metadata requesting immediacy (urgency) in which the "Instancy” flag is set, or the single-shot metadata in which the "Single” flag is set, without omission. It becomes.
  • the controller 203 sends the detection signal S3 of the "Instancy” flag to the interrupt circuit 172 (see FIG. 7).
  • the interrupt signal S4 and the interrupt channel number S5 are sent from the interrupt circuit 172 to the CPU 151, and the CPU 151 can preferentially acquire the metadata of the interrupted channel.
  • the controller 203 When monitoring metadata with the "Instancy" or “Single” flag set only by software processing, it is necessary to monitor all metadata of all frames in real time. However, in the case of a device having many input systems, it is difficult to continuously monitor all inputs in real time. However, as described above, the controller 203 writes the extracted header information and metadata to the register areas of the packet registers 211 to 213 so that the software (CPU 151) can read them at an arbitrary timing (for example, polling). , It becomes easy to acquire without omission.
  • the history generation target determination unit 209 is included in the data packet having the header information based on the header information sequentially extracted by the header information extraction unit 205, for example, the number information (LPMNumber). Determine if the metadata is subject to history.
  • the LPM Number to be history can be specified, for example, from only the upper 8 bits "LiveMeta U", or from the upper 8 bits "LiveMeta U” and the lower 8 bits "LiveMeta D”.
  • the LPM Number indicates that it is live metadata such as a pick-me signal, it is determined to be a history target. Further, for example, when the number information indicates that the video signal is metadata indicating from which source (camera, server, etc.) the video signal is output, it is determined that the video signal is a history target.
  • the historicization target determination unit 209 determines that the historicization target is determined, the 7th bit "history" flag of the LPM Flag of the data packet having the metadata is set, that is, changed to "1". To send a history control signal to the controller 203.
  • the controller 203 sets the 7th LPM Flag of the data packet having the metadata determined to be the history target for the SDI signal whose timing is adjusted (delayed) by the delay unit 202.
  • the history processing that sets the "history" flag of the bit is performed to indicate that the metadata is historical data.
  • the controller 203 performs the history processing on the SDI signal whose timing is adjusted (delayed) by the delay unit 202, and the metadata is superimposed on the SDI signal. It is also possible to perform mask processing on the specified line among the lines. In this mask processing, the data of the corresponding line is replaced with a fixed value. Further, when performing the mask processing, the CPU 151 sets the function on and specifies the line number.
  • the CRC (Cyclic Redundancy Check) unit 204 performs a process of replacing the CRC with the one after recalculation for the SDI signal after the history processing and the mask processing are performed by the controller 203, and obtains the output SDI signal.
  • FIG. 12 shows a configuration example of the output unit (Output) 162 (see FIG. 1).
  • This configuration example is implemented by, for example, PLD (Programmable Logic Device).
  • the output unit 162 includes a VANCE extraction unit 301, a delay unit 302, a metadata superimposition unit 303, a CRC (Cyclic Redundancy Check) unit 304, a terminal detection unit 305, a controller 306, and packet registers 307, 308, 309. have.
  • the VANCE extraction unit 301 extracts a signal in the VANCE region from the input SDI signal.
  • the delay unit 302 delays the SDI signal (same as the input SDI signal) output from the VANCE extraction unit 301 and inputs it to the metadata superimposition unit 303.
  • the SDI signal is given a predetermined delay in order to match the timing with the data packet sent from the controller 306 to the metadata superimposing unit 303, which will be described later.
  • the terminal detection unit 305 extracts the superimposed data packet in each line of the VANCE area extracted by the VANCE extraction unit 301, and detects the end of the last data packet superimposed on the line. In a line where data packets are not superimposed, the start position of the line is regarded as the end of the last data packet superimposed on the line.
  • next data packet is superimposed on the end of one data packet, which is not necessarily continuous. Therefore, when the end of a certain data packet is detected and the next data packet is not detected by the elapse of a predetermined number of cycles, for example, 5 cycles, the end detection unit 302 terminates the end of the certain data packet. Confirmed as the end of the data packet.
  • whether or not the next data packet is detected depends on whether or not the 3-word ADF (Ancillary Data Flag) (see FIG. 4) located at the beginning of the data packet is detected.
  • one cycle corresponds to a one-word (10-bit) period.
  • the terminal detection unit 305 sends a metadata superimposition control signal to the controller 306 at the final timing of terminal detection on each line.
  • the terminal detection unit 305 adds the line number (Line-No.) Information to the metadata superimposition control signal and sends it.
  • the packet register (Packet Register (L)) 307 is a register that holds information (including header information and metadata) of a metadata packet to be newly superimposed.
  • the packet register 307 has four register areas in order to be able to hold information of four metadata packets. In this case, 261 bytes are prepared as one register area.
  • This packet register 307 is new when the size information of the metadata (table data) indicated by the 1st bit and the 0th bit of the LPM Flag is L (Large), that is, a maximum of 252 bytes (max 252 bytes). Used to hold information for data packets with metadata.
  • the CPU 151 can access the packet register 307 and set the information of the metadata packet to be newly superimposed in the packet register 307.
  • the packet register (Packet Register (M)) 308 is also a register that holds information (including header information and metadata) of the metadata packet to be newly superimposed.
  • the packet register 308 has four register areas in order to be able to hold information of four metadata packets. In this case, 128 bytes are prepared as one register area.
  • the size information of the metadata (table data) indicated by the 1st bit and the 0th bit of the LPM Flag is M (Middle), that is, a maximum of 119 bytes (max 119). It is used to hold the information of the data packet with new metadata in the case of byte).
  • the CPU 151 can access the packet register 308 and set the information of the metadata packet to be newly superimposed in the packet register 308.
  • the packet register (Packet Register (S)) 309 is also a register that holds information (including header information and metadata) of the metadata packet to be newly superimposed.
  • the packet register 309 has four register areas in order to be able to hold information of four metadata packets. In this case, 64 bytes are prepared as one register area.
  • the size information of the metadata (table data) indicated by the 1st bit and the 0th bit of the LPM Flag is S (Small), that is, a maximum of 55 bytes (max 55). It is used to hold the information of the data packet with new metadata in the case of byte).
  • the CPU 151 can access the packet register 309 and set the information of the metadata packet to be newly superimposed in the packet register 309.
  • information as shown in FIG. 13A is written in one register area in each of the packet registers 307, 308, and 309. That is, 1-byte order flag information, 2-byte line number (Line-No.), 1-byte data ID (DID), 1-byte secondary data ID (SDID), and 2-byte secondary data ID (SDID). Number information (LPMNumber), 1-byte various flag information (LPMFlag), and main data (metadata) of a predetermined number of bytes are written.
  • the line number (Line-No.) Is represented by, for example, 12 bits.
  • FIG. 13B shows an example of the contents of the Order Flag information.
  • the seventh bit is a flag indicating whether or not to enable the function of masking the original data of the designated line, that is, the metadata that has already been superimposed. For example, "0" indicates that it is not enabled, and "1" indicates that it is enabled.
  • this mask function is executed in the VANCE extraction unit 201.
  • the sixth bit automatically enables the function of multiplexing metadata even in the even field line of +563 when the SDI signal has a level B SDI format structure (see FIG. 2A). It is a flag indicating whether or not. For example, "0" indicates that it is not enabled, and "1" indicates that it is enabled. When this function is enabled, the above-mentioned flag information of the 7th bit is also applied to the +563 even field line.
  • the third bit is a flag indicating an action (Instancy action) when the "Instancy" flag is set, that is, when it is "1". For example, “0" indicates that after multiplexing once, the hardware sets the “Instancy” flag to "0" from the next time (next frame) to multiplex, and “1" indicates the next time (next frame). ) Also indicates that the multiplexing is continued as it is, that is, the flag of "Instancy" remains “1".
  • the second bit is a flag indicating an action (Single action) when the "Single” flag is set, that is, when it is "1". For example, “0" indicates that the hardware will stop multiplexing metadata from the next time (next frame) after multiplexing once, and "1" indicates that the hardware will stop multiplexing from the next time (next frame).
  • the "Single” flag is set to "0" to indicate multiplexing.
  • the 0th bit is a flag indicating whether or not the metadata has been multiplexed. For example, “0” indicates that it has not been performed yet, and "1" indicates that it has already been performed.
  • the controller 306 performs the corresponding data packet from the packet registers 307 to 309 based on the metadata superimposition control signal and the line number (Line-No.) Information sent from the terminal detection unit 305.
  • Information is taken out and sent to the metadata superimposition unit 303 as a data packet format by adding a 3-word ADF (Ancillary Data Flag) or the like.
  • the controller 306 sends the data packets to be superposed to the metadata superimposing unit 303 in ascending order of the size of the metadata, for example.
  • the controller 306 extracts the information of the corresponding data packet from the packet registers 307 to 309 and sends the data packet containing the information to the metadata superimposing unit 303 in this way, the data packet is stored in the packet registers 307 to 309.
  • the 0th bit of the order flag information added to the information of is "0”, it is changed to "1". This indicates that the metadata has already been multiplexed.
  • the controller 306 is "Instancy action" of the third bit of the order flag information. Operates according to the state of the flag of. That is, when the "Instancy action” flag is "0", after one frame is multiplexed, in the subsequent frames, the "Instancy” flag is changed to "0" to generate a data packet to be superimposed. It is sent to the metadata superimposing unit 303.
  • the controller 306 of the second bit of the order flag information "Single action”. Operates according to the state of the flag. That is, when the flag of "Single action" is "0", the data packet to be superposed is not generated and sent to the metadata superimposing unit 303 in the subsequent frames after one frame is multiplexed. If the "Single action" flag is "1", after one frame is multiplexed, the "Single Instancy” flag is changed to "0" in the subsequent frames to generate a data packet to be superimposed. , Sent to the metadata superimposition unit 303.
  • the metadata superimposition unit 303 performs a process of superimposing a data packet sent from the controller 306 on each corresponding line of the VANC region of the SDI signal whose timing has been adjusted (delayed) by the delay unit 302. In this case, the metadata superimposition unit 303 superimposes a new data packet following the end of the already superposed data packet.
  • the next data packet is superimposed following the end of the previous data packet in sequence.
  • the CRC (Cyclic Redundancy Check) unit 304 performs a process of replacing the CRC with the one after recalculation for the SDI signal after the superimposition processing is performed by the metadata superimposition unit 303, and obtains the output SDI signal.
  • the terminal detection unit 305 of the hardware detects the end of the already superimposed data packet of the corresponding line in the VANCE area, and based on the detection timing, the controller 306 detects the end of the hardware.
  • a new data packet is sent to the metadata superimposition unit 303, and a new data packet is superimposed continuously from the end of the already superimposed data packet of the corresponding line.
  • the output unit 162 shown in FIG. 12 is provided with an automatic control function of the superimposition position.
  • the software can automatically superimpose a new data packet at the correct position of the corresponding line simply by specifying the information of the data packet to be superposed and the superimposing line.
  • metadata for which the "Single” flag is set is required to be superimposed only on a single frame, but it is difficult for software to perform processing in units of one frame. That is, it is difficult for software to control that when the metadata for which the "Single” flag is set is superposed in a certain frame, the superimposition of the metadata is always stopped in the next frame.
  • the output unit 162 shown in FIG. 12 is provided with a frame-by-frame automatic control function (metadata transmission assist function) of output metadata by hardware, and is a meta with a flag of "Single” or "Instancy". Data is sent properly.
  • a frame-by-frame automatic control function metal transmission assist function
  • the hardware controller 306 multiplexes the packet once and then stops the multiplexing from the next time (next frame), or "Single". The flag of is dropped and it is multiplexed.
  • the hardware controller 306 multiplexes them once and then drops the "Instancy” flag to multiplex them, or "Instancy”. Multiplexed with the flag set.
  • FIG. 14 shows another configuration example of the input unit (Input) 161.
  • the parts corresponding to those in FIG. 9 are designated by the same reference numerals, and detailed description thereof will be omitted as appropriate.
  • the designation determination unit 208 has the header information extracted by the header information extraction unit 205 based on the header information sequentially extracted by the header information extraction unit 205 and the line information in which the data packet having the header information is inserted. It is determined whether or not the metadata included in the data packet satisfies the specified information set in the handling ID register 207.
  • the designation determination unit 208 determines that the designation information is satisfied, the designation determination unit 208 sends a write control signal to the controller 203 so as to write the header information and the metadata included in the data packet to the register. Further, when the designation determination unit 208 sends a write control signal to the controller 203, the 6th bit "Instancy" flag of the LPM Flag is set, or the 5th bit “Single” flag is set. If so, information indicating that fact is also sent to the controller 203.
  • the packet registers 221 and 222 are registers for writing metadata that satisfies the specified information and header information corresponding to the metadata as described above.
  • the CPU 151 can read and process the metadata written in the packet registers 221,222.
  • the packet register 222 is a register for writing metadata that needs to be held until it is read by the CPU 151, in which metadata for which the "Single" flag is set. The metadata written in the packet register 222 continues to be retained unless a read and clear operation is performed.
  • the read and clear operations are clear operations with read confirmation.
  • the packet register 221 is a register for writing metadata in which the "Single" flag is not set here.
  • the metadata written in the packet register 221 is reset at, for example, the start timing of each frame.
  • FIG. 15A shows an example of information corresponding to one piece of metadata written in the packet registers 221,222.
  • This information includes a 2-byte line number (Line-No.), a 1-byte data ID (DID), a 1-byte secondary data ID (SDID), a 1-byte data count (Data Count), and 2 It consists of byte number information (LPMNumber), 1-byte various flag information (LPMFlag), a predetermined number of bytes of main data (metadata), and 1-byte checksum / status information. ing.
  • FIG. 15B shows an example of the contents of the checksum / status information.
  • the seventh bit is a flag indicating whether the checksum (Check Sum) (see FIG. 4) of the N + 1 byte of the data packet (ancillary packet) is “OK” or “NG”. For example, “0" indicates “OK” and "1" indicates "NG”.
  • the sixth bit is based on the premise that the metadata superimposed on the same line is tightly packed, and when an unnecessary blank is detected between the metadata superimposed on the same line.
  • the flag to be asserted For example, "0" indicates that an unnecessary blank has not been detected, and "1" indicates that an unnecessary blank has been detected.
  • the size of the metadata can be known by looking at the data count (Data Count), but when the next metadata arrives before the required size of data is detected (stored). Is a flag asserted in. For example, "0" indicates that the next metadata has not arrived before the required size of data is detected (stored), and "1" indicates that the required size of data is not detected (stored). Indicates that the following metadata has arrived.
  • the controller 203 extracts and specifies the metadata specified by extracting from the SDI signal whose timing is adjusted (delayed) by the delay unit 202 based on the write control signal sent from the designation determination unit 208.
  • the included data packet is detected, and the header information (DID, SDID, DataCount, LPMNumber, LPMFlag) and metadata contained therein are extracted.
  • the controller 203 packet registers the metadata in which the “Single” flag is set and the header information related thereto based on the information sent from the designation determination unit 208 that the “Single” flag is set. Writes to 222, and writes other metadata and related header information to packet register 221.
  • the configuration of the input unit (Input) 161 shown in FIG. 14 is the same as the configuration of the input unit (Input) 161 shown in FIG. 9, although detailed description is omitted.
  • each size of the metadata included in the VANCE area of the input SDI signal is used.
  • the packet registers are wasted.
  • the controller 203 writes the metadata extracted from the VANCE region of the SDI signal to the packet registers 221, 222 without determining its size, and connects them in a string. It is to be saved in. Therefore, there is no waste as in the configuration of the input unit (Input) 161 shown in FIG.
  • the size of each metadata written in the packet registers 221, 222 is different, so when the metadata is acquired from the CPU 151, the data is individually extracted. It is difficult to acquire data by scanning the entire register area.
  • the input unit (Input) 161 in the video system 10 shown in FIG. 1 extracts predetermined metadata from the VANCE region of the input SDI signal based on the specified information of the metadata and stores the storage register. It is written to (packet register). Therefore, even when the amount of metadata included in the input SDI signal VANCE area increases, the increase in the memory hardware can be suppressed, and the load on the CPU 151 that reads and processes the metadata from the storage register can also be reduced.
  • the output unit 162 in the video system 10 shown in FIG. 1 detects the end of the last data packet already superimposed on the designated line in the VANCE area of the input SDI signal, and follows the end of the data packet. It superimposes a new data packet and has an automatic control function of the superimposing position. Therefore, the CPU (software) 151 can automatically superimpose a new data packet at the correct position of the corresponding line only by designating the information of the data packet to be superposed and the superimposing line.
  • the present technology can also have the following configuration.
  • a signal input unit for inputting a video signal and a digital signal for transmission including a data packet having metadata related to the video signal, and A signal processing device including a data writing unit that extracts predetermined metadata from the transmission digital signal based on the designated information of the metadata and writes it to a storage register.
  • the designated information includes header information of the data packet having the predetermined metadata.
  • the header information includes classification information indicating the classification of the predetermined metadata.
  • the classification information is composed of the first classification information indicating the classification of the predetermined metadata and the second classification information indicating the subclassification of the predetermined metadata within the classification based on the first classification information.
  • the signal processing apparatus 3). (5) The signal processing device according to (3) or (4), wherein the header information further includes auxiliary information of the predetermined metadata. (6) The signal processing device according to (5) above, wherein the auxiliary information includes information indicating that the predetermined metadata is historical data. (7) The signal processing device according to (5) above, wherein the auxiliary information includes information indicating that the predetermined metadata is metadata that requires immediacy. (8) The data writing unit writes the predetermined metadata to a register area of the storage registers for holding the data until it is read by the software, and interrupts the software (7). The signal processing apparatus according to. (9) The signal processing device according to (5) above, wherein the auxiliary information includes information indicating that the predetermined metadata is single-shot metadata.
  • the transmission digital signal is a SDI format serial digital signal.
  • the signal processing device according to any one of (1) to (12) above, wherein the data packet is inserted in an ancillary region of the serial digital signal of the SDI format.
  • the signal output unit A terminal detector that detects the end of the last data packet already superimposed on the designated line of the input digital signal for transmission, and a terminal detector. Based on the termination detection, a signal process having a data superimposition unit that superimposes the new data packet following the termination of the last superposed data packet on the designated line of the input transmission digital signal.
  • the end detection unit determines the end of the certain data packet at the end.
  • the signal processing apparatus according to (15) above, which is determined as the end of a data packet. (17) Further provided with a register for holding the information of the data packet to be newly superimposed.
  • the signal output unit transfers the data packet to be newly superimposed. After superimposing one frame, in the subsequent frames, the data packet to be newly superimposed is changed from the information indicating that it is the metadata requesting immediacy to the information indicating that it is not the metadata requesting immediacy.
  • the signal processing apparatus according to (15) or (16) above, wherein the superposition is continued or the superimposition is continued as it is. (18) Further provided with a register for holding the information of the data packet to be newly superimposed.
  • the signal output unit When the data packet to be newly superimposed contains information indicating that the metadata contained in the data packet is single-shot metadata, the signal output unit superimposes the data packet to be newly superimposed by one frame. Later, in subsequent frames, the superposition is stopped, or the information indicating that the metadata is one-shot is changed to the information indicating that the metadata is not one-shot and the superposition is continued.
  • the transmission digital signal is a SDI format serial digital signal.
  • the signal processing device according to any one of (15) to (18), wherein the data packet is inserted into an ancillary region of the serial digital signal of the SDI format.
  • a signal input procedure for inputting a digital signal for transmission including a video signal has a signal output procedure for superimposing and outputting a newly superimposed data packet having metadata related to the video signal on the designated line of the input transmission digital signal.
  • a procedure for detecting the end of the last data packet already superimposed on the designated line of the input digital signal for transmission and a procedure for detecting the end of the data packet.
  • a signal processing method comprising a procedure of superimposing the new data packet on the end of the last superposed data packet on the designated line of the input transmission digital signal based on the termination detection.

Abstract

シリアルデジタル信号の送信側や受信側におけるメモリハードの増大を抑制し、かつCPUの負担も軽減する。 信号入力部により、映像信号および該映像信号に係るメタデータを持つデータパケットを含む伝送用デジタル信号を入力する。データ書き込み部により、メタデータの指定情報に基づいて伝送用デジタル信号から所定のメタデータを抽出して蓄積用レジスタに書き込む。例えば、指定情報は、所定のメタデータを持つデータパケットのヘッダ情報を含む。例えば、ヘッダ情報は、所定のメタデータの分類を示す分類情報や所定のメタ情報の補助情報を含む。

Description

信号処理装置および信号処理方法
 本技術は、信号処理装置および信号処理方法に関し、詳しくは、放送局等のビデオシステム等に適用して好適な信号処理装置等に関する。
 従来、映像信号と共にこの映像信号に係るメタデータを含む伝送用デジタル信号を伝送するシステムが知られている。例えば、特許文献1には、SDIフォーマットのシリアルデジタル信号のアンシラリ領域にメタデータを挿入することで、映像信号と共にその映像信号に係るメタデータを伝送することが開示されている。
 映像信号を種々のアプリケーションで使用することを考えると、今後シリアルデジタル信号のアンシラリ領域へのより多くの種類のメタデータの重畳が想定される。この場合、シリアルデジタル信号のアンシラリ領域には、多くの種類のメタデータがあふれることになり、後段の特定の個の受信側にとっては、不要、あるいは未知のメタデータが大量に送付されてくることになる。
 現在は、特定のメタデータを、特定のラインナンバー位置に付加することで、送信側/受信側の連携により、運用されることが多い。それぞれの用途が違うメタデータを、それぞれの思惑で付加すると、アンシラリ領域内の状況が複雑になり、正しく受信するためには、全てのメタデータをCPU(ソフトウェア)が取得し、所望のデータを抽出する必要がある。
 大量のメタデータが送られてきている場合、それらを蓄積する領域も大きなものが必要で、メモリハードが増大する。また、毎フレーム送られてくるアンシラリ領域を常にスキャンし、データを識別しなければいけないのは、無駄な処理が多く、非効率的である。さらに、多チャンネルの入力を備えるスイッチャやビデオルータでは、同時に多数のメタデータを処理する必要があることから、全てをCPUで処理することは、CPUに膨大な負荷を負わせることになる。
特開2011-155701号公報
 本技術の目的は、シリアルデジタル信号の送信側や受信側におけるメモリハードの増大を抑制し、かつCPUの負担も軽減することにある。
 本技術の概念は、
 映像信号および該映像信号に係るメタデータを持つデータパケットを含む伝送用デジタル信号を入力する信号入力部と、
 メタデータの指定情報に基づいて前記伝送用デジタル信号から所定のメタデータを抽出して蓄積用レジスタに書き込むデータ書き込み部を備える
 信号処理装置にある。
 本技術において、信号入力部により、映像信号および該映像信号に係るメタデータを持つデータパケットを含む伝送用デジタル信号が入力される。例えば、伝送用デジタル信号は、SDIフォーマットのシリアルデジタル信号であり、データパケットは、SDIフォーマットのシリアルデジタル信号のアンシラリ領域に挿入されていてもよい。データ書き込み部により、メタデータの指定情報に基づいて伝送用デジタル信号から所定のメタデータが抽出されて蓄積用レジスタに書き込まれる。
 例えば、指定情報は、所定のメタデータを持つデータパケットのヘッダ情報を含む、ようにされてもよい。この場合、例えば、ヘッダ情報は、所定のメタデータの分類を示す分類情報を含む、ようにされてもよい。例えば、分類情報は、所定のメタデータの分類を示す第1分類情報と、所定のメタデータの第1分類情報による分類内の細分類を示す第2分類情報からなる、ようにされてもよい。
 また、この場合、例えば、ヘッダ情報は、所定のメタデータの補助情報をさらに含む、ようにされてもよい。例えば、補助情報は、所定のメタデータが履歴データであることを示す情報を含む、ようにされてもよい。
 また、例えば、補助情報は、所定のメタデータが即時性を要求するメタデータであることを示す情報を含む、ようにされてもよい。この場合、例えば、データ書き込み部は、所定のメタデータを、蓄積用レジスタのうち、ソフトウェアによる読み出しがあるまで保持し続けるためのレジスタ領域に書き込むと共に、ソフトウェアに割り込みを掛ける、ようにされてもよい。
 また、例えば、補助情報は、所定のメタデータが単発のメタデータであることを示す情報を含む、ようにされてもよい。この場合、例えば、データ書き込み部は、所定のメタデータを、蓄積用レジスタのうち、ソフトウェアによる読み出しがあるまで保持し続けるためのレジスタ領域に書き込む、ようにされてもよい。
 このように本技術においては、メタデータの指定情報に基づいて、入力された伝送用デジタル信号から所定のメタデータを抽出して蓄積用レジスタに書き込むものである。そのため、伝送用デジタル信号に含まれるメタデータが多くなる場合であっても、メモリハードの増大を抑制でき、また蓄積用レジスタからメタデータを読み出して処理するCPUの負担も軽減可能となる。
 なお、本技術において、例えば、入力された伝送用デジタル信号に含まれるデータパケットが持つメタデータが履歴化対象のメタデータである場合、入力された伝送用デジタル信号を出力する際に、データパケットに、このデータパケットが持つメタデータが履歴データであることを示す補助情報を付加する情報付加部をさらに備える、ようにされてもよい。これにより、入力された伝送用デジタル信号に含まれている履歴化対象のメタデータを、ソフトウェア処理を介在させることなく、1フレームの抜けもなく、即座に、履歴データに変更することが可能となる。
 また、本技術において、例えば、入力された伝送用デジタル信号に含まれるデータパケットのヘッダ情報を抽出するヘッダ情報抽出部と、この抽出されたヘッダ情報を保持するレジスタをさらに備える、ようにされてもよい。これにより、入力された伝送用デジタル信号に含まれるメタデータの一覧を確認することが可能となる。
 また、本技術の他の概念は、
 映像信号を含む伝送用デジタル信号を入力する信号入力部と、
 前記入力された伝送用デジタル信号の指定ラインに前記映像信号に係るメタデータを持つ新たに重畳すべきデータパケットを重畳して出力する信号出力部を備え、
 前記信号出力部は、
 前記入力された伝送用デジタル信号の前記指定ラインに既に重畳されている最後のデータパケットの終端を検出する終端検出部と、
 前記終端検出に基づいて、前記入力された伝送用デジタル信号の前記指定ラインの前記既に重畳されている最後のデータパケットの終端に続けて前記新たなデータパケットを重畳するデータ重畳部を有する
 信号処理装置にある。
 本技術において、信号入力部により、映像信号を含む伝送用デジタル信号が入力される。そして、信号出力部により、入力された伝送用デジタル信号の指定ラインに映像信号に係るメタデータを持つ新たに重畳すべきデータパケットが重畳されて出力される。例えば、伝送用デジタル信号は、SDIフォーマットのシリアルデジタル信号であり、データパケットは、このSDIフォーマットのシリアルデジタル信号のアンシラリ領域に挿入されてもよい。
 この場合、終端検出部により、入力された伝送用デジタル信号の指定ラインに既に重畳されている最後のデータパケットの終端が検出される。そして、データ重畳部により、終端検出に基づいて、入力された伝送用デジタル信号の指定ラインの既に重畳されている最後のデータパケットの終端に続けて新たなデータパケットが重畳される。
 例えば、終端検出部は、あるデータパケットの終端が検出された後に、所定数のサイクルが経過するまでに次のデータパケットが検出されなかった場合、あるデータパケットの終端を最後のデータパケットの終端として確定する、ようにされてもよい。これにより、前のデータパケットに続けて次のデータパケットが重畳されていない場合であっても、最後のデータパケットの終端を正しく検出することが可能となる。
 また、例えば、新たに重畳すべきデータパケットの情報を保持するレジスタをさらに備え、新たに重畳すべきデータパケットが、該データパケットが持つメタデータが即時性を要求するメタデータであることを示す情報を含む場合、信号出力部は、新たに重畳すべきデータパケットを1フレーム重畳後、以降のフレームで、新たに重畳すべきデータパケットを、即時性を要求するメタデータであることを示す情報を即時性を要求するメタデータでないことを示す情報に変更して重畳を続けるか、そのまま重畳することを続ける、ようにされてもよい。これにより、即時性を要求するメタデータの送出を適切に行うことが可能となる。
 また、例えば、新たに重畳すべきデータパケットの情報を保持するレジスタをさらに備え、新たに重畳すべきデータパケットが、該データパケットが持つメタデータが単発のメタデータであることを示す情報を含む場合、信号出力部は、新たに重畳すべきデータパケットを1フレーム重畳後、以降のフレームで、重畳を停止するか、単発のメタデータであることを示す情報を単発のメタデータでないことを示す情報に変更して重畳を続ける、ようにされてもよい。これにより、単発のメタデータの送出を適切に行うことが可能となる。
 このように本技術においては、入力された伝送用デジタル信号の指定ラインに既に重畳されている最後のデータパケットの終端を検出し、その終端に続けて新たなデータパケットを重畳するものであって、重畳位置の自動制御機能を備えるものである。そのため、ソフトウェアでは重畳するデータパケットの情報と重畳ラインを指定するだけで、該当ラインの正しい位置に、自動で新たなデータパケットを重畳することが可能となる。
実施の形態としてのビデオシステムの構成例を示すブロック図である。 「HD-SDI / 3G-SDI Level-B」および「3G-SDI Level-A / 12G-SDI」のSDIフォーマット構造の一例を示す図である。 カメラ装置とCCUの詳細な構成例を示すブロック図である。 SDI信号のアンシラリ領域に挿入されるデータパケット(アンシラリパケット)の構成例を示す図である。 第9ワードの各種フラグ情報(LPM Flag)の内容の一例を示す図である。 メタデータの補助情報として「Single」のフラグが立っている場合の動作を説明するための図である。 メタデータの補助情報として「Instancy」のフラグが立っている場合の動作を説明するための図である。 SDI信号の入力部の構成概要を説明するための図である。 入力部(Input)の構成例を示すブロック図である。 IDレジスタに書き込まれる情報、取扱いIDレジスタに書き込まれる情報、およびコンディションフラグ情報の内容の一例を示す図である。 パケットレジスタの1つのレジスタ領域に書き込まれる情報、およびステータスフラグ情報の内容の一例を示す図である。 出力部(Output)の構成例を示すブロック図である。 パケットレジスタの1つのレジスタ領域に書き込まれる情報、およびオーダーフラグ情報の内容の一例を示す図である、 出力部(Output)の他の構成例を示すブロック図である。 パケットレジスタに書き込まれる一個のメタデータに対応した情報の一例、およびチェックサム/ステータス情報の内容の一例を示す図である。
 以下、発明を実施するための形態(以下、「実施の形態」とする)について説明する。なお、説明を以下の順序で行う。
 1.実施の形態
 2.変形例
 <1.実施の形態>
 [ビデオシステムの構成例]
 図1は、実施の形態としてのビデオシステム10の構成例を示している。このビデオシステムシステム10は、複数のカメラ装置、図示の例では3個のカメラ装置101-1~101-3と、カメラ装置101-1~101-3にそれぞれケーブル102-1~102-3を介して接続されているCCU(カメラコントロールユニット)103-1~103-3と、ビデオテープレコーダ104を有している。
 また、このビデオシステム10は、スイッチャ105と、サーバ106と、モニタ107と、モニタ108と、コンバータ109と、複数の波形モニタ、ここでは3個の波形モニタ(WFM:Wave Form Monitor)110-1~110-3を有している。
 CCU103(103-1~103-3)は、カメラ装置101(101-1~101-3)からケーブル102(102-1~102-3)を介して供給される映像信号を含む伝送用デジタル信号を生成して出力する。CCU103は、この伝送用デジタル信号に、映像信号に係るメタデータを含める。この実施の形態において、伝送用デジタル信号はSDI(Serial Digital Interface)フォーマットのシリアルデジタル信号(以下、適宜、「SDI信号」という)であり、メタデータを持つデータパケットがアンシラリ領域に挿入される。なお、図示の例において、“embe”は、SDI信号のアンシラリ領域にメタデータが挿入されることを示している。
 CCU103においてSDI信号のアンシラリ領域に挿入されるメタデータには、レンズ情報、ライブ用メタデータ、などがある。ここで、ライブ用メタデータは、ライブ映像制作の一連のワークフローにおいて用いられるメタデータであって、さらに詳細には、映像などのデータの記録、伝送に加え、リアルタイムのデータ取得や、確認、反映を必要とする用途で、各種機器の制御やアプリケーションの実行のために用いられるメタデータである。ライブ用メタデータには、カメラのペイント設定等をまとめたカメラ設定データ、ハイダイナミックレンジ(HDR)信号とスタンダードダイナミックレンジ(SDR)信号の相互関係を決定する設定をまとめたデータ、映像信号のダウンコンバートに必要な設定をまとめたデータ、カメラに関する様々な環境データをまとめたデータ、映像信号に付加する様々な識別情報をまとめたデータ、などが含まれる。
 「SDIフォーマット構造例」
 図2(a)は、「HD-SDI / 3G-SDI Level-B」のSDIフォーマット構造(以下、適宜、「レベルBのSDIフォーマット構造」という)の一例を示している。また、図2(b)は、「3G-SDI Level-A / 12G-SDI」のSDIフォーマット構造(以下、適宜、「レベルAのSDIフォーマット構造」という)の一例を示している。
 図2(a)に示すレベルBのSDIフォーマット構造例においては、第9ラインから第20ラインと、第571ラインから第583ラインがVANC(Vertical Ancillary)領域となっている。第9ライン、第571ライン、第572ラインに、レンズメタデータ(Lens Metadata)が重畳されている。第11ライン、第574ラインに、ARIB TR-B22で規定されている素材伝送補助データが重畳されている。
 第19ライン、第582ラインに、ARIB STD-B37で規定されているデジタル字幕データが重畳されている。第20ライン、第583ラインに、ARIB STD-B39で規定されている放送局間制御信号と、ARIB STD-B35で規定されているデータ放送トリガ信号が重畳されている。
 また、このレベルBのSDIフォーマット構造例においては、第14ライン、第15ライン、第16ラインに、種々のライブ用メタデータが重畳されている。「Camera Paint Metadata」は、カメラのペイント設定等をまとめたカメラ設定データを示している。「HDR SDR Relation Metadata」は、ハイダイナミックレンジ(HDR)信号とスタンダードダイナミックレンジ(SDR)信号の相互関係を決定する設定をまとめたデータを示している。「Down Conv Setting Metadata」は、映像信号のダウンコンバートに必要な設定をまとめたデータを示している。「Camera Trace Metadata」は、カメラに関する様々な環境データをまとめたデータを示している。「ID Group Metadata」は、映像信号に付加する様々な識別情報をまとめたデータを示している。
 なお、ライブ用メタデータが重畳されるラインは、第14ライン、第15ライン、第16ラインに限定されるものではなく、その他のラインに重畳されることも考えられる。また、重畳されるライブ用メタデータの種類は、図示の全てでない場合も考えられ、さらにはその他の種類のライブ用メタデータが重畳されることも考えられる。
 図2(b)に示すレベルAのSDIフォーマット構造例においては、第9ラインから第41ラインがVANC領域となっている。第9ラインに、レンズメタデータ(Lens Metadata)が重畳されている。第11ラインに、ARIB TR-B22で規定されている素材伝送補助データが重畳されている。なお、この素材伝送補助データは、例えば、図示のように、第32ラインや第40ラインにも重畳されることがある。
 第19ラインに、ARIB STD-B37で規定されているデジタル字幕データが重畳されている。第20ラインに、ARIB STD-B39で規定されている放送局間制御信号と、ARIB STD-B35で規定されているデータ放送トリガ信号が重畳されている。なお、この放送局間制御信号やデータ放送トリガ信号は、例えば、図示のように、第41ラインにも重畳されることがある。
 また、このレベルAのSDIフォーマット構造例においては、レベルBのSDIフォーマット構造例(図2(a)参照)と同様に、第14ライン、第15ライン、第16ラインに、種々のライブ用メタデータが重畳されている。
 「カメラ装置とCCUの詳細構成例」
 図3は、カメラ装置101とCCU103の詳細な構成例を示している。カメラ装置101は、ケーブル102を介して、CCU103に接続されている。カメラ装置101には、レンズ装置111が接続されている。レンズ装置111は、カメラ装置101の前部のレンズマウント部に取り付けられている。
 カメラ装置101は、カメラCPU112と、センサー部113と、カメラ信号処理部114と、ピックミースイッチ(Pick Me SW)115と、USB端子116を有している。また、CCU103は、CPU131と、ビデオ処理部132と、ビデオフォーマッタ133と、USB端子134を有している。
 カメラCPU112は、カメラ装置101の各部の動作を制御する。このカメラCPU112は、CCU103のCPU131との間で、必要な信号の通信を行う。例えば、カメラCPU112は、カメラ装置101のモデルネーム、シリアルナンバー、カメラナンバー等の情報を管理してり、これらの情報をケーブル102の通信ラインを通じて、CCU103のCPU131に送る。
 また、例えば、カメラCPU112は、USB端子116に装着される図示しないUSBメモリからカメラマンネーム、カメラポジション等の情報を取得し、これらの情報をケーブル102の通信ラインを通じて、CCU103のCPU131に送る。また、例えば、カメラCPU112は、カメラマンがグッドショット撮影時にピックミースイッチ(Pick Me SW)115を押圧操作したことを検出し、その検出信号をケーブル102の通信ラインを通じて、CCU103のCPU131に送る。
 センサー部113は、例えばHD、4Kあるいは8Kなどのイメージセンサを持ち、被写体に対応した撮像映像信号を出力する。上述のレンズ装置111により、イメージセンサの撮像面に、被写体が結像される。カメラ信号処理部114は、センサー部113から出力される撮像映像信号に対して、例えば、利得制御、ホワイトバランス調整、ガンマ補正等の処理を行い、カメラ装置101の出力としてのカメラ映像信号を出力し、ケーブル102のビデオラインを通じて、CCU103のビデオ処理部132に送る。
 CPU131は、CCU103の各部の動作を制御する。このCPU131は、カメラ装置101のカメラCPU112との間で、必要な信号の通信を行う。ビデオ処理部132は、カメラ装置101からケーブル102のビデオラインを通じて送られてくるカメラ映像信号に対して色補正等の処理を行い、処理後の映像信号を出力する。
 ビデオフォーマッタ133は、ビデオ処理部132から出力される映像信号を含む伝送用デジタル信号、ここではSDIフォーマットのシリアルデジタル信号を(SDI信号)を生成して、出力する。
 CPU131は、CCU103のモデルネーム、シリアルナンバー、システムネーム等の情報を管理しており、これらの情報と上述したようにカメラ装置101から送られてくる情報に基づいて、ビデオ処理部132から出力される映像信号に係るメタデータとして、映像信号に付加する様々な識別情報をまとめた「ID Group Metadata」のメタデータを生成する。ビデオフォーマッタ133は、SDI信号のアンシラリ領域に、「ID Group Metadata」のメタデータを挿入する。なお、説明は省略するが、ビデオフォーマッタ133は、SDI信号のアンシラリ領域に、その他の必要なメタデータ、例えば、レンズ情報、ライブ用メタデータ、などを挿入する。
 「データパケット(アンシラリパケット)の構成例」
 図4は、SDI信号のアンシラリ領域に挿入されるデータパケット(アンシラリパケット)の構成例を示している。このデータパケットは、パケットの始まりを示す第1ワードから第3ワードのアンシラリデータフラグ(ADF:Ancillary Data Flag)と、第4ワードのパケットのデータID(DID)と、第5ワードのパケットのセカンダリデータID(SDID)と、第6ワードのペイロードのワード数Nを示すデータカウント(Data Count)と、第7ワードおよび第8ワードのライブ用メタデータのデータ種類を示すナンバー情報(LPM(Live Production Metadata)Number)と、第9ワードの各種フラグ情報(LPM Flag)と、第10ワードから第Nワードのメタデータが載るメインデータワード(Main Data Word)と、第N+1ワードのチェックサム(Check Sum)により構成される。
 このデータパケットにおいて、アンシラリデータフラグ(ADF)、データID(DID)、セカンダリデータID(SDID)およびデータカウント(Data Count)はヘッダに含まれ、ナンバー情報(LPM Number)、各種フラグ情報(LPM Flag)およびメインデータ(Main Data Word)は、ペイロードに含まれる。ここで、Nの最大は255、つまりペイロードの最大ワード数は255ワードである。
 このデータパケットにおいて、各ワードはビット0からビット9の10ビットからなっている。アンシラリデータフラグ(ADF)は、「000 3FF 3FF h」の値を示す。このデータパケットの第4ワードから第Nワードの第8ビットは、それぞれのワードの第0ビットから第7ビットに対する偶数パリティ(Even parity)とされる。また、このデータパケットの第4ワードから第N+1ワードの第9ビットは、第8ビットの反転、つまり“not bit8”とされる。
 データID(DID)およびセカンダリデータID(SDID)がライブ用メタデータの分類を示す場合、ペイロードに、ナンバー情報(LPM Number)および各種フラグ情報(LPM Flag)が含まれる。この場合、データID(DID)およびセカンダリデータID(SDID)がライブ用メタデータの分類を示す場合は、例えば、「53 01 h」、「53 02 h」,「53 03 h」の値を示す。
 なお、データID(DID)およびセカンダリデータID(SDID)がライブ用メタデータの分類を示さない場合、ペイロードは、メインデータ(Main Data Word)のみを含むことになる。
 ナンバー情報(LPM Number)は、ライブ用メタデータの、データID(DID)およびセカンダリデータID(SDID)による分類内の細分類を示す。このようにナンバー情報とすることで、ライブ用メタデータをテーブルデータとして取り扱うことを可能としている。なお、LPM Number(2バイト)の上位8ビットは“Live Meta U”とされ、その下位8ビットは“Live Meta D”とされる。
 例えば、ライブ用メタデータがカメラのペイント設定等をまとめたカメラ設定データである場合、ナンバー情報(LPM Number)は「01 00 h」を示す。また、例えば、ライブ用メタデータがハイダイナミックレンジ(HDR)信号とスタンダードダイナミックレンジ(SDR)信号の相互関係を決定する設定をまとめたデータである場合、ナンバー情報(LPM Number)は「02 00 h」を示す。
 また、例えば、ライブ用メタデータが映像信号のダウンコンバートに必要な設定をまとめたデータである場合、ナンバー情報(LPM Number)は「03 00 h」を示す。また、例えば、ライブ用メタデータがカメラに関する様々な環境データをまとめたデータである場合、ナンバー情報(LPM Number)は「04 00 h」を示す。また、例えば、ライブ用メタデータが映像信号に付加する様々な識別情報をまとめたデータである場合、ナンバー情報(LPM Number)は「10 01/10 02/10 03/10 04 h」を示す。
 図5は、第9ワードの各種フラグ情報(LPM Flag)の内容の一例を示している。この各種フラグ情報(LPM Flag)は、メタデータの補助情報を構成している。第7ビットは、メタデータが履歴データであることを示す「history」のフラグである。例えば、“0”は履歴データでない、つまり有効な最新データであることを示し、“1”は履歴データであることを示す。
 メタデータのデータ内容に変更があり、新しいメタデータを多重するとき、元のメタデータを残す場合や、ライブ用メタデータとして価値がなくなったが履歴データとして残したい場合に、「history」フラグが立てられる、つまり“1”とされる。
 例えば、映像信号にピックミー信号(カメラマンから、ディレクターに対し、重要な映像が撮れていること伝える信号)などをライブ用メタデータとして多重する場合、リアルタイムでは意味があるが、一旦、記録されてから再生された場合には、ピックミーの意味はなくなる。しかし、再生映像信号とリンクすることで、重要な場面である可能性が付加されていることを示す情報として使うことができる。つまり、ピックミーが押された履歴データとして意味があるので、再生映像信号に重畳するメタデータは、「history」のフラグを立てて、区別することができる。
 第6ビットは、メタデータが、即時性(緊急性)を要求するメタデータであることを示す「Instancy」のフラグである。例えば、“0”は即時性を要求するメタデータでないことを示し、“1”は即時性を要求するメタデータであることを示す。重要で、かつ即時性を要求するメタデータである場合、この「Instancy」のフラグが立てられる、つまり“1”とされる。
 この「Instancy」のフラグは、後段に対し、メタデータの処理の即時性を要求する(希望する)ものであるが、後段で即時処理されることを保証するものではない。つまり、後段(受信側)での処理は、後段側の都合で決められるので、前段(送信側)で決定できない。
 上述したピックミーなどでは、ピックミーの意味が決定的瞬間であることが多く、即時性を要求することが多いので、「Instancy」のフラグが立てられる。なお、後述するように、受信側の回路構成では、この「Instancy」のフラグ情報をハードウェアで検出し、CPUなどに割り込みをかけることなどが可能である。
 第5ビットは、メタデータが、単発のメタデータであることを示す「Single」のフラグである。例えば、“0”は単発のメタデータでないことを示し、“1”は単発のメタデータであることを示す。
 通常、メタデータは、毎フレームで多重されるが、単発のメタデータを送信した場合、中継や後段での取りこぼしが起きる可能性がある。これを避けるために、メタデータが重要で単発である(貴重である)ことを示す場合、「Single」のフラグが立てられる、つまり“1”とされる。
 また、毎フレーム連続して送信されているメタデータであっても、データ内容に変化があり、その変化の瞬間のデータ内容に関して後段で取りこぼしが起きて欲しくない場合、「Single」のフラグを立てて、単発のメタデータとして扱うことができる。
 この「Single」のフラグは、後段に対し、メタデータの取り込み処理の確実性を要求する(希望する)ものであるが、後段で取りこぼしが起きないことを保証するものではない。つまり、後段(受信側)での処理は、後段側の都合で決められるので、前段(送信側)で決定できない。
 第1ビットおよび第0ビットは、メタデータ(テーブルデータ)のサイズ情報を示すフラグである。このサイズ情報は、メタデータのサイズを、L(Large),M(Middle),S(Small)で分類する情報である。例えば、“00”はL(Large)、つまり最大252バイト(max 252 byte)であることを示し、“01”はM(Middle)、つまり最大119バイト(max 119 byte)であることを示し、“10”はS(Small)、つまり最大55バイト(max 55 byte)であることを示す。
 このサイズ情報の目的は、受信側で必要なメモリ領域を削減できる可能性を持たせることにある。データパケット(アンシラリパケット)のペイロードの最大バイト数は255バイトであり、多数のメタデータを扱う必要がある場合、通常は、それぞれのメタデータに対して(255+α)バイトのメモリ領域が必要となる。しかし、メタデータ(テーブルデータ)にサイズ情報が付加されていることで、サイズの小さなメタデータを扱う場合、受信側ではサイズの小さなメモリ領域を割り当てることが可能となり、受信側で用意する全体のメモリ領域を削減できる可能性を持たせることができる。また、この場合、受信側と同様に、送信側で用意する全体のメモリ領域も削減できる可能性を持たせることができる。
 図1に戻って、ビデオテープレコーダ104は、再生時に、映像信号を含むSDI信号を出力する。このSDI信号にも、上述したCCU103-1~103-3から出力されるSDI信号と同様に、それに含まれる映像信号に係るメタデータを含める。
 スイッチャ105は、CCU103-1~103-3やビデオテープレコーダ104から出力されるSDI信号を入力する。スイッチャ105は、モニタ107、モニタ108に画像表示用のSDI信号を出力し、また、オンエア用のSDI信号を出力し、波形モニタ110-1~110-3に所定のSDI信号を出力する。
 また、スイッチャ105は、コンバータ109に所定のSDI信号を出力する。コンバータ109に入力されたSDI信号はコンバート処理を経たのちに、再度スイッチャ105の入力となる。コンバータ109では、入力時にSDI信号のアンシラリ領域からメタデータの抽出が行われ、出力時にSDI信号のアンシラリ領域に再度メタデータを挿入することが行われる。なお、図示の例において、“get”はSDI信号のアンシラリ領域からメタデータが抽出されることを示し、“embe”は、SDI信号のアンシラリ領域にメタデータが挿入されることを示している。
 また、スイッチャ105は、サーバ106に所定のSDI信号を出力する。また、サーバ106で再生されたSDI信号はスイッチャ105の入力となる。サーバ106では、入力時にSDI信号のアンシラリ領域からメタデータの抽出が行われ、出力時にSDI信号のアンシラリ領域にメタデータを挿入することが行われる。なお、図示の例において、“get”はSDI信号のアンシラリ領域からメタデータが抽出されることを示し、“embe”は、SDI信号のアンシラリ領域にメタデータが挿入されることを示している。
 スイッチャ105は、ソフトウェアとしてのCPU151と、ルータ152と、ビデオプロセッサ153を有している。CPU151は、スイッチャ105の各部の動作を制御する。CCU103-1~103-3やビデオテープレコーダ104からスイッチャ105に入力されるSDI信号はルータ152に入力される。また、コンバータ109やサーバ106からスイッチャ105に入力されるSDI信号はルータに入力される。
 また、ルータ152から出力される所定のSDI信号はビデオプロセッサ153に入力され、このビデオプロセッサ153で処理された得られたSDI信号はルータ152に入力される。このようにビデオプロセッサ153から出力されるSDI信号には、そのアンシラリ領域に識別情報グループを挿入することが行われる。なお、図示の例において、“embe”は、SDI信号のアンシラリ領域にメタデータが挿入されることを示している。
 ルータ152に入力される各SDIのアンシラリ領域からメタデータが抽出されてレジスタに保持され、そのメタデータはCPU151により読み出される。CPU151は、各SDI信号が持つ識別情報としてのメタデータに基づいて、ルータ152に入力される各SDI信号の出力先を判別し、その判別結果に基づいてルータ152を制御する。これにより、ルータ152の各出力部には、適切なSDI信号が出力される状態となる。
 この場合、CPU151は、例えば、ユーザ操作によって予め設定された識別情報と出力先との対応テーブルに基づいて、各SDI信号の出力先を判別して、ルータ152を制御する。例えば、図示の例では、ビデオプロセッサ153にSDI信号を供給するためのルータ152の出力部P1,P2,P3と「VTR 1」、「CAMERA 1」、「CAMERA 2」の識別情報を対応づける対応テーブルが設定されている。そのため、CPU151は、ルータ152の出力部P1,P2,P3に、それぞれビデオテープレコーダ104からのSDI信号、CCU103-2からのSDI信号、CCU103-4からのSDI信号が出力されるように、ルータ152のルーティングを制御する。
 また、例えば、対応テーブルについての説明は省略するが、CPU151は、波形モニタ110-1,110-2,110-3が接続されるルータ152の出力部に、それぞれ、カメラNoの識別情報に基づいて、CCU103-1からのSDI信号、CCU103-2からのSDI信号、CCU103-3からのSDI信号が出力されるように、ルータ152を制御する。
 また、例えば、対応テーブルについての説明は省略するが、CPU151は、モニタ108が接続されるルータ152の出力部に、ピックミー(Pick Me)の識別情報を持っていたSDI信号が出力されるように、ルータ152を制御する。これにより、モニタ108には、カメラマンがピックミースイッチ(Pick Me SW)115を押圧操作したカメラ装置101の撮影画像が表示される状態となる。
 また、CPU151は、図示しないストレージが接続されるルータ152の出力部に、ピックミー(Pick Me)の識別情報を持っていたSDI信号が出力されるように、ルータ152を制御することもできる。これにより、ストレージには、カメラマンがピックミースイッチ(Pick Me SW)115を押圧操作したカメラ装置101の撮影画像が記録されていく。
 また、例えば、対応テーブルについての説明は省略するが、CPU151は、モニタ107が接続されるルータ152の出力部に、役割名(例えば、出力部(P1、P2、P3)を示す識別情報に基づいて、ビデオプロセッサ153で得られたSDI信号が出力されるように、ルータ152を制御する。これにより、モニタ107には、ビデオプロセッサ153で得られたSDI信号に基づく処理画像、図示の例ではピクチャインピクチャ画像が表示される状態となる。
 また、例えば、対応テーブルについての説明は省略するが、CPU151は、オンエア用のSDI信号を出力すべきルータ152の出力部に、ビデオプロセッサ153で得られたSDI信号が出力されるように、ルータ152を制御する。これにより、ビデオプロセッサ153で得られたSDI信号がオンエア用のSDI信号として出力される状態となる。
 スイッチャ105において、ルータ152に入力されるSDI信号のアンシラリ領域からメタデータを抽出することは、ハードウェアによる入力部(Input)161で行われる。また、ルータ152から出力されるSDI信号のアンシラリ領域にメタデータを挿入することは、ハードウェアによる出力部(Output)162で行われる。これら入力部(Input)161および出力部(Output)162の詳細構成については、後述する。
 図6を参照して、メタデータの補助情報として「Single」のフラグが立っている場合のスイッチャ105の動作について簡単に説明する。各チャネルの入力部(Input)161では、毎フレーム送られてくるメタデータを抽出してレジスタに格納する。CPU151は、各入力部(Input)161においてレジスタに格納されたメタデータを読み出す。各入力部(Input)161におけるハードウェアによるレジスタ領域は有限で、通常は、毎フレームリフレッシュされて、次のフレームのメタデータによって上書きされる構造が一般的である。
 スイッチャ105のように多チャネル入力機器において、毎フレーム、全てのメタデータをCPU151で取得するのが大変な場合、CPU151からセレクタ171にスキャン制御信号S1を送り、それに伴ってセレクタ171から各入力部(Input)161に順次読み出し制御信号を送って、各入力部(Input)161をポーリングでスキャンし、CPU151で順次メタデータを取得する場合がある。
 また、CPU151のタイミングで各入力部(Input)161からメタデータを順次読み出す場合、それぞれの入力部(Input)161の読み出し間隔がフレームレートよりも長い場合には、毎フレームでのメタデータ取得を、完全には、行うことができない。そのようなケースにおいて、一回限りのメタデータを送った場合に、CPU151からのメタデータの取得タイミングに合わなければ、その一回限りのメタデータは上書きされて、消えてしまう。
 そこで、取りこぼしをして欲しくないメタデータは、「Single」のフラグが立てられて送信される。この場合、入力部(Input)161のハードウェアにて、「Single」のフラグの検出機能を持たせ、「Single」のフラグが立っている場合には、メタデータを自動的に上書きされないレジスタ領域に格納される。このレジスタ領域は、CPU151からのデータ読み出しを行うことでリセットされ、空のレジスタ領域として、再使用できる状態になる。
 図7を参照して、メタデータの補助情報として「Instancy」のフラグが立っている場合のスイッチャの動作について簡単に説明する。各チャネルの入力部(Input)161では、毎フレーム送られてくるメタデータを抽出してレジスタに格納する。CPU151は、各入力部(Input)161においてレジスタに格納されたメタデータを読み出す。各入力部(Input)161におけるハードウェアによるレジスタ領域は有限で、通常は、毎フレームリフレッシュされて、次のフレームのメタデータによって上書きされる構造が一般的である。
 スイッチャ105のように多チャネル入力機器において、毎フレーム、全てのメタデータをCPU151で取得するのが大変な場合、CPU151からセレクタ171にスキャン制御信号S1を送り、それに伴ってセレクタ171から各入力部(Input)161に順次読み出し制御信号を送って、各入力部(Input)161をポーリングでスキャンし、CPU151で順次メタデータを取得する場合がある。そのようなケースにおいて、時間的に急ぎのメタデータを送った場合に、データの取得に遅れが出る場合がある。
 そこで、時間的に急ぎのメタデータは、「Instancy」のフラグが立てられて送信される。この場合、入力部(Input)161のハードウェアにて、「Instancy」のフラグの検出機能を持たせ、「Instancy」のフラグが立っている場合には、メタデータを自動的に上書きされないレジスタ領域に格納される。また、この場合には、「Instancy」のフラグの検出信号S3が割り込み回路172に送られ、その割り込み回路172からCPU151に割り込み信号S4と割り込みチャネル番号S5が送られる。これにより、CPU151は、割り込みが掛かったチャンネルのメタデータを優先して、取得することが可能になる。
 「入力部(Input)の構成例」
 図8(a)は、SDI信号の入力部の構成概要の一例を示している。入力SDI信号は、メタデータ抽出部181を通じて、映像処理回路182に供給される。メタデータ抽出部181は、SDI信号のVANC領域から全てのデータパケット(アンシラリパケット)を抽出し、そのデータパケット内容(ヘッダ情報およびメタデータ)をメタデータレジスタ183に書き込む。そして、CPU184は、メタデータレジスタ183に書き込まれたデータパケット内容を読み出して処理する。
 図8(a)に示す構成の場合、VANC領域に載っている全てのデータパケットを抽出して、そのデータパケット内容をメタデータレジスタ183に書き込むものである。そのため、VANC領域に載るデータパケットが多くなる場合には、メタデータレジスタ183として大容量のものが必要となり、また、CPU184の処理負荷も大きくなる。
 図8(b)は、SDI信号の入力部の構成概要の他の一例を示している。入力SDI信号は、メタデータ抽出部191を通じて、映像処理回路192に供給される。CPU193は、メタデータ指定部194に、必要とするメタデータを指定するための指定情報(ライン情報、ヘッダ情報)を設定する。メタデータ抽出部191は、SDI信号のVANC領域から、メタデータ指定部194の指定情報で指定されたデータパケット(アンシラリパケット)を抽出し、そのデータパケット内容(ヘッダ情報およびメタデータ)をメタデータレジスタ195に書き込む。そして、CPU193は、メタデータレジスタ195に書き込まれたデータパケット内容を読み出して処理する。
 図8(b)に示す構成の場合、VANC領域に載っている全てのデータパケットではなく、CPU193が必要であるとして指定したデータパケットを抽出して、そのデータパケット内容をメタデータレジスタ195に書き込むものである。そのため、VANC領域に載るデータパケットが多くなる場合にあっても、メタデータレジスタ195の容量は小さくて済み、また、CPU193の処理負荷も軽減される。
 図9は、入力部(Input)161(図1参照)の構成例を示している。この構成例は、図8(b)に示す構成に基づいたものである。この構成例は、例えば、PLD(Programmable Logic Device)により実装される。
 入力部(Input)161は、VANC抽出部201と、遅延部202と、コントローラ203と、CRC(Cyclic Redundancy Check)部204と、ヘッダ情報抽出部205と、IDレジスタ206と、取扱いIDレジスタ208と、指定判定部207と、履歴化対象判定部209と、パケットレジスタ211,212,213を有している。
 VANC抽出部201は、入力SDI信号からVANC領域の信号を抽出する。遅延部202は、VANC抽出部201から出力されるSDI信号(入力SDI信号と同じ)に遅延を与えてコントローラ203に入力する。この場合、SDI信号には、タイミング合わせのために、メタデータの指定判定等に要する時間が遅延時間として付与される。
 ヘッダ情報抽出部205は、VANC抽出部201で抽出されたVANC領域の信号から、VANC領域に挿入されている全てのデータパケット(アンシラリパケット)(図4参照)を検出し、それに含まれるヘッダ情報(DID,SDID,Data Count,LPM Number,LPM Flag)を抽出して、IDレジスタ206に書き込む。
 この実施の形態において、IDレジスタ206は、32個分のデータパケットのヘッダ情報を書き込むことが可能な領域を持っている。この場合、フレーム毎に、IDレジスタ206には、最大32個分のデータパケットのヘッダ情報を書き込むことができる。ここで、1個分のデータパケットのヘッダ情報のレジスタ領域として、6(=3+3)バイトが用意されており、図10(a)に示すような情報が書き込まれる。
 すなわち、バイトのレジスタ領域には、1バイトのデータID(DID)、1バイトのセカンダリデータID(SDID)、1バイトのデータカウント(Data Count)、2バイトのナンバー情報(LPM Number)、1バイトの各種フラグ情報(LPM Flag)が書き込まれる。
 CPU151は、このIDレジスタ206に書き込まれた各データパケットのヘッダ情報を読み出して処理できる。これにより、CPU151は、VANC領域のどのラインに如何なる種別のメタデータが重畳されているかの一覧を確認できる。図示していないが、CPU151は、その一覧を表示部に表示し、ユーザに提示することも可能である。
 図9に戻って、取扱いIDレジスタ207には、VANC領域に重畳されている種々のメタデータから、どのメタデータを抽出するかを示す指定情報が設定される。この設定は、CPU151によって行われる。
 この実施の形態において、取扱いIDレジスタ207は、8個分の指定情報を書き込むことが可能な領域を持っている。ここで、1個分の指定情報のレジスタ領域として、8(=3+2+3)バイトが用意されており、図10(b)に示すような情報が書き込まれる。
 すなわち、8バイトのレジスタ領域には、1バイトのコンディションフラグ (Condition Flag) 情報と、2バイトのラインナンバー(Line-No.)と、1バイトのデータID(DID)と、1バイトのセカンダリデータID(SDID)と、2バイトのナンバー情報(LPM Number)と、1バイトの各種フラグ情報(LPM Flag)をそれぞれ書き込むための領域が含まれている。
 図10(c)は、コンディションフラグ (Condition Flag)情報の内容の一例を示している。第6ビットは、第5ビット以下で指定されるメタデータのみ扱うか、あるいは第5ビット以下で指定されるメタデータのみ除外するかを示すフラグである。例えば、“0”は扱うことを示し、“1”は除外することを示す。
 第5ビットは、ラインナンバー(Line-No.)の指定は無効か、あるいは有効かを示す。例えば、“0”は無効を示し、“1”は有効を示す。無効である場合には、全てのラインが対象となる。第4ビットは、データID(DID)およびセカンダリデータID(SDID)の指定は無効か、あるいは有効かを示す。例えば、“0”は無効を示し、“1”は有効を示す。第3ビットは、ナンバー情報(LPM Number)の指定は無効か、あるいは有効かを示す。例えば、“0”は無効を示し、“1”は有効を示す。
 第2ビットは、各種フラグ情報(LPM Flag)における「history」の指定は無効か、あるいは有効かを示す。例えば、“0”は無効を示し、“1”は有効を示す。第1ビットは、各種フラグ情報(LPM Flag)における「Instancy」の指定は無効か、あるいは有効かを示す。例えば、“0”は無効を示し、“1”は有効を示す。第0ビットは、各種フラグ情報(LPM Flag)における「Single」の指定は無効か、あるいは有効かを示す。例えば、“0”は無効を示し、“1”は有効を示す。
 また、図9に戻って、指定判定部208は、ヘッダ情報抽出部205で順次抽出されたヘッダ情報と、そのヘッダ情報を持つデータパケットが挿入されているライン情報に基づき、ヘッダ情報抽出部205で抽出されたヘッダ情報を持つデータパケットに含まれるメタデータが、取扱いIDレジスタ207に設定された指定情報を満たすか否か判定する。
 指定判定部208は、指定情報を満たすと判定した場合、そのデータパケットに含まれるヘッダ情報およびメタデータをレジスタに書き込むように、コントローラ203に書き込み制御信号を送る。また、指定判定部208は、コントローラ203に書き込み制御信号を送る場合、そのヘッダ情報においてLPM Flagの第1ビットおよび第0ビットで示されるメタデータ(テーブルデータ)のサイズ情報(L,M,Sの情報)もコントローラ203に送る。さらに、LPM Flagの第6ビットの「Instancy」のフラグが立っていた場合や、第5ビットの「Single」のフラグが立っていた場合、その旨を示す情報もコントローラ203に送る。
 パケットレジスタ(Packet Register (L))211は、上述したように指定情報を満たすメタデータおよびそれに対応するヘッダ情報を書き込むためのレジスタである。このパケットレジスタ211は、この実施の形態においては、8個分のメタデータを書き込むことを可能とするために、8つのレジスタ領域を持っており、1つのレジスタ領域として261バイトが用意されている。つまり、このパケットレジスタ211は、LPM Flagの第1ビットおよび第0ビットで示されるメタデータ(テーブルデータ)のサイズ情報がL(Large)、つまり最大252バイト(max 252 byte)である場合におけるメタデータを書き込むために使用される。CPU151は、パケットレジスタ211に書き込まれたメタデータを読み出して処理できる。
 パケットレジスタ(Packet Register (M))212も、上述したように指定情報を満たすメタデータおよびそれに対応するヘッダ情報を書き込むためのレジスタである。このパケットレジスタ212は、この実施の形態においては、8個分のメタデータを書き込むことを可能とするため、6つのレジスタ領域を持っており、1つのレジスタ領域として128バイトが用意されている。つまり、このパケットレジスタ212は、LPM Flagの第1ビットおよび第0ビットで示されるメタデータ(テーブルデータ)のサイズ情報がM(Middle)、つまり最大119バイト(max 119 byte)である場合におけるメタデータを書き込むために使用される。CPU151は、パケットレジスタ212に書き込まれたメタデータを読み出して処理できる。
 パケットレジスタ(Packet Register (S))213も、上述したように指定情報を満たすメタデータおよびそれに対応するヘッダ情報を書き込むためのレジスタである。このパケットレジスタ213は、この実施の形態においては、6個分のメタデータを書き込むことを可能とするために、8つのレジスタ領域を持っており、1つのレジスタ領域として64バイトが用意されている。つまり、このパケットレジスタ213は、LPM Flagの第1ビットおよび第0ビットで示されるメタデータ(テーブルデータ)のサイズ情報がS(Small)、つまり最大55バイト(max 55 byte)である場合におけるメタデータを書き込むために使用される。CPU151は、パケットレジスタ213に書き込まれたメタデータを読み出して処理できる。
 パケットレジスタ211,212,213のそれぞれにおいて、所定個数分、例えば2個分のレジスタ領域は、上書きを禁止することができないレジスタ領域とされる。「Instancy」や「Single」のフラグが立っていた場合のユーザデータは、上書きを禁止することができるレジスタ領域に書き込まれる。
 この実施の形態において、パケットレジスタ211,212,213のそれぞれにおける1つのレジスタ領域には、図11(a)に示すような情報が書き込まれる。すなわち、1バイトのステータスフラグ(Status Flag)情報と、2バイトのラインナンバー(Line-No.)と、1バイトのデータID(DID)と、1バイトのセカンダリデータID(SDID)と、1バイトのデータカウント(Data Count)と、2バイトのナンバー情報(LPM Number)と、1バイトの各種フラグ情報(LPM Flag)と、所定バイト数のメインデータ(メタデータ)が書き込まれる。
 図11(b)は、ステータスフラグ(Status Flag)情報の内容の一例を示している。第7ビットは、各種フラグ情報(LPM Flag)に含まれる「history」のフラグの状態を示すフラグである。例えば、“0”は、「history」のフラグが履歴データでないことを示す“0”であることを示し、“1”は、「history」のフラグが履歴データであることを示す“1”であることを示す。
 第6ビットは、各種フラグ情報(LPM Flag)に含まれる「Instancy」のフラグの状態を示すフラグである。例えば、“0”は、「Instancy」のフラグが即時性を要求するメタデータでないことを示す“0”であることを示し、“1”は、「Instancy」のフラグが即時性を要求するメタデータであることを示す“1”であることを示す。
 第5ビットは、各種フラグ情報(LPM Flag)に含まれる「Single」のフラグの状態を示すフラグである。例えば、“0”は、「Single」のフラグが単発のメタデータでないことを示す“0”であることを示し、“1”は、「Single」のフラグが単発のメタデータであることを示す“1”であることを示す。第4ビットは、データパケット(アンシラリパケット)の第N+1バイトのチェックサム(Check Sum)(図4参照)が「OK」であるか「NG」であるかを示すフラグである。例えば、“0”は、「OK」であることを示し、“1”は、「NG」であることを示す。
 第0ビットは、上書き(Overwrite)を承認するか否かを示す。例えば、“0”は、承認することを示し、“1”は、承認しないことを示す。例えば、「Instancy」や「Single」のフラグが立っているメタデータが書き込まれるとき、この第0ビットは“1”とされて上書きが非承認とされるが、その後当該メタデータがCPU151により読み出されるとき、この第0ビットは“0”とされて上書きが承認とされる。
 また、図9に戻って、コントローラ203は、指定判定部208から送られてくる書き込み制御信号に基づいて、遅延部202でタイミング調整(遅延)されたSDI信号から、抽出指定されたメタデータを含むデータパケットを検出し、それに含まれるヘッダ情報(DID,SDID,Data Count,LPM Number,LPM Flag)とメタデータを抽出する。
 そして、コントローラ203は、指定判定部208から送られてくるメタデータ(テーブルデータ)のサイズ情報に応じて、抽出されたヘッダ情報およびメタデータをパケットレジスタ211~213のいずれかに書き込む。この場合、サイズ情報がL(Large)である場合にはパケットレジスタ211に書き込まれ、サイズ情報がM(Middle)である場合にはパケットレジスタ212に書き込まれ、サイズ情報がS(Small)である場合にはパケットレジスタ213に書き込まれる。
 また、コントローラ203は、指定判定部208から送られてくる「Instancy」や「Single」のフラグが立っている旨の情報に基づいて、「Instancy」や「Single」のフラグが立っているメタデータやそれに係るヘッダ情報をパケットレジスタ211~213の上書きを禁止することができるレジスタ領域に書き込む。
 このように、パケットレジスタ211~213には、指定判定部208から送られてくる書き込み制御信号に基づいて、抽出すべきと指定されたメタデータがSDI信号のVANC領域から選択的に抽出されて書き込まれる。これにより、パケットレジスタ全体の容量は小さくでき、また、CPU151の処理負荷も軽減できる。
 なお、抽出すべきメタデータの指定情報は、上述したように、取扱いIDレジスタ207に設定される。「Instancy」や「Single」のフラグが立っているメタデータを除くメタデータは、複数フレームに渡って同一の情報が重畳されることが通例である。そのため、取扱いIDレジスタ207に設定する指定情報を変更しながら繰り返しメタデータを抽出することで、パケットレジスタ全体の容量が少ない状態で、つまり少ないハードウェアリソースで、全てのメタデータを抽出することが可能となる。
 また、このように、LPM Flagにメタデータのサイズ情報(第1ビットおよび第0ビット)が含まれ、抽出されたヘッダ情報およびメタデータは、このサイズ情報に基づいて、パケットレジスタ211~213のいずれかに選択的に書き込まれる。これにより、パケットレジスタの全ての1個分のレジスタ領域を261バイトとすることが必要なく、従ってパケットレジスタ全体の容量を抑制できる。換言すると、パケットレジスタ全体の容量を抑制しながら、パケットレジスタに書き込み保持し得るメタデータの個数を増やすことが可能となる。
 また、コントローラ203は、パケットレジスタ211~213のレジスタ領域に、抽出されたヘッダ情報やメタデータが書き込むとき、ステータスフラグ(Status Flag)情報やラインナンバー(Line-No.)を付加して書き込む(図11(a)参照)。ここで、「Instancy」や「Single」のフラグが立っているとき、コントローラ203は、ステータスフラグ(Status Flag)情報(図11(b)参照)の第0ビットを“1”として当該レジスタ領域への上書きを非承認とする。その後当該メタデータがCPU151により読み出されたとき、この第0ビットは“0”とされて当該レジスタ領域への上書きが承認される。
 このように「Instancy」や「Single」のフラグが立っている場合、抽出されたヘッダ情報およびメタデータがパケットレジスタ211~213のレジスタ領域に書き込まれるとき、当該レジスタ領域はCPU151により読み出しがされるまで上書きが未承認とされる。そのため、CPU151は、「Instancy」のフラグが立っている即時性(緊急性)を要求するメタデータ、あるいは「Single」のフラグが立っている単発のメタデータを、抜け漏れなく取得することが可能となる。
 ここで、「Instancy」が立っている場合、コントローラ203は、割り込み回路172(図7参照)に「Instancy」のフラグの検出信号S3を送る。これにより、その割り込み回路172からCPU151に割り込み信号S4と割り込みチャネル番号S5が送られ、CPU151は、割り込みが掛かったチャンネルのメタデータを優先して取得することが可能になる。
 なお、「Instancy」や「Single」のフラグが立っているメタデータをソフトウェア処理のみで監視する場合、全てのフレームの全てのメタデータをリアルタイムで監視する必要がある。しかし、入力系統が多い機器の場合は、全ての入力をリアルタイムで監視し続けることは困難である。しかし、上述したように、コントローラ203において、抽出されたヘッダ情報およびメタデータをパケットレジスタ211~213のレジスタ領域に書き込み、ソフトウェア(CPU151)が任意のタイミング(例えばポーリング)で読み出し可能としたことで、抜け漏れなく取得することが容易となる。
 また、図9に戻って、履歴化対象判定部209は、ヘッダ情報抽出部205で順次抽出されたヘッダ情報、例えばナンバー情報(LPM Number)に基づいて、そのヘッダ情報を持つデータパケットに含まれるメタデータが履歴化対象であるか否かを判定する。なお、履歴化するLPM Numberの指定は、例えば、上位8ビット“Live Meta U”のみ、あるいは上位8ビット“Live Meta U”および下位8ビット“Live Meta D”から、選択可能とされる。
 例えば、LPM Numberが、ピックミー信号などのライブ用メタデータであることを示す場合には、履歴化対象であると判定される。また、例えば、ナンバー情報が、映像信号がどのソース(カメラ、サーバなど)から出力されたかを示すメタデータであることを示す場合には、履歴化対象であると判定される。
 履歴化対象判定部209は、履歴化対象であると判定した場合、そのメタデータを持つデータパケットのLPM Flagの第7ビットの「history」のフラグをたてる、つまり“1”に変更するように、コントローラ203に履歴化制御信号を送る。
 コントローラ203は、この履歴化制御信号に基づいて、遅延部202でタイミング調整(遅延)されたSDI信号に対し、履歴化対象であると判定されたメタデータを持つデータパケットのLPM Flagの第7ビットの「history」のフラグを立てる履歴化処理を行って、当該メタデータが履歴データであることを示すようにする。これにより、入力SDI信号のVANC領域に重畳されている履歴化対象のメタデータは、ソフトウェア処理を介在させることなく、履歴データに変更することが可能である。
 なお、履歴化をソフトウェアによる処理のみで行う場合は、以下の制御をフレーム毎にフレーム内で完結するように行う必要がある。
 1.SDI信号に重畳されているメタデータを観測し、履歴化対象メタデータが含まれていないか確認する。
 2.履歴化対象メタデータが含まれていた場合、重畳されているライン/サイクルを確認し、「history」のフラグのみを書き換えたデータパケット情報を用意する。
 3.用意したデータパケット情報を、SDI信号の、履歴化対象メタデータが含まれていたデータパケットと同じ位置に上書きする。
 入力系統数が多い機器の場合、全ての入力SDI信号について、リアルタイムで監視し続けることは困難である。
 この実施の形態において、コントローラ203は、上述したように、遅延部202でタイミング調整(遅延)されたSDI信号に対して履歴化処理を行う他に、このSDI信号に対してメタデータが重畳されているラインのうち、指定されたラインについて、マスク処理を行うことも可能となっている。このマスク処理においては、該当ラインのデータが固定値に置き換えられる。また、マスク処理を行う場合には、CPU151により、機能のオン設定と、ラインナンバーの指定が行われる。
 CRC(Cyclic Redundancy Check)部204は、コントローラ203で履歴化処理やマスク処理が施された後のSDI信号に対し、CRCを再計算後のものに置き換える処理を行って、出力SDI信号とする。
 「出力部の構成例」
 図12は、出力部(Output)162(図1参照)の構成例を示している。この構成例は、例えば、PLD(Programmable Logic Device)により実装される。
 出力部162は、VANC抽出部301と、遅延部302と、メタデータ重畳部303と、CRC(Cyclic Redundancy Check)部304と、終端検出部305と、コントローラ306と、パケットレジスタ307,308,309を有している。
 VANC抽出部301は、入力SDI信号からVANC領域の信号を抽出する。遅延部302は、VANC抽出部301から出力されるSDI信号(入力SDI信号と同じ)に遅延を与えてメタデータ重畳部303に入力する。この場合、SDI信号には、後述するコントローラ306からメタデータ重畳部303に送られるデータパケットとのタイミング合わせのために、所定の遅延与えられる。
 終端検出部305は、VANC抽出部301で抽出されたVANC領域の各ラインで、重畳されているデータパケットを抽出して、そのラインに重畳されている最後のデータパケットの終端を検出する。データパケットの重畳がされていないラインにおいては、そのラインの先頭位置が、そのラインに重畳されている最後のデータパケットの終端とみなされる。
 この場合、あるデータパケットの終端に必ずしも連続しないで次のデータパケットが重畳されていることも想定される。そのため、終端検出部302は、あるデータパケットの終端が検出され後に、所定数のサイクル、例えば5サイクルが経過するまでに次のデータパケットが検出されなかった場合、あるデータパケットの終端を最後のデータパケットの終端として確定する。ここで、次のデータパケットが検出されたか否かは、データパケットの先頭に位置する3ワードのADF(Ancillary Data Flag)(図4参照)が検出されたか否かによる。ここで、1サイクルは、1ワード(10ビット)期間に対応する。
 終端検出部305は、各ラインで、終端検出の確定タイミングで、コントローラ306に、メタデータ重畳制御信号を送る。この場合、終端検出部305は、メタデータ重畳制御信号に、ラインナンバー(Line-No.)の情報を付加して送る。
 パケットレジスタ(Packet Register (L))307は、新たに重畳すべきメタデータパケットの情報(ヘッダ情報およびメタデータを含む)を保持するレジスタである。このパケットレジスタ307は、この実施の形態においては、4個分のメタデータパケットの情報を保持可能とするために、4つのレジスタ領域を持っている。この場合、1つのレジスタ領域として、261バイトが用意されている。
 このパケットレジスタ307は、LPM Flagの第1ビットおよび第0ビットで示されるメタデータ(テーブルデータ)のサイズ情報がL(Large)、つまり最大252バイト(max 252 byte)である場合における、新たなメタデータを持つデータパケットの情報を保持するために使用される。CPU151は、パケットレジスタ307にアクセスして、新たに重畳すべきメタデータパケットの情報を、当該パケットレジスタ307に設定できる。
 パケットレジスタ(Packet Register (M))308も、新たに重畳すべきメタデータパケットの情報(ヘッダ情報およびメタデータを含む)を保持するレジスタである。このパケットレジスタ308は、この実施の形態においては、4個分のメタデータパケットの情報を保持可能とするために、4つのレジスタ領域を持っている。この場合、1つのレジスタ領域として、128バイトが用意されている。
 このパケットレジスタ308は、LPM Flagの第1ビットおよび第0ビットで示されるメタデータ(テーブルデータ)のサイズ情報がM(Middle)、つまり最大119バイト(max 119
 byte)である場合における、新たなメタデータを持つデータパケットの情報を保持するために使用される。CPU151は、パケットレジスタ308にアクセスして、新たに重畳すべきメタデータパケットの情報を、当該パケットレジスタ308に設定できる。
 パケットレジスタ(Packet Register (S))309も、新たに重畳すべきメタデータパケットの情報(ヘッダ情報およびメタデータを含む)を保持するレジスタである。このパケットレジスタ309は、この実施の形態においては、4個分のメタデータパケットの情報を保持可能とするために、4つのレジスタ領域を持っている。この場合、1つのレジスタ領域として、64バイトが用意されている。
 このパケットレジスタ309は、LPM Flagの第1ビットおよび第0ビットで示されるメタデータ(テーブルデータ)のサイズ情報がS(Small)、つまり最大55バイト(max 55
 byte)である場合における、新たなメタデータを持つデータパケットの情報を保持するために使用される。CPU151は、パケットレジスタ309にアクセスして、新たに重畳すべきメタデータパケットの情報を、当該パケットレジスタ309に設定できる。
 この実施の形態において、パケットレジスタ307,308,309のそれぞれにおける1つのレジスタ領域には、図13(a)に示すような情報が書き込まれる。すなわち、1バイトのオーダーフラグ(Order Flag)情報と、2バイトのラインナンバー(Line-No.)と、1バイトのデータID(DID)と、1バイトのセカンダリデータID(SDID)と、2バイトのナンバー情報(LPM Number)と、1バイトの各種フラグ情報(LPM Flag)と、所定バイト数のメインデータ(メタデータ)が書き込まれる。ここで、ラインナンバー(Line-No.)は、例えば、12ビット表現とされる。
 図13(b)は、オーダーフラグ(Order Flag)情報の内容の一例を示している。第7ビットは、指定ラインの元データ、つまり既に重畳されているメタデータをマスクする機能を有効にするか否かを示すフラグである。例えば、“0”は、有効にしないことを示し、“1”は、有効にすることを示す。上述していないが、このマスク機能は、VANC抽出部201において、実行される。
 第6ビットは、SDI信号がレベルBのSDIフォーマット構造(図2(a)参照)である場合に、+563の偶数フィールドラインにも、自動的に、メタデータを多重する機能を有効にするか否かを示すフラグである。例えば、“0”は、有効にしないことを示し、“1”は、有効にすることを示す。この機能が有効である場合、+563の偶数フィールドラインには、上述の第7ビットのフラグ情報も適用される。
 第3ビットは、「Instancy」のフラグが立っている場合、つまり“1”である場合における動作(Instancy action)を示すフラグである。例えば、“0”は、一度多重した後に、次回(次フレーム)からは、ハードウェアが「Instancy」のフラグを“0”にして、多重することを示し、“1”は、次回(次フレーム)からも、そのまま、つまり「Instancy」のフラグが“1”のまま、多重を続けることを示す。
 第2ビットは、「Single」のフラグが立っている場合、つまり“1”である場合における動作(Single action)を示すフラグである。例えば、“0”は、一度多重した後に、次回(次フレーム)からは、ハードウェアがメタデータの多重を停止することを示し、“1”は、次回(次フレーム)からは、ハードウェアが「Single」のフラグを“0”にして、多重することを示す。
 第0ビットは、当該メタデータの多重が行われたか否かを示すフラグである。例えば、“0”は、まだ行われていないことを示し、“1”は、既に行われたことを示す。
 また、図12に戻って、コントローラ306は、終端検出部305から送られてくるメタデータ重畳制御信号およびラインナンバー(Line-No.)の情報に基づき、パケットレジスタ307~309から該当するデータパケットの情報を取り出し、3ワードのADF(Ancillary Data Flag)を付加する等してデータパケットの形式としてメタデータ重畳部303に送る。この場合、コントローラ306は、パケットレジスタ307~309に該当するデータパケットの情報が複数存在する場合は、例えばメタデータのサイズが小さい順に、重畳すべきデータパケットをメタデータ重畳部303に送る。
 また、コントローラ306は、このようにパケットレジスタ307~309から該当するデータパケットの情報を取り出し、その情報を含むデータパケットをメタデータ重畳部303に送ったとき、パケットレジスタ307~309においてそのデータパケットの情報に付加されているオーダーフラグ(Order Flag)情報の第0ビットが“0”であるときは、それを“1”に変更する。これにより、当該メタデータの多重が既に行われたことが示される。
 ここで、コントローラ306は、このようにパケットレジスタ307~309に含まれる該当するデータパケットの情報において「Instancy」のフラグが“1”である場合、オーダーフラグ情報の第3ビットの「Instancy action」のフラグの状態に応じた動作をする。すなわち、「Instancy action」のフラグが“0”である場合は、1フレーム多重後、以降のフレームでは、「Instancy」のフラグを“0”に変更して重畳すべきデータパケットを生成して、メタデータ重畳部303に送る。また、「Instancy action」のフラグが“1”である場合は、1フレーム多重後、以降のフレームでも、「Instancy」のフラグを“1”のままとして重畳すべきデータパケットを生成して、メタデータ重畳部303に送る。
 また、コントローラ306は、このようにパケットレジスタ307~309に含まれる該当するデータパケットの情報において「Single」のフラグが“1”である場合、オーダーフラグ情報の第2ビットの「Single action」のフラグの状態に応じた動作をする。すなわち、「Single action」のフラグが“0”である場合は、1フレーム多重後、以降のフレームでは、重畳すべきデータパケットを生成してメタデータ重畳部303に送ることはしない。また、「Single action」のフラグが“1”である場合は、1フレーム多重後、以降のフレームでは、「Single Instancy」のフラグを“0”に変更して重畳すべきデータパケットを生成して、メタデータ重畳部303に送る。
 メタデータ重畳部303は、遅延部302でタイミング調整(遅延)されたSDI信号のVANC領域のそれぞれ対応するラインに、コントローラ306から送られてくるデータパケットを重畳する処理をする。この場合、メタデータ重畳部303は、既に重畳されているデータパケットの終端に続けて新たなデータパケットを重畳する。ここで、複数の新たなデータパケットを重畳する場合には、順次前のデータパケットの終端に続けて次のデータパケットが重畳されていく。
 CRC(Cyclic Redundancy Check)部304は、メタデータ重畳部303で重畳処理が施された後のSDI信号に対し、CRCを再計算後のものに置き換える処理を行って、出力SDI信号とする。
 入力されるSDI信号のVANC領域に多くのデータパケットが既に重畳されている場合、あるラインに新たなデータパケットを追加重畳するためには、該当ラインに既に重畳されているデータパケットの終端を検出し、その終端から追加重畳する新たなデータパケットの上書きを開始する、という制御が必要となる。
 図12に示す出力部162においては、ハードウェアの終端検出部305でVANC領域の該当ラインの既に重畳されているデータパケットの終端が検出され、その検出タイミングに基づいて、コントローラ306からハードウェアのメタデータ重畳部303に新たなデータパケットが送られ、該当ラインの既に重畳されているデータパケットの終端から続けて新たなデータパケットが重畳される。
 このように、図12に示す出力部162においては、重畳位置の自動制御機能を備えるものである。これにより、ソフトウェアでは重畳するデータパケットの情報と重畳ラインを指定するだけで、該当ラインの正しい位置に、自動で新たなデータパケットを重畳することが可能となる。
 また、「Single」のフラグが立っているメタデータに関しては単一フレームのみに重畳されることが求められるが、ソフトウェアで1フレーム単位の処理を行うことは困難である。つまり、ソフトウェアでは、あるフレームで「Single」のフラグが立っているメタデータを重畳するとき、その次のフレームでは必ずそのメタデータの重畳を止める、という制御は困難である。
 図12に示す出力部162においては、ハードウェアによる出力メタデータのフレーム単位自動制御機能(メタデータの送出補助機能)を備えるものであり、「Single」や「Instancy」のフラグが立っているメタデータの送出が適切に行われる。
 すなわち、「Single」のフラグが立っているメタデータを含むデータパケットに関しては、ハードウェアのコントローラ306により、一度多重した後に、次回(次フレーム)からは多重を停止されるか、あるいは「Single」のフラグを落として多重される。また、「Instancy」のフラグが立っているメタデータを含むデータパケットに関しては、ハードウェアのコントローラ306により、一度多重した後に、「Instancy」のフラグを落として多重されるか、あるいは「Instancy」のフラグが立っている状態で多重される。
 「入力部の他の構成例」
 図14は、入力部(Input)161の他の構成例を示している。この図14において、図9と対応する部分には同一符号を付し、適宜、その詳細説明は省略する。
 指定判定部208は、ヘッダ情報抽出部205で順次抽出されたヘッダ情報と、そのヘッダ情報を持つデータパケットが挿入されているライン情報に基づき、ヘッダ情報抽出部205で抽出されたヘッダ情報を持つデータパケットに含まれるメタデータが、取扱いIDレジスタ207に設定された指定情報を満たすか否か判定する。
 指定判定部208は、指定情報を満たすと判定した場合、そのデータパケットに含まれるヘッダ情報およびメタデータをレジスタに書き込むように、コントローラ203に書き込み制御信号を送る。また、指定判定部208は、コントローラ203に書き込み制御信号を送る場合、LPM Flagの第6ビットの「Instancy」のフラグが立っていた場合や、第5ビットの「Single」のフラグが立っていた場合、その旨を示す情報もコントローラ203に送る。
 パケットレジスタ221,222は、上述したように指定情報を満たすメタデータおよびそれに対応するヘッダ情報を書き込むためのレジスタである。CPU151は、パケットレジスタ221,222に書き込まれたメタデータを読み出して処理できる。
 パケットレジスタ222は、CPU151に読み出されるまで保持する必要があるメタデータ、ここでは「Single」のフラグが立っているメタデータを書き込むためのレジスタである。このパケットレジスタ222に書き込まれたメタデータは、読出しおよびクリア操作を行わない限り、保持され続ける。
 ここで、読出しおよびクリア操作は、読出し確認つきクリア操作である。
 この読出しフラグの確認おいて、読出しフラグが“1”の場合、読出しは成功とされ、内部データはクリアされる。一方、この読出しフラグの確認おいて、読出しフラグが“0”の場合、読出しは失敗とされ、内部データは保持され、次のメタデータが入力されると、後ろに追加される。
 パケットレジスタ221は、ここでは、「Single」のフラグが立っていないメタデータを書き込むためのレジスタである。このパケットレジスタ221に書き込まれたメタデータは、毎フレームの例えば開始タイミングでリセットされる。
 図15(a)は、パケットレジスタ221,222に書き込まれる一個のメタデータに対応した情報の一例を示している。この情報は、2バイトのラインナンバー(Line-No.)と、1バイトのデータID(DID)と、1バイトのセカンダリデータID(SDID)と、1バイトのデータカウント(Data Count)と、2バイトのナンバー情報(LPM Number)と、1バイトの各種フラグ情報(LPM Flag)と、所定バイト数のメインデータ(メタデータ)と、1バイトのチェックサム/ステータス(Check sum / Status)情報からなっている。
 図15(b)は、チェックサム/ステータス(Check sum / Status)情報の内容の一例を示している。第7ビットは、データパケット(アンシラリパケット)の第N+1バイトのチェックサム(Check Sum)(図4参照)が「OK」であるか「NG」であるかを示すフラグである。例えば、“0”は、「OK」であることを示し、“1”は、「NG」であることを示す。
 第6ビットは、同一ラインに重畳されるメタデータは隙間なく詰まっていることが前提として、同一ラインに重畳されるメタデータとメタデータの間に不要なブランク(blank)が検出された場合にアサートされるフラグである。例えば、“0”は、不要なブランクが検出されていないことを示し、“1”は、不要なブランクが検出されていることを示す。
 第5ビットは、メタデータはデータカウント(Data Count)を見ることでそのサイズを知ることができるが、必要サイズ分のデータを検出(格納)する前に次のメタデータが来てしまった場合にアサートされるフラグである。例えば、“0”は、必要サイズ分のデータを検出(格納)する前に次のメタデータが来ていないことを示し、“1”は、必要サイズ分のデータを検出(格納)する前に次のメタデータが来たことを示す。
 また、図14に戻って、コントローラ203は、指定判定部208から送られてくる書き込み制御信号に基づいて、遅延部202でタイミング調整(遅延)されたSDI信号から、抽出指定されたメタデータを含むデータパケットを検出し、それに含まれるヘッダ情報(DID,SDID,Data Count,LPM Number,LPM Flag)とメタデータを抽出する。
 そして、コントローラ203は、指定判定部208から送られてくる「Single」のフラグが立っている旨の情報に基づいて、「Single」のフラグが立っているメタデータやそれに係るヘッダ情報をパケットレジスタ222に書き込み、その他のメタデータやそれに係るヘッダ情報をパケットレジスタ221に書き込む。
 図14に示す入力部(Input)161の構成において、その他は、詳細説明は省略するが、図9に示す入力部(Input)161の構成と同様である。
 図9に示す入力部(Input)161の構成のように、メタデータのサイズに応じて保持するパケットレジスタを切り替える場合には、入力されるSDI信号のVANC領域に含まれるメタデータのサイズ毎の数の比率と、用意しているパケットレジスタのサイズ毎の比率が大きく異なっているとき、パケットレジスタに無駄が生じることになる。
 図14に示す入力部(Input)161の構成では、コントローラ203は、SDI信号のVANC領域から抽出されたメタデータを、そのサイズ判定をせずに、パケットレジスタ221,222に書き込んで、数珠つなぎで保存するものである。そのため、図9に示す入力部(Input)161の構成のような無駄は生じない。なお、図14に示す入力部(Input)161の構成では、パケットレジスタ221,222に書き込まれる一つ一つのメタデータのサイズはバラバラなので、CPU151からのメタデータの取得では、個別にデータを抜き出すのは困難であり、レジスタ領域の全スキャンによるデータ取得を行うことになる。
 上述したように、図1に示すビデオシステム10における入力部(Input)161では、メタデータの指定情報に基づいて、入力されたSDI信号のVANC領域から所定のメタデータを抽出して蓄積用レジスタ(パケットレジスタ)に書き込むものである。そのため、入力されるSDI信号VANC領域に含まれるメタデータが多くなる場合であっても、メモリハードの増大を抑制でき、また蓄積用レジスタからメタデータを読み出して処理するCPU151の負担も軽減できる。
 また、図1に示すビデオシステム10における出力部(Output)162では、入力されたSDI信号のVANC領域の指定ラインに既に重畳されている最後のデータパケットの終端を検出し、その終端に続けて新たなデータパケットを重畳するものであって、重畳位置の自動制御機能を備えるものである。そのため、CPU(ソフトウェア)151では重畳するデータパケットの情報と重畳ラインを指定するだけで、該当ラインの正しい位置に、自動で新たなデータパケットを重畳することが可能となる。
 <2.変形例>
 なお、上述していないが、本技術は、IPパケットで映像信号を伝送するビデオシステムにおいても同様に適用することができる。
 また、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
 また、本明細書に記載された効果は、あくまで説明的または例示的なものであって限定的ではない。つまり、本開示に係る技術は、上記の効果とともに、または上記の効果に代えて、本明細書の記載から当業者には明らかな他の効果を奏しうる。
 また、本技術は、以下のような構成を取ることもできる。
 (1)映像信号および該映像信号に係るメタデータを持つデータパケットを含む伝送用デジタル信号を入力する信号入力部と、
 メタデータの指定情報に基づいて前記伝送用デジタル信号から所定のメタデータを抽出して蓄積用レジスタに書き込むデータ書き込み部を備える
 信号処理装置。
 (2)前記指定情報は、前記所定のメタデータを持つ前記データパケットのヘッダ情報を含む
 前記(1)に記載の信号処理装置。
 (3)前記ヘッダ情報は、前記所定のメタデータの分類を示す分類情報を含む
 前記(2)に記載の信号処理装置。
 (4)前記分類情報は、前記所定のメタデータの分類を示す第1分類情報と、前記所定のメタデータの前記第1分類情報による分類内の細分類を示す第2分類情報からなる
 前記(3)に記載の信号処理装置。
 (5)前記ヘッダ情報は、前記所定のメタデータの補助情報をさらに含む
 前記(3)または(4)に記載の信号処理装置。
 (6)前記補助情報は、前記所定のメタデータが履歴データであることを示す情報を含む
 前記(5)に記載の信号処理装置。
 (7)前記補助情報は、前記所定のメタデータが即時性を要求するメタデータであることを示す情報を含む
 前記(5)に記載の信号処理装置。
 (8)前記データ書き込み部は、前記所定のメタデータを、前記蓄積用レジスタのうち、ソフトウェアによる読み出しがあるまで保持し続けるためのレジスタ領域に書き込むと共に、前記ソフトウェアに割り込みを掛ける
 前記(7)に記載の信号処理装置。
 (9)前記補助情報は、前記所定のメタデータが単発のメタデータであることを示す情報を含む
 前記(5)に記載の信号処理装置。
 (10)前記データ書き込み部は、前記所定のメタデータを、前記蓄積用レジスタのうち、ソフトウェアによる読み出しがあるまで保持し続けるためのレジスタ領域に書き込む
 前記(9)に記載の信号処理装置。
 (11)前記入力された伝送用デジタル信号に含まれる前記データパケットが持つ前記メタデータが履歴化対象のメタデータである場合、前記入力された伝送用デジタル信号を出力する際に、前記データパケットに、該データパケットが持つ前記メタデータが履歴データであることを示す補助情報を付加する情報付加部をさらに備える
 前記(1)から(10)のいずれかに記載の信号処理装置。
 (12)前記入力された伝送用デジタル信号に含まれる前記データパケットのヘッダ情報を抽出するヘッダ情報抽出部と、
 前記抽出されたヘッダ情報を保持するレジスタをさらに備える
 前記(1)から(11)のいずれかに記載の信号処理装置。
 (13)前記伝送用デジタル信号は、SDIフォーマットのシリアルデジタル信号であり、
 前記データパケットは、前記SDIフォーマットのシリアルデジタル信号のアンシラリ領域に挿入されている
 前記(1)から(12)のいずれかに記載の信号処理装置。
 (14)映像信号および該映像信号に係るメタデータを持つデータパケットを含む伝送用デジタル信号を入力する手順と、
 メタデータの指定情報に基づいて前記伝送用デジタル信号から所定のメタデータを抽出して蓄積用レジスタに書き込む手順を有する
 信号処理方法。
 (15)映像信号を含む伝送用デジタル信号を入力する信号入力部と、
 前記入力された伝送用デジタル信号の指定ラインに前記映像信号に係るメタデータを持つ新たに重畳すべきデータパケットを重畳して出力する信号出力部を備え、
 前記信号出力部は、
 前記入力された伝送用デジタル信号の前記指定ラインに既に重畳されている最後のデータパケットの終端を検出する終端検出部と、
 前記終端検出に基づいて、前記入力された伝送用デジタル信号の前記指定ラインの前記既に重畳されている最後のデータパケットの終端に続けて前記新たなデータパケットを重畳するデータ重畳部を有する
 信号処理装置。
 (16)前記終端検出部は、あるデータパケットの終端が検出された後に、所定数のサイクルが経過するまでに次のデータパケットが検出されなかった場合、前記あるデータパケットの終端を前記最後のデータパケットの終端として確定する
 前記(15)に記載の信号処理装置。
 (17)前記新たに重畳すべきデータパケットの情報を保持するレジスタをさらに備え、
 前記新たに重畳すべきデータパケットが、該データパケットが持つメタデータが即時性を要求するメタデータであることを示す情報を含む場合、前記信号出力部は、前記新たに重畳すべきデータパケットを1フレーム重畳後、以降のフレームで、前記新たに重畳すべきデータパケットを、前記即時性を要求するメタデータであることを示す情報を即時性を要求するメタデータでないことを示す情報に変更して重畳を続けるか、そのまま重畳することを続ける
 前記(15)または(16)に記載の信号処理装置。
 (18)前記新たに重畳すべきデータパケットの情報を保持するレジスタをさらに備え、
 前記新たに重畳すべきデータパケットが、該データパケットが持つメタデータが単発のメタデータであることを示す情報を含む場合、前記信号出力部は、前記新たに重畳すべきデータパケットを1フレーム重畳後、以降のフレームで、重畳を停止するか、前記単発のメタデータであることを示す情報を単発のメタデータでないことを示す情報に変更して重畳を続ける
 前記(15)または(16)に記載の信号処理装置。
 (19)前記伝送用デジタル信号は、SDIフォーマットのシリアルデジタル信号であり、
 前記データパケットは、前記SDIフォーマットのシリアルデジタル信号のアンシラリ領域に挿入される
 前記(15)から(18)のいずれかに記載の信号処理装置。
 (20)映像信号を含む伝送用デジタル信号を入力する信号入力手順と、
 前記入力された伝送用デジタル信号の指定ラインに前記映像信号に係るメタデータを持つ新たに重畳すべきデータパケットを重畳して出力する信号出力手順を有し、
 前記信号出力手順では、
 前記入力された伝送用デジタル信号の前記指定ラインに既に重畳されている最後のデータパケットの終端を検出する手順と、
 前記終端検出に基づいて、前記入力された伝送用デジタル信号の前記指定ラインの前記既に重畳されている最後のデータパケットの終端に続けて前記新たなデータパケットを重畳する手順を有する
 信号処理方法。
 10・・・ビデオシステム
 101,101-1~101-3・・・カメラ装置
 102,102-1~102-3・・・ケーブル
 103,103-1~103-3・・・CCU
 104・・・ビデオテープレコーダ
 105・・・スイッチャ
 106・・・サーバ
 107,108・・・モニタ
 109・・・コンバータ
 110-1~110-3・・・波形モニタ
 111・・・レンズ装置
 112・・・カメラCPU
 113・・・センサー部
 114・・・カメラ信号処理部
 115・・・ピックミースイッチ
 116・・・USB端子
 131・・・CPU
 132・・・ビデオ処理部
 133・・・ビデオフォーマッタ
 134・・・USB端子
 151・・・CPU
 152・・・ルータ
 153・・・ビデオプロセッサ
 161・・・入力部
 162・・・出力部
 171・・・セレクタ
 172・・・割り込み回路
 201・・・VANC抽出部
 202・・・遅延部
 203・・・コントローラ
 204・・・CRC部
 205・・・ヘッダ情報抽出部
 206・・・IDレジスタ
 207・・・取扱いIDレジスタ
 208・・・指定判定部
 209・・・履歴化対象判定部
 211,212,213,221,222・・・パケットレジスタ
 301・・・VANC抽出部
 302・・・遅延部
 303・・・メタデータ重畳部
 305・・・終端検出部
 306・・・コントローラ
 307,308,309・・・パケットレジスタ

Claims (20)

  1.  映像信号および該映像信号に係るメタデータを持つデータパケットを含む伝送用デジタル信号を入力する信号入力部と、
     メタデータの指定情報に基づいて前記伝送用デジタル信号から所定のメタデータを抽出して蓄積用レジスタに書き込むデータ書き込み部を備える
     信号処理装置。
  2.  前記指定情報は、前記所定のメタデータを持つ前記データパケットのヘッダ情報を含む
     請求項1に記載の信号処理装置。
  3.  前記ヘッダ情報は、前記所定のメタデータの分類を示す分類情報を含む
     請求項2に記載の信号処理装置。
  4.  前記分類情報は、前記所定のメタデータの分類を示す第1分類情報と、前記所定のメタデータの前記第1分類情報による分類内の細分類を示す第2分類情報からなる
     請求項3に記載の信号処理装置。
  5.  前記ヘッダ情報は、前記所定のメタデータの補助情報をさらに含む
     請求項3に記載の信号処理装置。
  6.  前記補助情報は、前記所定のメタデータが履歴データであることを示す情報を含む
     請求項5に記載の信号処理装置。
  7.  前記補助情報は、前記所定のメタデータが即時性を要求するメタデータであることを示す情報を含む
     請求項5に記載の信号処理装置。
  8.  前記データ書き込み部は、前記所定のメタデータを、前記蓄積用レジスタのうち、ソフトウェアによる読み出しがあるまで保持し続けるためのレジスタ領域に書き込むと共に、前記ソフトウェアに割り込みを掛ける
     請求項7に記載の信号処理装置。
  9.  前記補助情報は、前記所定のメタデータが単発のメタデータであることを示す情報を含む
     請求項5に記載の信号処理装置。
  10.  前記データ書き込み部は、前記所定のメタデータを、前記蓄積用レジスタのうち、ソフトウェアによる読み出しがあるまで保持し続けるためのレジスタ領域に書き込む
     請求項9に記載の信号処理装置。
  11.  前記入力された伝送用デジタル信号に含まれる前記データパケットが持つ前記メタデータが履歴化対象のメタデータである場合、前記入力された伝送用デジタル信号を出力する際に、前記データパケットに、該データパケットが持つ前記メタデータが履歴データであることを示す補助情報を付加する情報付加部をさらに備える
     請求項1に記載の信号処理装置。
  12.  前記入力された伝送用デジタル信号に含まれる前記データパケットのヘッダ情報を抽出するヘッダ情報抽出部と、
     前記抽出されたヘッダ情報を保持するレジスタをさらに備える
     請求項1に記載の信号処理装置。
  13.  前記伝送用デジタル信号は、SDIフォーマットのシリアルデジタル信号であり、
     前記データパケットは、前記SDIフォーマットのシリアルデジタル信号のアンシラリ領域に挿入されている
     請求項1に記載の信号処理装置。
  14.  映像信号および該映像信号に係るメタデータを持つデータパケットを含む伝送用デジタル信号を入力する手順と、
     メタデータの指定情報に基づいて前記伝送用デジタル信号から所定のメタデータを抽出して蓄積用レジスタに書き込む手順を有する
     信号処理方法。
  15.  映像信号を含む伝送用デジタル信号を入力する信号入力部と、
     前記入力された伝送用デジタル信号の指定ラインに前記映像信号に係るメタデータを持つ新たに重畳すべきデータパケットを重畳して出力する信号出力部を備え、
     前記信号出力部は、
     前記入力された伝送用デジタル信号の前記指定ラインに既に重畳されている最後のデータパケットの終端を検出する終端検出部と、
     前記終端検出に基づいて、前記入力された伝送用デジタル信号の前記指定ラインの前記既に重畳されている最後のデータパケットの終端に続けて前記新たなデータパケットを重畳するデータ重畳部を有する
     信号処理装置。
  16.  前記終端検出部は、あるデータパケットの終端が検出された後に、所定数のサイクルが経過するまでに次のデータパケットが検出されなかった場合、前記あるデータパケットの終端を前記最後のデータパケットの終端として確定する
     請求項15に記載の信号処理装置。
  17.  前記新たに重畳すべきデータパケットの情報を保持するレジスタをさらに備え、
     前記新たに重畳すべきデータパケットが、該データパケットが持つメタデータが即時性を要求するメタデータであることを示す情報を含む場合、前記信号出力部は、前記新たに重畳すべきデータパケットを1フレーム重畳後、以降のフレームで、前記新たに重畳すべきデータパケットを、前記即時性を要求するメタデータであることを示す情報を即時性を要求するメタデータでないことを示す情報に変更して重畳を続けるか、そのまま重畳することを続ける
     請求項15に記載の信号処理装置。
  18.  前記新たに重畳すべきデータパケットの情報を保持するレジスタをさらに備え、
     前記新たに重畳すべきデータパケットが、該データパケットが持つメタデータが単発のメタデータであることを示す情報を含む場合、前記信号出力部は、前記新たに重畳すべきデータパケットを1フレーム重畳後、以降のフレームで、重畳を停止するか、前記単発のメタデータであることを示す情報を単発のメタデータでないことを示す情報に変更して重畳を続ける
     請求項15に記載の信号処理装置。
  19.  前記伝送用デジタル信号は、SDIフォーマットのシリアルデジタル信号であり、
     前記データパケットは、前記SDIフォーマットのシリアルデジタル信号のアンシラリ領域に挿入される
     請求項15に記載の信号処理装置。
  20.  映像信号を含む伝送用デジタル信号を入力する信号入力手順と、
     前記入力された伝送用デジタル信号の指定ラインに前記映像信号に係るメタデータを持つ新たに重畳すべきデータパケットを重畳して出力する信号出力手順を有し、
     前記信号出力手順では、
     前記入力された伝送用デジタル信号の前記指定ラインに既に重畳されている最後のデータパケットの終端を検出する手順と、
     前記終端検出に基づいて、前記入力された伝送用デジタル信号の前記指定ラインの前記既に重畳されている最後のデータパケットの終端に続けて前記新たなデータパケットを重畳する手順を有する
     信号処理方法。
PCT/JP2021/011004 2020-03-30 2021-03-18 信号処理装置および信号処理方法 WO2021200198A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2022511875A JPWO2021200198A1 (ja) 2020-03-30 2021-03-18
CN202180023937.9A CN115336258A (zh) 2020-03-30 2021-03-18 信号处理装置及信号处理方法
US17/908,438 US20240048784A1 (en) 2020-03-30 2021-03-18 Signal processing apparatus and signal processing method
EP21782198.2A EP4106318A4 (en) 2020-03-30 2021-03-18 SIGNAL PROCESSING DEVICE AND SIGNAL PROCESSING METHOD

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2020060015 2020-03-30
JP2020-060015 2020-03-30

Publications (1)

Publication Number Publication Date
WO2021200198A1 true WO2021200198A1 (ja) 2021-10-07

Family

ID=77929286

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2021/011004 WO2021200198A1 (ja) 2020-03-30 2021-03-18 信号処理装置および信号処理方法

Country Status (5)

Country Link
US (1) US20240048784A1 (ja)
EP (1) EP4106318A4 (ja)
JP (1) JPWO2021200198A1 (ja)
CN (1) CN115336258A (ja)
WO (1) WO2021200198A1 (ja)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000115249A (ja) * 1998-10-09 2000-04-21 Fuji Xerox Co Ltd データ通信端末およびデータ通信方法
JP2001053825A (ja) * 1999-07-08 2001-02-23 Thomson Licensing Sa 適応トランスポートプロトコル復号器
JP2001218175A (ja) * 1999-11-05 2001-08-10 Sony United Kingdom Ltd 信号処理装置
JP2011155701A (ja) 2000-02-07 2011-08-11 Sony Corp 画像処理装置及び画像処理方法

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4332364B2 (ja) * 2003-04-04 2009-09-16 ソニー株式会社 映像記録システム,映像記録方法
JP4661447B2 (ja) * 2005-08-16 2011-03-30 ソニー株式会社 送受信システムおよび方法、送信装置および方法、受信装置および方法、並びに、プログラム
US8879895B1 (en) * 2009-03-28 2014-11-04 Matrox Electronic Systems Ltd. System and method for processing ancillary data associated with a video stream
EP2539895B1 (en) * 2010-02-22 2014-04-09 Dolby Laboratories Licensing Corporation Video display with rendering control using metadata embedded in the bitstream.
WO2021029165A1 (ja) * 2019-08-09 2021-02-18 ソニー株式会社 信号処理装置および信号処理方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000115249A (ja) * 1998-10-09 2000-04-21 Fuji Xerox Co Ltd データ通信端末およびデータ通信方法
JP2001053825A (ja) * 1999-07-08 2001-02-23 Thomson Licensing Sa 適応トランスポートプロトコル復号器
JP2001218175A (ja) * 1999-11-05 2001-08-10 Sony United Kingdom Ltd 信号処理装置
JP2011155701A (ja) 2000-02-07 2011-08-11 Sony Corp 画像処理装置及び画像処理方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
ARIB ORGANIZATION: "Ancillary Data Packet and Space Formatting of Bit-serial Digital Interface for 1125/60 HDTV Systems", ARIB, ASSOCIATION OF RADIO INDUSTRIES AND BUSINESSES, NITTOCHI BLDG., 1-4-1, KASUMIGASEKI, CHIYODAKU, TOKYO 100-0013, JAPAN, no. C1.1, 18 December 2012 (2012-12-18), Nittochi Bldg., 1-4-1, Kasumigaseki, Chiyodaku, Tokyo 100-0013, Japan , XP017857855 *
See also references of EP4106318A4

Also Published As

Publication number Publication date
US20240048784A1 (en) 2024-02-08
CN115336258A (zh) 2022-11-11
JPWO2021200198A1 (ja) 2021-10-07
EP4106318A1 (en) 2022-12-21
EP4106318A4 (en) 2023-11-22

Similar Documents

Publication Publication Date Title
JP4191869B2 (ja) ディジタルカメラを用いたコンピュータシステム
US20120154609A1 (en) Image recording device, image recording method, and program
US6323906B1 (en) Image processing apparatus
US6690428B1 (en) Method and apparatus for embedding digital audio data in a serial digital video data stream
JP2000188703A (ja) 映像信号伝送装置、映像信号伝送方法、映像信号撮像装置および映像信号処理装置
JP2000312221A (ja) デジタル放送受信装置
WO2021200198A1 (ja) 信号処理装置および信号処理方法
CN101867763A (zh) 发送设备、成像设备、传输系统、接收设备和发送方法
WO2021200186A1 (ja) 信号処理装置および信号処理方法
WO2021029165A1 (ja) 信号処理装置および信号処理方法
US20030081564A1 (en) Wireless transmission and recording of images from a video surveillance camera
KR100233460B1 (ko) 정지화상 전송장치
US6654809B1 (en) Data processing device
KR100991122B1 (ko) 데이터 패킷 전송 방법 및 디바이스
JP2005176233A (ja) 通信装置及び通信システム
JP3674726B2 (ja) 送信装置及び受信装置並びに送受信装置
US20050083861A1 (en) Method and arrangement for converting a first data stream into a second data stream
JP2002044575A (ja) 動画像取り込み装置及びその動画像取り込み方法
KR100320151B1 (ko) 다중 영상신호저장 제어장치
JP2002199414A (ja) 撮像装置及び撮像方法
KR200182088Y1 (ko) 다중 영상신호저장 제어장치
JP2001016554A (ja) 映像伝送方法およびその装置
JP2000078428A (ja) 映像データ伝送システム
JP4268650B2 (ja) 画像データ伝送システム
JP4255455B2 (ja) 画像データ圧縮装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 21782198

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2022511875

Country of ref document: JP

Kind code of ref document: A

WWE Wipo information: entry into national phase

Ref document number: 17908438

Country of ref document: US

ENP Entry into the national phase

Ref document number: 2021782198

Country of ref document: EP

Effective date: 20220914

NENP Non-entry into the national phase

Ref country code: DE