KR102067692B1 - Method and apparatus generating mixing signal of video and audio - Google Patents

Method and apparatus generating mixing signal of video and audio Download PDF

Info

Publication number
KR102067692B1
KR102067692B1 KR1020180115505A KR20180115505A KR102067692B1 KR 102067692 B1 KR102067692 B1 KR 102067692B1 KR 1020180115505 A KR1020180115505 A KR 1020180115505A KR 20180115505 A KR20180115505 A KR 20180115505A KR 102067692 B1 KR102067692 B1 KR 102067692B1
Authority
KR
South Korea
Prior art keywords
signal
analog
mixed signal
signals
mixed
Prior art date
Application number
KR1020180115505A
Other languages
Korean (ko)
Inventor
김일권
송진근
김현태
Original Assignee
주식회사 앤씨앤
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 앤씨앤 filed Critical 주식회사 앤씨앤
Priority to KR1020180115505A priority Critical patent/KR102067692B1/en
Priority to CN201811346759.XA priority patent/CN110971838B/en
Application granted granted Critical
Publication of KR102067692B1 publication Critical patent/KR102067692B1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265Mixing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2368Multiplexing of audio and video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/233Processing of audio elementary streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/08Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division
    • H04N7/087Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division with signal insertion during the vertical blanking interval only
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Abstract

Provided are a method for generating a mixed signal of an image and speech and a device thereof. Target samples of a digital speech signal corresponding to the analog speech signals to be included in an analog image signal representing a target frame to generate the mixed signal are determined. The target samples are converted into analog speech signals and the analog speech signals are added to a preset area of the analog image signal.

Description

영상 및 음성의 혼합 신호 생성 방법 및 장치{METHOD AND APPARATUS GENERATING MIXING SIGNAL OF VIDEO AND AUDIO}METHOD AND APPARATUS GENERATING MIXING SIGNAL OF VIDEO AND AUDIO}

기술 분야는 영상 신호를 전송하는 기술에 관한 것으로, 특히, 디지털 영상 신호를 아날로그 영상 신호로 변환하여 아날로그 영상 신호를 전송하는 기술에 관한 것이다.The technical field relates to a technique for transmitting an image signal, and more particularly, to a technique for transmitting an analog image signal by converting a digital image signal into an analog image signal.

영상을 전송하는 방법에는 개-회로(open circuit)를 이용하는 방법 및 폐쇄 회로(closed circuit)를 이용하는 방법이 있을 수 있다. 개-회로를 이용하는 방법은 불 특정의 다수의 사용자에게 영상 신호를 전송해야 하므로, 영상을 전송하기 위해서는 표준화된 방식이 사용될 수 있다. 폐쇄 회로를 이용하여 영상을 전송하는 방법은 특정 사용자에게만 영상 신호를 전송하는 것이기 때문에, 특정 사용자만이 영상 신호를 전송하는 방식을 알고 있을 수 있다. 영상 신호와 음성 신호를 별도의 채널들을 통해 개별 전송하는 경우, 영상 신호와 음성 신호가 비-동기화될 수 있다.Methods of transmitting an image may include a method using an open circuit and a method using a closed circuit. Since the method using the open-circuit requires transmitting a video signal to an unspecified number of users, a standardized method may be used to transmit the video. Since a method of transmitting an image using a closed circuit is to transmit an image signal only to a specific user, only a specific user may know a method of transmitting an image signal. When video and audio signals are separately transmitted through separate channels, video and audio signals may be de-synchronized.

일 실시예는 혼합 신호를 생성하는 방법 및 장치를 제공한다.One embodiment provides a method and apparatus for generating a mixed signal.

일 실시예는 혼합 신호를 전송하는 방법 및 장치를 제공한다.One embodiment provides a method and apparatus for transmitting a mixed signal.

일 측면에 따른, 혼합 신호 생성 방법은, 타겟 프레임을 나타내는 아날로그 영상 신호에 포함될 아날로그 음성 신호들에 대응하는 디지털 음성 신호의 타겟 샘플들을 결정하는 단계, 상기 타겟 샘플들을 상기 아날로그 음성 신호들로 변환하는 단계, 및 상기 아날로그 음성 신호들을 상기 아날로그 영상 신호의 미리 설정된 영역에 부가함으로써 영상 및 음성의 혼합 신호를 생성하는 단계를 포함한다.According to an aspect, a mixed signal generation method includes determining target samples of a digital voice signal corresponding to analog voice signals to be included in an analog video signal representing a target frame, and converting the target samples into the analog voice signals. And generating a mixed signal of video and audio by adding the analog audio signals to a preset area of the analog video signal.

상기 혼합 신호 생성 방법은, 상기 디지털 음성 신호를 획득하는 단계를 더 포함하고, 상기 타겟 샘플들을 결정하는 단계는, 상기 디지털 음성 신호의 샘플들 중 상기 타겟 프레임에 대응하는 상기 타겟 샘플들을 결정하는 단계를 포함할 수 있다.The mixed signal generation method may further include obtaining the digital speech signal, and determining the target samples may include determining the target samples corresponding to the target frame among samples of the digital speech signal. It may include.

상기 디지털 음성 신호의 샘플들 중 상기 타겟 프레임에 대응하는 상기 타겟 샘플들을 결정하는 단계는, 시스템의 프레임 레이트에 기초하여 상기 디지털 음성 신호의 샘플들 중 상기 타겟 샘플들을 결정하는 단계를 포함할 수 있다.Determining the target samples corresponding to the target frame among the samples of the digital speech signal may include determining the target samples among the samples of the digital speech signal based on a frame rate of a system. .

상기 디지털 음성 신호의 샘플들 중 상기 타겟 프레임에 대응하는 상기 타겟 샘플들을 결정하는 단계는, 시스템의 프레임 레이트에 기초하여 상기 디지털 음성 신호의 샘플들 중 상기 타겟 샘플들을 결정하는 단계를 포함할 수 있다.Determining the target samples corresponding to the target frame among the samples of the digital speech signal may include determining the target samples among the samples of the digital speech signal based on a frame rate of a system. .

상기 아날로그 영상 신호의 미리 설정된 영역은, 수직 귀선 기간(Vertical blanking interval: VBI)의 일부일 수 있다.The preset area of the analog video signal may be part of a vertical blanking interval (VBI).

상기 타겟 샘플들을 상기 아날로그 음성 신호들로 변환하는 단계는, 상기 타겟 샘플들을 시스템 주파수를 이용하여 초기 아날로그 음성 신호들로 변환하는 단계, 및 상기 초기 아날로그 음성 신호들에 미리 설정된 크기의 직류 전압을 부가하는 바이어싱을 수행함으로써 상기 아날로그 음성 신호들을 생성하는 단계를 포함할 수 있다.The converting the target samples into the analog speech signals may include converting the target samples into initial analog speech signals using a system frequency, and adding a DC voltage having a predetermined magnitude to the initial analog speech signals. The method may include generating the analog voice signals by performing biasing.

상기 혼합 신호 생성 방법은, 상기 아날로그 음성 신호들을 반전시킴으로써 아날로그 음성 반전 신호들을 생성하는 단계를 더 포함하고, 상기 혼합 신호를 생성하는 단계는, 상기 아날로그 음성 신호들의 제1 신호를 상기 아날로그 영상 신호의 제1 영역에 부가하는 단계, 및 상기 제1 신호에 대응하는 상기 아날로그 음성 반전 신호들의 제2 신호를 상기 아날로그 영상 신호의 제2 영역에 부가하는 단계를 포함하고, 상기 제1 영역 및 상기 제2 영역은 서로 인접할 수 있다.The mixed signal generating method may further include generating analog negative inverted signals by inverting the analog voice signals, and generating the mixed signal may include converting a first signal of the analog audio signals into the analog video signal. Adding to a first area, and adding a second signal of the analog negative inverted signals corresponding to the first signal to a second area of the analog video signal, wherein the first area and the second area are included. The regions may be adjacent to each other.

상기 혼합 신호 생성 방법은, 케이블을 이용하여 혼합 신호 수신 장치로 상기 혼합 신호를 전송하는 단계를 더 포함하고, 상기 혼합 신호의 대역폭은 상기 케이블의 최대 전송 대역폭에 기초하여 결정될 수 있다.The mixed signal generating method may further include transmitting the mixed signal to a mixed signal receiving apparatus using a cable, wherein the bandwidth of the mixed signal may be determined based on the maximum transmission bandwidth of the cable.

상기 혼합 신호 생성 장치, 상기 혼합 신호 수신 장치 및 상기 케이블이 폐쇄 회로 시스템에 포함될 수 있다.The mixed signal generating device, the mixed signal receiving device and the cable may be included in a closed circuit system.

상기 아날로그 영상 신호의 해상도는 고화질(High Definition: HD), 풀 HD(full HD: FHD), 초고화질(ultra HD: UHD) 및 4k UHD 중 하나일 수 있다.The resolution of the analog video signal may be one of high definition (HD), full HD (FHD), ultra HD (UHD), and 4k UHD.

상기 혼합 신호 생성 방법은, 영상 촬영 장치로부터 디지털 영상 신호를 수신하는 단계, 및 상기 디지털 영상 신호를 상기 아날로그 영상 신호로 변환하는 단계를 더 포함할 수 있다.The mixed signal generating method may further include receiving a digital video signal from an image capturing apparatus, and converting the digital video signal into the analog video signal.

다른 일 측면에 따른, 혼합 신호 생성 장치는, 혼합 신호를 생성하기 위한 프로그램이 기록된 메모리, 및 상기 프로그램을 수행하는 프로세서를 포함하고, 상기 프로그램은, 타겟 프레임을 나타내는 아날로그 영상 신호에 포함될 아날로그 음성 신호들에 대응하는 디지털 음성 신호의 타겟 샘플들을 결정하는 단계, 상기 타겟 샘플들을 상기 아날로그 음성 신호들로 변환하는 단계, 및 상기 아날로그 음성 신호들을 상기 아날로그 영상 신호의 미리 설정된 영역에 부가함으로써 영상 및 음성의 혼합 신호를 생성하는 단계를 수행할 수 있다.According to another aspect, an apparatus for generating a mixed signal includes a memory in which a program for generating a mixed signal is recorded, and a processor for executing the program, wherein the program includes an analog audio signal to be included in an analog video signal representing a target frame Determining target samples of the digital audio signal corresponding to the signals, converting the target samples into the analog audio signals, and adding the analog audio signals to a preset region of the analog video signal. Generating a mixed signal of may be performed.

상기 프로그램은, 상기 디지털 음성 신호를 획득하는 단계를 더 포함하고, 상기 타겟 샘플들을 결정하는 단계는, 상기 디지털 음성 신호의 샘플들 중 상기 타겟 프레임에 대응하는 상기 타겟 샘플들을 결정하는 단계를 포함할 수 있다.The program further includes acquiring the digital speech signal, and determining the target samples comprises determining the target samples corresponding to the target frame among samples of the digital speech signal. Can be.

상기 프로그램은, 상기 디지털 음성 신호를 획득하는 단계를 더 포함하고, 상기 타겟 샘플들을 결정하는 단계는, 상기 디지털 음성 신호의 샘플들 중 상기 타겟 프레임에 대응하는 상기 타겟 샘플들을 결정하는 단계를 포함할 수 있다.The program further includes acquiring the digital speech signal, and determining the target samples comprises determining the target samples corresponding to the target frame among samples of the digital speech signal. Can be.

상기 아날로그 영상 신호의 미리 설정된 영역은, 수직 귀선 기간(Vertical blanking interval: VBI)의 일부일 수 있다.The preset area of the analog video signal may be part of a vertical blanking interval (VBI).

상기 프로그램은, 상기 아날로그 음성 신호들을 반전시킴으로써 아날로그 음성 반전 신호들을 생성하는 단계를 더 포함하고, 상기 혼합 신호를 생성하는 단계는, 상기 아날로그 음성 신호들의 제1 신호를 상기 아날로그 영상 신호의 제1 영역에 부가하는 단계, 및 상기 제1 신호에 대응하는 상기 아날로그 음성 반전 신호들의 제2 신호를 상기 아날로그 영상 신호의 제2 영역에 부가하는 단계를 포함하고, 상기 제1 영역 및 상기 제2 영역은 서로 인접할 수 있다.The program further includes generating analog negative audio signals by inverting the analog audio signals, wherein generating the mixed signal comprises: converting the first signal of the analog audio signals to a first region of the analog video signal; And adding a second signal of the analog negative inverted signals corresponding to the first signal to a second region of the analog video signal, wherein the first region and the second region are mutually opposite. May be adjacent.

혼합 신호를 생성하는 방법 및 장치가 제공될 수 있다.Methods and apparatus for generating a mixed signal may be provided.

혼합 신호를 전송하는 방법 및 장치가 제공될 수 있다.Methods and apparatus for transmitting mixed signals may be provided.

도 1은 일 예에 따른 혼합 신호를 전송 및 수신하는 시스템의 구성도이다.
도 2는 일 예에 따른 혼합 신호 생성 장치의 개략도이다.
도 3은 일 예에 따른 디지털 영상 신호가 나타내는 프레임을 도시한다.
도 4는 일 예에 따른 아날로그 영상 신호를 도시한다.
도 5는 일 실시예에 따른 영상 및 음성의 혼합 신호 생성 장치의 구성도이다.
도 6은 일 실시예에 따른 영상 및 음성의 혼합 신호를 생성하는 방법의 흐름도이다.
도 7은 일 예에 따른 디지털 음성 신호의 샘플들을 도시한다.
도 8은 일 예에 따른 아날로그 음성 신호들을 생성하는 방법의 흐름도이다.
도 9은 일 예에 따른 초기 아날로그 음성 신호 및 아날로그 음성 신호를 도시한다.
도 10은 일 예에 따른 아날로그 영상 신호의 수직 귀선 기간 내에 아날로그 음성 신호가 부가된 혼합 신호를 도시한다.
도 11은 일 예에 따른 수직 귀선 기간의 수직 라인에 부가된 아날로그 음성 신호이다.
도 12는 일 예에 따른 아날로그 음성 반전 신호들에 기초하여 혼합 영상을 생성하는 방법의 흐름도이다.
도 13는 일 예에 따른 아날로그 음성 신호 및 아날로그 음성 반전 신호를 포함하는 혼합 신호를 도시한다.
1 is a block diagram of a system for transmitting and receiving a mixed signal according to an example.
2 is a schematic diagram of an apparatus for generating a mixed signal according to an example.
3 illustrates a frame represented by a digital video signal according to an example.
4 illustrates an analog video signal according to an example.
5 is a block diagram of an apparatus for generating a mixed signal of video and audio according to an exemplary embodiment.
6 is a flowchart of a method of generating a mixed signal of an image and an audio according to an exemplary embodiment.
7 illustrates samples of a digital voice signal according to an example.
8 is a flowchart of a method of generating analog voice signals according to an example.
9 illustrates an initial analog voice signal and an analog voice signal according to an example.
10 illustrates a mixed signal to which an analog audio signal is added within a vertical retrace period of an analog video signal according to an example.
11 is an analog voice signal added to a vertical line of a vertical retrace period according to an example.
12 is a flowchart of a method of generating a mixed image based on analog voice inversion signals according to an example.
13 illustrates a mixed signal including an analog voice signal and an analog voice inverted signal according to an example.

이하에서, 첨부된 도면을 참조하여 실시예들을 상세하게 설명한다. 그러나, 실시예들에는 다양한 변경이 가해질 수 있어서 특허출원의 권리 범위가 이러한 실시예들에 의해 제한되거나 한정되는 것은 아니다. 실시예들에 대한 모든 변경, 균등물 내지 대체물이 권리 범위에 포함되는 것으로 이해되어야 한다.Hereinafter, exemplary embodiments will be described in detail with reference to the accompanying drawings. However, various changes may be made to the embodiments so that the scope of the patent application is not limited or limited by these embodiments. It is to be understood that all changes, equivalents, and substitutes for the embodiments are included in the scope of rights.

실시예에서 사용한 용어는 단지 설명을 목적으로 사용된 것으로, 한정하려는 의도로 해석되어서는 안된다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 명세서에서, "포함하다" 또는 "가지다" 등의 용어는 명세서 상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.The terminology used herein is for the purpose of description and should not be construed as limiting. Singular expressions include plural expressions unless the context clearly indicates otherwise. In this specification, terms such as "comprise" or "have" are intended to indicate that there is a feature, number, step, action, component, part, or combination thereof described on the specification, and one or more other features. It is to be understood that the present invention does not exclude the possibility of the presence or the addition of numbers, steps, operations, components, components, or a combination thereof.

다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 실시예가 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.Unless defined otherwise, all terms used herein, including technical or scientific terms, have the same meaning as commonly understood by one of ordinary skill in the art. Terms such as those defined in the commonly used dictionaries should be construed as having meanings consistent with the meanings in the context of the related art and shall not be construed in ideal or excessively formal meanings unless expressly defined in this application. Do not.

또한, 첨부 도면을 참조하여 설명함에 있어, 도면 부호에 관계없이 동일한 구성 요소는 동일한 참조부호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다. 실시예를 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 실시예의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다.In addition, in the description with reference to the accompanying drawings, the same components regardless of reference numerals will be given the same reference numerals and duplicate description thereof will be omitted. In the following description of the embodiment, when it is determined that the detailed description of the related known technology may unnecessarily obscure the gist of the embodiment, the detailed description thereof will be omitted.

도 1은 일 예에 따른 혼합 신호를 전송 및 수신하는 시스템의 구성도이다.1 is a block diagram of a system for transmitting and receiving a mixed signal according to an example.

혼합 신호(mixing signal)를 전송 및 수신하는 시스템(100)(이하에서, 혼합 신호를 전송 및 수신하는 시스템은 시스템(100)으로 약술된다)은 혼합 신호 생성 장치(130) 및 혼합 신호 수신 장치(150)를 포함할 수 있다.The system 100 for transmitting and receiving a mixed signal (hereinafter, the system for transmitting and receiving the mixed signal is outlined as the system 100) includes a mixed signal generating device 130 and a mixed signal receiving device ( 150).

혼합 신호 생성 장치(130)는 카메라(110)로부터 영상 신호를 수신한다. 예를 들어, 카메라(110)는 장면을 촬영함으로써 디지털 영상 신호를 생성할 수 있다. 생성된 디지털 영상 신호의 해상도는 고화질(High Definition: HD), 풀 HD(full HD: FHD), 초고화질(ultra HD: UHD) 및 4k UHD 중 하나일 수 있다.The mixed signal generation device 130 receives an image signal from the camera 110. For example, the camera 110 may generate a digital video signal by photographing a scene. The resolution of the generated digital video signal may be one of high definition (HD), full HD (FHD), ultra HD (UHD), and 4k UHD.

혼합 신호 생성 장치(130)는 마이크(120)로부터 음성 신호를 수신한다. 예를 들어, 마이크(120)는 디지털 음성 신호를 생성할 수 있다.The mixed signal generator 130 receives a voice signal from the microphone 120. For example, the microphone 120 may generate a digital voice signal.

일 측면에 따르면, 시스템(100)은 폐쇄 회로 시스템의 일부일 수 있고, 혼합 신호 생성 장치(130) 및 혼합 신호 수신 장치(150)는 케이블(140)을 통해 신호를 교환할 수 있다. 예를 들어, 케이블(140)은 동축 케이블일 수 있다. 폐쇄 회로 시스템은 불특정 다수에게 영상 신호를 전송 및 수신하는 개- 회로(open circuit) 시스템과 다르게 특정의 목적을 위해 특정 사용자에게 영상 신호를 전달할 수 있다. 실시예에 따라, 신호의 보안성 및 정확성을 위해 아날로그 전송 방식이 이용될 수 있다. 폐쇄 회로 시스템에서 전송에 이용되는 신호는 콤포지트 신호(composite signal)일 수 있다.According to one aspect, the system 100 may be part of a closed circuit system, and the mixed signal generation device 130 and the mixed signal receiving device 150 may exchange signals via the cable 140. For example, the cable 140 may be a coaxial cable. Closed circuit systems, unlike open circuit systems that transmit and receive video signals to an unspecified number, may deliver video signals to specific users for specific purposes. According to an embodiment, an analog transmission scheme may be used for the security and accuracy of the signal. The signal used for transmission in a closed circuit system may be a composite signal.

케이블을 통해 아날로그 신호를 전송하는 경우, 하나의 채널은 하나의 신호만을 전송할 수 있다. 음성 신호 및 영상 신호를 분리하여 전송하는 경우에는 적어도 두 개의 채널들이 필요하다. 음성 신호 및 영상 신호가 하나의 신호로 결합되는 경우, 하나의 채널만이 사용되는 장점이 있다. 아래에서, 도 2 내지 도 12를 참조하여 음성 신호 및 영상 신호가 결합된 혼합 신호를 생성 및 전송하는 방법에 대해 상세히 설명된다.When transmitting an analog signal through a cable, one channel can transmit only one signal. At least two channels are required for separately transmitting an audio signal and a video signal. When the audio signal and the video signal are combined into one signal, only one channel is used. Hereinafter, a method of generating and transmitting a mixed signal combining a voice signal and a video signal will be described in detail with reference to FIGS. 2 to 12.

도 2는 일 예에 따른 혼합 신호 생성 장치의 개략도이다.2 is a schematic diagram of an apparatus for generating a mixed signal according to an example.

혼합 신호 생성 장치(200)는 신호 분리기(210), 타이밍 제어기(220), 휘도 처리기(230), 색차 처리기(240), 부반송파 발생기(250), 변조기(260), 주파수 변환기(270), 음성 신호 처리기(280) 및 DAC(digital analog converter)(290)를 포함한다. 신호 분리기(210), 타이밍 제어기(220), 휘도 처리기(230), 색차 처리기(240), 부반송파 발생기(250), 변조기(260), 주파수 변환기(270), 음성 신호 처리기(280) 및 DAC(290)의 각각은 물리적인 장치 또는 소프트웨어에 의해 구현될 수 있다.The mixed signal generator 200 includes a signal separator 210, a timing controller 220, a luminance processor 230, a color difference processor 240, a subcarrier generator 250, a modulator 260, a frequency converter 270, and a voice. A signal processor 280 and a digital analog converter (DAC) 290. Signal separator 210, timing controller 220, luminance processor 230, chrominance processor 240, subcarrier generator 250, modulator 260, frequency converter 270, speech signal processor 280 and DAC ( Each of 290 may be implemented by a physical device or software.

신호 분리기(210)는 디지털의 영상 신호를 휘도 신호, 색차 신호 및 타이밍 신호로 분리할 수 있다.The signal separator 210 may separate a digital image signal into a luminance signal, a color difference signal, and a timing signal.

타이밍 제어기(220)는 타이밍 신호가 아날로그 영상 신호의 수직 기준 신호 및 수평 기준 신호를 포함할 수 있도록 수직 기준 신호 및 수평 기준 신호를 생성할 수 있다.The timing controller 220 may generate a vertical reference signal and a horizontal reference signal so that the timing signal may include a vertical reference signal and a horizontal reference signal of the analog image signal.

휘도 처리기(230)는 YCBCR 도메인의 컬러 공간을 YUV 도메인으로 변환할 수 있다. 변환된 휘도 신호는 샘플링 주파수의 전 영역에 걸쳐서 존재할 수 있다. 타이밍 신호 및 변환된 휘도 신호를 병합함으로써 제1 신호가 생성된다.The luminance processor 230 may convert the color space of the YCBCR domain into the YUV domain. The converted luminance signal may exist over the entire region of the sampling frequency. The first signal is generated by merging the timing signal and the converted luminance signal.

색차 처리기(240)는 YCBCR 도메인의 컬러 공간을 YUV 도메인의 색차 신호로 변환할 수 있다.The color difference processor 240 may convert the color space of the YCBCR domain into the color difference signal of the YUV domain.

부반송파(sub-carrier) 발생기(250)는 부반송파를 생성한다. 부반송파의 주파수는 주파수 간삽법(frequency interleaving)에 따라 미리 설정된 주파수일 수 있다. 예를 들어, 부반송파의 주파수는 10MHz이상 일 수 있다. The subcarrier generator 250 generates a subcarrier. The frequency of the subcarrier may be a preset frequency according to frequency interleaving. For example, the frequency of the subcarrier may be 10 MHz or more.

변조기(260)는 부반송파를 이용하여 색차 신호를 변조할 수 있다. 변조된 색차 신호는 부반송파를 중심으로하는 미리 설정된 크기의 대역폭 내에 포함될 수 있다. 부반송파 및 변조된 색차 신호를 병합함으로써 제2 신호가 생성된다.The modulator 260 may modulate the color difference signal using subcarriers. The modulated color difference signal may be included in a bandwidth of a preset size centered on the subcarrier. The second signal is generated by merging the subcarriers and the modulated chrominance signal.

주파수 변환기(270)는 음성 신호를 샘플링함으로써 디지털 음성 신호를 생성한다. 디지털 음성 신호는 복수의 샘플들을 포함한다. 예를 들어, 샘플링 레이트는 8000 또는 16000일 수 있다. 즉, 1초 길이의 음성 신호에 대해 8000개 또는 16000의 샘플들이 생성될 수 있다.The frequency converter 270 generates a digital speech signal by sampling the speech signal. The digital speech signal includes a plurality of samples. For example, the sampling rate may be 8000 or 16000. That is, 8000 or 16000 samples may be generated for a 1 second long speech signal.

음성 신호 처리기(280)는 아날로그 영상 신호에 포함될 샘플들을 아날로그 음성 신호에 대응하는 제3 신호로 변환한다.The audio signal processor 280 converts the samples to be included in the analog video signal into a third signal corresponding to the analog audio signal.

DAC(290)는 제1 신호, 제2 신호 및 제3 신호가 병합된 신호를 아날로그 신호로 변환함으로써 혼합 신호를 생성한다.The DAC 290 generates a mixed signal by converting a signal in which the first signal, the second signal, and the third signal are merged into an analog signal.

아래에서, 도 5 내지 도 12를 참조하여 혼합 신호를 생성하는 방법이 상세히 설명된다.In the following, a method of generating a mixed signal is described in detail with reference to FIGS. 5 to 12.

도 3은 일 예에 따른 디지털 영상 신호가 나타내는 프레임을 도시한다.3 illustrates a frame represented by a digital video signal according to an example.

디지털 영상 신호는 하나의 프레임(300)을 나타낼 수 있다. 프레임(300)은 복수의 픽셀들이 동시에 표현하는 장면에 대응한다. 프레임(300)은 수직 방향으로는 라인들을 포함할 수 있고, 수평 방향으로는 블랭크 및 액티브를 포함할 수 있다. 도 3의 빗금 처리된 영역은 액티브 영역일 수 있다.The digital video signal may represent one frame 300. The frame 300 corresponds to a scene represented by a plurality of pixels at the same time. The frame 300 may include lines in the vertical direction and may include blanks and actives in the horizontal direction. The hatched area of FIG. 3 may be an active area.

수평 방향에서, 블랭크는 EAV(End of Active Video signal) 내지 SAV(Start of Active Video signal)를 의미할 수 있다. 하나의 라인에서 블랭크 길이는 블랭크가 포함하는 샘플들의 개수에 의해 조절될 수 있다. 블랭크 길이가 감소되는 경우, 액티브의 주기가 짧아질 수 있다.In the horizontal direction, a blank may mean an end of active video signal (EAV) to a start of active video signal (SAV). The blank length in one line can be adjusted by the number of samples the blank contains. When the blank length is reduced, the period of active can be shortened.

디지털 영상 신호의 제1 디지털 타이밍이 제2 디지털 타이밍으로 변환되는 경우에도 라인들의 개수는 변하지 않을 수 있다. 예를 들어, 블랭크 샘플들의 개수가 변환되는 경우에도 디지털 영상 신호의 총 라인들의 개수는 750이고, 액티브 라인들은 개수는 720일 수 있다.Even when the first digital timing of the digital video signal is converted to the second digital timing, the number of lines may not change. For example, even when the number of blank samples is converted, the total number of lines of the digital image signal may be 750, and the number of active lines may be 720.

일 실시예에 따르면, 액티브 라인들의 개수가 720인 경우 하나의 라인의 액티브의 샘플들의 개수는 1280일 수 있다. 도 3은 수직 방향의 라인들의 개수가 750인 디지털 영상 신호의 사양을 도시하였으나, 도 3에 관한 설명은 수직 방향의 라인들의 개수가 1125인 디지털 영상 신호의 사양 및 수직 방향의 라인들의 개수가 1250인 디지털 영상 신호의 사양에도 유사하게 변형되어 적용될 수 있다.According to an embodiment, when the number of active lines is 720, the number of active samples of one line may be 1280. Although FIG. 3 illustrates the specification of the digital video signal in which the number of vertical lines is 750, the description of FIG. 3 illustrates the specification of the digital video signal in which the number of vertical lines is 1125 and the number of lines in the vertical direction is 1250. The modified digital video signal may be similarly modified and applied.

예를 들어, 수직 방향의 라인들의 개수가 1125 또는 1250인 디지털 영상 신호의 액티브 라인들의 개수는 1080일 수 있다. 액티브 라인들의 개수가 1080인 경우 하나의 라인의 액티브의 샘플들의 개수는 1920일 수 있다.For example, the number of active lines of the digital image signal in which the number of vertical lines is 1125 or 1250 may be 1080. When the number of active lines is 1080, the number of active samples of one line may be 1920. FIG.

도 4는 일 예에 따른 아날로그 영상 신호를 도시한다.4 illustrates an analog video signal according to an example.

예를 들어, 도시된 아날로그 영상 신호(400)는 도 3에 도시된 프레임(300)에 대응하는 아날로그 신호일 수 있다. 아날로그 영상 신호(400)는 750 라인들을 포함한다. 라인들은 프레임(300)의 상단으로부터 프레임(300)의 하단으로의 라인들일 수 있다. 즉, 라인 1은 프레임(300)의 가장 상단의 라인일 수 있다.For example, the illustrated analog image signal 400 may be an analog signal corresponding to the frame 300 illustrated in FIG. 3. The analog video signal 400 includes 750 lines. The lines may be lines from the top of the frame 300 to the bottom of the frame 300. That is, line 1 may be the top line of the frame 300.

라인 1 내지 5는 서레이션 펄스(serration pulse)들 일 수 있다. 서레이션 펄스는 수직 동기 펄스일 수 있다.Lines 1 to 5 may be serration pulses. The serration pulse may be a vertical sync pulse.

라인 6 내지 10은 후치 이퀄라이징 펄스(equalizing pulse)들 일 수 있다. 이퀄라이징 펄스는 비월 주사를 정확하게 하기 위해 사용되는 펄스일 수 있다. 라인 746 내지 750은 전치 이퀄라이징 펄스들 일 수 있다.Lines 6 through 10 may be post equalizing pulses. The equalizing pulse may be a pulse used to make interlaced scans accurate. Lines 746 through 750 may be pre-equalizing pulses.

라인 11 내지 25는 수직 귀선 기간(Vertical Blanking Interval; VBI)일 수 있다.Lines 11 to 25 may be a vertical blanking interval (VBI).

라인 26 내지 745는 액티브 라인(active line)들 일 수 있다. 액티브 라인들에 실제의 영상 신호가 포함될 수 있다.Lines 26 through 745 may be active lines. The active lines may include the actual video signal.

도 4는 수직 방향의 라인들의 개수가 750인 타이밍 사양을 도시하였으나, 도 4에 관한 설명은 수직 방향의 라인들의 개수가 1125인 타이밍 사양 및 수직 방향의 라인들의 개수가 1250인 타이밍 사양에도 유사하게 변형되어 적용될 수 있다.Although FIG. 4 illustrates a timing specification in which the number of lines in the vertical direction is 750, the description of FIG. 4 is similar to the timing specification in which the number of lines in the vertical direction is 1125 and a timing specification in which the number of lines in the vertical direction is 1250. It can be modified and applied.

예를 들어, 수직 방향의 라인들의 개수가 1125인 경우 라인 1 내지 5는 서레이션 펄스들, 라인 6 내지 10은 후치 이퀄라이징 펄스들, 라인 11 내지 40은 수직 귀선 기간, 라인 41 내지 1120은 액티브 라인들 및 라인 1121 내지 1125는 전치 이퀄라이징 펄스들일 수 있다.For example, if the number of lines in the vertical direction is 1125, lines 1 to 5 are serration pulses, lines 6 to 10 are post-equalizing pulses, lines 11 to 40 are vertical retrace periods, and lines 41 to 1120 are active lines. And lines 1121-1125 can be pre-equalizing pulses.

다른 예로, 수직 방향의 라인들의 개수가 1250인 경우 라인 1 내지 5는 서레이션 펄스들, 라인 6 내지 10은 후치 이퀄라이징 펄스들, 라인 11 내지 165는 수직 귀선 기간, 라인 166 내지 1245는 액티브 라인들 및 라인 1246 내지 1250은 전치 이퀄라이징 펄스들일 수 있다.As another example, when the number of lines in the vertical direction is 1250, lines 1 to 5 are serration pulses, lines 6 to 10 are post-equalizing pulses, lines 11 to 165 are vertical retrace periods, and lines 166 to 1245 are active lines. And lines 1246-1250 can be pre-equalizing pulses.

도 5는 일 실시예에 따른 영상 및 음성의 혼합 신호 생성 장치의 구성도이다.5 is a block diagram of an apparatus for generating a mixed signal of video and audio according to an exemplary embodiment.

혼합 신호 생성 장치(500)는 통신부(510), 프로세서(520) 및 메모리(530)를 포함한다. 예를 들어, 혼합 신호 생성 장치(500)는 도 1을 참조하여 전술된 혼합 신호 생성 장치(130) 또는 혼합 신호 생성 장치(200)에 대응한다.The mixed signal generator 500 includes a communication unit 510, a processor 520, and a memory 530. For example, the mixed signal generator 500 may correspond to the mixed signal generator 130 or the mixed signal generator 200 described above with reference to FIG. 1.

통신부(510)는 프로세서(520) 및 메모리(530)와 연결되어 데이터를 송수신한다. 통신부(510)는 외부의 다른 장치와 연결되어 데이터를 송수신할 수 있다. 이하에서 "A"를 송수신한다라는 표현은 "A를 나타내는 정보(information) 또는 데이터"를 송수신하는 것을 나타낼 수 있다.The communication unit 510 is connected to the processor 520 and the memory 530 to transmit and receive data. The communication unit 510 may be connected to another external device to transmit and receive data. Hereinafter, the expression “transmitting / receiving“ A ”may refer to transmitting / receiving“ information or data indicating A ”.

통신부(510)는 혼합 신호 생성 장치(500) 내의 회로망(circuitry)으로 구현될 수 있다. 예를 들어, 통신부(510)는 내부 버스(internal bus) 및 외부 버스(external bus)를 포함할 수 있다. 다른 예로, 통신부(510)는 혼합 신호 생성 장치(500)와 외부의 장치를 연결하는 요소일 수 있다. 통신부(510)는 인터페이스(interface)일 수 있다. 통신부(510)는 외부의 장치로부터 데이터를 수신하여, 프로세서(520) 및 메모리(530)에 데이터를 전송할 수 있다.The communication unit 510 may be implemented as a circuit in the mixed signal generation device 500. For example, the communication unit 510 may include an internal bus and an external bus. As another example, the communication unit 510 may be an element connecting the mixed signal generation device 500 and an external device. The communication unit 510 may be an interface. The communication unit 510 may receive data from an external device and transmit data to the processor 520 and the memory 530.

프로세서(520)는 통신부(510)가 수신한 데이터 및 메모리(530)에 저장된 데이터를 처리한다. "프로세서"는 목적하는 동작들(desired operations)을 실행시키기 위한 물리적인 구조를 갖는 회로를 가지는 하드웨어로 구현된 데이터 처리 장치일 수 있다. 예를 들어, 목적하는 동작들은 프로그램에 포함된 코드(code) 또는 인스트럭션들(instructions)을 포함할 수 있다. 예를 들어, 하드웨어로 구현된 데이터 처리 장치는 마이크로프로세서(microprocessor), 중앙 처리 장치(central processing unit), 프로세서 코어(processor core), 멀티-코어 프로세서(multi-core processor), 멀티프로세서(multiprocessor), ASIC(Application-Specific Integrated Circuit), FPGA(Field Programmable Gate Array)를 포함할 수 있다.The processor 520 processes data received by the communication unit 510 and data stored in the memory 530. A "processor" may be a data processing device implemented in hardware having circuitry having a physical structure for performing desired operations. For example, desired operations may include code or instructions included in a program. For example, data processing devices implemented in hardware may include a microprocessor, a central processing unit, a processor core, a multi-core processor, and a multiprocessor. , An application-specific integrated circuit (ASIC), and a field programmable gate array (FPGA).

프로세서(520)는 메모리(예를 들어, 메모리(530))에 저장된 컴퓨터로 읽을 수 있는 코드(예를 들어, 소프트웨어) 및 프로세서(520)에 의해 유발된 인스트럭션들을 실행한다.Processor 520 executes computer readable code (eg, software) stored in memory (eg, memory 530) and instructions caused by processor 520.

메모리(530)는 통신부(510)가 수신한 데이터 및 프로세서(520)가 처리한 데이터를 저장한다. 예를 들어, 메모리(530)는 프로그램(또는 어플리케이션, 소프트웨어)을 저장할 수 있다. 저장되는 프로그램은 혼합 영상을 생성할 수 있도록 코딩되어 프로세서(520)에 의해 실행 가능한 신텍스(syntax)들의 집합일 수 있다.The memory 530 stores data received by the communication unit 510 and data processed by the processor 520. For example, the memory 530 may store a program (or an application or software). The stored program may be a set of syntaxes that are coded to generate a mixed image and executable by the processor 520.

일 측면에 따르면, 메모리(530)는 하나 이상의 휘발성 메모리, 비휘발성 메모리 및 RAM(Random Access Memory), 플래시 메모리, 하드 디스크 드라이브 및 광학 디스크 드라이브를 포함할 수 있다.According to one aspect, the memory 530 may include one or more volatile memory, nonvolatile memory and random access memory (RAM), flash memory, hard disk drive, and optical disk drive.

메모리(530)는 혼합 신호 생성 장치(500)를 동작 시키는 명령어 세트(예를 들어, 소프트웨어)를 저장한다. 혼합 신호 생성 장치(500)를 동작 시키는 명령어 세트는 프로세서(520)에 의해 실행된다.The memory 530 stores a set of instructions (eg, software) for operating the mixed signal generator 500. The instruction set for operating the mixed signal generation device 500 is executed by the processor 520.

통신부(510), 프로세서(520) 및 메모리(530)에 대해, 아래에서 도 6 내지 도 12를 참조하여 상세히 설명된다.The communication unit 510, the processor 520, and the memory 530 are described in detail with reference to FIGS. 6 to 12 below.

도 6은 일 실시예에 따른 영상 및 음성의 혼합 신호를 생성하는 방법의 흐름도이다.6 is a flowchart of a method of generating a mixed signal of an image and an audio according to an exemplary embodiment.

아래의 단계들(610 내지 660)은 도 5를 참조하여 전술된 혼합 신호 생성 장치(500)에 의해 수행된다.Steps 610 to 660 below are performed by the mixed signal generation apparatus 500 described above with reference to FIG. 5.

단계(610)에서, 혼합 신호 생성 장치(500)는 디지털 영상 신호를 획득한다. 예를 들어, 혼합 신호 생성 장치(500)는 카메라(110)로부터 디지털 영상 신호를 수신할 수 있다. 디지털 영상 신호의 해상도는 HD, FHD, UHD 및 4k UHD 중 하나일 수 있다. 디지털 영상 신호는 타겟 프레임에 대응하는 신호일 수 있다.In operation 610, the mixed signal generating apparatus 500 obtains a digital image signal. For example, the mixed signal generation apparatus 500 may receive a digital image signal from the camera 110. The resolution of the digital video signal may be one of HD, FHD, UHD, and 4k UHD. The digital video signal may be a signal corresponding to the target frame.

단계(620)에서, 혼합 신호 생성 장치(500)는 디지털 영상 신호를 아날로그 영상 신호로 변환한다. 아날로그 영상 신호의 해상도는 HD, FHD, UHD 및 4k UHD 중 하나일 수 있다. 디지털 영상 신호를 아날로그 영상 신호로 변환하기 위한 과정이 아래에서 설명된다.In operation 620, the mixed signal generating apparatus 500 converts the digital video signal into an analog video signal. The resolution of the analog video signal may be one of HD, FHD, UHD, and 4k UHD. A process for converting a digital video signal into an analog video signal is described below.

혼합 신호 생성 장치(500)는 디지털 영상 신호를 타이밍 신호, 휘도 신호 및 색차 신호로 분리할 수 있다. 타이밍 신호는 디지털 영상 신호가 아날로그 영상 신호로 변환되는 경우 아날로그 영상 신호의 싱크에 관한 신호이다. 타이밍 신호는 동기화 신호일 수 있다. 타이밍 신호는 아날로그 영상 신호의 수직 싱크 및 수평 싱크 중 적어도 하나를 포함할 수 있다.The mixed signal generator 500 may separate the digital image signal into a timing signal, a luminance signal, and a color difference signal. The timing signal is a signal related to the sync of the analog video signal when the digital video signal is converted into the analog video signal. The timing signal may be a synchronization signal. The timing signal may include at least one of vertical sync and horizontal sync of the analog video signal.

혼합 신호 생성 장치(500)는 휘도 신호를 휘도 주파수 신호로 변환할 수 있다. 변환된 휘도 주파수 신호는 제1 주파수 대역을 가질 수 있다. 혼합 신호 생성 장치(500)는 휘도 필터를 사용하여 휘도 신호를 휘도 주파수 신호로 변환할 수 있다. 영상 신호에서 분리된 휘도 주파수 신호는 휘도 신호에 기반하여 생성될 수 있다. 영상 신호에서 분리된 휘도 주파수 신호는 주파수의 전 영역에 존재할 수 있다. 휘도 필터는 휘도 주파수 신호를 제1 주파수 대역을 갖는 휘도 주파수 신호로 변환할 수 있다. 예를 들어, 휘도 필터는 제1 주파수를 컷-오프(cut-off) 주파수로 가지는 로-패스(low pass) 필터일 수 있다. 제1 주파수는 표준 방식의 채널 대역폭에 비해 더 클 수 있다. 예를 들어, 제1 주파수는 10MHz 또는 10MHz 이상일 수 있다.The mixed signal generator 500 may convert the luminance signal into a luminance frequency signal. The converted luminance frequency signal may have a first frequency band. The mixed signal generator 500 may convert a luminance signal into a luminance frequency signal using a luminance filter. The luminance frequency signal separated from the image signal may be generated based on the luminance signal. The luminance frequency signal separated from the image signal may exist in all regions of the frequency. The luminance filter may convert the luminance frequency signal into a luminance frequency signal having a first frequency band. For example, the luminance filter may be a low pass filter having the first frequency as the cut-off frequency. The first frequency may be larger than the channel bandwidth of the standard scheme. For example, the first frequency may be 10 MHz or 10 MHz or more.

혼합 신호 생성 장치(500)는 색차 신호를 색차 주파수 신호로 변환할 수 있다. 변환된 색차 주파수 신호는 제2 주파수 대역을 가질 수 있다. 혼합 신호 생성 장치(500)는 색차 필터를 사용하여 색차 신호를 색차 주파수 신호로 변환할 수 있다. 영상 신호에서 분리된 색차 주파수 신호는 색차 신호에 기반하여 생성될 수 있다. 영상 신호에서 분리된 색차 주파수 신호는 주파수의 전 영역에 존재할 수 있다. 색차 필터는 색차 주파수 신호를 제2 주파수 대역을 갖는 색차 주파수 신호로 변환할 수 있다. 예를 들어, 색차 필터는 제2 주파수를 컷-오프 주파수로 가지는 로-패스 필터일 수 있다. 제2 주파수는 제1 주파수에 비해 더 작을 수 있다. 예를 들어, 제2 주파수는 2MHz 이하일 수 있다.The mixed signal generator 500 may convert a color difference signal into a color difference frequency signal. The converted color difference frequency signal may have a second frequency band. The mixed signal generator 500 may convert a color difference signal into a color difference frequency signal using a color difference filter. The color difference frequency signal separated from the image signal may be generated based on the color difference signal. The color difference frequency signal separated from the image signal may exist in the entire region of the frequency. The color difference filter may convert a color difference frequency signal into a color difference frequency signal having a second frequency band. For example, the color difference filter may be a low-pass filter having a second frequency as the cut-off frequency. The second frequency may be smaller than the first frequency. For example, the second frequency may be 2 MHz or less.

혼합 신호 생성 장치(500)는 부반송파를 이용하여 색차 주파수 신호를 변조할 수 있다. 예를 들어, 혼합 신호 생성 장치(500)는 부반송파를 이용하여 색차 주파수 신호를 제3 주파수 대역을 갖도록 색차 주파수 신호를 변조할 수 있다. 변조된 색차 주파수 신호가 제3 주파수 대역을 갖는 경우, 부반송파의 주파수는 제2 주파수 대역의 중간 주파수 일 수 있다. 예를 들어, 제3 주파수 대역이 11 내지 13 MHz인 경우, 부반송파의 주파수는 12MHz일 수 있다. 부반송파의 주파수는 주파수 간삽법을 이용하여 설정될 수 있다.The mixed signal generating apparatus 500 may modulate the color difference frequency signal using the subcarrier. For example, the mixed signal generator 500 may modulate the chrominance frequency signal so that the chrominance frequency signal has a third frequency band by using a subcarrier. When the modulated chrominance frequency signal has a third frequency band, the frequency of the subcarrier may be an intermediate frequency of the second frequency band. For example, when the third frequency band is 11 to 13 MHz, the frequency of the subcarrier may be 12 MHz. The frequency of the subcarrier can be set using frequency interpolation.

혼합 신호 생성 장치(500)는 휘도 주파수 신호 및 변조된 색차 주파수 신호를 이용하여 변조 영상 신호를 생성할 수 있다. 예를 들어, 혼합 신호 생성 장치(500)는 휘도 주파수 신호, 변조된 색차 주파수 신호 및 타이밍 신호를 이용하여 변조 영상 신호를 생성할 수 있다. 일 측면에 따르면, 혼합 신호 생성 장치(500)는 휘도 주파수 신호 및 변조된 색차 신호를 다중화(multiplexing)함으로써 변조 영상 신호를 생성할 수 있다.The mixed signal generator 500 may generate a modulated image signal using the luminance frequency signal and the modulated color difference frequency signal. For example, the mixed signal generator 500 may generate a modulated image signal using a luminance frequency signal, a modulated color difference frequency signal, and a timing signal. According to an aspect, the mixed signal generator 500 may generate a modulated image signal by multiplexing the luminance frequency signal and the modulated color difference signal.

혼합 신호 생성 장치(500)는 변조 영상 신호를 아날로그 영상 신호로 변환할 수 있다. 아날로그 영상 신호의 대역폭은 케이블의 최대 전송 대역폭에 기초하여 결정될 수 있다.The mixed signal generator 500 may convert a modulated video signal into an analog video signal. The bandwidth of the analog video signal may be determined based on the maximum transmission bandwidth of the cable.

단계들(630 내지 650)은 전술된 단계들(610 및 620)과 병렬적으로 수행될 수 있다.Steps 630 through 650 may be performed in parallel with steps 610 and 620 described above.

단계(630)에서, 혼합 신호 생성 장치(500)는 디지털 음성 신호를 획득한다. 예를 들어, 혼합 신호 생성 장치(500)는 마이크(120)로부터 디지털 음성 신호를 수신할 수 있다.In operation 630, the mixed signal generator 500 obtains a digital voice signal. For example, the mixed signal generator 500 may receive a digital voice signal from the microphone 120.

단계(640)에서, 혼합 신호 생성 장치(500)는 디지털 음성 신호의 샘플들 중 타겟 샘플들을 결정한다. 타겟 샘플들은 아날로그 영상 신호에 포함될 샘플일 수 있다. 즉, 타겟 샘플들은 타겟 프레임에 대응하는 샘플들일 수 있다. 디지털 음성 신호의 샘플들 중 타겟 샘플들을 결정하는 방법에 대해, 아래에서 도 7을 참조하여 상세히 설명된다.In operation 640, the mixed signal generation apparatus 500 determines target samples among samples of the digital speech signal. The target samples may be samples to be included in the analog image signal. That is, the target samples may be samples corresponding to the target frame. A method of determining target samples of samples of the digital speech signal is described in detail with reference to FIG. 7 below.

단계(650)에서, 혼합 신호 생성 장치(500)는 타겟 샘플들을 아날로그 음성 신호들로 변환한다. 타겟 샘플들을 아날로그 음성 신호들로 변환하는 방법에 대해, 도 8 및 9를 참조하여 상세히 설명된다.In step 650, the mixed signal generation apparatus 500 converts the target samples into analog speech signals. A method of converting target samples into analog speech signals is described in detail with reference to FIGS. 8 and 9.

단계(660)에서, 혼합 신호 생성 장치(500)는 아날로그 음성 신호들을 아날로그 영상 신호에 부가함으로써 영상 및 음성의 혼합 신호를 생성한다. 일 실시예에 따르면, 혼합 신호 생성 장치(500)는 아날로그 영상 신호의 미리 설정된 영역에 아날로그 음성 신호들을 부가할 수 있다. 예를 들어, 미리 설정된 영역은 수직 귀선 기간의 일부일 수 있다. 혼합 신호를 생성하는 방법에 대해, 아래에서 도 10 내지 12를 참조하여 상세히 설명한다.In operation 660, the mixed signal generating apparatus 500 generates a mixed signal of video and audio by adding analog audio signals to the analog video signal. According to an embodiment, the mixed signal generating apparatus 500 may add analog audio signals to a preset area of the analog video signal. For example, the preset area may be part of the vertical retrace period. A method of generating the mixed signal will be described in detail with reference to FIGS. 10 to 12 below.

단계(670)에서, 혼합 신호 생성 장치(500)는 생성된 혼합 신호를 혼합 신호 수신 장치로 전송한다. 혼합 신호 수신 장치는 도 1을 참조하여 전술된 혼합 신호 수신 장치(150)에 대응한다. 혼합 신호의 대역폭은 케이블의 최대 전송 대역폭에 기초하여 결정될 수 있다.In operation 670, the mixed signal generating apparatus 500 transmits the generated mixed signal to the mixed signal receiving apparatus. The mixed signal receiving apparatus corresponds to the mixed signal receiving apparatus 150 described above with reference to FIG. 1. The bandwidth of the mixed signal may be determined based on the maximum transmission bandwidth of the cable.

혼합 신호 수신 장치(150)는 혼합 신호를 영상 신호 및 음성 신호로 분리한다. 분리된 영상 신호 및 음성 신호는 모니터 및 스피커를 통해 각각 사용자에게 출력될 수 있다.The mixed signal receiving apparatus 150 separates the mixed signal into a video signal and an audio signal. The separated video and audio signals may be output to the user through the monitor and the speaker, respectively.

도 7은 일 예에 따른 디지털 음성 신호의 샘플들을 도시한다.7 illustrates samples of a digital voice signal according to an example.

도시된 음성 신호(710)는 1초 길이의 음성 신호이다. 예를 들어, 음성 신호(710)는 마이크(120)에 의해 획득될 신호일 수 있다. 마이크(120)는 음성 신호(710)를 수신하여, 음성 신호(710)의 레벨에 대응하는 양자화된 데이터를 생성할 수 있다. 양자화된 데이터는 샘플일 수 있다. 양자화된 데이터는 10비트(bit)일 수 있다. 생성되는 샘플들의 개수는 마이크(120)의 샘플링 레이트에 의해 결정된다. 마이크(120)의 샘플링 레이트가 8000인 경우, 음성 신호(710)에 대해 8000개의 샘플들이 생성된다. 도 7을 참조하여 설명되는 실시예는 샘플링 레이트가 600이다.The illustrated voice signal 710 is a 1 second long voice signal. For example, the voice signal 710 may be a signal to be obtained by the microphone 120. The microphone 120 may receive the voice signal 710 and generate quantized data corresponding to the level of the voice signal 710. The quantized data can be a sample. The quantized data may be 10 bits. The number of samples generated is determined by the sampling rate of the microphone 120. When the sampling rate of the microphone 120 is 8000, 8000 samples are generated for the speech signal 710. In the embodiment described with reference to FIG. 7, the sampling rate is 600.

디지털 음성 신호(720)는 복수의 샘플들을 포함한다. 도시된 디지털 음성 신호(720)는 음성 신호(710)의 길이에 대응하는 복수의 샘플들을 포함한다. 예를 들어, 디지털 음성 신호(720)는 600개의 샘플들을 포함한다.The digital voice signal 720 includes a plurality of samples. The illustrated digital voice signal 720 includes a plurality of samples corresponding to the length of the voice signal 710. For example, the digital voice signal 720 includes 600 samples.

시스템(100) 또는 카메라(110)의 프레임 레이트에 기초하여 디지털 음성 신호(720)의 샘플들 중 타겟 샘플들(721)이 결정될 수 있다. 예를 들어, 프레임 레이트가 30인 경우, 디지털 음성 신호(720)의 샘플들은 30 프레임들에 대응할 수 있다. 평균적으로, 하나의 프레임에는 20개의 샘플들이 대응할 수 있다. 예를 들어, 30개의 프레임들 중 가장 앞의 제1 프레임에 대해 600개의 샘플들 중 가장 앞의 제1 샘플 내지 제30 샘플(731, 732, 733, 734)이 대응한다. 제1 프레임이 타겟 프레임인 경우, 제1 샘플 내지 제30 샘플(731, 732, 733, 734)이 타겟 샘플들(721)로 결정될 수 있다.Target samples 721 of the samples of the digital voice signal 720 may be determined based on the frame rate of the system 100 or the camera 110. For example, if the frame rate is 30, the samples of the digital voice signal 720 may correspond to 30 frames. On average, 20 samples may correspond to one frame. For example, the earliest first to thirtieth samples 731, 732, 733, 734 of 600 samples correspond to the earliest first frame of thirty frames. When the first frame is the target frame, the first to thirtieth samples 731, 732, 733, and 734 may be determined as the target samples 721.

타겟 프레임에 대해 제1 샘플 내지 제30 샘플(731, 732, 733, 734)이 타겟 샘플들(721)로 결정된 경우, 타겟 샘플들(721)이 복수의 그룹들로 구분될 수 있다. 하나의 그룹 내의 샘플들은 수직 귀선 기간 내의 하나의 수직 라인에 부가되는 아날로그 음성 신호에 대응한다. 예를 들어, 제1 그룹(731) 내의 제1 샘플 내지 제5 샘플에 대응하는 제1 아날로그 음성 신호는 수직 귀선 기간의 제1 수직 라인에 부가되고, 제2 그룹(732) 내의 제6 샘플 내지 제10 샘플에 대응하는 제2 아날로그 음성 신호는 수직 귀선 기간의 제2 수직 라인에 부가되며, 제3 그룹(733) 내의 제11 샘플 내지 제15 샘플에 대응하는 제3 아날로그 음성 신호는 수직 귀선 기간의 제3 수직 라인에 부가되고, 제4 그룹(734) 내의 제16 샘플 내지 제20 샘플에 대응하는 제4 아날로그 음성 신호는 수직 귀선 기간의 제4 수직 라인에 부가될 수 있다. 하나의 그룹에 포함되는 샘플들의 개수 및 아날로그 음성 신호가 부가될 아날로그 영상 신호의 수직 라인들의 개수는 실시예에 따라 달라질 수 있다.When the first to thirtieth samples 731, 732, 733, and 734 are determined as the target samples 721 for the target frame, the target samples 721 may be divided into a plurality of groups. Samples in one group correspond to analog voice signals added to one vertical line in the vertical blanking period. For example, the first analog voice signal corresponding to the first to fifth samples in the first group 731 is added to the first vertical line in the vertical retrace period, and the sixth to sixth sample in the second group 732. The second analog voice signal corresponding to the tenth sample is added to the second vertical line of the vertical blanking period, and the third analog voice signal corresponding to the eleventh to fifteenth samples in the third group 733 is the vertical blanking period. A fourth analog voice signal added to the third vertical line of and corresponding to the sixteenth to twentieth samples in the fourth group 734 may be added to the fourth vertical line of the vertical retrace period. The number of samples included in one group and the number of vertical lines of the analog video signal to which the analog audio signal is added may vary according to embodiments.

아래에서 [표 1]을 참조하여 타겟 프레임에 대응하는 타겟 샘플들의 개수가 설명된다.The number of target samples corresponding to the target frame is described below with reference to [Table 1].

샘플링 레이트Sampling rate 8000/초8000 / second 프레임 레이트
(프레임/초)
Frame rate
(Frames / sec)
2525 3030 5050 6060
1 프레임 당Per 1 frame 320320 266.6667266.6667 160160 133.3333133.3333 2 프레임들 당Per 2 frames 640640 533.3333533.3333 320320 266.6667266.6667 3 프레임들 당Per 3 frames 960960 800800 480480 400400 프레임 샘플링 시퀀스Frame sampling sequence 제1 프레임First frame 320320 267267 160160 133133 제2 프레임Second frame 320320 266266 160160 133133 제3 프레임Third frame 320320 267267 160160 134134

샘플링 레이트가 8000/초 이고, 8000개의 샘플들이 프레임 레이트가 25 프레임/초 및 30프레임/초인 경우, 샘플들이 각각의 프레임에 균일하게 분배될 수 있다. 그러나, 프레임 레이트가 30 프레임/초 및 60프레임/초인 경우에는, 샘플들이 각각의 프레임에 균일하게 분배될 수 없다. 이러한 경우, 미리 설정된 규칙에 기초하여 프레임에 포함되는 샘플들을 분배할 수 있다. 예를 들어, 프레임 레이트가 30 프레임/초인 경우, 제1 프레임에 267개의 샘플들, 제2 프레임에 266 개의 샘플들 및 제3 프레임에 267개의 샘플들이 분배될 수 있다.If the sampling rate is 8000 / second and the 8000 samples have frame rates of 25 frames / second and 30 frames / second, the samples may be evenly distributed in each frame. However, when the frame rates are 30 frames / second and 60 frames / second, the samples cannot be evenly distributed in each frame. In this case, the samples included in the frame may be distributed based on a preset rule. For example, when the frame rate is 30 frames / second, 267 samples in the first frame, 266 samples in the second frame, and 267 samples in the third frame may be distributed.

도 8은 일 예에 따른 아날로그 음성 신호들을 생성하는 방법의 흐름도이다.8 is a flowchart of a method of generating analog voice signals according to an example.

도 6을 참조하여 전술된 단계(650)는 아래의 단계들(810 및 820)을 포함한다.Step 650 described above with reference to FIG. 6 includes steps 810 and 820 below.

단계(810)에서, 혼합 신호 생성 장치(500)는 시스템 주파수를 이용하여 타겟 샘플들을 초기 아날로그 음성 신호들로 변환한다. 도 7의 실시예에 따르면, 혼합 신호 생성 장치(500)는 타겟 샘플들(721)의 제1 그룹(731) 내지 제4 그룹(734)을 각각 제1 초기 아날로그 음성 신호 내지 제4 초기 아날로그 음성 신호로 변환할 수 있다.In step 810, the mixed signal generation apparatus 500 converts target samples into initial analog speech signals using the system frequency. According to the embodiment of FIG. 7, the apparatus 500 for generating mixed signals generates the first group 731 to the fourth group 734 of the target samples 721 from the first initial analog voice signal to the fourth initial analog voice, respectively. Can be converted into a signal.

단계(820)에서, 혼합 신호 생성 장치(500)는 초기 아날로그 음성 신호들에 미리 설정된 크기의 직류 전압을 부가하는 바이어싱(biasing)을 수행함으로써 아날로그 음성 신호들을 생성한다. 초기 아날로그 음성 신호에 기초하여 아날로그 음성 신호를 생성하는 방법에 대해, 아래에서 도 9를 참조하여 상세히 설명된다.In operation 820, the mixed signal generating apparatus 500 generates analog voice signals by performing biasing to add a DC voltage having a predetermined magnitude to the initial analog voice signals. A method for generating an analog voice signal based on the initial analog voice signal is described in detail with reference to FIG. 9 below.

도 9은 일 예에 따른 초기 아날로그 음성 신호 및 아날로그 음성 신호를 도시한다.9 illustrates an initial analog voice signal and an analog voice signal according to an example.

초기 아날로그 음성 신호(910)는 최대 범위의 전압 내에서 스윙하는 전압 신호일 수 있다. 예를 들어, 초기 아날로그 음성 신호(910)는 -300mV 내지 300mV의 범위를 갖는 신호일 수 있다.The initial analog voice signal 910 may be a voltage signal swinging within a voltage of the maximum range. For example, the initial analog voice signal 910 may be a signal having a range of -300 mV to 300 mV.

초기 아날로그 음성 신호(910)에 직류 전압이 부가될 수 있다. 예를 들어, 직류 전압은 300mV일 수 있다. 초기 아날로그 음성 신호(910)에 직류 전압이 부가됨으로써 아날로그 음성 신호(920)가 생성된다.DC voltage may be added to the initial analog voice signal 910. For example, the direct current voltage may be 300 mV. The analog voice signal 920 is generated by adding a DC voltage to the initial analog voice signal 910.

도 10은 일 예에 따른 아날로그 영상 신호의 수직 귀선 기간 내에 아날로그 음성 신호가 부가된 혼합 신호를 도시한다.10 illustrates a mixed signal to which an analog audio signal is added within a vertical retrace period of an analog video signal according to an example.

혼합 신호(1000)의 수직 귀선 기간(1010)내에 미리 설정된 영역에 아날로그 음성 신호들(1011, 1012, 1013, 1014)이 부가된다. 아날로그 음성 신호들(1011, 1012, 1013, 1014)의 각각은 서로 다른 신호들이다. 아날로그 음성 신호들(1011, 1012, 1013, 1014)은 혼합 신호(1000)의 아날로그 영상 신호에 대응하는 타겟 프레임이 나타내는 장면에 대응한다.Analog voice signals 1011, 1012, 1013, and 1014 are added to a preset area within the vertical retrace period 1010 of the mixed signal 1000. Each of the analog voice signals 1011, 1012, 1013, 1014 are different signals. The analog audio signals 1011, 1012, 1013, and 1014 correspond to a scene represented by the target frame corresponding to the analog video signal of the mixed signal 1000.

도 11은 일 예에 따른 수직 귀선 기간의 수직 라인에 부가된 아날로그 음성 신호이다.11 is an analog voice signal added to a vertical line of a vertical retrace period according to an example.

예를 들어, 혼합 신호(1000)의 수직 귀선 기간의 첫 번째 수직 라인(예를 들어, 혼합 신호(1000)의 11번째 수직 라인) 내에 아날로그 음성 신호(1011)가 부가된다.For example, an analog speech signal 1011 is added within the first vertical line of the vertical retrace period of the mixed signal 1000 (eg, the eleventh vertical line of the mixed signal 1000).

SAA(Start of Active Audio)는 아날로그 음성 신호(1011)의 기준 레벨을 나타낸다. AAA(Active Audio Area)는 아날로그 음성 신호(1011)가 부가되는 실제 영역일 수 있다. EAA(End of Active Audio)는 아날로그 음성 신호(1011)의 기준 레벨을 나타낸다.Start of Active Audio (SAA) indicates a reference level of the analog voice signal 1011. The active audio area (AAA) may be an actual area to which an analog voice signal 1011 is added. EAA (End of Active Audio) represents the reference level of the analog voice signal 1011.

도 12는 일 예에 따른 아날로그 음성 반전 신호들에 기초하여 혼합 영상을 생성하는 방법의 흐름도이다.12 is a flowchart of a method of generating a mixed image based on analog voice inversion signals according to an example.

단계(650)가 수행된 후, 아래의 단계(1200)가 더 수행될 수 있다.After step 650 is performed, step 1200 below may be further performed.

단계(1200)에서, 혼합 신호 생성 장치(500)는 아날로그 음성 신호들을 반전시킴으로써 아날로그 음성 반전 신호들을 생성한다.In operation 1200, the mixed signal generator 500 generates analog voice inverted signals by inverting analog voice signals.

도 6을 참조하여 전술된 단계(660)는 단계들(1210 및 1220)을 포함할 수 있다.Step 660 described above with reference to FIG. 6 may include steps 1210 and 1220.

단계(1210)에서, 혼합 신호 생성 장치(500)는 아날로그 음성 신호들의 제1 신호를 아날로그 영상 신호의 제1 영역에 부가한다. 예를 들어, 제1 영역은 수직 귀선 기간의 첫 번째 수직 라인(예를 들어, 혼합 신호(1000)의 11번째 수직 라인)일 수 있다.In operation 1210, the mixed signal generating apparatus 500 adds a first signal of the analog audio signals to the first region of the analog video signal. For example, the first region may be the first vertical line of the vertical retrace period (eg, the eleventh vertical line of the mixed signal 1000).

단계(1220)에서, 혼합 신호 생성 장치(500)는 아날로그 음성 신호들의 제1 신호에 대응하는 음성 반전 신호들의 제2 신호를 아날로그 영상 신호의 제2 영역에 부가한다. 제2 신호는 제1 신호를 반전시킨 신호이다. 예를 들어, 제2 영역은 수직 귀선 기간의 두 번째 수직 라인(예를 들어, 혼합 신호(1000)의 12번째 수직 라인)일 수 있다. 제1 영역 및 제2 영역은 서로 인접한 영역들일 수 있다.In operation 1220, the mixed signal generating apparatus 500 adds a second signal of the voice inverted signals corresponding to the first signal of the analog voice signals to the second region of the analog video signal. The second signal is a signal obtained by inverting the first signal. For example, the second region may be a second vertical line of the vertical retrace period (eg, the 12th vertical line of the mixed signal 1000). The first region and the second region may be regions adjacent to each other.

혼합 신호를 수신한 혼합 신호 수신 장치(150)는 아날로그 음성 반전 신호들 및 아날로그 음성 반전 신호들을 추출하고, 아날로그 음성 반전 신호들을 재-반전시키며, 아날로그 음성 반전 신호들 및 재-반전된 아날로그 음성 반전 신호들에 기초하여 최종 아날로그 음성 신호들을 결정한다. 예를 들어, 아날로그 음성 반전 신호들 및 재-반전된 아날로그 음성 반전 신호들을 합산하여 평균을 계산하는 경우, 신호 전송 과정에서 부가된 노이즈가 상쇄된다.The mixed signal receiving apparatus 150 receiving the mixed signal extracts the analog negative inverted signals and the analog negative inverted signals, re-inverts the analog negative inverted signals, and the analog negative inverted signals and the re-inverted analog negative inverted signals. The final analog voice signals are determined based on the signals. For example, when the average is calculated by summing analog negative inverted signals and re-inverted analog negative inverted signals, the added noise is canceled during the signal transmission process.

도 13은 일 예에 따른 아날로그 음성 신호 및 아날로그 음성 반전 신호를 포함하는 혼합 신호를 도시한다.13 illustrates a mixed signal including an analog voice signal and an analog voice inverted signal according to an example.

혼합 신호(1300)의 수직 귀선 기간의 수직 라인들(예를 들어, 11번째 내지 18번째)에 아날로그 음성 신호들(1310, 1330, 1350, 1370) 및 아날로그 음성 반전 신호들(1320, 1340, 1360, 1380)이 부가될 수 있다. 아날로그 음성 신호(1310)가 도 12에서 전술된 제1 신호인 경우, 아날로그 음성 반전 신호(1320)가 제2 신호이다. 아날로그 음성 신호(1310) 및 아날로그 음성 반전 신호(1320)가 한 쌍을 이룬다. 유사하게, 아날로그 음성 신호(1330) 및 아날로그 음성 반전 신호(1340)가 한 쌍을 이루고, 아날로그 음성 신호(1350) 및 아날로그 음성 반전 신호(1360)가 한 쌍을 이루며, 아날로그 음성 신호(1370) 및 아날로그 음성 반전 신호(1380)가 한 쌍을 이룬다.Analog voice signals 1310, 1330, 1350, 1370 and analog voice inverting signals 1320, 1340, 1360 in the vertical lines (eg, eleventh through 18th) of the vertical retrace period of mixed signal 1300. , 1380 may be added. When the analog voice signal 1310 is the first signal described above with reference to FIG. 12, the analog voice inverted signal 1320 is the second signal. The analog voice signal 1310 and the analog voice inversion signal 1320 are paired. Similarly, analog voice signal 1330 and analog voice inversion signal 1340 are paired, analog voice signal 1350 and analog voice inversion signal 1360 are paired, analog voice signal 1370 and Analog negative inversion signal 1380 is paired.

혼합 신호 수신 장치(150)는 각각의 쌍에 대한 최종 아날로그 음성 신호를 결정하고, 최종 아날로그 음성 신호에 기초하여 음성 신호를 사용자에게 출력할 수 있다.The mixed signal receiving apparatus 150 may determine a final analog voice signal for each pair and output a voice signal to a user based on the final analog voice signal.

실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.The method according to the embodiment may be embodied in the form of program instructions that can be executed by various computer means and recorded in a computer readable medium. The computer readable medium may include program instructions, data files, data structures, etc. alone or in combination. The program instructions recorded on the media may be those specially designed and constructed for the purposes of the embodiments, or they may be of the kind well-known and available to those having skill in the computer software arts. Examples of computer-readable recording media include magnetic media such as hard disks, floppy disks, and magnetic tape, optical media such as CD-ROMs, DVDs, and magnetic disks, such as floppy disks. Magneto-optical media, and hardware devices specifically configured to store and execute program instructions, such as ROM, RAM, flash memory, and the like. Examples of program instructions include not only machine code generated by a compiler, but also high-level language code that can be executed by a computer using an interpreter or the like. The hardware device described above may be configured to operate as one or more software modules to perform the operations of the embodiments, and vice versa.

소프트웨어는 컴퓨터 프로그램(computer program), 코드(code), 명령(instruction), 또는 이들 중 하나 이상의 조합을 포함할 수 있으며, 원하는 대로 동작하도록 처리 장치를 구성하거나 독립적으로 또는 결합적으로(collectively) 처리 장치를 명령할 수 있다. 소프트웨어 및/또는 데이터는, 처리 장치에 의하여 해석되거나 처리 장치에 명령 또는 데이터를 제공하기 위하여, 어떤 유형의 기계, 구성요소(component), 물리적 장치, 가상 장치(virtual equipment), 컴퓨터 저장 매체 또는 장치, 또는 전송되는 신호 파(signal wave)에 영구적으로, 또는 일시적으로 구체화(embody)될 수 있다. 소프트웨어는 네트워크로 연결된 컴퓨터 시스템 상에 분산되어서, 분산된 방법으로 저장되거나 실행될 수도 있다. 소프트웨어 및 데이터는 하나 이상의 컴퓨터 판독 가능 기록 매체에 저장될 수 있다.The software may include a computer program, code, instructions, or a combination of one or more of the above, and configure the processing device to operate as desired, or process it independently or collectively. You can command the device. Software and / or data may be any type of machine, component, physical device, virtual equipment, computer storage medium or device in order to be interpreted by or to provide instructions or data to the processing device. Or may be permanently or temporarily embodied in a signal wave to be transmitted. The software may be distributed over networked computer systems so that they may be stored or executed in a distributed manner. Software and data may be stored on one or more computer readable recording media.

이상과 같이 실시예들이 비록 한정된 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기를 기초로 다양한 기술적 수정 및 변형을 적용할 수 있다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.Although the embodiments have been described with reference to the accompanying drawings, those skilled in the art may apply various technical modifications and variations based on the above. For example, the described techniques may be performed in a different order than the described method, and / or components of the described systems, structures, devices, circuits, etc. may be combined or combined in a different form than the described method, or other components. Or even if replaced or substituted by equivalents, an appropriate result can be achieved.

그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 청구범위의 범위에 속한다.Therefore, other implementations, other embodiments, and equivalents to the claims are within the scope of the following claims.

100: 혼합 신호를 전송 및 수신하는 시스템
500: 혼합 신호 생성 장치
510: 통신부
520: 프로세서
530: 메모리
100: system for transmitting and receiving mixed signals
500: mixed signal generator
510: communication unit
520: processor
530: memory

Claims (16)

혼합 신호 생성 장치에 의해 수행되는,
타겟 프레임을 나타내는 아날로그 영상 신호에 포함될 아날로그 음성 신호들에 대응하는 디지털 음성 신호의 타겟 샘플들을 결정하는 단계;
상기 타겟 샘플들을 상기 아날로그 음성 신호들로 변환하는 단계;
상기 아날로그 음성 신호들을 반전시킴으로써 아날로그 음성 반전 신호들을 생성하는 단계; 및
상기 아날로그 음성 신호들 및 아날로그 음성 반전 신호들을 상기 아날로그 영상 신호의 미리 설정된 영역에 부가함으로써 영상 및 음성의 혼합 신호를 생성하는 단계
를 포함하고,
상기 혼합 신호를 생성하는 단계는,
상기 아날로그 음성 신호들의 제1 신호를 상기 아날로그 영상 신호의 제1 영역에 부가하는 단계; 및
상기 제1 신호에 대응하는 상기 아날로그 음성 반전 신호들의 제2 신호를 상기 아날로그 영상 신호의 제2 영역에 부가하는 단계
를 포함하는,
혼합 신호 생성 방법.
Performed by the mixed signal generating device,
Determining target samples of the digital audio signal corresponding to the analog audio signals to be included in the analog video signal representing the target frame;
Converting the target samples into the analog speech signals;
Generating analog negative inverted signals by inverting the analog negative signals; And
Generating a mixed signal of video and audio by adding the analog audio signals and the analog audio inverted signals to a preset area of the analog video signal
Including,
Generating the mixed signal,
Adding a first signal of the analog audio signals to a first region of the analog video signal; And
Adding a second signal of the analog negative inverted signals corresponding to the first signal to a second region of the analog video signal;
Including,
Mixed signal generation method.
제1항에 있어서,
상기 디지털 음성 신호를 획득하는 단계
를 더 포함하고,
상기 타겟 샘플들을 결정하는 단계는,
상기 디지털 음성 신호의 샘플들 중 상기 타겟 프레임에 대응하는 상기 타겟 샘플들을 결정하는 단계
를 포함하는,
혼합 신호 생성 방법.
The method of claim 1,
Acquiring the digital voice signal
More,
Determining the target samples,
Determining the target samples corresponding to the target frame among samples of the digital speech signal
Including,
Mixed signal generation method.
제2항에 있어서,
상기 디지털 음성 신호의 샘플들 중 상기 타겟 프레임에 대응하는 상기 타겟 샘플들을 결정하는 단계는,
시스템의 프레임 레이트에 기초하여 상기 디지털 음성 신호의 샘플들 중 상기 타겟 샘플들을 결정하는 단계
를 포함하는,
혼합 신호 생성 방법.
The method of claim 2,
The determining of the target samples corresponding to the target frame among the samples of the digital speech signal may include:
Determining the target samples of samples of the digital speech signal based on a frame rate of the system
Including,
Mixed signal generation method.
제1항에 있어서,
상기 아날로그 영상 신호의 미리 설정된 영역은, 수직 귀선 기간(Vertical blanking interval: VBI)의 일부인,
혼합 신호 생성 방법.
The method of claim 1,
The preset region of the analog video signal is part of a vertical blanking interval (VBI),
Mixed signal generation method.
제1항에 있어서,
상기 타겟 샘플들을 상기 아날로그 음성 신호들로 변환하는 단계는,
상기 타겟 샘플들을 시스템 주파수를 이용하여 초기 아날로그 음성 신호들로 변환하는 단계; 및
상기 초기 아날로그 음성 신호들에 미리 설정된 크기의 직류 전압을 부가하는 바이어싱을 수행함으로써 상기 아날로그 음성 신호들을 생성하는 단계
를 포함하는,
혼합 신호 생성 방법.
The method of claim 1,
Converting the target samples into the analog voice signals,
Converting the target samples into initial analog speech signals using a system frequency; And
Generating the analog voice signals by performing biasing to add a DC voltage having a predetermined magnitude to the initial analog voice signals.
Including,
Mixed signal generation method.
제1항에 있어서,
상기 제1 영역 및 상기 제2 영역은 서로 인접하는,
혼합 신호 생성 방법.
The method of claim 1,
The first area and the second area are adjacent to each other,
Mixed signal generation method.
제1항에 있어서,
케이블을 이용하여 혼합 신호 수신 장치로 상기 혼합 신호를 전송하는 단계
를 더 포함하고,
상기 혼합 신호의 대역폭은 상기 케이블의 최대 전송 대역폭에 기초하여 결정되는,
혼합 신호 생성 방법.
The method of claim 1,
Transmitting the mixed signal to a mixed signal receiving apparatus using a cable
More,
The bandwidth of the mixed signal is determined based on the maximum transmission bandwidth of the cable,
Mixed signal generation method.
제7항에 있어서,
상기 혼합 신호 생성 장치, 상기 혼합 신호 수신 장치 및 상기 케이블이 폐쇄 회로 시스템에 포함되는,
혼합 신호 생성 방법.
The method of claim 7, wherein
The mixed signal generating device, the mixed signal receiving device and the cable are included in a closed circuit system,
Mixed signal generation method.
제1항에 있어서,
상기 아날로그 영상 신호의 해상도는 고화질(High Definition: HD), 풀 HD(full HD: FHD), 초고화질(ultra HD: UHD) 및 4k UHD 중 하나인,
혼합 신호 생성 방법.
The method of claim 1,
The resolution of the analog video signal is one of high definition (HD), full HD (FHD), ultra HD (UHD), and 4k UHD,
Mixed signal generation method.
제1항에 있어서,
영상 촬영 장치로부터 디지털 영상 신호를 수신하는 단계; 및
상기 디지털 영상 신호를 상기 아날로그 영상 신호로 변환하는 단계
를 더 포함하는,
혼합 신호 생성 방법.
The method of claim 1,
Receiving a digital image signal from an image photographing apparatus; And
Converting the digital video signal into the analog video signal
Further comprising,
Mixed signal generation method.
제1항 내지 제10항 중 어느 한 항의 방법을 수행하는 프로그램을 수록한 컴퓨터 판독 가능 기록 매체.
A computer-readable recording medium containing a program for performing the method of any one of claims 1 to 10.
혼합 신호 생성 장치는,
혼합 신호를 생성하기 위한 프로그램이 기록된 메모리; 및
상기 프로그램을 수행하는 프로세서
를 포함하고,
상기 프로그램은,
타겟 프레임을 나타내는 아날로그 영상 신호에 포함될 아날로그 음성 신호들에 대응하는 디지털 음성 신호의 타겟 샘플들을 결정하는 단계;
상기 타겟 샘플들을 상기 아날로그 음성 신호들로 변환하는 단계;
상기 아날로그 음성 신호들을 반전시킴으로써 아날로그 음성 반전 신호들을 생성하는 단계; 및
상기 아날로그 음성 신호들 및 아날로그 음성 반전 신호들을 상기 아날로그 영상 신호의 미리 설정된 영역에 부가함으로써 영상 및 음성의 혼합 신호를 생성하는 단계
를 수행하고,
상기 혼합 신호를 생성하는 단계는,
상기 아날로그 음성 신호들의 제1 신호를 상기 아날로그 영상 신호의 제1 영역에 부가하는 단계; 및
상기 제1 신호에 대응하는 상기 아날로그 음성 반전 신호들의 제2 신호를 상기 아날로그 영상 신호의 제2 영역에 부가하는 단계
를 포함하는,
혼합 신호 생성 장치.
Mixed signal generation device,
A memory in which a program for generating a mixed signal is recorded; And
A processor that executes the program
Including,
The program,
Determining target samples of the digital audio signal corresponding to the analog audio signals to be included in the analog video signal representing the target frame;
Converting the target samples into the analog speech signals;
Generating analog negative inverted signals by inverting the analog negative signals; And
Generating a mixed signal of video and audio by adding the analog audio signals and the analog audio inverted signals to a preset area of the analog video signal
Then,
Generating the mixed signal,
Adding a first signal of the analog audio signals to a first region of the analog video signal; And
Adding a second signal of the analog negative inverted signals corresponding to the first signal to a second region of the analog video signal;
Including,
Mixed signal generator.
제12항에 있어서,
상기 프로그램은,
상기 디지털 음성 신호를 획득하는 단계
를 더 포함하고,
상기 타겟 샘플들을 결정하는 단계는,
상기 디지털 음성 신호의 샘플들 중 상기 타겟 프레임에 대응하는 상기 타겟 샘플들을 결정하는 단계
를 포함하는,
혼합 신호 생성 장치.
The method of claim 12,
The program,
Acquiring the digital voice signal
More,
Determining the target samples,
Determining the target samples corresponding to the target frame among samples of the digital speech signal
Including,
Mixed signal generator.
삭제delete 제12항에 있어서,
상기 아날로그 영상 신호의 미리 설정된 영역은, 수직 귀선 기간(Vertical blanking interval: VBI)의 일부인,
혼합 신호 생성 장치.
The method of claim 12,
The preset region of the analog video signal is part of a vertical blanking interval (VBI),
Mixed signal generator.
제12항에 있어서,
상기 제1 영역 및 상기 제2 영역은 서로 인접하는,
혼합 신호 생성 장치.
The method of claim 12,
The first area and the second area are adjacent to each other,
Mixed signal generator.
KR1020180115505A 2018-09-28 2018-09-28 Method and apparatus generating mixing signal of video and audio KR102067692B1 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020180115505A KR102067692B1 (en) 2018-09-28 2018-09-28 Method and apparatus generating mixing signal of video and audio
CN201811346759.XA CN110971838B (en) 2018-09-28 2018-11-13 Mixed signal generating method and device of image and sound

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180115505A KR102067692B1 (en) 2018-09-28 2018-09-28 Method and apparatus generating mixing signal of video and audio

Publications (1)

Publication Number Publication Date
KR102067692B1 true KR102067692B1 (en) 2020-01-17

Family

ID=69369886

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180115505A KR102067692B1 (en) 2018-09-28 2018-09-28 Method and apparatus generating mixing signal of video and audio

Country Status (2)

Country Link
KR (1) KR102067692B1 (en)
CN (1) CN110971838B (en)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0713336A2 (en) * 1994-11-18 1996-05-22 Canon Kabushiki Kaisha Video communication system
KR20100084653A (en) * 2007-11-28 2010-07-27 소니 주식회사 Transmitting apparatus, receiving apparatus, communication system, transmitting method, receiving method and programs thereof
JP2012253517A (en) * 2011-06-01 2012-12-20 Miharu Communications Co Ltd Video transmission device
US20150312507A1 (en) * 2012-11-15 2015-10-29 Zhejiang Dahua Technology Co., Ltd. Method and apparatus for sending and receiving audio data

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5164980A (en) * 1990-02-21 1992-11-17 Alkanox Corporation Video telephone system
KR0172464B1 (en) * 1994-09-29 1999-03-20 김광호 Sound information signal transmitter receiver in vertical blanking interval
CN1770256B (en) * 2004-11-02 2010-05-05 北京中科信利技术有限公司 Digital audio frequency mixing method based on transform domain
CN101409779B (en) * 2007-10-12 2012-01-25 联咏科技股份有限公司 Image controller and method for processing image signal
CN101516018B (en) * 2009-03-11 2011-06-22 中兴通讯股份有限公司 Visible telephone and method for realizing karaoke between visible telephones
KR20130001829U (en) * 2011-09-08 2013-03-18 김국현 Converting apparatus of video and audio signal
CN102724519B (en) * 2012-05-16 2014-03-12 浙江大华技术股份有限公司 Method and device for high-definition digital video signal transmission, and camera and acquisition equipment
CN104796659A (en) * 2014-01-17 2015-07-22 上海屹芯微电子有限公司 Video signal transmission method and transmission system
KR101539543B1 (en) * 2014-12-17 2015-07-24 (주) 넥스트칩 Method and apparatus for receiving video signal
CN105516859B (en) * 2015-11-27 2019-04-16 深圳Tcl数字技术有限公司 Eliminate the method and system of echo
CN107872681A (en) * 2017-10-26 2018-04-03 杭州雄迈集成电路技术有限公司 A kind of device and method using composite video signal base band transmission audio signal

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0713336A2 (en) * 1994-11-18 1996-05-22 Canon Kabushiki Kaisha Video communication system
KR20100084653A (en) * 2007-11-28 2010-07-27 소니 주식회사 Transmitting apparatus, receiving apparatus, communication system, transmitting method, receiving method and programs thereof
JP2012253517A (en) * 2011-06-01 2012-12-20 Miharu Communications Co Ltd Video transmission device
US20150312507A1 (en) * 2012-11-15 2015-10-29 Zhejiang Dahua Technology Co., Ltd. Method and apparatus for sending and receiving audio data

Also Published As

Publication number Publication date
CN110971838B (en) 2022-05-27
CN110971838A (en) 2020-04-07

Similar Documents

Publication Publication Date Title
US20120300124A1 (en) Signal transmission apparatus, signal transmission method, signal reception apparatus, signal reception method, and signal transmission system
US20130010187A1 (en) Signal transmitting device, signal transmitting method, signal receiving device, signal receiving method, and signal transmission system
US20200204831A1 (en) Encoding apparatus, decoding apparatus and transmission control method
US8982959B2 (en) Signal transmission apparatus, signal transmission method, signal reception apparatus, signal reception method, and signal transmission system
US9232204B2 (en) Method and device for transmitting high-definition video signal
JP2009010821A (en) Imaging device and imaging method, recording medium, and program
US9071375B2 (en) Signal transmitting apparatus, signal transmitting method, signal receiving apparatus, signal receiving method, and signal transmission system
US20110205428A1 (en) Transmission apparatus, transmission method, reception apparatus, reception method and signal transmission system
EP3883238A1 (en) Method and apparatus for simultaneously switching audio stream and video stream
US20160088320A1 (en) Signal processing apparatus, signal processing method, program, and signal transmission system
JP2009010823A (en) Image processing device and image processing method, recording medium, and program
KR101440260B1 (en) Method and apparatus for trasmitting and receiving video signal
KR102067692B1 (en) Method and apparatus generating mixing signal of video and audio
KR101552070B1 (en) Method and apparatus for transmitting video signal
JP6653353B2 (en) Transmission / reception system, transmission device, reception device, and image transmission method
KR101427552B1 (en) Method and apparatus for transmitting video siganl
EP0947106B1 (en) Method and apparatus for compensation of luminance defects caused by chrominance signal processing
US20160381365A1 (en) Apparatuses and methods for performing information extraction and insertion on bitstreams
KR102079058B1 (en) Method and apparatus outputting mixing signal of video and audio
US9491413B2 (en) Imaging apparatus and image transmitting method
JP2013055395A (en) Signal transmitting device, signal transmitting method, signal receiving device, signal receiving method and signal transmitting system
JP2010147774A (en) Imaging apparatus
US10825136B2 (en) Image processing apparatus and method, and image capturing apparatus
US9826193B2 (en) Apparatus and method of converting image signal
KR101573916B1 (en) Method and apparatus for receiving vedio

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant