KR100249820B1

KR100249820B1 - Method and apparatus for directly controlling video signal of portable video conference terminal

Info

Publication number: KR100249820B1
Application number: KR1019970062772A
Authority: KR
Inventors: 한동원; 민병기; 황승구; 박치항
Original assignee: 정선종; 한국전자통신연구원
Priority date: 1997-11-25
Filing date: 1997-11-25
Publication date: 2000-03-15
Also published as: KR19990042069A

Abstract

본 발명은 데스크 탑 영상회의 시스템의 휴대형 영상회의 단말에서 영상신호를 처리하기 위한 영상신호의 직접 제어방법 및 그 장치에 관한 것으로서, 영상회의 단말에서 영상신호를 처리하는 하드웨어들간의 입/출력 신호를 사용하여 직접 영상신호를 제어하고, 영상과 그래픽을 동시에 화면에 출력시키는 휴대형 영상회의 단말의 영상신호 직접 제어방법 및 장치를 제공함으로써, 영상 입력 신호 처리 과정과 영상 출력 신호 처리 과정에서 소요되는 하드웨어와 소프트웨어를 최소화시켜, 종래의 데스크 탑 영상회의 시스템에 대한 비용 부담을 줄일 수 있고, 영상신호의 원격지 직접 전송 방법을 통해 휴대형 영상회의 단말을 위한 최적 구조를 가질 수 있으며, 여러 사용자가 동시에 원격 영상회의를 할 수 있는 다자간 영상회의 시스템 및 영상과 그래픽을 사용한 원격 공동 작업 응용에 활용 할 수 있는 효과가 있다.The present invention relates to a method and an apparatus for directly controlling a video signal for processing a video signal in a portable videoconferencing terminal of a desktop videoconferencing system. The present invention relates to an input / output signal between hardware for processing a video signal in a videoconferencing terminal. It provides a method and apparatus for directly controlling video signals of a portable videoconferencing terminal for controlling video signals and outputting images and graphics on a screen simultaneously. By minimizing the software, it is possible to reduce the cost burden of the conventional desktop video conferencing system, and can have an optimal structure for the portable video conferencing terminal through the remote direct transmission method of the video signal, multiple users at the same time remote video conferencing Multi-party video conferencing system and video capable of There is an effect that can be utilized for remote collaboration application with a pick.

Description

Method and apparatus for directly controlling video signal of portable video conference terminal

본 발명은 데스크 탑 영상회의 시스템의 휴대형 영상회의 단말에서 영상신호를 처리하기 위한 영상신호의 직접 제어방법 및 그 장치에 관한 것으로서, 특히, 영상신호를 처리하는 하드웨어들간의 입출력 신호로서 직접 영상신호를 제어하는 방법과, 원격지로 직접 전송시킬 수 있는 최적화된 구조와, 영상과 그래픽을 동시에 화면에 출력시킬 수 있도록하는 영상신호 단말 장치의 영상신호 직접 제어장치에 관한 것이다.The present invention relates to a method and apparatus for directly controlling a video signal for processing a video signal in a portable videoconferencing terminal of a desktop videoconferencing system. In particular, the present invention relates to a video signal as an input / output signal between hardware processing video signals. The present invention relates to a control method, an optimized structure that can be directly transmitted to a remote site, and a video signal direct control device of a video signal terminal device capable of simultaneously outputting images and graphics on a screen.

종래의 데스크 탑 영상회의 시스템에서 사용되는 영상신호 처리를 위한 하드웨어에서는 사용자 단말의 휴대성이나 이동성을 고려하지 않았으므로, 멀티미디어 데이터 처리를 위해 많은 기능들이 요구되었다. 특히, 영상회의를 위한 하드웨어뿐만 아니라 응용 프로그램 또한 매우 복잡하며, 많은 양의 메모리를 필요로 하고 있으며, 영상신호 처리를 위해서 NTSC(National Television Standard Committee), PAL(Phase Alternation Line) 등과 같은 아날로그 영상신호 형태나 RGB(Red Green Blue) 콤포지트(Composite), 슈퍼 VHS(Video Home System)등과 같은 영상신호 종류에 따른 다양한 입력 처리 단계를 가지며, 영상신호의 화면 출력 처리 단계에서는 다양한 멀티미디어 응용 프로그램 지원을 위해 그래픽 신호 처리 기능과 영상신호의 오버레이(overlay) 기능을 제공하기 위해서 많은 부품들이 소요되며, 이들 부품들의 제어, 관리를 위한 소프트웨어 또한 영상회의 시스템의 처리 성능을 저하시키는 가장 큰 요인이 된다.Since hardware for processing video signals used in a conventional desktop video conferencing system does not consider portability or mobility of a user terminal, many functions are required for multimedia data processing. In particular, not only hardware for video conferencing but also application programs are very complicated and require a large amount of memory, and analog video signals such as NTSC (National Television Standard Committee) and PAL (Phase Alternation Line) are required for video signal processing. It has various input processing stages according to the type or video signal type such as RGB (Red Green Blue) Composite, Super VHS (Video Home System), etc. In order to provide a signal processing function and an overlay function of a video signal, many parts are required, and software for controlling and managing these parts is also a major factor that degrades the processing performance of a videoconferencing system.

따라서, 상기와 같은 종래의 데스크 탑 영상회의 시스템에서는 다양한 영상신호의 입력 처리 과정 및 영상신호의 화면 출력 처리 과정과, 처리된 영상신호를 원격지로 전송시키는 과정들이 매우 복잡하기 때문에 영상신호 제어를 위한 부가적인 하드웨어와 소프트웨어를 사용할 뿐 아니라 사용자 단말의 휴대성이나 이동성을 고려하지 않았기 때문에 사용자가 휴대하기 어렵고, 영상회의 시스템의 가격이 비싸 지며, 휴대형 영상 전화기의 경우에 있어서도 사용자의 영상 전화에는 원격지의 화면만 출력되고 자신의 화면은 나타나지 않으며, 다양한 응용 서비스 제공을 위한 그래픽 처리 기능 또한 제공되지 못하는 단점이 있다.Therefore, in the conventional desktop video conferencing system as described above, since the input processing of the various video signals, the screen output processing of the video signals, and the process of transmitting the processed video signals to the remote site are complicated, In addition to the use of additional hardware and software, the user's portability and mobility are not taken into consideration, making it difficult for the user to carry, expensive video conferencing systems, and even in the case of a portable video phone, the user's video call is Only the screen is output and its own screen does not appear, and there is a disadvantage in that a graphic processing function for providing various application services is not provided.

상기 문제점을 해결하기 위해, 본 발명은 영상회의 단말에서 영상신호를 처리하는 하드웨어들간의 입/출력 신호를 사용하여 직접 영상신호를 제어하는 방법과, 원격지로 직접 전송시킬 수 있는 최적화된 구조 및 영상과 그래픽을 동시에 화면에 출력시키는 구조로 된 휴대형 영상회의 단말의 영상신호 직접 제어장치를 제공하여, 종래의 영상회의 단말의 영상신호 입/출력 처리 과정에서 사용되는 부가적인 하드웨어와 소프트웨어 등을 최소화시키고, 전체 하드웨어의 크기와 부가적인 소프트웨어의 처리량을 감소시키는데 그 목적이 있다.In order to solve the above problems, the present invention provides a method of directly controlling a video signal using input / output signals between hardware processing video signals in a videoconferencing terminal, and an optimized structure and video that can be directly transmitted to a remote site. By providing a video signal direct control device of a portable videoconferencing terminal having a structure that outputs and graphics on the screen at the same time, it minimizes the additional hardware and software used in the video signal input / output processing process of the conventional videoconferencing terminal The goal is to reduce overall hardware size and additional software throughput.

도 1은 본 발명에 따른 영상회의 단말의 영상신호 직접 제어장치 구조도,1 is a structural diagram of a video signal direct control device of a video conference terminal according to the present invention;

도 2는 본 발명에 따른 영상신호의 송신 데이터 처리 흐름도,2 is a flowchart illustrating a transmission data processing of a video signal according to the present invention;

도 3은 본 발명에 따른 영상신호의 수신 데이터 처리 흐름도.3 is a flowchart for processing received data of a video signal according to the present invention;

〈도면의 주요 부분에 대한 부호의 설명〉<Explanation of symbols for main parts of drawing>

10 : 영상신호 직접 제어장치 11 : 영상신호 스케일러10: video signal direct control device 11: video signal scaler

12 : 영상신호 압축/복원부 13 : 모뎀 송/수신부12: Video signal compression / restoration unit 13: Modem transmission / reception unit

14 : 데이터 버퍼 15 : 시스템 메모리14: data buffer 15: system memory

16 : 중앙 처리부 17 : 액정 화면 제어기16 central processing unit 17 liquid crystal display controller

18 : 플래시 메모리 19 : 로컬 버스18: flash memory 19: local bus

본 발명은 데스크 탑 영상회의 시스템의 휴대형 영상회의 단말에서 영상신호를 처리하기 위한 영상신호의 직접 제어방법 및 그 장치에 관한 것으로서, 영상신호를 처리하는 하드웨어들간의 입출력 신호로서 직접 영상신호를 제어하는 방법과, 원격지로 직접 전송시킬 수 있는 최적화된 구조 및 영상과 그래픽을 동시에 화면에 출력시킬 수 있도록하는 영상회의 단말의 영상신호 직접 제어장치에 관한 것이다.The present invention relates to a method and apparatus for directly controlling a video signal for processing a video signal in a portable videoconferencing terminal of a desktop videoconferencing system. The present invention provides a method for directly controlling a video signal as an input / output signal between hardware processing video signals. The present invention relates to a video signal direct control apparatus of a videoconferencing terminal capable of simultaneously outputting an image and graphics to a screen and an optimized structure that can be directly transmitted to a remote site.

이하, 첨부된 도면을 참조하여 본 발명을 상세히 설명한다.Hereinafter, with reference to the accompanying drawings will be described in detail the present invention.

도 1 은 본 발명에 따른 영상회의 단말의 영상신호 직접 제어장치 구조도로서, 영상신호 직접 제어장치(10)는, 휴대 단말 장치에 부착된 디지털 카메라로부터 입력되는 16비트 디지털 YUV(Luminance and Chrominance Signal) 신호인 D_YUV(Digital YUV) 영상신호의 프레임 크기를 352화소(pixel) x 288라인(line)으로 감소시켜 출력하고, DS_YUV(Digital Scaler YUV) 스케일러 영상신호와 카메라 신호의 수평, 수직, 기준 클럭(reference clock)의 동기(synchronization)를 위한 수직 동기 신호(VSYNC : Vertical Synchronization)와 수평 동기 신호(HSYNC : Horizontal Synchronization)를 입력받아 스케일러(Scaler) 동기 신호(S_VSYNC, S_HSYNC)로 변환하여 출력하는 영상신호 스케일러(11)와, 데이터의 송신시에는, 상기 영상신호 스케일러(11)로부터 출력되는 DS_YUV 영상신호와 S_VSYNC, S_HSYNC 동기 신호를 입력하고, 표준 영상 압축-복원 방식인 H.263 방식으로 압축시켜 압축된 영상 데이터 V_DAT(Video Data)를 읽기/쓰기 제어신호(R/W)를 통해 출력하며, 모뎀의 초기화 상태와 접속 상태를 알려주는 상태 제어신호(T_READY)를 입력한 후, 출력 제어신호(OE : Output Enable)를 출력하고, 데이터의 수신시에는, 상태 제어신호(FULL)를 입력하고, 모뎀을 통하여 전송된 압축된 영상 데이터 신호를 복원하는 영상신호 압축/복원부(12)와, 상기 영상신호 압축/복원부(12)에 전화선에 접속되어 있는 모뎀의 초기화 상태와 접속 상태를 알려주는 상태 제어신호(T_READY)를 출력하며, 입력된 병렬 데이터 신호(S_DAT)를 직렬 비트 스트림 데이터 신호(Tx)로 변환하여 모뎀으로 출력하고, 데이터의 수신시에는, 모뎀을 통해 원격지로부터 압축되어 전송된 영상신호(Rx)를 입력하고, 상기 영상신호 압축/복원부(12)에서 출력된 영상신호 복원 준비 상태를 알려주는 상태 제어신호(R_READY)를 확인한 후, S_DAT 버스로 출력하는 모뎀 송/수신 접속부(13)와, 데이터의 송신시에는, 상기 영상신호 압축/복원부(12)에서 압축되어 출력된 영상 데이터(V_DAT)를 입력하여 읽기/쓰기 신호(R/W)에 의해 저장하고, 상기 영상신호 압축/복원부(12)로부터 출력 제어신호(OE)를 입력받으면, 저장된 영상 데이터를 8비트 병렬 데이터 신호 라인(S_DAT)을 통하여 상기 모뎀 송/수신 접속부(13)로 출력하고, 데이터의 수신시에는, 상기 모뎀 송/수신 접속부(13)로부터 버스 신호(S_DAT)를 통하여 출력된 영상 데이터를 저장하고, 상태 제어신호(FULL)를 상기 영상신호 압축/복원부(12)로 출력하는 데이터 버퍼(14)와, 영상 데이터의 송신시 카메라로부터 입력된 영상신호 및 상기 영상신호 압축/복원부(12)에서 복원된 영상 데이터 신호를 호스트 데이터 버스 신호(HDAT, CDAT)를 통해 저장하는 시스템 메모리(15)와, 상기 영상신호 압축/복원부(12)로부터 입력되는 인터럽트 신호(C_INT)를 확인 한 후, 상기 시스템 메모리(15)에 저장된 영상 데이터를 외부 장치 데이터 버스 신호(ED)를 통해 출력하는 중앙 처리부(16)와, 상기 중앙 처리부(16)로부터 출력된 영상 데이터를 액정 화면 데이터 버스(LD)와 액정 화면 출력 제어신호(D_EN)를 사용하여 액정 화면에 영상 데이터를 표시하는 액정 화면 제어기(17)와, 휴대 단말의 각 하드웨어 처리 소자들간의 신호 제어와 데이터 인터페이스를 위한 프로그램들과 액정 화면에 영상과 그래픽을 출력시키는 구동 소프트웨어 및 휴대 단말의 운영체제(O.S. : Operating System)를 저장하여, 휴대 단말을 구성하는 하드웨어들을 초기화시키는 플래시 메모리(18)로 구성된다.1 is a structure diagram of a video signal direct control device of a videoconferencing terminal according to the present invention, wherein the video signal direct control device 10 is a 16-bit digital YUV (Luminance and Chrominance Signal) input from a digital camera attached to a portable terminal device. Reduces the frame size of the D_YUV (Digital YUV) video signal to 352 pixels x 288 lines and outputs the horizontal, vertical, and reference clocks of the DS_YUV (Digital Scaler YUV) scaler video signal and the camera signal. A video signal that is converted to a scale synchronization signal (S_VSYNC, S_HSYNC) and outputs a vertical synchronization signal (VSYNC) and a horizontal synchronization signal (HSYNC: Horizontal Synchronization) for synchronization of a reference clock. When the data is transmitted to the scaler 11, the DS_YUV video signal and the S_VSYNC and S_HSYNC synchronization signals output from the video signal scaler 11 are inputted, and standard video compression is performed. Compressed video data V_DAT (Video Data) compressed by H.263 which is original method is output through read / write control signal (R / W), and status control signal (T_READY) which informs the initialization and connection status of modem. Video signal for outputting an output control signal (OE: Output Enable), inputting a state control signal (FULL), and restoring a compressed video data signal transmitted through a modem. Outputs a state control signal (T_READY) indicating the initialization state and the connection state of the modem connected to the telephone line to the compression / restoration unit 12 and the video signal compression / restoration unit 12; Converts (S_DAT) to a serial bit stream data signal (Tx) and outputs it to a modem, and upon receiving data, inputs a video signal (Rx) compressed and transmitted from a remote place through a modem, and compresses / restores the video signal. Output from part 12 After checking the state control signal R_READY indicating the video signal restoration ready state, the modem signal transmission / reception connection unit 13 outputs the S_DAT bus and the video signal compression / reception unit 12 at the time of data transmission. When the compressed and output image data V_DAT is input and stored by the read / write signal R / W, and the output control signal OE is received from the image signal compression / recovery unit 12, the stored image data Is outputted to the modem transmit / receive connection unit 13 via an 8-bit parallel data signal line S_DAT, and when data is received, it is output from the modem transmit / receive connection unit 13 via a bus signal S_DAT. A data buffer 14 for storing image data and outputting a state control signal FULL to the image signal compression / restoration unit 12, and a video signal input from a camera at the time of transmission of image data and the image signal compression / Image restored by the restorer 12 After checking the system memory 15 storing the data signal through the host data bus signals HDAT and CDAT, and the interrupt signal C_INT input from the image signal compression / recovery unit 12, the system memory ( A central processing unit 16 which outputs the image data stored in 15) through an external device data bus signal ED, and the image data output from the central processing unit 16 to the liquid crystal display data bus LD and the liquid crystal display output control. A liquid crystal display controller 17 for displaying image data on the liquid crystal display using the signal D_EN, and programs for signal control and data interface between the hardware processing elements of the portable terminal and outputting images and graphics on the liquid crystal display. Operating software and operating system of the mobile terminal : A flash memory 18 that stores an operating system and initializes hardware constituting the portable terminal.

상기와 같이 구성된 단말기 제어장치의 동작을 살펴보면 다음과 같다.Looking at the operation of the terminal control device configured as described above are as follows.

먼저, 영상 데이터의 송신시에는, 영상신호 스케일러(11)가 휴대 단말 장치에 부착된 디지털 카메라로부터 입력되는 16비트 디지털 YUV 신호인 D_YUV 영상신호를 영상신호 압축/복원부(12)의 입력 신호 특성에 맞게 영상신호의 프레임 크기를 352화소(pixel) × 288라인(line)으로 감소시켜 출력하며, 카메라로부터 입력된 카메라 신호의 수평, 수직, 기준 클럭(reference clock)의 동기(synchronization)를 위한 동기 신호(VSYNC, HSYNC)를 프레임 크기가 감소된 동기 신호(S_VSYNC, S_HSYNC)로 변환하여 영상신호 압축/복원부(12)로 출력한다. 영상신호 압축/복원부(12)는 상기 영상신호 스케일러(11)로부터 출력된 영상신호(DS_YUV)와 동기 신호(S_VSYNC, S_HSYNC)를 입력하여, 표준 영상 압축/복원 방식(H.263)으로 압축시켜 압축된 영상 데이터(V_DAT)를 데이터 버퍼(14)의 읽기/쓰기 제어신호(R/W)를 통해 데이터 버퍼(14)로 출력하며, 모뎀 송/수신 접속부(13)로부터 전화선에 접속되어 있는 모뎀의 초기화 상태와 접속 상태를 알려주는 상태 제어신호(T_READY)를 입력받으면, 출력 제어신호(OE)를 데이터 버퍼(14)로 출력하여 데이터 버퍼(14)에 저장되어 있는 압축된 영상 데이터를 8비트 병렬 데이터 신호 라인(S_DAT)을 통해서 모뎀 송/수신 접속부(13)로 출력한다. 모뎀 송/수신 접속부(13)는 상기 데이터 버퍼(14)로부터 출력된 병렬 데이터 신호(S_DAT)를 직렬 비트 스트림 데이터 신호(Tx)로 변환하여 모뎀으로 출력하고, 최종적으로 원격지에 있는 휴대 단말로 압축된 영상 데이터가 전송된다.First, when transmitting video data, the video signal scaler 11 inputs the D_YUV video signal, which is a 16-bit digital YUV signal input from a digital camera attached to the portable terminal device, to the input signal characteristics of the video signal compression / recovery unit 12. The frame size of the video signal is reduced to 352 pixels × 288 lines so that it can be displayed. The synchronization for synchronization of the horizontal, vertical and reference clocks of the camera signal input from the camera The signals VSYNC and HSYNC are converted into sync signals S_VSYNC and S_HSYNC having a reduced frame size and output to the video signal compression / restore unit 12. The video signal compression / recovery unit 12 inputs the video signal DS_YUV and the synchronization signals S_VSYNC and S_HSYNC output from the video signal scaler 11, and compresses the video signal by the standard video compression / restore method (H.263). And outputs the compressed video data V_DAT to the data buffer 14 through the read / write control signal R / W of the data buffer 14 and is connected to the telephone line from the modem transmission / reception connection unit 13. Upon receiving the state control signal T_READY indicating the initialization state and the connection state of the modem, the output control signal OE is output to the data buffer 14 to display the compressed image data stored in the data buffer 14. Output to the modem transmit / receive connection unit 13 via the bit parallel data signal line S_DAT. The modem transmit / receive connection unit 13 converts the parallel data signal S_DAT output from the data buffer 14 into a serial bit stream data signal Tx and outputs it to the modem, which is finally compressed into a mobile terminal located at a remote location. Image data is transmitted.

다음으로, 영상 데이터의 수신시에는, 모뎀 송/수신 접속부(13)에서 모뎀을 통해 원격지로부터 압축되어 전송되는 영상신호(Rx)를 입력하여, 영상신호 압축/복원부(12)로부터 출력되는 영상신호 복원 준비 상태를 알려주는 상태 제어신호(R_READY)를 확인한 후, 버스 신호(S_DAT)를 통해 데이터 버퍼(14)에 쓰기 시작한다. 데이터 버퍼(14)는 영상 데이터 기록이 끝나게 되면 데이터 버퍼(14)의 상태 제어신호(FULL)를 영상신호 압축/복원부(12)로 출력시켜 수신된 압축 영상신호를 복원하며, 이 때, 카메라에서 입력된 영상신호와 함께 호스트 데이터 버스 신호(HDAT, CDAT)를 통해서 시스템 메모리(15)에 쓰기 시작하고, 시스템 메모리(15)에 기록되는 주소는 HADDR과 CADDR을 통해서 결정된다. 이 과정에서 중앙 처리부(16)는 영상신호 압축/복원부(12)로부터 입력되는 인터럽트 신호(C_INT)를 확인 한 후, 시스템 메모리(15)에 있는 영상 데이터를 외부 장치 데이터 버스 신호(ED)를 통해 액정 화면 제어기(17)로 출력하며, 액정 화면 제어기(17)는 액정 화면 데이터 버스(LD)와 액정 화면 출력 제어신호(D_EN)를 사용하여 액정 화면에 영상 데이터를 표시한다. 이때, 영상신호 압축/복원부(12)에서 출력되는 외부 클럭(ECLK : External Clock)과 액정 화면의 수평 동기 신호(L_HSYNC : Liquid Crystal Display HSYNC)와 액정 화면의 수직 동기 신호(L_VSYNC : Liquid Crystal Display VSYNC)를 액정 화면 제어기(17)로 입력시켜, 시스템 메모리(5)에 저장된 원격지의 사용자 영상 데이터와 로컬 사용자의 영상 데이터를 액정 화면에 동시에 출력시킨다.Next, at the time of receiving the video data, the video signal Rx, which is compressed and transmitted from the remote site via the modem, is input by the modem transmission / reception connection section 13, and the video output from the video signal compression / recovery section 12. After checking the state control signal R_READY indicating the signal recovery preparation state, the data start is written to the data buffer 14 through the bus signal S_DAT. The data buffer 14 outputs the state control signal FULL of the data buffer 14 to the image signal compression / restore unit 12 when the image data recording is completed, and restores the received compressed image signal. In addition to the video signal input from the start of writing to the system memory 15 via the host data bus signals (HDAT, CDAT), the address recorded in the system memory 15 is determined through HADDR and CADDR. In this process, the central processing unit 16 checks the interrupt signal C_INT input from the image signal compression / restore unit 12, and then converts the image data in the system memory 15 into an external device data bus signal ED. And outputs to the liquid crystal display controller 17. The liquid crystal display controller 17 displays image data on the liquid crystal display using the liquid crystal display data bus LD and the liquid crystal display output control signal D_EN. At this time, the external clock (ECLK: External Clock) output from the image signal compression / recovery unit 12, the horizontal synchronization signal (L_HSYNC: Liquid Crystal Display HSYNC) of the liquid crystal screen, and the vertical synchronization signal (L_VSYNC: Liquid Crystal Display) of the liquid crystal screen VSYNC) is input to the liquid crystal display controller 17 to simultaneously output remote user image data and local user image data stored in the system memory 5 to the liquid crystal display.

그리고, 플래시 메모리(18)는 휴대 단말의 각 하드웨어 처리 소자들간의 신호 제어와 데이터 인터페이스를 위한 프로그램들과 액정 화면에 영상과 그래픽을 출력시키고, 각 하드웨어들을 초기화시키는 구동 소프트웨어 및 휴대 단말의 운영체제(O.S. : Operating System)를 저장하고 있으며, 상기 중앙 처리부(16)가 모뎀 송/수신 접속부(13)와 영상신호 압축/복원부(12)를 선택하는 제어신호(M_CS, C_CS)를 출력하도록 하고, 주소 버스(HADDR)와 데이터 버스(HDAT)를 통해 영상신호 압축/복원부(12)를 초기화 및 프로그램 시키며, 모뎀 송/수신 접속부(13)는 데이터 버스(M_DAT)를 통하여 초기화시킨다.The flash memory 18 outputs programs for signal control and data interface between the hardware processing elements of the portable terminal, outputs images and graphics on the liquid crystal display, and initializes the hardware and the operating system of the portable terminal ( An operating system (OS: Operating System), and the central processing unit 16 outputs control signals M_CS and C_CS for selecting the modem transmission / reception connection unit 13 and the video signal compression / restore unit 12, The video signal compression / recovery unit 12 is initialized and programmed through the address bus HADDR and the data bus HDAT, and the modem transmit / receive connection unit 13 is initialized through the data bus M_DAT.

도 2 는 본 발명에 따른 영상신호의 송신 데이터 처리 흐름도로서, 카메라로부터 입력된 영상신호를 원격지 영상회의 단말로 송신시키기 위한 데이터의 처리 과정을 나타낸다.2 is a flowchart illustrating a process of transmitting data of a video signal according to the present invention, and illustrates a process of data for transmitting a video signal input from a camera to a remote video conference terminal.

먼저 영상신호 압축/복원부(12)와 모뎀 송/수신 접속부(13)를 초기화시키고(20), 영상신호의 출력 확인을 위해 영상신호 스케일러(11)로부터의 수직 동기 신호(S_VSYNC) 출력 여부를 판단하며(21), 영상신호 스케일러(11)로부터 수직 동기 신호(S_VSYNC)가 출력되면, 영상신호 압축/복원부(12)가 영상신호 스케일러(11)에서 출력되는 영상신호를 H.263 표준 영상 압축 방식으로 압축한다(22). 여기서, 영상신호 스케일러(11)에서 출력되는 영상신호는 CIF(Common Interface Format) 크기(352 화소 × 288 라인)의 영상 프레임 크기를 갖는다. 그리고, 영상신호의 압축되는 비트율(bit rate)과 모뎀을 통해 전송되는 비트 전송율(bit transfer rate)을 일치시키기 위해 데이터 버퍼(14)에 저장한다(23). 그리고, 모뎀의 준비 상태 확인을 위해 모뎀 송/수신 접속부(13)로부터의 전송 상태 확인 제어신호(T_READY) 출력 여부를 판단하며(24), 모뎀 송/수신 접속부(13)로부터 전송 상태 확인 제어신호(T_READY)가 출력되면, H.263 영상 압축 데이터를 모뎀으로 전송시켜(25), 모뎀에서 출력된다(26). 여기서, 모뎀의 출력은 카메라 영상의 수직 동기 신호(S_VSYNC)와 모뎀 전송 상태 제어신호(T_READY)가 없으면 중지되고, 그렇지 않으면 계속 진행된다.First, the video signal compression / restoration unit 12 and the modem transmission / reception connection unit 13 are initialized (20), and whether or not to output the vertical sync signal S_VSYNC from the video signal scaler 11 to confirm the output of the video signal. In operation 21, when the vertical synchronization signal S_VSYNC is output from the image signal scaler 11, the image signal compression / recovery unit 12 outputs the image signal output from the image signal scaler 11 to the H.263 standard image. Compression is by compression (22). Here, the video signal output from the video signal scaler 11 has a video frame size of CIF (Common Interface Format) size (352 pixels x 288 lines). The bit rate of the video signal and the bit transfer rate transmitted through the modem are stored in the data buffer 14 to match the bit rate of the video signal (23). Then, it is determined whether to output the transmission status confirmation control signal T_READY from the modem transmission / reception connection unit 13 to confirm the preparation status of the modem (24), and the transmission status confirmation control signal from the modem transmission / reception connection unit 13. If (T_READY) is output, the H.263 video compressed data is transmitted to the modem (25) and output from the modem (26). Here, the output of the modem is stopped without the vertical synchronizing signal S_VSYNC and the modem transmission status control signal T_READY of the camera image, and continues otherwise.

도 3은 본 발명에 따른 영상신호의 수신 데이터 처리 흐름도로서, 원격지 영상회의 단말로부터 수신된 데이터를 처리하는 과정을 나타낸다.3 is a flowchart illustrating a process of processing received data of a video signal according to the present invention, and illustrating a process of processing data received from a remote video conference terminal.

먼저, 영상신호 압축/복원부(12)와 모뎀 송/수신 접속부(13)를 초기화시키고(20), 영상 복원의 준비 상태 확인을 위해 영상신호 압축/복원부(13)로부터의 영상 복원 준비 상태 제어신호(R_READY) 출력 여부를 판단하며(31), 영상 복원 준비 상태 제어신호(R_READY)가 출력되면, 모뎀 송/수신 접속부(13)가 수신한 영상 데이터를 데이터 버퍼(14)에 저장한다(32). 그리고, 데이터 버퍼(14)로부터의 FULL 신호 출력 여부를 판단하여(33), 데이터 버퍼(14)의 상태 제어신호(FULL)가 출력되면, 영상신호 압축/복원부(12)는 데이터 버퍼(14)에 저장된 영상 데이터를 복원하여(34), 액정 화면으로 출력시키기 위해 시스템 메모리(15)에 저장시킨다(35). 그리고, 영상신호 압축/복원 제어부(12)는 액정 화면 제어기(17)와의 화면 출력 클럭(clock)을 일치시키기 위해, 액정 화면 데이터 출력 허용 제어신호(D_ENABLE)를 출력하고(36), 액정 화면 제어기(17)의 제어신호에 따라 영상 데이터를 액정 화면으로 출력한다(37).First, the video signal compression / restoration unit 12 and the modem transmission / reception connection unit 13 are initialized (20), and the image restoration preparation state from the video signal compression / restoration unit 13 is checked to confirm the preparation state of the image restoration. It is determined whether the control signal R_READY is output (31), and when the image restoration preparation state control signal R_READY is output, the modem transmission / reception connection unit 13 stores the received image data in the data buffer 14 ( 32). When it is determined whether the FULL signal is output from the data buffer 14 (33), and the state control signal FULL of the data buffer 14 is outputted, the video signal compression / restore unit 12 is the data buffer 14 The image data stored in FIG. 2 is restored (34), and stored in the system memory 15 for output to the liquid crystal display (35). The video signal compression / restoration control unit 12 outputs the liquid crystal screen data output permission control signal D_ENABLE in order to match the screen output clock with the liquid crystal screen controller 17 (36), and the liquid crystal screen controller. In accordance with the control signal (17), image data is output to the liquid crystal display (37).

상기와 같이 본 발명에 따른 영상신호 직접 제어방법 및 그 장치는 영상회의 단말에서 영상신호를 처리하는 하드웨어들간의 입출력 신호를 사용하여 직접 영상신호를 제어함으로써, 영상 입력 신호 처리 과정과 영상 출력 신호 처리 과정에서 소요되는 하드웨어와 소프트웨어를 최소화시켜, 종래의 데스크 탑 영상회의 시스템에 대한 비용 부담을 줄일 수 있으며, 영상신호의 원격지 직접 전송 방법을 통해 휴대형 영상회의 단말을 위한 최적 구조를 가질 수 있는 탁월한 효과가 있고, 여러 사용자가 동시에 원격 영상회의를 할 수 있는 다자간 영상회의 시스템과 영상과 그래픽을 사용한 원격 공동 작업 응용에도 활용 할 수 있는 효과가 있다.The video signal direct control method and apparatus according to the present invention as described above by directly controlling the video signal using the input and output signals between the hardware processing the video signal in the video conferencing terminal, video input signal processing and video output signal processing By minimizing the hardware and software required in the process, the cost burden for the conventional desktop video conferencing system can be reduced, and the excellent structure that can have an optimal structure for the portable video conferencing terminal through the remote direct transmission method of the video signal. In addition, there is an effect that can be utilized in a multi-party video conferencing system that allows multiple users to have remote video conferencing at the same time and remote collaboration applications using video and graphics.

본 발명은 영상회의 단말에서 영상신호를 처리하는 하드웨어들간의 입출력 신호를 사용하여 직접 영상신호를 제어하는 방법 및 그 장치를 제공함으로써, 영상 입력 신호 처리 과정과 영상 출력 신호 처리 과정에서 소요되는 하드웨어와 소프트웨어를 최소화시켜, 종래의 데스크 탑 영상회의 시스템에 대한 비용 부담을 줄일 수 있으며, 영상신호의 원격지 직접 전송 방법을 통해 휴대형 영상회의 단말을 위한 최적 구조를 가질 수 있는 탁월한 효과가 있고, 여러 사용자가 동시에 원격 영상회의를 할 수 있는 다자간 영상회의 시스템과 영상과 그래픽을 사용한 원격 공동 작업 응용에도 활용 할 수 있는 효과가 있다.The present invention provides a method and apparatus for directly controlling a video signal using input and output signals between hardware processing video signals in a videoconferencing terminal, thereby providing hardware required for video input signal processing and video output signal processing. By minimizing the software, it is possible to reduce the cost burden of the conventional desktop video conferencing system, and has an excellent effect of having an optimal structure for a portable video conferencing terminal through a remote direct transmission method of a video signal, At the same time, it can be used for a multi-party video conferencing system for remote video conferencing and for remote collaboration applications using video and graphics.

Claims

A video signal control apparatus for processing a video signal of a portable video conference terminal in a desktop video conference system,

Image signal scaler which reduces the frame size of the digital YUV signal D_YUV input from the digital camera and converts the vertical and horizontal sync signals VSYNC and HSYNC into scaler sync signals S_VSYNC and S_HSYNC with reduced frame size. (11);

A video signal compression / recovery unit (12) for compressing the signal output from the video signal scaler (11) and restoring and outputting the compressed video data signal transmitted through a modem;

Outputs a state control signal (T_READY) to the video signal compression / restoration unit 12, converts the parallel data signal (S_DAT) to a serial bit stream data signal (Tx) and outputs to the modem, and transmitted through the modem A modem transmission / reception connection unit 13 for outputting the video signal Rx to the S_DAT bus after checking the state control signal R_READY output of the video signal compression / recovery unit 12;

A data buffer (14) for storing the output data signal of the video signal compression / restoration unit (12) and the video data output from the modem transmission / reception connection unit (13) via a bus signal (S_DAT);

System memory for storing the image signal input from the camera at the time of transmission of the image data and the image data signal restored by the image signal compression / restoration unit 12 through the host data bus signal (HDAT, CDAT) when receiving the image data ( 15);

After checking the interrupt signal (C_INT) input from the image signal compression / restoration unit 12, the central processing unit 16 for outputting the image data stored in the system memory 15 through an external device data bus signal (ED) )Wow;

A liquid crystal display controller (17) for displaying image data on the liquid crystal display using the liquid crystal display data bus (LD) and the liquid crystal display output control signal (D_EN);

Flash memory for initializing the hardware constituting the mobile terminal by storing programs for signal control and data interface between the hardware processing elements, driving software for outputting images and graphics on a liquid crystal display, and an operating system (OS) of the mobile terminal. Direct video signal control device of a portable video conferencing terminal, characterized in that consisting of (18).

The method of claim 1,

The data buffer 14 stores the output data signal of the video signal compression / restoration unit 12 by a read / write signal R / W when data is transmitted, and stores the video signal compression / restoration unit ( 12, when the output control signal OE is inputted, the stored video data is outputted to the modem transmission / reception connection unit 13 through an 8-bit parallel data signal line S_DAT, and upon reception of the data, the modem transmission is performed. Portable video conferencing terminal characterized by storing the video data outputted from the receiving / receiving connection unit 13 via the bus signal S_DAT and outputting a state control signal FULL to the video signal compression / restore unit 12. Video signal direct control device.

A video signal control method for processing a transmitted video signal of a portable video conference terminal in a desktop video conference system,

A first step of initializing the video signal compression / restoration unit 12 and the modem transmission / reception connection unit 13;

A second step of determining whether to output the vertical sync signal S_VSYNC from the video signal scaler 11 and going to the video signal compression step if the vertical sync signal is output; ;

When it is determined that the vertical synchronization signal S_VSYNC is output in the second step, the video signal compression / recovery unit 12 compresses the video signal output from the video signal scaler 11 using the H.263 standard video compression method. A third step;

A fourth step of storing the video signal compressed in the third step in a data buffer (14) to match the bit transfer rate transmitted through the modem;

A fifth step of judging whether or not the transmission status check control signal T_READY is output from the modem transmission / reception connection unit 13 and going to the data transmission step if it is output; ;

A sixth step of transmitting H.263 compressed video data to the modem when it is determined that the transmission state check control signal T_READY is output in the fifth step;

And a seventh step of transmitting the video data transmitted through the sixth step from the modem to the remote portable videoconferencing terminal.

The method of claim 3, wherein

The seventh step, the video signal direct control method of the portable video conferencing terminal, characterized in that the transmission is performed only while the vertical synchronization signal (S_VSYNC) and the modem transmission status control signal (T_READY) is output.

A video signal control method for processing a received video signal of a portable video conference terminal in a desktop video conference system,

It is determined whether to output the image restoration ready state control signal R_READY from the image signal compression / recovery unit 12, and if so, goes to the image data storage step, and if it is not output, repeats whether to output again. Two steps;

In the second step, when it is determined that the image restoration preparation state control signal R_READY is output from the compression / restore unit 12, the image data received by the modem transmission / reception connection unit 13 is stored in the data buffer 14. Performing a third step;

A fourth step of determining whether or not to output the FULL signal from the data buffer 14, and if it is output, goes to the video signal restoration step;

A fifth step of restoring the image data stored in the data buffer 14 by the image signal compression / restorer 12 when it is determined that the state control signal FULL is output from the data buffer 14 in the fourth step; ;

A sixth step of storing the image data reconstructed in the fifth step in a system memory (15) to output the image data on a liquid crystal display;

In order to simultaneously output the image data stored in the sixth step and the image data of the local user to the liquid crystal display, the liquid crystal display controller 17 generates a liquid crystal display data output allowance control signal D_ENABLE that matches the screen output clock. And an external clock signal ECLK outputted from the image signal compression / recovery unit 12 and the vertical and horizontal synchronization signals L_VSYNC and L_HSYNC of the liquid crystal screen to the liquid crystal display controller to control the output of the liquid crystal display. With 7 steps;

And an eighth step of outputting image data to the liquid crystal display according to the control signal output from the liquid crystal display controller (17) of the seventh step.