KR20050115129A - Remote control system and method of camera phone - Google Patents
Remote control system and method of camera phone Download PDFInfo
- Publication number
- KR20050115129A KR20050115129A KR1020040040450A KR20040040450A KR20050115129A KR 20050115129 A KR20050115129 A KR 20050115129A KR 1020040040450 A KR1020040040450 A KR 1020040040450A KR 20040040450 A KR20040040450 A KR 20040040450A KR 20050115129 A KR20050115129 A KR 20050115129A
- Authority
- KR
- South Korea
- Prior art keywords
- camera
- mobile terminal
- rtsp
- protocol
- request message
- Prior art date
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04Q—SELECTING
- H04Q9/00—Arrangements in telecontrol or telemetry systems for selectively calling a substation from a main station, in which substation desired apparatus is selected for applying a control signal thereto or for obtaining measured values therefrom
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04B—TRANSMISSION
- H04B1/00—Details of transmission systems, not covered by a single one of groups H04B3/00 - H04B13/00; Details of transmission systems not characterised by the medium used for transmission
- H04B1/38—Transceivers, i.e. devices in which transmitter and receiver form a structural unit and in which at least one part is used for functions of transmitting and receiving
- H04B1/40—Circuits
- H04B1/401—Circuits for selecting or indicating operating mode
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/65—Network streaming protocols, e.g. real-time transport protocol [RTP] or real-time control protocol [RTCP]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04Q—SELECTING
- H04Q2209/00—Arrangements in telecontrol or telemetry systems
- H04Q2209/40—Arrangements in telecontrol or telemetry systems using a wireless architecture
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Telephonic Communication Services (AREA)
- Studio Devices (AREA)
Abstract
본 발명은 카메라폰의 원격 제어 시스템 및 방법에 관한 것으로서, RTP/RTCP 프로토콜 및 RTSP 프로토콜을 이용하여 원격의 이동단말기에서 카메라폰의 동작을 제어할 수 있는 카메라폰의 원격 제어 시스템 및 방법에 관한 것이다. 이를 위해, 본 발명에 의한 카메라폰의 원격 제어 시스템은 내장된 카메라에 의해 촬영된 영상 데이터를 CDMA 데이터 콜 상에서 구현된 TCP/IP 위의 RTP/RTCP 프로토콜을 통해 스트리밍 전송하는 제 1이동단말기와, 상기 촬영된 영상 데이터를 스트리밍 수신하여 화면에 표시하고 키패드를 통해 입력된 카메라 제어명령을 RTSP 프로토콜을 통해 상기 제 1이동단말기에 전송하여 상기 내장된 카메라의 동작을 제어하는 제 2이동단말기를 포함하여 구성된 것을 특징으로 한다. The present invention relates to a remote control system and method of a camera phone, and to a remote control system and method of a camera phone that can control the operation of the camera phone in a remote mobile terminal using the RTP / RTCP protocol and RTSP protocol. . To this end, the remote control system of the camera phone according to the present invention and the first mobile terminal for streaming the image data captured by the built-in camera through the RTP / RTCP protocol over TCP / IP implemented on a CDMA data call, Including a second mobile terminal for receiving the streamed video data to display on the screen, and transmits a camera control command input through the keypad to the first mobile terminal through the RTSP protocol to control the operation of the built-in camera; Characterized in that configured.
Description
본 발명은 카메라폰의 원격 제어 시스템 및 방법에 관한 것으로서, RTP/RTCP 프로토콜 및 RTSP 프로토콜을 이용하여 원격의 이동단말기에서 카메라폰의 동작을 제어할 수 있는 카메라폰의 원격 제어 시스템 및 방법에 관한 것이다. The present invention relates to a remote control system and method of a camera phone, and to a remote control system and method of a camera phone that can control the operation of the camera phone in a remote mobile terminal using the RTP / RTCP protocol and RTSP protocol. .
이전부터 카메라폰을 원격 제어하기 위한 여러 가지 방법들이 제안되고 있다. 예를 들어, 블루투스를 이용한 리모콘 장치를 통해 원격에서 카메라폰의 키패드 입력을 조정하거나, 전용 제어 채널을 할당하여 카메라폰의 줌, 패닝 등을 원격에서 제어하는 방법들이 있다. 그러나 이러한 방법들은 모두 국제 표준이나 산업 표준을 따르고 있지 않아서 호환성이 전혀 없다. Previously, various methods for remotely controlling a camera phone have been proposed. For example, there is a method of remotely controlling the camera phone's zoom or panning by adjusting a keypad input of a camera phone remotely through a Bluetooth remote controller device or by assigning a dedicated control channel. However, none of these methods are compatible with international or industry standards.
한 편, 원격 감시 기능을 갖는 카메라폰은 카메라 모듈에서 촬영한 영상을 카메라폰의 메모리에 저장하고, 이것을 CDMA 데이터 콜 망을 통해 다른 카메라폰이나 컴퓨터에 전송한다. On the other hand, a camera phone having a remote monitoring function stores an image taken by the camera module in the camera phone's memory and transmits it to another camera phone or a computer through a CDMA data call network.
도 1은 종래 원격 감시 기능을 갖는 카메라폰의 구성도를 나타낸다.1 shows a configuration of a camera phone having a conventional remote monitoring function.
도 1을 참조하여 원격 감시 기능을 갖는 카메라폰의 동작을 살펴보면, 먼저 카메라 모듈(10)에서 촬영된 영상이 카메라 드라이버(20)를 거쳐 프로세서(30)에 전달된다. 프로세서(30)는 카메라 드라이버(20)로부터 입력된 데이터를 처리하여 화상 출력용 데이터를 만들어 프레임 버퍼(40)에 보관한다. 프레임 버퍼(40)에 보관된 화상 출력용 데이터는 LCD 드라이버(50)에 전달되고, LCD 드라이버(50)가 이를 LCD(60)에 뿌리면(1초에 화면을 15번 내지 30번 뿌림) 영상으로 출력된다. Referring to FIG. 1, the operation of a camera phone having a remote monitoring function will be described. First, an image captured by the camera module 10 is transferred to the processor 30 through the camera driver 20. The processor 30 processes the data input from the camera driver 20 to generate data for image output and to store it in the frame buffer 40. The image output data stored in the frame buffer 40 is transferred to the LCD driver 50, and when the LCD driver 50 sprinkles it on the LCD 60 (sprinkles the screen 15 to 30 times per second), the image is output as an image. do.
이와 동시에 카메라 모듈(10)에서 촬영된 영상은 카메라 드라이버(20)를 거쳐 영상 인코더(80)에서 압축되어 내부의 저장공간에 저장된 후 CDMA 데이터 콜 통신 모듈(90)을 통해 원격지에 전송된다. 그런데 카메라폰의 메모리 용량이 부족하고 네트워크 전송능력이 떨어져 카메라 모듈(10)에서 촬영한 화면을 모두 전송할 수 없다. 이에 따라 감지모듈(70)을 설치하여, 감지모듈(70)이 마이크의 소리나 카메라 모듈(10)에서의 물체의 움직임을 감지할 때만 일정 시간 동안 카메라 모듈(10)에 입력되는 영상을 내부의 저장공간에 저장하여 원격의 장치에 전송하도록 한다. At the same time, the image captured by the camera module 10 is compressed by the image encoder 80 via the camera driver 20 and stored in an internal storage space, and then transmitted to a remote place through the CDMA data call communication module 90. However, the memory capacity of the camera phone is insufficient and the network transmission ability is not able to transmit all the screen shot by the camera module 10. Accordingly, by installing the detection module 70, only when the detection module 70 detects the sound of the microphone or the movement of the object in the camera module 10, the image input to the camera module 10 for a predetermined time is stored inside. Store it in a storage space and send it to a remote device.
그러나 원격 감지 기능을 갖는 카메라폰은 짧은 시간 동안에만 화면을 저장할 수 있어서 본격적인 폐쇄회로 카메라로서의 기능을 가질 수 없으며, 더욱이 저장된 동영상 정보를 원격지에 전송하는 것도 국제표준을 따르고 있지 않아서 호환성을 상실하고 있는 상태이다. However, a camera phone with a remote sensing function can save a screen for only a short time, and thus cannot function as a full-scale closed circuit camera. Moreover, the transmission of stored video information to a remote site is not compatible with international standards, which causes loss of compatibility. It is a state.
본 발명은 상기와 같은 문제점을 해결하기 위해 창안된 것으로서, 국제표준 을 따르는 방식을 이용하여 원격의 카메라폰으로부터 실시간으로 동영상을 전송받으면서 카메라폰의 동작을 제어할 수 있는 카메라폰의 원격 제어 시스템 및 방법을 제공하는 것을 목적으로 한다. The present invention has been made to solve the above problems, a remote control system of a camera phone that can control the operation of the camera phone while receiving a video in real time from a remote camera phone using a method in accordance with international standards and It is an object to provide a method.
이를 위해, 본 발명에 의한 카메라폰의 원격 제어 시스템은 내장된 카메라에 의해 촬영된 영상 데이터를 CDMA 데이터 콜 상에서 구현된 TCP/IP 위의 RTP/RTCP 프로토콜을 통해 스트리밍 전송하는 제 1이동단말기와, 상기 촬영된 영상 데이터를 스트리밍 수신하여 화면에 표시하고 키패드를 통해 입력된 카메라 제어명령을 RTSP 프로토콜을 통해 상기 제 1이동단말기에 전송하여 상기 내장된 카메라의 동작을 제어하는 제 2이동단말기를 포함하여 구성된 것을 특징으로 한다. To this end, the remote control system of the camera phone according to the present invention and the first mobile terminal for streaming the image data captured by the built-in camera through the RTP / RTCP protocol over TCP / IP implemented on a CDMA data call, Including a second mobile terminal for receiving the streamed video data to display on the screen, and transmits a camera control command input through the keypad to the first mobile terminal through the RTSP protocol to control the operation of the built-in camera; Characterized in that configured.
또한, 본 발명에 의한 카메라폰의 원격 제어 방법은 제 1이동단말기에 내장된 카메라에 의해 촬영된 영상 데이터가 CDMA 데이터 콜 상에서 구현된 TCP/IP 위의 RTP/RTCP 프로토콜을 통해 제 2이동단말기에 스트리밍 전송되는 단계와, 상기 전송된 영상 데이터가 상기 제 2이동단말기에 스트리밍 수신되면서 상기 제 2이동단말기의 화면에 표시되는 단계와, 상기 제 2이동단말기의 키패드를 통해 입력된 카메라 제어명령을 RTSP 프로토콜을 이용하여 RTSP 요청 메시지로 생성하는 단계와, 상기 RTSP 요청 메시지가 상기 제 1이동단말기에 수신되고 이에 대한 RTSP 응답 메시지가 상기 제 2이동단말기에 전송되는 단계와, 상기 RTSP 요청 메시지를 해석하여 상기 제 1이동단말기의 내장된 카메라의 동작을 제어하는 단계를 포함하여 이루어진 것을 특징으로 한다. In addition, the remote control method of the camera phone according to the present invention in the second mobile terminal through the RTP / RTCP protocol over TCP / IP image data captured by the camera built in the first mobile terminal implemented on the CDMA data call Streaming and transmitting the received video data on the screen of the second mobile terminal while receiving the streamed video to the second mobile terminal; and controlling the camera control command input through the keypad of the second mobile terminal. Generating an RTSP request message using a protocol; receiving the RTSP request message at the first mobile terminal and transmitting an RTSP response message to the second mobile terminal; interpreting the RTSP request message; And controlling the operation of the built-in camera of the first mobile terminal.
현재 인기를 모으고 있는 VOD 폰은 CDMA 망에 접속한 후 RTP/RTCP 프로토콜을 이용하여 통신사업자의 VOD 서버에 저장된 미디어 컨텐츠를 스트리밍 수신해서 LCD에 출력하고, 키패드를 통해 플레이(Play), 일시정지(Pause), 빨리돌리기(Past Forward), 되돌리기(Rewind) 등의 간단한 명령을 RTSP 프로토콜을 이용하여 VOD 서버에 전달한다. 즉, RTP/RTCP 프로토콜 및 RTSP 프로토콜을 이용하여 VOD의 제어는 VOD 폰에서 VOD 서버 방향으로, 컨텐츠 미디어 전송은 VOD 서버에서 VOD 폰 방향으로 이루어진다. VOD phones, which are gaining popularity, are connected to a CDMA network, receive streaming media content stored on the carrier's VOD server using the RTP / RTCP protocol, output it to the LCD, and play and pause through the keypad. Simple commands such as Pause, Fast Forward, and Rewind are delivered to the VOD server using the RTSP protocol. That is, control of the VOD is performed from the VOD phone to the VOD server using the RTP / RTCP protocol and the RTSP protocol, and content media transmission is performed from the VOD server to the VOD phone.
RTP/RTCP 프로토콜은 VOD와 같은 스트리밍 시스템에서 사용되는 프로토콜로서, 모든 자료를 서버로부터 다운로드 받은 후 재생하는 방식과 달리 서버에서 실시간으로 조금씩 자료를 받으면서 재생하는 방식이다. RTP / RTCP protocol is a protocol used in streaming system such as VOD. Unlike RTP / RTCP protocol, all the data is downloaded from server and played.
RTSP 프로토콜은 HTTP와 같이 텍스트 기반의 요청 및 응답 메시지 프로토콜이다. 따라서 클라이언트가 서버로 RTSP 요청 메시지를 전송하여 필요한 동작을 요청하면, 서버는 필요한 동작을 수행한 후 클라이언트에게 RTSP 응답 메시지를 전송하게 된다. The RTSP protocol is a text-based request and response message protocol such as HTTP. Therefore, when the client sends the RTSP request message to the server to request a necessary operation, the server performs the necessary operation and then sends the RTSP response message to the client.
본 발명은 상기 VOD 폰에서 사용되는 RTP/RTCP 프로토콜을 통해 원격의 카메라폰으로부터 실시간 영상자료를 수신하고, RTSP 프로토콜을 통해 원격의 카메라폰의 카메라 동작을 제어할 수 있도록 한 것이다. 이 때 원격의 카메라폰의 영상자료를 받으면서 원격의 카메라폰 동작을 제어하는 것은 다른 카메라폰이 된다. The present invention is to receive the real-time video data from the remote camera phone through the RTP / RTCP protocol used in the VOD phone, and to control the camera operation of the remote camera phone through the RTSP protocol. At this time, it is another camera phone to control the remote camera phone operation while receiving the video data of the remote camera phone.
이하, 첨부된 도면을 참조하여 본 발명의 실시예를 상세히 설명하면 다음과 같다. Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings.
도 2는 본 발명에 의한 카메라폰의 원격 제어 시스템의 개략도를 나타낸다. 2 shows a schematic diagram of a remote control system for a camera phone according to the present invention.
본 발명에 의한 카메라폰의 원격 제어 시스템은 내장된 카메라에서 촬영된 영상 데이터를 스트리밍 전송하는 제 1이동단말기(100)와, 상기 스트리밍 전송되는 영상 데이터를 화면에 표시하고 제 1이동단말기(100)의 카메라 동작 제어를 위한 카메라 제어명령을 전송하는 제 2이동단말기(200)로 구성되어 있다. The remote control system of a camera phone according to the present invention is a first mobile terminal 100 for streaming transmission of the image data taken by the built-in camera, and the first mobile terminal 100 to display the streaming image data on the screen The second mobile terminal 200 for transmitting a camera control command for controlling the camera operation of the.
도 2에서, 제 1이동단말기(100)가 영상 데이터를 제 2이동단말기(200)에 전송하고 제 2이동단말기(200)가 제 1이동단말기(100)의 카메라 동작을 제어하는 것으로 되어 있으나, 제 1이동단말기(100)와 제 2이동단말기(200)는 동일한 구성으로 되어 있기 때문에, 제 1이동단말기(100)와 제 2이동단말기(200)의 동작이 상기와 반대로 될 수 있다. In FIG. 2, although the first mobile terminal 100 transmits image data to the second mobile terminal 200 and the second mobile terminal 200 controls the camera operation of the first mobile terminal 100, Since the first mobile terminal 100 and the second mobile terminal 200 have the same configuration, the operations of the first mobile terminal 100 and the second mobile terminal 200 may be reversed.
제 1이동단말기(100)는 내장된 카메라에 의해 촬영된 영상 데이터를 CDMA 데이터 콜 상에서 구현된 TCP/IP 위의 RTP/RTCP 프로토콜을 통해 원격에 있는 제 2이동단말기(100)에 스트리밍 전송을 한다. The first mobile terminal 100 transmits the image data captured by the built-in camera to the second mobile terminal 100 remotely through the RTP / RTCP protocol over TCP / IP implemented on the CDMA data call. .
제 2이동단말기(200)는 제 1이동단말기(100)의 카메라에서 촬영된 영상 데이터를 RTP/RTCP 프로토콜을 통해 스트리밍 수신하여 화면에 표시하고, 키패드를 통해 입력된 카메라 제어명령을 RTSP 프로토콜을 통해 제 1이동단말기(100)에 전송한다. The second mobile terminal 200 receives the image data captured by the camera of the first mobile terminal 100 through the RTP / RTCP protocol by streaming it and displays it on the screen, and displays the camera control command input through the keypad through the RTSP protocol. Transmission to the first mobile terminal (100).
이와 같이, 제 1이동단말기(100)와 제 2이동단말기(200)는 영상자료 및 카메라 제어명령을 서로 교환하면서 상호 원격 제어될 수 있다.As such, the first mobile terminal 100 and the second mobile terminal 200 may be remotely controlled with each other while exchanging image data and camera control commands.
도 3은 본 발명에 의한 카메라폰 원격 제어 시스템에서 사용되는 이동단말기(100, 200)의 내부 구성을 나타낸다. Figure 3 shows the internal configuration of the mobile terminal (100, 200) used in the camera phone remote control system according to the present invention.
제 1이동단말기(100) 및 제 2이동단말기(200)는 각각 동일한 구성으로서, 프로세서(300), 프레임 버퍼(310), LCD 드라이버(320), LCD(330), 카메라 제어 드라이버(340), 카메라(350), 카메라 드라이버(360), 영상 디코더(370), 영상 인코더(380), RTSP 제어 프로토콜 모듈(390), RTP/RTCP 프로토콜 모듈(400), CDMA 데이터 콜 통신 모듈(410)을 포함한다. The first mobile terminal 100 and the second mobile terminal 200 have the same configuration, respectively, and include a processor 300, a frame buffer 310, an LCD driver 320, an LCD 330, a camera control driver 340, It includes a camera 350, a camera driver 360, an image decoder 370, an image encoder 380, an RTSP control protocol module 390, an RTP / RTCP protocol module 400, and a CDMA data call communication module 410. do.
상기 카메라(350)는 이동단말기(100, 200)에 내장된 카메라로서, 카메라 구동부(351) 및 카메라 모듈(352)로 구성되어 있고, 카메라 구동부(351)에는 도시하지는 않았지만, 줌(Zoom)을 통한 초점거리 조절기, 셔터 속도 조절기, 조리개 값(F-number) 조절기, 카메라 모듈 x축 구동기, 카메라 모듈 y축 구동기, 플래쉬가 포함되어 있다. The camera 350 is a camera embedded in the mobile terminals 100 and 200, and includes a camera driver 351 and a camera module 352, and although not shown in the camera driver 351, zoom is provided. It includes a focal length controller, shutter speed controller, F-number controller, camera module x-axis driver, camera module y-axis driver, and flash.
이제, 이동단말기(100, 200)의 내부 동작에 대하여 상세히 설명한다. Now, the internal operation of the mobile terminal (100, 200) will be described in detail.
이동단말기(100, 200)에 내장된 카메라(350)의 카메라 모듈(352)에서 촬영된 영상 데이터는 카메라 드라이버(360)를 거쳐 프로세서(300)에서 화면 출력용 데이터로 처리되어 출력된다. 프로세서(100)에서 출력된 화면 출력용 데이터는 프레임 버퍼(310)에 보관되고, 프레임 버퍼(310)에 보관된 데이터는 LCD 드라이버(320)를 통해 LCD(330)에 뿌려져 스크린에 영상으로 출력된다.The image data captured by the camera module 352 of the camera 350 embedded in the mobile terminal 100 or 200 is processed and output as data for screen output by the processor 300 via the camera driver 360. The screen output data output from the processor 100 is stored in the frame buffer 310, and the data stored in the frame buffer 310 is scattered on the LCD 330 through the LCD driver 320 and output as an image on the screen.
카메라 드라이버(360)에서 출력된 영상 데이터는 영상 인코더(380)에서 압축되고, 압축된 데이터는 RTP/RTCP 프로토콜 모듈(400)에서 스트리밍 전송을 위한 처리를 받고, CDMA 데이터 콜 통신 모듈(410)을 통해 원격지로 전송된다.The image data output from the camera driver 360 is compressed by the image encoder 380, and the compressed data is processed for streaming transmission by the RTP / RTCP protocol module 400, and the CDMA data call communication module 410 is processed. Is sent remotely.
원격지로부터 전송되어 CDMA 데이터 콜 통신 모듈(410)을 통해 수신된 영상 데이터는 RTP/RTCP 프로토콜 모듈(400)에서 스트리밍 수신을 위한 처리를 받은 후 영상 디코더(370)에서 압축이 풀린다. 압축 해제된 데이터는 프로세서(300)에 의해 화면 출력용 데이터로 처리되어 상기와 같이 프레임 버퍼(310) 및 LCD 드라이버(320)를 거쳐 LCD(330)에 영상으로 출력된다. The video data transmitted from the remote location and received through the CDMA data call communication module 410 is decompressed by the video decoder 370 after receiving the processing for streaming reception in the RTP / RTCP protocol module 400. The decompressed data is processed into the screen output data by the processor 300 and output as an image to the LCD 330 via the frame buffer 310 and the LCD driver 320 as described above.
도시하지 않은 키패드를 통해 입력된 카메라 제어명령은 RTSP 제어 프로토콜 모듈(390)에 의해 적절한 RTSP 요청 메시지로 생성되어 CDMA 데이터 콜 통신 모듈(410)을 통해 원격지로 전송된다. 원격지에서 전송되어 CDMA 데이터 콜 통신 모듈(410)을 통해 수신된 RTSP 요청 메시지는 RTSP 제어 프로토콜 모듈(390)에서 해석되어 카메라 제어명령이 추출된다. 카메라 제어 드라이버(340)는 추출된 카메라 제어명령을 해석하여 카메라 구동부(351)에 제어신호를 출력한다. 카메라 구동부(351)에는 카메라 동작의 제어를 위한 여러 조절기가 구비되어 있어서, 제어신호에 의해 각 조절기가 구동되어 카메라 모듈(352)의 위치, 줌 등이 조절된다. The camera control command input through the keypad (not shown) is generated by the RTSP control protocol module 390 into an appropriate RTSP request message and transmitted to the remote place through the CDMA data call communication module 410. The RTSP request message transmitted remotely and received through the CDMA data call communication module 410 is interpreted by the RTSP control protocol module 390 to extract a camera control command. The camera control driver 340 interprets the extracted camera control command and outputs a control signal to the camera driver 351. The camera driver 351 is provided with various controllers for controlling camera operations. Each of the controllers is driven by a control signal to adjust the position, the zoom, and the like of the camera module 352.
상기와 같이 구성된 카메라폰의 원격 제어 시스템에서 이동단말기(100, 200)간 신호흐름을 통해 카메라폰의 원격 제어과정을 설명한다. In the remote control system of the camera phone configured as described above will be described the remote control process of the camera phone through the signal flow between the mobile terminal (100, 200).
우선, 제 1이동단말기(100)에 내장된 카메라(350)에 의해 촬영된 영상 데이터가 CDMA 데이터 콜 상에서 구현된 TCP/IP 위의 RTP/RTCP 프로토콜을 통해 제 2이동단말기(200)에 스트리밍 전송된다. 제 1이동단말기(100)의 영상 데이터가 제 2이동단말기에 수신되면 제 2이동단말기(200)는 영상 데이터를 스트리밍 재생하여 화면에 표시한다. First, image data captured by the camera 350 embedded in the first mobile terminal 100 is transmitted to the second mobile terminal 200 through the RTP / RTCP protocol over TCP / IP implemented on a CDMA data call. do. When the video data of the first mobile terminal 100 is received by the second mobile terminal, the second mobile terminal 200 reproduces the video data on the screen.
다음. 제 2이동단말기(200)의 화면에 스트리밍 재생되는 영상을 보면서 키패드를 통해 카메라 제어명령을 입력한다. next. While watching the streaming playback image on the screen of the second mobile terminal 200, the camera control command is input through the keypad.
카메라로 표현되는 광학장치의 제어는 크게 렌즈의 광축 방향 설정(x, y, z축), 렌즈의 초점 링 조정, 렌즈의 줌 링 조정, 셔터 스피드 조정, 조리개 조정, 플래쉬, 셔터 등으로 나타낼 수 있다. CMOS 모듈로 된 칩형 카메라 모듈의 경우 초점 링, 줌 링, 조리개 등은 조절이 불가능하지만, 전체 기능을 살펴 본다면 제어명령은 대략 위와 같이 기술될 수 있다. The control of the optical device represented by the camera can be largely represented by setting the optical axis direction of the lens (x, y, z axis), adjusting the focus ring of the lens, adjusting the zoom ring of the lens, adjusting the shutter speed, adjusting the aperture, flash, shutter, and the like. have. In the case of a chip-shaped camera module made of a CMOS module, the focus ring, the zoom ring, the iris, etc. cannot be adjusted.
본 발명의 실시예에서는 카메라 구동부(351)에 적절한 제어명령을 전달하기 위해 RTSP 확장 메소드 카메라 및 그에 속하는 확장 헤더(extention header)가 정의된다. 확장 헤더로서는 Pan-x-axis, Pan-y-axis, Focal-length, F-number, Shutter-speed, Flash-fired, Shoot가 정의되어 있다. 이러한 RTSP 확장 헤드 필드를 이용하여 상기 카메라 제어명령을 처리하게 된다. In an embodiment of the present invention, an RTSP extension method camera and an extension header belonging thereto are defined to transmit an appropriate control command to the camera driver 351. As extension headers, Pan-x-axis, Pan-y-axis, Focal-length, F-number, Shutter-speed, Flash-fired, and Shoot are defined. The RTSP extended head field is used to process the camera control command.
표(1)은 확장 메소드 카메라에 대한 헤더 필드의 사용을 기술하고 있다. Table (1) describes the use of header fields for extended method cameras.
표(1)의 내용을 IETF RFC 2234의 A-BNF 포맷에 맞게 기술하면 다음과 같다. The contents of Table (1) are described according to A-BNF format of IETF RFC 2234 as follows.
- RTSP extention CAMERA method A-BNF 기술(RFC 2234)RTSP extention CAMERA method A-BNF technology (RFC 2234)
A-BNF 포맷은 프로토콜 핸드 라이팅(hand writing)이나 전용 컴파일러를 통해 파서(parser)의 오토마타 테이블을 만들 때 사용된다. 이것만 있으면 바로 프로토콜 파서(protocol parser)에서 구현이 가능해진다.The A-BNF format is used to create parser automata tables through protocol hand writing or dedicated compilers. With this, it can be implemented in a protocol parser.
도 4 내지 도 6은 표(1)과 상기 A-BNF 포맷에 의해 확장된 메소드 카메라에 대한 예를 나타낸다. 4 to 6 show an example of a method camera extended by the table (1) and the A-BNF format.
도 4는 확장헤더 Pan-x-axis, Pan-y-axis를 위해 주고 받는 RTSP 메시지를 나타낸다. 이것은 내장형 카메라 모듈(352)의 방향을 돌리는데 사용된다. x축과 y축에 각각 붙어 있는 작동장치에 명령을 내리면 정해진 각도만큼 이동하게 된다.Figure 4 shows the RTSP messages sent and received for the extended header Pan-x-axis, Pan-y-axis. This is used to turn the built-in camera module 352. Commands to the actuators attached to the x- and y-axes, respectively, will move by a fixed angle.
도 5는 확장헤더 Focal-length를 위해 주고 받는 RTSP 메시지를 나타낸다. 이것은 줌 기능을 이용할 때 사용된다. 줌 인(zoom in)과 줌 아웃(zoom out)을 하게 되면 초점 거리가 바뀌게 된다. 카메라의 줌 링을 돌려주는 작동장치에 명령을 내리게 된다. 5 shows an RTSP message exchanged for an extended header focal-length. This is used when using the zoom function. Zooming in and zooming out change the focal length. Command the actuator to turn the camera's zoom ring.
도 6은 확장헤더 F-number, Shutter-speed를 위해 주고 받는 RTSP 메시지를 나타낸다. 이것은 노출에 영향을 주는 요소로서, F-number는 조리개 값을 나타내는데 여기서 1/2 stop 및 1/3 stop을 모두 지원하게 된다. Shutter-speed는 초단위의 값으로, 1.0, 0.25 등과 같은 소수점 표현 양식과 1/8, 1/125 등과 같은 분수 표현 양식을 모두 지원하게 된다. 6 shows RTSP messages exchanged for extended header F-number and shutter-speed. This affects exposure, where the F-number represents the aperture value, which supports both 1/2 stop and 1/3 stop. Shutter-speed is a value in seconds that supports both decimal representations such as 1.0, 0.25, and fractional representations such as 1/8, 1/125, and so on.
도 7은 확장헤더 Flash-fired, Shoot를 위해 주고 받는 RTSP 메시지를 나타낸다. Shoot 헤더 필드가 RTSP 요청 메시지에 나타나면 카메라의 셔터를 누른 것과 같이 촬영이 수행된다. 이 때, 다른 여러 설정값(광축 방향, 줌, 노출 등)에 대한 헤더 필드가 같은 RTSP 요청 메시지에 나타나면 그 값을 기준으로 촬영이 수행되고, 나타나지 않으면 이전에 설정해 놓은 값으로 촬영을 하게 된다. 확장헤더 Flash-fired는 단독으로 사용할 수 없으며 Shoot와 함께 사용되어야 한다. Flash-fired가 사용되면 촬영시 플래쉬가 동작하게 된다. 7 shows RTSP messages exchanged for extended header Flash-fired and Shoot. When the Shoot header field appears in the RTSP request message, shooting is performed as if the camera's shutter was depressed. At this time, if header fields for different settings (optical direction, zoom, exposure, etc.) appear in the same RTSP request message, shooting is performed based on the values. If not, shooting is performed using previously set values. The extension header Flash-fired cannot be used alone, but must be used with Shoot. If Flash-fired is used, the flash will be activated during shooting.
도 8은 모든 확장헤더가 동시에 사용되어 사진이 촬영될 때의 RTSP 메시지를 나타낸다. 8 shows an RTSP message when all extension headers are used at the same time so that a picture is taken.
이와 같이 키패드를 조작하여 카메라 제어명령을 입력하게 되면 상기 RTSP 프로토콜의 확장 메소드를 이용하여 RTSP 제어 프로토콜 모듈(390)에 의해 적절한 RTSP 요청 메시지가 생성된다. 이렇게 생성된 RTSP 요청 메시지는 소켓 I/O를 통해 TCP/IP 프로토콜 스택으로 전달된다. TCP/IP 프로토콜 스택으로 전달된 RTSP 요청 메시지는 CDMA 데이터 콜 망을 통해 제 1이동단말기(100)의 TCP/IP 프로토콜 스택으로 전달된다.When the camera control command is input by operating the keypad as described above, an appropriate RTSP request message is generated by the RTSP control protocol module 390 using the extension method of the RTSP protocol. The generated RTSP request message is delivered to the TCP / IP protocol stack via socket I / O. The RTSP request message delivered to the TCP / IP protocol stack is delivered to the TCP / IP protocol stack of the first mobile terminal 100 through the CDMA data call network.
이렇게 RTSP 요청 메시지가 제 1이동단말기(100)에 수신되면 RTSP 제어 프로토콜 모듈(390)에서는 RTSP 요청 메시지에 대한 RTSP 응답 메시지를 역방향으로 제 2이동단말기(200)에 전송하고, RTSP 요청 메시지를 해석하여 제 1이동단말기(100)의 내장된 카메라(350)의 동작을 제어하게 된다. When the RTSP request message is received in the first mobile terminal 100, the RTSP control protocol module 390 transmits the RTSP response message for the RTSP request message to the second mobile terminal 200 in the reverse direction, and interprets the RTSP request message. By controlling the operation of the built-in camera 350 of the first mobile terminal 100.
상기와 같이, 본 발명은 카메라폰의 원격제어방식으로 국제표준인 RTP/RTCP 및 RTSP 프로토콜을 이용하기 때문에 모든 카메라폰 간에 호환성이 있고, 원격의 카메라폰에서 획득한 영상을 실시간으로 다른 카메라폰에서 받아 보면서 원격의 카메라폰의 동작을 제어할 수 있는 효과가 있다.As described above, the present invention uses the international standard RTP / RTCP and RTSP protocol as a remote control method of the camera phone is compatible between all the camera phones, the image obtained from the remote camera phone in real time in another camera phone While receiving, it is possible to control the operation of the remote camera phone.
또한, 본 발명에 의한 카메라폰을 데이터 콜 망에 접속시켜 촬영 대기 상태에 두게 되면 다른 카메라폰을 통해 실시간으로 영상을 볼 수 있으므로, 카메라폰을 원격 감시 폐쇄회로의 카메라 대용으로 사용할 수 있을 것이다. In addition, when the camera phone according to the present invention is connected to the data call network and placed in the standby state, the image can be viewed in real time through another camera phone, so that the camera phone can be used as a camera for the remote monitoring closed circuit.
도 1은 종래 원격 감시 기능을 갖는 카메라폰의 구성도.1 is a block diagram of a conventional camera phone having a remote monitoring function.
도 2는 본 발명에 의한 카메라폰의 원격 제어 시스템의 개략도.2 is a schematic diagram of a remote control system for a camera phone according to the present invention.
도 3은 본 발명에 의한 카메라폰의 구성도.3 is a block diagram of a camera phone according to the present invention.
도 4는 확장헤더 Pan-x-axis, Pan-y-axis를 위해 주고 받는 RTSP 메시지의 예시도.4 is an exemplary diagram of RTSP messages exchanged for extended header Pan-x-axis and Pan-y-axis.
도 5는 확장헤더 Focal-length를 위해 주고 받는 RTSP 메시지의 예시도.5 is an exemplary diagram of an RTSP message sent and received for an extended header focal-length.
도 6은 확장헤더 F-number, Shutter-speed를 위해 주고 받는 RTSP 메시지의 예시도.6 is an exemplary diagram of RTSP messages exchanged for extended header F-number and shutter-speed.
도 7은 확장헤더 Flash-fired, Shoot를 위해 주고 받는 RTSP 메시지의 예시도.7 is an exemplary diagram of an RTSP message sent and received for an extended header Flash-fired, Shoot.
도 8은 모든 확장헤더가 동시에 사용되는 경우의 RTSP 메시지의 예시도.8 illustrates an RTSP message when all extension headers are used at the same time.
** 도면의 주요 부분에 대한 부호 설명 **** Explanation of symbols on the main parts of the drawing **
100, 200 : 이동단말기 300 : 프로세서100, 200: mobile terminal 300: processor
310 : 프레임 버퍼 320 : LCD 드라이버310: frame buffer 320: LCD driver
330 : LCD 340 : 카메라 제어 드라이버330: LCD 340: Camera control driver
350 : 카메라 351 : 카메라 구동부350: camera 351: camera driver
352 : 카메라 모듈 360 : 카메라 드라이버352 camera module 360 camera driver
370 : 영상 인코더 380 : 영상 인코더370: video encoder 380: video encoder
390 : RTSP 제어 프로토콜 모듈 400 : RTP/RTCP 프로토콜 모듈390: RTSP control protocol module 400: RTP / RTCP protocol module
410 : CDMA 데이터 콜 통신 모듈410: CDMA data call communication module
Claims (5)
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020040040450A KR100595665B1 (en) | 2004-06-03 | 2004-06-03 | Remote control system and method of camera phone |
| CNA2005100515668A CN1705346A (en) | 2004-06-03 | 2005-03-04 | Camera mobile phone remote controlling system and method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020040040450A KR100595665B1 (en) | 2004-06-03 | 2004-06-03 | Remote control system and method of camera phone |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20050115129A true KR20050115129A (en) | 2005-12-07 |
| KR100595665B1 KR100595665B1 (en) | 2006-07-03 |
Family
ID=35577856
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020040040450A KR100595665B1 (en) | 2004-06-03 | 2004-06-03 | Remote control system and method of camera phone |
Country Status (2)
| Country | Link |
|---|---|
| KR (1) | KR100595665B1 (en) |
| CN (1) | CN1705346A (en) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR100797087B1 (en) * | 2006-02-27 | 2008-01-23 | (주)트루모바일 | Digital camera, Mobile device and Method for remote-controlling of the digital camera |
| EP2351367A1 (en) * | 2008-11-10 | 2011-08-03 | Nokia Corporation | Method and apparatus for remote camera control indications in video conferencing |
Families Citing this family (27)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR100688177B1 (en) * | 2004-12-31 | 2007-03-02 | 엘지전자 주식회사 | Mobile communication terminal with remote control and its operating method |
| WO2014089807A1 (en) * | 2012-12-13 | 2014-06-19 | Thomson Licensing | Remote control of a camera module |
| CN103997597A (en) * | 2013-02-20 | 2014-08-20 | 天彩电子（深圳）有限公司 | Method and apparatus for real-time transmission of camera audio-video stream |
| WO2014143776A2 (en) | 2013-03-15 | 2014-09-18 | Bodhi Technology Ventures Llc | Providing remote interactions with host device using a wireless device |
| CN104683681A (en) * | 2013-11-28 | 2015-06-03 | 英业达科技有限公司 | Far-end picture shooting system and method thereof |
| EP3195098A2 (en) | 2014-07-21 | 2017-07-26 | Apple Inc. | Remote user interface |
| WO2016019489A1 (en) * | 2014-08-04 | 2016-02-11 | Nokia Technologies Oy | Method, apparatus, computer program and system |
| WO2016036412A1 (en) | 2014-09-02 | 2016-03-10 | Apple Inc. | Remote camera user interface |
| WO2016036603A1 (en) | 2014-09-02 | 2016-03-10 | Apple Inc. | Reduced size configuration interface |
| US10254911B2 (en) | 2015-03-08 | 2019-04-09 | Apple Inc. | Device configuration user interface |
| EP3286915B1 (en) | 2015-04-23 | 2021-12-08 | Apple Inc. | Digital viewfinder user interface for multiple cameras |
| CN106341588A (en) * | 2015-07-06 | 2017-01-18 | 北京视联动力国际信息技术有限公司 | Electronic focusing method and device of camera |
| CN106817379A (en) * | 2015-11-27 | 2017-06-09 | 谢成火 | A kind of reverse long-range image pickup method of response type, the reverse long-range shooting service device of response type |
| US9716825B1 (en) | 2016-06-12 | 2017-07-25 | Apple Inc. | User interface for camera effects |
| CN107547790A (en) * | 2016-06-27 | 2018-01-05 | 中兴通讯股份有限公司 | The processing method of IMAQ, apparatus and system |
| US11112964B2 (en) | 2018-02-09 | 2021-09-07 | Apple Inc. | Media capture lock affordance for graphical user interface |
| US10887193B2 (en) | 2018-06-03 | 2021-01-05 | Apple Inc. | User interfaces for updating network connection settings of external devices |
| DK201870623A1 (en) | 2018-09-11 | 2020-04-15 | Apple Inc. | User interfaces for simulated depth effects |
| US10674072B1 (en) | 2019-05-06 | 2020-06-02 | Apple Inc. | User interfaces for capturing and managing visual media |
| US11770601B2 (en) | 2019-05-06 | 2023-09-26 | Apple Inc. | User interfaces for capturing and managing visual media |
| US11128792B2 (en) | 2018-09-28 | 2021-09-21 | Apple Inc. | Capturing and displaying images with multiple focal planes |
| US11321857B2 (en) | 2018-09-28 | 2022-05-03 | Apple Inc. | Displaying and editing images with depth information |
| US11340778B2 (en) | 2019-05-06 | 2022-05-24 | Apple Inc. | Restricted operation of an electronic device |
| US11706521B2 (en) | 2019-05-06 | 2023-07-18 | Apple Inc. | User interfaces for capturing and managing visual media |
| DK201970533A1 (en) | 2019-05-31 | 2021-02-15 | Apple Inc | Methods and user interfaces for sharing audio |
| US11039074B1 (en) | 2020-06-01 | 2021-06-15 | Apple Inc. | User interfaces for managing media |
| US11212449B1 (en) | 2020-09-25 | 2021-12-28 | Apple Inc. | User interfaces for media capture and management |
Family Cites Families (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR100630146B1 (en) * | 1999-12-16 | 2006-09-29 | 삼성전자주식회사 | Method for monitoring remote place by used camera telephone |
| JP3689063B2 (en) * | 2002-04-19 | 2005-08-31 | 松下電器産業株式会社 | Data receiving apparatus and data distribution system |
| JP2004072441A (en) * | 2002-08-07 | 2004-03-04 | Nakayo Telecommun Inc | Ip camera telephone device with image display function |
| KR20050052531A (en) * | 2002-10-15 | 2005-06-02 | 코닌클리케 필립스 일렉트로닉스 엔.브이. | System and method for transmitting scalable coded video over ip network |
-
2004
- 2004-06-03 KR KR1020040040450A patent/KR100595665B1/en not_active IP Right Cessation
-
2005
- 2005-03-04 CN CNA2005100515668A patent/CN1705346A/en active Pending
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR100797087B1 (en) * | 2006-02-27 | 2008-01-23 | (주)트루모바일 | Digital camera, Mobile device and Method for remote-controlling of the digital camera |
| EP2351367A1 (en) * | 2008-11-10 | 2011-08-03 | Nokia Corporation | Method and apparatus for remote camera control indications in video conferencing |
| EP2351367A4 (en) * | 2008-11-10 | 2013-07-31 | Nokia Corp | Method and apparatus for remote camera control indications in video conferencing |
Also Published As
| Publication number | Publication date |
|---|---|
| KR100595665B1 (en) | 2006-07-03 |
| CN1705346A (en) | 2005-12-07 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR100595665B1 (en) | Remote control system and method of camera phone | |
| US9413941B2 (en) | Methods and apparatus to compensate for overshoot of a desired field of vision by a remotely-controlled image capture device | |
| KR101226791B1 (en) | Video camera apparatus and recording method | |
| JP2014057310A (en) | Method and apparatus for displaying camera preview screen of portable terminal device | |
| EP2932704A1 (en) | Remote control of a camera module | |
| CN103227907A (en) | Method, device and system for remotely controlling image capture unit | |
| EP1603299A1 (en) | Remote control for mobile terminal | |
| CN115209192A (en) | Display device, intelligent device and camera sharing method | |
| KR20050007735A (en) | Remote picture-taking apparatus and method for a camera phone | |
| CN112203126A (en) | Screen projection method, screen projection device and storage medium | |
| JP2015122587A (en) | Communication device, imaging device and control method therefor, and program | |
| JP4692138B2 (en) | Pan / tilt function-equipped network camera viewing method from a mobile terminal and pan / tilt function-equipped network camera | |
| JP5239826B2 (en) | Image distribution apparatus, image distribution system, image distribution method, and program | |
| KR100464027B1 (en) | Apparatus and method for connecting portable terminal having camera and personal computer | |
| CN114650385A (en) | Control method and device of IP camera, storage medium and smart television | |
| JP2006345095A (en) | Imaging apparatus and information processing method | |
| JP7277173B2 (en) | Imaging device with video distribution function | |
| CN101577819B (en) | Electronic device, method and computer readable medium for transmitting video data | |
| JP2009171272A (en) | Video telephone terminal device | |
| JP2007028222A (en) | Video communication apparatus | |
| CN101783922B (en) | Video conference device and method thereof | |
| CN1921605A (en) | Method for transmitting mobile communication terminal digital image using set-top box | |
| JP2015142360A (en) | Imaging apparatus and universal head device | |
| KR20030033749A (en) | CCD camera using a cordless LAN | |
| JP2021034898A (en) | Processing device, method and program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A201 | Request for examination | ||
| E902 | Notification of reason for refusal | ||
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant | ||
| FPAY | Annual fee payment |
Payment date: 20130514 Year of fee payment: 8 |
|
| FPAY | Annual fee payment |
Payment date: 20140523 Year of fee payment: 9 |
|
| FPAY | Annual fee payment |
Payment date: 20150522 Year of fee payment: 10 |
|
| FPAY | Annual fee payment |
Payment date: 20160524 Year of fee payment: 11 |
|
| FPAY | Annual fee payment |
Payment date: 20170524 Year of fee payment: 12 |
|
| LAPS | Lapse due to unpaid annual fee |