KR20120078980A - 휴대단말기에서 영상의 방향정보 추출장치 및 방법 - Google Patents

휴대단말기에서 영상의 방향정보 추출장치 및 방법 Download PDF

Info

Publication number
KR20120078980A
KR20120078980A KR1020110000308A KR20110000308A KR20120078980A KR 20120078980 A KR20120078980 A KR 20120078980A KR 1020110000308 A KR1020110000308 A KR 1020110000308A KR 20110000308 A KR20110000308 A KR 20110000308A KR 20120078980 A KR20120078980 A KR 20120078980A
Authority
KR
South Korea
Prior art keywords
image
direction information
extracting
detected
degrees
Prior art date
Application number
KR1020110000308A
Other languages
English (en)
Inventor
백치현
박대범
최웅식
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020110000308A priority Critical patent/KR20120078980A/ko
Priority to US13/338,643 priority patent/US20120170807A1/en
Publication of KR20120078980A publication Critical patent/KR20120078980A/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/24Aligning, centring, orientation detection or correction of the image
    • G06V10/242Aligning, centring, orientation detection or correction of the image by image rotation, e.g. by 90 degrees
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B1/00Details of transmission systems, not covered by a single one of groups H04B3/00 - H04B13/00; Details of transmission systems not characterised by the medium used for transmission
    • H04B1/38Transceivers, i.e. devices in which transmitter and receiver form a structural unit and in which at least one part is used for functions of transmitting and receiving
    • H04B1/40Circuits
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Studio Devices (AREA)
  • Image Analysis (AREA)

Abstract

본 발명은 휴대단말기에서 영상의 방향정보 추출장치 및 방법에 관한 것으로, 특히 촬영된 영상의 방향정보를 추출할 수 있는 특정센서 없이도, 휴대단말기에서 촬영된 영상의 방향정보를 추출할 수 있는 휴대단말기에서 영상의 방향정보 추출장치 및 방법에 관한 것이다.
이를 달성하기 위해 휴대단말기에서 영상의 방향정보 추출장치가, 영상을 촬영하는 카메라부와; 상기 카메라부를 통해 촬영된 영상에서 객체가 검출되는 방향을 상기 영상을 정 방향으로 표시하기 위한 방향정보로 추출하고, 상기 추출된 방향정보와 함께 상기 영상을 저장하도록 제어하는 제어부를 포함하는 것을 특징으로 한다.

Description

휴대단말기에서 영상의 방향정보 추출장치 및 방법{DEVICE AND METHOD FOR EXTRACTING DIRECTION INFORMATION OF IMAGE IN WIRELESS TERMINAL}
본 발명은 휴대단말기에서 영상의 방향정보 추출장치 및 방법에 관한 것으로, 특히 촬영된 영상의 방향정보를 추출할 수 있는 특정센서 없이도, 휴대단말기에서 촬영된 영상의 방향정보를 추출할 수 있는 휴대단말기에서 영상의 방향정보 추출장치 및 방법에 관한 것이다.
현재 휴대 이동통신 단말기는 음성 통신 기능 이외에 고속의 데이터를 전송할 수 있는 구조로 변환하고 있다. 즉, IMT 2000 규격의 이동통신 망을 구현하면, 상기 휴대 단말기를 이용하여 음성통신 이외에 고속의 데이터 통신을 구현할 수 있다. 상기 데이터 통신을 수행하는 휴대 단말기에서 처리할 수 있는 데이터들은 패킷 데이터 및 영상데이터들이 될 수 있다. 또한 휴대단말기에 카메라나 TV수신기 등을 부가하여 동영상신호를 표시할 수 있는 기능이 구현되고 있다. 따라서 상기와 같이 카메라를 구비하는 휴대단말기는 영상 화면을 촬영하여 동영상(moving picture) 및 정지영상(still picture)으로 표시할 수 있으며, 또한 촬영된 영상 화면을 전송할 수도 있다. 또한 TV수신기를 구비하는 상기 휴대 단말기는 수신되는 영상신호를 표시할 수 있다.
그러나 상기 휴대단말기에 저장되는 영상은 촬영당시 휴대단말기의 방향에 대응되게 저장됨으로, 영상 뷰어를 통해 상기 저장된 영상들을 순차적으로 볼 때, 상기 영상들은 서로 다른 해당방향으로 표시하게 된다.
상기와 같은 문제점을 해결하기 위해 현재 휴대단말기는 중력센서를 구비하고 있으며, 영상을 저장할 때 상기 중력센서를 통해 추출된 현재 휴대단말기의 방향정보를 함께 저장한다. 따라서 상기 영상 뷰어를 통해 볼 때 상기 저장된 영상들을 순차적으로 볼 때, 상기 영상들은 모두 정 방향으로 표시하게 된다.
그러나, 상기와 같이 저장된 영상들을 모두 정 방향으로 보기 위해서 휴대단말기 중력센서를 구비해야만 함으로, 중력센서를 구비하지 않은 휴대 단말기는 여전히 서로 다른 해당방향으로 영상을 표시하게 된다.
따라서 본 발명의 목적은 촬영된 영상의 방향정보를 추출할 수 있는 특정센서 없이도, 휴대단말기에서 촬영된 영상의 방향정보를 추출할 수 있는 휴대단말기에서 영상의 방향정보 추출장치 및 방법을 제공하는 것이다.
상기 목적을 달성하기 위한 휴대단말기에서 영상의 방향정보 추출장치가, 영상을 촬영하는 카메라부와; 상기 카메라부를 통해 촬영된 영상에서 객체가 검출되는 방향을 상기 영상을 정 방향으로 표시하기 위한 방향정보로 추출하고, 상기 추출된 방향정보와 함께 상기 영상을 저장하도록 제어하는 제어부를 포함하는 것을 특징으로 한다.
또한 상기 목적을 달성하기 위한 휴대단말기에서 영상의 방향정보 추출방법이, 촬영된 영상에 대한 저장이 선택되면, 상기 촬영된 영상에서 객체가 검출되는 방향을 상기 영상을 정 방향으로 표시하기 위한 방향정보로 추출하는 과정과; 상기 추출된 방향정보와 함께 상기 영상을 저장하는 과정을 포함하는 것을 특징으로 한다.
본 발명은 휴대단말기에서 영상의 방향정보 추출장치 및 방법을 제공함으로써, 촬영된 영상의 방향정보를 추출하는 특정 센서를 구비하지 않아도 휴대단말기에서 촬영되는 영상의 방향정보를 추출할 수 있는 효과가 있다.
도 1은 본 발명의 실시 예에 따른 휴대단말기의 구성도.
도 2a-도 2b는 본 발명의 실시 예에 따른 휴대단말기에서 영상의 방향정보 추출과정을 도시한 흐름도.
도 3a - 도 3d는 도 2a-도 2b에서 방향정보 추출과정을 설명하기 위한 도면.
도 4a - 도 4c는 도 2a-도 2b에서 객체검출을 설명하기 위한 도면.
이하 본 발명의 바람직한 실시 예들의 상세한 설명이 첨부된 도면들을 참조하여 설명될 것이다. 도면들 중 동일한 구성들은 가능한 한 어느 곳에서든지 동일한 부호들을 나타내고 있음을 유의하여야 한다.
도 1은 본 발명의 실시 예에 따른 휴대단말기의 구성을 도시한 도면이다.
상기 도 1을 참조하면, RF부(123)는 휴대 단말기의 무선 통신 기능을 수행한다. 상기 RF부(123)는 송신되는 신호의 주파수를 상승변환 및 증폭하는 RF송신기와, 수신되는 신호를 저잡음 증폭하고 주파수를 하강변환하는 RF수신기등을 포함한다. 데이터처리부(120)는 상기 송신되는 신호를 부호화 및 변조하는 송신기 및 상기 수신되는 신호를 복조 및 복호화 하는 수신기 등을 구비한다. 즉, 상기 데이터 처리부(120)는 모뎀(MODEM) 및 코덱(CODEC)으로 구성될 수 있다. 여기서 상기 코덱은 패킷데이터 등을 처리하는 데이터 코덱과 음성 등의 오디오 신호를 처리하는 오디오 코덱을 구비한다. 오디오 처리부(125)는 상기 데이터 처리부(120)의 오디오 코덱에서 출력되는 수신 오디오신호를 재생하거나 또는 마이크로부터 발생되는 송신 오디오신호를 상기 데이터 처리부(120)의 오디오 코덱에 전송하는 기능을 수행한다.
키 입력부(127)는 숫자 및 문자 정보를 입력하기 위한 키들 및 각종 기능들을 설정하기 위한 기능 키들을 구비한다.
메모리(130)는 프로그램 메모리, 데이터 메모리들로 구성될 수 있다. 상기 프로그램 메모리는 휴대 단말기의 일반적인 동작을 제어하기 위한 프로그램들 및 촬영된 영상에서 객체검출을 통해 휴대단말기의 방향정보를 추출하도록 제어하는 프로그램들을 저장할 수 있다.
또한 상기 메모리(130)는 본 발명의 실시 예에 따라 촬영된 영상에서의 객체검출을 통해 추출된 휴대단말기의 방향정보와 함께 상기 촬영된 영상을 저장한다.
제어부(110)는 휴대 단말기의 전반적인 동작을 제어하는 기능을 수행한다.
상기 제어부(110)는 프리뷰모드에서 휴대단말기의 위치 즉, 상기 휴대단말기에 구비된 카메라부(140)의 위치와 상관없이, 표시부(160)에 정방향의 영상을 표시한다. 그러나, 프리뷰모드에서 촬영이 선택되어 상기 표시부(16)에 표시되는 영상을 저장할 때, 상기 제어부(110)는 상기 카메라부(140)의 촬영위치에 대응되게 상기 촬영된 영상을 저장한다. 즉, 상기 카메라부(140)의 촬영위치에 따라 동일 피사체에 대한 영상의 방향이 변경되어 저장된다.
상기 제어부(110)는 본 발명의 실시 예에 따라 상기 프리뷰 모드에서 영상을 표시하는 동안 촬영이 선택되면, 상기 카메라부(140)를 통해 촬영된 영상에서 객체인식기능을 통해 객체를 검출하고, 상기 객체가 검출되는 방향을 영상 뷰어에서 상기 영상을 정 방향으로 표시하기 위한 방향정보로 추출한다.
상기 카메라부(140)의 위치에 따라 촬영된 영상의 방향이 서로 다름으로, 상기 제어부(110)는 상기 촬영된 영상에서 객체인식기능을 통해 객체가 검출되지 않으면, 상기 촬영된 영상의 방향을 변경하면서 상기 객체인식기능을 통해 객체를 검출하도록 제어한다.
또한 상기 제어부(110)는 본 발명의 실시 예에 따라, 상기 촬영된 영상에서 상기 객체가 검출되면 0도 방향정보를 추출하고, 상기 영상을 90도 회전하여 상기 객체가 검출되면 90도 방향정보를 추출한다. 또한 상기 제어부(110)는 상기 영상을 180도 회전하여 상기 객체가 검출되면 180 방향정보를 추출하고, 상기 영상을 270도 회전하여 상기 객체가 검출되면 270도 방향정보를 추출하도록 제어한다.
또한 상기 제어부(110)는 본 발명의 실 시예에 따라 상기 추출된 방향정보와 함께 상기 촬영된 영상을 상기 메모리(130)에 저장하도록 제어한다.
또한 상기 제어부(110)는 본 발명의 실 시예에 따라 상기 추출된 방향정보를 EXIF정보와 같은 영상정보로 저장하도록 제어한다.
상기 객체는 얼굴, 문자 및 물체 중 어느 하나이면, 상기 각각의 객체들은 얼굴인식기능, 문자인식기능 및 물체인식기능을 통해 검출될 수 있다.
상기 얼굴인식기능, 상기 문자인식기능 및 상기 물체인식기능은 공지된 기술임으로, 설명을 생략한다.
상기 카메라부(140)는 영상 데이터를 촬영하며, 촬영된 광 신호를 전기적 신호로 변환하는 카메라 센서와, 상기 카메라센서로부터 촬영되는 아날로그 영상신호를 디지털 데이터로 변환하는 신호처리부를 구비한다. 여기서 상기 카메라 센서는 CCD 또는 CMOS센서라 가정하며, 상기 신호처리부는 DSP(Digital Signal Processor)로 구현할 수 있다. 또한 상기 카메라 센서 및 신호처리부는 일체형으로 구현할 수 있으며, 또한 분리하여 구현할 수도 있다.
상기 영상처리부(150)는 상기 카메라부(140)에서 출력되는 영상신호를 표시부(160)에 표시하기 위한 ISP(Image Signal Processing)를 수행하며, 상기 ISP는 감마교정, 인터폴레이션, 공간적 변화, 이미지 효과, 이미지 스케일, AWB, AE,AF등과 같은 기능을 수행한다. 따라서 상기 영상처리부(150)상기 카메라부(140)에서 출력되는 영상신호를 프레임 단위로 처리하며, 상기 프레임 영상데이터를 상기 표시부(160)의 특성 및 크기에 맞춰 출력한다. 또한 상기 영상처리부(150)는 영상코덱을 구비하며, 상기 표시부(160)에 표시되는 프레임 영상데이터를 설정된 방식으로 압축하거나, 압축된 프레임 영상데이터를 원래의 프레임 영상데이터로 복원하는 기능을 수행한다. 여기서 상기 영상코덱은 JPEG 코덱, MPEG4 코덱, Wavelet 코덱 등이 될 수 있다. 상기 영상처리부(150)는 OSD(On Screen Display) 기능을 구비한다고 가정하며, 상기 제어부(110)의 제어하에 표시되는 화면크기에 따라 온 스크린 표시데이터를 출력할 수 있다.
상기 표시부(160)는 상기 영상처리부(150)에서 출력되는 영상신호를 화면으로 표시하며, 상기 제어부(110)에서 출력되는 사용자 데이터를 표시한다. 여기서 상기 표시부(160)는 LCD를 사용할 수 있으며, 이런 경우 상기 표시부(160)는 LCD제어부(LCD controller), 영상데이터를 저장할 수 있는 메모리 및 LCD표시소자 등을 구비할 수 있다. 여기서 상기 LCD를 터치스크린(touch screen) 방식으로 구현하는 경우, 입력부로 동작할 수도 있으며, 이때 상기 표시부(160)에는 상기 키 입력부(127)와 같은 키들을 표시할 수 있다.
상기와 같은 휴대단말기에서 영사의 방향정보 추출 동작을 도 2- 도 4를 통해 상세히 살펴본다.
도 2a - 도 2b는 본 발명의 실시 예에 따른 휴대단말기에서 영상의 방향정보 추출과정을 도시한 흐름도이고, 도 3a - 도 3d는 도 2a-도 2b에서 방향정보 추출과정을 설명하기 위한 도면이며, 도 4a - 도 4c는 도 2a-도 2b에서 객체검출을 설명하기 위한 도면이다.
이하 본 발명의 실시 예를 도 1의 참조와 함께 상세히 설명한다. 본 발명의 실 시예에서는 촬영된 영상과 함께 저장되는 방향정보가 0도 방향정보, 90도 방향정보, 180도 방향정보 및 270도 방향정보 중 어느 하나 인 것을 예로 설명한다.
상기 도 2a - 도 2b를 참조하면, 프리뷰 모드에서 상기 표시부(160)에 영상을 표시하는 201단계에서 촬영이 선택되면, 상기 제어부(110)는 202단계에서 이를 감지하고, 상기 촬영된 영상에서 객체를 검출하기 위한 객체인식을 수행하도록 제어하는 203단계를 진행한다.
상기 203단계의 객체인식기능을 통해 상기 촬영된 영상에서 상기 객체가 검출되면, 상기 제어부(110)는 204단계에서 이를 감지하고 상기 촬영된 영상의 방향정보를 0도 방향정보로 추출하는 205단계를 진행한다.
상기 도 3a의 (a)와 같이, 상기 휴대단말기의 위치에 따라 0도 방향에 위치된 상기 카메라부(140)를 통한 프리뷰 모드에서 촬영이 선택되면, 상기 영상처리부(150)는 상기 카메라부(140)를 통해 출력되는 영상신호를 영상의 픽셀들로써, 좌측에서 우측방향으로 그리고 상측에서 하측방향으로 순차적으로 리드한다. 그리고, 상기 도 3a의 (b)와 같이, 상기 영상처리부(150)는 상기 리드된 영상의 픽셀들을 좌측에서 우측방향으로 그리고 상측에서 하측방향으로 순차적으로 출력하고, 상기 제어부(110)는 이를 상기 촬영된 영상으로 상기 메모리(130)에 저장하게 된다. 이때 상기 촬영된 영상을 나타내는 상기 도 3a의 (b)에서 객체인식을 통해 사람의 얼굴이 추출됨으로, 상기 제어부(110)는 0도 방향정보를 상기 촬영된 영상의 방향정보로 추출한다.
그러나, 상기 203단계에서 상기 객체인식기능을 통해 상기 촬영된 영상에서 객체가 검출되지 않으면, 상기 제어부(110)는 상기 204단계에서 이를 감지하고, 206단계에서 상기 촬영된 영상을 90도 회전한 후, 상기 객체인식기능을 통해 상기 객체를 검출하도록 제어한다.
상기 90도 회전된 상기 촬영된 영상에서 상기 객체인식기능을 통해 상기 객체가 검출되면, 상기 제어부(110)는 207단계에서 이를 감지하고, 상기 객체가 인식되기 위해 회전된 90도를 방향정보로 추출하는 208단계를 진행한다.
상기 도 3b의 (a)와 같이, 상기 휴대단말기의 위치변경에 따라 90도 회전된 방향에 위치된 상기 카메라부(140)를 통한 프리뷰 모드에서 촬영이 선택되면, 상기 영상처리부(150)는 상기 카메라부(140)를 통해 출력되는 영상신호를 영상의 픽셀들로써, 상측에서 하측방향으로 그리고 우측에서 좌측방향으로 순차적으로 리드한다. 그리고, 상기 도 3b의 (b)와 같이, 상기 영상처리부(150)는 상기 리드된 영상의 픽셀들을 좌측에서 우측방향으로 그리고 상측에서 하측방향으로 순차적으로 출력하고, 상기 제어부(110)는 이를 상기 촬영된 영상으로 상기 메모리(130)에 저장하게 된다. 이때 상기 촬영된 영상을 나타내는 상기 도 3b의 (b)에서 사람의 얼굴이 정 방향으로 표시되어 있지 않기 때문에 객체인식을 통해 사람의 얼굴이 검출되지 않는다. 따라서, 상기 제어부(110)는 상기 도 3b의 (b)에 표시되는 영상을 90도 회전함으로써, 상기 도 3a의 (b)와 같은 영상에서 사람의 얼굴을 검출하고, 따라서 회전된 90도를 상기 촬영된 영상의 방향정보로 추출한다.
상기 90도 회전된 상기 촬영된 영상에서 상기 객체인식기능을 통해 상기 촬영된 영상에서 객체가 검출되지 않으면, 상기 제어부(110)는 상기 207단계에서 이를 감지하고, 209단계에서 상기 촬영된 영상을 180도 회전한 후, 상기 객체인식기능을 통해 상기 객체를 검출하도록 제어한다.
상기 180도 회전된 상기 촬영된 영상에서 상기 객체인식기능을 통해 상기 객체가 검출되면, 상기 제어부(110)는 210단계에서 이를 감지하고, 상기 객체가 인식되기 위해 회전된 180도를 방향정보로 추출하는 211단계를 진행한다.
상기 도 3c의 (a)와 같이, 상기 휴대단말기의 위치변경에 따라 180도 회전된 방향에 위치된 상기 카메라부(140)를 통한 프리뷰 모드에서 촬영이 선택되면, 상기 영상처리부(150)는 상기 카메라부(140)를 통해 출력되는 영상신호를 영상의 픽셀들로써, 우측에서 좌측방향으로 그리고 하측에서 상측방향으로 순차적으로 리드한다. 그리고, 상기 도 3c의 (b)와 같이, 상기 영상처리부(150)는 상기 리드된 영상의 픽셀들을 좌측에서 우측방향으로 그리고 상측에서 하측방향으로 순차적으로 출력하고, 상기 제어부(110)는 이를 상기 촬영된 영상으로 상기 메모리(130)에 저장하게 된다. 이때 상기 촬영된 영상을 나타내는 상기 도 3c의 (b)에서 사람의 얼굴이 정 방향으로 표시되어 있지 않기 때문에 객체인식을 통해 사람의 얼굴이 검출되지 않는다. 따라서, 상기 제어부(110)는 상기 도 3c의 (b)에 표시되는 영상을 180도 회전함으로써, 상기 도 3a의 (b)와 같은 영상에서 사람의 얼굴을 검출하고, 따라서 회전된 180도를 상기 촬영된 영상의 방향정보로 추출한다.
상기 180도 회전된 상기 촬영된 영상에서 상기 객체인식기능을 통해 상기 촬영된 영상에서 객체가 검출되지 않으면, 상기 제어부(110)는 상기 210단계에서 이를 감지하고, 212단계에서 상기 촬영된 영상을 270도 회전한 후, 상기 객체인식기능을 통해 상기 객체를 검출하도록 제어한다.
상기 270도 회전된 상기 촬영된 영상에서 상기 객체인식기능을 통해 상기 객체가 검출되면, 상기 제어부(110)는 213단계에서 이를 감지하고, 상기 객체가 인식되기 위해 회전된 270도를 방향정보로 추출하는 214단계를 진행한다.
상기 도 3d의 (a)와 같이, 상기 휴대단말기의 위치변경에 따라 270도 회전된 방향에 위치된 상기 카메라부(140)를 통한 프리뷰 모드에서 촬영이 선택되면, 상기 영상처리부(150)는 상기 카메라부(140)를 통해 출력되는 영상신호를 영상의 픽셀들로써, 하측에서 우측방향으로 그리고 좌측에서 우측방향으로 순차적으로 리드한다. 그리고, 상기 도 3d의 (b)와 같이, 상기 영상처리부(150)는 상기 리드된 영상의 픽셀들을 좌측에서 우측방향으로 그리고 상측에서 하측방향으로 순차적으로 출력하고, 상기 제어부(110)는 이를 상기 촬영된 영상으로 상기 메모리(130)에 저장하게 된다. 이때 상기 촬영된 영상을 나타내는 상기 도 3d의 (b)에서 사람의 얼굴이 정 방향으로 표시되어 있지 않기 때문에 객체인식을 통해 사람의 얼굴이 검출되지 않는다. 따라서, 상기 제어부(110)는 상기 도 3d의 (b)에 표시되는 영상을 270도 회전함으로써, 상기 도 3a의 (b)와 같은 영상에서 사람의 얼굴을 검출하고, 따라서 회전된 270도를 상기 촬영된 영상의 방향정보로 추출한다.
상기 객체인식기능을 통해 상기 촬영된 영상의 방향정보가 추출되면, 상기 제어부(110)는 상기 추출된 방향정보와 함께 상기 촬영된 영상을 저장하는 215단계를 진행한다.
이후 영상 뷰어를 통해 상기 영상을 표시할 때 상기 방향정보에 따라 상기 영상을 회전하여 표시함으로써, 상기 영상은 항상 정 방향으로 표시된다.
상기 촬영된 영상에서 검출되는 객체는 얼굴, 문자 및 물체 중 어느 하나이면, 상기 각각의 객체들은 얼굴인식기능, 문자인식기능 및 물체인식기능을 통해 검출될 수 있다.
상기 도 4a는 얼굴인식기능을 통한 얼굴객체의 추출을 나타내고 있으며, 도 4b는 문자인식기능을 통한 문자객체의 추출을 나타내고 있으며, 도 4c는 물체인식기능을 통한 물체객체의 추출을 나타내고 있다.
본 발명의 실시 예에서는 촬영된 영상의 저장과정에서 휴대단말기의 방향정보를 추출하는 동작에 대해서만 설명하고 있으나, 영상통화 및 동영상 저장에서도 동일하게 저장될 수 있다.
상술한 본 발명의 설명에서는 휴대 단말기와 같은 구체적인 실시 예에 관해 설명하였으나, 여러 가지 변형이 본 발명의 범위에서 벗어나지 않고 실시 될 수 있다. 따라서 본 발명의 범위는 설명된 실시 예에 의하여 정할 것이 아니고 특허청구범위와 특허청구범위의 균등한 것에 의해 정해져야 한다.
110: 제어부, 130:메모리, 140:카메라부, 160:표시부

Claims (8)

  1. 휴대단말기에서 영상의 방향정보 추출장치에 있어서,
    영상을 촬영하는 카메라부와,
    상기 카메라부를 통해 촬영된 영상에서 객체가 검출되는 방향을 상기 영상을 정 방향으로 표시하기 위한 방향정보로 추출하고, 상기 추출된 방향정보와 함께 상기 영상을 저장하도록 제어하는 제어부를 포함하는 것을 특징으로 하는 휴대단말기에서 영상의 방향정보 추출장치.
  2. 제1 항에 있어서, 상기 제어부는,
    상기 카메라부의 촬영위치에 따라 방향이 변경되어 촬영되는 상기 영상에서 상기 객체가 검출되지 않으면, 상기 영상의 방향을 변경하면서 상기 객체의 검출을 수행하여 상기 방향정보를 추출하도록 제어하는 것을 특징으로 하는 휴대단말기에서 영상의 방향정보 추출장치.
  3. 제2 항에 있어서, 상기 제어부는,
    상기 영상에서 상기 객체가 검출되면 0도 방향정보, 상기 영상을 90도 회전하여 상기 객체가 검출되면 90도 방향정보, 상기 영상을 180도 회전하여 상기 객체가 검출되면 180 방향정보 및 상기 영상을 270도 회전하여 상기 객체가 검출되면 270도 방향정보를 추출하도록 제어하는 것을 특징으로 하는 휴대단말기에서 영상의 방향정보 추출장치.
  4. 제1 항에 있어서,
    상기 객체는 얼굴, 문자 및 물체 중 적어도 어느 하나 인 것을 특징으로 하는 휴대단말기에서 영상의 방향정보 추출장치.
  5. 휴대단말기에서 영상의 방향정보 추출방법에 있어서,
    촬영된 영상에 대한 저장이 선택되면, 상기 촬영된 영상에서 객체가 검출되는 방향을 상기 영상을 정 방향으로 표시하기 위한 방향정보로 추출하는 과정과,
    상기 추출된 방향정보와 함께 상기 영상을 저장하는 과정을 포함하는 것을 특징으로 하는 휴대단말기에서 영상의 방향정보 추출방법.
  6. 제5 항에 있어서, 상기 방향정보로 추출하는 과정은,
    상기 카메라부의 촬영위치에 따라 방향이 변경되어 촬영되는 상기 영상에서 상기 객체의 검출을 수행하는 과정과,
    상기 영상에서 상기 객체가 검출되면, 0도를 방향정보로 추출하는 과정과,
    상기 영상에서 상기 객체가 검출되지 않으면, 상기 영상의 방향을 변경하면서 상기 객체의 검출을 수행하여 상기 방향정보를 추출하는 과정을 포함하는 것을 특징으로 하는 휴대단말기에서 영상의 방향정보 추출방법.
  7. 제6 항에 있어서, 상기 방향정보를 추출하는 과정은
    상기 영상에서 상기 객체가 검출되지 않으면, 상기 영상을 90도 회전하여 상기 방향정보를 추출하는 과정과,
    상기 90도 회전된 영상에서 상기 방향정보가 추출되면, 상기 90도를 상기 방향정보로 추출하는 과정과,
    상기 90도 회전된 영상에서 상기 방향정보가 추출되지 않으면, 상기 영상을 180도 회전하여 상기 방향정보를 추출하는 과정과,
    상기 180도 회전된 영상에서 상기 방향정보가 추출되면, 상기 180도를 상기 방향정보로 추출하는 과정과,
    상기 180도 회전된 영상에서 상기 방향정보가 추출되지 않으면, 상기 영상을 270도 회전하여 상기 방향정보를 추출하는 과정과,
    상기 270도 회전된 영상에서 상기 방향정보가 추출되면, 상기 270도를 상기 방향정보로 추출하는 과정을 포함하는 것을 특징으로 하는 휴대단말기에서 영상의 방향정보 추출방법.
  8. 제5 항에 있어서,
    상기 객체는 얼굴, 문자 및 물체 중 적어도 어느 하나 인 것을 특징으로 하는 휴대단말기에서 영상의 방향정보 추출방법.
KR1020110000308A 2011-01-03 2011-01-03 휴대단말기에서 영상의 방향정보 추출장치 및 방법 KR20120078980A (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020110000308A KR20120078980A (ko) 2011-01-03 2011-01-03 휴대단말기에서 영상의 방향정보 추출장치 및 방법
US13/338,643 US20120170807A1 (en) 2011-01-03 2011-12-28 Apparatus and method for extracting direction information image in a portable terminal

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110000308A KR20120078980A (ko) 2011-01-03 2011-01-03 휴대단말기에서 영상의 방향정보 추출장치 및 방법

Publications (1)

Publication Number Publication Date
KR20120078980A true KR20120078980A (ko) 2012-07-11

Family

ID=46380821

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110000308A KR20120078980A (ko) 2011-01-03 2011-01-03 휴대단말기에서 영상의 방향정보 추출장치 및 방법

Country Status (2)

Country Link
US (1) US20120170807A1 (ko)
KR (1) KR20120078980A (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101677658B1 (ko) * 2015-07-30 2016-11-18 엘지전자 주식회사 이동 단말기 및 그 제어방법
CN108701439A (zh) * 2016-10-17 2018-10-23 华为技术有限公司 一种图像显示优化方法及装置

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112837211B (zh) * 2021-01-28 2023-07-18 北京奇艺世纪科技有限公司 一种图片处理方法、装置、电子设备及可读存储介质

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4305000B2 (ja) * 2003-02-19 2009-07-29 コニカミノルタホールディングス株式会社 画像処理方法、画像処理装置、記憶媒体及びプログラム
US20050264653A1 (en) * 2004-05-27 2005-12-01 Starkweather James A Portable electronic device with adjustable image capture orientation and method therefore
JP2006287917A (ja) * 2005-03-08 2006-10-19 Fuji Photo Film Co Ltd 画像出力装置、画像出力方法、および画像出力プログラム
US7706579B2 (en) * 2006-12-21 2010-04-27 Sony Ericsson Communications Ab Image orientation for display
CN101809621B (zh) * 2007-12-14 2012-07-25 松下电器产业株式会社 图像判定装置
JP2011119997A (ja) * 2009-12-03 2011-06-16 Sony Computer Entertainment Inc 画像処理装置および画像処理方法

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101677658B1 (ko) * 2015-07-30 2016-11-18 엘지전자 주식회사 이동 단말기 및 그 제어방법
WO2017018564A1 (ko) * 2015-07-30 2017-02-02 엘지전자 주식회사 이동 단말기 및 그 제어방법
CN108701439A (zh) * 2016-10-17 2018-10-23 华为技术有限公司 一种图像显示优化方法及装置
US10847073B2 (en) 2016-10-17 2020-11-24 Huawei Technologies Co., Ltd. Image display optimization method and apparatus
CN108701439B (zh) * 2016-10-17 2021-02-12 华为技术有限公司 一种图像显示优化方法及装置

Also Published As

Publication number Publication date
US20120170807A1 (en) 2012-07-05

Similar Documents

Publication Publication Date Title
JP6382961B2 (ja) ビデオコンテンツを取得する方法及び機器
KR100651521B1 (ko) 휴대단말기의 속력측정방법
KR102090624B1 (ko) 이미지 촬영장치 및 방법
KR100678209B1 (ko) 휴대단말기의 이미지 제어방법
KR100678202B1 (ko) 회전에 관계없이 동일 모드 이미지를 표시하는 표시부를가지는 휴대 단말기 및 그 운용방법
KR100689480B1 (ko) 휴대단말기의 영상크기 변환방법
KR100651368B1 (ko) 휴대단말기의 움직임에 따른 이미지 제어방법
KR20120059170A (ko) 휴대단말기의 화면전환 제어 장치 및 방법
KR100735290B1 (ko) 휴대단말기의 화상통화모드에서 영상데이터 제어방법
KR100630203B1 (ko) 휴대단말기의 영상데이터 표시방법
KR20120130466A (ko) 휴대단말기에서 외부장치의 데이터를 제어할 수 있는 장치 및 방법
KR101714050B1 (ko) 휴대단말기의 데이터 표시장치 및 방법
KR101381542B1 (ko) 휴대단말기의 영상 촬영 방법
KR20120078980A (ko) 휴대단말기에서 영상의 방향정보 추출장치 및 방법
EP3599763A2 (en) Method and apparatus for controlling image display
KR100703462B1 (ko) 휴대단말기의 영상첨부모드 전환방법
KR100678208B1 (ko) 휴대단말기의 이미지 저장 및 표시방법
KR20120073049A (ko) 휴대단말기의 카메라부 원격제어 장치 및 방법
GB2527524A (en) A method and technical equipment for image capturing and viewing
KR100678130B1 (ko) 휴대단말기의 통화수행 방법
KR100456737B1 (ko) 휴대용 단말기의 화면표시 장치 및 방법
KR100617736B1 (ko) 휴대 단말기에서 사진 확대 및 축소 방법
KR100678127B1 (ko) 휴대 단말기에서 영상화면의 표시방법
KR20060136235A (ko) 휴대단말기의 통화수행 방법
CN110913213A (zh) 视频质量评测处理的方法、装置及系统

Legal Events

Date Code Title Description
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid