KR20110039028A - 동영상 재생화면의 오브젝트 관련정보 획득 방법 및 그 휴대기기 - Google Patents

동영상 재생화면의 오브젝트 관련정보 획득 방법 및 그 휴대기기 Download PDF

Info

Publication number
KR20110039028A
KR20110039028A KR1020090096289A KR20090096289A KR20110039028A KR 20110039028 A KR20110039028 A KR 20110039028A KR 1020090096289 A KR1020090096289 A KR 1020090096289A KR 20090096289 A KR20090096289 A KR 20090096289A KR 20110039028 A KR20110039028 A KR 20110039028A
Authority
KR
South Korea
Prior art keywords
specific object
video
image
search
mobile device
Prior art date
Application number
KR1020090096289A
Other languages
English (en)
Inventor
홍상우
박명순
Original Assignee
에스케이텔레콤 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 에스케이텔레콤 주식회사 filed Critical 에스케이텔레콤 주식회사
Priority to KR1020090096289A priority Critical patent/KR20110039028A/ko
Publication of KR20110039028A publication Critical patent/KR20110039028A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명은 동영상 재생화면의 오브젝트 관련정보 획득 방법 및 그 휴대기기에 관한 것으로, 터치스크린 인터페이스를 채택하고 있는 휴대기기를 통해 동영상 컨텐츠를 재생하는 중에 동영상에 포함된 특정 오브젝트를 선택하여 관련정보를 간편하게 획득할 수 있다. 본 발명에 따르면, 휴대기기에서 하나 이상의 오브젝트가 포함된 동영상 컨텐츠를 재생하는 중에 특정 오브젝트가 선택되면, 네트워크를 통해 검색서버와 접속하고, 선택된 특정 오브젝트의 이미지를 추출하여 검색서버로 전송한 후, 검색서버로부터 특정 오브젝트의 관련정보 검색결과를 수신하여 표시한다. 오브젝트 선택은 휴대기기의 터치 인터페이스를 통해 이루어지며, 휴대기기가 오브젝트의 이미지를 검색서버에 검색 쿼리로 제공하면 검색서버는 이미지 매칭에 의한 유사도 산출을 통해 유사도가 높은 순으로 이미지들을 반환한다.
휴대기기, 동영상, 오브젝트, 이미지, 관련정보, 검색, 네트워크, 매칭, 유사도

Description

동영상 재생화면의 오브젝트 관련정보 획득 방법 및 그 휴대기기{Method for Acquiring Information Related to Object on Video Scene and Portable Device thereof}
본 발명은 휴대기기에서 재생 중인 동영상 이용 기술에 관한 것으로서, 좀더 구체적으로는 터치스크린 인터페이스를 채택하고 있는 휴대기기를 통해 동영상 컨텐츠를 재생하는 중에 동영상에 포함된 특정 오브젝트를 선택하여 관련정보를 간편하게 획득할 수 있도록 하는 기술에 관한 것이다.
정보통신 기술의 발전에 따라 휴대폰이 상용화된 지는 이미 오래되었으며, 근래에는 MP3 플레이어, PMP(Portable Multimedia Player) 등 다양한 유형의 휴대용 멀티미디어 기기들도 젊은 사용자 층을 중심으로 널리 사용되고 있다. 이와 같이 각종 휴대기기들의 보급이 늘면서 사용자의 요구는 점점 다양해지고 있고, 이를 충족시키기 위한 제조업체들의 경쟁은 갈수록 치열해지고 있다. 이에 따라 더 많은 기능을 더 편리하게 쓸 수 있는 휴대기기들이 지속적으로 개발되고 있으며, 각종 멀티미디어 기능, 무선인터넷 기능 등이 추가되면서 휴대기기의 동작환경은 점차 PC 수준으로 나아가고 있다.
휴대기기는 기본적으로 사용자가 간편하게 휴대할 수 있어야 하기 때문에 그 크기가 상대적으로 소형이다. 따라서 통상적으로 키패드(keypad)와 액정화면(LCD screen)으로 대표되는 입력장치와 출력장치의 크기 또한 제한적일 수밖에 없다. 이러한 제약 하에서 휴대기기에 다양하고 복잡한 기능을 부여함과 동시에 그 기능을 수행하기 위한 사용자의 접근성과 편의성을 향상시키려면, 이들을 고려한 사용자 인터페이스(user interface)의 개발이 필수적이다. 더구나 전통적인 휴대기기의 동작환경과 다른 PC 수준의 동작환경이 요구되면서 그에 적합한 사용자 인터페이스의 필요성은 더욱 커지고 있다.
이에 다양한 방식의 사용자 인터페이스가 개발되고 있는데, 그 중의 하나가 터치 인터페이스(touch interface)이다. 예를 들어, 기존의 키패드와 더불어 터치패드를 입력부에 채용하는 기술, 키패드 영역에 터치센서를 장착하여 키패드 겸 터치패드를 형성하는 기술, 키패드를 완전히 없애고 터치스크린을 도입하는 기술 등이 그것이다.
이 중에서 터치스크린은 휴대기기와 사용자 사이에 입력 인터페이스 및 출력 인터페이스를 동시에 제공한다. 터치스크린은 기존의 키패드를 없앨 수 있으므로 표시 면적을 증가시킬 수 있고, 입력 측면에서도 사용자로 하여금 직관적인 조작이 가능하도록 하는 이점이 있다.
한편, 최근의 휴대기기들은 언제 어디서나 간편하게 동영상을 재생하여 감상할 수 있는 기능을 제공하고 있다. 그런데 휴대기기에서 제공하는 종래의 동영상 재생기능은 단순히 동영상을 재생하고 제어하는 기능에 머무르고 있을 뿐, 동영상 재생 중에 특정 오브젝트와 관련된 정보를 얻고자 할 때, 휴대기기의 동영상 재생기능과 연계하여 오브젝트 관련정보를 획득할 수 있는 방법이 없었다.
따라서 본 발명의 목적은 전술한 종래기술의 문제점을 해결하기 위한 것으로, 휴대기기를 통해 동영상을 재생할 때 동영상에 포함된 특정 오브젝트의 관련정보를 간편하게 획득할 수 있도록 함으로써 휴대기기의 동영상 재생기능을 보다 확장하고 개선하기 위한 것이다.
이러한 목적을 달성하기 위하여, 본 발명은 휴대기기에서 하나 이상의 오브젝트가 포함된 동영상 컨텐츠를 재생하는 단계; 상기 동영상 컨텐츠에 포함된 상기 오브젝트 중 특정 오브젝트의 선택을 인식하는 단계; 네트워크를 통해 검색서버와 접속하는 단계; 상기 선택된 특정 오브젝트의 이미지를 추출하여 상기 검색서버로 전송하는 단계; 상기 검색서버로부터 상기 특정 오브젝트의 관련정보 검색결과를 수신하는 단계; 및 상기 수신된 검색결과를 표시하는 단계를 포함하는 동영상 재생화면의 오브젝트 관련정보 획득 방법을 제공한다.
본 발명의 방법에서, 상기 특정 오브젝트의 선택을 인식하는 단계는 상기 휴대기기의 터치 인터페이스를 통해 이루어질 수 있다.
또한, 본 발명의 방법은 상기 검색서버가 상기 특정 오브젝트의 이미지를 수신하고 이미지 매칭에 의한 유사도 산출을 통해 유사도가 높은 순으로 특정 개수의 이미지들을 상기 검색결과로 반환하는 단계를 더 포함할 수 있다.
또한, 상기 검색결과는 텍스트 데이터, 이미지 데이터, 오디오 데이터, 비디오 데이터 중 적어도 하나를 포함할 수 있다.
또한, 이 방법은 상기 특정 오브젝트의 선택 단계 후에, 상기 동영상 컨텐츠의 재생을 일시 정지하는 단계를 더 포함할 수 있다.
또한, 상기 특정 오브젝트의 선택 단계 후에, 상기 선택된 특정 오브젝트에 대한 후속 옵션 목록을 표시하는 단계를 더 포함할 수 있으며, 상기 후속 옵션 목록은 오브젝트 관련정보 검색 옵션을 포함할 수 있다.
이 경우, 상기 후속 옵션 목록은 오브젝트 관련장면 제어 옵션을 더 포함할 수 있다.
한편, 본 발명은 하나 이상의 오브젝트가 포함된 동영상 컨텐츠를 저장하는 저장부; 상기 동영상 컨텐츠를 재생하는 동영상 재생기; 네트워크를 통해 검색서버와 접속하는 통신 인터페이스; 상기 동영상 컨텐츠의 재생 중에 상기 오브젝트 중 특정 오브젝트의 선택을 인식하고, 상기 선택된 특정 오브젝트의 이미지를 추출하여 상기 통신 인터페이스를 통해 상기 검색서버로 전송하며, 상기 검색서버로부터 상기 특정 오브젝트의 관련정보 검색결과를 수신하는 제어부; 및 상기 재생 중인 동영상 컨텐츠를 표시하고, 상기 제어부의 제어 하에 상기 검색서버로부터 수신된 상기 검색결과를 표시하는 표시부를 포함하는 휴대기기를 제공한다.
본 발명의 휴대기기는 상기 표시부 위에 장착되어 상기 특정 오브젝트의 선택을 위한 터치를 감지하고 상기 터치에 따른 입력신호를 생성하여 상기 제어부로 전달하는 터치감지부를 더 포함할 수 있다.
본 발명의 휴대기기에 있어서, 상기 제어부는 상기 검색서버가 상기 특정 오브젝트의 이미지를 수신하고 이미지 매칭에 의한 유사도 산출을 통해 유사도가 높은 순으로 특정 개수의 이미지들을 반환하면 상기 특정 개수의 이미지들을 상기 검색결과로 수신하여 상기 표시부에 표시할 수 있다.
또한, 상기 제어부는 상기 검색서버가 텍스트 데이터, 이미지 데이터, 오디오 데이터, 비디오 데이터 중 적어도 하나를 상기 검색결과로 수신하여 상기 표시부에 표시할 수 있다.
또한, 상기 제어부는 상기 특정 오브젝트의 선택을 인식한 후 상기 선택된 특정 오브젝트에 대한 후속 옵션 목록을 상기 표시부에 표시할 수 있으며, 상기 후속 옵션 목록은 오브젝트 관련정보 검색 옵션을 포함할 수 있다.
본 발명에 따르면, 휴대기기를 통해 동영상을 재생하다가 특정 오브젝트와 관련된 정보를 좀더 쉽게 획득할 수 있는 이점이 있다.
또한, 본 발명은 터치스크린 인터페이스를 채택하고 있는 휴대기기에서 동영상 재생 중에 보다 간편하고 직관적인 조작을 통해 특정 오브젝트의 관련정보를 쉽게 검색할 수 있는 이점이 있다.
또한, 본 발명은 단지 휴대기기를 통해 동영상 컨텐츠를 재생하는 기능에 그치지 않고 동영상 재생관련 기능을 보다 확장하고 그 활용도를 높일 수 있는 이점이 있다.
이하, 첨부 도면을 참조하여 본 발명의 실시예를 보다 상세하게 설명하고자 한다. 실시예를 설명함에 있어서 본 발명이 속하는 기술 분야에 잘 알려져 있고 본 발명과 직접적으로 관련이 없는 기술 내용에 대해서는 가급적 설명을 생략한다. 이는 불필요한 설명을 생략함으로써 본 발명의 핵심을 흐리지 않고 더욱 명확히 전달하기 위함이다. 한편, 첨부 도면을 통틀어 동일하거나 대응하는 구성요소에는 동일한 참조번호를 부여한다.
본 발명은 터치스크린 인터페이스를 채택하고 있는 휴대기기를 통해 동영상 컨텐츠를 재생하는 경우에 적용된다. 동영상은 하나 이상의 오브젝트(object)를 포함하고 있으며, 재생 중인 동영상의 특정 화면에서 사용자가 특정 오브젝트를 선택하여 그 오브젝트와 관련된 정보를 간편하게 획득할 수 있도록 한다.
즉, 사용자가 동영상 내의 특정 오브젝트를 선택하면, 휴대기기는 선택된 오브젝트의 이미지를 추출하고 네트워크를 통해 검색서버와 접속한 후 추출된 이미지를 전송하며, 검색서버가 이미지 매칭에 의한 유사도 산출을 통해 유사도가 높은 순으로 이미지들을 반환하면 이를 검색결과로 수신하여 표시한다. 검색서버는 검색된 이미지 외에도 그와 연결된 기타 정보들(텍스트, 이미지, 오디오, 비디오 등의 데이터)도 검색결과로 휴대기기에 제공할 수 있다.
이하, 이에 대하여 도 1 내지 도 4를 참조하여 설명한다.
도 1은 본 발명의 실시예에 따른 동영상 컨텐츠의 재생 화면을 예시적으로 보여주는 도면이고, 도 2는 본 발명의 실시예에서 동영상에 포함된 특정 오브젝트 를 선택하는 화면을 예시적으로 보여주는 도면이다. 도 3은 본 발명의 실시예에서 특정 오브젝트가 선택됨에 따라 후속 옵션 목록이 표시되는 화면을 예시적으로 보여주는 도면이고, 도 4는 본 발명의 실시예에서 오브젝트 관련정보의 검색결과가 표시되는 화면을 예시적으로 보여주는 도면이다. 이러한 도면에 나타난 화면 구성은 단지 설명을 위한 하나의 예일 뿐, 본 발명이 이러한 구성으로 한정되는 것은 아니다.
먼저, 도 1에 도시된 바와 같이, 휴대기기(100)는 터치스크린(110)을 포함하며, 터치스크린(110)을 통해 동영상 컨텐츠(예컨대, 영화)가 재생 중이라 가정한다. 재생 중인 동영상에는 오브젝트(10a, 10b)가 포함되어 나타난다. 오브젝트는 동영상에 포함되어 화면상에 나타나는 여러 시각적 요소들 중에서 두드러지게 식별이 가능한 것을 의미하며, 오브젝트의 대표적인 예로는 인물, 동물, 집, 자동차, 비행기 등이 있다.
이어서, 도 2에 도시된 바와 같이, 동영상 재생 중에 사용자가 손가락(20)으로 특정 오브젝트(10a)를 터치(22, touch)하면, 재생 중인 동영상은 일시 정지된다.
곧이어, 도 3에 도시된 바와 같이, 화면상에는 터치 지점(22)과 인접하여 후속 옵션 목록(24)이 팝업창(pop-up window) 등의 형태로 나타난다. 후속 옵션 목록(24)은 '관련정보 검색'이라는 옵션을 포함하고 있으며, 사용자가 이 옵션을 선택하면 휴대기기(100)는 사용자가 선택한 오브젝트의 이미지를 추출하고 이를 검색서버로 보내어 검색결과를 획득하게 된다. 이 밖에, 후속 옵션 목록(24)은 하나 이 상의 오브젝트 관련장면 제어 옵션을 더 포함할 수도 있으며, 이를 선택하면 해당 오브젝트와 관련된 장면으로 동영상 제어가 가능하다.
이어서, 도 4에 도시된 바와 같이, 검색서버로부터 검색결과를 수신한 휴대기기는 수신 데이터를 표시부(114)에 출력한다. 표시부(114)에는 사용자가 선택한 특정 오브젝트로부터 추출되어 검색서버에 검색 쿼리로 제공되는 이미지, 즉 검색대상(34)이 나타나며, 검색대상(34)에 대한 관련정보 검색결과인 이미지들(35)이 표시된다.
검색결과로서 휴대기기에 제공되는 이미지들(35)은 검색서버가 이미지 검색 기술을 이용하여 검색을 수행한 결과이다. 휴대기기가 특정 오브젝트의 이미지를 검색서버에 검색 쿼리로 전송하면, 이를 수신한 검색서버는 이미지 매칭 기법을 이용하여 이미지 데이터베이스를 대상으로 유사도 산출을 수행하며 유사도가 높은 순으로 소정 개수의 이미지들을 선정한다. 그리고 선정된 이미지들을 검색결과로서 휴대기기에 제공하면, 휴대기기는 이를 수신하여 표시부(114) 화면에 표시한다. 검색결과 이미지들(35)이 한 화면에 모두 표시될 수 없는 경우 스크롤 바(36)가 나타난다.
한편, 도 4에 도시되지는 않았지만, 검색서버는 검색된 이미지 외에도 그와 연결된 기타 정보들(텍스트, 이미지, 오디오, 비디오 등의 데이터)도 검색결과로 휴대기기에 제공할 수 있고, 이 경우 휴대기기는 도 4에 도시된 이미지들(35)과 함께 그에 연결된 텍스트 등의 정보를 표시할 수 있다. 아울러, 검색결과로 표시되는 이미지들(35)이나 그 연결 정보는 데이터 유형별로 분류되어 표시될 수 있으며, 이 경우 데이터 유형별로 숨김/펼침 기능이 사용될 수도 있다. 또한, 휴대기기에 검색결과로 표시되는 이미지나 텍스트 등의 정보를 사용자가 선택하면, 보다 상세한 정보가 표시되거나 해당 웹 페이지로 접속되는 등의 후속 과정이 수행될 수 있다.
이하, 도 5를 참조하여 본 발명에 따른 휴대기기를 설명한다. 도 5는 본 발명의 실시예에 따른 휴대기기의 구성을 나타내는 블록도이다.
도 5를 참조하면, 휴대기기(100)는 터치스크린(110), 저장부(120), 제어부(130), 통신 인터페이스(140)를 포함하여 구성된다. 터치스크린(110)은 터치감지부(112)와 표시부(114)를 포함하며, 저장부(120)는 오브젝트(124)를 포함하는 동영상 컨텐츠(122)를 저장한다. 제어부(130)는 동영상 재생기(132)와 이미지 추출기(134)를 포함한다.
본 발명에 따른 휴대기기(100)는 예컨대 휴대폰, 스마트 폰(smart phone), PDA(personal digital assistant), DMB(digital multimedia broadcasting) 수신기와 같은 이동방송 수신기, MP3 플레이어(MP3 player)나 PMP(portable multimedia player)와 같은 멀티미디어 플레이어 등이다. 그러나 본 발명의 휴대기기(100)가 이러한 예만으로 국한되는 것은 아니며, 터치스크린(110)을 구비하고 있고 동영상 재생이 가능한 휴대형 전자기기라면 모두 본 발명이 적용 가능하다.
터치스크린(110)은 입력 인터페이스와 출력 인터페이스를 동시에 제공한다. 즉, 터치스크린(110)은 입력장치로서 터치감지부(112)를 구비하며, 표시장치로서 표시부(114)를 구비한다. 한편, 본 발명에 따른 휴대기기(100)는 터치스크린(110) 외에 통상적인 입력장치(예컨대 키패드나 휠 키 등의 각종 포인팅 입력장치)를 추 가로 더 구비할 수 있다. 음성출력부(즉, 스피커)와 같이 통상적인 휴대기기(100)에 기본적으로 구비되는 구성요소는 설명 및 도시를 생략한다.
터치감지부(112)는 사용자의 터치 행위를 감지하고 그에 따른 입력신호를 생성하여 제어부(130)로 전달한다. 터치감지부(112)는 예컨대 표시부(114) 상에 장착되는 터치패널 또는 터치센서로서, 터치가 발생하면 그에 따른 물리량의 변화를 검출하여 전기신호로 변환한다. 특히, 본 발명의 터치감지부(112)는 동영상 재생 중에 특정 오브젝트의 선택을 위한 사용자의 터치를 감지하고 이에 따른 입력신호를 생성하여 제어부(130)로 전달한다.
표시부(114)는 제어부(130)의 제어 하에 휴대기기(100)의 각종 메뉴를 비롯하여 사용자가 입력한 정보 또는 사용자에게 제공하는 정보를 표시한다. 표시부(114)는 예컨대 액정표시장치(LCD) 또는 그에 상응하는 다른 표시장치로 이루어질 수 있다. 특히, 본 발명에서 표시부(114)는 동영상 재생 중 선택된 오브젝트 관련정보에 대한 검색결과를 표시한다. 또한, 표시부(114)는 특정 오브젝트가 선택되면 이에 대한 후속 옵션 목록을 표시하기도 한다.
저장부(120)는 휴대기기(100)의 기능과 관련된 각종 프로그램과 어플리케이션을 저장하며, 기능 수행에 필요한 데이터 및 기능 수행 중에 발생하는 데이터를 저장한다. 저장부(120)는 데이터를 일시 저장하는 하나 이상의 버퍼를 포함할 수 있으며, 별도의 외부저장매체를 더 포함할 수도 있다. 특히, 본 발명에서 저장부(120)는 하나 이상의 동영상 컨텐츠(122)를 저장하며, 각각의 동영상 컨텐츠(122)는 하나 이상의 오브젝트(124)를 포함한다. 동영상 컨텐츠(122)의 재생장면 마다 그 장면에 포함된 오브젝트(124)는 다를 수 있다.
제어부(130)는 휴대기기(100)에 대한 전반적인 제어 기능을 수행한다. 특히, 본 발명의 제어부(130)는 동영상 재생기(132)와 이미지 추출기(134)를 포함하며, 이들은 소프트웨어의 형태로 구현되어 저장부(120)에 저장될 수 있고, 동영상 재생기능과 오브젝트 관련정보 검색기능이 실행될 때 각각 제어부(130)에 의해 선택적으로 활성화될 수 있다.
동영상 재생기(132)는 재생기능이 실행되면 활성화되고, 저장부(120)로부터 특정 동영상 컨텐츠(122)를 추출하여 재생한다. 또한, 이미지 추출기(134)는 오브젝트 관련정보 검색기능이 실행되면 활성화되고, 사용자가 선택한 오브젝트의 이미지를 동영상 컨텐츠(122)로부터 추출한다.
특히, 제어부(130)는 동영상 컨텐츠(122)의 재생 중에 특정 오브젝트(124)의 선택을 인식하고, 이미지 추출기(134)가 추출한 오브젝트의 이미지를 통신 인터페이스(140)를 통해 검색서버(300)로 전송하며, 검색서버(300)가 반환하는 특정 오브젝트의 관련정보 검색결과를 통신 인터페이스(140)를 통해 수신하여 표시부(114)에 제공한다.
통신 인터페이스(140)는 휴대기기(100)가 네트워크(200)를 통해 검색서버(300)로 접속할 수 있도록 한다. 통신 인터페이스(140)는 유무선 인터페이스가 모두 가능하다.
이하, 본 발명에 따른 동영상의 오브젝트 관련정보 획득 방법을 설명한다. 이하의 설명으로부터, 전술한 휴대기기(100)의 구성과 작용 또한 보다 명료해질 것 이다. 도 6은 본 발명의 실시예에 따른 동영상 재생화면의 오브젝트 관련정보 획득 방법을 나타내는 흐름도이다.
도 5와 도 6을 참조하면, 먼저 저장부(120)에 저장된 하나 이상의 동영상 컨텐츠(122) 중 특정 동영상 컨텐츠가 선택되고 재생된다(S11 단계). 즉, 사용자가 터치스크린(110)을 통해 특정 동영상 컨텐츠(122)를 선택하면, 제어부(130)는 터치감지부(112)로부터 사용자의 선택신호를 수신하고 동영상 재생기(132)를 활성화시킨다. 활성화된 동영상 재생기(132)는 사용자가 선택한 동영상 컨텐츠(122)를 저장부(120)로부터 추출하여 표시부(114) 및 스피커(도시되지 않음)를 통해 출력한다.
이어서, 제어부(130)는 터치스크린(110)을 통해 재생 중인 동영상 화면에서 특정 오브젝트가 선택되는지 확인한다(S12 단계). 전술한 도 2는 이 단계의 화면 구현예에 해당한다. 도 2를 함께 참조하면, 동영상의 재생화면에서 사용자가 특정 오브젝트(10a)를 터치(22)하여 선택하면, 제어부(130)는 터치감지부(112)로부터 해당 신호를 수신하여 오브젝트의 선택을 인식한다.
특정 오브젝트의 선택을 인식한 제어부(130)는 동영상 재생기(132)를 제어하여 재생 중인 동영상 컨텐츠를 일시 정지시킨다(S13 단계). 아울러, 제어부(130)는 선택된 오브젝트의 관련정보 검색 여부를 판별한다(S14 단계). 이를 위해 제어부(130)는 표시부(114)에 후속 옵션 목록을 표시할 수 있다. 전술한 도 3은 이 단계의 화면 구현예에 해당한다. 도 3을 함께 참조하면, 동영상 재생화면에서 특정 오브젝트가 터치(22)에 의해 선택될 때, 제어부(130)는 후속 옵션 목록(24)을 팝업창 등의 형태로 표시한다.
오브젝트 관련정보의 검색이 아닌 경우, 제어부(130)는 다른 기능을 수행한다(S15 단계). 예를 들어, 도 3에 예시된 바와 같이 후속 옵션 목록(24)이 '등장장면부터 다시보기 등의 오브젝트 관련장면 제어 옵션을 포함하고 있고 사용자가 이를 선택한 경우, 제어부(130)는 녹음파일 재생기(122)를 제어하여 해당 제어 옵션에 따라 동영상 컨텐츠를 재생한다.
S14 단계의 판별 결과 오브젝트 관련정보의 검색인 경우, 제어부(130)의 이미지 추출기(134)는 선택된 오브젝트의 이미지를 추출한다(S16 단계). 이미지 추출 기법은 본 발명이 속하는 기술분야에 잘 알려져 있으므로 이에 대한 구체적인 설명은 생략한다.
이어서, 제어부(130)는 통신 인터페이스(140)를 제어하여 네트워크(200)를 통해 검색서버(300)와 접속한다(S17 단계). 즉, 도 3의 예에서 후속 옵션 목록(24) 중 사용자가 '관련정보 검색'을 선택하는 경우에 해당한다. 네트워크(200)를 통해 휴대기기(100)와 검색서버(300) 사이의 접속을 구현하는 방법은 공지기술이므로 구체적 설명을 생략한다.
이어서, 제어부(130)는 선택된 특정 오브젝트의 이미지를 검색서버(300)로 전송한다(S18 단계). 즉, 사용자가 관련정보를 얻고자 하는 오브젝트로부터 추출된 이미지를 검색서버(300)에 검색 쿼리로 제공한다. 검색 쿼리를 수신한 검색서버(300)는 이미지 데이터베이스를 대상으로 공지의 이미지 매칭 기법을 이용하여 유사도 산출을 수행하며 유사도가 높은 순으로 소정 개수의 이미지들을 선정한다. 그리고 선정된 이미지들을 검색결과로서 휴대기기(100)에 반환한다. 검색서버(300) 및 검색 과정은 공지기술이므로 구체적 설명을 생략한다.
한편, 검색서버(300)는 이미지 매칭 기법을 통해 선정된 이미지들 외에도 그와 연결된 기타 정보들(텍스트, 이미지, 오디오, 비디오 등의 데이터)도 검색결과로 휴대기기(100)에 제공할 수 있다.
이어서, 제어부(130)는 검색서버(300)로부터 검색결과를 수신하고 이를 표시부(114)에 표시한다(S19 단계). 전술한 도 4는 이 단계의 화면 구현예에 해당한다. 도 4를 함께 참조하면, 검색결과는 이미지(35) 형태로 표시부(114) 화면에 표시된다. 이때, 표시부(114)에는 검색서버(300)에 검색 쿼리로 제공된 이미지, 즉 검색대상(34)도 함께 표시될 수 있다. 그러나 도 4의 화면 구현예는 이해를 돕기 위한 하나의 예일 뿐, 본 발명이 이에 한정되는 것이 아님은 물론이다. 전술한 바와 같이, 검색결과에 텍스트 등의 기타 정보들이 포함되어 있는 경우, 표시부(114)는 그 정보들도 함께 표시할 수 있다.
지금까지 실시예를 통하여 본 발명에 따른 동영상 재생화면의 오브젝트 관련정보 획득 방법 및 그 휴대기기에 대하여 설명하였다. 본 명세서와 도면에는 본 발명의 바람직한 실시예에 대하여 개시하였으며, 비록 특정 용어들이 사용되었으나, 이는 단지 본 발명의 기술 내용을 쉽게 설명하고 발명의 이해를 돕기 위한 일반적인 의미에서 사용된 것이지, 본 발명의 범위를 한정하고자 하는 것은 아니다. 여기에 개시된 실시예 외에도 본 발명의 기술적 사상에 바탕을 둔 다른 변형예들이 실시 가능하다는 것은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 자명한 것이다.
본 발명에 따른 동영상 재생화면의 오브젝트 관련정보 획득 방법 및 그 휴대기기는 동영상 재생기능을 구비하고 터치 인터페이스를 채용한 가능한 각종 휴대기기, 이동통신단말, 유무선단말 등에 유용하게 적용할 수 있다.
도 1은 본 발명의 실시예에 따른 동영상 컨텐츠의 재생 화면을 예시적으로 보여주는 도면이다.
도 2는 본 발명의 실시예에서 동영상에 포함된 특정 오브젝트를 선택하는 화면을 예시적으로 보여주는 도면이다.
도 3은 본 발명의 실시예에서 특정 오브젝트가 선택됨에 따라 후속 옵션 목록이 표시되는 화면을 예시적으로 보여주는 도면이다.
도 4는 본 발명의 실시예에서 오브젝트 관련정보의 검색결과가 표시되는 화면을 예시적으로 보여주는 도면이다.
도 5는 본 발명의 실시예에 따른 휴대기기의 구성을 나타내는 블록도이다.
도 6은 본 발명의 실시예에 따른 동영상 재생화면의 오브젝트 관련정보 획득 방법을 나타내는 흐름도이다.
<도면의 주요부분에 대한 설명>
10a, 10b: 오브젝트 22: 터치 지점
24: 후속 옵션 목록 35: 검색대상
36: 검색결과 이미지 100: 휴대기기
110: 터치스크린 112: 터치감지부
114: 표시부 120: 저장부
122: 동영상 컨텐츠 124: 오브젝트
130: 제어부 132: 동영상 재생기
134: 이미지 추출기 140: 통신 인터페이스
200: 네트워크 300: 검색서버

Claims (12)

  1. 휴대기기에서 하나 이상의 오브젝트가 포함된 동영상 컨텐츠를 재생하는 단계;
    상기 동영상 컨텐츠에 포함된 상기 오브젝트 중 특정 오브젝트의 선택을 인식하는 단계;
    네트워크를 통해 검색서버와 접속하는 단계;
    상기 선택된 특정 오브젝트의 이미지를 추출하여 상기 검색서버로 전송하는 단계;
    상기 검색서버로부터 상기 특정 오브젝트의 관련정보 검색결과를 수신하는 단계; 및
    상기 수신된 검색결과를 표시하는 단계;
    를 포함하는 동영상 재생화면의 오브젝트 관련정보 획득 방법.
  2. 청구항 1에 있어서,
    상기 특정 오브젝트의 선택을 인식하는 단계는 상기 휴대기기의 터치 인터페이스를 통해 이루어지는 것을 특징으로 하는 동영상 재생화면의 오브젝트 관련정보 획득 방법.
  3. 청구항 1에 있어서,
    상기 검색서버가 상기 특정 오브젝트의 이미지를 수신하고 이미지 매칭에 의한 유사도 산출을 통해 유사도가 높은 순으로 특정 개수의 이미지들을 상기 검색결과로 반환하는 단계;
    를 더 포함하는 것을 특징으로 하는 동영상 재생화면의 오브젝트 관련정보 획득 방법.
  4. 청구항 1에 있어서,
    상기 검색결과는 텍스트 데이터, 이미지 데이터, 오디오 데이터, 비디오 데이터 중 적어도 하나를 포함하는 것을 특징으로 하는 동영상 재생화면의 오브젝트 관련정보 획득 방법.
  5. 청구항 1에 있어서,
    상기 특정 오브젝트의 선택 단계 후에,
    상기 동영상 컨텐츠의 재생을 일시 정지하는 단계;
    를 더 포함하는 것을 특징으로 하는 동영상 재생화면의 오브젝트 관련정보 획득 방법.
  6. 청구항 1에 있어서,
    상기 특정 오브젝트의 선택 단계 후에,
    상기 선택된 특정 오브젝트에 대한 후속 옵션 목록을 표시하는 단계;
    를 더 포함하며,
    상기 후속 옵션 목록은 오브젝트 관련정보 검색 옵션을 포함하는 것을 특징으로 하는 동영상 재생화면의 오브젝트 관련정보 획득 방법.
  7. 청구항 6에 있어서,
    상기 후속 옵션 목록은 오브젝트 관련장면 제어 옵션을 더 포함하는 것을 특징으로 하는 동영상 재생화면의 오브젝트 관련정보 획득 방법.
  8. 하나 이상의 오브젝트가 포함된 동영상 컨텐츠를 저장하는 저장부;
    상기 동영상 컨텐츠를 재생하는 동영상 재생기;
    네트워크를 통해 검색서버와 접속하는 통신 인터페이스;
    상기 동영상 컨텐츠의 재생 중에 상기 오브젝트 중 특정 오브젝트의 선택을 인식하고, 상기 선택된 특정 오브젝트의 이미지를 추출하여 상기 통신 인터페이스를 통해 상기 검색서버로 전송하며, 상기 검색서버로부터 상기 특정 오브젝트의 관련정보 검색결과를 수신하는 제어부; 및
    상기 재생 중인 동영상 컨텐츠를 표시하고, 상기 제어부의 제어 하에 상기 검색서버로부터 수신된 상기 검색결과를 표시하는 표시부;
    를 포함하는 휴대기기.
  9. 청구항 8에 있어서,
    상기 표시부 위에 장착되어 상기 특정 오브젝트의 선택을 위한 터치를 감지하고 상기 터치에 따른 입력신호를 생성하여 상기 제어부로 전달하는 터치감지부;
    를 더 포함하는 것을 특징으로 하는 휴대기기.
  10. 청구항 8에 있어서,
    상기 제어부는 상기 검색서버가 상기 특정 오브젝트의 이미지를 수신하고 이미지 매칭에 의한 유사도 산출을 통해 유사도가 높은 순으로 특정 개수의 이미지들을 반환하면 상기 특정 개수의 이미지들을 상기 검색결과로 수신하여 상기 표시부에 표시하는 것을 특징으로 하는 휴대기기.
  11. 청구항 8에 있어서,
    상기 제어부는 상기 검색서버가 텍스트 데이터, 이미지 데이터, 오디오 데이터, 비디오 데이터 중 적어도 하나를 상기 검색결과로 수신하여 상기 표시부에 표시하는 것을 특징으로 하는 휴대기기.
  12. 청구항 8에 있어서,
    상기 제어부는 상기 특정 오브젝트의 선택을 인식한 후 상기 선택된 특정 오브젝트에 대한 후속 옵션 목록을 상기 표시부에 표시하며, 상기 후속 옵션 목록은 오브젝트 관련정보 검색 옵션을 포함하는 것을 특징으로 하는 휴대기기.
KR1020090096289A 2009-10-09 2009-10-09 동영상 재생화면의 오브젝트 관련정보 획득 방법 및 그 휴대기기 KR20110039028A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020090096289A KR20110039028A (ko) 2009-10-09 2009-10-09 동영상 재생화면의 오브젝트 관련정보 획득 방법 및 그 휴대기기

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020090096289A KR20110039028A (ko) 2009-10-09 2009-10-09 동영상 재생화면의 오브젝트 관련정보 획득 방법 및 그 휴대기기

Publications (1)

Publication Number Publication Date
KR20110039028A true KR20110039028A (ko) 2011-04-15

Family

ID=44045893

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020090096289A KR20110039028A (ko) 2009-10-09 2009-10-09 동영상 재생화면의 오브젝트 관련정보 획득 방법 및 그 휴대기기

Country Status (1)

Country Link
KR (1) KR20110039028A (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130116148A (ko) * 2012-04-13 2013-10-23 엘지전자 주식회사 이미지 검색 방법 및 이를 위한 디지털 디바이스
KR20140065214A (ko) * 2012-11-21 2014-05-29 엘지전자 주식회사 이동 단말기 및 그 동작 방법
WO2014117384A1 (en) * 2013-02-01 2014-08-07 Intel Corporation Techniques for image-based search using touch controls

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130116148A (ko) * 2012-04-13 2013-10-23 엘지전자 주식회사 이미지 검색 방법 및 이를 위한 디지털 디바이스
KR20140065214A (ko) * 2012-11-21 2014-05-29 엘지전자 주식회사 이동 단말기 및 그 동작 방법
WO2014117384A1 (en) * 2013-02-01 2014-08-07 Intel Corporation Techniques for image-based search using touch controls
EP2951756A4 (en) * 2013-02-01 2016-09-07 Intel Corp IMAGE-BASED RESEARCH TECHNIQUES USING TOUCH CONTROLS
US9916081B2 (en) 2013-02-01 2018-03-13 Intel Corporation Techniques for image-based search using touch controls

Similar Documents

Publication Publication Date Title
US11838579B2 (en) Intelligent automated assistant for TV user interactions
US11537267B2 (en) Method and device for search page interaction, terminal and storage medium
US11206448B2 (en) Method and apparatus for selecting background music for video shooting, terminal device and medium
WO2020007012A1 (zh) 一种搜索页面显示方法、装置、终端及存储介质
US11409817B2 (en) Display apparatus and method of controlling the same
CN111314784B (zh) 一种视频播放方法及电子设备
US20140365950A1 (en) Portable terminal and user interface method in portable terminal
CN111989645B (zh) 视频的预览方法及电子设备
EP2866159B1 (en) Electronic device and method for controlling a screen
KR20140090114A (ko) 키워드 검색 방법 및 장치
KR20110039028A (ko) 동영상 재생화면의 오브젝트 관련정보 획득 방법 및 그 휴대기기
US10503776B2 (en) Image display apparatus and information providing method thereof
CN115550741A (zh) 视频管理方法、装置、电子设备及可读存储介质
US11706482B2 (en) Display device
KR101150727B1 (ko) 휴대기기에서 재생 중인 동영상 내의 오브젝트 조작에 의한 동영상 제어 방법과 그 휴대기기
KR20110038776A (ko) 녹음파일의 키워드 관련정보 획득 방법 및 그 휴대기기
EP4236329A1 (en) Display device and operating method therefor
KR101104730B1 (ko) 동영상 내의 오브젝트 제어 방법 및 단말기
CN115793904A (zh) 锁屏显示方法、移动终端及存储介质
KR101212943B1 (ko) 브라우저에서 키 이벤트 발생에 따른 최상위 페이지 제공 방법
CN104185052A (zh) 智能电视上查找内容的方法和装置

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
N231 Notification of change of applicant
E601 Decision to refuse application