KR20130061149A - 모바일 디바이스 원격 복귀 채널 - Google Patents

모바일 디바이스 원격 복귀 채널 Download PDF

Info

Publication number
KR20130061149A
KR20130061149A KR1020127031648A KR20127031648A KR20130061149A KR 20130061149 A KR20130061149 A KR 20130061149A KR 1020127031648 A KR1020127031648 A KR 1020127031648A KR 20127031648 A KR20127031648 A KR 20127031648A KR 20130061149 A KR20130061149 A KR 20130061149A
Authority
KR
South Korea
Prior art keywords
instructions
control device
central server
image
input
Prior art date
Application number
KR1020127031648A
Other languages
English (en)
Inventor
로날드 에이. 브로크만
Original Assignee
액티브비디오 네트웍스 비.브이.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 액티브비디오 네트웍스 비.브이. filed Critical 액티브비디오 네트웍스 비.브이.
Publication of KR20130061149A publication Critical patent/KR20130061149A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
    • H04N21/41265—The peripheral being portable, e.g. PDAs or mobile phones having a remote control device for bidirectional communication between the remote control device and client device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4227—Providing Remote input by a user located remotely from the client device, e.g. at work
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/24—Systems for the transmission of television signals using pulse code modulation

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • User Interface Of Digital Computer (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)
  • Selective Calling Equipment (AREA)

Abstract

본 발명은 네트워크 커넥션을 통해 원격 서버 또는 로컬 렌더링 디바이스와 접촉하고 네트워크에 연결된 사용자의, 핸드헬드 디바이스 등의, 제어 디바이스에 의해 원격 서버의 이미지 소스 및/또는 로컬 렌더링 디바이스의 기억 매체로부터 비롯된 이미지 디스플레이의 이미지들 및/또는 사용자 인터페이스의 디스플레이를 조작하는 방법에 관한 것이며, 상기 방법은: - 원격 서버 또는 로컬 렌더링 디바이스가 제어 디바이스에 의한 본 방법의 실행에 적합한 조작 소프트웨어가 구비된 제어 디바이스로부터 조작 명령들을 수신하는 단계; - 중앙 서버 및/또는 로컬 렌더링 디바이스에서 조작 명령들을 처리하는 단계, 및 - TV 또는 모니터 등의 디스플레이 디바이스에서의 최종 디스플레이를 위해 이미지들 및/또는 사용자 인터페이스를 디스플레이하기 위해 중앙 서버 및/또는 로컬 렌더링 디바이스로부터 이미지 정보를 송신하는 단계로 구성된다.

Description

모바일 디바이스 원격 복귀 채널{MOBILE DEVICE REMOTE RETOUR CHANNEL}
본 발명은 네트워크에 연결되고 네트워크 커넥션을 통해 원격 서버 또는 로컬 렌더링 디바이스와 접촉하는 사용자의 핸드헬드 디바이스 등의 제어 디바이스에 의해 원격 서버의 이미지 소스 및/또는 로컬 렌더링 디바이스의 기억 매체로부터 비롯된 이미지 디스플레이의 이미지들 및/또는 사용자 인터페이스의 디스플레이를 조작하는 방법에 관한 것이다. 또한, 본 발명은 이러한 방법의 적용에 적합한, 핸드헬드 디바이스 등의, 네트워크에 연결된 디바이스와 같은 제어 디바이스에 관한 것이다. 또한, 본 발명은 중앙 서버, 로컬 렌더링 디바이스 및 시스템에 관한 것이다. 또한, 본 발명은 이러한 방법을 실행하기 위한 컴퓨터 소프트웨어에 관한 것이다.
예를 들어, 비디오 코덱에 기초하여 복수의 개별 비디오 스트림들에 의해 국부적 사용자들에게 이미지 정보를 제공하기 위한 시스템이 본 문서와 동일한 출원인의 공개 번호 WO 2008/044916의 국제 특허 출원으로부터 공지된다. 이를 위해, 예를 들어, 중앙 서버에서 실행되는 복수의 개별 애플리케이션들에 기초하여 이미지들이 생성되며, 이에 기초하여 개별 비디오 스트림들이 중앙 서버에서 생성된다. 본 특허 출원은 또한 이러한 일반적인 원리의 다수의 다른 최적화들을 또한 포함한다. 본 출원 텍스트의 개별 양상들과 함께 더 이른 출원의 모든 개별 양상들의 조합된 설명을 제공하기 위해, 본 특허 출원의 내용은 본 명세서에서 참조용으로 본 텍스트에 포함되는 것으로 간주된다.
상술된 출원 '916의 시스템에서, 셋탑 박스의 네트워크 커넥션을 통해 중앙 서버에 제공되는 명령들을 셋탑 박스에 직접 제공하기 위해 표준 셋탑 박스에서 공지된 원격 제어가 사용된다. 이러한 원격 제어는 사용자 인터페이스의 동작과 관련하여 아주 많은 제약들을 가진다.
사용자 인터페이스의 동작을 향상시키기 위해, 본 발명은 네트워크에 연결되고 네트워크 커넥션을 통해 원격 서버 또는 로컬 렌더링 디바이스와 접촉하는 사용자의, 핸드헬드 디바이스 등의, 제어 디바이스에 의해 원격 서버의 이미지 소스 및/또는 로컬 렌더링 디바이스의 기억 매체로부터 비롯된 이미지 디스플레이의 이미지들 및/또는 사용자 인터페이스의 디스플레이를 조작하는 방법을 제공하며, 상기 방법은
- 원격 서버 또는 로컬 렌더링 디바이스가 제어 디바이스에 의한 본 방법의 실행에 적합한 조작 소프트웨어가 구비된 제어 디바이스로부터 조작 명령들을 수신하는 단계;
- 중앙 서버 및/또는 로컬 렌더링 디바이스에서 조작 명령들을 처리하는 단계, 및
- TV 또는 모니터 등의 디스플레이 디바이스에서의 최종 디스플레이를 위해 이미지들 및/또는 사용자 인터페이스를 디스플레이하기 위해 중앙 서버 및/또는 로컬 렌더링 디바이스로부터 이미지 정보를 송신하는 단계
를 포함한다.
본 발명에 따른 방법의 한 장점은, 명령들이 네트워크 커넥션을 통해 제어 디바이스로부터 수신될 수 있다는 점이다. 이에 의해, 범용 컴퓨터 디바이스 등, 제어 디바이스로서 비교적 고급의 디바이스를 사용할 수 있게 된다. 범용 컴퓨터 디바이스는, 터치스크린, 움직임 검출기 등, 사용자를 위한 비교적 풍부한 입력 동작들을 가진다. 본 발명에 따라, 명시된 국제 특허 출원에 따라 시스템의 사용자에게 이러한 비교적 풍부한 입력 옵션들을 제공할 수 있게 된다. 또한, 비디오 레코더, 컴퓨터, 미디어 플레이어 등의 로컬 렌더링 디바이스의 사용자에게 이러한 비교적 풍부한 입력 옵션들을 제공할 수 있게 된다. 이를 위해 이러한 렌더링 디바이스에는 명령들을 수신하기 위한 네트워크 커넥션이 제공되어야만 한다. 대안으로, 예를 들어, 적외선 커넥션 또는 케이블에 의해 공지된 원격 제어와 유사한 방식으로 직접적인 상호 커넥션을 제공할 수 있다.
또한, 더 풍부한 입력 옵션들에 의해, 게임, 채팅 등의 다수의 상호 작용 애플리케이션들을 사용할 수 있다.
제1 양호한 실시예에 따라, 본 발명에 따른 방법은, 입력 조작 명령들에 기초하여, MPEG 동작들 등의 비디오 코덱 동작들을 생성하기 위한 단계들을 포함하며, MPEG 동작들은 이미지 디스플레이에 사용된다. 상기 공개 '916에 기술된 비디오 처리 동작들과 결합하여, 그에 기초하여 비디오 코덱 동작들을 실행하기 위해 명령들을 적용할 수 있다. 이에 의해 동작들은 제어 디바이스의 비교적 풍부한 사용자 인터페이스에 기초하여 가능하게 된다. 그 일례들은, 예를 들면, 멀티-터치 입력 또는 제스처 입력에 기초하여 실행될 수 있는 줌 동작들이다.
다른 양호한 실시예에서, 본 방법은 조작 명령들에 기초하여 사용자 인터페이스의 디스플레이를 변경하기 위한 단계들을 포함한다. 이에 의해, 예를 들어, 메뉴 구조를 내비게이트할 수 있다. 예를 들어, 터치스크린 위를 스와이프 이동함으로써 두 메뉴 스크린들 간을 스위칭할 수 있다. 그러나, 또한, 서브메뉴 항목을 선택 및 활성화해서, 다른 메뉴 페이지로 스위칭할 수 있다.
본 방법은, 변위 효과들 및/또는 줌 효과들을 실현하기 위한 이동 벡터들 및/또는 병진 벡터들의 적용 등, 비디오 코덱 내에서 동작가능한 이미지 처리 동작들을 더 양호하게 포함한다. 이에 의해, 유리한 방식으로, 예를 들어, 복수의 작은 디스플레이들 중 하나를 선택한 후에 이를 풀-스크린으로 확대할 수 있다. 이를 인터넷에서의 사진 페이지의 사용과 비교해 보라. 사용자가 마우스로 이미지들 중 하나를 선택하면, 이는 스크린에서 확대되어 보여진다. 본 발명에 의해, 예를 들어, 사용자 인터페이스에 9개의 사진들 또는 이동 비디오 이미지들을 보여줄 수 있으며, 이들 중 하나는 사용자가 선택한 후 확대되어 보여진다. 또한, 상기 줌 동작들로, 이미 유효한 비교적 작은 이미지로부터 시작해서 매끄러운 이동으로 이미지를 점차 확대할 수 있다. 그 후, 고 해상도의 더 큰 이미지가 배경 데이터 스토리지로부터 유효할 때, 이미지는 명확하게 고 품질로 도시된다. 이러한 상황은, 이미지가 클릭에 이어 즉시 확대되는 것처럼 사용자에게 보이도록, 시의 적절할 수 있어서, 더 높은 해상도를 가진 배경 이미지의 검색의 레이턴시가 없는 것처럼 보인다.
제어 디바이스로부터의 조작 명령들에 기초한 이미지 처리 동작들에서, 더 양호하게 인터-인코딩(inter-encoding) 및 인트라-인코딩(intra-encoding)이 사용된다. '916으로부터 공지된 이미지 처리 동작들은 이에 의해 적용될 수 있다.
스크롤 명령들 또는 슬라이드 명령들에 대한 슬라이딩 이동들, 줌 명령들에 대한 줌 인 및 아웃 이동들 등의, 터치스크린에 의해 입력된 조작 명령들이 양호하게 또한 적용되며, 명령들은 멀티-터치 명령들에 의해 양호하게 생성된다. 이에 의해, 사용자에게 비교적 매우 풍부한 입력 옵션들이 제공된다.
명령들은 제어 디바이스를 이동함으로써 더 양호하게 생성되며, 이 이동들은 제어 디바이스에 배열된 이동 검출기 또는 중력 검출기에 의해 검출될 수 있다. 예를 들어, 제어 디바이스를 오른쪽으로 회전시킴으로써 메뉴 구조에서 오른쪽으로 레벨을 이동시킬 수 있으며, 또는, 대안으로, 제어 디바이스를 왼쪽으로 회전시킴으로써 메뉴 구조에서 왼쪽으로 레벨을 이동시킬 수 있다. 또한, 예를 들어, 제어 디바이스를 흔들어서 사용자에 의해 선택된 활동 효과를 구현할 수 있다.
명령들은 텍스트 입력, 음성 입력 및/또는 이미지 입력을 더 양호하게 포함한다. 이에 의해, 간단한 방식으로 더 많은 양들의 텍스트 정보를 입력할 수 있다. 공지된 바와 같이, 원격 제어 텍스트는 통상 4 방향 커서 키에 의해 글자들을 연속해서 선택함으로써 입력된다. 종래 기술에 따라, 이는 매우 시간 소모가 크며 본 양호한 실시예의 일 양상에 의해 효과적인 방식으로 배제된다.
중앙 서버 또는 로컬 렌더링 디바이스와 관련해서 사용자의 더 큰 보안 및 식별을 제공하기 위해, 다른 실시예는 중앙 서버 및/또는 로컬 렌더링 디바이스를 상호적으로 페어링하기 위한 단계들을 제공한다.
이는 제어 디바이스에서 입력되기 위한 코드를 스크린에 송신하고, 코드의 입력이 검증될 수 있는데 기초가 되는 정보를 제어 디바이스로부터 수신하는 중앙 서버 및/또는 로컬 렌더링 디바이스에 의해 더 양호하게 실행된다.
페어링을 위해 데이터를 입력하는 다른 방법들이 텍스트 입력, 제스처, 움직임, 음성 및/또는 이미지 입력에 의해 실행될 수 있다.
본 발명에 따른 다른 양상은, 상술된 청구항들 중 하나의 또는 그 이상의 청구항들에 따른 방법의 적용에 적합한 핸드헬드 디바이스 등의 네트워크에 연결된 디바이스와 같은 제어 디바이스에 관한 것이며, 상기 제어 디바이스는
- 조작 명령들을 생성하기 위해 조작 소프트웨어를 실행하기 위한 컴퓨터 디바이스를 형성하도록 상호 연결된, 중앙 처리 장치, 적어도 하나의 메모리 및 양호하게 터치스크린 및/또는 움직임 센서,
- 이미지 디스플레이 및/또는 사용자 인터페이스를 조작하기 위해 조작 명령들의 제어 디바이스에 의한 생성을 위한 조작 소프트웨어,
- 제어 디바이스로부터 중앙 서버 및/또는 로컬 렌더링 디바이스로의 네트워크에 의해 조작 명령들을 네트워크 커넥션을 통해 중앙 서버 및/또는 로컬 렌더링 디바이스에 전송하기 위한 송신 수단
을 포함한다. 장점들은 상술된 바와 같이 또한 매우 상세히 후술되는 바와 같이 중앙 서버 및/또는 로컬 렌더링 디바이스와 함께 제어 디바이스에 의해 획득될 수 있다.
본 발명에 따른 다른 양상은, 클라이언트 디바이스에 연결 가능한 스크린에 세션들을 디스플레이하기 위한 복수의 클라이언트 디바이스들 중 적어도 하나의 클라이언트 디바이스에 다수의 병렬 사용자 세션들을 적어도 하나의 서버로부터 스트리밍하기 위한 중앙 서버에 관한 것이며, 상기 세션들은 비디오 데이터 및 오디오 데이터 등의 선택적인 추가 데이터를 포함하고, 상기 중앙 서버는 네트워크 커넥션으로부터 명령들을 수신하기 위한 수신 수단을 포함하며, 상기 중앙 서버는 텍스트 입력, 제스처, 움직임, 음성 및/또는 이미지 입력을 포함하는 명령들을 처리하기 위한 처리 수단을 포함한다.
본 발명에 따른 또 다른 양상은, 사용자 세션 및/또는 비디오 정보를 스크린에 디스플레이하기 위한, 비디오 레코더, 컴퓨터, 미디어 플레이어 등의 로컬 렌더링 디바이스에 관한 것이며, 상기 미디어 플레이어는 네트워크 커넥션으로부터 명령들을 수신하기 위한 수신 수단을 포함하고, 상기 중앙 서버는 텍스트 입력, 제스처, 움직임, 음성 및/또는 이미지 입력을 포함하는 명령들을 처리하기 위한 처리 수단을 포함한다.
본 발명에 따른 또 다른 양상은, 클라이언트 디바이스에 연결 가능한 스크린에 세션들을 디스플레이하기 위한 복수의 클라이언트 디바이스들 중 적어도 하나의 클라이언트 디바이스에 다수의 병렬 사용자 세션들을 적어도 하나의 서버로부터 스트리밍하기 위한 시스템에 관한 것이며, 상기 세션들은 비디오 데이터 및 오디오 데이터 등의 선택적인 추가 데이터를 포함하고, 상기 중앙 서버는 네트워크 커넥션에 의해 복수의 제어 디바이스들로부터 각각의 클라이언트에서의 디스플레이에 관한 명령들을 수신하기 위한 수신 수단을 포함하며, 상기 중앙 서버는 텍스트 입력, 제스처, 움직임, 음성 및/또는 이미지 입력을 포함하는 명령들을 처리하기 위한 처리 수단을 포함한다.
본 발명에 따른 또 다른 양상은, 상술된 청구항들 중 하나의 또는 그 이상의 청구항들에 따른 방법을 실행하기 위한, 및/또는 상술된 청구항들 중 하나의 또는 그 이상의 청구항들에 따른 중앙 서버, 로컬 렌더링 디바이스, 제어 디바이스 및/또는 시스템에서 사용되기 위한 컴퓨터 소프트웨어에 관한 것이다.
본 발명에 따른 이러한 양상들은 상술된 바와 같이 또한 매우 상세히 후술되는 바와 같이 각각의 장점들을 제공한다.
본 발명의 다른 장점들, 특징들 및 세부 사항들은 첨부 도면들을 참조해서, 하나의 또는 그 이상의 양호한 실시예들에 기초하여 더 상세히 후술될 것이다.
도 1은 본 발명에 따른 양호한 실시예의 개략적인 도면을 도시한다.
도 2는 종래 기술의 도면(b) 및 본 발명에 따른 양호한 실시예에 따른 도면(a)을 도시한다.
본 발명에 따른 제1 양호한 실시예(도 1)는 모바일 컴퓨터(100)에 관한 것이다. 이는, 예를 들어, 휴대 전화와 유사하다. 모바일 컴퓨터(100)는 양호하게 터치 감지형인 스크린(41)을 포함한다. 모바일 컴퓨터는 또한 하부 측에 배열된 4개의 제어 버튼들(42)을 포함한다. 내비게이션을 위한 터치-감지 표면(43)은 제어 버튼들(42) 사이에 위치한다. 또한, 목소리 등의 사운드들을 기록하기 위한 마이크로폰(44)도 하부 측에 위치한다. 사운드들을 재생하기 위한 라우드스피커(46)는 상부 측에 위치한다. 이미지들을 기록하기 위한 카메라가 라우드스피커(46)와 인접해서 위치한다. 이미지들을 기록하기 위한 것과 유사하게, 카메라(도시되지 않음)가 또한 후면 측에 위치한다. 이미지들은 또한 셋탑 박스(3) 또는 렌더링 디바이스(3)를 통해 텔레비전(20)에 송신된다.
지금까지는 모바일 폰 또는 PDA 등의 자체가 공지된 모바일 컴퓨터가 기술되었다. 본 발명에 따라 이 모바일 컴퓨터에는 본 발명의 목적을 위해 입력을 검출하고, 이 입력을 네트워크 커넥션에 의해 송신하기 위한 소프트웨어 애플리케이션이 제공된다. 소프트웨어 애플리케이션에는 이 목적을 위해 모바일 컴퓨터의 네트워크 액세스 수단에 연결하기 위한 연결 수단이 제공된다. 예를 들어, 인터넷(19)에 연결되거나 또는 개별 무선 네트워크인 무선 네트워크에 대한 액세스가 획득된다. 대안으로, 고정형 네트워크도 물론 가능하다. 또한, 대안적인 방식으로 무선 네트워크는 모바일 네트워크 운영자에 의해 운영되는 모바일 네트워크일 수 있다. 네트워크 커넥션을 통해 모바일 디바이스는 서버(101) 또는 로컬 렌더링 디바이스(3)에 접촉한다. 서버(101)는 유사하게 도 2의 컴포넌트들(5, 4, 102, 103)의 개략적인 표현일 수 있다. 도 2b는 인용된 문서 '916의 도 9와 동일한 도면이다. 도 2a는 모바일 컴퓨터(100)에 의해 실행되는 원격 제어의 리턴 경로의 레이아웃을 수정해서 도시한다. 리턴 경로는 인터넷(19)(도 1에 도시됨)을 통해 모바일 컴퓨터로부터 직접 서버(102)로 이어진다. 병렬 사용(도시되지 않음)이 또한 셋탑 박스(3)의 표준 원격 제어로 이루어질 수 있다. 그러나, 이는 또한 스위칭 오프될 수 있다.
모바일 컴퓨터(100)가 서버(102)에 송신하는 제어 정보(도 1의 서버(101)의 일부를 형성함)는 본 발명에 따라, 텍스트 입력, 제스처, 움직임, 음성 및/또는 이미지 입력에 관한 상기 입력 옵션들이 풍부하다.
이에 의해, 버튼들을 가진 표준 원격 제어에 의해 가능하지 않은 복수의 가속화된 동작 옵션들이 가능하게 된다. 예를 들어, 제스처들 및 움직임들에 의해 이동의 속도를 나타낼 수 있다. 이로써, 사용자는 동적인 방식으로 동작이 얼마나 빨리 실행되는 지를, 또는 예를 들어, 얼마나 많은 정보가 단일 이동 실행 중에 스크롤되는 지를 결정할 수 있다. 또한, 예를 들어, 터치스크린에서 원을 그림으로써 또는 예를 들어, 두 손가락끝들을 스크린에서 회전함으로써 이미지를 회전할 수 있다. 다른 일례는, 스크린을 동시에 작동하는 손가락끝들의 수가 어떤 기능이 활성화되는 지를 결정하는 것이다.
모바일 디바이스로부터 서버(1)로 명령들을 송신할 때, HTTP 등의 일반적인 인터넷 기술이 사용된다. 모바일 컴퓨터에서의 애플리케이션은 터치스크린에서의 터치들을 스크린(20)에 디스플레이된 사용자 인터페이스에 중요한 파라미터들로 변환한다. 스크린에서의 슬라이딩 이동을 실행하기 위해, "swipe=true" 파라미터가 사용되고, 이동의 속도에 대해서는, 파라미터 "velocity=V"가 사용되며, V는 속도의 값이다. 유사한 방식으로, 줌을 위한 핀칭, 회전을 위한 회전 이동 및 텍스트 입력을 위한 텍스트 등의 다른 파라미터들이 제공된다. 사용되는 일례들은 다음과 같다.
명령은 서버에 도달하고, 식별을 제공하며 명령을 제공하기 위해 URL의 형태를 취한다. 사용자로부터 서버로 화살표 업(arrow up) 명령을 송신하기 위한 명령은 다음과 같다:
http://sessionmanager/key?clientid=avplay&key=up.
모바일 컴퓨터의 터치스크린에서의 상향 슬라이딩 이동에 의해 유사한 동작을 실행하기 위한 명령은 다음과 같다:
http://sessionmanager/key?clientid=avplay&key=up&swipe=true&velocity=3.24. 이는 상향 이동이 속도 3.24로 이루어져야 한다는 것을 나타낸다. 이는, 희망 속도가 유사하게 사용자 인터페이스에 의해 디스플레이됨을 달성한다.
반복된 사용으로, 사용자는 어떤 속도가 어떤 실제적인 효과를 산출하는 지를 학습할 수 있다. 대안으로, 사용자가 선호하는 개별 세팅들을 세팅하게 할 수 있다.
이미지의 일부의 크기를 감소시키기 위해 줌 아웃을 하기 위한 명령은 다음과 같다:
http://sessionmanager/event?clientid=avplay&event=onscale&scale=2.11, 이는 팩터 2.11로 이미지에 대해 핀칭 이동이 실행됨을 달성하고, 이로써 선택된 이미지의 일부는 크기가 감소된다. 역으로, 이러한 함수를 사용해서 줌 인할 수 있다.
사용자가 사용자 인터페이스에서 텍스트를 입력하기 원할 때, 이하의 함수가 사용될 수 있다:
http://sessionmanager/event?clientid=avplay&event=onstring&text=bladibla, 텍스트 값 "bladibla"는, 예를 들어, 사진 또는 비디오 단편에 이름을 붙이기 위해 사용자 인터페이스에서 사용된다. 텍스트 입력이 가능하기 때문에, 본 발명에 따라, 예를 들어, 이러한 시스템을 가진 채팅 애플리케이션들을 사용할 수 있다.
모바일 디바이스의 원격 서버 또는 로컬 렌더링 디바이스와의 페어링은, 서버가 스크린에 코드를 디스플레이하는 것으로 실행될 수 있으며, 이 코드는, 예를 들어, 텍스트 입력에 의해 모바일 컴퓨터에 입력된다. 코드가 인증된 것으로 인식되었으면, 사용자는 모바일 컴퓨터를 사용해서, 자신이 권리를 가진 세션을 조작할 수 있다. 대안으로, 예를 들어, 모바일 컴퓨터의 카메라들 중 하나에 의해 기록된 코드를 스크린에 도시함으로써 페어링이 가능하다. 그 후, 코드는 모바일 컴퓨터의 사용자의 인증을 이루어내기 위해 원격 서버 및/또는 로컬 렌더링 디바이스에 대한 챌린지(challenge)에 의해 발송될 수 있다. 페어링은 추가 보안을 제공하는 추가 장점을 가져서, 명령들이 또한 게임 등의 주문형 비디오 서비스 또는 다른 페이 서비스들을 구매하기 위해 적용될 수 있다.
본 발명은 '916에 따른 시스템의 적용을 위해 구체적으로 변경되었음을 다시 한번 명시한다. 당업자는 명확하게 본 문서의 설명의 견지에서 또한 두 문서들의 개별 양상들과 함께 본 설명을 해석할 수 있을 것이다. 도 2b는, 예를 들어, '916의 도 9의 복사본으로서 포함된다. 이 더 앞선 문서의 다른 개시 부분들은 유사하게 본 문서의 개시의 일부를 형성하기 위해 본 문서에 포함된 것으로 간주된다. 포괄적이고 세부적인 참조의 목적은 본문 설명을 소모하지 않기 위함이다. '916의 모든 도면들이 또한 본 새로운 문서의 개시의 모든 개별 양상들과 함께 개별적으로, 본 문서에 포함된 것으로 간주된다.
본 발명은 수개의 양호한 실시예들에 기초하여 상술되었다. 상이한 실시예들의 상이한 양상들은 서로 함께 기술된 것으로 간주되며, 본 문서의 판독에 기초하여 본 발명의 범위 내에 속한다고 당업자가 생각할 수 있는 모든 조합들이 포함된다. 이 양호한 실시예들은 본 문서의 보호의 범위에 대해 제한적이지 않다. 청구된 권리들은 첨부된 청구항들에서 정의된다.

Claims (19)

  1. 네트워크에 연결되고 네트워크 커넥션을 통해 원격 서버 또는 로컬 렌더링 디바이스와 접촉하는 사용자의 핸드헬드 디바이스 등의 제어 디바이스에 의해 상기 원격 서버의 이미지 소스 및/또는 상기 로컬 렌더링 디바이스의 기억 매체로부터 비롯된 사용자 인터페이스 및/또는 이미지 디스플레이의 이미지들의 디스플레이를 조작하는 방법으로서,
    - 상기 원격 서버 또는 상기 로컬 렌더링 디바이스가, 상기 제어 디바이스에 의한 상기 방법의 실행에 적합한 조작 소프트웨어가 구비된 상기 제어 디바이스로부터 조작 명령어들을 수신하는 단계;
    - 상기 중앙 서버 및/또는 상기 로컬 렌더링 디바이스에서 상기 조작 명령어들을 처리하는 단계; 및
    - TV 또는 모니터 등의 디스플레이 디바이스에서의 최종 디스플레이를 위해 상기 이미지들 및/또는 상기 사용자 인터페이스를 디스플레이하기 위해 상기 중앙 서버 및/또는 상기 로컬 렌더링 디바이스로부터 이미지 정보를 송신하는 단계
    를 포함하는 방법.
  2. 제1항에 있어서,
    입력 조작 명령어들에 기초하여, MPEG 동작들 등의 비디오 코덱 동작들을 생성하기 위한 단계들을 포함하며, 상기 MPEG 동작들은 상기 이미지 디스플레이에 사용되는 방법.
  3. 제1항 또는 제2항에 있어서,
    상기 조작 명령어들에 기초하여 상기 사용자 인터페이스의 디스플레이를 변경하기 위한 단계들을 포함하는 방법.
  4. 제1항 내지 제3항 중 어느 한 항에 있어서,
    변위 효과들 및/또는 줌 효과들을 실현하기 위한 이동 벡터들 및/또는 병진 벡터들의 적용과 같이, 비디오 코덱 내에서 동작가능한 이미지 처리 동작들을 포함하는 방법.
  5. 제1항 내지 제4항 중 어느 한 항에 있어서,
    인터 인코딩(inter encoding) 및 인트라 인코딩(intra encoding)을 적용하면서 상기 제어 디바이스로부터의 상기 조작 명령어들에 기초한 이미지 처리 동작들을 포함하는 방법.
  6. 제1항 내지 제5항 중 어느 한 항에 있어서,
    상기 조작 명령어들은, 스크롤 명령어들 또는 슬라이드 명령어들에 대한 슬라이딩 이동들, 줌 명령어들에 대한 줌 인 및 아웃 이동들과 같이, 터치스크린에 의해 입력된 명령어들을 포함하고, 상기 명령어들은 바람직하게는 멀티-터치 명령어들에 의해 생성되는 방법.
  7. 제1항 내지 제6항 중 어느 한 항에 있어서,
    상기 명령어들은 상기 제어 디바이스의 이동에 의해 생성되고, 이러한 이동들은 상기 제어 디바이스에 배열된 이동 검출기 또는 중력 검출기에 의해 기록될 수 있는 방법.
  8. 제1항 내지 제7항 중 어느 한 항에 있어서,
    상기 명령어들은 텍스트 입력, 음성 입력 및/또는 이미지 입력을 포함하는 방법.
  9. 제1항 내지 제8항 중 어느 한 항에 있어서,
    상기 중앙 서버 및/또는 상기 로컬 렌더링 디바이스를 상호 페어링(pairing)하기 위한 단계들을 포함하는 방법.
  10. 제9항에 있어서,
    상기 중앙 서버 및/또는 상기 로컬 렌더링 디바이스가, 상기 제어 디바이스에서 입력되기 위한 코드를 스크린에 송신하고, 상기 코드의 입력이 검증될 수 있는데 기초가 되는 정보를 상기 제어 디바이스로부터 수신하기 위한 단계들을 포함하는 방법.
  11. 제9항 또는 제10항에 있어서,
    상기 제어 디바이스로의 입력은 텍스트 입력, 제스처, 움직임, 음성 및/또는 이미지 입력에 의해 실행될 수 있는 방법.
  12. 제1항 내지 제11항 중 어느 한 항에 있어서,
    사용자 인터페이스에서 항목을 선택하고/선택하거나 상기 선택된 항목을 활성화하기 위한 명령어들을 포함하고, 바람직하게는 상기 이미지의 상기 선택된 항목의 확대를 위한 명령어들을 더 포함하는 방법.
  13. 제12항에 있어서,
    확대 중에, 더 높은 해상도를 가진 이미지 정보가 데이터 저장소로부터 검색되는 한편, 상기 사용자 인터페이스에서 이미 이용가능한 작은 이미지 정보에 기초하여 줌 렌더링이 실행되는 방법.
  14. 제13항에 있어서,
    상기 줌 렌더링의 실행 중에, 상기 작은 이미지 정보에 기초한 상기 줌 렌더링 대신에, 이용가능하자마자 디스플레이되는 검색된 고 해상도 정보에 기초하여 비교적 높은 품질의 렌더링이 실행되는 방법.
  15. 제1항 내지 제14항 중 어느 한 항에 기재된 방법의 적용에 적합한 핸드헬드 디바이스 등의 네트워크에 연결된 디바이스와 같은 제어 디바이스로서,
    - 조작 명령어들을 생성하기 위해 조작 소프트웨어를 실행하기 위한 컴퓨터 디바이스를 형성하도록 상호 연결된, 중앙 처리 장치, 적어도 하나의 메모리 및 바람직하게는 터치스크린 및/또는 움직임 센서,
    - 이미지 디스플레이 및/또는 사용자 인터페이스를 조작하기 위한 조작 명령어들을 상기 제어 디바이스에 의해 생성하기 위한 상기 조작 소프트웨어,
    - 상기 제어 디바이스로부터의 상기 중앙 서버 및/또는 로컬 렌더링 디바이스로의 네트워크에 의한 상기 조작 명령어들을 상기 네트워크 커넥션을 통해 중앙 서버 및/또는 로컬 렌더링 디바이스에 송신하기 위한 송신 수단
    을 포함하는 제어 디바이스.
  16. 클라이언트 디바이스에 연결 가능한 스크린에 세션들을 디스플레이하기 위한 복수의 클라이언트 디바이스들 중 적어도 하나의 클라이언트 디바이스에 다수의 병렬 사용자 세션들을 적어도 하나의 서버로부터 스트리밍하기 위한 중앙 서버로서,
    상기 세션들은 비디오 데이터 및 오디오 데이터 등의 선택적인 추가 데이터를 포함하고, 중앙 서버는 네트워크 커넥션으로부터 명령어들을 수신하기 위한 수신 수단을 포함하며, 상기 중앙 서버는 텍스트 입력, 제스처, 움직임, 음성 및/또는 이미지 입력을 포함하는 명령어들을 처리하기 위한 처리 수단을 포함하는 중앙 서버.
  17. 사용자 세션 및/또는 비디오 정보를 스크린에 디스플레이하기 위한, 비디오 레코더, 컴퓨터, 미디어 플레이어 등의 로컬 렌더링 디바이스로서,
    상기 미디어 플레이어는 네트워크 커넥션으로부터 명령어들을 수신하기 위한 수신 수단을 포함하고, 중앙 서버는 텍스트 입력, 제스처, 움직임, 음성 및/또는 이미지 입력을 포함하는 명령어들을 처리하기 위한 처리 수단을 포함하는 로컬 렌더링 디바이스.
  18. 클라이언트 디바이스에 연결 가능한 스크린에 세션들을 디스플레이하기 위한 복수의 클라이언트 디바이스들 중 적어도 하나의 클라이언트 디바이스에 다수의 병렬 사용자 세션들을 적어도 하나의 서버로부터 스트리밍하기 위한 시스템으로서,
    상기 세션들은 비디오 데이터 및 오디오 데이터 등의 선택적인 추가 데이터를 포함하고, 중앙 서버는 네트워크 커넥션에 의해 복수의 제어 디바이스들로부터 각각의 클라이언트에서의 디스플레이에 관한 명령어들을 수신하기 위한 수신 수단을 포함하며, 상기 중앙 서버는 텍스트 입력, 제스처, 움직임, 음성 및/또는 이미지 입력을 포함하는 명령어들을 처리하기 위한 처리 수단을 포함하는 시스템.
  19. 제1항 내지 제18항 중 어느 한 항에 기재된 방법을 실행하고/실행하거나, 제1항 내지 제18항 중 어느 한 항에 기재된 중앙 서버, 로컬 렌더링 디바이스, 제어 디바이스 및/또는 시스템에서 사용하기 위한 컴퓨터 소프트웨어.
KR1020127031648A 2010-05-04 2011-05-04 모바일 디바이스 원격 복귀 채널 KR20130061149A (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
NL2004670A NL2004670C2 (nl) 2010-05-04 2010-05-04 Werkwijze voor multimodale afstandsbediening.
NLNL2004670 2010-05-04
PCT/NL2011/050308 WO2011139155A1 (en) 2010-05-04 2011-05-04 Mobile device remote retour channel

Publications (1)

Publication Number Publication Date
KR20130061149A true KR20130061149A (ko) 2013-06-10

Family

ID=44475067

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020127031648A KR20130061149A (ko) 2010-05-04 2011-05-04 모바일 디바이스 원격 복귀 채널

Country Status (10)

Country Link
US (1) US20130198776A1 (ko)
EP (1) EP2567545A1 (ko)
JP (1) JP2013526232A (ko)
KR (1) KR20130061149A (ko)
AU (1) AU2011249132B2 (ko)
BR (1) BR112012028137A2 (ko)
CA (1) CA2797930A1 (ko)
IL (1) IL222830A0 (ko)
NL (1) NL2004670C2 (ko)
WO (1) WO2011139155A1 (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9826197B2 (en) 2007-01-12 2017-11-21 Activevideo Networks, Inc. Providing television broadcasts over a managed network and interactive content over an unmanaged network to a client device
US10200744B2 (en) 2013-06-06 2019-02-05 Activevideo Networks, Inc. Overlay rendering of user interface onto source video
US10275128B2 (en) 2013-03-15 2019-04-30 Activevideo Networks, Inc. Multiple-mode system and method for providing user selectable video content
US10409445B2 (en) 2012-01-09 2019-09-10 Activevideo Networks, Inc. Rendering of an interactive lean-backward user interface on a television

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8074248B2 (en) 2005-07-26 2011-12-06 Activevideo Networks, Inc. System and method for providing video content associated with a source image to a television in a communication network
EP3145200A1 (en) 2007-01-12 2017-03-22 ActiveVideo Networks, Inc. Mpeg objects and systems and methods for using mpeg objects
JP5866125B2 (ja) 2010-10-14 2016-02-17 アクティブビデオ ネットワークス， インコーポレイテッド ケーブルテレビシステムを使用したビデオ装置間のデジタルビデオストリーミング
EP2695388B1 (en) 2011-04-07 2017-06-07 ActiveVideo Networks, Inc. Reduction of latency in video distribution networks using adaptive bit rates
JP5148739B1 (ja) * 2011-11-29 2013-02-20 株式会社東芝 情報処理装置、システム及び方法
US9800945B2 (en) 2012-04-03 2017-10-24 Activevideo Networks, Inc. Class-based intelligent multiplexing over unmanaged networks
US9123084B2 (en) 2012-04-12 2015-09-01 Activevideo Networks, Inc. Graphical application integration with MPEG objects
DE202013006341U1 (de) 2012-07-27 2013-08-08 Magine Holding AB System zur Wiedergabe eines Medieninhalts aus dem World Wide Web
SE1200467A1 (sv) 2012-07-27 2014-01-28 Magine Holding AB System och förfarande
US9294785B2 (en) 2013-06-06 2016-03-22 Activevideo Networks, Inc. System and method for exploiting scene graph information in construction of an encoded video sequence
US9219922B2 (en) 2013-06-06 2015-12-22 Activevideo Networks, Inc. System and method for exploiting scene graph information in construction of an encoded video sequence
US9986296B2 (en) * 2014-01-07 2018-05-29 Oath Inc. Interaction with multiple connected devices
US9788029B2 (en) 2014-04-25 2017-10-10 Activevideo Networks, Inc. Intelligent multiplexing using class-based, multi-dimensioned decision logic for managed networks
TWI573047B (zh) * 2015-12-18 2017-03-01 明基電通股份有限公司 無線配對系統
US11416203B2 (en) * 2019-06-28 2022-08-16 Activevideo Networks, Inc. Orchestrated control for displaying media
EP4256791A1 (en) 2020-12-07 2023-10-11 ActiveVideo Networks, Inc. Systems and methods of alternative networked application services

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7210099B2 (en) * 2000-06-12 2007-04-24 Softview Llc Resolution independent vector display of internet content
JP2002112228A (ja) * 2000-09-29 2002-04-12 Canon Inc マルチメディアオンデマンドシステム、情報伝送方法、及び記憶媒体
CA2428946C (en) * 2000-11-14 2010-06-22 Scientific-Atlanta, Inc. Networked subscriber television distribution
SE519884C2 (sv) * 2001-02-02 2003-04-22 Scalado Ab Metod för zoomning och för att framställa en zoomningsbar bild
JP2002369167A (ja) * 2001-06-11 2002-12-20 Canon Inc 情報処理装置、及びその方法
US20030001908A1 (en) * 2001-06-29 2003-01-02 Koninklijke Philips Electronics N.V. Picture-in-picture repositioning and/or resizing based on speech and gesture control
JP4802425B2 (ja) * 2001-09-06 2011-10-26 ソニー株式会社 映像表示装置
JP2007515698A (ja) * 2003-04-30 2007-06-14 ディズニー エンタープライゼス インコーポレイテッド 携帯電話によるマルチメディアコントローラ
US7233316B2 (en) * 2003-05-01 2007-06-19 Thomson Licensing Multimedia user interface
JP4478868B2 (ja) * 2004-03-09 2010-06-09 ソニー株式会社 画像表示装置および画像表示方法
US20080052742A1 (en) * 2005-04-26 2008-02-28 Slide, Inc. Method and apparatus for presenting media content
JP4695474B2 (ja) * 2005-09-21 2011-06-08 株式会社東芝 合成映像制御装置、合成映像制御方法およびプログラム
JP4774921B2 (ja) * 2005-11-01 2011-09-21 Ｋｄｄｉ株式会社 ファイル表示方法及びシステム
US7634296B2 (en) * 2005-12-02 2009-12-15 General Instrument Corporation Set top box with mobile phone interface
CN101379461A (zh) * 2005-12-30 2009-03-04 苹果公司 具有多重触摸输入的便携式电子设备
JP5044961B2 (ja) * 2006-03-29 2012-10-10 カシオ計算機株式会社 クライアント装置およびプログラム
US7864163B2 (en) * 2006-09-06 2011-01-04 Apple Inc. Portable electronic device, method, and graphical user interface for displaying structured electronic documents
WO2008044916A2 (en) 2006-09-29 2008-04-17 Avinity Systems B.V. Method for streaming parallel user sessions, system and computer software
JP4791929B2 (ja) * 2006-09-29 2011-10-12 株式会社日立製作所 情報配信システム、情報配信方法、コンテンツ配信管理装置、コンテンツ配信管理方法およびプログラム
SE533185C2 (sv) * 2007-02-16 2010-07-13 Scalado Ab Metod för behandling av en digital bild samt bildrepresentationsformat
JP2010539849A (ja) * 2007-09-18 2010-12-16 トムソン ライセンシング セットトップボックスのためのユーザインタフェース
JP2009159188A (ja) * 2007-12-26 2009-07-16 Hitachi Ltd コンテンツ表示用サーバ
US9900557B2 (en) * 2007-12-28 2018-02-20 Verizon Patent And Licensing Inc. Method and apparatus for remote set-top box management
US20090228922A1 (en) * 2008-03-10 2009-09-10 United Video Properties, Inc. Methods and devices for presenting an interactive media guidance application
JP5294131B2 (ja) * 2008-03-12 2013-09-18 エコスター テクノロジーズ エル．エル．シー． 移動通信装置を使用して娯楽機器を制御する装置および方法
US9210355B2 (en) * 2008-03-12 2015-12-08 Echostar Technologies L.L.C. Apparatus and methods for controlling an entertainment device using a mobile communication device
JP5322094B2 (ja) * 2008-03-31 2013-10-23 Ｋｄｄｉ株式会社 クライアント制御型動画通信端末向けＶｏＤシステム
JP5090246B2 (ja) * 2008-05-09 2012-12-05 ソニー株式会社 情報提供装置、携帯情報端末、コンテンツ処理機器、コンテンツ処理システム、およびプログラム
US9641884B2 (en) * 2008-11-15 2017-05-02 Adobe Systems Incorporated Method and device for establishing a content mirroring session
EP2343881B1 (en) * 2010-01-07 2019-11-20 LG Electronics Inc. Method of processing application in digital broadcast receiver connected with interactive network, and digital broadcast receiver

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9826197B2 (en) 2007-01-12 2017-11-21 Activevideo Networks, Inc. Providing television broadcasts over a managed network and interactive content over an unmanaged network to a client device
US10409445B2 (en) 2012-01-09 2019-09-10 Activevideo Networks, Inc. Rendering of an interactive lean-backward user interface on a television
US10275128B2 (en) 2013-03-15 2019-04-30 Activevideo Networks, Inc. Multiple-mode system and method for providing user selectable video content
US11073969B2 (en) 2013-03-15 2021-07-27 Activevideo Networks, Inc. Multiple-mode system and method for providing user selectable video content
US10200744B2 (en) 2013-06-06 2019-02-05 Activevideo Networks, Inc. Overlay rendering of user interface onto source video

Also Published As

Publication number Publication date
NL2004670A (nl) 2011-11-09
WO2011139155A1 (en) 2011-11-10
NL2004670C2 (nl) 2012-01-24
BR112012028137A2 (pt) 2016-08-09
EP2567545A1 (en) 2013-03-13
CA2797930A1 (en) 2011-11-10
AU2011249132B2 (en) 2015-09-24
IL222830A0 (en) 2012-12-31
JP2013526232A (ja) 2013-06-20
US20130198776A1 (en) 2013-08-01

Similar Documents

Publication Publication Date Title
KR20130061149A (ko) 모바일 디바이스 원격 복귀 채널
AU2011249132A1 (en) Mobile device remote retour channel
US10545635B2 (en) Device, method, and graphical user interface for navigating media content
US11126343B2 (en) Information processing apparatus, information processing method, and program
JP6913634B2 (ja) インタラクティブ・コンピュータ・システムおよびインタラクティブ方法
CN107005741B (zh) 一种计算机实现的方法、系统及存储介质
US7984377B2 (en) Cascaded display of video media
US20130326583A1 (en) Mobile computing device
US20080065992A1 (en) Cascaded display of video media
KR101960061B1 (ko) 디바이스에서 실행되는 복수의 애플리케이션들에 대한 실행 화면들을 전환하여 디스플레이하는 방법 및 장치
CN103139627A (zh) 智能电视及其手势控制方法
CN105980971A (zh) 多任务和全屏幕菜单环境
KR20120014868A (ko) 정보 처리 장치, 정보 처리 방법, 컴퓨터 프로그램 및 콘텐츠 표시 시스템
JP2013533541A (ja) 文字の選択
CN112292726B (zh) 用于沉浸式环境中对象分组和操纵的方法、系统和介质
JP6082190B2 (ja) プログラム、情報処理装置、画像表示方法及び表示システム
CN105122826B (zh) 用于由移动计算设备显示带注释的视频内容的系统和方法
JP2009093356A (ja) 情報処理装置およびスクロール方法
KR20100113922A (ko) 멀티미디어 컨텐츠 표시 방법과 그를 위한 터치 스크린 단말기 및 컴퓨터로 읽을 수 있는 기록매체
US20240045572A1 (en) Device, method, and graphical user interface for navigating media content

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application