JP2009520441A - 複数のストリーム配信されたデータソースを表示するモバイルデバイス - Google Patents

複数のストリーム配信されたデータソースを表示するモバイルデバイス Download PDF

Info

Publication number
JP2009520441A
JP2009520441A JP2008547213A JP2008547213A JP2009520441A JP 2009520441 A JP2009520441 A JP 2009520441A JP 2008547213 A JP2008547213 A JP 2008547213A JP 2008547213 A JP2008547213 A JP 2008547213A JP 2009520441 A JP2009520441 A JP 2009520441A
Authority
JP
Japan
Prior art keywords
real
data stream
time data
thumbnail image
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2008547213A
Other languages
English (en)
Inventor
アンソニー, ジェー. サンマルコ,
Original Assignee
ソニー エリクソン モバイル コミュニケーションズ, エービー
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from US11/306,217 external-priority patent/US20070143785A1/en
Application filed by ソニー エリクソン モバイル コミュニケーションズ, エービー filed Critical ソニー エリクソン モバイル コミュニケーションズ, エービー
Publication of JP2009520441A publication Critical patent/JP2009520441A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/414Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72427User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality for supporting games or graphical animations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/482End-user interface for program selection
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8146Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics
    • H04N21/8153Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics comprising still images, e.g. texture, background image
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440263Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/44Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • H04N5/45Picture in picture, e.g. displaying simultaneously another television channel in a region of the screen

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Graphics (AREA)
  • General Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • User Interface Of Digital Computer (AREA)
  • Television Signal Processing For Recording (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Mobile Radio Communication Systems (AREA)

Abstract

本発明は、モバイルデバイスにおいて複数のリアルタイムのデータストリームをナビゲートするためのシステム及び方法を提供する。まず、複数のサムネイル画像表示が表示される(630)。各サムネイル画像は、利用可能なリアルタイムのデータストリームと関連づけられる。次に、ユーザによって、複数の表示されたサムネイル画像表示をナビゲーションするためのナビゲーション入力がユーザインタフェースを介して提供される(640)。ナビゲーション入力に基づき、現在選択されているサムネイル画像表示がハイライト表示される(650)。或いは、モバイルデバイスのディスプレイ上に目立つように表示される。その後、ユーザがハイライト表示されたサムネイル画像表示をユーザインタフェースを介して選択すると(660)、ハイライト表示されたサムネイル画像表示に関連づけられたリアルタイムのデータストリームが起動される。これにより、モバイルデバイスのディスプレイ上に選択されたサムネイル画像表示に関連づけられたリアルタイムのデータストリームが表示される(670)。

Description

本発明は、携帯型移動通信装置及びシステムに関し、特に、モバイルデバイス上で、複数のリアルタイムのデータストリームを表示して操作する携帯型移動通信装置、システム及び方法に関するものである。
移動電話機のような携帯型移動通信装置がさらに高度なものになりつつあり、多くの新たな機能と能力とがその中に含まれるようになっている。このような1つの機能として、移動体用放送信号、移動体用テレビ等を受信する能力が挙げられる。このようなサービスには、携帯機器向けデジタルビデオ放送(規格)(DVB−H)、デジタルメディア放送(DMB)、一体サービス型地上デジタル放送(ISDB−T)、モバイルブロードキャスト・マルチキャストサービス(MBMS)、又は類似の技術が含まれる。移動電話機の中に実装される場合、前述の技術のすべては、既存の移動無線送受信機である携帯型移動通信装置を用いて受信できるMBMSを除いて、個別の移動体用放送チューナを利用することになる。
これらの技術により提供されるデータストリームのコンテンツをナビゲートすることは、必ずしも視覚的に直感できるものとは限らない。例えば、ユーザは、特定のデータストリームに添付する選択を行う前や、特定のデータストリームを受信する選択を行う前に、利用可能なデータストリームのクリップ、又は、サンプルを見ることができない場合がある。
現在、上述のユーザのジレンマを解決する方法は提供されていない。そこで、本発明は、第1の表示オプションとして、ユーザが受信するデータストリームを選択する前に、当該ユーザのモバイルデバイスにおいてリアルタイムのデータストリームの複数のインスタンスを同時に見ることを可能にする仕組みを提供する。
本発明は、モバイルデバイス上で複数のリアルタイムのデータストリームをナビゲートするためのシステム及び方法を提供する。利用可能なリアルタイムのデータストリームに関連づけられた複数のサムネイル画像表示が表示される。ユーザによって、複数の表示されたサムネイル画像表示の中でナビゲーションするためのナビゲーション入力がユーザインタフェースを介して提供される。ナビゲーション入力に基づき、現在選択されているサムネイル画像表示がハイライト表示される。或いは、モバイルデバイスのディスプレイ上に目立つように表示される。その後、ユーザがハイライトされたサムネイル画像表示をユーザインタフェースを介して選択すると、ハイライトされたサムネイル画像表示に関連づけられたリアルタイムのデータストリームが起動される。これにより、モバイルデバイスのディスプレイ上に選択されたサムネイル画像表示に関連づけられたリアルタイムのデータストリームが表示される。ハイライトされたサムネイル画像表示に関連づけられたリアルタイムのデータストリームの音響部分は、当該モバイルデバイスで再生可能であれば作動される。
モバイルデバイスが複数のリアルタイムのデータストリームを同時に表示できる場合に、サムネイル画像表示は、関連するリアルタイムのデータストリームの縮小バージョン、又は、リアルタイムのデータストリームからキャプチャされた静止画像であってもよい。
いくつかのモバイルデバイス(携帯型移動通信装置)は、携帯機器向けデジタルビデオ放送(DVB−H)、デジタルメディア放送(DMB)、一体サービス型地上デジタル放送(ISDB−T)、又は同様の技術のような、モバイル用放送テレビ信号やモバイルテレビの信号を受信することができる。これらの技術により、リアルタイムの音声/映像のデータストリームがモバイルデバイスに供給される。本明細書において使用される用語「リアルタイムのデータストリーム」は、データのフォーマットに関係なく、発信元からモバイルデバイスに(有線又は無線で)ストリーム配信されることが可能なオーディオ成分及びビデオ成分を有するデータ信号のみならず上述のような信号にも適用される。
図1は、リアルタイムの音声/映像のデータストリームを受信して表示する携帯型移動通信装置の一例を示すブロック図である。図1において携帯型移動通信装置100は、「フリップ」型又は「クラムシェル(clamshell)」型の移動電話機に共通する例として示されている。携帯型移動通信装置100は、当該携帯型移動通信装置100の上部にディスプレイ110及びスピーカ120を備える。また、携帯型移動通信装置100は、当該携帯型移動通信装置100の下部に複数のファンクションキー130、ジョイスティック、及び英数字キー150を備える。
図1に示すモバイルデバイスは、音声/映像のデータストリーム、例えば、モバイル用のテレビ放送を受信して表示するために必要となる手段が実装される。本発明は、モバイルデバイスに表示する1以上のデータストリームを閲覧するための便利な手段や1以上のデータストリームを選択するための便利な手段をユーザに提供する表示及びナビゲーションツールの問題を解決する。したがって、ここでは、モバイルデバイスの「モバイル用のテレビ」受信機を構成する電子機器、ハードウェア及びソフトウェアに関する説明は省略する。したがって、モバイルデバイスによって受信可能なデータストリームの操作及び表示に使用されるハードウェアやソフトウェアについて説明する。
図2は、リアルタイムの音声/映像のデータストリームを受信して表示する携帯型移動通信装置の選択された内部のコンポーネントを示すブロック図である。図2は、本発明の説明を目的とするものであって、本発明を特別の設計に限定するものではない。図2に示す携帯型移動通信装置100は、通話及び他の通信の開始と実行とを含む携帯型移動通信装置100の動作の制御を容易にするためのオペレータ、即ちユーザインタフェース210を含むものであってもよい。ユーザインタフェース210は、携帯型移動通信装置100の状態と動作とに関して視覚信号をユーザへ提供するディスプレイ212を含むものであってもよい。ディスプレイ212はカラー画像を表示できる液晶ディスプレイ(LCD)等であってもよい。ディスプレイ212は、画像、テキスト、数字、キャラクタ、グラフィックユーザインタフェース(GUI)等の形でユーザ、即ちオペレータへ情報を提供することができる。
ユーザインタフェース212はまた、キーパッドや、ジョイスティック等のようなポインティングデバイスを含むファンクションキー/ボタン214を含むものであってもよい。キーパッド、ファンクションボタン、及びジョイスティック214は、ユーザが電話番号をダイアルしたり、通話を開始又は終了させたり、移動体用TVサービスプロバイダ又はインターネットへアクセスするなどの他の通信を確立したり、電子メールやテキストメッセージ等の送受信を行ったりするために、ユーザが携帯型移動通信装置100とコマンドをやり取りすることを可能にする。キーパッド、ファンクションボタン、ジョイスティック214を用いて、携帯型移動通信装置100の他の動作を制御することも可能である。触覚入力を受信するタッチパネル式ディスプレイにキーパッド、ファンクションボタン及びジョイスティック214が実装されてもよい。
ディスプレイ212、キーパッド及びファンクションボタン214は、メインプロセッサと制御論理ユニット220とに結合されたものであってもよい。プロセッサと制御論理ユニットはマイクロプロセッサ等であってもよい。プロセッサと論理ユニット220は、移動体用TVサービスプロバイダに対応する開始及び終了ポインタを設定するアプリケーション222を含むものであってもよい。図6のフローチャートにおいて説明される携帯型移動通信装置100の機能及び操作は、ストリーム配信されたコンテンツをナビゲートし表示するためのアプリケーション222に含まれる。ストリーム配信されたコンテンツをナビゲートし表示するためのアプリケーション222は、ハードウェア、ファームウェア、ソフトウェア(データ構造)又はそれらの組み合わせで実装されてもよい。プロセッサ及びロジックユニット220は、他のデータ構造、ソフトウェアプログラム、コンピュータアプリケーション、及びエンコード制御信号やデコード制御信号等を含んでもよく、通信手順及び以下で説明する他の機能を実行する。
ユーザインタフェース210はマイクとスピーカ216とを含むものであってもよい。マイク216はユーザから又は別の音響ソースから音声信号や音響信号を受信する。マイク216は音声信号又は音響信号を電気信号に変換する。マイク216はプロセッサと論理演算ユニット220に接続され、当該プロセッサと論理論理ユニット220は電気信号をベースバンド通信信号に変換する。上記プロセッサと制御論理ユニット220は、無線送信機230に接続され、当該無線送信機は、上記プロセッサと制御論理ユニット220とから出されるベースバンド信号を無線周波数(RF)信号に変換する。無線送信機230は、移動体用無線アクセスネットワーク(MRAN)等のような通信媒体又はシステムへRF信号を送信するためのアンテナアセンブリ240に接続されてもよい。
携帯型移動通信装置100はまた移動体用TV装置250を含んでもよい。移動体用TV装置250はDVB−H型装置等であってもよい。移動体用TV装置250は、携帯型移動通信装置100の一部として一体に形成されたものであってもよいし、又は、携帯型移動通信装置100に関連して接続されると共に、作動できる別個のユニットであってもよい。移動体用TV装置250は、移動体用TV放送ネットワーク、放送無線アクセスネットワーク(B−RAN)130等から番組放送信号を受信するためのアンテナアセンブリ252を含んでもよい。受信機254は、放送信号を受信するために上記アンテナアセンブリ252に結合される。信号プロセッサ256は、放送信号を受信機254から受信し、携帯型移動通信装置100のディスプレイ212に表示するためのフォーマットに上記放送信号を変換する。或いは、信号プロセッサ230は、受信機254から放送信号を受信し、携帯型移動通信装置100のディスプレイ212に表示するためのフォーマットに上記放送信号を変換することも可能である。
図3は、複数のリアルタイムの音声/映像のデータストリームのサムネイル表示310を表示した携帯型移動通信装置のディスプレイ110を示す図である。ユーザは、リアルタイムでのストリーミングが可能なプレビュー表示を得るために、サムネイル画像310の中でナビゲートすることができる。ユーザがサムネイル画像へナビゲートするごとに、縁取り領域がハイライト表示され、或いは他の方法で、現在選択されているサムネイル画像を示すためにユーザに対してより目立つように表示してもよい。
図3は、利用可能なリアルタイムのストリームそれぞれから取得した静止画像を表示している。この静止画像は、放送されている実際の番組に関して現状の映像として提供するように、できる限り同時期のそれぞれのリアルタイムのストリームから取得される。モバイルデバイスが複数のリアルタイムのストリームを同時に扱い、出力することができる場合、サムネイル画像は、サムネイル・データストリームに置き換えられてもよい。
所定の時間で1つの音声入力のみが適応されるため、現状ハイライト表示されたサムネイル画像のみが、「アクティブ」であるリアルタイムのデータストリームの音声部分を有することとなる。これにより、選択のために表示された複数のリアルタイムのストリームとともに、プレビュー画面が提供されることとなる。
図4は、選択されたリアルタイムの音声/映像のデータストリームのフルスクリーン表示を表示した携帯型移動通信装置のディスプレイを示す図である。図3の示すディスプレイからユーザが選択を実行すると、選択されたサムネイル画像に関連づけられたリアルタイムのデータストリーム410が起動される。ディスプレイの下部に示す複数の小さいアイコンは、ユーザに図3のサムネイルディスプレイに戻る機能420や、利用可能な他のリアルタイムのデータストリームに直接切り替える機能430を提供する。
図5は、複数のリアルタイムの音声/映像のデータストリームのピクチャ・イン・ピクチャ表示を表示した携帯型移動通信装置のディスプレイを示す図である。この例では、ユーザは、2つのリアルタイムの音声/映像のデータストリームのピクチャ・イン・ピクチャ表示を設定することができる。大きい方のリアルタイムのデータストリーム510は、最初の入力で指定される。一方、小さい方のリアルタイムのデータストリーム520は、2番目の入力で指定される。アイコン530を押下すると、最初の指定と2番目の指定を入れ替えることができる。一方、アイコン540が押下されると、新たなリアルタイムのデータストリームを2番目の指定にすることができる。
図6は、本発明の実施形態に係る制御方法を示すフローチャートである。ブロック610の前処理において、モバイルデバイスによって表示可能な全てのリアルタイムのデータストリームが検索され特定される。ブロック620において、現状の静止画像が各利用可能なリアルタイムのデータストリームから取得される。ブロック630において、各リアルタイムのデータストリームを提示するサムネイル画像を表示する。モバイルデバイスが複数のリアルタイムのデータストリームを同時に実行可能な場合、サムネイルとして、データストリームからキャプチャした静止画像が表示されるよりも、むしろ各リアルタイムのデータストリームが表示されることが望ましい。ブロック640において、モバイルデバイスは、複数のサムネイル画像の中からナビゲートするために、ユーザ入力に対応する。ブロック650において、モバイルデバイスは、現在ユーザによって選択されているサムネイル画像の縁取り領域をハイライト表示させる。さらに、現行プログラミングのより良い感覚をユーザに提供することができる場合に、モバイルデバイスは、ハイライト表示されたサムネイルに関連づけられたリアルタイムの音声部分のデータストリームを再生することができる。ユーザが他のサムネイルをナビゲートした場合、現状の音声出力は、新たに選択されたサムネイル画像に関連づけられた音声に切り替えられる。ブロック660において、ユーザがサムネイル画像の1つを選択する。これは、選択されたサムネイル画像に関連づけられたリアルタイムのデータストリームを起動することを意味する。ブロック670において、現在起動しているリアルタイムのデータストリームが音声を含んでモバイルデバイス上にフルスクリーンで表示される。
図7は、本発明の実施形態に係るリアルタイムのデータストリームを表示する場合の携帯型移動通信装置のディスプレイにおける各種状態及び各種状態遷移を示す状態遷移図である。初期状態710において、サムネイル画像又はサムネイル・データストリームがモバイルデバイスのディスプレイに提示される。ユーザのナビゲーションに基づき、サムネイルの1つがハイライト表示されるか、或いはディスプレイ上で目立つように表示される。当該モバイルデバイスで可能であれば、ハイライト表示されたサムネイルについての音声が再生される。図7に示すように、初期状態から他の状態への状態遷移は2つ存在する。
初期状態710からの1つ目の状態遷移715では、ユーザがハイライト表示されたサムネイル画像を選択する、即ち、選択されたサムネイルに関連づけられたリアルタイムのデータストリームが起動される。この状態は、状態ボックス720で示され、当該状態ボックス720では、単一のリアルタイムのデータストリームがその音声とともに表示される。この状態では、ユーザは2つの状態遷移を引き起こすことができる。1つ目の状態遷移725は、単に、モバイルデバイスに異なるリアルタイムのデータストリームに切り替えさせる新たな入力を選択することである。2つ目の状態遷移727は、複数のサムネイル画像の初期状態710に戻ることである。
初期状態710からの2つ目の状態遷移717では、ユーザは、ピクチャ・イン・ピクチャ型の表示を行うために第1及び第2のサムネイルを選択する。ピクチャ・イン・ピクチャ表示状態730では、モバイルデバイスにおけるディスプレイの大部分において第1のリアルタイムのデータストリームが表示され、モバイルデバイスにおけるディスプレイのより小さい部分において第2のリアルタイムのデータストリームが表示される。さらに、第1のリアルタイムのデータストリームに関する音声が再生される。図7に示すように、ピクチャ・イン・ピクチャ表示状態730からの3つの状態遷移が存在する。1つ目の状態遷移733は、単に、リアルタイムのデータストリームに関する第1及び第2の指定の切り替え、又は、第1及び第2の指定の交換を行うものである。これは、第2のデータストリームを第1のデータストリームに交換したり、その逆を行うことができる。また、新たな第1のリアルタイムのデータストリームに関する音声が再生され、他の音声は停止される。2つ目の状態遷移735は、単一の状態720を選択して、ピクチャ・イン・ピクチャ表示を無効にすることである。この状態遷移は、第2のリアルタイムのデータストリームを、モバイルデバイスにおけるディスプレイから消すことになる。最後の状態遷移737は、複数のサムネイル画像表示の初期状態710に戻ることである。
双方向型音声機能を介して、また、携帯型移動通信装置等のディスプレイに示されるグラフィックユーザインタフェース(GUI)を介して、本発明に係る任意のプロンプトを提示したり、応答させたりすることが可能である。
当業者には理解できると思われるが、本発明は、方法、システム、又は、コンピュータプログラムとして実現することが可能である。したがって、本発明は、全体としてハードウェアの実施形態か、全体としてソフトウェアの実施形態(ファームウェア、常駐ソフトウェア、マイクロコードなどを含む)か、又はソフトウェアとハードウェアとの態様を組み合わせた実施形態の形をとり得る。本明細書ではこれらすべてを一般的に「回路」、「モジュール」又は「システム」と呼ぶことにする。さらに、本発明は、コンピュータで使用可能な記憶媒体上のコンピュータプログラムであって、上記媒体に組み込まれたプログラムコードを含むコンピュータプログラムの形をとることも可能である。
任意の好適なコンピュータ可読媒体を利用してもよい。コンピュータで使用可能な媒体又はコンピュータ可読媒体は、例えば、電子的、磁気的、光学的、電磁的、赤外線の又は半導体のシステム、設備、装置、又は伝播媒体であるが、これらに限定されるわけではない。コンピュータ可読媒体のさらに詳細な例(非包括的なリスト)には、1以上の配線を有する電気接続、ポータブルコンピュータディスケット、ハードディスク、ランダムアクセスメモリ(RAM)、リードオンリメモリ(ROM)、消去可能なプログラム可能なリードオンリメモリ(EPROM又はフラッシュメモリ)、光ファイバ、携帯用コンパクトディスクリードオンリメモリ(CD−ROM)、光記憶装置、インターネット若しくはイントラネットをサポートするような送信媒体、又は、磁気記憶装置が含まれる。なお、コンピュータで使用可能な媒体又はコンピュータ可読媒体とは、プログラムが印刷された紙又は別の適切な媒体であってもよい。これは、例えば紙又は他の媒体を光走査し、その後必要に応じてコンパイル、変換又は適切な方法で処理を行い、コンピュータメモリに記憶することによって、プログラムを電子的に取り込むことが可能だからである。本書の文脈において、コンピュータで使用可能な又はコンピュータで読取り可能な媒体は、命令実行システム、設備、又は装置により又は共に使用される番組を収容し、記憶し、通信し、伝播し、又は転送できるあらゆる媒体であってもよい。
本発明の演算を実行するためのコンピュータプログラムコードは、Java(登録商標)、Smalltalk、C++等のようなオブジェクト指向言語で書かれたものであってもよい。しかし、本発明の演算を実行するためのコンピュータプログラムコードは、従来の手続きプログラミング言語、例えばCプログラム言語、又は同様のプログラム言語で書かれていてもよい。プログラムコードは、ユーザのコンピュータでその全体を実行してもよいし、ユーザのコンピュータでその一部を、ユーザのコンピュータで独立型ソフトウェアパッケージとしてその一部を、及び、遠隔コンピュータにおいてその一部を、又は遠隔コンピュータ若しくはサーバでその全体を実行してもよい。後者のシナリオでは、ローカルエリアネットワーク(LAN)又は広域ネットワーク(WAN)を介して遠隔コンピュータをユーザのコンピュータに接続してもよい。或いは、この接続は、(インターネットサービスプロバイダなどを利用するインターネットを通じて)外部のコンピュータと行うようにしてもよい。
本発明の実施形態による方法、装置(システム)、コンピュータプログラムのフローチャート図及びブロック図の少なくともいずれかを参照しながら、本発明について説明した。フローチャート図とブロック図の少なくともいずれかの個々のブロック、及び、フローチャート内のブロックとブロック図の少なくともいずれかの組み合わせがコンピュータプログラム命令により実現可能であることは理解できよう。これらのコンピュータプログラム命令は、汎用コンピュータ、特定用途のコンピュータ、機械を生産するための他のプログラム可能なデータ処理装置のプロセッサに対して提供される。コンピュータと、その他のプログラム可能なデータ処理装置のプロセッサとにより実行される命令は、フローチャートとブロック図のブロック又はブロック群との少なくともいずれかのブロックで特定される機能/動作を実行する手段を創出する。
また、これらのコンピュータプログラム命令は、コンピュータ可読メモリに格納されてもよく、これらの命令は、コンピュータ又は他のプログラム可能なデータ処理装置に対して特定の方法で指示を行うことができる。そうすることで、コンピュータ可読メモリに格納された上記命令によって、フローチャートとブロック図のブロック又はブロック群との少なくともいずれかのブロックで特定される機能/動作を実現する命令手段を含むコンピュータプログラムが生成される。
上記コンピュータプログラム命令は、コンピュータ又は他のプログラム可能なデータ処理装置において一連の処理ステップを実行するために、コンピュータ又は他のプログラム可能なデータ処理装置にロードされ、コンピュータにより実行される処理を生成してもよい。そうすることで、コンピュータ又は他のプログラム可能な装置において実行される命令は、フローチャートと、ブロック図のブロック又はブロック群とで特定される機能/動作を実現するステップを提供することになる。
上記図中のフローチャート及びブロック図は、本発明の各種の実施形態に係るシステム、方法並びにコンピュータプログラムのアーキテクチャ、機能及び可能な実装構成の動作を例示するものである。この点に関して、フローチャート又はブロック図内の個々のブロックは、特定された(単複の)論理機能を実現する1以上の実行可能な命令を備えたモジュール、セグメント、又はコードの一部を表すことも可能である。いくつかの代替の実施形態では、上記ブロックにおいて上述した機能が図中で述べた順序とは異なる順序で行われる場合もあることにも留意されたい。例えば、続けて示される2つのブロックを、実際には、機能に応じてほぼ同時に実行され、又は、逆の順序で実行されることも時として可能である。ブロック図の個々のブロックとフローチャート図との少なくともいずれか、並びに、ブロック図内のブロックの組み合わせとフローチャート図との少なくともいずれかは、指定の機能若しくは動作又は特定用途向けハードウェアとコンピュータ命令との組み合わせを実行する特定用途向けハードウェアベースのシステムにより実現が可能であることも付記しておく。
本明細書で使用されている用語は特定の実施形態について単に説明することを目的とするものであって、本発明の限定を意図するものではない。本明細書で使用されているように、文脈が別段に示していない限り、単数形を示す「a」、「an」及び「the」は複数形も同様に含むことを意図するものである。「備える(comprises)」と、「備えている(comprising)」という用語は、本明細書で使用される場合、上述の特徴、数値、ステップ、処理、要素とコンポーネントの少なくともいずれかの存在を特定する用語であるが、1以上の他の特徴、数値、ステップ、処理、要素及びこれらのグループの少なくともいずれかの存在又は追加を除外するものではないことをさらに理解されたい。
特定の実施形態について本明細書に図示し説明したが、当業者が認識するように、図示された特定の実施形態の代わりに同じ目的を達成するように考慮された任意の構成を用いてもよく、また本発明は別の環境において別のアプリケーションを有するものであってもよい。本願は本発明の全ての適用又は変形をカバーするものである。特許請求の範囲は、本発明の範囲を上述した特定の実施形態に限定する意図は全くない。
リアルタイムの音声/映像のデータストリームを受信して表示する携帯型移動通信装置の一例を示す外観図である。 リアルタイムの音声/映像のデータストリームを受信して表示する携帯型移動通信装置の選択された内部のコンポーネントを示すブロック図である。 複数のリアルタイムの音声/映像のデータストリームのサムネイル表示を表示した携帯型移動通信装置のディスプレイを示す図である。 選択されたリアルタイムの音声/映像のデータストリームのフルスクリーン表示を表示した携帯型移動通信装置のディスプレイを示す図である。 複数のリアルタイムの音声/映像のデータストリームのピクチャ・イン・ピクチャ表示を表示した携帯型移動通信装置のディスプレイを示す図である。 本発明の実施形態に係る制御方法を示すフローチャートである。 本発明の実施形態に係るリアルタイムのデータストリームを表示する場合の携帯型移動通信装置のディスプレイにおける各種状態及び各種状態遷移を示す状態遷移図である。

Claims (8)

  1. モバイルデバイス上で複数のリアルタイムのデータストリームをナビゲートする方法であって、
    各画像が利用可能なリアルタイムのデータストリームに関連づけられた複数のサムネイル画像表示を表示するステップ630と、
    表示された前記複数のサムネイル画像表示をナビゲートするためのナビゲーション入力をユーザインタフェースから受信するステップ640と、
    前記ナビゲーション入力に基づき、現在選択されているサムネイル画像表示をハイライト表示するステップ650と、
    前記ハイライト表示されたサムネイル画像表示に関連づけられた前記リアルタイムのデータストリームを起動するための選択入力を前記ユーザインタフェースから受信するステップ660と、
    前記選択されたハイライト表示されたサムネイル画像表示に関連づけられた前記リアルタイムのデータストリームを、モバイルデバイスのディスプレイに表示するステップ670と
    を含むことを特徴とする方法。
  2. 前記ハイライト表示されたサムネイル画像表示に関連づけられた前記リアルタイムのデータストリームの音声部分を再生するステップ660をさらに含むことを特徴とする請求項1に記載の方法。
  3. 前記サムネイル画像表示は、それぞれ関連づけられたリアルタイムのデータストリームからキャプチャされた静止画像であることを特徴とする請求項1に記載の方法。
  4. 各サムネイル画像表示は、それ自身のリアルタイムのデータストリームであることを特徴とする請求項1に記載の方法。
  5. 複数のリアルタイムのデータストリームをナビゲートするためのモバイルデバイス100であって、
    複数のリアルタイムのデータストリームを受信するデータストリーム受信機254と、
    各画像が利用可能なリアルタイムのデータストリームに関連づけられた複数のサムネイル画像表示310を表示するディスプレイ212と、
    表示された前記複数のサムネイル画像表示310をナビゲートするためのナビゲーション入力を受信するユーザインタフェース210と、
    前記データストリーム受信機254、ディスプレイ212及びユーザインタフェース210に接続され、前記ナビゲーション入力に基づき、現在選択されているサムネイル画像表示をハイライト表示し、前記ハイライト表示されたサムネイル画像表示に関連づけられた前記リアルタイムのデータストリームを起動するための選択入力を前記ユーザインタフェースから受信して、当該リアルタイムのデータストリームを、モバイルデバイスのディスプレイに表示するプロセッサ220と
    を備えることを特徴とするモバイルデバイス。
  6. 前記ハイライト表示されたサムネイル画像表示310に関連づけられた前記リアルタイムのデータストリームの音声部分が再生されることを特徴とする請求項5に記載のモバイルデバイス。
  7. 前記サムネイル画像表示310は、それぞれ関連づけられたリアルタイムのデータストリームからキャプチャされた静止画像であることを特徴とする請求項5に記載のモバイルデバイス。
  8. 各サムネイル画像表示310は、それ自身のリアルタイムのデータストリームであることを特徴とする請求項5に記載のモバイルデバイス。
JP2008547213A 2005-12-20 2006-08-15 複数のストリーム配信されたデータソースを表示するモバイルデバイス Pending JP2009520441A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US11/306,217 US20070143785A1 (en) 2005-12-20 2005-12-20 Mobile device display of multiple streamed data sources
US11/380,451 US8554278B2 (en) 2005-12-20 2006-04-27 Mobile device display of multiple streamed data sources
PCT/US2006/031869 WO2007078338A1 (en) 2005-12-20 2006-08-15 Mobile device display of multiple streamed data sources

Publications (1)

Publication Number Publication Date
JP2009520441A true JP2009520441A (ja) 2009-05-21

Family

ID=37772647

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008547213A Pending JP2009520441A (ja) 2005-12-20 2006-08-15 複数のストリーム配信されたデータソースを表示するモバイルデバイス

Country Status (6)

Country Link
US (1) US8554278B2 (ja)
EP (1) EP1964396A1 (ja)
JP (1) JP2009520441A (ja)
BR (1) BRPI0620116A2 (ja)
CA (1) CA2632772C (ja)
WO (1) WO2007078338A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2022509802A (ja) * 2018-11-23 2022-01-24 ソニーグループ株式会社 ネイティブ放送局アプリケーションを含む受信装置

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4296521B2 (ja) * 2007-02-13 2009-07-15 ソニー株式会社 表示制御装置、表示制御方法、およびプログラム
US8307395B2 (en) 2008-04-22 2012-11-06 Porto Technology, Llc Publishing key frames of a video content item being viewed by a first user to one or more second users
US8762887B2 (en) * 2008-06-06 2014-06-24 Apple Inc. Browsing or searching user interfaces and other aspects
US8516038B2 (en) * 2008-06-06 2013-08-20 Apple Inc. Browsing or searching user interfaces and other aspects
US8607166B2 (en) * 2008-06-06 2013-12-10 Apple Inc. Browsing or searching user interfaces and other aspects
US9146651B1 (en) * 2009-07-14 2015-09-29 Sprint Communications Company L.P. Displaying multiple applications on limited capability devices
US9277021B2 (en) * 2009-08-21 2016-03-01 Avaya Inc. Sending a user associated telecommunication address
US9134799B2 (en) * 2010-07-16 2015-09-15 Qualcomm Incorporated Interacting with a projected user interface using orientation sensors
US20140282281A1 (en) * 2013-03-13 2014-09-18 Deja.io, Inc. Seamless media navigation
WO2014193355A1 (en) 2013-05-29 2014-12-04 Thomson Licensing Apparatus and method for navigating through media content
US9894022B2 (en) 2013-07-19 2018-02-13 Ambient Consulting, LLC Image with audio conversation system and method
US10057731B2 (en) 2013-10-01 2018-08-21 Ambient Consulting, LLC Image and message integration system and method
WO2015050966A1 (en) * 2013-10-01 2015-04-09 Filmstrip, Inc. Image and message integration system and method
US9977591B2 (en) 2013-10-01 2018-05-22 Ambient Consulting, LLC Image with audio conversation system and method
KR102519424B1 (ko) * 2015-09-25 2023-04-10 삼성메디슨 주식회사 초음파 이미지 디스플레이 방법 및 이를 위한 장치

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10229529A (ja) * 1997-02-14 1998-08-25 Sony Corp 複数画面表示装置およびその音声出力方法
JP2004007228A (ja) * 2002-05-31 2004-01-08 Sony Corp 情報処理システム、情報処理装置及び情報処理方法
JP2004145523A (ja) * 2002-10-23 2004-05-20 Kddi Corp コンテンツ売買システム
JP2004186830A (ja) * 2002-11-29 2004-07-02 Soft Shokai:Kk 映像コンテンツ選択方法、映像コンテンツ配信サービスシステム及び表示順位変更プログラム
JP2004272824A (ja) * 2003-03-12 2004-09-30 Nippon Telegr & Teleph Corp <Ntt> 映像コンテンツの閲覧システムにおけるアプリケーションサーバのプログラムおよびアプリケーションサーバ

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5884056A (en) * 1995-12-28 1999-03-16 International Business Machines Corporation Method and system for video browsing on the world wide web
US6538698B1 (en) * 1998-08-28 2003-03-25 Flashpoint Technology, Inc. Method and system for sorting images in an image capture unit to ease browsing access
US7016595B1 (en) * 1999-05-28 2006-03-21 Nikon Corporation Television set capable of controlling external device and image storage controlled by television set
US7013477B2 (en) * 2000-05-25 2006-03-14 Fujitsu Limited Broadcast receiver, broadcast control method, and computer readable recording medium
US7873972B2 (en) * 2001-06-01 2011-01-18 Jlb Ventures Llc Method and apparatus for generating a mosaic style electronic program guide
JP2003209771A (ja) * 2002-01-16 2003-07-25 Hitachi Ltd デジタル映像再生装置及び再生方法
KR100998899B1 (ko) * 2003-08-30 2010-12-09 엘지전자 주식회사 썸네일 영상 서비스 방법 및 방송 수신기
WO2005027509A1 (ja) 2003-09-12 2005-03-24 Matsushita Electric Industrial Co., Ltd. 画像表示装置及びその方法
US20050071782A1 (en) * 2003-09-30 2005-03-31 Barrett Peter T. Miniaturized video feed generation and user-interface
US20050162718A1 (en) * 2003-12-30 2005-07-28 Lg Electronics Inc. Television receiver and method of displaying and editing images in electronic photo album
US20050160465A1 (en) * 2004-01-21 2005-07-21 United Video Properties, Inc. Interactive television system with automatic switching from broadcast media to streaming media
US7365923B2 (en) 2004-01-26 2008-04-29 Jds Uniphase Corporation Heat sink tab for optical sub-assembly
JP4363205B2 (ja) * 2004-02-05 2009-11-11 株式会社日立製作所 携帯端末装置
JP4389160B2 (ja) 2004-03-18 2009-12-24 カシオ計算機株式会社 動画撮影装置、動画一覧表示方法、及び、プログラム
JP4286735B2 (ja) * 2004-07-08 2009-07-01 シャープ株式会社 携帯機器
JP4739708B2 (ja) * 2004-08-25 2011-08-03 株式会社日立製作所 放送番組の記録方法及び放送受信装置、並びに、そのための情報記録装置
KR101058025B1 (ko) * 2004-11-18 2011-08-19 삼성전자주식회사 이중 썸네일 모드를 이용한 이미지 디스플레이 장치 및 방법
US20060200842A1 (en) * 2005-03-01 2006-09-07 Microsoft Corporation Picture-in-picture (PIP) alerts
US20070137988A1 (en) * 2005-12-02 2007-06-21 Microsoft Corporation Computer control of audio/video switching

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10229529A (ja) * 1997-02-14 1998-08-25 Sony Corp 複数画面表示装置およびその音声出力方法
JP2004007228A (ja) * 2002-05-31 2004-01-08 Sony Corp 情報処理システム、情報処理装置及び情報処理方法
JP2004145523A (ja) * 2002-10-23 2004-05-20 Kddi Corp コンテンツ売買システム
JP2004186830A (ja) * 2002-11-29 2004-07-02 Soft Shokai:Kk 映像コンテンツ選択方法、映像コンテンツ配信サービスシステム及び表示順位変更プログラム
JP2004272824A (ja) * 2003-03-12 2004-09-30 Nippon Telegr & Teleph Corp <Ntt> 映像コンテンツの閲覧システムにおけるアプリケーションサーバのプログラムおよびアプリケーションサーバ

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2022509802A (ja) * 2018-11-23 2022-01-24 ソニーグループ株式会社 ネイティブ放送局アプリケーションを含む受信装置

Also Published As

Publication number Publication date
CA2632772A1 (en) 2007-07-12
US8554278B2 (en) 2013-10-08
CA2632772C (en) 2011-12-13
EP1964396A1 (en) 2008-09-03
US20070143791A1 (en) 2007-06-21
BRPI0620116A2 (pt) 2013-01-15
WO2007078338A1 (en) 2007-07-12

Similar Documents

Publication Publication Date Title
JP2009520441A (ja) 複数のストリーム配信されたデータソースを表示するモバイルデバイス
JP4927861B2 (ja) モバイルtvデバイスのための電子番組表
EP1855452B1 (en) Multi-tasking apparatus and method in portable terminal
US8736658B2 (en) Image-based video conference control method, terminal, and system
US9762842B2 (en) Image display method and apparatus
US6876396B2 (en) Video signal processing device for displaying information image on display part
WO2008013046A1 (fr) Dispositif d&#39;affichage d&#39;image, procédé d&#39;affichage d&#39;image, programme d&#39;affichage d&#39;image et support d&#39;enregistrement
JP5256045B2 (ja) 携帯型移動通信装置への効率的なストリーム配信によるコンテンツ配信
JP2011004414A (ja) リモートコントロールシステムおよびリモートコントロールシステムで用いられる装置
WO2008127912A1 (en) User interface for controlling video programs on mobile computing devices
JP2009515425A (ja) 代替の宛先へのモバイル用テレビ放送信号のモバイル通信デバイスによる制御
US20070143785A1 (en) Mobile device display of multiple streamed data sources
US20070143799A1 (en) Mobile television gap filler during channel switching
JP2007094531A (ja) メニュー表示方法及び情報処理装置
JP2019207552A (ja) 表示装置、テレビ受信装置、及び表示装置の制御方法
JP2009005010A (ja) 電子機器、データ処理方法およびプログラム
JP4638318B2 (ja) リモートコントロールシステムおよびリモートコントロールシステムで用いられる装置
KR20150070834A (ko) 영상표시장치의 동작 방법
JP2007207179A (ja) 携帯端末

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110214

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20110516

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20110523

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20110714

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20110722

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110812

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20110909