JP4855408B2 - 複数の表示画面に情報を表示する携帯無線通信装置、その携帯無線通信装置の動作方法、及び、その携帯無線通信装置を動作させるためのコンピュータプログラム - Google Patents

複数の表示画面に情報を表示する携帯無線通信装置、その携帯無線通信装置の動作方法、及び、その携帯無線通信装置を動作させるためのコンピュータプログラム Download PDF

Info

Publication number
JP4855408B2
JP4855408B2 JP2007536677A JP2007536677A JP4855408B2 JP 4855408 B2 JP4855408 B2 JP 4855408B2 JP 2007536677 A JP2007536677 A JP 2007536677A JP 2007536677 A JP2007536677 A JP 2007536677A JP 4855408 B2 JP4855408 B2 JP 4855408B2
Authority
JP
Japan
Prior art keywords
portable wireless
display screen
wireless communicator
image
video conference
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2007536677A
Other languages
English (en)
Other versions
JP2008517525A (ja
Inventor
スコット エル. ヴァンス,
マーチン トゥリヴェリー,
アーディアン ドゥリマジェ,
ヨジャック ヴァサ,
Original Assignee
ソニー エリクソン モバイル コミュニケーションズ, エービー
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from US10/968,771 external-priority patent/US20060083194A1/en
Priority claimed from US10/968,770 external-priority patent/US7962854B2/en
Application filed by ソニー エリクソン モバイル コミュニケーションズ, エービー filed Critical ソニー エリクソン モバイル コミュニケーションズ, エービー
Publication of JP2008517525A publication Critical patent/JP2008517525A/ja
Application granted granted Critical
Publication of JP4855408B2 publication Critical patent/JP4855408B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/60Substation equipment, e.g. for use by subscribers including speech amplifiers
    • H04M1/6033Substation equipment, e.g. for use by subscribers including speech amplifiers for providing handsfree use or a loudspeaker mode in telephone sets
    • H04M1/6041Portable telephones adapted for handsfree use
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72412User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories using two-way short-range wireless interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4122Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/414Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223Cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network
    • H04N21/43637Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440254Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering signal-to-noise parameters, e.g. requantization
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440263Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/16Analogue secrecy systems; Analogue subscription systems
    • H04N7/162Authorising the user terminal, e.g. by paying; Registering the use of a subscription channel, e.g. billing
    • H04N7/163Authorising the user terminal, e.g. by paying; Registering the use of a subscription channel, e.g. billing by receiver means only
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/02Details of telephonic subscriber devices including a Bluetooth interface
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/16Details of telephonic subscriber devices including more than one display unit

Description

本発明は、情報の表示に関し、特に、複数の表示画面にコンテンツを表示するためのシステム、方法、及びコンピュータプログラムに関する。
携帯無線コミュニケータは、音声通信、データ通信、及び、マルチメディア通信に広く使用されている。以下では、この「携帯無線コミュニケータ」の用語は、その平均的な大きさが、動作中に人の手に収まるほどに小さい無線コミュニケータの意味で使用する。ここで言う携帯無線コミュニケータには、従来の携帯電話、音声・映像テキストメッセージ、電子メール、Webアクセス機能を含めることが可能なスマートフォン、無線通信機能を有するPDA(個人用携帯型情報端末、Personal Digital Assistants)、無線ページャ、ブラックベリー(Blackberry)無線携帯電子メール装置が含まれるが、従来のラップトップ型のコンピュータは含まれない。また、携帯無線コミュニケータには、メガネ、リストバンド、バックパック、その他の衣類と一体化させることのできるウェアラブル無線コミュニケータも含まれる。この携帯無線コミュニケータの操作部領域の面積は概ね50平方インチあるいはそれ以下、ディスプレイの面積は概ね30平方インチあるいはそれ以下であろう。とりわけ、スマートフォンの場合には、操作部領域の面積は約20平方インチ以下、ディスプレイは約12インチ以下であろう。
携帯無線コミュニケータはユビキタス(ubiquitous)な環境を作り出すが、アプリケーションによっては小さなディスプレイでは使いづらい場合がある。
本発明の実施形態における、コンテンツ表示方法、コンテンツ表示システム、コンテンツ表示用のコンピュータプログラムは、携帯無線コミュニケータの第1表示画面に第1表示コンテンツを表示するとともに、この第1表示画面とは異なる第2表示コンテンツを携帯無線コミュニケータから外部表示画面に送信する。実施形態によっては、第2コンテンツは第1コンテンツとは異なるが第1コンテンツと関連している場合もある。
本発明のいくつかの実施形態はテレビ会議に適用される。特に、ある実施形態では、携帯無線コミュニケータのユーザは、その携帯無線コミュニケータを使用してリモートの相手とのテレビ会議を行う。これらの実施形態では、外部表示画面に伝送される第2表示コンテンツは、リモートの相手側の画像を含む。別の実施形態では、携帯無線コミュニケータ上に表示される第1表示コンテンツは、携帯無線コミュニケータのユーザの画像を含む。さらに別の実施形態では、第1表示コンテンツは、テレビ会議がなされている間に携帯無線コミュニケータのカメラにより撮像された画像を含む。さらに別の実施形態では、第2表示コンテンツは、リモートの相手からの音声コンテンツも含む。
本発明の別の実施形態は、英数字データの表示に使用されている。別の実施形態では、特に、別の実施形態では、携帯無線コミュニケータ上に表示される第1コンテンツは第1の英数字データを含み、外部表示画面に伝送される第2表示コンテンツは、その第1の英数字データと、その第1英数字データに関する追加の詳細データを含む。より具体的には、第1表示コンテンツは選択メニューを含むことができ、第2表示コンテンツは、選択メニューと、少なくとも1つの選択サブメニューを含みうる。別の実施形態では、第1表示コンテンツは、プレゼンテーションヘッディングと、少なくとも1つのプレゼンテーションサブヘディングを含む。さらに別の実施形態では、第2表示コンテンツは、プレゼンテーションの内容を含み、第1表示コンテンツは、プレゼンテーションの内容に関係したプレゼンターノートを含む。
以下、本発明の実施形態を添付図面を参照しながら詳述する。図面には、本発明の実施形態を図示してある。図において、第1及び第2の表示画面の相対的な大きさは、分かりやすくするために誇張された大きさになっており、実際の実施形態での第2の表示画面は、図に示されているサイズよりもはるかに大きいものとすることができる。本発明は、多数の異なる態様での実施が可能であり、本明細書に記載された実施形態に限定されるものではない。これらの実施形態は、本発明の開示を十分かつ完全なものとし、かつ、当業者が本発明の範囲を十分に理解できるように、提供するものである。
本発明の、ある要素が他の要素に「結合されている(coupled)」又は「接続されている(connected)」と言う場合には、それは、ある要素が他の要素に直接に結合されているか、又は、接続されている状態か、あるいは、要素と要素の間に別の要素が介在していることを意味する。これとは対照的に、ある要素が他の要素に「直接結合されている(directly coupled)」、あるいは、「直接に接続されている(directly connected)」と言う場合には、要素と要素の間には、他の要素は何も介在していないことを意味する。明細書全体を通して、同じ番号は、同じ要素と対応している。「及び/又は」(and/or)と表示されている場合には、列挙された関連する項目のいずれか、及び、その項目全ての組み合わせであることを示しており、このことが、略記号である「/」で示されている。
また、多様な要素を記述するために、各要素に第1、第2などの用語を付す場合があるが、要素がこれらの第1、第2などの用語に限定されるわけではない。これらの用語は、要素と要素を区別するためだけに使用したものである。以下の説明において、第1表示画面と記載されていても、本発明の主旨を逸脱しないかぎり、それを第2表示画面という用語を使用することもできる。
本明細書で使用する用語は、特定の実施形態を説明する目的だけのものであって、本発明を限定するものではない。以下の説明において、「a」「an」「the」により単数を表示したようになっているものでも、特に文脈上、別の記載がない限り、複数の内容を表示している場合もある。本明細書で使用している「有する(comprise)」、「有している(comprising)」、「含む(include)」、「含んでいる(including)」という用語は、記載されている特徴、数字、ステップ、動作、要素、構成部品が存在するということを明記するが、これらの特徴、数字、ステップ、動作、要素、それらのグループ以外のものの存在、それらへの追加事項を排除するものではない。
別の定義づけがされてない限り、明細書内のすべての用語は、本発明が属する通常の技術分野で一般に理解されているのと同じ意味を有する。通常用いられる辞書により定義されている用語は、その関連技術での通常の意味と一致するものと解釈すべきであり、特に明示的に定義されていない限り、観念的で度を越した意味を有するものと解釈してはならない。
本発明は、方法、装置、システム、コンピュータプログラムとして具現化され得るものであることは、当業者の理解するところである。従って、本発明は、全体がハードウェアで構成される形態だけでなく、全体がソフトウェアで構成される形態や、ソフトウェアとハードウェアを組み合わせた形態をとりうるが、いずれにしてもそのすべてを、「回路」や「モジュール」として記載している。さらに、本発明は、コンピュータで使用可能なプログラムコードを記憶媒体に格納したコンピュータプログラムとして実施可能である。記憶媒体としては、コンピュータ読み取り可能な媒体であればよく、例えば、ハードディスク、CD−ROM、光学記憶装置、インターネットやイントラネットをサポートする伝送装置、磁気記憶装置でもよい。
本発明の動作を実行するコンピュータプログラムコードは、Java(登録商標)、SmallTalk、C++ のようなオブジェクト指向プログラミング言語で書かれている。ただし、本発明の動作を実行するプログラムコードは、C言語のような従来の手続き型プログラミング言語で書いてもよい。このプログラムコードは、その全体を携帯無線コミュニケータ上で動作させるか、部分的に携帯無線コミュニケータで動作させ、部分的にリモートのコンピュータ上で動作させてもよい。部分的にリモートのコンピュータで動作させる場合には、そのリモートコンピュータを、有線及び/又は無線LAN(Local Area Network)及び/又はWAN(Wide Area Network)を介して、携帯無線コミュニケータに接続してもよいし、あるいは、インターネットサービスを提供するプロバイダーを利用したインターネットを介して、リモートコンピュータと携帯無線コミュニケータとを接続するようにしてもよい。
以下、実施形態による方法、システム、装置、コンピュータプログラムについてフローチャート及び/又はブロック図を参照して、本発明を説明する。フローチャート及び/又はブロック図で示される各ブロック、あるいは、ブロックの組み合わせの動作は、上記のコンピュータプログラムの命令に従って実行されることになる。これらのコンピュータプログラム命令は、携帯無線コミュニケータのコントローラに供給され、コントローラは、供給されたプログラム命令に従って、フローチャートやブロック図で特定される機能/動作を実行させるための手段やモジュールを構築する。
これらのコンピュータプログラム命令は、コンピュータで読み取り可能なメモリに保存され、この命令により、携帯無線コミュニケータが特定の方法で指示を受け、コンピュータ読み取り可能なプログラムコードを作成することになる。作成されたプログラムコードに従って、フローチャートやブロック図で特定された機能/動作が実行される。
このプログラム命令は、携帯無線コミュニケータにロードされ、それにより携帯無線コミュニケータ上で一連の動作ステップが実行され、そのプログラム命令に従って、フローチャートやブロック図で特定される機能/動作が携帯無線コミュニケータにより実行されていく。
別の代替の実施形態では、ブロックで指定された機能/動作が、フローチャートで指定されている順序に無関係に実行される例も示される。例えば、連続して示された2つのブロックでの機能/動作が指定された順序に関係なく実質的に同時に実行されたり、その機能/動作の内容により、その機能/動作が指定された逆の順序で実行される例も示される。
図1は、本発明の種々の実施形態によるコンテンツ表示方法、携帯無線コミュニケータ、コンピュータプログラムを概略的に図示したものである。図1に示されているように、この携帯無線コミュニケータ100では、第1表示画面110、カメラ120、キーパッド130がケース140に収納されており、無線による音声、データ、及び/又はマルチメディア通信を提供する構成となっている。このケース140は、図1では、一個のブリック(レンガ様)型のケースとして示されているが、クラムシェル(二枚貝様)型のケースとしてもよい。さらに、ウェアラブルなケースであってもかまわない。本発明の別の実施形態では、携帯無線コミュニケータ100は、第1表示コンテンツ112を携帯無線コミュニケータの第1表示画面110に表示させるとともに、この第1表示コンテンツ112とは異なる別の第2表示コンテンツ162を、有線及び/又は無線リンク150を介して、外部の表示画面160に送信する。この外部の表示画面160としては、プロジェクタ画面、TVモニタ画面、ラップトップやデスクトップコンピュータ装置の表示画面があり、これらの表示画面は、携帯無線コミュニケータ100の第1表示画面110に比較して、そのサイズが大きく、アドレサビリティ(addresability)も高い。別の実施形態では、この第2表示コンテンツ162は、第1表示コンテンツ112とは関連があるが、第1表示コンテンツ112とは別物である。以下に多数の実施形態を記載する。
図2は、図1で示された携帯無線コミュニケータ100のような携帯無線コミュニケータの概略ブロック図である。ユーザインタフェースとしては、第1表示画面110、カメラ120、キーパッド130、マイクロホン210、スピーカ212が含まれる。さらに、GPS(Global Positioning System)レシーバ220、無線電話222、ページャ224、ブルートゥース(BLUTOOTH)システム226のような短距離無線システム、ファクシミリシステム228、Eメールシステム232、テキスト・メッセージ・システム234、Webブラウザ236、オーガナイザ238、テレビ会議システム240を搭載してもよい。これらの要素は、単独で搭載されることもあるし、1つ又はそれ以上の要素が一体化されていることも、あるいは、全体的又は部分的に組み合わされていることもある。GPSレシーバ220、無線電話222、ページャ224、短距離無線システム226には、それぞれ別個にアンテナ221、223、225、227が接続されており、これらのアンテナの1つ又はそれ以上を組み合わせて接続してもよい。この携帯無線コミュニケータには、さらに、無線又は有線モデム242、有線I/Oポート244を搭載してもよい。図2で示した各ブロックについては、当業者には周知のものであり、これ以上の説明は不要であろう。
図2のブロックの一部又は全部を制御するためのコントローラ250も設けられている。このコントローラ250の機能は、システム(装置)、方法、コンピュータプログラムの形で具体化することができる。従って、本発明は、全体がハードウェア構成の実施態様、全体がソフトウェア構成の実施態様、ハードウェアとソフトウェアを組み合わせた実施態様の形とすることができる。コントローラ259は、図2で示される種々の要素を制御する機能の他に、図1及び図3乃至図10で示された機能を有するように構成されている。
再度、図1と図2を参照して説明すると、本発明の別の実施形態では、この携帯無線コミュニケータには、コントローラ250が設けられ、コントローラ250が、第1表示コンテンツを携帯無線コミュニケータ100の第1表示画面110に表示させるとともに、第1コンテンツとは異なる別の第2表示コンテンツ162を携帯無線コミュニケータ100から外部の表示画面160に送信する構成となっており、その伝送には、有線又は無線のリンク150を提供する短距離無線システム226、モデム242、Eメールシステム232、テキスト・メッセージ・システム224、ブラウザ236、及び/又はI/Oポート244を使用する。例えば、短距離無線システム334は、携帯無線コミュニケータ100と外部表示画面160との間の無線リンク150を提供し、一方、モデム242とI/Oポート244は、携帯無線コミュニケータ100と外部表示画面160との間の有線リンク150を提供する。
図3は、テレビ会議に使用される本発明の実施形態を図示している。テレビ会議においては、図2で示したテレビ会議モジュール240のようなテレビ会議モジュールが使用されて、携帯無線コミュニケータ100とリモートの通信相手とのテレビ会議を実行させることになる。図3に示すように、テレビ会議に適用された実施形態では、第2表示画面160上に表示される第2表示コンテンツは、そのリモートの相手側の画像で構成される。さらに別の実施形態では、図3に示すように、第1表示画面110上の第1表示コンテンツ112は、カメラ120から取り込まれた携帯無線コミュニケータ100のユーザの画像で構成される。さらに別の実施形態では、図4に示されるように、第1の表示画面112を、テレビ会議が行われている間にカメラ120により撮像された画像で構成してもよい。さらに、別の実施形態では、第1表示画面110には、カメラ120がない場合やカメラ画像を使用することをユーザが好まない場合には、コール(要求)関連情報その他の情報を表示してもよい。さらに別の実施形態では、第2表示画面160には、リモートの相手から転送された音声コンテンツを流してもよい。図3で示された実施形態と図4で示された実施形態を組み合わせてもよい。
図5は、データ表示に適用された本発明の実施形態を示したものである。これらの実施形態においては、第1表示画面110に表示される第1表示コンテンツは、第1の英数字データで構成され、外部の第2表示画面160に表示される第2表示コンテンツ162は第1の英数字データと、その第1英数字データに関する追加の詳細データから構成される。別の実施形態では、図6に示すように、第1表示コンテンツ112は、選択メニューで構成され、第2表示コンテンツ162は、選択メニューと、少なくとも1個の選択サブメニューで構成される。図7において、第1表示コンテンツ112は、プレゼンテーションヘッディング(通常「プレゼンテーションブリット」と呼ばれる)で構成され、第2表示コンテンツ162は、プレゼンテーションヘッディングと、少なくとも1つのプレゼンテーションサブヘッディングで構成されている。別の実施形態では、図8に示すように、第2表示コンテンツ162が、プレゼンテーションの内容で構成され、第1表示コンテンツ112がプレゼンテーションに関するプレゼンターノートで構成されている。
従って、携帯無線コミュニケータがテレビ会議と英数字データ表示に適用された場合、携帯無線コミュニケータ100の第1表示画面110と外部表示画面160の両方に、別々の画像を表示でき、その画像のそれぞれが、第1表示画面110と外部表示画面160の個別のサイズ、解像度、アドレサビリティに適合するようになっている。テレビ会議においては、リモートのカメラ画像(図3及び4)は、比較的高い解像度/アドレサビリティを有する外部表示画面に表示され、これに対して、ユーザ側のカメラ画像(図4)又は、ユーザ側の画像は、比較的小さくて、比較的低い解像度/アドレサビリティを有する携帯無線コミュニケータ100のディスプレイに表示される。データ表示に適用された場合、詳細の追加データ(図5−7)は、携帯無線コミュニケータの表示画面110ではなく、外部表示画面160上に示され、簡単なプレゼンターノートは携帯無線コミュニケータ100(図8)の第1表示画面110上に示される。
本発明がテレビ会議に適用された場合の実施形態について、追加の説明を行う(図1−4)。これらの実施形態において、携帯無線コミュニケータ100がテレビ会議のコールを受信した時、あるいは、テレビ会議が開始された時、サイズの大きい外部表示画面160上にリモートの相手側の画像が自動的に表示され、携帯無線コミュニケータの表示画面110は自動的にローカルのビデオ/カメラのモニターモードに切り替わる。ハード構成又はソフト構成となっているユーザ選択スイッチが外部表示画面160をオン/オフさせる。このように、テレビ会議のコール接続が確立された時に、携帯無線コミュニケータ100の第1表示画面110に、リモートの相手側の画像が表示されるとともに、携帯無線コミュニケータ100の表示画面110の各部分にカメラ画像が表示されるようになっており、これは、従来の型と同じである。しかし、ユーザ選択が開始されるとすぐに、リモート側の画像が外部表示画面160に送信され、一方、携帯無線コミュニケータ100の第1表示画面110には、ユーザ画像(図3)又はカメラ画像(図4)が表示される。
図9は、本発明がテレビ会議用に適用された場合の実施形態における動作フローチャートである。図9に示すように、テレビ会議が(テレビ会議コールを受信するかテレビ会議コールが始まったことにより)開始された時、ブロック(ステップ)910で、携帯無線コミュニケータのユーザが外部表示画面を使用することを望んでいるかどうかを確定する。この決定は、ユーザがデフォルト設定値を選択するかどうかで定まる。ユーザが外部表示画面160を望む場合には、ブロック920で、外部表示画面160が使用できるかどうかを決める。ユーザが外部表示画面を使用することを望まないか、あるいは、外部表示画面が使用できない場合には、ブロック930で示されるように、携帯無線コミュニケータ100がローカル及びリモート画面を従来の方法で表示させる。ユーザが外部表示画面160の使用を望み、それが使用できる状態にあれば、携帯無線コミュニケータは、リモート映像情報を外部表示画面160に転送するとともに、ブロック950において、ローカルカメラ画像をローカル表示画面に表示させてもよい。
ブロック940において、映像が外部表示画面160に転送される際に、この音声信号が外部表示画面160に転送されると、その音声の了解度が向上するという意味において望ましい。ユーザとして、音声信号を携帯無線コミュニケータ100に留めておくか、外部表示画面160に転送するかについての選択が許されるようにしてもよい。リモートの相手側の画像を表示するための外部表示画面160として、従来型の一般アダプタ付きの表示装置が使用できる。一般アダプタが使えるということは、家庭やマーケットで普通に手に入る表示装置を使えるということである。これらのアダプタには、オーディオビジュアル型のアダプタ、映像プラス音声型のアダプタ、オーディオビジュアルデータを、ファイヤーワイヤー(FIREWIRE)リンクのようなデジタルリンクで多重化が可能なアダプタが含まれる。大型の外部表示画面160では、鮮明度は多様であるが、複数のリモートの相手側の画像を表示することも可能である。
英数字データ表示(図1乃至2、図5乃至8)について、更に説明する。特に、携帯無線コミュニケータ100の表示画面110は、従来通り、そのサイズが比較的小さく、解像度/アドレサビリティの点でも、QVGA(Quarter Video Graphic Array)以下である。本発明の別の実施形態では、マイクロソフト(登録商標)のパワーポイント(登録商標)や、その他のプレゼンテーションツールに適用する場合には、より高い解像度/アドレサビリティを有する画像を、外部表示画面160に出力可能である。従って、本発明の別の実施形態では、特定のプレゼンテーション画面やトピックに関連付けされた複数画像の出力が可能である。しかし、これらの複数画像は、各表示画面上での英数字データの詳細度の度合いが違うという意味で、それぞれ別物であり(図5乃至7)、また、データはそれぞれ別物であるけれども、関連がある(図8)と言える。詳細度の度合いの違いの例としては、例えば、画面の違いであり、TVモニタでは、ビデオモニタのような高解像度の外部表示画面160では、例えば、20メニューからの選択が可能であり、一方、携帯無線コミュニケータ100では4メニューだけからの選択しかできず、その切り替えはスクロール機能を使用するというものである。コンテンツの違いの例は、例えば、パワーポイントでのプレゼンテーションの場合には、プレゼンテーション用のスライドが外部表示画面に送信され表示できるが、携帯無線コミュニケータ100の場合には、音声で各ポイントが表示されるだけであるか、あるいは、主要ブリットが表示されるだけである。
図10は、本発明の実施形態における外部表示画面160にデータを表示する動作を説明するフローチャートである。ユーザが外部表示画面を使用することを望み、その外部表示画面が使用可能であることが判明すれば(このプロセスは、図9のブロック910と920と同じ)、ブロック1010で、外部表示画面の解像度が特定される。その後、ブロック1020で、外部表示画面の大きさに基づいて、画像がスケーリングされる。ブロック1030で、ユーザは、外部表示画面の大きさに基づいて、画像内での複数のフレームやメニュー項目の表示位置を選択することができる。ブロック1040で、ユーザは画像の大きさを大きくしたり小さくするための入力を行うことができる。最後に、ブロック1050において、ユーザの入力に基づいて、外部表示画面上での画像のサイズが修正される。
図11は、本発明の実施形態におけるカメラ付き無線通信装置10を示したものである。ここで図示されているカメラ付き無線通信装置10は、カメラ付き携帯電話である。しかし、本発明は、これに限定されることなく、マルチメディア機能を有する民生電子機器、例えば、PDA(Personal Digital Assistance)、PCS(パーソナル通信サービス、Personal Communication Service)、衛星電話、パーム型又はラップトップ型コンピュータ、カムコーダ、デジタルカメラなどに適用可能であることは、当業者にはすぐに理解できることである。
図11に示されているように、このカメラ付き無線通信装置10は、ユーザインタフェース12、通信回路14、カメラアセンブリ16で構成されている。ユーザインタフェース12は、ディスプレイ18、キーパッド20、マイクロホン22、スピーカを含む。ディスプレイ18とスピーカ24は、このカメラ付き無線通信装置10に内蔵されたマルチメディアレンダリング装置の例である。ユーザは、ディスプレイ18により、ダイアル数字、コール状況、メニューオプション、その他のサービス情報を見ることができる。ディスプレイ18は、ビューファインダとして動作し、それにより、ユーザは、カメラアセンブリ16が取り込んだ画像と映像と、リモートの相手側が取り込んで伝送してきたリモート画像とリモート映像を、テレビ会議コールの一部として、同時に見ることができる。カメラ付き無線通信装置10の表面に配置されたキーパッド20には、英数字表示のキーパッド、ジョイステック、ボタン、ダイアル(不図示)のような入力コントローラが含まれる。オペレータは、キーパッド20を使って、ダイアルをしたり、コマンド入力を行ったり、メニューリストからメニューを選択できる。さらに、ユーザは、キーパッド20を使って、カメラアセンブリ16の機能を制御することができる。
マイクロホン22とスピーカ24は、音声処理回路30を介してコントローラ28と通信可能に接続されており、公知の任意の音響トランスデューサで構成されている。マイクロホン22は、ユーザの音声を電気音響信号に変換してリモートの相手側に伝送し、スピーカ24は、リモートの相手側から受けた音声信号をユーザが聞き取ることのできる音響信号に変換する。
通信回路14は、メモリ26、コントローラ28、音声処理回路30、アンテナ34を有する長距離トランシーバ32、アンテナ38を有する短距離トランシーバ36を有する。メモリ26は、このカメラ付き無線通信装置10の全体のメモリーの階層構造を代表しており、RAM(Random Access Memory)及びROM(Read-only Memory)の両方を含んでいる。コンピュータプログラム命令及び動作に必要なデータは、EPROMやEEPROM、フラッシュメモリのような不揮発性メモリに保存されており、ディスクリートデバイス、スタックデバイスとして実装されるか、あるいは、コントローラと共に集積化されている。
コントローラ28は、例えば、マイクロプロセッサであり、メモリ26に保持されたプログラムに従って、カメラ付き無線通信装置10の動作を制御し、その制御には、カメラアセンブリ16が取り込んだ画像や映像をデジタル変換するための公知の技術を使用する。このコントローラの制御機能は、単一のマイクロプロッセサ又は複数のマイクロプロセッサにより実行される。適当なコントローラとしては、例えば、汎用又は専用のマイクロプロセッサ、ディジタル信号処理プロセッサが含まれる。コントローラ28は、音声処理回路30とインタフェースされている。音声処理回路30は基本的に、スピーカ24にアナログ出力信号を供給し、マイクロホン22からアナログ音声入力を受信するものである。コントローラ28は、下記においてさらに詳述するが、画像データ、映像データ、音声データのようなマルチメディアデータの出力を、マルチメディアデータの種類及び、1又は2以上のリモートマルチメディアシステムの利用可能性や能力に基づいて制御する。
長距離トランシーバ32は、無線通信ネットワーク内の1又は2以上の基地局との信号の送受信を行う。長距離トランシーバ32は、十分に機能するセルラー無線トランシーバとして、GSM(Global System for Mobile Communications)、TIA/EIA−136、cdmaOne,cdma2000、UMTS、広帯域CDMAを含む公知の規格に従って動作する。本発明の一実施形態によれば、リモートの相手側とのテレビ会議に対応した信号は、長距離トランシーバ32により送受信される。
短距離トランシーバ36は、1又は2以上の短距離トランシーバとの信号の送受信を行う。このことについては、下記にさらに詳しく述べる。本発明の実施形態の1つでは、短距離トランシーバ36は、IEEE802.11(b)又は802.11(g)規格に従って動作するブルートゥーストランシーバ又はRFトランシーバである。ブルートゥースは、当該技術分野では周知の汎用無線インタフェース規格であり、これは、アドホックネットワークの構築が可能とするものであり、とりわけ短距離の無線通信に適したインタフェース規格である。短距離トランシーバ36は、短距離での信号の送受信で使える技術、例えば、赤外線のような、当該技術分野で公知の技術を使用することができる。
カメラアセンブリ16には、カメラ・グラフィック・インタフェース40,カメラ44,一体型フラッシュ(オプション)46が含まれる。カメラ・グラフィック・インタフェース40は、カメラ44をコントローラ28及び/又はユーザインタフェース12と接続する。カメラ44に対するコマンド及びデータのやり取りは、通常の場合は、当該技術分野では知られているように、カメラ・グラフィック・インタフェース40で処理される。図11では、カメラ・グラフィック・インタフェース40は、別の構成要素として示されているが、コントローラ28と一体的に構成してもよい。
カメラ44としては、公知の任意のカメラを使用することができ、レンズアセンブリ(不図示)、イメージセンサ(不図示)、イメージプロセッサ(不図示)が、そのカメラの要素として含まれる。カメラ44は、デジタル化が可能で、メモリ26に保存できる画像を取り込み、ここで、取り込まれた画像はコントローラ28でデジタル変換されて、ディスプレイ18に出力される。フラッシュ46は、取り込まれる対象を照明する必要がある場合にフラッシュ光を発する。ユーザがテレビ会議を行っているような場合には、カメラ44が取り込んだ画像及び/又は映像は、長距離トランシーバ32を介して無線ネットワークに伝送される。
図12は、本発明の実施形態の1つを図示したものであり、無線通信装置10のユーザが、リモートの1又は2以上の相手とテレビ会議を行う場合である。本発明によれば、無線通信装置10は、リモートの1又は2以上の相手から伝送された映像・画像と関連する音声信号を外部表示デバイス50と外部音声デバイス60に送信する。
外部表示デバイス50は、ディスプレイ52,画像処理回路54,短距離トランシーバ56を有する。このディスプレイ52,画像処理回路54,短距離トランシーバ56は、それぞれ単体のデバイスでもよいし、又は、相互に連結された集合体でもよい。ディスプレイ52は、固定式又は移動式の1又は2以上の表示画面であり、画像処理回路54を介して短距離トランシーバに結合されている。無線通信装置10から短距離インタフェースを介して受信した画像信号は、このディスプレイ52に表示される。このディスプレイ52は、無線通信装置10に設けられているディスプレイ18の解像度よりも高い解像度で受信画像信号を表示できる。別の実施形態によれば、ディスプレイ52は、会議室や事務室で通常見られる型の固定映像プロジェクタのような映像プロジェタ画面を使用している。さらに別の実施形態では、ディスプレイ52として、ラップトップ型又はデスクトップ型のコンピュータのようなコンピュータデバイスに設けられた表示画面を使用している。さらに別の実施形態では、このディスプレイ52として、プラズマ画面又はユーザの家庭用テレビを使用している。
画像処理回路54は、1又は2以上のプロセッサ(不図示)、メモリ(不図示)、及び、画像/映像信号をディスプレイに送信する前に、公知の画像/映像信号の伸張処理及びレンダリング処理を行う、1又は2以上のデバイスを備える。画像処理回路54は、MPEG4のような公知の画像圧縮符号化標準を使う。
短距離トランシーバ56は、アンテナ58と接続されており、無線通信装置10からの信号がディスプレイ52の近接領域内に入ると、無線距離通信装置10の短距離トランシーバ36の存在を探知できるようになっている。別の実施形態によれば、短距離トランシーバ56は、短距離トランシーバ36の存在を探知して、周知のブルートゥースプロトコルに従って、アドホック通信リンクを確立する。通信リンクの確立では、リモート表示デバイス50と無線通信装置10との間で、プロトコルのバージョン、能力内容、装置の同一性などの様々なパラメータについての確認がなされる。さらに、周知の規格に従って、外部表示デバイス50と無線通信装置10との間の同期化、認証がなされる。一旦リンクが確立されると、無線通信装置10は、無線通信ネットワークから受信した画像/映像信号を外部表示デバイス50に伝送する。
外部音声デバイス60は、1又は2以上のスピーカ62,音声処理回路64,短距離トランシーバ66を有する。外部表示デバイス50と同様に、外部音声デバイス60の構成要素は、単体のデバイスでもよいし、単体のデバイスでなくてもよい。さらに、外部表示デバイス50と外部音声デバイス60を受信した画像/映像信号と無線通信デバイス10から受信した音声信号の両方を出力できる単一のシステムで構成することは可能であるが、それが要求されるものではない。
スピーカ62は、1つ又はそれ以上のコニカルスピーカ(conic speaker)、フラット・パネル・スピーカなどの公知のスピーカで構成され、音声信号を可聴音として無線通信装置10のユーザに提供可能である。外部表示デバイス50に送信された画像に対応した音声信号は、短距離インタフェースと介して無線通信装置10から受信され、スピーカ62を介してユーザに提供される。別の実施形態では、スピーカ62が、外部表示デバイス50と連結された音声システムとなっている。さらに別の実施形態では、スピーカ62が、コンピュータ装置と連結されたスピーカとなっている。さらに別の実施形態では、このスピーカ62を、ユーザの家庭ステレオに、1又は2以上を組み込むことを想定している。
音声処理回路64は無線通信装置10から短距離インタフェースを介して音声信号を受信し、その信号を伸張して、スピーカ62に出力し可聴音を発生させる。短距離トランシーバ66は、アンテナ68を有し、別の短距離トランシーバ36,56と同じ機能を実行する。短距離トランシーバ36,56と同様に、短距離トランシーバ66は、周知のブルートゥース規格に従って動作し、特定のネットワークを確立するために短距離トランシーバ36のような短距離トランシーバの存在を探知する。一旦短距離トランシーバ36、66間に通信リンクが確立されると、無線通信装置10は、テレビ会議と関連する音声をスピーカ62に伝送する。
すでに述べたように、テレビ会議を行っているユーザは、画像/映像や音声信号を、ユーザ側の無線通信装置10ではなく、外部の表示デバイスと外部音声デバイス50、60に送信する。こうすることで、ユーザは、無線通信装置10に必然的に伴う制約なしに、リモートでテレビ会議に参加している人の実際の画像/映像を見ることができ、音声を聞くことができるようになる。図13は、本発明の方法を示したものである。
無線通信装置10が長距離トランシーバ32を介して無線通信ネットワークから着信呼を受けた時、図13のフローが開始される(ブロック80)。コントローラ28は、受信した信号のデータを検査し、受信信号が画像/映像信号を含んでいるかどうかを決定する(ブロック82)。例えば、公知の規格に従って動作するヘッダ又はメッセージ制御部分には、画像/映像の形でメッセージに含まれるデータの種類を特定するためのインジケータ又はフラグが含まれている。これらの場合、コントローラ28は、着信データが画像/映像データであるかどうかを、このインジケータに基づいて決定する。別の実施形態では、画像/映像に1又は2以上のタグが埋め込まれており、無線通信装置10側では、そのタグの内容については既知である。無線通信装置10のコントローラ28は、そのタグの1又は2以上を、データ処理の一部として読み取り、そのデータが画像/映像データであるかどうかを決定する。しかし、本発明は、いずれかの方法に限定されるものでなく、受信したデータが画像/映像データであるか、別の型のデータ、例えば、画像/映像データではなく、音声データであるかが区別できる方法であれば、どの方法でもかまわない。
受信した信号に画像/映像データが含まれていない場合には、コントローラ28は、受信した信号が音声データを含んでいるかどうかを判定する(ブロック92)。受信した信号に画像/映像が含まれている場合には、コントローラ28は、ユーザ側がその画像/映像を無線通信デバイス10のディスプレイ18又は外部表示デバイス50のディスプレイ52に出力することを望んでいるかどうかを確認する(ブロック84)。この決定の仕方については、任意の方法でよい。別の実施形態によれば、ユーザがキーパッド20を使って、手動で、ディスプレイ52の着信先IDを入力することによりディスプレイ18かディスプレイ52かの選択をするようになっている。別の実施形態によれば、コントローラ28が、ユーザ側で定義付けした構成プロファイルをメモリ26から読み取り、プロファイルの中にある情報に基づいて画像/映像を転送するようになっている。さらに、別の実施形態では、コントローラ28は、ディスプレイ52が使用可能であれば、すべての画像/映像を、そのディスプレイ52に自動的に出力するようになっている。さらに別の実施形態では、画像/映像データをディスプレイ18と52の両方に出力するようになっている。ユーザが信号をディスプレイ52には出力しないことを選ぶ場合には、コントローラ28は、無線通信装置10のディスプレイ18に画像/映像データを出力する(ブロック86)。ディスプレイ52への出力を選ぶ場合には、コントローラ28は、ディスプレイ52が使用可能かどうかを検査する(ブロック88)。ディスプレイ52が使用可能であれば、コントローラ28は、着信呼に対応した画像/映像を、確立している短距離インタフェースを介してディスプレイ52に転送する(ブロック90)。
ディスプレイ52が使用可能かどうかを検査する方法については、公知の多数の方法があることは当業者の知るところである。その方法の1つとして、ブルートゥース規格のページング機能を使用できる。アドホックネットワークの構築及び管理については、当該技術分野ではよく知られている。簡単に言えば、ブルートゥースを使えば、別の使用可能な類似のデバイスの存在を検出でき、それを使ってアドホックネットワークの構築ができるということである。ブルートゥース規格は、検出したデバイスとの通信チャネルのネゴシエーション及び確立を行い、その検出したデバイスの能力を確認することが可能である。そのデバイスの検出、通信チャネルの確立、能力確認を、着信呼の受信前に行ってもよい。本発明では、短距離トランシーバ36,56が互いを検知できる地理的領域は、ユーザがディスプレイ52を見ることのできる範囲と概ね一致している。
次に、コントローラ28は、ユーザが画像/映像に対応した音声データを無線通信装置10のスピーカ24又は外部音声デバイス60のスピーカ62に送信することを望んでいるかを確認する(ブロック92)。ユーザがスピーカ62を通して音声を聞くことを望まない場合には、コントローラ28は、音声信号を無線通信装置10のスピーカ24に送信する(ブロック98)。望む場合には、コントローラ28は、外部音声デバイス60が使用可能であるかどうかを確認する(ブロック94)。上で述べたアドホックネットワークの確立の場合と同様に、短距離トランシーバ36と短距離トランシーバ66との間の通信リンクを確立するために、ブルートゥース規格のページング機能を使える。外部音声デバイス60が使用可能であれば(ブロック94)、コントローラ28は、音声データを外部音声デバイス60に転送し(ブロック96)、それにより、音声データがスピーカ62を通しての可聴音が提供されることになる。
上で述べた実施形態では、無線通信装置10が、どのようにして着信呼に対応した画像/映像データと音声データを、1又は2以上のアドホック短距離インタフェースを使って、外部表示時デバイス50と外部音声デバイス60に出力しているかを説明している。しかし、本発明では、これらの実施形態で示された方法には限定されない。別の実施形態では、図14に示された無線通信装置10では、短距離トランシーバが設けられていないコンピュータデバイス400に画像/映像信号、音声信号を出力する。この実施形態では、無線通信装置10とコンピュータデバイス400の両方で規格リンクに従った通信が行われ、ファイヤーワイヤー規格のケーブル102で接続されている。当該技術分野では周知であるが、この「ファイヤーワイヤー」は、高速シリアルデータバスのクロスプラットフォーム実装の形態であり、大量の音声データ、画像データを超高速で伝送することができる。このファイヤーワイヤー規格は、IEEE1394−1995、IEEE1394aー2000、IEEE1394bで規定されている。その規格の内容は全て本明細書に組み込まれる。
図14に示すように、無線通信装置10は、着信呼に対応する音声データ、画像/映像データを無線通信ネットワークから受信している。コントローラ28は、着信データがどのようなプロトコルのもとで送信されてきたものでも、すべてファイヤーワイヤー規格に合致するプロトコルのものに変換する。コントローラは、その音声データと画像/映像データをコンピュータデバイス400に転送し、コンピュータデバイス400がその画像/映像をディスプレイ52に表示させ、音声を1又は2以上のスピーカ62に供給する。
コンピュータデバイス400は、無線通信装置10から受信した音声データと画像/映像データを出力することの他に、マルチメディアデータの無線通信装置10へのアップロードも行い、ここでアップロードされたデータは、後で外部表示デバイス50、外部音声デバイス60、別のコンピュータデバイス400で再生されることになる。ユーザは、このデータから、例えば、定期的なスライド展示ファイル、ビジネス商品をジョブ機能の一環として作成できる。ユーザが、これらの製品を作成した後は、それらをネットワークを介して別の通信システムに転送して別の対象にプレゼンテーションしたり、あるいは、それらのファイルを格納した装置を会議用に持ち歩るくことができる。本発明の技術を使用すれば、ユーザは、マルチメディアデータから作成したスライドファイルなどの商品を、コンピュータデバイス400から無線通信装置10への転送が可能である。その後、これを受信した無線通信装置10は、このマルチメディアデータを外部表示デバイス50、外部音声デバイス60、その他のコンピュータデバイス400に出力できる。
この実施形態の一例を、図15に示す。図15では、ユーザがすでにコンピュータデバイス400を使って、音声、画像/映像を含むマルチメディアデータを作成し、そのデータを無線通信装置10にダウンロードする状況を示している。このことは、上記で述べたように、ファイヤーワイヤー規格リンクを使って実現できるが、あるいは、別の方法として、短距離又は長距離インタフェースによりデータをダウンロードすることによっても可能である。短距離又は長距離のインタフェースを使用してダウンロードする方法の場合には、コンピュータデバイス400には、短距離トランシーバ又は長距離トランシーバ、あるいは、その両方が設けられることになる。このマルチメディアデータの転送には、さらに別の方法も考えることも可能である。
図15のフローチャートの通り、ユーザが、無線通信装置10に格納されているアプリケーションを実行する(ブロック510)。無線通信装置10は、短距離インタフェースあるいはファイヤーワイヤー規格ケーブルリンクを使ってディスプレイ52の使用が可能であるかどうかを判定する(ブロック512)。ディスプレイ52が使用できない場合には、ユーザとしては、無線通信装置10側のディスプレイ18に出力させて(ブロック518)、それを見ることができる。ディスプレイ52のほうが使用できるのであれば、コントローラ28は、そのディスプレイ52の解像度を確認して(ブロック514)、その解像度で当該マルチメディアデータを表示できるかどうかを判断する(ブロック516)。ディスプレイ52の解像度は、短距離インタフェースが確立されている間に確認するが、いったん通信リンクが確立されてしまえば、無線通信装置10からの要求に応じて確認するようにしてもよい。ディスプレイ52の解像度では表示ができない場合には、ユーザは無線通信装置10のディスプレイ18に出力される画像/映像をを見ればよい(ブロック518)。一方ディスプレイ52の解像度で表示可能な場合には、コントローラ28は、画像/映像をスケーリングしてディスプレイ52の解像度で表示できるようにする(ブロック520)。コントローラ28は、そのスケーリング後、画像/映像をディスプレイ52の転送する(ブロック522)。ユーザは、例えば、キーパッド20を使用してスケーリングを調整し、あるいは、表示された画像/映像の特性を調整することができる(ブロック524)。
本実施形態では、マルチメディアデータを多様なリモートシステムに転送するために、ブルートゥース規格やファイヤーワイヤー規格のような方法を使用したが、同じ機能を実行するために別のプロトコルやアダプタを使用できることは、当業者には容易に理解されよう。例えば、無線通信装置10がマルチメディアデータを1又は2以上のマルチメディア供給装置に、USB(Universal Serial Bus)ポートや音声/映像アダプタを直接接続したり、その他のデジタル映像/音声インタフェースを使用しても伝送が可能である。さらに、無線通信装置10へのデータ転送、無線通信装置10からのデータの受信に、赤外線通信規格のような、ブルートゥース以外の無線規格を使用してもよい。さらに、コントローラ28を、マルチメディアデータを複数のディスプレイ52,複数のスピーカ62に伝送できるように構成してもよい。
本明細書及び図面においては、本発明の実施形態を示し、特定の用語を使用したが、それらの用語は説明のためのものであり、それらに限定されるものではない。本発明の範囲は請求の範囲により定義される。
図1は、本発明の種々の実施形態において構成された携帯無線コミュニケータ及び外部表示画面のブロック図である。 図2は、本発明の種々の実施形態による携帯無線コミュニケータのブロック図である。 図3−8は、本発明の多様な別の実施形態により構成された携帯無線コミュニケータ及び外部表示画面のブロック図である。 図9及び10は、本発明の種々の実施形態における動作を説明するフローチャートである。 図11は、本発明の一実施形態による無線通信装置を示す図である。 図12は、本発明の一実施形態により無線通信装置が外部表示装置及び外部音声装置とどのように交信するかを示す図である。 図13は、本発明の一実施形態による方法を説明するフローチャートである。 図14は、本発明の別の実施形態の斜視図である。 図15は、本発明の別の実施形態による方法を説明するフローチャートである。

Claims (15)

  1. 表示画面とカメラとを有する携帯無線コミュニケータを用いて、該携帯無線コミュニケータのユーザとリモートの相手とでテレビ会議を行うテレビ会議ステップと、
    前記テレビ会議中、前記カメラにより生成された画像を前記携帯無線コミュニケータの前記表示画面に表示するとともに、前記リモートの相手の画像を外部表示画面に送信する第1の表示ステップと、
    第1の英数字データを前記携帯無線コミュニケータの前記表示画面に表示するとともに、前記第1の英数字データ及び該第1の英数字データに関する追加の詳細データを前記外部表示画面に表示する第2の表示ステップと、
    を有し、
    前記第1の英数字データは、プレゼンテーションヘッディング項目又はプレゼンターノートを構成し、前記追加の詳細データは、前記プレゼンテーションヘッディング項目又は前記プレゼンターノートにそれぞれ対応する、プレゼンテーションサブヘッディング項目又はプレゼンテーションを構成する
    ことを特徴とするテレビ会議方法。
  2. 前記カメラにより生成された画像は、前記携帯無線コミュニケータのユーザの画像を含むことを特徴とする請求項1に記載の方法。
  3. 前記テレビ会議ステップは、更に、前記携帯無線コミュニケータから外部スピーカに、前記リモートの相手の音声を送信することを特徴とする請求項1に記載の方法。
  4. 前記テレビ会議ステップは、更に、前記携帯無線コミュニケータから前記外部表示画面の外部スピーカに、前記リモートの相手の音声を送信することを特徴とする請求項1に記載の方法。
  5. 前記外部表示画面の解像度に合わせて前記リモートの相手の画像をスケーリングするステップを更に有することを特徴とする請求項1に記載の方法。
  6. 携帯無線コミュニケータのハウジングと、
    前記ハウジングに収納された第1表示画面と、
    前記ハウジングに収納されたカメラと、
    携帯無線コミュニケータを用いて、該携帯無線コミュニケータのユーザとリモートの相手とでテレビ会議を行い、前記テレビ会議中、前記カメラにより生成された画像を前記第1表示画面に表示するとともに、前記リモートの相手の画像を前記携帯無線コミュニケータの外部の第2表示画面に送信するテレビ会議コントローラと、
    を有し、
    前記テレビ会議コントローラは更に、第1の英数字データを前記表示画面に表示するとともに、前記第1の英数字データ及び該第1の英数字データに関する追加の詳細データを前記第2表示画面に送信し、
    前記第1の英数字データは、プレゼンテーションヘッディング項目又はプレゼンターノートを構成し、前記追加の詳細データは、前記プレゼンテーションヘッディング項目又は前記プレゼンターノートにそれぞれ対応する、プレゼンテーションサブヘッディング項目又はプレゼンテーションを構成する
    ことを特徴とする携帯無線コミュニケータ。
  7. 前記カメラにより生成された画像は、前記携帯無線コミュニケータのユーザの画像を含むことを特徴とする請求項6に記載の携帯無線コミュニケータ。
  8. 前記テレビ会議コントローラは、更に、前記携帯無線コミュニケータから該携帯無線コミュニケータの外部スピーカに、前記リモートの相手の音声を送信することを特徴とする請求項6に記載の携帯無線コミュニケータ。
  9. 前記第2表示画面はスピーカを更に有し、前記テレビ会議コントローラは、更に、前記携帯無線コミュニケータから前記スピーカに、前記リモートの相手の音声を送信することを特徴とする請求項6に記載の携帯無線コミュニケータ。
  10. 前記テレビ会議コントローラは、更に、前記第2表示画面の解像度に合わせて前記リモートの相手の画像をスケーリングすることを特徴とする請求項6に記載の携帯無線コミュニケータ。
  11. コンピュータ読み取り可能な記憶媒体に格納されたテレビ会議コンピュータプログラムであって、
    表示画面とカメラとを有する携帯無線コミュニケータを用いて、該携帯無線コミュニケータのユーザとリモートの相手とでテレビ会議を行うためのコンピュータ読み取り可能なプログラムコードと、
    前記テレビ会議中、前記カメラにより生成された画像を前記携帯無線コミュニケータの前記表示画面に表示するとともに、前記リモートの相手の画像を外部表示画面に送信するためのコンピュータ読み取り可能なプログラムコードと、
    第1の英数字データを前記携帯無線コミュニケータの前記表示画面に表示するとともに、前記第1の英数字データ及び該第1の英数字データに関する追加の詳細データを前記外部表示画面に表示するためのコンピュータ読み取り可能なプログラムコードと、
    を含み、
    前記第1の英数字データは、プレゼンテーションヘッディング項目又はプレゼンターノートを構成し、前記追加の詳細データは、前記プレゼンテーションヘッディング項目又は前記プレゼンターノートにそれぞれ対応する、プレゼンテーションサブヘッディング項目又はプレゼンテーションを構成する
    ことを特徴とするテレビ会議コンピュータプログラム。
  12. 前記カメラにより生成された画像は、前記携帯無線コミュニケータのユーザの画像を含むことを特徴とする請求項11に記載のコンピュータプログラム。
  13. 前記テレビ会議を行うためのコンピュータ読み取り可能なプログラムコードは、更に、前記携帯無線コミュニケータから外部スピーカに、前記リモートの相手の音声を送信するためのコンピュータ読み取り可能なプログラムコードを含むことを特徴とする請求項11に記載のコンピュータプログラム。
  14. 前記テレビ会議を行うためのコンピュータ読み取り可能なプログラムコードは、更に、前記携帯無線コミュニケータから前記外部表示画面の外部スピーカに、前記リモートの相手の音声を送信するためのコンピュータ読み取り可能なプログラムコードを含むことを特徴とする請求項11に記載のコンピュータプログラム。
  15. 前記コンピュータ読み取り可能なプログラムコードは、前記外部表示画面の解像度に合わせて前記リモートの相手の画像をスケーリングするためのコンピュータ読み取り可能なプログラムコードを更に含むことを特徴とする請求項11に記載のコンピュータプログラム。
JP2007536677A 2004-10-19 2005-04-22 複数の表示画面に情報を表示する携帯無線通信装置、その携帯無線通信装置の動作方法、及び、その携帯無線通信装置を動作させるためのコンピュータプログラム Expired - Fee Related JP4855408B2 (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US10/968,771 US20060083194A1 (en) 2004-10-19 2004-10-19 System and method rendering audio/image data on remote devices
US10/968,771 2004-10-19
US10/968,770 US7962854B2 (en) 2004-10-19 2004-10-19 Systems, methods and computer program products for displaying content on multiple display screens using handheld wireless communicators
US10/968,770 2004-10-19
PCT/US2005/014016 WO2006043977A1 (en) 2004-10-19 2005-04-22 Handheld wireless communication device for displaying information on multiple display screens, method of operating the device, and computer program product for operating the device

Publications (2)

Publication Number Publication Date
JP2008517525A JP2008517525A (ja) 2008-05-22
JP4855408B2 true JP4855408B2 (ja) 2012-01-18

Family

ID=34966697

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007536677A Expired - Fee Related JP4855408B2 (ja) 2004-10-19 2005-04-22 複数の表示画面に情報を表示する携帯無線通信装置、その携帯無線通信装置の動作方法、及び、その携帯無線通信装置を動作させるためのコンピュータプログラム

Country Status (4)

Country Link
EP (1) EP1803058B1 (ja)
JP (1) JP4855408B2 (ja)
DE (1) DE602005008266D1 (ja)
WO (1) WO2006043977A1 (ja)

Families Citing this family (50)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7812786B2 (en) * 2005-01-18 2010-10-12 Nokia Corporation User interface for different displays
JP4768554B2 (ja) * 2006-09-14 2011-09-07 Necカシオモバイルコミュニケーションズ株式会社 携帯端末装置及びプログラム
JP4969187B2 (ja) * 2006-09-14 2012-07-04 シャープ株式会社 映像表示システム、通信端末装置および映像表示装置
US7809406B2 (en) 2006-09-15 2010-10-05 Sony Ericsson Mobile Communications Ab Continued transfer or streaming of a data file after loss of a local connection
KR100885444B1 (ko) * 2006-10-20 2009-02-24 엘지전자 주식회사 네트워크에서 디바이스의 출력을 제어하는 방법
FR2911030B1 (fr) * 2006-12-29 2009-05-22 Radiotelephone Sfr Procede et systeme de routage de flux multimedias, station mobile de radiocommunications pour realiser ce routage
FR2911029B1 (fr) * 2006-12-29 2009-05-08 Radiotelephone Sfr Procede de pilotage du routage de flux multimedias et station mobile de radiocommunication pour realiser ce pilotage
CN101216808A (zh) * 2007-01-04 2008-07-09 联想(北京)有限公司 播放系统和方法
ITGE20070020A1 (it) * 2007-02-23 2008-08-24 Adriana Maddalena Adalgisa Viggiano Apparecchio interattivo di ricetrasmissione e visualizzazione di dati, in particolare per sistemi di navigazione satellitare.
EP1983756A1 (en) * 2007-04-18 2008-10-22 St Microelectronics S.A. Portable device with video output
US20080269927A1 (en) * 2007-04-30 2008-10-30 Szolyga Thomas H Playback of audio information through a wireless docking station
JP4853970B2 (ja) * 2007-05-01 2012-01-11 日本電信電話株式会社 端末連携利用システム、その装置及びプログラム
US20090115788A1 (en) * 2007-11-06 2009-05-07 James Timothy Black Mobile computer with auxiliary display on a secondary device
WO2010001371A1 (en) * 2008-06-30 2010-01-07 France Telecom Document management system
CN102369507A (zh) * 2009-03-31 2012-03-07 Nec显示器解决方案株式会社 信息处理装置,屏幕显示控制方法和程序
US20100259464A1 (en) 2009-04-14 2010-10-14 Jae Young Chang Terminal and controlling method thereof
US20110113369A1 (en) * 2009-11-06 2011-05-12 Research In Motion Limited Device, system and method for selecting, sharing and displaying electronic content
JP5623111B2 (ja) 2010-04-01 2014-11-12 船井電機株式会社 携帯情報処理装置
US9159298B2 (en) * 2010-09-08 2015-10-13 Lg Electronics Inc. Terminal and contents sharing method for terminal
KR101772076B1 (ko) 2010-09-08 2017-08-28 엘지전자 주식회사 단말기 및 단말기의 컨텐츠 공유 방법
US10033718B2 (en) * 2011-01-05 2018-07-24 Lenovo (Singapore) Pte. Ltd. Pairing of base and detachable device
GB2490961A (en) * 2011-05-20 2012-11-21 Vincent Patrick Donohoe Touch screen for connection to smartphone
BE1020187A3 (nl) * 2011-08-10 2013-06-04 Laureyssens Dirk Speciale mobiele telefoon.
US8634807B2 (en) 2011-10-17 2014-01-21 Blackberry Limited System and method for managing electronic groups
EP2584457A1 (en) * 2011-10-17 2013-04-24 Research in Motion Corporation System and method for providing identifying information related to an incoming or outgoing call
EP2783503A1 (en) * 2011-11-22 2014-10-01 BlackBerry Limited Methods and apparatus to control presentation devices
EP2632130B1 (en) * 2012-02-21 2018-04-18 BlackBerry Limited System and method for displaying a user interface across multiple electronic devices
EP2632131A1 (en) * 2012-02-21 2013-08-28 Research In Motion Limited Method, apparatus, and system for providing a shared user interface
US8786517B2 (en) 2012-02-21 2014-07-22 Blackberry Limited System and method for displaying a user interface across multiple electronic devices
US9197733B2 (en) 2012-02-21 2015-11-24 Blackberry Limited System and method for transferring data between electronic devices
JP6394761B2 (ja) * 2012-03-22 2018-09-26 株式会社リコー 通信装置、方法およびプログラム
US8983998B1 (en) 2012-04-25 2015-03-17 Google Inc. Prioritizing points of interest in unfamiliar regions
US9760196B2 (en) * 2012-05-29 2017-09-12 Sony Corporation Terminal apparatus, display method and recording medium
JP2014006869A (ja) * 2012-06-01 2014-01-16 Nintendo Co Ltd 情報処理プログラム、情報処理装置、情報処理システムおよび情報処理方法
US9661264B2 (en) 2012-06-01 2017-05-23 Nintendo Co., Ltd. Multi-display video communication medium, apparatus, system, and method
JP2014003448A (ja) 2012-06-18 2014-01-09 Ricoh Co Ltd 伝送システム、外部入力装置、および表示解像度変換用プログラム
US20140073255A1 (en) * 2012-09-07 2014-03-13 Google Inc. System and method for interacting with content of an electronic device
JP6183003B2 (ja) * 2012-11-15 2017-08-23 株式会社リコー 伝送システム
JP5935682B2 (ja) * 2012-12-18 2016-06-15 ソニー株式会社 表示制御装置、表示制御方法及びプログラム
US20140189537A1 (en) * 2013-01-03 2014-07-03 Qualcomm Incorporated Framework and method for dynamic talker ID based media treatment in a group communication
JP2014179714A (ja) * 2013-03-14 2014-09-25 Ricoh Co Ltd 通信装置、画像表示方法、及びプログラム
EP3000019B1 (en) 2013-05-22 2020-03-11 Nokia Technologies Oy Apparatuses, methods and computer programs for remote control
EP2843542A1 (en) * 2013-08-29 2015-03-04 Samsung Electronics Co., Ltd User terminal apparatus, method for controlling user terminal apparatus, and expanded display system
US10001645B2 (en) * 2014-01-17 2018-06-19 Sony Interactive Entertainment America Llc Using a second screen as a private tracking heads-up display
KR102277460B1 (ko) * 2014-10-10 2021-07-15 삼성전자주식회사 화면을 공유하기 위한 방법 및 그 전자 장치
US10503459B2 (en) * 2014-10-10 2019-12-10 Samsung Electronics Co., Ltd. Method for sharing screen and electronic device thereof
KR102318519B1 (ko) * 2014-10-30 2021-10-28 삼성전자 주식회사 통신 운용 방법 및 이를 지원하는 전자 장치
US10073599B2 (en) * 2015-01-07 2018-09-11 Microsoft Technology Licensing, Llc Automatic home screen determination based on display device
WO2016181436A1 (ja) * 2015-05-08 2016-11-17 富士通株式会社 画像出力制御方法、画像出力制御プログラム及び表示装置
CN112788378B (zh) * 2019-11-04 2023-04-25 海信视像科技股份有限公司 显示设备与内容显示方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000308033A (ja) * 1999-04-19 2000-11-02 Sharp Corp テレビ電話補助装置およびテレビ電話システム
JP2002009968A (ja) * 2000-06-27 2002-01-11 Funai Electric Co Ltd テレビ電話システム、及び、携帯型電話機
JP2002281121A (ja) * 2001-03-16 2002-09-27 Nikon Gijutsu Kobo:Kk コミュニケーション機能を持つ民生機器
JP2005151446A (ja) * 2003-11-19 2005-06-09 Sharp Corp 携帯端末、クレードル、携帯端末の制御方法、クレードルの制御方法、制御プログラム、および該プログラムを記録した記録媒体

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6714233B2 (en) * 2000-06-21 2004-03-30 Seiko Epson Corporation Mobile video telephone system
KR20040028648A (ko) * 2000-11-29 2004-04-03 텔레폰악티에볼라겟엘엠에릭슨(펍) 휴대용 통신 장치
JP2003008736A (ja) * 2001-06-22 2003-01-10 Pioneer Electronic Corp 携帯情報端末機
KR20040079203A (ko) * 2003-03-06 2004-09-14 삼성전자주식회사 휴대용 통신 장치

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000308033A (ja) * 1999-04-19 2000-11-02 Sharp Corp テレビ電話補助装置およびテレビ電話システム
JP2002009968A (ja) * 2000-06-27 2002-01-11 Funai Electric Co Ltd テレビ電話システム、及び、携帯型電話機
JP2002281121A (ja) * 2001-03-16 2002-09-27 Nikon Gijutsu Kobo:Kk コミュニケーション機能を持つ民生機器
JP2005151446A (ja) * 2003-11-19 2005-06-09 Sharp Corp 携帯端末、クレードル、携帯端末の制御方法、クレードルの制御方法、制御プログラム、および該プログラムを記録した記録媒体

Also Published As

Publication number Publication date
JP2008517525A (ja) 2008-05-22
DE602005008266D1 (de) 2008-08-28
WO2006043977A1 (en) 2006-04-27
EP1803058B1 (en) 2008-07-16
EP1803058A1 (en) 2007-07-04

Similar Documents

Publication Publication Date Title
JP4855408B2 (ja) 複数の表示画面に情報を表示する携帯無線通信装置、その携帯無線通信装置の動作方法、及び、その携帯無線通信装置を動作させるためのコンピュータプログラム
CN101073050B (zh) 在多个显示屏上显示信息的手持无线通信装置、操作该装置的方法和操作该装置的计算机程序产品
US8230012B2 (en) Internet video conferencing on a home television
KR101814151B1 (ko) 모바일단말기, 디스플레이장치 및 그 제어방법
US8797999B2 (en) Dynamically adjustable communications services and communications links
US8368737B2 (en) Smart remote control devices for controlling video call devices
US11477316B2 (en) Information processing system, wireless terminal, and information processing method
EP2892210B1 (en) Providing video telephony using broadcast receiving apparatus and SMS message
US20060229016A1 (en) Apparatus and method for displaying information in Bluetooth communication mode of wireless terminal
JP2007312039A (ja) Tv電話機能付き携帯端末
KR20110056638A (ko) 휴대용 단말기에서 통화 모드를 변경하기 위한 장치 및 방법
JP2010016885A (ja) 通信装置および方法、通信システム、並びにプログラム記録媒体
JP6781318B2 (ja) 情報処理システム及び無線端末
JP6922060B2 (ja) 情報処理システム及び無線端末
JP4477079B2 (ja) 携帯電話装置
JP2005295574A (ja) 通信装置
JP2021170841A (ja) 情報処理システム及び無線端末
TWI523532B (zh) 視訊通話切換方法和系統
JP2005094509A (ja) Tv会議システム及びtv会議の実行方法
JP2005304039A (ja) 通信装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080408

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20100812

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100827

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20101129

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20101207

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20101221

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20110425

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110825

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20110901

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110926

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20111026

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20141104

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees