JP2008516311A - ユーザ・インタフェース・ベースのアプリケーションで捕獲イベントを統合するための方法およびシステム - Google Patents

ユーザ・インタフェース・ベースのアプリケーションで捕獲イベントを統合するための方法およびシステム Download PDF

Info

Publication number
JP2008516311A
JP2008516311A JP2007534735A JP2007534735A JP2008516311A JP 2008516311 A JP2008516311 A JP 2008516311A JP 2007534735 A JP2007534735 A JP 2007534735A JP 2007534735 A JP2007534735 A JP 2007534735A JP 2008516311 A JP2008516311 A JP 2008516311A
Authority
JP
Japan
Prior art keywords
multimedia
event
capture
capture event
multimedia data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2007534735A
Other languages
English (en)
Inventor
ピー. モリス、ロバート
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Scenera Technologies LLC
Original Assignee
Scenera Technologies LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Scenera Technologies LLC filed Critical Scenera Technologies LLC
Publication of JP2008516311A publication Critical patent/JP2008516311A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00204Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/44Browsing; Visualisation therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/02Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00132Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture in a digital photofinishing system, i.e. a system where digital photographic images undergo typical photofinishing processing, e.g. printing ordering
    • H04N1/00137Transmission
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00204Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server
    • H04N1/00244Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server with a server, e.g. an internet server
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21Server components or server architectures
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/27Server based end-user applications
    • H04N21/274Storing end-user multimedia data in response to end-user request, e.g. network recorder
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/414Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61Network physical structure; Signal processing
    • H04N21/6156Network physical structure; Signal processing specially adapted to the upstream path of the transmission network
    • H04N21/6175Network physical structure; Signal processing specially adapted to the upstream path of the transmission network involving transmission via Internet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643Communication protocols
    • H04N21/64322IP
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0077Types of the still picture apparatus
    • H04N2201/0084Digital still camera

Abstract

ウェブ・アプリケーションにアクセスする電子デバイス内のユーザ・インタフェースを準備するステップと、ユーザ・インタフェースが、電子デバイスからのマルチメディア捕獲イベントを検出し識別することができるようにするステップと、を含む電子デバイスが捕獲したマルチメディア・データを電子デバイスからサーバ内のウェブ・アプリケーションに送るための方法およびシステム。このようなイベントが検出され、識別された後で、ユーザ・インタフェースは、マルチメディア捕獲イベント中に捕獲したマルチメディア・データを自動的に処理し、このマルチメディア・データをウェブ・アプリケーションに送信する。

Description

本発明は、ユーザ・インタフェースに関し、特に、電子デバイスが捕獲したマルチメディア・データを電子デバイスからウェブ・ベースのアプリケーションに送るための方法およびシステムに関する。
従来、ソフトウェア・アプリケーションが提供するサービスは、アプリケーションを格納していたコンピュータ・システムにアクセスするユーザだけが使用していた。いくつかのコンピュータ・システムが相互におよび/またはサーバと通信することができるネットワークにおいては、1つのコンピュータ・システム内またはサーバ内に常駐するアプリケーションをネットワーク内の他のコンピュータ・システムにより使用することができる。
ネットワークは、ローカル・プライベート・イントラネットからインターネットのような公衆ネットワークに進歩してきた。この場合、インターネットに接続しているコンピュータ・システムは、例えば、ウェブ・ブラウザまたはリモート・デスクトップのようなユーザ・インタフェースを通して他のコンピュータ・システムと通信することができる。リモート・デスクトップの場合、コンピュータ・システムはリモート端末と呼ばれる。サーバまたはコンピュータ・システム内に常駐するアプリケーションが提供するサービスは、例えば、ウェブ・アプリケーションとしてのブラウザのようなそのユーザ・インタフェースを通して他のコンピュータ・システムが使用することができる。
それ故、コンピュータ・システムは、ウェブ・アプリケーションにアクセスするにはユーザ・インタフェースを準備するだけでよいが、ウェブ・アプリケーション自身は、ローカルな位置からではなく中央の位置から管理される。このことは、デジタル・カメラ、電話およびPDAのような携帯型の電子デバイスにとって特に有利である。何故なら、通常これらのデバイス内のメモリの容量は小さいからである。
多くの場合、ウェブ・アプリケーションは、ユーザに、クレジット・カード番号の入力、ボタンの選択またはボックスのチェック入れのようなある行動を行うようにプロンプトする。通常、次に、ユーザは、スクリーン上のボタンを押すことよりボックスにチェックを入れるためにポインタを使用することにより、またはデータを入力するためにキーパッドを使用することによりこの行動を行う。例えば、ブラウザのようなインタフェースは、入力イベントと呼ぶユーザの行動を検出することができる。それ故、ユーザがキーパッドにより自分のクレジット・カード番号を入力すると、ブラウザは、入力イベントをキーが押されたものとして検出し、それに従って押されたキーに関連するデータを処理する。
すでに説明したように、ウェブにより使用可能にすることができる携帯型電子デバイスは、例えば、ウェブ・ブラウザのようなユーザ・インタフェースを介してウェブ・アプリケーションにアクセスすることができる。さらに、多くの携帯型電子デバイスは、このデバイスがマルチメディア・データと呼ぶライブ画像およびオーディオ・データを捕獲し、格納することができるようにするマルチメディア捕獲サブシステムを備えている。
ウェブ・アプリケーションが、ユーザに、例えば画像のようなマルチメディア・データを提出するようにプロンプトした場合には、ユーザは、最初にファイル・システム内の画像を捕獲および格納し、次に画像の位置を発見するためにファイル・システムをブラウズし、次にHTMLフォーム、ファイル転送動作または電子メールのようなある種の機構を
通して画像を選択し、アップロードしなければならない。このプロセスは、特にユーザがウェブ・アプリケーションにアクセスするために携帯型電子デバイスを使用している場合には、退屈で時間がかかるプロセスである。このような場合、要求された画像を求めてファイル・システム内に格納している数百あるかも知れない画像全体をブラウズすることは、ナビゲーション機能が低く、処理速度が遅い場合には、困難で時間がかかる。
それ故、携帯型電子デバイスが捕獲したマルチメディア・データを携帯型電子デバイスからウェブ・アプリケーションに送るためのプロセスを簡単にするための方法およびシステムが求められている。本発明はこのようなニーズを解決する。
本発明は、電子デバイスが捕獲したマルチメディア・データを電子デバイスからサーバ内のウェブ・アプリケーションに送るための方法およびシステムを提供する。この方法は、ウェブ・アプリケーションにアクセスする電子デバイス内にユーザ・インタフェースを提供するステップと、ユーザ・インタフェースが、電子デバイスからのマルチメディア捕獲イベントを検出し、識別することができるようにするステップとを含む。このようなイベントが検出され、識別された後で、ユーザ・インタフェースは、マルチメディア捕獲イベント中に捕獲したマルチメディア・データを自動的に処理し、そのマルチメディア・データをウェブ・アプリケーションに送信する。
本発明は、ユーザ・インタフェースに関し、特に、携帯型電子デバイスが捕獲したマルチメディア・データをウェブ・ベースのアプリケーションに送るための方法およびシステムに関する。以下の説明は、通常の当業者が本発明を製造し、使用することができるようにするためのものであり、特許出願およびその要件の形をしている。当業者であれば、本明細書に記載する好ましい実施形態および一般的な原理および機能の種々の修正を容易に思い付くことができるだろう。例えば、好ましい実施形態はウェブ・ブラウザ・アプリケーションで実施されているが、本発明の原理はリモート・デスクトップ技術にも適用することができる。それ故、本発明は図の実施形態に限定されるものではなく、本明細書に記載する原理および機能による最も広い範囲に適用することができる。
本発明の好ましい実施形態によれば、インターネットのようなネットワークにアクセスするために使用するユーザ・インタフェースは、例えば、シャッターを押す行為、または録画ボタンを押す行為のようなマルチメディア捕獲イベントである入力イベントを認識する。次に、捕獲イベントに対応するマルチメディア・データが、ユーザ・インタフェースに入力データとして直接送られる。次に、マルチメディア・データは処理され、ネットワークを介してサーバのところのウェブ・アプリケーションに送られる。
ユーザ・インタフェースがマルチメディア捕獲イベントを検出し、対応するマルチメディア・データを直接受信することができるようにすることにより、ユーザは、ウェブ・アプリケーションにマルチメディア・データを送るために、画像、ムービー・クリップまたはオーディオの捕獲以外の追加ステップを行わなくてすむ。これによりプロセスがかなり簡単になり、時間が節減される。何故ならユーザは所望のマルチメディア・データを検索するためにファイル・システム全体をブラウズしなくてすむからである。
図1は、好ましい実施形態によるシステム環境を示すブロック図である。本発明によれば、電子捕獲デバイス10は、インターネットのようなネットワーク30を介してサーバ50と結合している。好適には、電子捕獲デバイス10は、ウェブ対応デジタル・カメラ
、カメラ付き携帯電話、ビデオ・カメラ、またはライブ画像およびオーディオ・データ、すなわちマルチメディア・データを捕獲することができるある種の他のウェブ対応電子デバイスであることが好ましい。サーバ50は、ウェブ・サーバ52および複数のウェブ・アプリケーション54を含む。
電子捕獲デバイス10は、マルチメディア捕獲サブシステム12、およびネットワーク30にアクセスするために使用するユーザ・インタフェースを含む。好ましい実施形態の場合には、ユーザ・インタフェースはウェブ・ブラウザ14であるが、下記の原理は、リモート・デスクトップ・アプリケーションおよび類似のユーザ・インタフェースにより提供を受ける遠隔クライアントにも適用することができる。マルチメディア捕獲サブシステム12は、写真撮影、音響記録、または映画製作のような捕獲イベントを管理する。捕獲イベント中に捕獲した画像またはオーディオ・データは、通常、処理され、名前が付けられ、次にファイル・システム13内の捕獲したイベントに関連するファイル15内に格納される。マルチメディア捕獲サブシステム12およびファイル・システム13は、当業者にとって周知のものである。
ブラウザ14は、サーバ50とユーザ20との間のインタフェースである。サーバ50上のウェブ・アプリケーション54は、ユーザ20に表示するためにウェブ・ページをブラウザ14に送信する。ある状況のもとでは、ウェブ・ページは、フォームと呼ばれるものを通してユーザ20からの入力を要求する。フォームは、それぞれが有効な入力タイプおよび関連する他の属性を定義する1つまたは複数のフォーム要素を含む。フォームは、HTML、XHTML、WML等のような任意のマークアップ言語により対話型ウェブ・ページを生成する当業者にとって周知の構造体である。
ブラウザ14は、ユーザからの応答を処理するためのフォーム・マネージャ17と結合している入力ハンドラ16を含む。入力ハンドラ16は、要求に応じてユーザ20が行った入力イベントのタイプを検出し、識別する。例えば、入力イベントは、マウスの左右への移動、クリック、およびキーパッド入力を含む。フォーム・マネージャ17は、フォーム要素に関連する命令に従って、現在焦点が当てられているフォーム要素を解釈し、入力ハンドラ16からの入力イベントを処理する。
現在、入力ハンドラ16は、ユーザ20のキーを押す(例えば、ナビゲーション・キーを押す)動作による入力イベント、およびポインティング・デバイス(例えば、マウスの移動または左右のクリック)からのイベントを検出する。従来のブラウザおよび入力ハンドラの場合には、フォーム要素が画像データまたはマルチメディア捕獲サブシステム12からの他のデータを要求している場合には、ユーザ20は、写真を撮影し(すなわち画像を捕獲し)、ファイル・システム13全体をブラウズし、画像に関連するファイル15の位置を発見し、ファイル15を選択しなければならない。特にユーザ・インタフェースの機能が限定されている小型電子デバイス10の場合には、このプロセスは、退屈で時間のかかるプロセスである。
本発明の好ましい実施形態によれば、マルチメディア捕獲イベントである入力イベントを入力ハンドラ16に直接送ることができるように、ブラウザ14はマルチメディア捕獲サブシステム12と直接結合している。本発明の入力ハンドラ16は、フォーム要素上にブラウザ14の焦点が当てられた場合に、マルチメディア捕獲サブシステムからのマルチメディア捕獲イベントを検出し、識別するように強化されている。このような捕獲イベントを有効な入力イベントとして認識することにより、必要に応じて、捕獲イベント中に捕獲したマルチメディア・データを、追加の手動ステップを行わないでフォーム要素と自動的に関連付けることができる。
好ましい実施形態の場合には、現在のファイル入力タグを使用することができ、フォーム・マネージャ17を修正する必要はない。例えば、標準HTMLで生成した下記のフォームを考えてみよう。
例1:
<FORM action = http://server.dom/cgi/handle
enctype = 杜ultipart/form-data・BR> method = 菟ost・
<P>
損傷の写真の提供:<INPUT type = 吐ile・name = 渡ame_of_files・
</P>
</FORM>
この場合、ウェブ・ページは、例えば、保険クレームをファイルするために損傷の画像を送るようにユーザ20に指示する。このフォーム要素は、1つの入力タイプを1つの「ファイル」として定義する。従来のシステムの場合には、ユーザ20はファイル15内の画像を捕獲し格納し、画像ファイル15を求めてファイル・システム13をブラウズし、ポインタまたはナビゲーション・キーにより画像ファイル15を選択しなければならなかった。
本発明の好ましい実施形態によれば、ユーザ20は、また、電子捕獲デバイス10の焦点を損傷した製品に合わせ、損傷した製品の画像を捕獲するためにシャッター・ボタンを押すことにより画像ファイルを入力することもできる。入力ハンドラ16は、例えば、シャッター・ボタンを押す動作のようなマルチメディア捕獲イベントを、入力イベントとして検出し、識別することができるので、入力ハンドラは、イベント中に捕獲したマルチメディア・データを受け入れ、それをフォーム・マネージャ17に送る。フォーム・マネージャ17は、マルチメディア・データが、例えば、「ファイル」のようなフォーム要素に対する入力タイプと一致すると判定し、次にフォームに従ってデータを処理する。
他の好ましい実施形態の場合には、フォームの入力タイプに対して新しい「捕獲」タイプが定義される。この場合、「捕獲」タイプを、マルチメディア捕獲イベントからのマルチメディア・データを特に必要とするものとして認識するために、フォーム・マネージャ17が若干修正される。下記の例2は、この好ましい実施形態によるフォームを示す。
例2:
<FORM action = http://server.dom/cgi/handle
enctype = 杜ultipart/form-data・BR> method = 菟ost・
<P>
損傷の写真の提供:<INPUT type = 田apture・name = 渡ame_of_files・
</P>
</FORM>
この場合、フォーム要素は、新しい入力タイプである「捕獲」タイプを定義する。本発明によれば、「捕獲」入力タイプは、マルチメディア捕獲サブシステムからのマルチメディア・データを明示的に要求する。すべてのタイプの「ファイル」を受け入れることができる例1のフォーム要素とは対照的に、例2のフォーム要素は、1つの入力タイプ、すなわち「捕獲」タイプに限定される。
さらに他の好ましい実施形態の場合には、ファイル入力タイプに対する入力ソースを制限する「有効な入力タイプ」という名称の新しい入力属性が提供される。この場合、フォーム・マネージャ17は、「有効な入力タイプ」属性を、例えば、ファイル・システム13またはマルチメディア捕獲サブシステム12のような、特定のソースからのデータを特に必要とするものとして解釈するように若干修正される。下記の例3は、この好ましい実
施形態によるフォームを示す。
例3:
<FORM action = http://server.dom/cgi/handle
enctype = 杜ultipart/form-data・BR> method = 菟ost・
<P>
損傷の写真の提供:<INPUT type = 吐il e・validInputTypes = 吐ile,
capture・name = 渡ame_of_files・
</P>
</FORM>
この場合、この例においては、属性「有効な入力タイプ」は、フォーム・マネージャ17に、ファイル・システム13からの入力、およびマルチメディア捕獲サブシステム12からの入力が有効な入力ソースであることを通知する。それ故、例3のフォームの制限は、例2のフォームの制限より緩やかであるが、例1のフォームの制限より厳しい。
上記フォーム要素は、マルチメディア捕獲イベントをフォーム要素内に統合するためのブラウザの修正方法の例である。すべての場合に、入力ハンドラは、マルチメディア捕獲サブシステムからのマルチメディア捕獲イベントを検出し、識別するように強化される。ブラウザ技術をよく知っている人であれば、フォーム・マネージャを修正することができること、または修正することができないこと、および例2および例3の上記修正は網羅的なものでないことを容易に理解することができるだろう。
マルチメディア捕獲イベントに関連する追加の機能を提供するために、他の種類の入力タイプおよび入力属性を導入することができる。例えば、予想されるまたは許可される画像の数を示す新しい入力属性を提供することができる。新しい入力タイプは、最小解像度および書式設定のようなマルチメディア・データのいくつかの特徴を定義することができる。さらに、画像をフォームの一部として投稿するのではなく、画像に対する宛先(URL)を指定するために、ファイル入力フォーム要素を拡張することができる。また、拡張したフォーム要素は、フォームを迅速に投稿することができるようにする目的で、画像の送信を遅らせるために使用することができる。
さらに、本発明の他の好ましい実施形態によれば、ブラウザ14は、マルチメディア捕獲イベントに直接応答する新しいスクリプトをサポートするように強化される。この場合、1つまたは複数のスクリプト・インタープリタ18およびイベント・ハンドラ(図示せず)は、マルチメディア捕獲サブシステム12からの入力イベントを処理するように修正される。下記の例4は、この好ましい実施形態によるフォームを示す。
例4:
<FORM action = http://server.dom/cgi/handle
enctype = 杜ultipart/form-data・BR> method = 菟ost・
<P>
損傷の写真の提供:<INPUT type = 吐ile・name = 渡ame_of_files・BR> onCapture = 菟repImage()・
</P>
</FORM>
この場合、新しいスクリプト・イベント、「捕獲中」は、フォーム要素内の入力属性として定義される。入力ハンドラ16が「捕獲中」イベントに対応するマルチメディア捕獲イベントを識別すると、スクリプト・インタープリタ18が呼び出され、スクリプト・インタープリタ18は、通常、ページ内に定義されている識別したサブルーチン、「prepImage()」を呼び出す。呼出されたルーチンは、捕獲イベント中に捕獲されたマ
ルチメディア・データをパラメータとして、または「最後に捕獲した画像の入手()」のような周知のスクリプトAPI呼出しを通して使用することができる。次に、マルチメディア・データは、データが投稿される前に、サブルーチンにより処理される。
好ましい実施形態によると、それぞれが1つまたは複数の関連するスクリプト・イベントを有する種々のマルチメディア捕獲イベントを定義することができる。例えば、マルチメディア捕獲イベントは、「ライブビュー」モードでマルチメディア捕獲サブシステムを作動するステップを含むことができ、関連するスクリプトは、ブラウザ14上にライブ画像を表示することができる。他の例の場合には、捕獲イベントは、ユーザ20がオブジェクト上に焦点を当てるが、画像をまだ捕獲していない「捕獲前」イベントであってもよい。例えば、「焦点中」のような関連するスクリプト・イベントは、画像に関連するいくつかの設定を調整することができる。さらに他の例の場合には、捕獲イベントは「捕獲後」イベントであってもよいし、関連するスクリプトは、ブラウザ14上に捕獲した画像のサムネイルを表示することができる。当業者であれば、他のマルチメディア捕獲イベントが存在すること、および本発明の好ましい実施形態によりスクリプトをそれと関連付けることができることを容易に理解することができるだろう。
図2は、本発明の好ましい実施形態によるフォーム内のフォーム要素を処理するためのプロセスを示すフローチャートである。図1および図2を参照すると、このプロセスは、焦点がフォーム内のフォーム要素上にセットされた場合に開始する(ステップ200)。入力ハンドラ16は、マルチメディア捕獲サブシステムからのマルチメディア捕獲イベントを検出し、識別し(ステップ202)、制御をフォーム・マネージャ17に渡す。フォーム・マネージャ17は、フォーム要素を分析し、フォーム要素がマルチメディア捕獲イベントと互換性を有しているかどうかを判定する。例えば、フォーム・マネージャ17は、フォーム要素が捕獲イベントに関連するマルチメディア・データを受け入れることができるかどうかを判定するために、上記「ファイル」および「捕獲」入力タイプ、およびフォーム要素の入力属性のような入力タイプを分析することができる。マルチメディア捕獲イベントが互換性を有していない場合には(ステップ204)、フォーム・マネージャは、入力イベントを無視し、入力ハンドラ16からの次の入力イベントを受信するために待機する(ステップ205)。
フォーム要素がマルチメディア捕獲イベントと互換性を有する場合には、フォーム・マネージャ17は、マルチメディア捕獲イベント中に捕獲したマルチメディア・データへの参照をフォーム要素に自動的に関連付ける(ステップ206)。好ましい実施形態の場合には、画像データの識別子または実際の画像データに対向するある種の他のイベント・パラメータがフォーム要素と関連付けられる。
参照がフォーム要素と関連付けられた後で、フォーム・マネージャ17は、例えば、「捕獲中」のようなスクリプト・イベントが、入力属性として存在するかどうかを判定する(ステップ208)。スクリプト・イベントが存在しない場合には、フォーム・マネージャ17は次の入力イベントを受信するために待機する(ステップ205)。スクリプト・イベントが存在する場合には、フォーム・マネージャ17は、指定のスクリプトまたはサブルーチンを実行する対応するスクリプト・インタープリタ18を呼び出す(ステップ210)。サブルーチンが終了すると、フォーム・マネージャ17は次の入力イベントを受信するために待機する(ステップ205)。ユーザがフォーム内にデータを入力した場合には、ユーザはフォーム上の提出タイプ・ボタンを選択し、当業者であれば周知のプロセスによりデータがサーバ50内のウェブ・アプリケーション54に送られる。
本発明の態様によれば、ブラウザ14内の入力ハンドラ16は、マルチメディア・データが、フォーム内の焦点内の互換性を有するフォーム要素と自動的に関連することができ
るように、マルチメディア捕獲イベントを検出し、識別するように強化される。マルチメディア捕獲イベントをブラウザ14と統合することにより、捕獲イベント中に捕獲したマルチメディア・データを送るためのプロセスがかなり簡単になる。
上記好ましい実施形態はブラウザ向けのものであるが、当業者であれば、上記原理を同様にブラウザ以外の遠隔表示技術に適用することができることを容易に理解することができるだろう。さらに、フォームの例はHTML用のものであるが、同じ原理を、例えば、フォームおよびフォーム要素を定義するWMLおよびXHTMLのような任意のマークアップ言語に適用することができる。
図の実施形態を参照しながら本発明について説明してきたが、通常の当業者であれば、実施形態を種々に変形することができること、変形した実施形態も本発明の精神および範囲に含まれることを容易に理解することができるだろう。それ故、通常の当業者であれば、添付の特許請求の範囲の精神および範囲から逸脱することなしに多くの修正を行うことができる。
本発明の好ましい実施形態によるシステムの図面。 本発明の好ましい実施形態によるマルチメディア・データをウェブ・ブラウザからウェブ・アプリケーションに送るためのフローチャート。

Claims (32)

  1. 電子デバイスから、前記電子デバイスが捕獲したデータをサーバ内のウェブ・アプリケーションに送るための方法であって、
    前記ウェブ・アプリケーションにアクセスするために前記電子捕獲デバイス内にユーザ・インタフェースを準備するステップと、
    前記ユーザ・インタフェースが、前記電子デバイスからのマルチメディア捕獲イベントを検出し、識別することができるようにするステップと、
    前記マルチメディア捕獲イベントを検出し、識別した後で、前記マルチメディア捕獲イベント中に捕獲したマルチメディア・データを前記ユーザ・インタフェースにより自動的に処理するステップと、
    前記マルチメディア・データを、前記ユーザ・インタフェースを介して前記ウェブ・アプリケーションに送信するステップと、を含む方法。
  2. 前記ユーザ・インタフェースを提供するステップが、前記サーバからの対話型ウェブ・ページを表示し、解釈するためのウェブ・ブラウザを提供するステップを含み、前記対話型ウェブ・ページが、ユーザが、要求されたデータを前記サーバに送ることができるフォーム内にフォーム要素を含む請求項1に記載の方法。
  3. 前記フォーム要素が、前記フォーム要素を介して送るデータに関連する少なくとも1つの属性を含む請求項2に記載の方法。
  4. 前記少なくとも1つの属性が捕獲入力タイプを含み、前記捕獲入力タイプが、マルチメディア・データを明示的に要求する請求項3に記載の方法。
  5. 前記少なくとも1つの属性が、前記データを送ることができる1つまたは複数の有効なソースを定義する請求項3に記載の方法。
  6. 前記マルチメディア捕獲イベントを検出し、識別した後で、前記ブラウザにより、前記マルチメディア捕獲イベント中に捕獲した前記マルチメディア・データが、前記フォーム要素内に定義した前記少なくとも1つの属性と互換性を有しているかどうかを判定するステップと、
    前記マルチメディア・データが互換性を有していない場合には、前記マルチメディア捕獲イベントを無視するステップと、をさらに含む請求項3に記載の方法。
  7. 前記マルチメディア・データが互換性を有している場合には、前記マルチメディア捕獲イベントから捕獲した前記マルチメディア・データを処理するステップが、前記マルチメディア・データを前記フォーム要素に自動的に関連付けるステップを含む請求項6に記載の方法。
  8. スクリプト・イベントが前記マルチメディア捕獲イベントに応答するように、前記マルチメディア捕獲イベントに直接関連する前記スクリプト・イベントを定義するステップをさらに含む請求項3に記載の方法。
  9. 前記フォーム要素内の前記少なくとも1つの属性が、前記マルチメディア捕獲イベントに関連する前記スクリプト・イベントを含む請求項8に記載の方法。
  10. 前記マルチメディア捕獲イベントから捕獲した前記マルチメディア・データを処理するステップが、前記スクリプト・イベントに関連する命令を実行するステップを含む請求項9に記載の方法。
  11. ハンドヘルド電子捕獲デバイスであって、
    サーバ内のウェブ・アプリケーションにアクセスするためのユーザ・インタフェースと、
    前記電子捕獲デバイスからのマルチメディア捕獲イベントを検出し、識別するための前記ユーザ・インタフェース内の入力ハンドラと、を備え、
    前記入力ハンドラが前記マルチメディア捕獲イベントを検出し、識別した後で、前記ユーザ・インタフェースが、前記マルチメディア捕獲イベント中に捕獲したマルチメディア・データを自動的に処理し、前記マルチメディア・データを前記ウェブ・アプリケーションに送信するハンドヘルド電子捕獲デバイス。
  12. 前記ユーザ・インタフェースが、前記サーバからの対話型ウェブ・ページを表示し、解釈するためのウェブ・ブラウザであって、前記対話型ウェブ・ページが、ユーザが、要求されたデータを前記サーバに送ることができるフォーム内にフォーム要素を含む請求項11に記載のデバイス。
  13. 前記フォーム要素が、前記フォーム要素を介して送る前記データに関連する少なくとも1つの属性を含む請求項12に記載のデバイス。
  14. 前記少なくとも1つの属性が捕獲入力タイプを含み、前記捕獲入力タイプが、マルチメディア・データを明示的に要求する請求項13に記載のデバイス。
  15. 前記少なくとも1つの属性が、前記データを送ることができる1つまたは複数の有効な入力ソースを定義する請求項13に記載のデバイス。
  16. 前記ブラウザが、前記マルチメディア捕獲イベント中に捕獲した前記マルチメディア・データが、前記フォーム要素内に定義した前記少なくとも1つの属性と互換性を有するかどうかを判定するためのフォーム・マネージャをさらに含み、前記マルチメディア・データが互換性を有していない場合には、前記フォーム・マネージャが、前記マルチメディア捕獲イベントを無視する請求項13に記載のデバイス。
  17. 前記マルチメディア・データが互換性を有している場合に、前記フォーム・マネージャが、前記マルチメディア・データを前記フォーム要素に自動的に関連付ける請求項16に記載のデバイス。
  18. スクリプト・イベントが前記マルチメディア捕獲イベントに応答するように、前記マルチメディア捕獲イベントに直接関連する前記スクリプト・イベントを定義する手段をさらに含む請求項13に記載のデバイス。
  19. 前記フォーム要素内の前記少なくとも1つの属性が、前記マルチメディア捕獲イベントに関連する前記スクリプト・イベントを含む請求項18に記載のデバイス。
  20. 前記ブラウザが、前記スクリプト・イベントに関連する命令を実行することにより、前記マルチメディア捕獲イベントから捕獲した前記マルチメディア・データを処理する請求項19に記載のデバイス。
  21. 電子デバイスから、前記電子デバイスが捕獲したマルチメディア・データをサーバ内のウェブ・アプリケーションに送るためのプログラム命令を含むコンピュータ可読媒体が、
    前記ウェブ・アプリケーションにアクセスするために前記電子捕獲デバイス内にユーザ・インタフェースを提供するステップと、
    前記ユーザ・インタフェースが、前記電子デバイスからのマルチメディア捕獲イベントを検出し、識別できるようにするステップと、
    前記マルチメディア捕獲イベントを検出し、識別した後で、前記マルチメディア捕獲イベント中に捕獲したマルチメディア・データを、前記ユーザ・インタフェースにより自動的に処理するステップと、
    前記マルチメディア・データを、前記ユーザ・インタフェースを介して前記ウェブ・アプリケーションに送信するステップとを含むコンピュータ可読媒体。
  22. 前記ユーザ・インタフェースを提供するステップが、前記サーバからの対話型ウェブ・ページを表示し、解釈するためのウェブ・ブラウザを提供するステップを含み、前記対話型ウェブ・ページが、ユーザが、要求されたデータを前記サーバに送ることができるフォーム内にフォーム要素を含む請求項21に記載のコンピュータ可読媒体。
  23. 前記フォーム要素が、前記フォーム要素を介して送るデータに関連する少なくとも1つの属性を含む請求項22に記載のコンピュータ可読媒体。
  24. 前記少なくとも1つの属性が捕獲入力タイプを含み、前記捕獲入力タイプがマルチメディア・データを明示的に要求する請求項23に記載のコンピュータ可読媒体。
  25. 前記少なくとも1つの属性が、前記データを送ることができる1つまたは複数の有効なソースを定義する請求項23に記載のコンピュータ可読媒体。
  26. 前記マルチメディア捕獲イベントを検出し、識別した後で、前記ブラウザにより、前記マルチメディア捕獲イベント中に捕獲した前記マルチメディア・データが、前記フォーム要素内に定義した前記少なくとも1つの属性と互換性を有しているかどうかを判定するステップと、
    前記マルチメディア・データが互換性を有していない場合には、前記マルチメディア捕獲イベントを無視するステップとをさらに含む請求項23に記載のコンピュータ可読媒体。
  27. 前記マルチメディア・データが互換性を有している場合には、前記マルチメディア・データを前記フォーム要素に自動的に関連付けるステップ請求項26に記載のコンピュータ可読媒体。
  28. スクリプト・イベントが前記マルチメディア捕獲イベントに応答するように、前記マルチメディア捕獲イベントに直接関連する前記スクリプト・イベントを定義するステップをさらに含む請求項23に記載のコンピュータ可読媒体。
  29. 前記フォーム要素内の前記少なくとも1つの属性が、前記マルチメディア捕獲イベントに関連する前記スクリプト・イベントを含む請求項28に記載のコンピュータ可読媒体。
  30. 前記マルチメディア捕獲イベントから捕獲した前記マルチメディア・データを処理するステップが、前記スクリプト・イベントに関連する命令を実行するステップを含む請求項29に記載のコンピュータ可読媒体。
  31. 電子デバイスが捕獲したマルチメディア・データをフォームと関連付けるための方法であって、
    マルチメディア捕獲イベントと互換性を有する前記フォーム内にフォーム要素を提供するステップと、
    前記電子デバイスからのマルチメディア捕獲イベントを検出し、識別するステップと、
    前記マルチメディア捕獲イベントを検出し、識別した場合に、前記マルチメディア捕獲イベント中に捕獲したマルチメディア・データを前記フォーム要素と自動的に関連付けるステップとを含む方法。
  32. 電子デバイスが捕獲したマルチメディア・データをフォームと関連付けるためのシステムであって、
    前記フォームを受信し、表示するための前記電子デバイス内のブラウザであって、前記フォームがマルチメディア捕獲イベントと互換性を有するフォーム要素を含むブラウザと、
    前記電子デバイスからのマルチメディア捕獲イベントを検出し、識別するための前記ブラウザ内の入力ハンドラと、を備え、前記入力ハンドラが前記マルチメディア捕獲イベントを検出し、識別した場合、前記ブラウザが、前記マルチメディア捕獲イベント中に捕獲したマルチメディア・データを前記フォーム要素と自動的に関連付けるシステム。
JP2007534735A 2004-10-04 2005-09-28 ユーザ・インタフェース・ベースのアプリケーションで捕獲イベントを統合するための方法およびシステム Pending JP2008516311A (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US95895104A 2004-10-04 2004-10-04
PCT/US2005/034877 WO2006041694A2 (en) 2004-10-04 2005-09-28 Method and system for integrating capture events in a user interface-based application

Publications (1)

Publication Number Publication Date
JP2008516311A true JP2008516311A (ja) 2008-05-15

Family

ID=36148790

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007534735A Pending JP2008516311A (ja) 2004-10-04 2005-09-28 ユーザ・インタフェース・ベースのアプリケーションで捕獲イベントを統合するための方法およびシステム

Country Status (4)

Country Link
EP (1) EP1800242A4 (ja)
JP (1) JP2008516311A (ja)
CN (1) CN101124824A (ja)
WO (1) WO2006041694A2 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8839349B2 (en) * 2011-10-18 2014-09-16 Mcafee, Inc. Integrating security policy and event management

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11265390A (ja) * 1998-03-16 1999-09-28 Seiko Epson Corp ネットワーク接続型画像取得システム、ネットワーク接続型画像取得用通信装置及びネットワーク接続型画像取得用プログラムを格納した記録媒体
JP2003067309A (ja) * 2001-08-30 2003-03-07 Fujitsu Ltd データ送信方法、送信先決定装置及び撮影端末
JP2003111008A (ja) * 2001-09-28 2003-04-11 Canon Inc サーバ装置及びその制御方法
JP2004032129A (ja) * 2002-06-24 2004-01-29 Sony Corp サービス提供システム、撮影装置および方法、情報処理装置および方法、記録媒体、並びにプログラム
JP2004046617A (ja) * 2002-07-12 2004-02-12 Cha-Net Inc 画像付きメールを用いたホームページ用ファイル・ソース作成システム及びホームページ作成システム

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6567122B1 (en) * 1998-03-18 2003-05-20 Ipac Acquisition Subsidiary I Method and system for hosting an internet web site on a digital camera
US6223190B1 (en) * 1998-04-13 2001-04-24 Flashpoint Technology, Inc. Method and system for producing an internet page description file on a digital imaging device
US6591295B1 (en) * 1999-11-05 2003-07-08 Oracle International Corp. Methods and apparatus for using multimedia data stored in a relational database in web applications
US6874025B2 (en) * 2000-12-22 2005-03-29 Intel Corporation System and method of application input validation
US7272788B2 (en) * 2000-12-29 2007-09-18 Fotomedia Technologies, Llc Client-server system for merging of metadata with images

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11265390A (ja) * 1998-03-16 1999-09-28 Seiko Epson Corp ネットワーク接続型画像取得システム、ネットワーク接続型画像取得用通信装置及びネットワーク接続型画像取得用プログラムを格納した記録媒体
JP2003067309A (ja) * 2001-08-30 2003-03-07 Fujitsu Ltd データ送信方法、送信先決定装置及び撮影端末
JP2003111008A (ja) * 2001-09-28 2003-04-11 Canon Inc サーバ装置及びその制御方法
JP2004032129A (ja) * 2002-06-24 2004-01-29 Sony Corp サービス提供システム、撮影装置および方法、情報処理装置および方法、記録媒体、並びにプログラム
JP2004046617A (ja) * 2002-07-12 2004-02-12 Cha-Net Inc 画像付きメールを用いたホームページ用ファイル・ソース作成システム及びホームページ作成システム

Also Published As

Publication number Publication date
EP1800242A4 (en) 2010-04-21
WO2006041694A2 (en) 2006-04-20
WO2006041694A3 (en) 2007-08-16
EP1800242A2 (en) 2007-06-27
CN101124824A (zh) 2008-02-13

Similar Documents

Publication Publication Date Title
US9954970B1 (en) System and method of determining latency
US8819168B2 (en) Link expansion service
WO2020199751A1 (zh) 用于加载页面图片的方法、装置和电子设备
US20100268694A1 (en) System and method for sharing web applications
US6785740B1 (en) Text-messaging server with automatic conversion of keywords into hyperlinks to external files on a network
US10515142B2 (en) Method and apparatus for extracting webpage information
JP4934843B2 (ja) 情報処理装置、画像登録方法、およびプログラム
KR20050085564A (ko) 네트워크-기반 자원에 대한 콘텐츠 관련 링크를 제공하기위한 텍스트 키워드나 문구를 얻기 위해 비디오 콘텐츠를사용하기 위한 방법 및 시스템
CN106844705B (zh) 用于显示多媒体内容的方法和装置
US10244026B2 (en) Converting content for display on external device according to browser context and based on characteristic of external device
US20140331114A1 (en) Methods and apparatuses for obtaining and sharing partial content of a webpage
CN104144357A (zh) 视频播放方法和系统
US20050024355A1 (en) Selecting items displayed on respective areas on a screen
JP2010061542A (ja) 通信端末、通信方法、信号処理装置、信号処理方法及び通信システム
CN112256645A (zh) 数据处理的方法、装置、终端及存储介质
US20130185318A1 (en) Data providing apparatus, electronic apparatus, data processing system, and method of data processing
US20130080583A1 (en) Image processing apparatus, method of controlling the same, and storage medium
US8230002B2 (en) Method and system for automatic setup in web-based applications
JP2019021272A (ja) 情報処理システム、情報処理方法、情報処理プログラムおよび検索端末
US8321536B2 (en) Method and apparatus for processing remote control key data in home network device
CN103902635A (zh) 获取实时数据的方法、浏览器、多媒体设备及移动终端
KR101282975B1 (ko) 문서 요소를 분리 구조화하여 표준화한 후 웹페이지를 재구성하는 웹화면 크롭 서버 장치
KR20070083263A (ko) 사용자 단말의 특성에 따른 웹 표현 처리 시스템, 방법, 및그 기록매체
EP2207110A1 (en) A method and apparatus for exchanging media service queries
JP2008516311A (ja) ユーザ・インタフェース・ベースのアプリケーションで捕獲イベントを統合するための方法およびシステム

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20090629

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20091110

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20100406