JP2014229323A - データセットの相互的なレビューのための方法及び装置 - Google Patents

データセットの相互的なレビューのための方法及び装置 Download PDF

Info

Publication number
JP2014229323A
JP2014229323A JP2014108899A JP2014108899A JP2014229323A JP 2014229323 A JP2014229323 A JP 2014229323A JP 2014108899 A JP2014108899 A JP 2014108899A JP 2014108899 A JP2014108899 A JP 2014108899A JP 2014229323 A JP2014229323 A JP 2014229323A
Authority
JP
Japan
Prior art keywords
data set
view
coarse
dataset
fine
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2014108899A
Other languages
English (en)
Inventor
テイス オリバー
Oliver Theis
テイス オリバー
コーラー ラルフ
Ralph Kohler
コーラー ラルフ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Thomson Licensing SAS
Original Assignee
Thomson Licensing SAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from EP13306153.1A external-priority patent/EP2838033A1/en
Application filed by Thomson Licensing SAS filed Critical Thomson Licensing SAS
Publication of JP2014229323A publication Critical patent/JP2014229323A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/10Text processing
    • G06F40/103Formatting, i.e. changing of presentation of documents
    • G06F40/106Display of layout of documents; Previewing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/44Browsing; Visualisation therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/74Browsing; Visualisation therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/10Text processing
    • G06F40/166Editing, e.g. inserting or deleting
    • G06F40/177Editing, e.g. inserting or deleting of tables; using ruled lines

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • User Interface Of Digital Computer (AREA)
  • Processing Or Creating Images (AREA)

Abstract

【課題】データセットの相互的なレビューのための方法及びデータセットの相互的なレビューを可能にするように構成された装置を提供する。【解決手段】データセットをレビューするためのユーザリクエストは、ユーザ入力部を介して受信される10。このリクエストに応答して、プロセッサはデータセットからデータセットの粗いビュー及びデータセットの細かいビューに関する代表値を生成する11、12。ユーザインターフェース生成部は、データセットの粗いビュー及びデータセットの細かいビューにグラフィックユーザインターフェースを表示する13。【選択図】図2

Description

本発明は、データセットの相互的なレビューのための方法及び装置に関する。より詳細には、レビュワーがグラフィックユーザインターフェースを用いて大きなデータセットのデータを簡単にアクセス及び解析可能にする方法及び装置が記述される。
デジタル画像シーケンスとしても言及される、デジタルモーションピクチャは、メタデータ情報を伴うことが多い。好ましくは、メタデータ情報は、デジタル画像シーケンスの単一のフレームごとに利用可能である。メタデータは、典型的には、カメラ自体、又はむしろリアルタイム若しくは非リアルタイム後処理アルゴリズムのいずれかによって生成される。メタデータは、例えば、ノイズレベル、画像コントラスト、又は、より洗練されたアルゴリズムの場合には個々のフレーム内で検出された複数の顔若しくは車などの複数の情報を備える。しかしながら、典型的には1秒につき24フレームを有する90分のデジタルムービーに関して、単一のメタデータファイルは129600個のメタデータ要素を備える。プロフェッショナルな後生成環境では、映画ごとの複合的なデータセット又は複数のデータセットを有する複合的な映画の開発に取り組む人間のレビュワーは、ある品質の基準に関するメタデータ情報を調査することを要する。多大な量の情報のため、人間のレビュワーはメタデータを調査するのに必要とされる時間を最適化する際に重大な関心を有する。
単一のプロット、例えばグラフ又はバープロットにおけるそのような多大な量のデータを表示するための一般的な技術は、表示されることが望まれるデータの量(例えば、100000以上のメタデータ要素)を利用可能なピクセル又は表示部のドットと一致するために典型的にはダウンサンプリングを使用する。用語の意味内の表示部は、例えば、特にメタデータの表示に使用されるモニター、例えばその目的のために使用されるウインドウなどの(典型的にはGUIと呼ばれる)グラフィカルユーザインターフェースである。利用可能な解像度は、モニター自身によって定められ、すなわち、個々のモニターのハードウェアの解像度によって又はメタデータの表示に使用されるGUI−ウインドウ内の複数のピクセルによって定められる。
欧州特許2485190号明細書
この点について、特許文献1は、明確な解像度を有する表示メディア上の画像フレームのシーケンスに対応する多大な量のメタデータを表すための方法が開示されている。生成データグラフが表示メディアにフィットすることを確実にするために、データセットは所定の長さのクラスタに分割される。各クラスタは、プロットの単一の値を表し、個々に処理される。クラスタの処理は、アウトライナー(outliners)が維持されるような方法で実行される。それは、品質制御に関してメタデータの迅速な概観を与えるために十分に適合される。しかしながら、このアプローチは重要なデータサンプルがレビュワーに対して可視であることを確実にする一方で、レビュワーがそのような重要なデータサンプルを取り扱うことを可能にする方法は議論されていない。
本発明の目的は、グラフィックユーザインターフェースを用いて大きいデータセットの相互的なレビューのための解決方法を提供することである。
本発明の1つの態様によると、データセットの相互的なレビューのための方法は、
−前記データセットをレビューするためのユーザリクエストを受信するステップと、
−前記データセットの粗いビューのために、前記データセットから表示値を生成するステップと、
−前記データセットの細かいビューのために、前記データセットから表示値を生成するステップと、
−グラフィックユーザインターフェースにおいて前記データセットの前記粗いビュー及び前記データセットの前記細かいビューを表示するステップと、
を備える。
従って、データセットの相互的なレビューを可能にするように構成された装置は、
−前記データセットをレビューするためのユーザリクエストを受信するように構成されたユーザ入力部と、
−前記データセットの粗いビュー及び前記データセットの細かいビューのための前記データセットから表示値を生成するように構成されたプロセッサと、
−前記データセットの前記粗いビュー及び前記データセットの前記細かいビューを表示するためのグラフィックユーザインターフェースを出力するように構成されたユーザインターフェース生成部と、
を備える。
同様に、コンピュータによって実行されるときにデータセットの相互的なレビューを可能にする命令を格納したコンピュータ可読記録媒体は、前記コンピュータに、
−前記データセットをレビューするためのユーザリクエストを受信し、
−前記データセットの粗いビューのために、前記データセットから表示値を生成し、
−前記データセットの細かいビューのために、前記データセットから表示値を生成し、
−前記データセットの前記粗いビュー及び前記データセットの前記細かいビューを表示するグラフィックユーザインターフェースを出力する、
ことを実行させる。
本発明の1つの態様は、例えばビデオシーケンスに関連付けられたメタデータなどのデータセットの表示を、粗い及び細かいスケールプロットにおいて同時に提供することである。このようにして、データセットの迅速な概観に加えて、メディアの解像度によって及ぼされる制限なしでデータセットのサブセットの直接的でグラフィックな表示が詳細な調査のために利用可能である。
好ましくは、例えばビデオシーケンスの単一のフレームなどのデータセットから得られるコンテンツは、例えば相互的なデータレビュー及び処理目的のために、表示された粗いビュー及び細かいビューと共に表示される。このようにして、提案されたアプローチは、異なる一時的なスケール上のデータセットの可視化と相互的なレビューのための根本的なコンテンツの表示とを組み合わせる。データセットの表示は、好ましくはコンテンツへの相互的な移動、コンテンツの選択、及びコンテンツのすばやいプレビューのためのタイムラインとして機能する。これは、更なる調査及び粗いスケール上で発見された異常の取り扱いを簡単に可能にする。
より良い理解のために、本発明は、ここで、図面を参照して以下の説明において詳細に説明されることになる。本発明は、この例示の実施形態に限定されず、特定された特徴も添付の特許請求の範囲において定められるような本発明の範囲から逸脱することなく適宜組み合わせ及び/又は変更することができることが理解される。
データセットの相互的なレビューのために適合可能なグラフィックユーザインターフェースを描く図である。 データセットの相互的なレビューのための本発明による方法を例示する図である。 図2の方法を実装する装置を描く図である。
以下において、本発明は、フレームを備えた画像シーケンスに対応するメタデータの相互的なレビュー(review)の例で説明されることになる。メタデータはフレーム毎に変化すると仮定される。もちろん、本発明の使用はこの例に限定されない。一般的なアプローチは、データセットの他のタイプも同様に応用できる。
図1は、メタデータのセットの相互的なレビューのために使用されるグラフィックユーザインターフェース1の例示的な概略図である。スクリーンレイアウトの底部で、完全な画像シーケンスのためのメタデータが粗い(coarse)ビュー2で示されている。ここで、横並びのピクセルは、複合的なフレームのための情報を表す。粗いビュー2は、好ましくは、粗いビュー2において表示することができる値の最大数のための値を決定し、データクラスタの対応数を生成し、粗いビュー2における決定された表示値のみを表示することによって生成される。各クラスタは、複数の後続のメタデータ要素を備え、表示することができる値の数によってメタデータ要素の総数を分割することによって生成される。各クラスタに関する表示値は、例えば最大関数(max-function)又は最小関数(min-function)など、個々のクラスタのメタデータ要素に対する所定の関数を適用することによって決定される。
粗いビュー2の上に、1組のメタデータのセクションを表す細かい(fine)ビュー3が示され、好適には各単一のフレームに関するメタデータを有する。セクションは、有利には、セクションウインドウ6を用いて粗いビュー2において強調される。セクション間隔の大きさは、好ましくは、各フレームに関するメタデータが少なくとも1つの水平ピクセルによって表されるような方法で設定される。典型的には、便宜のためピクセルの対がデータのグラフ表示の間の間隔とともに用いられる。表示されたメタデータに加えて、有利には、メタデータに関連付けられた現在のフレームのコンテンツは、フレームウインドウ4内に表示される。細かいビュー3において、調査下の現在のフレームに対応するメタデータは、細かいビュー3の中央に示され、好適にはフレーム前後に対応するメタデータの簡単な調査のためのマーカー7によって識別される。オプションとして、インデックスフレームがメタデータの図とともにインデックスビュー5において追加的に表示される。
相互的な動作は、例えば、タッチング若しくはポインティング、及び対応フレームへのジャンピングにより、粗いビュー2又は細かいビュー3をクリックすることによって達成される。この目的のため、例えば汎用PC又は専用PCなどの、キーボード、マウス又はタッチユーザインターフェースを有する処理デバイスは、動的表示を生成するために使用される。ターゲットフレームにジャンピングすると、粗いビュー2内のセクションウインドウ6、細かいビュー内に表示されるメタデータ及びフレームウインドウ内のコンテンツビューはリフレッシュされる。
粗いビュー2はまた、多目的タイムラインとして使用され、クリップマーカー8を設定及び可視化することが好適である。これは、例えばビデオ後処理又は復旧のための処理エンジンによって視覚化が達成されるときに特に便利である。
汎用グラフィカルユーザ環境アプリケーションにおいて、ウインドウは通常ユーザによって動的にサイズ変更される場合がある。この場合には、粗いビュー2は新しい仮想スクリーンの解像度を調整するために上記のように再処理される。それから、細かいビューセクションウインドウ3は、例えば、表示されたデータの範囲を変更することによって、又は近接データ値の間の間隔のデータ値を表すために使用されるピクセル数を変更することによって、それに応じて調整される。
データセットの相互的レビューのための方法は、図2に概略的に例示される。第1のステップ10において、データセットをレビューするためのユーザリクエストが受信される。このリクエストは、明示的なリクエスト、すなわち「レビュー」ボタンがメニューであることをユーザが選択するか、又はリクエストが黙示的であることのいずれかであることが好ましい。例えば、データセットをプログラムにローディングすることは、リクエストを構成することができる。リクエストに応答してデータセットの粗いビュー2のための代表値がデータセットから生成される(11)。同様に、データセットの細かいビュー3に関する代表値がデータセットから生成される(12)。データセットの粗いビュー2及びデータセットの細かいビュー3の両方がグラフィックユーザインターフェースに表示される(13)。
図2の方法を実装するように構成された装置20は、図3に概略的に示される。装置20は、例えばローカルストレージ又はネットワークソースから、データセットを受信するための入力部21及びデータセットをレビューするためのユーザリクエストを受信する(10)ように構成されたユーザ入力部22を有する。そのようなユーザリクエストに応答して、プロセッサ23はデータセットからデータセットの粗いビュー2のための代表値及びデータセットの細かいビュー3のための代表値を生成する(11、12)。これらの値は、データセットの粗いビュー2及びデータセットの細かいビューを表示する(13)グラフィックユーザインターフェース1を出力するユーザインターフェース生成部24に提供される。グラフィックユーザインターフェース1は、装置の一部を形成するディスプレイ25へ又は専用出力部26を介して外部ディスプレイ27へのいずれかに出力される。いずれかの場合において、有利にはディスプレイ25、27は装置20のためのタッチユーザインターフェースとして機能する。もちろん、装置の様々な部位が同様に結合もしくは部分的に単一の部位に結合され、又はプロセッサ上で動作するソフトウェアとして実装されることができる。
本発明が特定の実施形態を参照して上記で記述されたが、この実施形態に限定されず、更なる代替手段が特許請求された本発明の範囲内に密接に関連する当業者に想到されることになるであろう。

Claims (7)

  1. データセットの相互的なレビューのための方法であって、前記方法は、
    −前記データセットをレビューするためのユーザリクエストを受信するステップ(10)と、
    −前記データセットから前記データセットの粗いビュー(2)に関する代表値を生成するステップ(11)と、
    −前記データセットから前記データセットの細かいビュー(3)に関する代表値を生成するステップ(12)と、
    −グラフィックユーザインターフェース(1)に前記データセットの前記粗いビュー(2)及び前記データセットの前記細かいビュー(3)を表示するステップ(13)と、
    を含む、前記方法。
  2. 前記データセットの前記粗いビュー(2)に関する前記代表値は、前記粗いビュー(2)における複数の表示可能な値に従って前記データセットのデータ要素をクラスタ化すること及び各クラスタに関して表示されるべき値を決定することによって生成される(11)、請求項1に記載の方法。
  3. 前記データセットの前記細かいビュー(3)に関する前記代表値は前記データセットのサブセットを選択することによって生成され(12)、前記データセットの前記サブセットは前記粗いビュー(2)の特定の領域に対応する、請求項1又は2に記載の方法。
  4. −前記粗いビュー(2)の領域(6)を特定するユーザ入力を受信するステップと、
    −前記データセットから、前記ユーザによって特定された前記領域(6)に従って前記データセットの前記細かいビュー(3)に関する前記代表値を生成するステップ(12)と、
    −前記データセットから当該生成された(12)代表値で前記データセットの前記細かいビュー(3)を更新するステップと、
    をさらに含む、請求項1乃至3のいずれかに記載の方法。
  5. −前記グラフィックユーザインターフェース(1)をサイズ変更するためのユーザ入力を受信するステップと、
    −当該サイズ変更されたグラフィックユーザインターフェース(1)のサイズに従って、前記データセットから前記データセットの前記粗いビュー(2)及び前記データセットの前記細かいビュー(3)に関する前記代表値を生成するステップ(11、12)と、
    −前記データセットから当該生成された(11、12)代表値で前記データセットの前記粗いビュー(2)及び前記データセットの前記細かいビュー(3)を更新するステップと、
    をさらに含む、請求項1乃至4のいずれかに記載の方法。
  6. データセットの相互的なレビューを可能にするように構成された装置(20)であって、前記装置は、
    −前記データセットをレビューするためのユーザリクエストを受信する(10)ように構成されたユーザ入力部と、
    −前記データセットから前記データセットの粗いビュー(2)及び前記データセットの細かいビュー(3)の代表値を生成する(11、12)ように構成されたプロセッサ(23)と、
    −前記データセットの前記粗いビュー(2)及び前記データセットの前記細かいビュー(3)を表示する(13)グラフィックユーザインターフェース(1)を出力するように構成されたユーザインターフェース生成部(24)と、
    を備えた、前記装置。
  7. データセットの相互的なレビューを可能にする命令を格納したコンピュータ可読記録媒体であって、コンピュータによって実行されるとき、前記コンピュータに、
    −前記データセットをレビューするためのユーザリクエストを受信させ(10)、
    −前記データセットから前記データセットの粗いビュー(2)に関する代表値を生成させ(11)、
    −前記データセットから前記データセットの細かいビュー(3)に関する代表値を生成させ(12)、
    −前記データセットの前記粗いビュー(2)及び前記データセットの前記細かいビュー(3)を表示する(13)グラフィックユーザインターフェース(1)を出力させる、前記コンピュータ可読記録媒体。
JP2014108899A 2013-05-27 2014-05-27 データセットの相互的なレビューのための方法及び装置 Pending JP2014229323A (ja)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
EP13305688 2013-05-27
EP13305688.7 2013-05-27
EP13306153.1 2013-08-15
EP13306153.1A EP2838033A1 (en) 2013-08-15 2013-08-15 Method and apparatus for interactive review of a dataset

Publications (1)

Publication Number Publication Date
JP2014229323A true JP2014229323A (ja) 2014-12-08

Family

ID=50721686

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014108899A Pending JP2014229323A (ja) 2013-05-27 2014-05-27 データセットの相互的なレビューのための方法及び装置

Country Status (6)

Country Link
US (1) US20140351685A1 (ja)
EP (1) EP2808809A3 (ja)
JP (1) JP2014229323A (ja)
KR (1) KR20140139421A (ja)
CN (1) CN104182447A (ja)
TW (1) TW201507460A (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2851826A1 (en) * 2013-05-27 2014-11-27 Thomson Licensing Method and apparatus for interactive review of multiple datasets

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060227153A1 (en) * 2005-04-08 2006-10-12 Picsel Research Limited System and method for dynamically zooming and rearranging display items
US7668867B2 (en) * 2006-03-17 2010-02-23 Microsoft Corporation Array-based discovery of media items
US8020100B2 (en) * 2006-12-22 2011-09-13 Apple Inc. Fast creation of video segments
JP4834640B2 (ja) * 2007-09-28 2011-12-14 株式会社東芝 電子機器および画像表示制御方法
EP2485190A1 (en) * 2011-02-04 2012-08-08 Thomson Licensing Adapting the resolution of a graphic representation of metadata

Also Published As

Publication number Publication date
EP2808809A2 (en) 2014-12-03
KR20140139421A (ko) 2014-12-05
EP2808809A3 (en) 2015-02-25
CN104182447A (zh) 2014-12-03
TW201507460A (zh) 2015-02-16
US20140351685A1 (en) 2014-11-27

Similar Documents

Publication Publication Date Title
US8823710B2 (en) Large scale data visualization with interactive chart
US9582612B2 (en) Space constrained ordered list previews
US9418336B2 (en) Automatic recognition and insights of data
US10031928B2 (en) Display, visualization, and management of images based on content analytics
US9535991B2 (en) Video display for displaying a series of representative images for video
US10936472B2 (en) Screen recording preparation method for evaluating software usability
US20120042269A1 (en) System and method for nesting timelines
EP3408752B1 (en) Object management and visualization using a computing device
US8736614B2 (en) Simplified graphical analysis of multiple data series
EP2485190A1 (en) Adapting the resolution of a graphic representation of metadata
US9105036B2 (en) Visualization of user sentiment for product features
US8588587B2 (en) Navigation interface with ghost region
US20130139080A1 (en) Method and apparatus for visualizing a data set
Hürst et al. HiStory: a hierarchical storyboard interface design for video browsing on mobile devices
de Ridder et al. A web-based medical multimedia visualisation interface for personal health records
JP2014229323A (ja) データセットの相互的なレビューのための方法及び装置
EP2838033A1 (en) Method and apparatus for interactive review of a dataset
US20140351736A1 (en) Method and apparatus for interactive review of multiple datasets
US11908493B2 (en) Single clip segmentation of media
EP2840573A1 (en) Method and apparatus for interactive review of multiple Datasets
WO2023037447A1 (ja) 画像処理装置、方法およびプログラム
Zuo et al. Map-based Dashboards versus Storytelling Maps

Legal Events

Date Code Title Description
RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20161202

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20161202