JP2019531561A - 画像処理方法および装置、電子デバイス、ならびにグラフィカルユーザインターフェース - Google Patents

画像処理方法および装置、電子デバイス、ならびにグラフィカルユーザインターフェース Download PDF

Info

Publication number
JP2019531561A
JP2019531561A JP2019521071A JP2019521071A JP2019531561A JP 2019531561 A JP2019531561 A JP 2019531561A JP 2019521071 A JP2019521071 A JP 2019521071A JP 2019521071 A JP2019521071 A JP 2019521071A JP 2019531561 A JP2019531561 A JP 2019531561A
Authority
JP
Japan
Prior art keywords
information
electronic device
information card
card
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2019521071A
Other languages
English (en)
Inventor
▲麗▼薇 黄
▲麗▼薇 黄
震宇 ▲劉▼
震宇 ▲劉▼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Publication of JP2019531561A publication Critical patent/JP2019531561A/ja
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43Querying
    • G06F16/432Query formulation
    • G06F16/434Query formulation using image data, e.g. images, photos, pictures taken by a user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/54Browsing; Visualisation therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/5846Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using extracted text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/10Office automation; Time management
    • G06Q10/109Time management, e.g. calendars, reminders, meetings or time accounting
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering

Abstract

本発明の実施形態は、画像処理技術に関し、詳細には、画像処理方法および装置、電子デバイス、ならびにグラフィカルユーザインターフェースに関する。本画像処理方法は、画像生成命令を受信し、画像生成命令に応答して情報記憶画像を生成するステップであって、情報記憶画像が第1の情報を含む、ステップと、情報記憶画像に基づいて情報カードを生成するステップであって、情報カードが第1の情報内の少なくとも一部の情報を含む、ステップと、電子デバイスのプリセット表示インターフェースに情報カードを表示するステップと、を含む。情報記憶画像内の重要な情報が電子デバイスのプリセット表示インターフェースに表示され、その結果、ユーザによる情報閲覧の利便性が大幅に向上する。

Description

本発明の実施態様は、データ処理技術に関し、詳細には、画像処理技術に関する。
現在、ユーザは、スマートフォンを用いて増加するトランザクションを実行および処理しており、例えば、オンラインショッピングをし、映画のチケットを予約し、インスタントメッセージングソフトウェアを使用することにより友達とチャットや会う約束をする。ユーザが自らにとって有用な情報を記録する必要がある場合、ユーザは、通常、画面上で直接、画面キャプチャを実行する。例えば、約束の時間および場所を友人と合意した後、ユーザは、チャット情報を記録するために、現在のチャット画面で直接、画面キャプチャを実行することができる。一方、ユーザが、日常生活の中で、自らにとって有用な外部情報を見つけた場合、ユーザは、通常、撮影を通じて外部情報を記録する。例えば、ユーザがコンサートの宣伝ポスターを見つけた場合、ユーザは、通常、コンサートの時間や場所などの情報を記録するために、携帯電話を使用してポスターを撮影する。ユーザが情報を使用する必要がある場合は、ユーザは、携帯電話の画像ライブラリで、情報を記録したスクリーンショットまたは写真を直接検索することができる。
しかしながら、スマートフォンは、通常、様々な理由で生成された大量の画像を保存する。画像が増加していく中で、ユーザが特定の画像を見つける必要がある場合、ユーザは、通常、画像ライブラリ全体を検索する必要があり、検索の際に時間および労力を費やす。
本発明の実施態様は、電子デバイスを使用することによって、ユーザによって記録された情報をユーザが閲覧することの利便性を向上させるための、画像処理方法および装置、電子デバイス、ならびにグラフィカルユーザインターフェースを提供する。
第1の態様によれば、本発明の一実施態様は、画像処理方法を提供する。本画像処理方法は、電子デバイスに適用され、
画像生成命令を受信し、画像生成命令に応答して情報記憶画像を生成するステップであって、情報記憶画像が第1の情報を含む、ステップと、
情報記憶画像に基づいて情報カードを生成するステップであって、情報カードが第1の情報内の少なくとも一部の情報を含む、ステップと、
電子デバイスのプリセット表示インターフェースに情報カードを表示するステップと、
を含む。
本発明の本実施態様における本技術的解決策では、電子デバイスは、画像生成命令を受信すると、生成された情報記憶画像に基づいて情報カードを生成し、プリセット表示インターフェースに情報カードを表示し、その結果、ユーザが、電子デバイスのプリセット表示インターフェースを使用して情報記憶画像内の重要な情報を直接見ることができ、画像ライブラリで画像を検索する必要がなくなり、それにより、ユーザによる情報の閲覧の利便性が向上する。
第1の態様の第1の可能な実装では、画像生成命令が、画面キャプチャ命令または撮影命令を含む。
第1の態様または第1の態様の第1の可能な実装に関連して、第2の可能な実装では、情報記憶画像に基づいて情報カードを生成するステップよりも前に、本方法は、
情報カード生成プロンプト情報を表示するステップであって、情報カード生成プロンプト情報が、情報記憶画像に基づいて情報カードの生成が許可されているか否かを問い合わせるために使用される、ステップ
をさらに含む。
電子デバイスを使用することによってユーザが画像を生成する理由はたくさんある。従って、情報カードは、ヒューマン・電子デバイス・インタラクションのインテリジェンスを向上させるために、ユーザの選択に基づいて、ユーザが要求する画像について生成される。
第1の態様または第1の態様の第1および第2の可能な実装のいずれか1つに関連して、第3の可能な実装では、情報記憶画像に基づいて情報カードを生成するステップよりも後に、本方法は、
情報カード編集プロンプト情報を表示するステップであって、情報カード編集プロンプト情報が、
情報カード内の情報がユーザによって編集されることが許可されていること、もしくは
情報カード内の情報が編集可能な状態にあること、
を知らせるために使用される、ステップ、または
ユーザによって入力された情報カード編集命令を受信し、情報カード編集命令に応答して情報カード内の情報を編集可能な状態に設定するステップ
をさらに含み、
電子デバイスのプリセット表示インターフェースに情報カードを表示するステップが、
電子デバイスのプリセット表示インターフェースに編集された情報カードを表示するステップ
を含む。
情報カード内の情報は、ユーザによって編集が許可されており、その結果、ユーザが、ユーザの要件に基づいて情報カード内の情報をさらに修正することができ、それにより、ヒューマン・電子デバイス・インタラクションのインテリジェンスが向上する。
第1の態様または第1の態様の第1から第3の可能な実装のうちのいずれか1つに関連して、第4の可能な実装では、本方法は、
第1の情報が時間情報を含むか否かを判定するステップと、
第1の情報が時間情報を含む場合、第1の情報内の時間情報に基づいてリマインドされるイベントを生成するステップであって、リマインドされるイベントが、電子デバイスのシステム時間が時間情報によって示される時間に達したときまたはその前にリマインダアクションを生成し、リマインダアクションが、振動、画面点灯、プロンプト情報表示、および音を鳴らすことのうちの少なくとも1つのアクションを含む、ステップと、
をさらに含む。
第1の態様の第4の可能な実装に関連して、第5の可能な実装では、第1の情報内の時間情報に基づいてリマインドされるイベントを生成するステップが、
第1の情報内の時間情報が電子デバイスのシステム時間よりも遅いか否かを判定するステップと、
第1の情報内の時間情報によって示される時間が電子デバイスのシステム時間よりも遅い場合、第1の情報内の時間情報に基づいてリマインドされるイベントを生成するステップと、
を含む。
情報記憶画像が時間情報を含む場合、情報カード内のトランザクションを処理することをユーザに適時知らせるために、情報カードが生成されたときにリマインドされるイベントが自動的に作成される。
第1の態様の第4の可能な実装および第5の可能な実装のうちのいずれか1つに関連して、第6の可能な実装では、リマインドされるイベントを生成するステップよりも後に、本方法は、
電子デバイスのシステム時間が第1の情報内の時間情報によって示される時間よりも遅い場合、情報カードを削除するステップ
をさらに含む。
有効期限が切れた情報カードが自動的に削除されて、有効期限が切れた情報カードが電子デバイスのホーム画面ページを占有し続けることを防ぎ、それにより、ヒューマン・電子デバイス・インタラクションのインテリジェンスが向上する。
第1の態様または第1の態様の第1から第6の可能な実装のいずれか1つに関連して、第7の可能な実装では、複数の情報カードが存在する場合、電子デバイスのプリセット表示インターフェースに情報カードを表示するステップが、
プリセット優先度規則に従って、複数の情報カードの中で最も高い優先度を有する情報カードを判定するステップであって、プリセット優先度規則が、重要度による優先度および/または時間による優先度を含む、ステップと、
電子デバイスのプリセット表示インターフェースに最も高い優先度を有する情報カードを表示するステップ、または
最も高い優先度を有する情報カードと別の情報カードを見るための表示ポータルとを電子デバイスのプリセット表示インターフェースに表示するステップと、
を含む。
電子デバイスが複数の情報カードを記憶した場合、最も高い優先度を有する情報カードがプリセット表示インターフェースに表示され、その結果、ユーザは、最も重要な情報を便利に見ることができる。
第1の態様または第1の態様の第1から第7の可能な実装のうちのいずれか1つに関連して、第8の可能な実装では、画像生成命令を受信し、画像生成命令に応答して情報記憶画像を生成するステップよりも前に、本方法は、
情報カード設定命令を受信するステップであって、情報カード設定命令が、情報記憶画像を生成するために、電子デバイス内の第1のアプリケーションのユーザインターフェースで画面キャプチャが行われる場合に、情報記憶画像に基づいて情報カードを生成するように設定するために使用される、ステップ
をさらに含み、
情報記憶画像に基づいて情報カードを生成するステップが、
情報記憶画像が第1のアプリケーションのユーザインターフェースで画面キャプチャを実行することによって生成された画像であるか否かを判定するステップと、
情報記憶画像が第1のアプリケーションのユーザインターフェースで画面キャプチャを実行することによって生成された画像である場合、情報記憶画像に基づいて情報カードを生成するステップと、
を含む。
ユーザの設定に従って、過剰な情報カードが生成されるためにユーザが本当に関心のある情報が隠されることを回避するために、ユーザが関心のあるアプリケーションプログラムに対して情報カード生成プロセスがトリガされ、それにより、ヒューマン・電子デバイス・インタラクションのインテリジェンスが向上する。
第1の態様または第1の態様の第1から第8の可能な実装のいずれか1つに関連して、第9の可能な実装では、プリセット表示インターフェースが、ホーム画面ページ、ロック画面インターフェース、または通知バーインターフェースを含む。
第1の態様または第1の態様の第1から第9の可能な実装のいずれか1つに関連して、第10の可能な実装では、第1の情報が、画像情報、テキスト情報、時間情報、およびハイパーリンク情報のうちの少なくとも1つを含む。
第1の態様または第1の態様の任意の可能な実装に関連して、別の可能な実装では、情報カードがスクリーンショットに基づいて生成される場合、情報カードが起動コントロールをさらに含み、起動コントロールがスクリーンショットに対応するアプリケーションプログラムを起動するために使用される。
ユーザが情報カード上の起動コントロールをタップした場合、スクリーンショットに対応するアプリケーションを直接起動することができる。ユーザは、そのアプリケーションについて電子デバイスの複数のアプリケーションプログラムを調べたり、そのアプリケーションを開いたりする必要がなく、それにより、ヒューマン・電子デバイス・インタラクションのインテリジェンスが向上する。
第2の態様によれば、本発明の一実施態様は、画像処理装置を提供し、本装置は、
画像生成命令を受信するように構成された受信モジュールと、
受信モジュールによって受信された画像生成命令に応答して情報記憶画像を生成し、情報記憶画像に基づいて情報カードを生成し、電子デバイスのプリセット表示インターフェースに情報カードを表示するように表示モジュールに命令するように構成された処理モジュールであって、情報記憶画像が第1の情報を含み、情報カードが第1の情報内の少なくとも一部の情報を含む、処理モジュールと、
電子デバイスのプリセット表示インターフェースに情報カードを表示するように構成された表示モジュールと、
を備える。
本発明の本実施態様における本技術的解決策では、電子デバイスは、画像生成命令を受信すると、生成された情報記憶画像に基づいて情報カードを生成し、プリセット表示インターフェースに情報カードを表示し、その結果、ユーザが、電子デバイスのプリセット表示インターフェースを使用して情報記憶画像内の重要な情報を直接見ることができ、画像ライブラリで画像を検索する必要がなくなり、それにより、ユーザによる情報の閲覧の利便性が向上する。
第2の態様の第1の可能な実装では、画像生成命令が、画面キャプチャ命令または撮影命令を含む。
第2の態様または第2の態様の第1の可能な実装に関連して、第2の可能な実装では、プリセット表示インターフェースが、ホーム画面ページ、ロック画面インターフェース、または通知バーインターフェースを含む。
第3の態様によれば、本発明の一実施態様は、電子デバイスを提供し、電子デバイスは、
画像生成命令を受信するように構成されたタッチ画面と、
受信モジュールによって受信された画像生成命令に応答して情報記憶画像を生成し、情報記憶画像に基づいて情報カードを生成し、電子デバイスのプリセット表示インターフェースに情報カードを表示するようにディスプレイに命令するように構成されたプロセッサであって、情報記憶画像が第1の情報を含み、情報カードが第1の情報内の少なくとも一部の情報を含む、プロセッサと、
電子デバイスのプリセット表示インターフェースに情報カードを表示するように構成されたディスプレイと、
を備える。
本発明の本実施態様における本技術的解決策では、電子デバイスは、画像生成命令を受信すると、生成された情報記憶画像に基づいて情報カードを生成し、プリセット表示インターフェースに情報カードを表示し、その結果、ユーザが、電子デバイスのプリセット表示インターフェースを使用して情報記憶画像内の重要な情報を直接見ることができ、画像ライブラリで画像を検索する必要がなくなり、それにより、ユーザによる情報の閲覧の利便性が向上する。
第3の態様の第1の可能な実装では、画像生成命令が、画面キャプチャ命令または撮影命令を含む。
第3の態様または第3の態様の第1の可能な実装に関連して、第2の可能な実装では、
プロセッサが、情報カード生成プロンプト情報を生成するようにさらに構成され、情報カード生成プロンプト情報が、情報記憶画像に基づいて情報カードの生成が許可されているか否かを問い合わせるために使用され、
ディスプレイが、情報カード生成プロンプト情報を表示するようにさらに構成される。
電子デバイスを使用することによってユーザが画像を生成する理由はたくさんある。従って、情報カードは、ヒューマン・電子デバイス・インタラクションのインテリジェンスを向上させるために、ユーザの選択に基づいて、ユーザが要求する画像について生成される。
第3の態様または第3の態様の第1または第2の可能な実装のいずれか1つに関連して、第3の可能な実装では、
プロセッサが、情報カード編集プロンプト情報を生成するようにさらに構成され、情報カード編集プロンプト情報が、情報カード内の情報がユーザによって編集されることが許可されていることを知らせるために使用され、
ディスプレイが、情報カード編集プロンプト情報を表示するようにさらに構成される。
第3の態様または第3の態様の第1または第2の可能な実装のいずれか1つに関連して、第4の可能な実装では、
プロセッサが、情報カード内の情報を編集可能な状態に設定するようにさらに構成され、
ディスプレイが、編集可能な状態で情報カードを表示するようにさらに構成される。
情報カード内の情報は、ユーザによって編集が許可されており、その結果、ユーザが、ユーザの要件に基づいて情報カード内の情報をさらに修正することができ、それにより、ヒューマン・電子デバイス・インタラクションのインテリジェンスが向上する。
第3の態様または第3の態様の第1から第4の可能な実装のうちのいずれか1つに関連して、第5の可能な実装では、プロセッサが、第1の情報が時間情報を含むか否かを判定し、第1の情報が時間情報を含む場合、第1の情報内の時間情報に基づいてリマインドされるイベントを生成するようにさらに構成され、リマインドされるイベントが、電子デバイスのシステム時間が時間情報によって示される時間に達したときまたはその前にリマインダアクションを生成し、リマインダアクションが、振動、画面点灯、プロンプト情報表示、および音を鳴らすことのうちの少なくとも1つのアクションを含む。
第3の態様または第3の態様の第1から第5の可能な実装に関連して、第6の可能な実装では、プロセッサが、第1の情報内の時間情報が電子デバイスのシステム時間よりも遅いか否かを判定し、第1の情報内の時間情報によって示される時間が電子デバイスのシステム時間よりも遅い場合、第1の情報内の時間情報に基づいてリマインドされるイベントを生成するようにさらに構成される。
情報記憶画像が時間情報を含む場合、情報カード内のトランザクションを処理することをユーザに適時知らせるために、情報カードが生成されたときにリマインドされるイベントが自動的に作成される。
第3の態様の第5の可能な実装および第6の可能な実装のうちのいずれかに関連して、第7の可能な実装では、プロセッサが、電子デバイスのシステム時間が第1の情報内の時間情報によって示される時間よりも遅い場合、情報カードを削除するようにさらに構成される。
有効期限が切れた情報カードが自動的に削除されて、有効期限が切れた情報カードが電子デバイスのホーム画面ページを占有し続けることを防ぎ、それにより、ヒューマン・電子デバイス・インタラクションのインテリジェンスが向上する。
第3の態様または第3の態様の第1から第7の可能な実装のいずれか1つに関連して、第8の可能な実装では、複数の情報カードが存在する場合、
プロセッサが、プリセット優先度規則に従って、複数の情報カードの中で最も高い優先度を有する情報カードを判定し、電子デバイスのプリセット表示インターフェースに最も高い優先度を有する情報カードを表示するようにディスプレイに命令するようにさらに構成され、プリセット優先度規則が、重要度による優先度および/または時間による優先度を含み、
ディスプレイが、最も高い優先度を有する情報カードを電子デバイスのプリセット表示インターフェースに表示するようにさらに構成される。
第3の態様または第3の態様の第1から第7の可能な実装のいずれか1つに関連して、第9の可能な実装では、複数の情報カードが存在する場合、
プロセッサが、プリセット優先度規則に従って、複数の情報カードの中で最も高い優先度を有する情報カードを判定し、最も高い優先度を有する情報カードを電子デバイスのプリセット表示インターフェースに表示するようにディスプレイに命令し、最も高い優先度を有する情報カードと別の情報カードを見るための表示ポータルとを電子デバイスのプリセット表示インターフェースに表示するようにディスプレイに命令するようにさらに構成され、プリセット優先度規則が、重要度による優先度および/または時間による優先度を含み、
ディスプレイが、最も高い優先度を有する情報カードと別の情報カードを見るための表示ポータルとを電子デバイスのプリセット表示インターフェースに表示するようにさらに構成される。
電子デバイスが複数の情報カードを記憶した場合、最も高い優先度を有する情報カードがプリセット表示インターフェースに表示され、その結果、ユーザは、最も重要な情報を便利に見ることができる。
第3の態様または第3の態様の第1から第9の可能な実装のうちのいずれか1つに関連して、第10の可能な実装では、
タッチ画面が、情報カード設定命令を受信するようにさらに構成され、情報カード設定命令が、情報記憶画像を生成するために、電子デバイス内の第1のアプリケーションのユーザインターフェースで画面キャプチャが行われる場合に、情報記憶画像に基づいて情報カードを生成するように設定するために使用され、
プロセッサが、情報記憶画像が第1のアプリケーションのユーザインターフェースで画面キャプチャを実行することによって生成された画像であるか否かを判定し、情報記憶画像が第1のアプリケーションのユーザインターフェースで画面キャプチャを実行することによって生成された画像である場合、情報記憶画像に基づいて情報カードを生成するようにさらに構成される。
ユーザの設定に従って、過剰な情報カードが生成されるためにユーザが本当に関心のある情報が隠されることを回避するために、ユーザが関心のあるアプリケーションプログラムに対して情報カード生成プロセスがトリガされ、それにより、ヒューマン・電子デバイス・インタラクションのインテリジェンスが向上する。
第3の態様または第3の態様の第1から第10の可能な実装のいずれか1つに関連して、第11の可能な実装では、プリセット表示インターフェースが、ホーム画面ページ、ロック画面インターフェース、または通知バーインターフェースを含む。
第3の態様または第3の態様の第1から第11の可能な実装のいずれか1つに関連して、第12の可能な実装では、第1の情報が、画像情報、テキスト情報、時間情報、およびハイパーリンク情報のうちの少なくとも1つを含む。
第3の態様または第3の態様の任意の可能な実装に関連して、別の可能な実装では、情報カードがスクリーンショットに基づいて生成される場合、プロセッサが、起動コントロールを含む情報カードを生成するようにさらに構成され、起動コントロールがスクリーンショットに対応するアプリケーションプログラムを起動するために使用される。
ユーザが情報カード上の起動コントロールをタップした場合、スクリーンショットに対応するアプリケーションを直接起動することができる。ユーザは、そのアプリケーションについて電子デバイスの複数のアプリケーションプログラムを調べたり、そのアプリケーションを開いたりする必要がなく、それにより、ヒューマン・電子デバイス・インタラクションのインテリジェンスが向上する。
第4の態様によれば、本発明の一実施態様は、電子デバイス上のグラフィカルユーザインターフェースを提供する。電子デバイスは、ディスプレイと、1つ以上の入力デバイスと、メモリと、メモリに記憶された1つ以上のプログラムを実行するように構成された1つ以上のプロセッサと、を備え、グラフィカルユーザインターフェースは、
第1の情報を含むユーザインターフェースであって、受信した画面キャプチャ命令に応答して、情報記憶画像を生成するために、第1の情報を含むユーザインターフェースで、画面キャプチャ命令に基づいて画面キャプチャが実行され、情報カードが情報記憶画像に基づいて生成され、情報カードが、第1の情報内の少なくとも一部の情報を含み、情報カードが、プリセット表示インターフェースに表示される、ユーザインターフェース
を含む。
第5の態様によれば、本発明の一実施態様は、電子デバイス上のグラフィカルユーザインターフェースを提供する。電子デバイスが、ディスプレイと、1つ以上のカメラと、1つ以上の入力デバイスと、メモリと、メモリに記憶された1つ以上のプログラムを実行するように構成された1つ以上のプロセッサと、を備え、グラフィカルユーザインターフェースは、
カメラの撮影ユーザインターフェースであって、受信した撮影命令に応答して、撮影命令に基づいて情報記憶画像が生成され、情報記憶画像が第1の情報を含み、情報カードが情報記憶画像に基づいて生成され、情報カードが、第1の情報内の少なくとも一部の情報を含み、情報カードが、プリセット表示インターフェースに表示される、撮影ユーザインターフェース
を含む。
本発明の実施形態における、または従来技術における技術的な解決策をより明確に説明するために、以下、実施形態または従来技術を説明するために必要な添付の図面を簡単に説明する。当然のことながら、以下の説明における添付の図面は、本発明の一部の実施形態を単に示すものであり、当業者は、創造的努力なしに、これらの添付の図面から他の図面をさらに導出することができる。
電子デバイスの概略的な構成図である。 図1Aの電子デバイスのソフトウェアの概略的なアーキテクチャ図である。 ブラウザのユーザインターフェースのスクリーンショットの概略図である。 図2に示すスクリーンショットに基づいて生成された情報カードを示す図である。 本発明の一実施形態による、画像処理方法の概略的な流れ図である。 ショッピングアプリケーションのユーザインターフェース上で画面キャプチャが行われた後に情報カードを生成する概略図である。 スクリーンショットの概略図である。 図6Aのスクリーンショットのレイヤの概略図である。 図6Aに基づいて生成された情報カードの概略図である。 撮影された写真に基づいて情報カードを生成する概略図である。 情報カード生成プロンプト情報の概略図である。 情報カードを編集可能な状態に設定する概略図である。 本発明の一実施形態による、別の画像処理方法の概略的な流れ図である。 本発明の一実施形態による、情報カード表示方法の概略的な流れ図である。 複数の情報カードが表示されている場合のユーザインターフェースの概略図である。 複数の情報カードが表示されている場合の別のユーザインターフェースの概略図である。
以下、本発明の実施形態における添付の図面を参照しながら、本発明の実施形態における技術的な解決策を明確かつ完全に説明する。当然のことながら、説明される実施形態は、単に本発明の実施形態の一部に過ぎず、すべてではない。本発明の実施形態に基づいて、当業者によって創造的努力なしに得られるすべての他の実施形態は、本発明の保護範囲内に含まれるものとする。
図1Aは、電子デバイスの概略的な構成図である。電子デバイス100は、無線周波数(Radio Frequency、RF)回路1110、メモリ1120、入力ユニット1130、表示ユニット1140、カメラ1150、可聴周波数回路1160、ワイヤレスフィデリティ(wireless fidelity、WiFi)モジュール1170、プロセッサ1180、および電源1190などの構成要素を備える。これらの構成要素は、1つ以上の通信バスまたは信号ケーブルを介して通信を行う。電子デバイス100は、スマートフォン、ハンドヘルドコンピュータ、タブレットコンピュータ、携帯電話、メディアプレーヤ、携帯情報端末(PDA)などを含むがこれらに限定されない、任意の電子デバイスとすることができ、これらの2つ以上の組み合わせをさらに含む。当業者であれば、図1Aに示される装置構成が電子デバイスに対する限定を構成しないことを理解されよう。電子デバイスは、図示のものよりも多くの構成要素またはより少ない構成要素を含んでもよいし、一部の構成要素が組み合わされてもよいし、異なる構成要素の配備が用いられてもよい。
以下、図1Aを参照しながら電子デバイス100の各構成要素について具体的に説明する。
RF回路1110は、情報の受信および送信プロセスまたは呼プロセスにおいて信号を受信および送信するように構成され得る。特に、RF回路1110は、基地局からの下りリンク情報を受信し、次いで、処理のために下りリンク情報をプロセッサ1180に配信し、追加的に、上りリンクデータを基地局に送信する。一般に、RF回路は、アンテナ、少なくとも1つの増幅器、送受信機、カプラ、低雑音増幅器(Low Noise Amplifier、LNA)、デュプレクサなどを含むが、これらに限定されない。加えて、RF回路1110はまた、無線通信を通じてネットワークおよび別のデバイスと通信することができる。無線通信では任意の通信規格またはプロトコルを使用でき、汎欧州デジタル移動電話方式(Global System of Mobile communication、GSM(登録商標))、汎用パケット無線サービス(General Packet Radio Service、GPRS)、符号分割多元接続(Code Division Multiple Access、CDMA)、広帯域符号分割多元接続(Wideband Code Division Multiple Access、WCDMA(登録商標))、ロングタームエボリューション(Long Term Evolution、LTE)、電子メール、ショートメッセージングサービス(Short Messaging Service、SMS)などを含むがこれらに限定されない。
メモリ1120は、ソフトウェアプログラムおよびモジュールを記憶するように構成することができる。プロセッサ1180は、電子デバイスの各種機能アプリケーションを実行し、データ処理を実行するために、メモリ1120に記憶されたソフトウェアプログラムおよびモジュールを実行する。メモリ1120は、プログラム記憶領域とデータ記憶領域とを主に含むことができる。プログラム記憶領域には、オペレーティングシステム、少なくとも1つの機能(音声再生機能、画像再生機能など)に必要なアプリケーションプログラムなどが記憶されていてもよい。データ記憶領域には、電子デバイスの使用などに基づいて作成されたデータ(画像、ビデオデータ、音声データ、および電話帳など)が記憶されていてもよい。加えて、メモリ1120は、高速ランダムアクセスメモリを含むことができ、少なくとも1つの磁気ディスク記憶装置、フラッシュ記憶装置などの不揮発性メモリ、または別の揮発性ソリッドステート記憶装置をさらに含むことができる。
入力ユニット1130は、入力ジェスチャ情報または数字もしくは文字情報を受信し、ユーザ設定および電子デバイス100の機能コントロールに関連するキー信号入力を生成するように構成され得る。例えば、入力ユニット1130は、ユーザによって入力された画面キャプチャ指示情報を受信し、画面キャプチャ指示情報に応答して現在の画面上で画面キャプチャを実行する。具体的には、入力ユニット1130は、タッチ画面1131と別の入力デバイス1132とを備えてもよい。タッチ画面1131は、タッチ画面1131上または付近でのユーザのタッチコントロール操作(例えば、ユーザが指またはスタイラスなどの任意の適切な物体または付属品を使用してタッチ画面1131上または付近で行った操作)を収集し、プリセットプログラムに従って対応する接続装置を駆動してもよい。具体的には、タッチコントロール操作は、以下の操作方式、例えば、押下操作、タッチ操作(スライド操作またはドラッグ操作など)、タップ操作、マルチタッチポイント操作、ボタン入力、およびタッチアンドホールド入力のうちの1つ以上を含むことができる。タッチ画面1131に加えて、入力ユニット1130は、別の入力デバイス1132をさらに備え得る。具体的には、別の入力デバイス1132は、物理キーボード、物理機能ボタン(音量調節ボタンまたはスイッチボタンなど)、トラックボール、マウス、およびジョイスティックのうちの1つ以上を含み得るがこれらに限定されない。
表示ユニット1140は、ユーザが入力した情報またはユーザのために提供された情報と、電子デバイスの様々なメニューと、を表示するように構成され得る。表示ユニット1140は、ディスプレイ1141を備え得る。場合により、ディスプレイ1141は、液晶ディスプレイ(Liquid Crystal Display、LCD)、有機発光ダイオード(Organic Light−Emitting Diode、OLED)などの形態で構成され得る。さらに、タッチ画面1131は、ディスプレイ1141を覆っていてもよい。タッチ画面1131上または付近でタッチ操作を検出した後、タッチ画面1131は、タッチイベントの種類を判定するために、タッチ操作をプロセッサ1180に転送する。その後、プロセッサ1180は、タッチイベントの種類に基づいてディスプレイ1141上に対応する視覚的出力を提供する。図1Aでは、タッチ画面1131とディスプレイ1141とは、電子デバイスの入出力機能を実装するために2つの別々の部分として使用されているが、一部の実施形態では、電子デバイスの入出力機能を実装するために、タッチ画面1131とディスプレイ1141とが一体化されてもよい。
電子デバイスは、少なくとも1つのカメラ1150をさらに備え得る。電子デバイスは、1つ以上のI/Oポートに接続されたカメラ1150を使用することによって静止画像または動画像をキャプチャし記録することができる。カメラ1150を用いて撮影された静止画像は、画像フォーマットでメモリ1120に記憶される。カメラ1150を用いて撮影された動画像は、ビデオフォーマットでメモリ1120に記憶される。次に、静止画像は、画像閲覧アプリケーション(例えば、画像ライブラリアプリケーション)を使用することにより、ユーザによって閲覧され、さらに編集され、別のユーザに転送され得る。ビデオ閲覧アプリケーションを使用することによって、ユーザによって、動画像が閲覧などされ得る。
可聴周波数回路1160、スピーカ1161、およびマイクロフォン1162は、ユーザと電子デバイスとの間の音声インターフェースを提供することができる。可聴周波数回路1160は、受信した音声データを電気信号に変換し、電気信号をスピーカ1161に送信する。スピーカ1161は、電気信号を、出力のための音声信号に変換する。一方、マイクロフォン1162は、集音した音声信号を電気信号に変換する。可聴周波数回路1160は、電気信号を受信し、電気信号を音声データに変換し、音声データを処理のためにプロセッサ1180に出力する。次いで、プロセッサ180は、音声データを、例えばRF回路1110を使用することによって別の電子デバイスに送信する、または音声データをさらなる処理のためにメモリ1120に出力する。
WiFiは、近距離無線伝送技術に属する。電子デバイスは、WiFiモジュール1170を使用することによって、ユーザが、電子メールを送受信すること、ウェブページを閲覧すること、ストリーミングメディアにアクセスすることなどを助け得る。WiFiモジュール1170は、ユーザに無線ブロードバンドインターネットアクセスを提供する。図7はWiFiモジュール1170を示しているが、WiFiモジュール1170は電子デバイスの必須の構成要素ではなく、必要な場合、本発明の本質の範囲が変わらない限りにおいてWiFiモジュール1170は省略されてもよいことが理解されよう。
プロセッサ1180は、電子デバイスの制御の中心であり、様々なインターフェースおよび配線を用いて電子デバイス全体の各構成要素と接続する。メモリ1120に記憶されたソフトウェアプログラムおよび/またはモジュールを稼働または実行し、メモリ1120に記憶されたデータを呼び出すことによって、プロセッサ180は、電子デバイスの様々な機能を実行し、データを処理し、それにより、電子デバイスの監視全体を実行する。場合により、プロセッサ1180は、1つ以上の処理ユニットを含み得る。好ましくは、プロセッサ1180は、アプリケーションプロセッサとモデムプロセッサとを一体化することができる。アプリケーションプロセッサは、主に、オペレーティングシステム、ユーザインターフェース、アプリケーションプログラムなどを処理する。モデムプロセッサは、主に、無線通信を処理する。具体的には、プロセッサ1180は、電子デバイスの画像生成および表示などの動作を処理するように構成されたグラフィック処理装置(Graphics Processing Unit、略称「GPU」)をさらに備える。あるいは、モデムプロセッサは、プロセッサ1180に一体化されなくてもよいことが理解されよう。アプリケーションプロセッサとグラフィック処理装置とは、互いに独立したチップに配置されてもよいし、同一のチップに一体化されてもよい。
電子デバイスは、各構成要素に電力を供給する電源1190(例えば、バッテリ)をさらに備える。好ましくは、電源は、電力管理システムを使用することによって充電、放電、および電力消費管理などの機能を実装するために、電力管理システムを使用することによってプロセッサ1180に論理的に接続されてもよい。
図示していないが、電子デバイスは、Bluetooth(登録商標)モジュール、GPSモジュールなどをさらに備えることができ、ここでは詳細を説明しない。
電子デバイスの実行プロセスにおいて、上記のハードウェアに加えて、オペレーティングシステムおよびいくつかのアプリケーションプログラムがハードウェア層の上で実行される。電子デバイスは、オペレーティングシステム内で画像の画像データを処理する。オペレーティングシステムは、iPhone(登録商標)オペレーティングシステム(iPhone Operating System、略称iOS)、アンドロイド(登録商標)(Android)オペレーティングシステム、マイクロソフト(登録商標)(Windows)オペレーティングシステム、シンビアン(登録商標)(Symbian)オペレーティングシステム、またはブラックベリー(登録商標)オペレーティングシステム(Black Berry Operating System)などのオペレーティングシステムであり得る。このことは、本出願において特に限定されない。
図1Bは、図1Aの電子デバイスのソフトウェアの概略的なアーキテクチャ図である。図1Bに示すように、ハードウェア層の上のカーネルライブラリは、オペレーティングシステムの中核部分であり、入出力サービス、カーネルサービス、グラフィックデバイスインターフェース、CPUおよびGPUの画像処理を実装するためのグラフィックエンジン(Graphics Engine)などを含む。グラフィックエンジンは、2次元エンジン、3次元エンジン、シンセサイザ(Composition)、フレームバッファ(Frame Buffer)、埋め込みグラフィックライブラリ(Embedded Graphics Library、略称EGL)などを含むことができる。加えて、オペレーティングシステムは、ドライバ層、フレームワーク層、およびアプリケーション層をさらに含む。ドライバ層は、CPUドライバ、GPUドライバ、ディスプレイコントローラドライバなどを含み得る。フレームワーク層は、グラフィックサービス(Graphic Service)、システムサービス(System service)、ウェブサービス(Web Service)、カスタマーサービス(Customer Service)などを含むことができる。グラフィックサービスは、例えば、ウィジェット(Widget)、キャンバス(Canvas)、ビュー(Views)、およびRender Scriptを含み得る。アプリケーション層は、ランチャー(launcher)、メディアプレーヤ(Media Player)、ブラウザ(Browser)などを含み得る。
電子デバイスによってアプリケーションプログラムまたはウェブページのユーザインターフェースを表示する方法は、アプリケーションプログラムの描画素材またはウェブページのダウンロードされたスタイル情報に基づいて、表示するためのユーザインターフェースを生成することである。
一例として、アプリケーションプログラムの表示プロセスを用いる。電子デバイスにアプリケーションプログラムがインストールされると、その電子デバイスにおいて、そのアプリケーションプログラムのユーザインターフェースを表示するために使用される画像リソースファイルが生成される。画像リソースファイルは、アプリケーションプログラムのプリセット表示インターフェースを生成するために使用される様々な情報、例えば、プリセット表示インターフェースの各層の表示内容、種類、サイズ、および描画素材などの情報を含む。
アプリケーションプログラムが電子デバイスのフォアグラウンドで実行される場合、電子デバイスのCPUおよび/またはGPUは、アプリケーションプログラムのユーザインターフェースを表示するために、以下の手順を実行する。
1.アプリケーションプログラムのものであり、かつ端末に記憶されている、画像リソースファイルを取得する。
2.アプリケーションプログラムのユーザインターフェースの複数のレイヤを生成するために、画像リソースファイル内の情報(描画素材など)に基づいて描画処理を行う。
3.複数のレイヤを1フレームの表示対象画像に合成するために、複数の生成されたレイヤに対してsurfaceflinger処理およびHWC処理を行う。
4.生成された表示対象画像に対してデバイス表示処理を行い、生成された表示対象画像を表示のために電子デバイスの表示ユニットにプッシュする。
一例として、ブラウザにおけるウェブページの表示プロセスがさらに用いられる。電子デバイス内のブラウザがウェブページのアドレスにアクセスすることを要求した場合、電子デバイスは、ウェブページにアクセスするサーバによって返された応答に基づいてウェブページを表示する。図2は、電子デバイスのブラウザに表示されたウェブページの概略図である。一例として図2を用いると、電子デバイスがブラウザを稼働した場合、ブラウザは、発券ウェブサイトのアドレスへのアクセスを要求し、発券ウェブサイトのwebサーバにアクセス要求(例えば、HTTP要求)を送信する。ブラウザのアクセス要求を受信した後、発券ウェブサイトのwebサーバは、応答情報をブラウザに返す。ブラウザは、受信した応答情報に基づいてウェブページのスタイル情報(例えば、HTML、画像、CSSスタイルテーブル、およびJavaScript(登録商標)ファイル)を取得またはキャッシュし、次いで、ウェブページのスタイル情報に基づいて発券ウェブページのページコンテンツを描画し、ブラウザの画像リソースファイルを取得し、ウェブページのユーザインターフェースの複数のレイヤを生成して表示するために、ブラウザの画像リソースファイル内の情報(例えば、描画素材)と発券ウェブページのダウンロードされたページコンテンツとを組み合わせて描画処理を行い、最後に、複数のレイヤを結合し、複数のレイヤをディスプレイに送信する。ブラウザのユーザインターフェースを組み合わせて表示するステップは、アプリケーションプログラムを組み合わせて表示するステップと同様であり、ここでは詳細を繰り返し説明しない。
電子デバイスは、画像を生成するために、1つ以上のI/Oポートに接続された少なくとも1つのカメラ1150を使用することによって静止画像または動画像をキャプチャし記録する。具体的には、カメラは、プリント基板、レンズ、固定具、カラーフィルタ、デジタル信号処理チップ、および感光センサなどの構成要素を備える。カメラによる撮影の動作原理は次のとおりである:レンズを用いて被写体を撮影し、生成された光学像を感光センサに投影し、次いで、光学像を電気信号に変換し、電気信号をアナログ−デジタル変換によりデジタル信号に変換する。デジタル信号は、デジタル信号処理チップによって処理され、次いで、処理のために携帯電話プロセッサに送信され、最後に、携帯電話画面上に見ることができる画像に変換される。
画面キャプチャによって生成された画像と撮影によって生成された画像との両方が電子デバイスのメモリに記憶される。ユーザは、電子デバイス内の画像閲覧および表示アプリケーション(例えば、画像ライブラリ)を用いて画像を閲覧することができる。上記のように、ユーザが記録したい情報を記録するために生成した画像を用いる場合や、ユーザが情報を検索したい場合には、ユーザは、情報を記録するための画像を検索する必要がある。従来の解決策では、ユーザは、通常、画像ライブラリにおいて大量の画像を手動でスライドさせて見る必要がある。画像の生成時間が比較的早いである場合、画像の表示は通常最下位付近に並んでおり、従って、検索は面倒で時間がかかる。従って、本発明の実施形態は、従来技術における、画像に記録されている情報を検索するという不都合の問題を解決するための画像処理方法を提供する。本発明の実施形態の技術的解決策は、例として図2および図3に示される適用シナリオを使用することによって以下に具体的に説明される。
図2は、ブラウザのユーザインターフェースのスクリーンショットの概略図である。電子デバイスの画面が図2に示すブラウザのユーザインターフェースを表示した場合、ユーザは、ユーザインターフェースの情報を記録するために、電子デバイスに画面キャプチャ命令を送信する。画面キャプチャ命令を受信すると、電子デバイスは、画面キャプチャ命令に応答して図2に示すスクリーンショットを生成し、生成されたスクリーンショットに基づいて図3に示す情報カードを自動的に生成する。
図3は、図2に示すスクリーンショットに基づいて生成された情報カードを示している。図3に示すように、情報カードは、図2に示されるスクリーンショット内の重要な情報を含む。情報カードが生成された後、情報カードは、電子デバイスのホーム画面ページのうちの1つに表示されてもよく、それにより、ユーザは、電子デバイスのロックを解除した時点で情報カードを直接見ることができる。従って、ユーザは、スクリーンショットに記録されている重要な情報を便利に見ることができ、画像ライブラリでオリジナルのスクリーンショットを検索する必要がない。当然のことながら、情報カードは、代替的に、別の表示インターフェース、例えば電子デバイスのロック画面インターフェースまたは通知バーインターフェースに表示されてもよい。電子デバイスにおける情報カードのプリセット表示インターフェースは、本明細書では特に限定されない。
本発明の技術的解決策は、複数の実施形態を使用することによって以下に具体的に説明される。まず、以下の実施形態で用いられる表現および用語について説明する。
本発明の実施形態において、「第1」および「第2」などの序数詞が言及されるとき、序数詞は、文脈に基づいて順序を実際に示しているのでない限り、区別のためにのみ使用されると理解されたい。例えば、「第1のページ」および「第2のページ」は両方とも電子デバイス内のページを表すが、電子デバイスにおける複数のページのうちの異なるページを別々に表す。
本発明の一部の実施形態において「画像生成命令」が言及されるとき、画像生成命令は、電子デバイスに画像を生成するように命令するためにユーザによって入力された命令である。画像生成命令は、画面キャプチャ命令、撮影命令、画像受信命令、および画像ダウンロード命令のうちの1つ以上を含むが、これらに限定されない。プリセットジェスチャ、プリセット音声、タッチアンドホールド、タッチなどを含むがこれらに限定されない、複数の種類の画像生成命令も存在する。ユーザが電子デバイスを用いて画像生成命令を入力すると、電子デバイスは、画像生成命令に基づいて情報記憶画像を生成する。例えば、電子デバイスがアプリケーションプログラムを実行し、アプリケーションプログラムのユーザインターフェースをフォアグラウンドで表示するとき、ユーザは、電子デバイスのタッチ画面または物理ボタンを使用して画面キャプチャ命令を入力する。電子デバイスは、ユーザによって入力された画面キャプチャ命令を受信し、画面キャプチャ命令に応答して、スクリーンショットを生成するために、電子デバイスの表示画面に表示された現在のユーザインターフェース上で画面キャプチャを実行する。別の例では、ユーザは電子デバイスのカメラを有効にし、電子デバイスのタッチ画面または物理ボタンを使用して撮影命令を入力する。電子デバイスは、ユーザによって入力された撮影命令を受信し、その撮影命令に応答して現在の被写体を撮影し、写真を生成する。
本発明の一部の実施形態において「情報記憶画像」が言及されるとき、情報記憶画像は、ユーザによって入力された画像生成命令に応答して電子デバイスによって生成された画像である。例えば、画像生成命令が画面キャプチャ命令である場合、情報記憶画像は、電子デバイスに表示されている現在のユーザインターフェース上で画面キャプチャを実行することによって生成されたスクリーンショットである。画面キャプチャ命令に基づいて生成された画像は、電子デバイスに表示されている現在のユーザインターフェース全体であってもよいし、電子デバイスに表示されている現在のユーザインターフェースの一部であってもよい。画像生成命令が撮影命令である場合、情報記憶画像は、撮影命令に応答して電子デバイスによって撮影された写真である。画像生成命令が画像ダウンロード命令である場合、情報記憶画像は、画像受信命令に応答して電子デバイスによってダウンロードされた画像である。
本発明の一部の実施形態において「第1の情報」が言及されるとき、第1の情報は情報記憶画像に表示される情報である。具体的には、第1の情報は、画像中の画像情報、テキスト情報、時間情報、ハイパーリンク情報などを含む。一例として図2を用いると、電子デバイスがスクリーンショットを生成するために図2に示すユーザインターフェース上で画面キャプチャを実行した後、スクリーンショットは、「印象派モネ」のポスター画像、美術展「印象派モネ」のテキスト記述情報、および複数のアイコンを含んでいる。スクリーンショットに示される第1の情報は、「印象派モネ」のポスター画像、美術展「印象派モネ」のテキスト記述情報などを含む。
本発明の一部の実施形態において「情報カード」が言及されるとき、情報カードは、情報記憶画像内の一部の情報またはすべての情報を表示するために使用されるユーザインターフェースである。一実施形態では、情報カードの表示サイズは、電子デバイスの表示画面のサイズよりも小さい。図3に示すように、電子デバイスが情報カードを表示した場合、電子デバイスの表示画面上の領域の一部分に情報カードが表示される。一実施形態では、情報カードは、情報記憶画像内の一部の情報のみを表示する。例えば、情報記憶画像内の第1の情報が複数の画像または複数のテキストセグメントを含む場合、情報記憶画像に基づいて生成された情報カードは、ユーザが関心のある情報記憶画像内の画像およびテキストのみを含む。
本発明の一部の実施形態において「プリセット表示インターフェース」が言及されるとき、プリセット表示インターフェースは、電子デバイスのホーム画面ページ、ロック画面インターフェース、もしくは通知バーインターフェース、電子デバイスのプリセットアプリケーションのユーザインターフェースなどであり得る。場合により、プリセット表示インターフェースは、電子デバイスの出荷時にプリセットされてもよいし、ユーザによって設定されてもよい。場合により、電子デバイス上の情報カードのプリセット表示インターフェースは、ユーザによって設定または変更されてもよい。例えば、情報カードは、ホーム画面ページに表示されるようにプリセットされており、ユーザは、情報カードのプリセット表示インターフェースをロック画面インターフェースに変更するように設定することができる。
ホーム画面ページは、電子デバイスがロック解除された後に表示されるページである。電子デバイスのホーム画面ページには、アプリケーションプログラムのコントロールアイコン、メニューアイコンなどが含まれる。電子デバイスは、1つ以上のホーム画面ページを有することができ、電子デバイスのホーム画面ページの数は、コントロールアイコンの数が増えるにつれて自動的に増やされてもよい。当然のことながら、電子デバイスは、ユーザの入力命令に基づいて、ホーム画面ページをさらに追加または削除してもよい。情報カードは、複数のホーム画面ページのうちのいずれか1つに表示されてもよい。例えば、電子デバイスは3つのホーム画面ページ(画面ページ1、画面ページ2、および画面ページ3)を含み、電子デバイスはロック解除された後にホーム画面ページ2に入る。ユーザがタッチ画面を用いて左方向にスライドするアクションを入力すると、電子デバイスは左方向にスライドするアクションに応答して現在表示されているページ2をページ1に切り替える。ユーザがタッチ画面を用いて右方向にスライドするアクションを入力すると、電子デバイスは右方向にスライドするアクションに応答して現在表示されているページ2をページ3に切り替える。情報カードは、ホーム画面ページ2に配置されていてもよいし、ホーム画面ページ1またはホーム画面ページ3に配置されていてもよい。情報カードがホーム画面ページ2にある場合、かつ電子デバイスがロック解除された後に、ユーザは情報カードを見ることができる。情報カードがホーム画面ページ1または3にある場合、かつ電子デバイスのロックが解除された後に、ユーザは最初にページ2を見て、情報カードを見るために左にスライドするアクションまたは右にスライドするアクションを実行する必要がある。
ロック画面インターフェースは、電子デバイスがロックされた後、かつ電子デバイスの表示画面が点灯した場合に表示されるユーザインターフェースである。ロック画面インターフェースは、複数のメニューコントロール(例えば、ロック解除モジュールおよび時計)またはアプリケーションプログラムのコントロールアイコン(例えば、音楽アプリケーションプログラムのスイッチコントロール)を含む。1つ以上のロック画面インターフェースがある場合がある。例えば、電子デバイスは、3つのロック画面インターフェース(換言すれば、ロック画面インターフェース1、ロック画面インターフェース2、およびロック画面インターフェース3)を含む。電子デバイスの表示画面は、点灯時にロック画面インターフェース2を表示する。電子デバイスの表示画面のロック状態が維持されている場合、かつユーザがタッチ画面を使用して左にスライドするアクションを入力した場合、電子デバイスは、左にスライドするアクションに応答して現在表示されているロック画面インターフェース2をロック画面インターフェース1に切り替える。ユーザがタッチ画面を用いて右方向にスライドするアクションを入力すると、電子デバイスは右方向にスライドするアクションに応答して現在表示されているロック画面インターフェース2をロック画面インターフェース3に切り替える。
通知バーインターフェースは、通知バーを開いた後に表示されるユーザインターフェースである。通知バーのユーザインターフェースは、アプリケーションプログラムの通知メッセージ、システム時間、および日付などの情報を表示するために使用される。通知バーは、電子デバイスのホーム画面ページの上部または下部に配置することができる。通知バーは、折り畳まれた状態にプリセットされている、すなわち、電子デバイスのホーム画面ページの上部または下部には一部の情報のみが表示されている。ユーザは、通知バーのユーザインターフェースを開くために、タッチ画面を使用することによって折り畳まれた状態の通知バーに接触し続け、下方向に引っ張るアクションまたは垂直方向に上方向にスライドするアクションを実行する。通知バーのインターフェースが開かれた場合、情報カードは、通知バーの開かれたユーザインターフェースに直接表示されてもよい、すなわち、情報カードは、通知メッセージなどと共に通知バーの開かれたユーザインターフェースに表示される。あるいは、情報カードの表示ポータルのみが通知バーのユーザインターフェースに表示される、すなわち、情報カードの表示ポータルが通知メッセージと共に通知バーの開かれたユーザインターフェースに表示される。完全な情報カードは、ユーザが情報カードの表示ポータルをタップしたときにのみ表示される。
プリセットアプリケーションのユーザインターフェースの一例は以下のとおりである。例えば、情報カードは、カレンダーアプリケーションのホームページに表示されてもよい。すなわち、ユーザがカレンダーアプリケーションを開いた後、情報カードはカレンダーアプリケーションのホームページのユーザインターフェースに表示される。
以下、具体的な実施形態を用いて、本発明の技術的解決策を詳細に説明する。以下の具体的な実施形態は、相互に組み合わせてよく、一部の実施形態では、同じまたは類似の概念または処理を繰り返し説明しない場合がある。
図4は、本発明の一実施形態による、画像処理方法の概略的な流れ図である。図4に示すように、方法手順は、電子デバイスによって実行される。プロセスの方法ステップは、順次または並行して実行されてもよく、さらに多いまたは少ない方法ステップが含まれてもよい。方法手順は、以下のステップを含む。
S101:画像生成命令を受信し、画像生成命令に応答して情報記憶画像を生成する。
情報記憶画像は、第1の情報を含む。第1の情報は、情報記憶画像内のテキスト、時間、画像、コントロール、およびハイパーリンクなどの情報である。
S102:情報記憶画像に基づいて情報カードを生成する。
情報カードは、情報記憶画像の第1の情報内の少なくとも一部の情報を含む。
S103:電子デバイスのプリセット表示インターフェースに情報カードを表示する。
一例として画面キャプチャおよび撮影を使用することによって、図4に示される技術的解決策を以下に個別に具体的に説明する。
まず、画面キャプチャによって情報記憶画像を生成する。
図5は、ショッピングアプリケーションのユーザインターフェース上で画面キャプチャが行われた後に情報カードを生成する概略図である。図5に示すように、ユーザは電子デバイスを用いてショッピングアプリケーションを実行する。ショッピングアプリケーションは複数の商品を含む。各商品を呈示する際に、ショッピングアプリケーションは、商品に関する、複数の種類の情報を含むユーザインターフェースを表示する。ユーザが、ショッピングアプリケーションを使用して商品を閲覧しているときに、関心のある革製バッグを見つけた場合、ユーザは、革製バッグのユーザインターフェース上で革製バッグの価格、サイズ、および画像などの第1の情報を見ることができる。
ユーザは革製バッグに関する情報を記録したいと考えている。従って、ユーザは、現在の画面インターフェース(革製バッグを呈示するためのショッピングアプリケーションのユーザインターフェース)上で画面キャプチャを実行するように電子デバイスをトリガするために、画面キャプチャ命令を入力する。画面キャプチャ命令は、タッチ画面をタッチしたままにする、指の関節でタッチ画面に接触する、プリセットジェスチャを使用してタッチ画面に触れる(例えば、連続的に軽く叩く、または手のひらの側面を使用して、タッチ画面の一方の側に触れ、タッチ画面の反対側までスライドし続ける)、プリセット物理ボタン(撮影ボタンまたは音量ボタンなど)もしくは仮想機能ボタンを押す、プリセット音声命令を入力するなどを含むがこれらに限定されない。
ユーザによって入力された画面キャプチャ命令に応答して、現在の画面に表示されたユーザインターフェース上で画面キャプチャを実行した後、電子デバイスはスクリーンショットを生成する。スクリーンショットは、革製バッグの価格、サイズ、画像、および名前などの情報を含む。
スクリーンショットが生成された後、革製バッグの重要な情報を含む情報カードを生成するために、電子デバイスは自動的にスクリーンショットを処理する。図5に示すように、情報カードは、革製バッグの画像、名前、および価格などの情報が含まれており、革製バッグのサイズなどの情報は省略されている。情報カードは、生成された後、電子デバイスのホーム画面ページに自動的に表示される。ユーザは、ホーム画面ページ上で生成された情報カードを直接見ることができ、画像ライブラリでスクリーンショットを検索したり、革製バッグを再び調べるためにショッピングアプリケーションを開いたりする必要がない。
受信した画像生成命令が画面キャプチャ命令である場合、別の実施形態では、ユーザは、画面キャプチャがユーザによって指定されたアプリケーションプログラムのユーザインターフェース上で実行され、スクリーンショットが生成されるときにのみ、図4に示す方法手順が、情報カードを生成するためにトリガされると設定できる。例えば、スクリーンショットを生成するためにショッピングアプリケーションのユーザインターフェース上で画面キャプチャが実行されたときにのみ、情報カードを生成するために図4に示される方法手順がトリガされる。
具体的には、ユーザは、電子デバイスにおいて情報カード設定命令を事前に入力する。電子デバイスは、情報カード設定命令を受信してこれに応答し、その結果、電子デバイス内の第1のアプリケーションのユーザインターフェース上で画面キャプチャが行われ、情報記憶画像が生成されると、情報記憶画像に基づいて情報カードが生成される。すなわち、電子デバイスが第1のアプリケーションを実行し、第1のアプリケーションのユーザインターフェースを表示するとき、電子デバイスがユーザによって入力された画面キャプチャ命令を受信すると、電子デバイスは、情報記憶画像を生成するために、画面キャプチャ命令に基づいて第1のアプリケーションの現在のユーザインターフェースで画面キャプチャを実行し、情報記憶画像に基づいて情報カードを生成する。電子デバイスが別のアプリケーションを実行してユーザインターフェースを表示するとき、電子デバイスがユーザによって入力された画面キャプチャ命令を受信すると、電子デバイスは、現在のユーザインターフェースで画面キャプチャを実行するが、図4に示す方法手順をトリガしない、つまり、情報カードは生成されない。ユーザは、電子デバイス内の複数のアプリケーションプログラムから1つ以上のアプリケーションプログラムを第1のアプリケーションとして選択することができる。例えば、ユーザは、電子デバイスにおいてショッピングアプリケーション、インスタントチャットアプリケーション、または発券アプリケーションにおける1つ以上のアプリケーションプログラムを第1のアプリケーションとして設定してもよい。
ユーザが設定を完了し、電子デバイスがユーザによって入力された画面キャプチャ命令を受信して情報記憶画像を生成した後、電子デバイスは、第1のアプリケーションのユーザインターフェース上で画面キャプチャを実行することによって情報記憶画像が生成されたか否かを判定する。第1のアプリケーションのユーザインターフェース上で画面キャプチャを実行することによって情報記憶画像が生成された場合、電子デバイスは、情報記憶画像に基づいて情報カードを生成する。電子デバイスによって、第1のアプリケーションのユーザインターフェース上で画面キャプチャを実行することによって情報記憶画像が生成されたか否かを判定するための複数の方法があり、具体的な判定方法はここでは限定されない。例えば、画面キャプチャ命令を受信すると、電子デバイスは、オペレーティングシステムのフォアグラウンドで現在実行されているアプリケーションプログラムが、ユーザによって設定された第1のアプリケーションに属するか否かを判定する。オペレーティングシステムのフォアグラウンドで現在実行されているアプリケーションプログラムが、ユーザによって設定された第1のアプリケーションである場合、情報カードが生成される。オペレーティングシステムのフォアグラウンドで現在実行されているアプリケーションプログラムが、ユーザによって設定された第1のアプリケーションではない場合、情報カードは生成されず、スクリーンショットのみが生成されて電子デバイスに記憶される。
ユーザによって電子デバイスのユーザインターフェース上で画面キャプチャを実行することには複数の理由がある。ユーザは、何らかの特定のアプリケーションプログラムで画面キャプチャが行われたときにのみ情報カード生成動作がトリガされるように事前に設定し、それによって、ユーザが必要としない情報カードが生成されることを防止し、それにより、ヒューマン・電子デバイス・インタラクションのインテリジェンスが向上する。
情報カードを生成するために、電子デバイスによるスクリーンショットを自動的に処理するための複数の方法が存在し、具体的な処理方法はここでは限定されない。一例を用いて処理プロセスを説明する。
図6Aは、スクリーンショットの概略図である。図6Bは、図6Aのスクリーンショットのレイヤの概略図である。図6Cは、図6Aに基づいて生成された情報カードの概略図である。図6Aに示すように、電子デバイスに現在表示されているユーザインターフェースは、電子デバイスにおける発券アプリケーションのユーザインターフェースである。ユーザインターフェースは、映画「アングリーバード(Angry birds)」の発券情報を呈示している。発券情報には、テキスト情報、時間情報、機能ボタン、画像情報などが含まれる。テキスト情報には、上映時間が「97分」、映画のジャンルが「アニメ/アクション/コメディ(cartoon/action/comedy)」、あらすじ紹介(introduction)などの内容が含まれている。時間情報には、公開時が「2016年5月20日」であることが含まれている。機能ボタンには、「見たい(I want to watch)」、「採点したい(I want to score)」、および「チケットの確認/購入(Check/Buy tickets)」が含まれている。ユーザが機能ボタンをタップした後、機能ボタンに対応するプリセット機能が実行される。例えば、機能ボタン「チケットの確認/購入」がタップされた後、映画のチケットを購入するためのユーザインターフェースが表示される。画像情報は、図6Aの左上隅に示されるように、映画「アングリーバード」の宣伝ポスターを含んでいる。
図6Aに示すスクリーンショットが生成される前に、電子デバイスは、スクリーンショットに対応するユーザインターフェースを生成している、すなわち、電子デバイスは、発券アプリケーションにおいて映画「アングリーバード」の発券ユーザインターフェースを生成して表示している。従って、電子デバイスがユーザインターフェース上で画面キャプチャを実行するとき、電子デバイスは、図6Aに示されるスクリーンショットの各レイヤのビューレイアウト(view layout)を自動的に取得し、スキャンを通じて、図6Aに示すスクリーンショットのビュー(view)の内容を取得することができる。例えば、アンドロイド(登録商標)システムでは、アンドロイド(登録商標)オペレーティングシステムで提供されるViewGroup.getChildAt()メソッドを利用して、(親レイヤから子レイヤへの)レイヤのレイアウトをスキャンすることができる。異なるビューは異なるコントロールタイプに対応する。図6Aに示すスクリーンショットのテキストビュー(TextView)コントロールおよびイメージビュー(ImageView)コントロールが得られる。図6Bに示すように、TextViewコントロールの内容は、発券アプリケーションにおける映画「アングリーバード」の発券ユーザインターフェースに関するテキスト情報でありImageViewコントロールの内容は、発見アプリケーションにおける映画「アングリーバード」の発券ユーザインターフェースに関する画像情報である。
スクリーンショットのテキスト情報および画像情報が取得された後、情報カードを生成するのに必要なテキストおよび画像が予め定義された抽出規則に従って選択される。例として、いくつかの予め定義された抽出規則を以下に説明する。しかしながら、複数の予め定義された抽出規則が存在し、これは本出願において特に限定されない。
テキスト情報については、複数のTextViewコントロールが存在する場合、TextViewコントロール内のテキストのワードサイズおよびフォントの太さに基づいて複数のTextViewコントロールをソートするように、予め定義された抽出規則が設定され得る。次いで、最大のワードサイズおよび最も太いフォントを有するTextViewコントロール内のテキストが、情報カードに表示されるテキストとして選択される。場合により、最大のワードサイズおよび最も太いフォントを有するTextViewコントロール内のテキスト、または唯一のTextViewコントロール内のテキストについて、TextViewコントロール内のテキストのキーワード情報が、情報カードに表示されるテキストとして意味解析技術に基づいてさらに抽出される。
あるいは、複数のTextViewコントロールが存在する場合、プリセットキーワードを有するTextViewコントロールを抽出するために、TextViewコントロール内のテキストの内容が意味解析技術に基づいて解析される。次いで、プリセットキーワードを有するTextViewコントロール内のテキストが、情報カードに表示されるテキストとして使用される。プリセットキーワードは、電子デバイスの出荷前に設定されてもよいし、ユーザによって設定されてもよい。プリセットキーワードは、時間、価格などを含み得るが、これらに限定されない。
画像情報については、1つのImageViewコントロールしかない場合、情報カードに表示される画像としてImageViewコントロール内の画像を取得するように、または複数のImageViewコントロールが存在する場合、情報カードに表示される画像として、最大の画像サイズ/画素を有するImageViewコントロール内の画像を取得するように、予め定義された抽出規則が設定され得る。
情報カードを生成するために、TextViewコントロール内の選択されたテキストとImageViewコントロール内の選択された画像とが組み合わされ、その情報カードが電子デバイスのホーム画面ページに表示される。
図6Aに示すスクリーンショットで重要な情報を取得した後、電子デバイスは、図6Cに示す情報カードを生成し、その情報カードを電子デバイスのホーム画面ページ、ロック画面インターフェース、または通知バーインターフェースなどのプリセット表示インターフェースに表示する。
場合により、スクリーンショットのファイル属性情報が、プリセット規則に従ってスクリーンショットからさらに選択され得る。例えば、ファイル属性情報は、スクリーンショットの生成時間と、スクリーンショットに対応するアプリケーションプログラムと、を含む。
別の実施形態では、情報カードがスクリーンショットに基づいて生成される場合、情報カードは起動コントロールをさらに含む。起動コントロールは、スクリーンショットに対応するアプリケーションプログラムを起動するために使用される。例えば、図6Cに示す情報カードは、「BUY TICKETS」という起動コントロールをさらに含む。ユーザがコントロールをタップすると、電子デバイスは、図6Aに示すスクリーンショットに対応する発券アプリケーションを直接起動する。ユーザは、電子デバイスの複数のアプリケーションプログラムで発見アプリケーションを検索したり、発見アプリケーションを開いたり、映画「アングリーバード」の発券ページを再度調べたりする必要がなく、それにより、ヒューマン・電子デバイス・インタラクションのインテリジェンスが向上する。
第2に、情報記憶画像が撮影により生成される。
図7は、撮影された写真に基づいて情報カードを生成する概略図である。図7に示すように、ユーザはショッピング中に歌手のコンサートの宣伝ポスターを見ており、ユーザは、コンサートの時間、場所、および価格などの情報を記録したいと考えている。従って、ユーザは、写真を生成するために携帯電話を用いて宣伝ポスターを直接撮影し、その写真を携帯電話に保存する。撮影により生成された写真が情報記憶画像である。
撮影によって生成された画像やネットワークからダウンロードされた画像については、まずその画像に対して前処理(例えば、画像補正やノイズ除去)が行われる。次いで、画像テキスト認識技術(例えば、光学文字認識(Optical Character Recognition、略称OCR))を用いて、画像内のテキストが認識され、画像認識技術を用いて、画像内の人物、風景、または物体などの画像が認識される。画像内のテキストは、テキストの色が通常純粋な色であり、サイズが基本的に均一であり、背景色と比較して比較的強いコントラストがあり、強いエッジの長方形の枠があるなどの特徴を有する。画像(例えば、人物、物体、または風景)は、領域性があり、画像内の全領域が占有されている、などであることを特徴とする。画像におけるテキスト認識方法および画像認識方法は従来技術である。具体的な認識方法については、米国特許第7062073号を参照されたい。このことは、本明細書において限定されない。
図7に示すように、図7のOCR技術を用いて認識されるテキスト情報は、「公演時間」、「公演場所」、「入場料」、および画像中で顔認識技術を用いて認識される歌手を含む。
画像内のテキスト情報および画像が取得された後、情報カードを生成するのに必要なテキストおよび画像が予め定義された抽出規則に従って選択される。例として、いくつかの予め定義された抽出規則を以下に説明する。しかしながら、複数の予め定義された抽出規則が存在し、これは本出願において特に限定されない。
画像から分割され認識されるテキスト情報については、予め定義された抽出規則は、情報カードに表示されるテキストとして、最大のワードサイズおよび最も太いフォントを有するテキストを抽出するように設定されてもよいし、情報カードに表示されるテキストとして、プリセットキーワード(例えば、時間キーワードまたは場所キーワード)を含むテキストを用いるように設定されてもよい。
画像から分割され認識される画像情報については、予め定義された抽出規則は、情報カードに表示される画像として、文字画像を抽出するように設定されてもよい。あるいは、予め定義された抽出規則は、情報カードに表示される画像として、画像全体のサムネイルを使用するように設定されてもよい。
場合により、写真を生成するプロセスにおいて、電子デバイスは写真のファイル属性情報を記録する。例えば、写真が電子デバイスによって撮影されている場合、ファイル属性情報は、写真の生成時間、写真の撮影場所情報などを含む。予め定義された抽出規則は、写真の生成時間を抽出するように設定されてもよい。
選択されたテキスト、画像、およびファイル属性情報などの1つ以上の情報が、情報カードを生成するために組み合わされる。最後に、情報カードは、電子デバイスのホーム画面ページ、ロック画面インターフェース、または通知バーインターフェースなどのプリセット表示インターフェースに表示される。
場合により、情報カードは、元の写真の表示ポータルをさらに含むことができる。図7に示すように、写真に基づいて生成された情報カードは、「Details」をさらに含んでもよい。ユーザが「Details」をタップすると、その情報カードに対応する元の写真が表示される。
本発明の本実施形態における本技術的解決策では、電子デバイスは、画像生成命令を受信すると、生成された情報記憶画像に基づいて情報カードを生成し、プリセット表示インターフェースに情報カードを表示し、その結果、ユーザが、電子デバイスのプリセット表示インターフェースを使用して情報記憶画像内の重要な情報を直接見ることができ、画像ライブラリで画像を検索する必要がなくなり、それにより、ユーザによる情報の閲覧の利便性が向上する。
場合により、ステップS101において、電子デバイスが画像生成命令に基づいて情報記憶画像を生成した後、情報カード生成プロンプト情報が、電子デバイスのユーザインターフェースに表示される。情報カード生成プロンプト情報は、情報記憶画像に基づいて電子デバイスに情報カードを生成することを許可するか否かをユーザに問い合わせるために用いられる。情報カード生成プロンプト情報を表示する複数の方式が存在する。例えば、メッセージダイアログボックスが、電子デバイスのプリセット表示インターフェースの上部または下部に表示される、または情報カードを生成するための機能ボタンが画像のメニューに表示される。ユーザが情報記憶画像について情報カードの作成を許可する命令を入力すると、電子デバイスは、その命令に応答して、ステップS102およびステップS103を実行する。ユーザが、情報記憶画像について情報カードの作成を拒否する命令を入力した場合、または、プリセット時間内に情報記憶画像について情報カードを生成することを許可する命令を入力しなかった場合は、電子デバイスは、ステップS102およびステップS103を実行しない。
図8は、情報カード生成プロンプト情報の概略図である。例えば、ユーザが画面キャプチャ命令を入力し、電子デバイスが画面キャプチャ命令に応答してスクリーンショットを生成した後、情報カードを生成することに同意するか否かをユーザに問い合わせるために、図8に示すメッセージボックスが表示される。ユーザが同意ボタンをタップすると、スクリーンショットに基づいて情報カードが生成される。ユーザが拒否ボタンをタップした場合、スクリーンショットに基づいて情報カードは生成されない。
電子デバイスを使用することによってユーザが画像を生成する理由はたくさんある。従って、情報カードは、ヒューマン・電子デバイス・インタラクションのインテリジェンスを向上させるために、ユーザの選択に基づいて、ユーザが要求する画像について生成される。
場合により、情報記憶画像がユーザによって削除された場合、その情報記憶画像に対応する情報カードも自動的に削除される。
図9は、情報カードを編集可能な状態に設定する概略図である。図9に示すように、情報カードが生成された後、情報カードの右上隅には、縦方向に並ぶ3つの点で表されるメニューアイコン10が表示される。ユーザがメニューアイコンをタップした後、4つの機能ボタン、すなわち、「編集」101、「共有」102、「削除」103、および「留め付け(stick)」104が表示される。図9に示される4つの機能ボタンは一例に過ぎない。当業者は、メニューが代替的により多いまたはより少ない機能ボタンを含み得ること、または別の機能ボタンを含み得ることを理解されよう。ユーザが「編集」ボタン101をタップすると、情報カードは図9に示す編集可能な状態に設定される。図9に示す編集可能な状態は一例に過ぎない。情報カードが編集可能な状態のときのユーザインターフェースの表示形態は、本明細書では特に限定されない。図9に示すように、情報カード内の各情報の右上隅には、情報カード内の情報が編集可能な状態であることを示すための記号
が表示されている。
情報カードに表示される情報は、プリセット抽出規則に従って情報記憶画像から抽出された情報であってもよいし、情報記憶画像内のすべての情報を含んでもよい。情報カードが生成された後、情報カード内の情報がユーザによって要求された情報と一致しない場合、ユーザは、情報カード内の情報に対して編集操作を実行することが許可される。具体的には、編集操作には、コピー、修正、削除などが含まれる。
場合により、情報カードが生成されると、電子デバイスは、情報カード内の情報をユーザが編集することを許可されていることをユーザに知らせるために、現在のユーザインターフェースに情報カード編集プロンプト情報を表示し得る。ユーザが情報カード内の情報を編集することに同意すると、ユーザが情報カード内の情報に対して編集操作を実行するのを助けるために、情報カード内の情報は編集可能な状態に設定される。
場合により、情報カードが生成されると、電子デバイスは、情報カードが編集可能な状態にあることを直接表示する。ステップS103において情報カードが生成されると、情報カード内の情報はそのまま編集可能な状態となる。複数の編集可能な状態が存在し、本明細書では特に限定されない。一例として、図9に示す状態は編集可能な状態である、すなわち、ユーザは、情報を削除するために、その情報の上にある記号
を直接タップすることができる。情報カード内のテキストも編集および修正が可能である。
場合により、情報カードが生成された後、かつユーザが一定期間後に情報カードを編集する必要があるときに、情報カードを編集することが許可される。ユーザが情報カード編集命令を入力し(例えば、編集対象の情報をタッチしたままにする、またはメニューから編集機能ボタンを選択する)、電子デバイスは、情報カード編集命令に応答して情報カード内の情報を編集可能な状態に設定する。
情報カード内の情報は、ユーザによって編集が許可されており、その結果、ユーザが、ユーザの要件に基づいて情報カード内の情報をさらに修正することができ、それにより、ヒューマン・電子デバイス・インタラクションのインテリジェンスが向上する。
ユーザが編集を完了した後、電子デバイスのプリセット表示インターフェースに編集された情報カードが表示される。
図9に示すように、ユーザが「共有」機能ボタン102をタップすると、情報カードは、複数の通信アプリケーションを用いて別のユーザに送信されてもよい。例えば、ユーザAが電子デバイスの発券アプリケーションを用いて2枚の映画チケットを購入した後、映画情報を含む情報カードが画面キャプチャを通して生成される。ユーザAは情報カード内の「共有」機能ボタン102をタップし、情報カードは電子メールを用いてユーザBに送信されてもよい。ユーザBが電子メールを用いて情報カードを受信した後、電子デバイスは、電子メールに含まれる情報カードを自動的に認識し、ユーザBの電子デバイスのホーム画面に情報カードを自動的に表示する。
図9に示すように、ユーザが「削除」機能ボタン103をタップすると、情報カードが削除される。
図9に示すように、ユーザが「留め付け」機能ボタン104をタップすると、情報カードは、電子デバイスのプリセット表示インターフェースに表示され続ける。電子デバイスが後で別の新しい情報カードを生成したとしても、別の情報カードは、プリセット表示インターフェースに表示されるために、留め付けられた情報カードに置き換わらない。プリセット表示インターフェースは、別の情報カードの表示ポータルを表示する。あるいは、電子デバイスのプリセット表示インターフェースが情報カードAを表示しているときに、ユーザによって情報カードBが留め付けられるように設定されている場合、情報カードBは、電子デバイスのプリセット表示インターフェースに表示されるために、情報カードAに置き換わる。
情報カードに対するユーザの複数の操作要件を満たすために、情報カードには複数の機能ボタンが設けられている。
図10は、本発明の一実施形態による、別の画像処理方法の概略的な流れ図である。図10に示すように、図4と同じ内容を有する図10のステップの詳細はここでは繰り返し説明しない。ステップS203の後、リマインドされるイベントを生成するステップがさらに含まれる。リマインドされるイベントを生成する方法ステップは、順次または並行して実行されてもよく、さらに多いまたは少ない方法ステップが含まれてもよい。方法手順は、以下のステップを含む。
S201:画像生成命令を受信し、画像生成命令に応答して情報記憶画像を生成する。
S202:情報記憶画像に基づいて情報カードを生成する。
S203:電子デバイスのプリセット表示インターフェースに情報カードを表示する。
S204:第1の情報が時間情報を含むか否かを判定し、第1の情報が時間情報を含まない場合には、第1の情報に基づいて情報カードを直接生成し、情報カードが情報記憶画像内の重要な情報を呈示するために使用される、または第1情報が時間情報を含む場合、ステップS205を実行する。
S205:第1の情報内の時間情報が電子デバイスの現在のシステム時間よりも遅いか否かを判定し、第1の情報内の時間情報によって示される時間が電子デバイスの現在のシステム時間よりも前である場合には、第1の情報に基づいて情報カードを直接生成し、情報カードが情報記憶画像内の重要な情報を呈示するために使用される、または第1の情報内の時間情報によって示される時間が電子デバイスの現在のシステム時間よりも遅い場合、ステップS206を実行する。
S206:第1の情報内の時間情報に基づいてリマインドされるイベントを生成する。
リマインドされるイベントとは、電子デバイスのシステム時間が、時間情報によって示される時間に達するときまたはその前にリマインダアクションを生成することを意味する。
S207:電子デバイスのシステム時間が、時間情報によって示される時間に達するときまたはその前に、リマインダアクションを実行する。
リマインダアクションは、振動、画面点灯、プロンプト情報表示、および音を鳴らすことのうちの少なくとも1つのアクションを含む。
情報カードが時間情報を含み、その時間情報が示す時間が電子デバイスの現在のシステム時間よりも遅い場合、その時刻情報に基づいてリマインドされるイベントが生成される。情報カードが時間情報を含まない場合、または時間情報によって示される時間が電子デバイスの現在のシステム時間よりも前である場合、情報カードのみが生成される。例えば、図3に示す情報カードに含まれる美術展の開始時間は、2016年5月1日である。情報カードは、ユーザが美術展に行くのを忘れないように、2016年5月1日または2016年5月1日の前日に、振動、音、または画面の点灯などを介して、美術展が始まることをユーザに知らせる。情報カード内の情報の意味は、情報カードのリマインドされるイベントを会議のリマインダ、約束のリマインダ、またはタスクのリマインダとして設定するために、音声分析技術を使用することによって分析される。
ステップS207の後、図10に示す方法はさらに以下のステップを含む。
S208:電子デバイスのシステム時間が情報記憶画像の第1の情報内の時間情報よりも遅い場合、情報カードを削除する。
電子デバイスがリマインダアクションの実行を完了した後、情報カード内の情報はすでに有効期限切れであるかまたは有効期限切れになる。従って、電子デバイスのシステム時間が第1の情報内の時間情報によって示される時間を超えた後、情報カード内の情報がすでに有効期限切れであることを示す。電子デバイスのシステム時間が第1の情報内の時間情報によって示される時間を超える場合、または電子デバイスのシステム時間が第1の情報内の時間情報によって示されるプリセット期間を超える場合、情報カードは削除され得る。
例えば、図3に示す情報カードにおける美術展の終了時間は、2016年8月31日である。情報カードは、2016年9月1日または2016年9月2日に自動的に削除される。
有効期限が切れた情報カードが自動的に削除されて、有効期限が切れた情報カードが電子デバイスのホーム画面ページを占有し続けることを防ぎ、それにより、ヒューマン・電子デバイス・インタラクションのインテリジェンスが向上する。
図11は、本発明の一実施形態による、情報カード表示方法の概略的な流れ図である。図11に示すように、電子デバイスが複数の情報カードを含む場合、図4のステップS103は以下のステップを含む。以下の方法ステップは、順次または並行して実行されてもよく、さらに多いまたは少ない方法ステップが含まれてもよい。方法手順は、以下のステップを含む。
ステップS1031:プリセット優先度規則に従って、複数の情報カードの中で最も高い優先度を有する情報カードを判定する。
プリセット優先度規則は、重要度による優先度および/または時間による優先度を含む。重要度による優先度は、情報カード内の情報の重要度のレベルを示すために使用される。重要度による優先度は、電子デバイスに事前にプリセットされていてもよいし、ユーザによって設定されてもよい。例えば、ユーザは、リマインドされるイベントを含む情報カードの重要度による優先度を、リマインドされるイベントを含まない情報カードの重要度による優先度よりも高く設定することができる。あるいは、ユーザは、一部のアプリケーションプログラムのユーザインターフェースのスクリーンショットについて生成された情報カードが比較的高い重要度による優先度を有するように設定することができる。例えば、ユーザは、発券アプリケーションのスクリーンショットについて生成された情報カードが最も高い重要度による優先度を有するように設定することができる。
時間による優先度は、情報カードのものであり、情報カードの生成時間に基づいて判定される優先度を示すために用いられる。時間による優先度は、電子デバイスに事前にプリセットされていてもよいし、ユーザによって設定されてもよい。例えば、ユーザは、生成時間が比較的遅い(すなわち、生成時間が電子デバイスの現在のシステム時間に比較的近い)情報カードの優先度を、生成時間が比較的早い(すなわち、生成時間が電子デバイスの現在のシステム時間から比較的隔たっている)情報カードの優先度よりも高く設定することができる。
プリセット優先度規則は、重要度による優先度および時間による優先度のうちの少なくとも一方を含み得る。例えば、プリセット優先度規則は、リマインドされるイベントを含む情報カードの重要度による優先度が、リマインドされるイベントを含まない情報カードの重要度による優先度よりも高く、生成時間が比較的遅い情報カードの優先度が、生成時間が比較的早い情報カードの優先度よりも高いというものである。
ステップS1032:電子デバイスのプリセット表示インターフェースに、最も高い優先度を有する情報カードと別の情報カードを見るための表示ポータルとを表示する。
別の情報カードの表示ポータルは、代替的に、電子デバイスのプリセット表示インターフェースに表示されなくてもよい。
以下、図11に示す複数の情報カードの表示方法について例を挙げて説明する。
図12は、複数の情報カードが表示されている場合のユーザインターフェースの概略図である。電子デバイスは、図3に示す美術展の情報カードを含んでおり、その情報カードをプリセット表示インターフェースに表示していた。電子デバイスのプリセット優先度規則は、生成時間が比較的遅い情報カードの優先度が、生成時間が比較的早い情報カードの優先度よりも高いというものである。図12に示されるように、ユーザがショッピングアプリケーションプログラムにおいて革のバッグのユーザインターフェース上で画面キャプチャを実行すると、革製バッグのスクリーンショットが生成され、情報カードが生成される。情報カードは編集可能な状態にあり、ユーザは情報カードを編集または削除することができる。ユーザが革製バッグの情報カードを生成すると決めた場合、情報カードの生成時間が最も遅いために、情報カードの優先度は最も高い。革製バッグの新たに生成されたスクリーンショットは、電子デバイスのプリセット表示インターフェースに表示される美術展の元の情報カードに置き換わり、美術展の情報カードの表示ポータルは、電子デバイスのプリセット表示インターフェースに表示される。ユーザは、表示ポータルをタップした後、美術展の元の情報カードを見ることができる。電子デバイスが複数の情報カードを含む場合、電子デバイスは、各情報カードの生成時間に基づいて情報カードをソートし、生成時間が最も遅い情報カードを、時間による優先度が最も高い情報カードとして、電子デバイスのプリセット表示インターフェースに表示する。
図13は、複数の情報カードが表示されている場合の別のユーザインターフェースの概略図である。図13に示すように、ユーザは、スクリーンショットを生成するために、インスタントチャットアプリケーションのチャットユーザインターフェース上で画面キャプチャを実行し、情報カードが生成される。スクリーンショットには時間情報が含まれている。従って、電子デバイスは、時間情報に基づいてリマインドされるイベントを生成する。プリセット優先度規則は、リマインドされるイベントを含む情報カードの優先度が、リマインドされるイベントを含まない情報カードの優先度よりも高く、生成時間が比較的遅い情報カードの優先度が、生成時間が比較的早い情報カードの優先度よりも高いというものである。プリセット優先度規則によれば、チャットユーザインターフェースに対応する生成された情報カードは、最も遅い生成時間を有し、リマインドされるイベントを含む。従って、この情報カードが最も高い優先度を有する。チャットインターフェースの情報カードは、電子デバイスのプリセット表示インターフェースに表示され、別の情報カードの表示ポータルが表示される。
電子デバイスが複数の情報カードを記憶した場合、最も高い優先度を有する情報カードがプリセット表示インターフェースに表示され、その結果、ユーザは、最も重要な情報を便利に見ることができる。
本発明の一実施形態は、画像処理装置をさらに提供する。図14は、本発明の一実施形態による、画像処理装置の概略的な構成図である。図14に示すように、画像処理装置は、受信モジュールと、処理モジュールと、表示モジュールと、を備える。
受信モジュールは、画像生成命令を受信するように構成される。処理モジュールは、受信モジュールによって受信された画像生成命令に応答して情報記憶画像を生成するように構成される。情報記憶画像は、第1の情報を含む。処理モジュールは、情報記憶画像に基づいて情報カードを生成する。情報カードは、第1の情報内の少なくとも一部の情報を含む。処理モジュールは、電子デバイスのプリセット表示インターフェースに情報カードを表示するように表示モジュールに命令する。表示モジュールは、電子デバイスのプリセット表示インターフェースに情報カードを表示するように構成される。
場合により、画像生成命令が、画面キャプチャ命令または撮影命令を含む。
別の実施形態では、処理モジュールは、情報カード生成プロンプト情報を生成するようにさらに構成される。情報カード生成プロンプト情報は、情報記憶画像に基づいて情報カードの生成が許可されているか否かを問い合わせるために使用される。表示モジュールは、情報カード生成プロンプト情報を表示するようにさらに構成される。受信モジュールは、情報カード生成プロンプト情報に基づいてユーザによって入力された同意命令または拒否命令を受信するようにさらに構成される。処理モジュールは、受信モジュールによって受信された、ユーザによって入力された同意命令に基づいて情報カードを生成する。受信モジュールがユーザによって入力された拒否命令を受信した場合、処理モジュールは、情報記憶画像に基づいて情報カードを生成しない。
別の実施形態では、処理モジュールは、情報カード編集プロンプト情報を生成するようにさらに構成される。情報カード編集プロンプト情報は、情報カード内の情報がユーザによって編集可能であることを通知するために使用される。表示モジュールは、情報カード編集プロンプト情報を表示するようにさらに構成される。受信モジュールは、情報カード編集プロンプト情報に基づいてユーザによって入力された編集命令、削除命令、またはコピー命令を受信するようにさらに構成される。処理モジュールは、受信モジュールによって受信された編集命令、削除命令、またはコピー命令に基づいて、情報カード内の情報を編集、削除、またはコピーするようにさらに構成される。表示モジュールは、編集された情報カードを表示するようにさらに構成される。
別の実施形態では、処理モジュールは、情報カード内の情報を編集可能な状態に設定するようにさらに構成されている。表示モジュールは、情報カードを編集可能な状態で表示するようにさらに構成される。受信モジュールは、ユーザによって入力された編集命令、削除命令、またはコピー命令を受信するようにさらに構成される。処理モジュールは、受信モジュールによって受信された編集命令、削除命令、またはコピー命令に基づいて、情報カード内の情報を編集、削除、またはコピーするようにさらに構成される。表示モジュールは、編集された情報カードを表示するようにさらに構成される。
別の実施形態では、受信モジュールは、ユーザによって入力された情報カード編集命令を受信するようにさらに構成される。処理モジュールは、情報カード編集命令に応答して情報カード内の情報を編集可能な状態に設定するようにさらに構成される。
別の実施形態では、処理モジュールは、第1の情報が時間情報を含むか否かを判定するようにさらに構成される。第1の情報が時間情報を含む場合、処理モジュールは、第1の情報内の時間情報に基づいてリマインドされるイベントを生成する。リマインドされるイベントは、電子デバイスのシステム時間が、時間情報によって示される時間に達するときまたはその前にリマインダアクションを生成することである。リマインダアクションは、振動、画面点灯、プロンプト情報表示、および音を鳴らすことのうちの少なくとも1つのアクションを含む。
場合により、処理モジュールは、第1の情報内の時間情報が電子デバイスのシステム時間よりも遅いか否かを判定するようにさらに構成される。第1の情報内の時間情報によって示される時間が電子デバイスのシステム時間よりも遅い場合、処理モジュールは、第1の情報内の時間情報に基づいてリマインドされるイベントを生成する。
場合により、処理モジュールは、電子デバイスのシステム時間が第1の情報内の時間情報で示される時間よりも遅い場合、情報カードを削除するようにさらに構成される。
別の実施形態では、複数の情報カードが存在するとき、処理モジュールは、プリセット優先度規則に従って、複数の情報カードの中で最も高い優先度を有する情報カードを判定するようにさらに構成される。プリセット優先度規則は、重要度による優先度および/または時間による優先度を含む。処理モジュールは、電子デバイスのプリセット表示インターフェースに最も高い優先度を有する情報カードを表示するように表示モジュールに命令するようにさらに構成される。表示モジュールは、電子デバイスのプリセット表示インターフェースに最も高い優先度を有する情報カードを表示するようにさらに構成される。
場合により、表示モジュールは、電子デバイスのプリセット表示インターフェースに、最も高い優先度を有する情報カードと別の情報カードを見るための表示ポータルとを表示するようにさらに構成される。
別の実施形態では、受信モジュールは、情報カード設定命令を受信するようにさらに構成される。情報カード設定命令は、情報記憶画像を生成するために電子デバイスの第1のアプリケーションのユーザインターフェース上で画面キャプチャが行われた場合に、情報記憶画像に基づいて情報カードを生成するように設定するために使用される。
処理モジュールは、情報記憶画像が第1のアプリケーションのユーザインターフェース上で画面キャプチャを実行することによって生成された画像であるか否かを判定するようにさらに構成される。情報記憶画像が第1のアプリケーションのユーザインターフェース上で画面キャプチャを実行することによって生成された画像である場合、処理モジュールは、情報記憶画像に基づいて情報カードを生成する。
画像処理装置は、図2〜図13の方法手順を実行するように構成される、および/または本出願に記載の技術における別のプロセスを実行するように構成される。説明を簡潔にするために、ここでは細部を繰り返し説明しない。
本発明において提供されるいくつかの実施形態においては、本開示の装置および方法を他のやり方で実装することもできることを理解されたい。例えば、説明された装置実施形態は単なる例に過ぎない。例えば、ユニットの分割は単なる論理的機能分割に過ぎず、実際の実装に際しては他の分割も可能である。例えば、複数のユニットもしくはコンポーネントが組み合わされ、または統合されて別のシステムになる場合もあり、いくつかの特徴が無視されたり実行されなかったりする場合もある。加えて、表示された、または論じられた相互結合または直接結合または通信接続を、いくつかのインターフェースを使用して実現することもできる。装置間またはユニット間の間接結合または通信接続は、電子的形態、機械的形態、または他の形態として実現することができる。
別個の部品として記載されたユニットは、物理的に分離していてもいなくてもよい。例えば、受信モジュールと表示モジュールとは同じ装置に一体化されてもよい。ユニットの一部または全部を、各実施形態の解決策の目的を達成するための実際の要件に基づいて選択することもできる。
加えて、本発明の実施形態における機能ユニットが1つの処理ユニットへ統合される場合もあり、ユニットのそれぞれが物理的に独立して存在する場合もあり、または2つ以上のユニットが1つのユニットへ統合される場合もある。統合ユニットはハードウェアの形態で実現することもでき、ソフトウェア機能ユニットに加えてハードウェアの形態で実現することもできる。
上記の統合ユニットがソフトウェア機能ユニットの形態で実現される場合、統合ユニットは、コンピュータ可読記憶媒体に記憶することができる。ソフトウェア機能ユニットは記憶媒体に記憶されており、(パーソナルコンピュータ、サーバ、ネットワーク機器などとすることができる)コンピュータデバイスまたはプロセッサ(processor)に、本発明の各実施形態で記述されている方法の一部のステップを実行するよう命令するためのいくつかの命令を含む。上記記憶媒体は、USBフラッシュドライブ、取り外し可能ハードディスク、読み出し専用メモリ(Read−Only Memory、ROM)、ランダムアクセスメモリ(Random Access Memory、RAM)、磁気ディスク、コンパクトディスクといった、プログラムコードを記憶することができる任意の媒体を含む。
説明を簡便にする目的で上記機能モジュールの分割が説明のための例として挙げられていることが、当業者には明確に理解されよう。実際の適用の際には、上記各機能を、異なる機能モジュールに割り振り、要件に従って実装することができる、すなわち、装置の内部構造が上記の各機能の一部または全部を実装するための異なる機能モジュールに分割される。上記装置の具体的な動作プロセスについては、上記方法実施形態における対応するプロセスを参照されたい。装置の具体的な動作プロセスは、上記方法実施形態において対応する技術的効果を有し、詳細は本明細書では繰り返し説明されない。
本発明の一実施形態は、電子デバイスをさらに提供する。電子デバイスは、図1Aに示す構成を有する。電子デバイスのタッチ画面、プロセッサ、およびディスプレイは、以下のように別々に構成される。
タッチ画面は、画像生成命令を受信するように構成される。プロセッサは、受信モジュールによって受信された画像生成命令に応答して情報記憶画像を生成するように構成される。情報記憶画像は、第1の情報を含む。プロセッサは、情報記憶画像に基づいて情報カードを生成する。情報カードは、第1の情報内の少なくとも一部の情報を含む。プロセッサは、電子デバイスのプリセット表示インターフェースに情報カードを表示するようにディスプレイに命令する。ディスプレイは、電子デバイスのプリセット表示インターフェースに情報カードを表示するように構成される。
場合により、画像生成命令が、画面キャプチャ命令または撮影命令を含む。
場合により、プロセッサは、情報カード生成プロンプト情報を生成するようにさらに構成される。情報カード生成プロンプト情報は、情報記憶画像に基づいて情報カードの生成が許可されているか否かを問い合わせるために使用される。ディスプレイは、情報カード生成プロンプト情報を表示するようにさらに構成される。タッチ画面は、情報カード生成プロンプト情報に基づいてユーザによって入力された同意命令または拒否命令を受信するようにさらに構成される。プロセッサは、タッチ画面によって受信された、ユーザによって入力された同意命令に基づいて情報カードを生成する。タッチ画面がユーザによって入力された拒否命令を受信した場合、プロセッサは、情報記憶画像に基づいて情報カードを生成しない。
別の実施形態では、プロセッサは、情報カード編集プロンプト情報を生成するようにさらに構成される。情報カード編集プロンプト情報は、情報カード内の情報がユーザによって編集可能であることを通知するために使用される。ディスプレイは、情報カード編集プロンプト情報を表示するようにさらに構成される。タッチ画面は、情報カード編集プロンプト情報に基づいてユーザによって入力された編集命令、削除命令、またはコピー命令を受信するようにさらに構成される。プロセッサは、タッチ画面によって受信された編集命令、削除命令、またはコピー命令に基づいて、情報カード内の情報を編集、削除、またはコピーするようにさらに構成される。ディスプレイは、編集された情報カードを表示するようにさらに構成される。
別の実施形態では、プロセッサは、情報カード内の情報を編集可能な状態に設定するようにさらに構成される。ディスプレイは、情報カードを編集可能な状態で表示するようにさらに構成される。タッチ画面は、ユーザによって入力された編集命令、削除命令、またはコピー命令を受信するようにさらに構成される。プロセッサは、タッチ画面によって受信された編集命令、削除命令、またはコピー命令に基づいて、情報カード内の情報を編集、削除、またはコピーするようにさらに構成される。ディスプレイは、編集された情報カードを表示するようにさらに構成される。
別の実施形態では、タッチ画面は、ユーザによって入力された情報カード編集命令を受信するようにさらに構成される。プロセッサは、情報カード編集命令に応答して情報カード内の情報を編集可能な状態に設定するようにさらに構成される。
別の実施形態では、プロセッサは、第1の情報が時間情報を含むか否かを判定するようにさらに構成される。第1の情報が時間情報を含む場合、プロセッサは、第1の情報内の時間情報に基づいてリマインドされるイベントを生成する。リマインドされるイベントは、電子デバイスのシステム時間が、時間情報によって示される時間に達するときまたはその前にリマインダアクションを生成することである。リマインダアクションは、振動、画面点灯、プロンプト情報表示、および音を鳴らすことのうちの少なくとも1つのアクションを含む。
場合により、プロセッサは、第1の情報内の時間情報が電子デバイスのシステム時間よりも遅いか否かを判定するようにさらに構成される。第1の情報内の時間情報によって示される時間が電子デバイスのシステム時間よりも遅い場合、プロセッサは、第1の情報内の時間情報に基づいてリマインドされるイベントを生成する。
場合により、プロセッサは、電子デバイスのシステム時間が第1の情報内の時間情報で示される時間よりも遅い場合、情報カードを削除するようにさらに構成される。
別の実施形態では、複数の情報カードが存在するとき、プロセッサは、プリセット優先度規則に従って、複数の情報カードの中で最も高い優先度を有する情報カードを判定するようにさらに構成される。プリセット優先度規則は、重要度による優先度および/または時間による優先度を含む。プロセッサは、電子デバイスのプリセット表示インターフェースに最も高い優先度を有する情報カードを表示するようにディスプレイに命令するようにさらに構成される。ディスプレイは、電子デバイスのプリセット表示インターフェースに最も高い優先度を有する情報カードを表示するようにさらに構成される。
場合により、ディスプレイは、電子デバイスのプリセット表示インターフェースに、最も高い優先度を有する情報カードと別の情報カードを見るための表示ポータルとを表示するようにさらに構成される。
別の実施形態では、タッチ画面は、情報カード設定命令を受信するようにさらに構成される。情報カード設定命令は、情報記憶画像を生成するために電子デバイスの第1のアプリケーションのユーザインターフェース上で画面キャプチャが行われた場合に、情報記憶画像に基づいて情報カードを生成するように設定するために使用される。
プロセッサは、情報記憶画像が第1のアプリケーションのユーザインターフェース上で画面キャプチャを実行することによって生成された画像であるか否かを判定するようにさらに構成される。情報記憶画像が第1のアプリケーションのユーザインターフェース上で画面キャプチャを実行することによって生成された画像である場合、プロセッサは、情報記憶画像に基づいて情報カードを生成する。
電子デバイスは、図2〜図13の方法手順を実行するように構成される、および/または本出願に記載の技術における別のプロセスを実行するように構成され、上記の方法実施形態において対応する技術的効果を有する。説明を簡潔にするために、ここでは細部を繰り返し説明しない。
本明細書の電子デバイスは簡略化された設計に過ぎないことに留意されたい。本明細書における「プロセッサ」という用語は、特定用途向け集積回路(Application Specific Integrated Circuit、略称「ASIC」)、電子回路、1つ以上のソフトウェアもしくはファームウェアプログラムを実行するように構成されたプロセッサ(例えば、共有プロセッサ、専用プロセッサ、またはパケットプロセッサ)およびメモリ、複合論理回路、ならびに/または説明された機能をサポートする別の好適な構成要素とすることができる。任意の例では、当業者は、電子デバイスが上記の方法実施形態における各手順および/またはステップを実行するように構成され得ることを理解されよう。繰り返しを避けるため、ここでは細部を繰り返し説明しない。
実装プロセスにおいて、上述の方法実施形態のステップは、電子デバイスのハードウェア集積ロジック回路を使用して、またはソフトウェアの形態の命令を使用して実装され得る。本発明の各実施形態に関連して開示された方法のステップは、ハードウェアプロセッサを使用して直接実行され、完了するのであってもよいし、プロセッサのハードウェアとソフトウェアモジュールとの組み合わせを使用して実行され、完了するのであってもよい。ソフトウェアモジュールは、当技術分野において成熟した記憶媒体、例えば、ランダムアクセスメモリ、フラッシュメモリ、読み出し専用メモリ、プログラマブル読み出し専用メモリ、エレクトリカリー・イレーサブル・プログラマブル・メモリ、またはレジスタに配置され得る。記憶媒体は、メモリであってもよく、プロセッサは、メモリの情報を読み出し、プロセッサのハードウェアと併せて、上記の方法のステップを完了する。繰り返しを避けるため、ここでは細部を繰り返し説明しない。
最後に、上述の実施形態は、本発明を限定するためのものではく、単に本発明の技術的解決策を説明するためのものに過ぎないことに留意されたい。本発明は上記実施形態に関連して詳細に説明されているが、当業者は、本発明の実施形態の技術的解決策の範囲を逸脱することなく、さらに、前述の実施形態に記述されている技術的解決策に改変を加え、あるいは、前述の実施形態の一部またはすべての技術的特徴に対する等価の置換を行うことができることを理解するはずである。
10 メニューアイコン
100 電子デバイス
101 編集機能ボタン
102 共有機能ボタン
103 削除機能ボタン
104 留め付け機能ボタン
1110 無線周波数回路
1120 メモリ
1130 入力ユニット
1131 タッチ画面
1132 入力デバイス
1140 表示ユニット
1141 ディスプレイ
1150 カメラ
1160 可聴周波数回路
1161 スピーカ
1162 マイクロフォン
1170 WiFiモジュール
1180 プロセッサ
1190 電源

Claims (29)

  1. 画像処理方法であって、前記画像処理方法は、電子デバイスに適用され、
    画像生成命令を受信し、前記画像生成命令に応答して情報記憶画像を生成するステップであって、前記情報記憶画像が第1の情報を含む、ステップと、
    前記情報記憶画像に基づいて情報カードを生成するステップであって、前記情報カードが前記第1の情報内の少なくとも一部の情報を含む、ステップと、
    前記電子デバイスのプリセット表示インターフェースに前記情報カードを表示するステップと、
    を含む方法。
  2. 前記画像生成命令が、画面キャプチャ命令または撮影命令を含む、請求項1に記載の方法。
  3. 前記情報記憶画像に基づいて情報カードを生成する前記ステップよりも前に、前記方法は、
    情報カード生成プロンプト情報を表示するステップであって、前記情報カード生成プロンプト情報が、前記情報記憶画像に基づいて前記情報カードの生成が許可されているか否かを問い合わせるために使用される、ステップ
    をさらに含む、請求項1または2に記載の方法。
  4. 前記情報記憶画像に基づいて情報カードを生成する前記ステップよりも後に、前記方法は、
    情報カード編集プロンプト情報を表示するステップであって、前記情報カード編集プロンプト情報が、
    前記情報カード内の情報がユーザによって編集されることが許可されていること、もしくは
    前記情報カード内の情報が編集可能な状態にあること、
    を知らせるために使用される、ステップ、または
    ユーザによって入力された情報カード編集命令を受信し、前記情報カード編集命令に応答して前記情報カード内の情報を編集可能な状態に設定するステップ
    をさらに含み、
    前記電子デバイスのプリセット表示インターフェースに前記情報カードを表示する前記ステップが、
    前記電子デバイスの前記プリセット表示インターフェースに編集された情報カードを表示するステップ
    を含む、請求項1から3のいずれか一項に記載の方法。
  5. 前記第1の情報が時間情報を含むか否かを判定するステップと、
    前記第1の情報が前記時間情報を含む場合、前記第1の情報内の前記時間情報に基づいてリマインドされるイベントを生成するステップであって、前記リマインドされるイベントが、前記電子デバイスのシステム時間が前記時間情報によって示される時間に達したときまたはその前にリマインダアクションを生成し、前記リマインダアクションが、振動、画面点灯、プロンプト情報表示、および音を鳴らすことのうちの少なくとも1つのアクションを含む、ステップと、
    をさらに含む、請求項1から4のいずれか一項に記載の方法。
  6. 前記第1の情報内の前記時間情報に基づいてリマインドされるイベントを生成する前記ステップが、
    前記第1の情報内の前記時間情報が前記電子デバイスの前記システム時間よりも遅いか否かを判定するステップと、
    前記第1の情報内の前記時間情報によって示される前記時間が前記電子デバイスの前記システム時間よりも遅い場合、前記第1の情報内の前記時間情報に基づいて前記リマインドされるイベントを生成するステップと、
    を含む、請求項5に記載の方法。
  7. リマインドされるイベントを生成する前記ステップよりも後に、前記方法は、
    前記電子デバイスの前記システム時間が前記第1の情報内の前記時間情報によって示される前記時間よりも遅い場合、前記情報カードを削除するステップ
    をさらに含む、請求項5または6に記載の方法。
  8. 複数の前記情報カードが存在する場合、前記電子デバイスのプリセット表示インターフェースに前記情報カードを表示する前記ステップが、
    プリセット優先度規則に従って、前記複数の情報カードの中で最も高い優先度を有する情報カードを判定するステップであって、前記プリセット優先度規則が、重要度による優先度および/または時間による優先度を含む、ステップと、
    前記電子デバイスの前記プリセット表示インターフェースに前記最も高い優先度を有する前記情報カードを表示するステップ、または
    前記最も高い優先度を有する前記情報カードと別の情報カードを見るための表示ポータルとを前記電子デバイスの前記プリセット表示インターフェースに表示するステップと、
    を含む、請求項1から7のいずれか一項に記載の方法。
  9. 画像生成命令を受信し、前記画像生成命令に応答して情報記憶画像を生成する前記ステップよりも前に、前記方法は、
    情報カード設定命令を受信するステップであって、前記情報カード設定命令が、前記情報記憶画像を生成するために、前記電子デバイス内の第1のアプリケーションのユーザインターフェースで画面キャプチャが行われる場合に、前記情報記憶画像に基づいて前記情報カードを生成するように設定するために使用される、ステップ
    をさらに含み、
    前記情報記憶画像に基づいて情報カードを生成する前記ステップが、
    前記情報記憶画像が前記第1のアプリケーションの前記ユーザインターフェースで画面キャプチャを実行することによって生成された画像であるか否かを判定するステップと、
    前記情報記憶画像が前記第1のアプリケーションの前記ユーザインターフェースで画面キャプチャを実行することによって生成された前記画像である場合、前記情報記憶画像に基づいて前記情報カードを生成するステップと、
    を含む、請求項1から8のいずれか一項に記載の方法。
  10. 前記プリセット表示インターフェースが、ホーム画面ページ、ロック画面インターフェース、または通知バーインターフェースを含む、請求項1から9のいずれか一項に記載の方法。
  11. 前記第1の情報が、画像情報、テキスト情報、時間情報、およびハイパーリンク情報のうちの少なくとも1つを含む、請求項1から10のいずれか一項に記載の方法。
  12. 画像処理装置であって、
    画像生成命令を受信するように構成された受信モジュールと、
    前記受信モジュールによって受信された前記画像生成命令に応答して情報記憶画像を生成し、前記情報記憶画像に基づいて情報カードを生成し、前記電子デバイスのプリセット表示インターフェースに前記情報カードを表示するように表示モジュールに命令するように構成された処理モジュールであって、前記情報記憶画像が第1の情報を含み、前記情報カードが前記第1の情報内の少なくとも一部の情報を含む、処理モジュールと、
    前記電子デバイスの前記プリセット表示インターフェースに前記情報カードを表示するように構成された前記表示モジュールと、
    を備える装置。
  13. 前記画像生成命令が、画面キャプチャ命令または撮影命令を含む、請求項12に記載の装置。
  14. 前記プリセット表示インターフェースが、ホーム画面ページ、ロック画面インターフェース、または通知バーインターフェースを含む、請求項12または13に記載の装置。
  15. 電子デバイスであって、
    画像生成命令を受信するように構成されたタッチ画面と、
    前記タッチ画面によって受信された前記画像生成命令に応答して情報記憶画像を生成し、前記情報記憶画像に基づいて情報カードを生成し、前記電子デバイスのプリセット表示インターフェースに前記情報カードを表示するようにディスプレイに命令するように構成されたプロセッサであって、前記情報記憶画像が第1の情報を含み、前記情報カードが前記第1の情報内の少なくとも一部の情報を含む、プロセッサと、
    前記電子デバイスの前記プリセット表示インターフェースに前記情報カードを表示するように構成された前記ディスプレイと、
    を備える電子デバイス。
  16. 前記画像生成命令が、画面キャプチャ命令または撮影命令を含む、請求項15に記載の電子デバイス。
  17. 前記プロセッサが、情報カード生成プロンプト情報を生成するようにさらに構成され、前記情報カード生成プロンプト情報が、前記情報記憶画像に基づいて前記情報カードの生成が許可されているか否かを問い合わせるために使用され、
    前記ディスプレイが、前記情報カード生成プロンプト情報を表示するようにさらに構成される、請求項15または16に記載の電子デバイス。
  18. 前記プロセッサが、情報カード編集プロンプト情報を生成するようにさらに構成され、前記情報カード編集プロンプト情報が、前記情報カード内の情報がユーザによって編集されることが許可されていることを知らせるために使用され、
    前記ディスプレイが、前記情報カード編集プロンプト情報を表示するようにさらに構成される、請求項15から17のいずれか一項に記載の電子デバイス。
  19. 前記プロセッサが、前記情報カード内の情報を編集可能な状態に設定するようにさらに構成され、
    前記ディスプレイが、前記編集可能な状態で前記情報カードを表示するようにさらに構成される、請求項15から17のいずれか一項に記載の電子デバイス。
  20. 前記プロセッサが、前記第1の情報が時間情報を含むか否かを判定し、前記第1の情報が前記時間情報を含む場合、前記第1の情報内の前記時間情報に基づいてリマインドされるイベントを生成するようにさらに構成され、前記リマインドされるイベントが、前記電子デバイスのシステム時間が前記時間情報によって示される時間に達したときまたはその前にリマインダアクションを生成し、前記リマインダアクションが、振動、画面点灯、プロンプト情報表示、および音を鳴らすことのうちの少なくとも1つのアクションを含む、請求項15から19のいずれか一項に記載の電子デバイス。
  21. 前記プロセッサが、前記第1の情報内の前記時間情報が前記電子デバイスの前記システム時間よりも遅いか否かを判定し、前記第1の情報内の前記時間情報によって示される前記時間が前記電子デバイスの前記システム時間よりも遅い場合、前記第1の情報内の前記時間情報に基づいて前記リマインドされるイベントを生成するようにさらに構成される、請求項15から20のいずれか一項に記載の電子デバイス。
  22. 前記プロセッサが、前記電子デバイスの前記システム時間が前記第1の情報内の前記時間情報によって示される前記時間よりも遅い場合、前記情報カードを削除するようにさらに構成される、請求項20または21に記載の電子デバイス。
  23. 複数の前記情報カードが存在する場合、
    前記プロセッサが、プリセット優先度規則に従って、前記複数の情報カードの中で最も高い優先度を有する情報カードを判定し、前記最も高い優先度を有する前記情報カードを前記電子デバイスの前記プリセット表示インターフェースに表示するように前記ディスプレイに命令するようにさらに構成され、前記プリセット優先度規則が、重要度による優先度および/または時間による優先度を含み、
    前記ディスプレイが、前記最も高い優先度を有する前記情報カードを前記電子デバイスの前記プリセット表示インターフェースに表示するようにさらに構成される、請求項15から22のいずれか一項に記載の電子デバイス。
  24. 複数の前記情報カードが存在する場合、
    前記プロセッサが、プリセット優先度規則に従って、前記複数の情報カードの中で最も高い優先度を有する情報カードを判定し、前記最も高い優先度を有する前記情報カードを前記電子デバイスの前記プリセット表示インターフェースに表示するように前記ディスプレイに命令し、前記最も高い優先度を有する前記情報カードと別の情報カードを見るための表示ポータルとを前記電子デバイスの前記プリセット表示インターフェースに表示するように前記ディスプレイに命令するようにさらに構成され、前記プリセット優先度規則が、重要度による優先度および/または時間による優先度を含み、
    前記ディスプレイが、前記最も高い優先度を有する前記情報カードと前記別の情報カードを見るための前記表示ポータルとを前記電子デバイスの前記プリセット表示インターフェースに表示するようにさらに構成される、請求項15から22のいずれか一項に記載の電子デバイス。
  25. 前記タッチ画面が、情報カード設定命令を受信するようにさらに構成され、前記情報カード設定命令が、前記情報記憶画像を生成するために、前記電子デバイス内の第1のアプリケーションのユーザインターフェースで画面キャプチャが行われる場合に、前記情報記憶画像に基づいて前記情報カードを生成するように設定するために使用され、
    前記プロセッサが、前記情報記憶画像が前記第1のアプリケーションの前記ユーザインターフェースで画面キャプチャを実行することによって生成された画像であるか否かを判定し、前記情報記憶画像が前記第1のアプリケーションの前記ユーザインターフェースで画面キャプチャを実行することによって生成された前記画像である場合、前記情報記憶画像に基づいて前記情報カードを生成するようにさらに構成される、請求項15から24のいずれか一項に記載の電子デバイス。
  26. 前記プリセット表示インターフェースが、ホーム画面ページ、ロック画面インターフェース、または通知バーインターフェースを含む、請求項15から25のいずれか一項に記載の電子デバイス。
  27. 前記第1の情報が、画像情報、テキスト情報、時間情報、およびハイパーリンク情報のうちの少なくとも1つを含む、請求項15から26のいずれか一項に記載の電子デバイス。
  28. 電子デバイス上のグラフィカルユーザインターフェースであって、前記電子デバイスが、ディスプレイと、1つ以上の入力デバイスと、メモリと、前記メモリに記憶された1つ以上のプログラムを実行するように構成された1つ以上のプロセッサと、を備え、前記グラフィカルユーザインターフェースが、
    第1の情報を含むユーザインターフェースであって、受信した画面キャプチャ命令に応答して、情報記憶画像を生成するために、前記第1の情報を含む前記ユーザインターフェースで、前記画面キャプチャ命令に基づいて画面キャプチャが実行され、情報カードが前記情報記憶画像に基づいて生成され、前記情報カードが、前記第1の情報内の少なくとも一部の情報を含み、前記情報カードが、プリセット表示インターフェースに表示される、ユーザインターフェース
    を含む、グラフィカルユーザインターフェース。
  29. 電子デバイス上のグラフィカルユーザインターフェースであって、前記電子デバイスが、ディスプレイと、1つ以上のカメラと、1つ以上の入力デバイスと、メモリと、前記メモリに記憶された1つ以上のプログラムを実行するように構成された1つ以上のプロセッサと、を備え、前記グラフィカルユーザインターフェースが、
    前記カメラの撮影ユーザインターフェースであって、受信した撮影命令に応答して、前記撮影命令に基づいて情報記憶画像が生成され、前記情報記憶画像が第1の情報を含み、情報カードが前記情報記憶画像に基づいて生成され、前記情報カードが、前記第1の情報内の少なくとも一部の情報を含み、前記情報カードが、プリセット表示インターフェースに表示される、撮影ユーザインターフェース
    を含む、グラフィカルユーザインターフェース。
JP2019521071A 2016-10-19 2016-10-19 画像処理方法および装置、電子デバイス、ならびにグラフィカルユーザインターフェース Pending JP2019531561A (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2016/102587 WO2018072149A1 (zh) 2016-10-19 2016-10-19 图片处理方法、装置、电子设备及图形用户界面

Publications (1)

Publication Number Publication Date
JP2019531561A true JP2019531561A (ja) 2019-10-31

Family

ID=62018200

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019521071A Pending JP2019531561A (ja) 2016-10-19 2016-10-19 画像処理方法および装置、電子デバイス、ならびにグラフィカルユーザインターフェース

Country Status (7)

Country Link
US (1) US20190258371A1 (ja)
EP (1) EP3528140A4 (ja)
JP (1) JP2019531561A (ja)
KR (1) KR20190070955A (ja)
CN (1) CN108351880A (ja)
RU (1) RU2740785C2 (ja)
WO (1) WO2018072149A1 (ja)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107146082B (zh) * 2017-05-27 2021-01-29 北京小米移动软件有限公司 交易记录信息获取方法、装置及计算机可读存储介质
KR20190102587A (ko) * 2018-02-26 2019-09-04 엘지전자 주식회사 이동 단말기 및 그 동작방법
CN111240560B (zh) * 2018-11-29 2022-06-28 珠海金山办公软件有限公司 一种锁屏显示方法及装置
KR20200093346A (ko) * 2019-01-28 2020-08-05 삼성전자주식회사 어플리케이션의 상황 정보를 표시하는 전자 장치 및 방법
USD913306S1 (en) * 2019-02-28 2021-03-16 Amazon Technologies, Inc. Display screen or portion thereof having a graphical user interface
USD905737S1 (en) 2019-02-28 2020-12-22 Amazon Technologies, Inc. Display screen or portion thereof having a graphical user interface
CN110598027B (zh) * 2019-09-10 2022-09-02 Oppo广东移动通信有限公司 图像处理效果的显示方法、装置、电子设备以及存储介质
CN110688181B (zh) * 2019-09-20 2023-03-14 北京小米移动软件有限公司 通知栏中的内容显示方法、装置及存储介质
CN111523062B (zh) * 2020-04-24 2024-02-27 浙江口碑网络技术有限公司 多维度信息展示方法及装置
WO2022103142A1 (en) * 2020-11-10 2022-05-19 Samsung Electronics Co., Ltd. Method and electronic device for displaying enhance message in electronic device
CN115766928B (zh) * 2021-08-12 2023-10-10 荣耀终端有限公司 一种信息提醒方法、电子设备及存储介质
CN116738940A (zh) * 2022-09-30 2023-09-12 荣耀终端有限公司 一种备忘录存储方法及电子设备

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012058856A (ja) * 2010-09-06 2012-03-22 Sony Corp 情報処理装置、情報処理方法及び情報処理プログラム
JP2012190160A (ja) * 2011-03-09 2012-10-04 Panasonic Corp 情報提供装置及び情報提供方法、プログラム
JP2014099172A (ja) * 2012-11-13 2014-05-29 Lg Electronics Inc 移動端末機
US20150040031A1 (en) * 2013-08-01 2015-02-05 Samsung Electronics Co., Ltd. Method and electronic device for sharing image card
CN105391863A (zh) * 2015-11-25 2016-03-09 广东欧珀移动通信有限公司 提醒事项信息创建方法及装置
US20160274771A1 (en) * 2013-10-23 2016-09-22 Lg Electronics Inc. Terminal and method for controlling same

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7062073B1 (en) 1999-01-19 2006-06-13 Tumey David M Animated toy utilizing artificial intelligence and facial image recognition
WO2001086384A2 (en) * 2000-05-08 2001-11-15 Envoii Method and apparatus for a portable information agent
US9098597B2 (en) * 2005-06-03 2015-08-04 Apple Inc. Presenting and managing clipped content
US20080052162A1 (en) * 2006-07-27 2008-02-28 Wood Charles B Calendar-Based Advertising
KR101397015B1 (ko) * 2007-08-14 2014-05-20 삼성전자주식회사 휴대용 단말기에서 일정관리 서비스 제공 방법 및 장치
CN101640752A (zh) * 2008-07-31 2010-02-03 深圳富泰宏精密工业有限公司 手持行动电子装置及在该装置中保存图片的方法
CN101968865B (zh) * 2010-11-17 2013-12-11 上海合合信息科技发展有限公司 在电子日历中添加提醒事件的方法
CN103325031A (zh) * 2012-03-19 2013-09-25 联想(北京)有限公司 日程提醒方法及终端
KR20140007163A (ko) * 2012-07-09 2014-01-17 삼성전자주식회사 모바일 장치에 클립보드 기능을 제공하는 방법 및 장치
CN102930263A (zh) * 2012-09-27 2013-02-13 百度国际科技(深圳)有限公司 一种信息处理方法及装置
US20140146200A1 (en) * 2012-11-28 2014-05-29 Research In Motion Limited Entries to an electronic calendar
US10127196B2 (en) * 2013-04-02 2018-11-13 3M Innovative Properties Company Systems and methods for managing notes
KR20150017977A (ko) * 2013-08-08 2015-02-23 삼성전자주식회사 지능적 정보 제공 방법 및 장치
JP2015184778A (ja) * 2014-03-20 2015-10-22 コニカミノルタ株式会社 拡張現実表示システム、拡張現実情報生成装置、拡張現実表示装置、サーバー、拡張現実情報生成プログラム、拡張現実表示プログラムおよび拡張現実情報のデータ構造
RU2587406C2 (ru) * 2014-05-29 2016-06-20 Общество С Ограниченной Ответственностью "Яндекс" Способ обработки визуального объекта и электронное устройство, используемое в нем
CN104571812B (zh) * 2014-12-10 2020-04-24 联想(北京)有限公司 一种信息处理方法和电子设备
CN105808542B (zh) * 2014-12-29 2019-12-24 联想(北京)有限公司 信息处理方法以及信息处理装置
CN105988790B (zh) * 2015-02-09 2020-07-14 腾讯科技(深圳)有限公司 一种信息处理方法、发送终端及接收终端
US20160292648A1 (en) * 2015-03-31 2016-10-06 GymLink, Inc. Web-Based System and Method for Facilitating In-Person Group Activities Having Democratic Administration by Group Members
CN104866523B (zh) * 2015-03-31 2019-03-22 小米科技有限责任公司 页面显示方法及装置
CN105872237A (zh) * 2016-04-28 2016-08-17 乐视控股(北京)有限公司 日历事件的创建方法及装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012058856A (ja) * 2010-09-06 2012-03-22 Sony Corp 情報処理装置、情報処理方法及び情報処理プログラム
JP2012190160A (ja) * 2011-03-09 2012-10-04 Panasonic Corp 情報提供装置及び情報提供方法、プログラム
JP2014099172A (ja) * 2012-11-13 2014-05-29 Lg Electronics Inc 移動端末機
US20150040031A1 (en) * 2013-08-01 2015-02-05 Samsung Electronics Co., Ltd. Method and electronic device for sharing image card
US20160274771A1 (en) * 2013-10-23 2016-09-22 Lg Electronics Inc. Terminal and method for controlling same
CN105391863A (zh) * 2015-11-25 2016-03-09 广东欧珀移动通信有限公司 提醒事项信息创建方法及装置

Also Published As

Publication number Publication date
WO2018072149A1 (zh) 2018-04-26
RU2740785C2 (ru) 2021-01-21
CN108351880A (zh) 2018-07-31
EP3528140A1 (en) 2019-08-21
EP3528140A4 (en) 2020-01-08
KR20190070955A (ko) 2019-06-21
RU2019114979A3 (ja) 2020-11-24
RU2019114979A (ru) 2020-11-24
US20190258371A1 (en) 2019-08-22

Similar Documents

Publication Publication Date Title
JP2019531561A (ja) 画像処理方法および装置、電子デバイス、ならびにグラフィカルユーザインターフェース
US11460983B2 (en) Method of processing content and electronic device thereof
US11003331B2 (en) Screen capturing method and terminal, and screenshot reading method and terminal
TWI463368B (zh) 提供螢幕鎖定之背景的方法、電子裝置及電腦程式產品
US10275295B2 (en) Method and apparatus for presenting clipboard contents on a mobile terminal
US9407834B2 (en) Apparatus and method for synthesizing an image in a portable terminal equipped with a dual camera
CN109089044B (zh) 用于图像处理的便携式通信设备
US20240061659A1 (en) Mini program data binding method and apparatus, device, and storage medium
US20120210201A1 (en) Operation method for memo function and portable terminal supporting the same
WO2021000841A1 (zh) 一种生成用户头像的方法及电子设备
US20120096354A1 (en) Mobile terminal and control method thereof
CN105793809A (zh) 通信用户界面系统和方法
WO2019119325A1 (zh) 一种控制方法及装置
JP2020524337A (ja) ファイル処理方法及びモバイル端末
US20230143275A1 (en) Software clipboard
WO2021088881A1 (zh) 一种选择图片的方法和电子设备
US11477143B2 (en) Trending content view count
CN105378728A (zh) 用于表示和操纵元数据的装置和方法
CN113079316B (zh) 图像处理方法、图像处理装置及电子设备
CN113127773A (zh) 页面处理方法、装置、存储介质及终端设备
WO2022057852A1 (zh) 一种多应用程序之间的交互方法
EP4035029A1 (en) Content item module arrangements
US9426277B2 (en) Method and apparatus for operating message function in connection with note function
WO2023284640A1 (zh) 图片处理方法和电子设备
CN106469178B (zh) 信息处理方法、终端及电子设备

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190626

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190530

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190530

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20200630

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200713

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20201013

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20201214