JP7440669B2 - 画面制御方法及び装置 - Google Patents

画面制御方法及び装置 Download PDF

Info

Publication number
JP7440669B2
JP7440669B2 JP2022578926A JP2022578926A JP7440669B2 JP 7440669 B2 JP7440669 B2 JP 7440669B2 JP 2022578926 A JP2022578926 A JP 2022578926A JP 2022578926 A JP2022578926 A JP 2022578926A JP 7440669 B2 JP7440669 B2 JP 7440669B2
Authority
JP
Japan
Prior art keywords
window
area
screen
pop
split screen
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2022578926A
Other languages
English (en)
Other versions
JP2023540657A (ja
Inventor
ジャ,ヨンジュ
ヤン,ミンホ
イム,ウンシル
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from KR1020210101549A external-priority patent/KR20230019703A/ko
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of JP2023540657A publication Critical patent/JP2023540657A/ja
Application granted granted Critical
Publication of JP7440669B2 publication Critical patent/JP7440669B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1615Constructional details or arrangements for portable computers with several enclosures having relative motions, each enclosure supporting at least one I/O or computing function
    • G06F1/1616Constructional details or arrangements for portable computers with several enclosures having relative motions, each enclosure supporting at least one I/O or computing function with folding flat displays, e.g. laptop computers or notebooks having a clamshell configuration, with body parts pivoting to an open position around an axis parallel to the plane they define in closed position
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1643Details related to the display arrangement, including those related to the mounting of the display in the housing the display being associated to a digitizer, e.g. laptops that can be used as penpads
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1652Details related to the display arrangement, including those related to the mounting of the display in the housing the display being flexible, e.g. mimicking a sheet of paper, or rollable
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0486Drag-and-drop
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/443OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/443OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB
    • H04N21/4438Window management, e.g. event handling following interaction with the user interface
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/485End-user interface for client configuration
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/485End-user interface for client configuration
    • H04N21/4858End-user interface for client configuration for modifying screen layout parameters, e.g. fonts, size of the windows
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04803Split screen, i.e. subdividing the display area or the window area into separate subareas

Description

以下の開示は、ディスプレイに表示される画面制御方法及び装置に関する。
最近電子装置は、1つの画面で2つ以上のプログラムあるいはアプリケーションの実行画面を共に表示する機能を提供している。例えば、電子装置は、2つ以上のアプリケーションの実行画面を表示するためにディスプレイを2つ以上の領域に分割し、各分割された(split)領域にアプリケーションの実行画面を表示したり、2つ以上のアプリケーションの実行画面を表示したりする複数のウィンドウをオーバーレイ(overlay)して表示することができる。
様々な実施形態によると、電子装置のディスプレイに1つ以上のアプリの実行ウィンドウを表示するマルチウィンドウ画面を制御する方法を提供することにある。
様々な実施形態によると、ユーザの入力によって1つ以上のアプリの実行ウィンドウを含む画面のレイアウトを制御する方法を提供することにある。
但し、技術的課題は上述した技術的な課題に限定されず、他の技術的な課題が存在し得る。
一実施形態によれば、電子装置のディスプレイに表示される画面制御方法が提供される。前記画面制御方法は、前記ディスプレイに表示される分割画面のレイアウトに基づいて、前記分割画面内のトリガー領域を確認する動作と、前記分割画面の上位レイヤに表示されるポップアップウィンドウ内のハンドル領域を制御する第1入力に基づいて、前記トリガー領域の少なくとも一部が前記ポップアップウィンドウによってオーバーレイされることを検出する動作と、前記ポップアップウィンドウによってオーバーレイされたトリガー領域の位置及び前記ハンドル領域と前記レイアウトのディバイダーの相対的位置のうち少なくとも1つに基づいて、前記分割画面のレイアウトを変更する動作と、前記変更された分割画面のレイアウトに基づいて、前記分割画面内前記ポップアップウィンドウが位置する領域を表示する動作とを含み、前記分割画面のレイアウトを変更する動作は、前記ハンドル領域と前記レイアウトのディバイダーの相対的位置に基づいて、前記分割画面に含まれたウィンドウのうち縮小される少なくとも1つのウィンドウを決定する動作を含み、前記縮小される少なくとも1つのウィンドウを決定する動作は、前記レイアウトのディバイダーを基準にして決定された細部トリガー領域に前記ハンドル領域の位置が含まれているか否かに基づいて、前記分割画面のうち縮小される少なくとも1つのウィンドウを決定する動作を含む
一実施形態によると、電子装置のディスプレイに表示される画面制御方法が提供される。前記方法は、前記電子装置によって駆動する第1アプリの実行ウィンドウを含む画面内のトリガー領域を確認する動作と、前記画面の上位レイヤに表示されるポップアップウィンドウの位置を制御する第1入力に基づいて、前記トリガー領域の少なくとも一部が前記ポップアップウィンドウによってオーバーレイされることを検出する動作と、前記オーバーレイされたトリガー領域の位置に基づいて、前記第1アプリの実行ウィンドウを含む画面を分割する動作と、前記分割された画面内前記ポップアップウィンドウが位置する領域を表示する動作とを含む。
一実施形態によると、電子装置が提供され、前記電子装置は、画面を出力するディスプレイと、前記ディスプレイと作動的に結合して前記ディスプレイに表示される画面を制御するプロセッサとを含み、前記プロセッサは、前記ディスプレイに表示される分割画面のレイアウトに基づいて、前記分割画面内のトリガー領域を確認し、前記分割画面の上位レイヤに表示されるポップアップウィンドウ内のハンドル領域を制御する第1入力に基づいて、前記トリガー領域の少なくとも一部が前記ポップアップウィンドウによってオーバーレイされることを検出し、前記ポップアップウィンドウによってオーバーレイされたトリガー領域の位置及び前記ハンドル領域と前記レイアウトのディバイダーの相対的位置のうち少なくとも1つに基づいて、前記分割画面のレイアウトを変更し、前記変更された分割画面のレイアウトに基づいて、前記分割画面内前記ポップアップウィンドウが位置する領域を表示し、前記プロセッサは、前記分割画面のレイアウトを変更することにおいて、前記ハンドル領域と前記レイアウトのディバイダーの相対的位置に基づいて、前記分割画面に含まれたウィンドウのうち縮小される少なくとも1つのウィンドウを決定し、前記縮小される少なくとも1つのウィンドウを決定することにおいて、前記レイアウトのディバイダーを基準にして決定された細部トリガー領域に前記ハンドル領域の位置が含まれているか否かに基づいて、前記分割画面のうち縮小される少なくとも1つのウィンドウを決定する。
一実施形態によると、電子装置が提供され、前記電子装置は、画面を出力するディスプレイと、前記ディスプレイと作動的に結合して前記ディスプレイに表示される画面を制御するプロセッサとを含み、前記プロセッサは、駆動される第1アプリの実行ウィンドウを含む画面内のトリガー領域を確認し、前記画面の上位レイヤに表示されるポップアップウィンドウの位置を制御する第1入力に基づいて、前記トリガー領域の少なくとも一部が前記ポップアップウィンドウによってオーバーレイされることを検出し、前記オーバーレイされたトリガー領域の位置に基づいて、前記第1アプリの実行ウィンドウを含む画面を分割し、前記分割された画面内前記ポップアップウィンドウが位置する領域を表示する。
様々な実施形態によると、ユーザは、複数のアプリケーションの実行ウィンドウを1つの画面に表示されるように電子装置を制御することができ、電子装置のディスプレイに表示される1つ以上のアプリケーションの実行ウィンドウの配置を容易に変更することができる。
様々な実施形態によるネットワーク環境100内の電子装置101のブロック図である。 様々な実施形態によるフォルダブル電子装置200の広げられた状態を示す図である。 様々な実施形態によるフォルダブル電子装置200の折り畳まれた状態を示す図である。 様々な実施形態による電子装置200の完全に広げられた状態(unfolded status)又は一部広げられた中間状態の一例を示す斜視図である。 様々な実施形態による電子装置200の完全に広げられた状態(unfolded status)又は一部広げられた中間状態の一例を示す斜視図である。 様々な実施形態によるディスプレイモジュール160のブロック図500である。 様々な実施形態による画面制御動作を行う電子装置101の構成図である。 様々な実施形態によるマルチウィンドウを説明するための図である。 様々な実施形態によるマルチウィンドウを説明するための図である。 様々な実施形態によるトリガー領域を指定する動作を説明するための図である。 様々な実施形態によるトリガー領域を指定する動作を説明するための図である。 様々な実施形態によるトリガー領域を指定する動作を説明するための図である。 様々な実施形態による画面を分割する動作を説明するための図である。 様々な実施形態による電子装置のディスプレイに表示される画面制御方法の動作フローチャートである。 一実施形態による分割画面に含まれたウィンドウの縮小方向を決定する動作を説明するための図である。 一実施形態による分割画面に含まれたウィンドウの縮小方向を決定する動作を説明するための図である。 一実施形態による分割画面に含まれたウィンドウの縮小方向を決定する動作を説明するための図である。 一実施形態による分割画面に含まれたウィンドウの縮小方向を決定する動作を説明するための図である。 一実施形態による分割画面に含まれたウィンドウのうち縮小されるウィンドウを決定する動作を説明するための図である。 一実施形態による分割画面に含まれたウィンドウのうち縮小されるウィンドウを決定する動作を説明するための図である。 一実施形態による分割画面に含まれたウィンドウのうち縮小されるウィンドウを決定する動作を説明するための図である。 様々な実施形態による分割画面のレイアウトを変更してポップアップウィンドウの位置を表示する動作を説明するための図である。 様々な実施形態による分割画面のレイアウトを変更してポップアップウィンドウの位置を表示する動作を説明するための図である。 様々な実施形態による分割画面のレイアウトを変更してポップアップウィンドウの位置を表示する動作を説明するための図である。 様々な実施形態による電子装置のディスプレイに表示される画面制御方法の動作フローチャートである。 様々な実施形態による電子装置のディスプレイに表示される画面制御方法を説明するための図である。 様々な実施形態による電子装置のディスプレイに表示される画面制御方法を説明するための図である。
以下、添付する図面を参照しながら実施形態を詳細に説明する。添付図面を参照して説明するにおいて、図面符号に関係なく同じ構成要素には同じ参照符号を付与し、これに対する重複説明は省略する。
図1は、様々な実施形態によるネットワーク環境100内の電子装置101のブロック図である。
図1を参照すると、ネットワーク環境100において電子装置101は、第1ネットワーク198(例えば、近距離無線通信ネットワーク)を介して電子装置102と通信したり、第2ネットワーク199(例えば、遠距離無線通信ネットワーク)を介して電子装置104又はサーバ108と通信したりすることができる。一実施形態によれば、電子装置101は、サーバ108を介して電子装置104と通信することができる。一実施形態によれば、電子装置101は、プロセッサ120、メモリ130、入力モジュール150、音響出力モジュール155、ディスプレイモジュール160、オーディオモジュール170、センサモジュール176、インターフェース177、接続端子178、ハプティックモジュール179、カメラモジュール180、電力管理モジュール188、バッテリ189、通信モジュール190、加入者識別モジュール196、又は、アンテナモジュール197を含む。いずれかの実施形態において、電子装置101には、この構成要素のうち少なくとも1つ(例えば、接続端子178)が省略されたり、1つ以上の他の構成要素が追加されたりしてもよい。いずれかの実施形態において、この構成要素のうち一部(例えば、センサモジュール176、カメラモジュール180、又は、アンテナモジュール197)は、1つの構成要素(例えば、ディスプレイモジュール160)に統合されてもよい。
プロセッサ120は、例えば、ソフトウェア(例えば、プログラム140)を実行してプロセッサ120に接続されている電子装置101の少なくとも1つの他の構成要素(例えば、ハードウェア又はソフトウェア構成要素)を制御し、様々なデータ処理又は演算を行う。一実施形態によれば、データ処理又は演算の少なくとも一部として、プロセッサ120は、他の構成要素(例えば、センサモジュール176又は通信モジュール190)から受信された命令又はデータを揮発性メモリ132に格納し、揮発性メモリ132に格納されている命令又はデータを処理し、結果データを不揮発性メモリ134に格納することができる。一実施形態によれば、プロセッサ120は、メインプロセッサ121(例えば、中央処理装置又はアプリケーションプロセッサ)又はこれとは独立的又は共に運営可能な補助プロセッサ123(例えば、グラフィック処理装置、神経網処理装置(NPU:neural processing unit)、イメージ信号処理部、センサハブプロセッサ、又は、コミュニケーションプロセッサ)を含む。例えば、電子装置101がメインプロセッサ121及び補助プロセッサ123を含む場合、補助プロセッサ123は、メインプロセッサ121より低電力を使用したり、指定された機能に特化するように設定されたりしてもよい。補助プロセッサ123は、メインプロセッサ121と別個に、又はその一部として実現されてもよい。
補助プロセッサ123は、例えば、メインプロセッサ121がインアクティブ(例えば、スリープ)状態にある間に、メインプロセッサ121に代って、又は、メインプロセッサ121がアクティブ(例えば、アプリケーション実行)状態にある間にメインプロセッサ121と共に、電子装置101の構成要素のうち少なくとも1つの構成要素(例えば、ディスプレイモジュール160、センサモジュール176、又は、通信モジュール190)に関連する機能又は状態の少なくとも一部を制御することができる。一実施形態によれば、補助プロセッサ123(例えば、イメージ信号処理部又はコミュニケーションプロセッサ)は、機能的に関連する他の構成要素(例えば、カメラモジュール180又は通信モジュール190)の一部として実現されてもよい。一実施形態によれば、補助プロセッサ123(例えば、神経網処理装置)は、人工知能モデルの処理に特化したハードウェア構造を含む。人工知能モデルは機械学習を介して生成されてもよい。このような学習は、例えば、人工知能が実行される電子装置101そのもので実行されてもよく、別途のサーバ(例えば、サーバ108)を介して実行されてもよい。学習アルゴリズムは、例えば、教師あり学習(supervised learning)、教師なし学習(unsupervised learning)、半教師あり学習(semi-supervised learning)又は強化学習(reinforcement learning)を含むが、前述した例に限定されない。人工知能モデルは、複数の人工神経網レイヤを含む。人工神経網は、深層神経網(DNN:deep neural network)、CNN(convolutional neural network)、RNN(recurrent neural network)、RBM(restricted boltzmann machine)、DBN(deep belief network)、BRDNN(bidirectional recurrent deep neural network)、深層Q-ネットワーク(deep Q-networks)又は上記のうち2以上の組み合せの1つであってもよいが、前述した例に限定されない。人工知能モデルは、ハードウェア構造以外に、追加的又は代替的にソフトウェア構造を含んでもよい。
メモリ130は、電子装置101の少なくとも1つの構成要素(例えば、プロセッサ120又はセンサモジュール176)によって使用される多様なデータを格納する。データは、例えば、ソフトウェア(例えば、プログラム140)及びこれに関する命令に対する入力データ又は出力データを含んでもよい。メモリ130は、揮発性メモリ132又は不揮発性メモリ134を含む。
プログラム140はメモリ130にソフトウェアとして格納され、例えば、運営体制142、ミドルウェア144、又はアプリケーション146を含む。
入力モジュール150は、電子装置101の構成要素(例えば、プロセッサ120)に使用される命令又はデータを電子装置101の外部(例えば、ユーザ)から受信することができる。入力モジュール150は、例えば、マイク、マウス、キーボード、キー(例えば、ボタン)、又は、デジタルペン(例えば、スタイラスペン)を含んでもよい。
音響出力モジュール155は、音響信号を電子装置101の外部に出力することができる。音響出力モジュール155は、例えば、スピーカ又はレシーバーを含んでもよい。スピーカは、マルチメディア再生又は録音再生のように一般的な用途で使用される。レシーバーは、着信電話を受信するために使用されてもよい。一実施形態によれば、レシーバーはスピーカと別個に、又はその一部として実現されてもよい。
ディスプレイモジュール160は、電子装置101の外部(例えば、ユーザ)に情報を視覚的に提供することができる。ディスプレイモジュール160は、例えば、ディスプレイ、ホログラム装置、又は、プロジェクター及び該当装置を制御するための制御回路を含んでもよい。一実施形態によれば、ディスプレイモジュール160は、タッチを検出するように設定されたタッチセンサ、又は、タッチによって発生する力の強度を測定するように設定された圧力センサを含んでもよい。
オーディオモジュール170は、音を電気信号に変換させたり、反対に電気信号を音に変換させたりすることができる。一実施形態によれば、オーディオモジュール170は、入力モジュール150を介して音を取得したり、音響出力モジュール155又は電子装置101と直接又は無線に接続されている外部電子装置(例えば、電子装置102)(例えば、スピーカ又はヘッドフォン)を介して音を出力したりすることができる。
センサモジュール176は、電子装置101の作動状態(例えば、電力又は温度)又は外部の環境状態(例えば、ユーザ状態)を検出し、検出された状態に対応する電気信号又はデータ値を生成する。一実施形態によれば、センサモジュール176は、例えば、ジェスチャーセンサ、ジャイロセンサ、気圧センサ、マグネチックセンサ、加速度センサ、グリップセンサ、近接センサ、カラーセンサ、IR(infrared)センサ、生体センサ、温度センサ、湿度センサ、又は、照度センサを含んでもよい。
インターフェース177は、電子装置101が外部電子装置(例えば、電子装置102)と直接又は無線で接続されるために使用される1つ以上の指定されたプロトコルをサポートすることができる。一実施形態によれば、インターフェース177は、例えば、HDMI(登録商標)(high definition multimedia interface)、USB(universal serial bus)インターフェース、SDカードインターフェース、又は、オーディオインターフェースを含んでもよい。
接続端子178は、それを介して電子装置101が外部電子装置(例えば、電子装置102)と物理的に接続されるコネクタを含む。一実施形態によれば、接続端子178は、例えば、HDMI(登録商標)コネクタ、USBコネクタ、SDカードコネクタ、又は、オーディオコネクタ(例えば、ヘッドフォンコネクタ)を含んでもよい。
ハプティックモジュール179は、電気的信号をユーザが触覚又は運動感覚を介して認知できる機械的な刺激(例えば、振動又は動き)又は電気的な刺激に変換する。一実施形態によれば、ハプティックモジュール179は、例えば、モータ、圧電素子、又は、電気刺激装置を含んでもよい。
カメラモジュール180は、静止画及び動画を撮影する。一実施形態によれば、カメラモジュール180は、1つ以上のレンズ、画像センサ、イメージ信号処理部、又は、フラッシュを含んでもよい。
電力管理モジュール188は、電子装置101に供給される電力を管理する。一実施形態によれば、電力管理モジュール188は、例えば、PMIC(power management integrated circuit)の少なくとも一部として実現されてもよい。
バッテリ189は、電子装置101の少なくとも1つの構成要素に電力を供給する。一実施形態によれば、バッテリ189は、例えば、再充電不可能な1次電池、再充電可能な2次電池又は燃料電池を含んでもよい。
通信モジュール190は、電子装置101と外部電子装置(例えば、電子装置102、電子装置104、又は、サーバ108)との間の直接(例えば、有線)通信チャネル又は無線通信チャネルの確立、及び確立された通信チャネルを通した通信実行をサポートする。通信モジュール190は、プロセッサ120(例えば、アプリケーションプロセッサ)と独立的に運営され、直接(例えば、有線)通信又は無線通信をサポートする1つ以上のコミュニケーションプロセッサを含む。一実施形態によれば、通信モジュール190は、無線通信モジュール192(例えば、セルラー通信モジュール、近距離無線通信モジュール、又はGNSS(global navigation satellite system)通信モジュール)又は有線通信モジュール194(例えば、LAN(local area network)通信モジュール、又は、電力線通信モジュール)を含んでもよい。この通信モジュールのうち、該当する通信モジュールは、第1ネットワーク198(例えば、ブルートゥース(登録商標)、WiFi(wireless fidelity)direct、又はIrDA(infrared data association)のような近距離通信ネットワーク)又は第2ネットワーク199(例えば、レガシーセルラーネットワーク、5Gネットワーク、次世代通信ネットワーク、インターネット、又はコンピュータネットワーク(例えば、LAN又はWAN)のような遠距離通信ネットワーク)を介して外部の電子装置104と通信することができる。このような様々な種類の通信モジュールは、1つの構成要素(例えば、単一チップ)に組み込まれるか、又は、互いに別途の複数の構成要素(例えば、複数のチップ)で実現することができる。無線通信モジュール192は、加入者識別モジュール196に格納されている加入者情報(例えば、国際モバイル加入者識別子(IMSI))を用いて、第1ネットワーク198又は第2ネットワーク199のような通信ネットワーク内で電子装置101を確認又は認証することができる。
無線通信モジュール192は、4Gネットワーク以後の5Gネットワーク及び次世代通信技術、例えば、NR接続技術(new radio access technology)をサポートする。NR接続技術は、高容量データの高速送信(eMBB(enhanced mobile broadband))、端末電力最小化と複数端末の接続(mMTC(massive machine type communications))、又は、高信頼度と低い遅延(URLLC(ultra-reliable and low-latency communications))をサポートする。無線通信モジュール192は、例えば、高いデータ送信率を達成するために、高周波帯域(例えば、mmWave帯域)をサポートしてもよい。無線通信モジュール192は、高周波帯域における性能確保のための様々な技術、例えば、ビームフォーミング(beamforming)、巨大配列多重入出力(massive MIMO(multiple-input and multiple-output))、全次元多重入出力(FD-MIMO:full dimensional MIMO)、アレイアンテナ(array antenna)、アナログビームフォーミング(analog beam-forming)、又は、大規模アンテナ(large scale antenna)のような技術をサポートしてもよい。無線通信モジュール192は、電子装置101、外部電子装置(例えば、電子装置104)、又はネットワークシステム(例えば、第2ネットワーク199)に規定される様々な要求事項をサポートすることができる。一実施形態によれば、無線通信モジュール192は、eMBB実現のためのピークデータレート(例えば、20Gbps以上)、mMTC実現のための損失カバレッジ(例えば、164dB以下)、又はURLLC実現のためのU-plane latency(例えば、ダウンリンク(DL)及びアップリンク(UL)それぞれ0.5ms以下、又は、ラウンドトリップ1ms以下)をサポートすることができる。
アンテナモジュール197は、信号又は電力を外部(例えば、外部の電子装置)に送信したり外部から受信したりすることができる。一実施形態によれば、アンテナモジュール197は、基板(例えば、PCB)上に形成された導電体又は導電性パターンからなる放射体を含むアンテナを含む。一実施形態によれば、アンテナモジュール197は、複数のアンテナ(例えば、アレイアンテナ)を含んでもよい。このような場合、第1ネットワーク198又は第2ネットワーク199のような通信ネットワークで使用される通信方式に適切な少なくとも1つのアンテナが、例えば、通信モジュール190によって上記複数のアンテナから選択されてもよい。信号又は電力は、選択された少なくとも1つのアンテナを介して通信モジュール190と外部の電子装置との間で送信されるか受信されてもよい。いずれかの実施形態によれば、放射体以外に他の部品(例えば、RFIC(radio frequency integrated circuit))がさらにアンテナモジュール197の一部として形成されてもよい。
様々な実施形態によれば、アンテナモジュール197は、mmWaveアンテナモジュールを形成することができる。一実施形態によれば、mmWaveアンテナモジュールは、プリント回路基板、前記プリント回路基板の第1面(例えば、下面)に又はそれに隣接して配置され指定された高周波帯域(例えば、mmWave帯域)をサポートできるRFIC、及び上記プリント回路基板の第2面(例えば、上面又は側面)又はそれに隣接して配置され、上記指定された高周波帯域の信号を送信又は受信できる複数のアンテナ(例えば、アレイアンテナ)を含む。
上記構成要素のうち少なくとも一部は、周辺機器間の通信方式(例えば、バス、GPIO(general purpose input and output)、SPI(serial peripheral interface)、又はMIPI(mobile industry processor interface))を介して接続されて信号(例えば、命令又はデータ)を互いに交換することができる。
一実施形態によれば、命令又はデータは、第2ネットワーク199に接続されたサーバ108を介して電子装置101と外部の電子装置104との間に送信又は受信されてもよい。外部の電子装置102、又は104のそれぞれは、電子装置101と同一又は異なる種類の装置であってもよい。一実施形態によれば、電子装置101で実行される動作の全て又は一部は、外部の電子装置102、104、又は、108のうちの1つ以上の外部の電子装置で実行されてもよい。例えば、電子装置101がいずれかの機能やサービスを自動に、又は、ユーザ又は他の装置からの要求に反応して行わなければならない場合、電子装置101は、機能又はサービスを自体に実行させる代わりに、又は、追加的に、1つ以上の外部の電子装置にその機能又はそのサービスの少なくとも一部を実行するよう要求することができる。要求を受信した1つ以上の外部の電子装置は、要求された機能又はサービスの少なくとも一部又は要求に関する追加機能又はサービスを実行し、その実行の結果を電子装置101に伝達することができる。電子装置101は、その結果を、そのまま又は追加的に処理し、要求に対する応答の少なくとも一部として提供することができる。そのために、例えば、クラウドコンピューティング、分散コンピューティング、モバイルエッジコンピューティング(MEC:mobile edge computing)、又は、クライアント-サーバコンピューティング技術を用いてもよい。電子装置101は、例えば、分散コンピューティング又はモバイルエッジコンピューティングを用いて超低遅延サービスを提供することができる。他の実施形態において、外部の電子装置104は、IoT(internet of things)機器を含んでもよい。サーバ108は、機械学習及び/又は神経網を利用した知能型サーバであってもよい。一実施形態によれば、外部の電子装置104又はサーバ108は、第2ネットワーク199内に含まれてもよい。電子装置101は、5G通信技術及びIoT関連技術をベースに知能型サービス(例えば、スマートホーム、スマートシティ、スマートカー、又は、ヘルスケア)に適用されてもよい。
図2は、様々な実施形態によるフォルダブル電子装置200の広げられた状態を示す図である。図3は、様々な実施形態によるフォルダブル電子装置200の折り畳まれた状態を示す図である。図4A及び図4Bは、様々な実施形態による電子装置200の完全に広げられた状態(unfolded status)又は一部広げられた中間状態(intermediate status)の一例を示す斜視図である。
図2、図3、図4A及び図4Bの電子装置200は、図1に示された電子装置101の一実施形態として、折り畳み可能な(foldable or bendable)電子装置であってもよい。
図4A及び図4B以下の図面には、互いに直交するX軸、Y軸及びZ軸に定義される空間座標系が示されている。ここで、X軸は電子装置の幅方向、Y軸は電子装置の長手方向、Z軸は電子装置の高さ(又は、厚さ)の方向を示す。以下、後述する説明において「第1方向」とは、Z軸と平行な方向を意味する。
図2及び図3を参照すると、一実施形態では、電子装置200は、フォルダブルハウジング201、及びフォルダブルハウジング201によって形成された空間内に配置されているフレキシブル(flexible)又はフォルダブル(foldable)ディスプレイ250(以下、省略して「ディスプレイ」250)(例えば、図1のディスプレイモジュール160)を含む。一実施形態によれば、ディスプレイ250が配置されている面(又は、ディスプレイ250が電子装置200の外部から見られる面)を電子装置200の前面に定義する。そして、前面の反対面を電子装置200の後面に定義する。また、前面と後面との間の空間を取り囲む面を電子装置200の側面のように定義する。
様々な実施形態によれば、フォルダブルハウジング201は、第1ハウジング構造210、センサ領域222を含む第2ハウジング構造220、第1後面カバー215、第2後面カバー225、及びヒンジ構造(230、hinge structure)を含む。ここで、ヒンジ構造230は、フォルダブルハウジング201の折り畳み可能な部分をカバーするヒンジカバーを含む。電子装置200のフォルダブルハウジング201は、図2及び図3に示された形態及び結合に制限されず、他の形状や部品の組み合せ及び/又は結合によって実現されてもよい。例えば、他の実施形態において、第1ハウジング構造210と第1後面カバー215が一体に形成されてもよく、第2ハウジング構造220と第2後面カバー225が一体に形成されてもよい。
様々な実施形態によれば、第1ハウジング構造210はヒンジ構造230に連結され、第1方向に向かう第1面、及び第1方向と反対である第2方向に向かう第2面を含む。第2ハウジング構造220は、ヒンジ構造230に連結され、第3方向に向かう第3面、及び第3方向と反対である第4方向に向かう第4面を含む。第2ハウジング構造220は、ヒンジ構造230を中心に第1ハウジング構造210に対して回転することができる。電子装置200は、折り畳まれた状態(folded status)又は広げられた状態(unfolded status)に可変できる。
一実施形態によれば、電子装置200は、完全に折り畳まれた(fully folded)状態で第1面が第3面に対面し、完全に広げられた(fully unfolded)状態で第3方向が第1方向と同一であってもよい。
様々な実施形態によれば、第1ハウジング構造210と第2ハウジング構造220は、フォールディング軸Aを中心に両側に配置され、フォールディング軸Aに対して全体的に対称である形状を有してもよい。後述するように、第1ハウジング構造210及び第2ハウジング構造220は、電子装置200の状態が広げられた状態(unfolded status)であるか、折り畳まれた状態(folded status)であるか、又は、一部広げられた(又は一部折り畳まれた)中間状態(intermediate status)であるか否かに応じて、互いになしている角度や距離が変わり得る。一実施形態によれば、第2ハウジング構造220は、第1ハウジング構造210とは異なり、様々なセンサが配置されるセンサ領域222をさらに含むものの、これ以外の領域では互いに対称的な形状を有してもよい。
様々な実施形態によれば、図2に示すように、第1ハウジング構造210と第2ハウジング構造220は、ディスプレイ250を受容するリセスを共に形成することができる。一実施形態によれば、センサ領域222により、リセスは、フォールディング軸Aに対して垂直方向に互いに異なる2つ以上の幅を有してもよい。一実施形態によれば、リセスは、第1ハウジング構造210のうち、フォールディング軸Aに平行な第1部分210aと、第2ハウジング構造220のうちセンサ領域222の端に形成される第1部分220aとの間の第1幅w1を有する。リセスは、第1ハウジング構造210の第2部分210bと、第2ハウジング構造220のうちセンサ領域222に該当しないフォールディング軸Aに平行な第2部分220bによって形成される第2幅w2を有する。この場合、第2幅w2は、第1幅w1よりも長く形成されてもよい。一実施形態によれば、第2ハウジング構造220の第1部分220a及び第2部分220bは、フォールディング軸Aからの距離が互いに異なってもよい。リセスの幅は示された例示に限定されない。更なる実施形態において、センサ領域222の形態又は第1ハウジング構造210及び第2ハウジング構造220の非対称の形状を有する部分によってリセスは複数の幅を有してもよい。様々な実施形態によれば、センサ領域222は、第2ハウジング構造220の1つのコーナーに隣接して所定の領域を有するように形成されてもよい。但し、センサ領域222の配置、形状、及び大きさは例示に限定されない。例えば、他の実施形態において、センサ領域222は、第2ハウジング構造220の他のコーナーあるいは上段コーナーと下段コーナーとの間の任意の領域に提供されてもよい。一実施形態では、電子装置200に内蔵されている様々な機能を行うための部品がセンサ領域222を介して、又は、センサ領域222に備えられた1つ以上の開口を介して電子装置200の前面に露出されてもよい。様々な実施形態において、上記部品は、様々な種類のセンサを含むことができる。センサは、例えば、前面カメラ、レシーバー又は近接センサのうち少なくとも1つを含んでもよい。様々な実施形態によれば、第2ハウジング構造220でセンサ領域222は省略されるか、図示したものと異なる位置に形成されてもよい。
様々な実施形態によれば、第1ハウジング構造210及び第2ハウジング構造220の少なくとも一部は、ディスプレイ250を支持するために選択された大きさの剛性を有する金属材質や非金属材質から形成されてもよい。金属材質で形成された少なくとも一部分は、電子装置200のグランド面(ground plane)を提供することができ、フォルダブルハウジング201の内部に配置されているプリント回路基板に形成されたグランドライン(ground line)と電気的に接続されてもよい。
様々な実施形態によれば、第1後面カバー215は電子装置200の後面にフォールディング軸Aの一方に配置され、例えば、実質的に長方形である縁(periphery)を有してもよく、第1ハウジング構造210によって縁が取り囲まれる。同様に、第2後面カバー225は、電子装置200の後面のフォールディング軸Aの他方に配置され、第2ハウジング構造220によってその縁が取り囲まれる。
様々な実施形態によれば、第1後面カバー215及び第2後面カバー225は、フォールディング軸Aを中心に実質的に対称的な形状を有してもよい。但し、第1後面カバー215及び第2後面カバー225が必ず互いに対称的な形状を有することなく、他の実施形態において、電子装置200は、様々な形状の第1後面カバー215及び第2後面カバー225を含んでもよい。更なる実施形態において、第1後面カバー215は第1ハウジング構造210と一体に形成され、第2後面カバー225は第2ハウジング構造220と一体に形成されてもよい。
様々な実施形態によれば、第1後面カバー215、第2後面カバー225、第1ハウジング構造210、及び第2ハウジング構造220は、電子装置200の様々な部品(例えば、プリント回路基板、又は、バッテリ)が配置される空間を形成することができる。一実施形態によれば、電子装置200の後面には、1つ以上の部品が配置されたり視覚的に露出されたりしてもよい。例えば、第1後面カバー215の第1後面領域216を介してサブディスプレイの少なくとも一部が視覚的に露出されてもよい。他の実施形態において、第2後面カバー225の第2後面領域226を介して1つ以上の部品又はセンサが視覚的に露出されてもよい。様々な実施形態において、センサは近接センサ及び/又は後面カメラを含む。
様々な実施形態によると、センサ領域222に設けられた1つ以上の開口を介して電子装置200の前面に露出された前面カメラ、又は、第2後面カバー225の第2後面領域226を介して露出された後面カメラは、1つ又は複数のレンズ、イメージセンサ、及び/又はイメージシグナルプロセッサを含んでもよい。フラッシュは、例えば、発光ダイオード又はキセノンランプ(xenon lamp)を含んでもよい。いずいれかの実施形態において、2個以上のレンズ(赤外線カメラ、広角及び望遠レンズ)及びイメージセンサが電子装置200の一面に配置されてもよい。
図3を参照すると、ヒンジカバーは、第1ハウジング構造210と第2ハウジング構造220との間に設けられ、内部部品(例えば、ヒンジ構造230)を遮るように構成することができる。一実施形態によれば、ヒンジ構造230は、電子装置200の状態(広げられた状態(unfolded status)、中間状態(intermediate status)又は、折り畳まれた状態(folded status))により、第1ハウジング構造210及び第2ハウジング構造220の一部によって遮られるか、外部に露出される。
一実施形態によれば、図2に示すように、電子装置200が広げられた状態(例えば、完全広げられた状態(fully unfolded status))の場合、ヒンジ構造230は、第1ハウジング構造210及び第2ハウジング構造220によって遮蔽されて露出されない。異なる例として、図3に示すように、電子装置200が折り畳まれた状態(例えば、完全折り畳み状態(fully folded status))の場合、ヒンジ構造230は、第1ハウジング構造210及び第2ハウジング構造220の間で外部に露出されてもよい。更なる例として、第1ハウジング構造210及び第2ハウジング構造220が所定の角度をなしている(folded with a certain angle)中間状態(intermediate status)の場合、ヒンジ構造230は、第1ハウジング構造210及び第2ハウジング構造220の間で外部に一部露出されてもよい。但し、この場合、露出される領域は、完全に折り畳まれた状態よりも少ない。一実施形態では、ヒンジ構造230は曲面を含んでもよい。
様々な実施形態によれば、ディスプレイ250は、フォルダブルハウジング201によって形成された空間上に配置されてもよい。例えば、ディスプレイ250は、フォルダブルハウジング201により形成されるリセス上に載置し、電子装置200の前面を介して外部に見られるようにすることができる。例えば、ディスプレイ250は、電子装置200の前面のほとんどを構成してもよい。したがって、電子装置200の前面は、ディスプレイ250及びディスプレイ250に隣接している第1ハウジング構造210の一部領域及び第2ハウジング構造220の一部領域を含む。そして、電子装置200の後面は、第1後面カバー215、第1後面カバー215に隣接している第1ハウジング構造210の一部領域、第2後面カバー225、及び第2後面カバー225に隣接している第2ハウジング構造220の一部領域を含む。
様々な実施形態によれば、ディスプレイ250は、少なくとも一部領域が平面又は曲面に変形されるディスプレイを意味する。一例示的な実施形態よれば、ディスプレイ250は、フォールディング領域253、フォールディング領域253を基準にして一側(例えば、図2に示されたフォールディング領域253の左側)に配置される第1領域251、及び他側(例えば、図2に示されたフォールディング領域253の右側)に配置される第2領域252を含む。
但し、図2に示されたディスプレイ250の領域区分は例示的なものであり、ディスプレイ250は、構造又は機能により複数(例えば、4つ以上あるいは2つ)の領域に区分されてもよい。例えば、図2に示された実施形態において、フォールディング軸Aに平行するように延びるフォールディング領域253によってディスプレイ200の領域が区分されるが、他の実施形態において、ディスプレイ200は、異なるフォールディング軸(例えば、電子装置の幅方向に平行なフォールディング軸)を基準にして領域が区分されてもよい。
本開示の様々な実施形態によれば、ディスプレイ250は、タッチ検出回路、タッチの強度(圧力)を測定する圧力センサが備えられたタッチパネルと結合されたり隣接して配置されたりしてもよい。例えば、ディスプレイ250は、タッチパネルの一実施形態として、電磁共鳴(electromagnetic resonance、EMR)方式のスタイラスペンを検出するタッチパネルと結合されたり隣接して配置されたりしてもよい。
様々な実施形態によれば、第1領域251と第2領域252は、フォールディング領域253を中心に全体的に対称である形状を有してもよい。但し、第2領域252は、第1領域251とは別に、センサ領域222の存在によりカットされたノッチ(notch)を含んでもよいが、これ以外の領域では、第1領域251と対称的な形状を有してもよい。言い換えれば、第1領域251と第2領域252は互いに対称的な形状を有する部分と、互いに非対称的な形状を有する部分を含む。
様々な実施形態によれば、第1領域251と第2領域252のエッジの厚さは、フォールディング領域253のエッジの厚さと相違するように形成されてもよい。フォールディング領域253のエッジの厚さは、第1領域251及び第2領域252の厚さよりも薄く形成されてもよい。厚さの側面において、第1領域251及び第2領域252は、第1領域251及び第2領域252をその断面から見たとき非対称形状を有してもよい。例えば、第1領域251のエッジは、第1曲率半径を有するように形成され、第2領域252のエッジは、第1曲率半径とは異なる第2曲率半径を有するよう形成されてもよい。他の実施形態において、厚さの側面で、第1領域251及び第2領域252は、第1領域251及び第2領域252をその断面から見たとき対称形状を有してもよい。
以下、電子装置200の状態(例えば、折り畳まれた状態(folded status)、広げられた状態(unfolded status)、又は、中間状態(intermediate status))による第1ハウジング構造210及び第2ハウジング構造220の動作及びディスプレイ250の各領域について説明する。
様々な実施形態によれば、電子装置200が広げられた状態(unfolded status)(例えば、図2)である場合、第1ハウジング構造210及び第2ハウジング構造220は180°の角度をなして同じ方向に向かうように配置されてもよい。ディスプレイ250の第1領域251の表面と第2領域252の表面は互いに180°を形成し、同じ方向(例えば、電子装置の前面方向)に向かってもよい。フォールディング領域253は、第1領域251及び第2領域252と同じ平面を形成してもよい。
様々な実施形態によれば、電子装置200が折り畳まれた状態(folded status)(例えば、図3)である場合、第1ハウジング構造210及び第2ハウジング構造220は、互いに対向するように配置されてもよい。ディスプレイ250の第1領域251の表面と第2領域252の表面は、互いに狭い角度(例えば、0度から10度の間)を形成し、互いに対向してもよい。フォールディング領域253は、少なくとも一部が所定の曲率を有する曲面からなる。
様々な実施形態によれば、電子装置200が中間状態(intermediate status)である場合、第1ハウジング構造210及び第2ハウジング構造220は、互いに所定の角度(a certain angle)に配置されてもよい。ディスプレイ250の第1領域251の表面と第2領域252の表面は、折り畳まれた状態よりも大きく、広げられた状態よりも小さい角度を形成している。フォールディング領域253は、少なくとも一部が所定の曲率を有する曲面からなり、このときの曲率は、折り畳まれた状態(folded status)の場合よりも小さい。
図4Aは、電子装置200の完全に広げられた状態(unfolding status)を示し、図4Bは、電子装置200が一部広げられた中間状態(intermediate status)を示す。上述したように、電子装置200は、折り畳まれた状態(folded status)又は広げられた状態(unfolded status)に可変し得る。一実施形態によれば、電子装置200は、フォールディング軸方向(例えば、図2のA軸)から見たとき、電子装置200の前面が鋭角をなすように折り畳まれる「イン・フォールディング(in-folding)」と、電子装置200の前面が鈍角をなすように折り畳まれる「アウト・フォールディング(out-folding)」の2種類の方式に基づいて折り畳まれ得る。例えば、電子装置200は、イン・フォールディング方式で折り畳まれた状態(folded status)において、第1ハウジング構造210の第1面が第2ハウジング構造220の第3面に対面し、完全に広げられた状態(unfolded status)において、第1ハウジング構造210の第1面と第2ハウジング構造220の第3面は同じ方向(例えば、Z軸と平行な方向)に向かっている。
また、一例によると、電子装置200は、アウト・フォールディング方式に基づいて折り畳まれた状態において、第1ハウジング構造210の第2面が第2ハウジング構造220の第4面と対面することができる。
また、電子装置200は、図示されていないが、複数のヒンジ軸を含んでもよく(例えば、図2のA軸及びA軸と平行な他の軸を含む2つの互いに平行なヒンジ軸)、この場合、電子装置200は、イン・フォールディングとアウト・フォールディング方式が組み合せわせられた「マルチフォールディング」方式で折り畳まれてもよい。
イン・フォールディング方式は、完全折り畳み状態(fully folded status)でディスプレイ250が外部に露出されない状態を意味する。アウト・フォールディング方式は、完全折り畳み状態(fully folded status)でディスプレイ250が外部に露出された状態を意味する。図4Bは、電子装置200がイン・フォールディングされた過程で、一部広げられた中間状態(intermediate status)を示す。
以下では、便宜上、電子装置200がイン・フォールディング方式により折り畳まれた状態を中心に説明したが、このような説明は、電子装置200がアウト・フォールディング方式で折り畳まれる状態にも準用され得ることを留意しなければならない。
図5は、様々な実施形態によるディスプレイモジュール160のブロック図500である。
図5を参照すると、ディスプレイモジュール160(例えば、図1のディスプレイモジュール160)は、ディスプレイ510(例えば、図2のディスプレイ250)、及びこれを制御するためのディスプレイドライバIC(DDI)530を含む。DDI530は、インターフェースモジュール(例えば、インターフェース回路を含む)531、メモリ533(例えば、バッファメモリ)、イメージ処理モジュール(例えば、様々なプロセッシング及び/又は実行可能なプログラム命令を含む)535、又は、マッピングモジュール(例えば、様々なプロセッシング回路及び/又は実行可能なプログラム命令を含む)537を含む。DDI530は、例えば、映像データ、又は、映像データを制御するための命令に対応する映像制御信号を含む映像情報を、インターフェースモジュール531を介して電子装置(例えば、図1の電子装置101又は図2~図4Bの電子装置200)の他の構成要素から受信することができる。例えば、映像情報は、メインプロセッサ(例えば、図1のメインプロセッサ121又はアプリケーションプロセッサ)又はメインプロセッサの機能と独立的に運営される補助プロセッサ(例えば、図1の補助プロセッサ123又はグラフィック処理装置)から受信されてもよい。DDI530は、タッチ回路550又はセンサモジュール(例えば、少なくとも1つのセンサを含む)176(例えば、図1のセンサモジュール176)などとインターフェースモジュール531を介してコミュニケーションすることができる。また、DDI530は、受信された映像情報のうち少なくとも一部をメモリ533に、例えば、フレーム単位に格納してもよい。イメージ処理モジュール535は、例えば、映像データの少なくとも一部を映像データの特性又はディスプレイ510の特性に少なくとも基づいて前処理又は後処理(例えば、解像度、明るさ、又は、大きさ調整)を行ってもよい。マッピングモジュール537は、イメージ処理モジュール535を介して前処理又は後処理された映像データに対応する電圧値又は電流値を生成することができる。一実施形態によれば、電圧値又は電流値の生成は、例えば、ディスプレイ510のピクセルの属性(例えば、ピクセルの配列(RGB stripe又はpentile構造)又はサブピクセルそれぞれの大きさ)に少なくとも一部に基づいて実行されてもよい。ディスプレイ510の少なくとも一部のピクセルは、例えば、電圧値又は電流値に少なくとも一部に基づいて駆動することで、映像データに対応する視覚的情報(例えば、テキスト、イメージ、又は、アイコン)がディスプレイ510を介して表示され得る。
一実施形態によれば、ディスプレイモジュール160は、タッチ回路550をさらに含んでもよい。タッチ回路550は、タッチセンサ551及びこれを制御するためのタッチセンサIC553を含む。タッチセンサIC553は、例えば、ディスプレイ510の特定位置に対するタッチ入力又はホバーリング入力を検出するためにタッチセンサ551を制御することができる。例えば、タッチセンサIC553は、ディスプレイ510の特定位置に対する信号(例えば、電圧、光量、抵抗、又は、電荷量)の変化を測定することで、タッチ入力又はホバーリング入力を検出してもよい。タッチセンサIC553は、検出されたタッチ入力又はホバーリング入力に関する情報(例えば、位置、面積、圧力、又は、時間)をプロセッサ(例えば、図1のプロセッサ120)に提供することができる。一実施形態によれば、タッチ回路550の少なくとも一部(例えば、タッチセンサIC553)は、ディスプレイドライバIC530、又は、ディスプレイ510の一部、又は、ディスプレイモジュール160の外部に配置された異なる構成要素(例えば、補助プロセッサ123)の一部として含まれてもよい。
一実施形態によれば、ディスプレイモジュール160は、センサモジュール176の少なくとも1つのセンサ(例えば、指紋センサ、紅彩センサ、圧力センサ、又は照度センサ)、又は、これに対する制御回路をさらに含む。この場合、少なくとも1つのセンサ又はこれに対する制御回路は、ディスプレイモジュール160の一部(例えば、ディスプレイ510又はDDI530)又はタッチ回路550の一部に埋め込まれてもよい。例えば、ディスプレイモジュール160に埋め込まれたセンサモジュール176が生体センサ(例えば、指紋センサ)を含む場合、生体センサは、ディスプレイ510の一部領域を介してタッチ入力に関連する生体情報(例えば、指紋イメージ)を取得することができる。他の例として、ディスプレイモジュール160に埋め込まれたセンサモジュール176が圧力センサを含む場合、圧力センサは、ディスプレイ510の一部又は全体領域を介してタッチ入力に関連する圧力情報を取得することができる。一実施形態によれば、タッチセンサ551又はセンサモジュール176は、ディスプレイ510のピクセルレイヤのピクセルの間に、又は、ピクセルレイヤの上方又は下方に配置されてもよい。
図6は、様々な実施形態による画面制御動作を行う電子装置101の構成図である。
図6を参照すると、一実施形態による電子装置101(例えば、図1の電子装置101又は図2~図4Bの電子装置200)は、ディスプレイ610(例えば、図1のディスプレイモジュール160、図2のディスプレイ250、図4A及び図4Bのディスプレイ250又は図5のディスプレイモジュール160)及びプロセッサ(例えば、プロセッシング回路を含む)120(例えば、図1のプロセッサ120)を含む。一実施形態によるディスプレイ610は画面を出力し、プロセッサ120は、ディスプレイ610と作動的に結合してディスプレイ610に表示される画面を制御することができる。
一実施形態による電子装置101のディスプレイ610に表示される画面は、少なくとも1つのウィンドウを含む。ウィンドウは、電子装置101の機能実行による情報が出力される一定領域であってもよい。ここで、情報は、機能実行に関する様々な画面要素を含んでもよい。例えば、情報はテキスト、静止画又は動画イメージ、アイコン、仮想キーボタン、スライドバー、進行バー、リスト項目、サムネイル項目などのさまざまなアイテムのうち少なくとも1つを含んでもよい。
一実施形態によれば、ウィンドウは電子装置101によって駆動するプログラム(例えば、図1のプログラム140)あるいはアプリケーション(以下、アプリ)(例えば、図1のアプリケーション146)の実行ウィンドウを含む。アプリの実行ウィンドウは、電子装置101で駆動するアプリが実行されることにより出力される画面が表示されるディスプレイ610の一定領域である。以下で、ディスプレイ610に表示される画面に含まれているウィンドウは、アプリの実行ウィンドウであるものを例にして説明する。
電子装置101のプロセッサ120は、ディスプレイ610を介して1つ以上のアプリの実行ウィンドウを表示するマルチウィンドウ機能をサポートすることができる。一例として、マルチウィンドウ機能は、ポップアップウィンドウ及び/又はスプリットウィンドウを用いて具現されてもよい。
ポップアップウィンドウは、ホーム画面あるいは特定アプリ(例えば、第1アプリ)の実行ウィンドウを含む画面上にオーバーレイされた他のアプリ(例えば、第2アプリ)の実行ウィンドウである。例えば、図7Aを参照すると、ホーム画面701の上位レイヤに第1アプリの実行ウィンドウを含む第1画面702が表示されてもよい。第1アプリの実行ウィンドウは、第1画面702に全体画面の形態に表示されてもよい。第1画面702の上位レイヤに第2アプリの実行ウィンドウがポップアップウィンドウ703に表示されてもよい。
スプリットウィンドウは、画面を分割して生成された画面内の一部領域に表示されるアプリの実行ウィンドウである。分割画面は、複数のスプリットウィンドウを含んでもよく、分割画面のレイアウトにより複数のスプリットウィンドウが画面内に配置されてもよい。分割画面に含まれた複数のスプリットウィンドウは、レイヤレベルが同一であってもよい。例えば、図7Bを参照すると、ホーム画面711の上位レイヤに2つのスプリットウィンドウを含む分割画面712が表示されてもよい。分割画面712の各領域には、第1アプリの実行ウィンドウ及び第2アプリの実行ウィンドウがスプリットウィンドウの形態に表示されてもよい。分割画面712の上位レイヤに第3アプリの実行ウィンドウがポップアップウィンドウ713に表示されてもよい。
再び図6を参照すると、一実施形態によるプロセッサ120は、ディスプレイ610に表示される画面(例えば、第1アプリのウィンドウを含む第1画面あるいは複数のアプリの実行ウィンドウを含む分割画面)内にトリガー領域を確認することができる。トリガー領域は、画面のレイアウトの再調整可否を判断するための画面内の予め指定された領域であって、例えば、画面上段の一部領域、画面下段の一部領域、画面左側の一部領域及び/又は画面右側の一部領域がトリガー領域に指定されてもよい。また、一実施形態によれば、トリガー領域に代わって、トリガーラインを用いて画面のレイアウトの再調整の有無が判断されてもよい。例えば、電子装置101は、上述されたトリガー領域の1つ又は少なくとも2つの境界線をトリガーラインに指定して用いてもよい。トリガー領域の意味又は役割は、トリガーラインを用いて代替され得る。後述される実施形態では、説明の便宜のために、画面分割のためのトリガー領域に基づいて例示したが、これに限定されることなく、トリガーラインに基づいて動作及び実現されることに留意しなければならない。
一実施形態によれば、トリガー領域は、画面のレイアウトに基づいて確認(又は、決定)できる。一例として、画面が分割画面であるか否か及び/又は画面が分割された方向に基づいてトリガー領域が確認されてもよい。例えば、図8Aを参照すると、画面が分割画面でない1つのアプリの実行ウィンドウを含む画面である場合、画面の上段、下段、左側及び右側の一部領域がトリガー領域に指定されてもよい。図8Bを参照すると、画面が複数のウィンドウを含む分割画面であり、分割方向が左右である場合、上段及び下段の一部領域がトリガー領域に指定されてもよい。図8Cを参照すると、画面が分割画面であり、分割方向が上下である場合、左側及び右側の一部領域がトリガー領域として指定されてもよい。また、各トリガー領域の境界である少なくとも1つのトリガーラインが指定されてもよい。
再び図6を参照すると、一実施形態によるポップアップウィンドウは、ディスプレイ610又は電子装置101の入力装置を介して入力されるユーザの入力によって位置が制御され得る。例えば、ポップアップウィンドウをドラッグするユーザの入力により画面内でポップアップウィンドウの位置がドラッグ位置に対応して制御されてもよい。以下、ポップアップウィンドウの位置を制御するユーザの入力は、第1ユーザ入力と称される。
一実施形態によれば、第1ユーザ入力は、ポップアップウィンドウ内のハンドル領域を制御する入力を含む。ハンドル領域は、ポップアップウィンドウの一部領域に該当し、ポップアップウィンドウの制御に関する領域に該当する。一例として、ハンドル領域は、ポップアップウィンドウ内のポップアップウィンドウの位置制御に関して所定の領域を含んでもよい。ハンドル領域の所定の領域は、予め設定された大きさ及び形状を有し、ポップアップウィンドウ内に配置される位置を有することができる。例えば、ポップアップウィンドウの上段の一部領域に指定され、ハンドル領域は、視覚的標識(又は、指示子)としてディスプレイを介して表示され得る。ここで、視覚的標識は様々な形態に表示されるが、例えば、視覚的標識の表示領域がハンドル領域と実質的に一致するディスプレイの領域に表示されてもよく、視覚的標識の表示領域は、ハンドル領域と一致しなくても少なくとも一部が重なるように表示されてもよい。例えば、図8Aを参照すると、画面内の一部領域がハンドル領域801に指定され、ディスプレイを介してbar状にハンドル領域801が表示されてもよい。ハンドル領域801は、画面内に表示されたbarに対応する特定のライン又は画面内に表示されたbarを含む特定の領域に該当する。図8Bを参照すると、ディスプレイに複数のアプリの実行ウィンドウを含む分割ウィンドウが表示された場合、各実行ウィンドウの一部領域がハンドル領域802、803に指定され、各実行ウィンドウ上にbar状にハンドル領域802、803が表示されてもよい。
また、一例として、ハンドル領域は、ポップアップウィンドウ内の第1ユーザ入力が受信される領域に基づいて決定されてもよい。例えば、ポップアップウィンドウをタッチする第1ユーザ入力が受信された場合、ポップアップウィンドウ内のタッチ入力が受信された一部領域(又は、ポイント)がハンドル領域(又は、ハンドルポイント)に決定されてもよい。また、第1ユーザ入力に対応するタッチ入力の中心点又はタッチ入力が受信された一部領域のうち、いずれか一点がハンドルポイントとしてハンドル領域に代替されてもよい。また、ハンドル領域は、予め設定された大きさ及び形状を有するが、ハンドル領域の位置は、第1ユーザ入力が受信される前まで決定されないものであってもよい。例えば、ポップアップウィンドウをタッチする第1ユーザ入力に対応するタッチ入力が受信された一部領域(又は、ポイント)が予め設定された大きさ及び形状を有するハンドル領域の一定位置(一例として、中心)にあるよう、ハンドル領域の位置が指定されてもよい。ここで、第1ユーザ入力のドラッグ移動によりタッチ位置に合わせてハンドル領域とポップアップウィンドウが移動されたものである。一例として、図8Cを参照すると、ディスプレイに表示された第1アプリの実行ウィンドウB上の特定領域をタッチする第1ユーザ入力により、タッチ入力が受信された特定領域がハンドル領域804に指定され、指定されたハンドル領域804の位置を表示するためのバー状の視覚的標識が第1アプリの実行ウィンドウB上に表示されてもよい。以下、説明の便宜のために、ハンドル領域はポップアップウィンドウの上段の予め決定された一部の領域である場合を例にして説明する。
一実施形態によれば、プロセッサ120は、決定されたトリガー領域の少なくとも一部がポップアップウィンドウによってオーバーレイされるか否かを検出することができる。言い換えれば、ポップアップウィンドウが表示されるディスプレイ内の領域のうち少なくとも一部とトリガー領域に該当するディスプレイ内の少なくとも一部とが重なる場合、プロセッサ120は、トリガー領域の少なくとも一部がポップアップウィンドウによりオーバーレイされたものと検出することができる。ポップアップウィンドウの位置を制御する第1ユーザ入力に基づいて、ポップアップウィンドウの位置が画面内に変更され、プロセッサ120は、ポップアップウィンドウによってトリガー領域の少なくとも一部がオーバーレイされるか否かを検出することができる。
一例として、プロセッサ120は、スイッチモードでトリガー領域のオーバーレイの有無を検出することができる。スイッチモードは、ポップアップウィンドウを配置するために画面のレイアウトを変更する動作が実行されるモードであり、スイッチモードの実行を要求するユーザの入力に反応して実行される。スイッチモードの実行を要求するユーザの入力は、第1ユーザ入力とは区分される入力に予め定義されてもよい。例えば、ポップアップウィンドウのハンドル領域を長く押す入力が、スイッチモードの実行を要求する入力のように定義され、ポップアップウィンドウのハンドル領域を長く押す入力が受信された場合、スイッチモードが実行される。
一実施形態によれば、プロセッサ120は、トリガー領域の少なくとも一部がポップアップウィンドウによってオーバーレイされることを検出した場合、ポップアップウィンドウによりオーバーレイされたトリガー領域の位置及びハンドル領域と画面のレイアウトのディバイダーの相対的位置のうち少なくとも1つに基づいて画面のレイアウトを調整できる。画面のレイアウトを調整する動作は画面を分割し、分割された画面の各領域にウィンドウを配置する動作及び/又は画面に含まれた少なくとも1つのウィンドウのうち縮小されるウィンドウを決定し、ウィンドウの縮小方向を決定する動作を含む。
一実施形態によれば、プロセッサ120は、ポップアップウィンドウによってオーバーレイされたトリガー領域の位置に基づいて、第1アプリの実行ウィンドウを含む画面を分割することができる。オーバーレイされたトリガー領域の位置は、オーバーレイされたトリガー領域の画面内の位置を意味し、例えば、オーバーレイされたトリガー領域が画面の上段に位置するか、下段に位置するか、左側に位置するか、あるいは右側に位置するかを意味する。一例として、プロセッサ120は、オーバーレイされたトリガー領域の位置に基づいて画面の分割方向を決定し、決定された分割方向に画面を分割することができる。プロセッサ120は、複数の領域を含むように画面を分割し、複数の領域のうちポップアップウィンドウが位置する領域を表示することができる。オーバーレイされたトリガー領域の位置に基づいて画面を分割する具体的な動作については、以下の図9及び10を参照して説明する。
一実施形態によれば、プロセッサ120は、ポップアップウィンドウによってオーバーレイされたトリガー領域の位置及びハンドル領域とレイアウトのディバイダーの相対的位置のうち少なくとも1つに基づいて、分割画面のレイアウトを変更することができる。分割画面のレイアウトは、画面を分割する基準線であるディバイダーを含む。分割画面は、ディバイダーによって分割された複数の領域を含んでもよい。一例として、プロセッサ120は、オーバーレイされたトリガー領域の位置に基づいて、分割画面に含まれたウィンドウの縮小方向を決定することができる。また、一例として、ハンドル領域とレイアウトのディバイダーの相対的位置に基づいて、分割画面に含まれたウィンドウのうち、縮小される少なくとも1つのウィンドウを決定することができる。プロセッサ120は、縮小されるウィンドウに決定されたウィンドウを決定された縮小方向に縮小することで分割画面のレイアウトを変更することができ、変更された分割画面のレイアウトに基づいて分割画面内のポップアップウィンドウが位置する領域を表示することができる。一例として、少なくとも1つのウィンドウが縮小されることにより分割画面に新しい領域が生成され、分割画面に生成された新しい領域が、ポップアップウィンドウが位置する領域に表示されてもよい。オーバーレイされたトリガー領域の位置及びハンドル領域とレイアウトのディバイダーの相対的位置のうち少なくとも1つに基づいて分割画面のレイアウトを調整する具体的な動作については、以下の図11A~図14を参照して説明する。
一実施形態によれば、プロセッサ120は、ポップアップウィンドウの位置を決定する第2ユーザ入力に基づいて、ディスプレイ610に表示される画面(例えば、第1アプリのウィンドウを含む第1画面あるいは複数のアプリの実行ウィンドウを含む分割画面)内のポップアップウィンドウが位置する領域にポップアップウィンドウを配置することができる。例えば、第1ユーザ入力がポップアップウィンドウをドラッグする入力である場合、第2ユーザ入力は、ポップアップウィンドウをリリースする入力である。
一実施形態によれば、ポップアップウィンドウが特定画面に配置される場合、配置された画面のレイヤレベルと同じレイヤレベルに変更されてもよい。一例として、ポップアップウィンドウが第1アプリのウィンドウを含む第1画面に配置されている場合、ポップアップウィンドウに表示された第2アプリの実行ウィンドウのレイヤレベルは、第1画面に含まれた第1アプリの実行ウィンドウのレイヤレベルと同一に変更されてもよい。また、一例として、ポップアップウィンドウが複数のアプリの実行ウィンドウを含む分割画面に配置されている場合、ポップアップウィンドウに表示されたアプリの実行ウィンドウのレイヤレベルは、分割画面に含まれたアプリの実行ウィンドウのレイヤレベルと同一に変更されてもよい。
一実施形態によれば、電子装置101は、画面を出力するディスプレイ610及びディスプレイ610と作動的に結合し、ディスプレイ610に表示される画面を制御するプロセッサ120を含み、プロセッサ120は、駆動する第1アプリの実行ウィンドウを含む画面内のトリガー領域を確認し、画面の上位レイヤに表示されるポップアップウィンドウの位置を制御する第1ユーザ入力に基づいて、トリガー領域の少なくとも一部がポップアップウィンドウによってオーバーレイされることを検出し、オーバーレイされたトリガー領域の位置に基づいて、第1アプリの実行ウィンドウを含む画面を分割し、分割された画面内のポップアップウィンドウが位置する領域を表示することができる。
一実施形態によるプロセッサ120は、画面を分割することにおいてオーバーレイされたトリガー領域の位置に基づいて画面の分割方向を決定し、決定された分割方向に基づいて画面を分割することができる。
一実施形態によれば、電子装置101は、画面を出力するディスプレイ610及びディスプレイ610と作動的に結合し、ディスプレイ610に表示される画面を制御するプロセッサ120を含み、プロセッサ120は、ディスプレイ610に表示される分割画面のレイアウトに基づいて分割画面内のトリガー領域を確認し、分割画面の上位レイヤに表示されるポップアップウィンドウ内のハンドル領域を制御する第1ユーザ入力に基づいて、トリガー領域の少なくとも一部がポップアップウィンドウによりオーバーレイされることを検出し、ポップアップウィンドウによってオーバーレイされたトリガー領域の位置及びハンドル領域とレイアウトのディバイダーの相対的位置のうち少なくとも1つに基づいて分割画面のレイアウトを変更し、変更された分割画面のレイアウトに基づいて、分割画面内のポップアップウィンドウが位置する領域を表示することができる。
一実施形態によるプロセッサ120は、分割画面のレイアウトを変更することにおいて、ポップアップウィンドウによってオーバーレイされたトリガー領域の位置に基づいて分割画面に含まれているウィンドウの縮小方向を決定し、ハンドル領域とレイアウトのディバイダーの相対的位置に基づいて、分割画面に含まれたウィンドウのうち縮小される少なくとも1つのウィンドウを決定することができる。
図9~図15Bは、一実施形態によるプロセッサで実行される電子装置のディスプレイに表示される画面制御方法の少なくとも1つの動作を説明するための図である。例えば、図9~図15Bにおいて、電子装置は図1の電子装置101、図2~図4Bの電子装置200、又は図6の電子装置101に対応し、ディスプレイは、図1のディスプレイモジュール160、図2のディスプレイ250、図4A及び図4Bのディスプレイ250、図5のディスプレイモジュール160又は図6のディスプレイ610に対応し、プロセッサは、図1のプロセッサ120又は図6のプロセッサ120に対応する。
図9は、様々な実施形態による画面を分割する動作を説明するための図である。
図9を参照すると、一実施形態による電子装置のディスプレイに表示される画面910は、電子装置によって駆動する第1アプリの実行ウィンドウを含む画面及び第1アプリの実行ウィンドウを含む画面上位レイヤに表示されるポップアップウィンドウを含む。以下、第1アプリの実行ウィンドウを含む画面は第1画面と称する。一例として、第1アプリの実行ウィンドウは、第1画面に全体画面に表示されてもよい。一例として、ポップアップウィンドウは、第2アプリの実行ウィンドウに該当する。上述したように、第1画面の一部領域は、トリガー領域に決定されてもよい。
上述したように、ポップアップウィンドウの位置を制御する第1ユーザ入力に基づいて、ポップアップウィンドウの位置が変更され得る。一例として、ポップアップウィンドウの位置を制御する第1ユーザ入力は、ハンドル領域901をタッチしてドラッグする第1ユーザ入力を含んでもよく、ハンドル領域901をドラッグする第1ユーザ入力によって画面内でポップアップウィンドウの位置が変更されてもよい。第1ユーザ入力によりハンドル領域901が右側にドラッグ移動する場合、ポップアップウィンドウの位置は画面920と共に変更され、第1ユーザ入力によってハンドル領域901が上側にドラッグ移動する場合、ポップアップウィンドウの位置は画面930のように変更される。第1ユーザ入力に基づいて、ポップアップウィンドウの位置が画面920あるいは画面930のように変更された場合、ポップアップウィンドウの一部領域がトリガー領域の一部領域と重複するため、プロセッサは、トリガー領域の少なくとも一部がポップアップウィンドウによってオーバーレイされることを検出することができる。
トリガー領域がポップアップウィンドウによってオーバーレイされた場合、プロセッサは、第1画面を分割することができる。画面の分割方向は、オーバーレイされたトリガー領域の第1画面内の位置に基づいて決定されてもよい。例えば、画面920に示すように、オーバーレイされたトリガー領域の位置が第1画面の右側に該当する場合、分割方向は左右方向に決定されてもよい。また、例えば、画面930に示すように、オーバーレイされたトリガー領域の位置が第1画面の上段に該当する場合、第1画面の分割方向は上下方向に決定されてもよい。図9に示されていないが、オーバーレイされたトリガー領域の位置が第1画面の左側に該当する場合、第1画面の分割方向は左右方向に決定され、オーバーレイされたトリガー領域の位置が第1画面の下段に該当する場合、第1画面の分割方向は上下方向に決定されてもよい。
第1画面は決定された分割方向に分割され、第1画面に含まれている領域の数が増加し得る。第1画面が分割されることにより、第1画面に予め含まれている第1アプリの実行ウィンドウは、分割された領域のいずれか1つである第1領域に配置され、分割された画面のうち第1領域以外の領域である第2領域は、ポップアップウィンドウが位置する領域に表示されてもよい。第1アプリの実行ウィンドウが配置される領域は、ポップアップウィンドウによってオーバーレイされたトリガー領域の位置に基づいて決定され得る。
例えば、画面940を参照するとオーバーレイされたトリガー領域の位置が右側に該当する場合、第1アプリの実行ウィンドウは左右で分割された領域のうち左側領域に決定され、右側領域はポップアップウィンドウが位置する領域に表示されてもよい。図9に示されてはいないが、オーバーレイされたトリガー領域の位置が左側に該当する場合、第1アプリの実行ウィンドウは左右で分割された領域のうち右側領域に決定され、左側領域はポップアップウィンドウが位置する領域に表示されてもよい。
また、例えば、画面950を参照すると、オーバーレイされたトリガー領域の位置が上段に該当する場合、第1アプリの実行ウィンドウは上下に分割された領域のうち下段領域に決定され、上段領域は、ポップアップウィンドウが位置する領域に表示されてもよい。図9に示されていないが、オーバーレイされたトリガー領域の位置が下段に該当する場合、第1アプリの実行ウィンドウは、上下に分割された領域のうち上段領域に決定され、下段領域はポップアップウィンドウが位置する領域に表示されてもよい。
一実施形態によれば、ポップアップウィンドウの位置を決定する第2ユーザ入力が受信された場合、画面960又は画面970のように第1画面内のポップアップウィンドウが位置する領域にポップアップウィンドウを配置することができる。より具体的に、ポップアップウィンドウを第1画面に配置する動作は、ポップアップウィンドウに表示された第2アプリの実行ウィンドウを第1画面に配置し、ポップアップウィンドウを削除する動作を含む。
例えば、第1ユーザ入力がポップアップウィンドウをドラッグする入力である場合、第2ユーザ入力は、ポップアップウィンドウをリリースする入力に該当する。ポップアップウィンドウが第1画面に配置される場合、ポップアップウィンドウに表示された第2アプリの実行ウィンドウのレイヤレベルが、第1画面に含まれている第1アプリの実行ウィンドウのレイヤレベルと同一に変更されてもよい。
図10は、様々な実施形態による電子装置のディスプレイに表示される画面制御方法の動作フローチャートである。
図10を参照すると、一実施形態による電子装置のディスプレイに表示される画面制御方法は、電子装置によって駆動する第1アプリの実行ウィンドウを含む画面内のトリガー領域を確認する動作1010、画面上位レイヤに表示されるポップアップウィンドウの位置を制御する第1ユーザ入力に基づいて、トリガー領域の少なくとも一部がポップアップウィンドウによってオーバーレイされることを検出する動作1020、オーバーレイされたトリガー領域の位置に基づいて、第1アプリの実行ウィンドウを含む画面を分割する動作1030、及び分割された画面内のポップアップウィンドウが位置する領域を表示する動作1040を含む。
一実施形態による画面を分割する動作1030は、オーバーレイされたトリガー領域の位置に基づいて、画面の分割方向を決定する動作及び決定された分割方向に基づいて画面を分割する動作を含む。
一実施形態によるポップアップウィンドウが位置する領域を表示する動作1040は、オーバーレイされたトリガー領域の位置に基づいて、分割された画面内の第1領域に第1アプリの実行ウィンドウを配置する動作及び分割された画面内の第2領域をポップアップウィンドウが位置する領域に表示する動作を含む。
一実施形態によれば、画面は電子装置によって駆動する第1アプリの実行ウィンドウを含んでもよく、ポップアップウィンドウは、電子装置によって駆動する第2アプリの実行ウィンドウを含んでもよい。
図11A~図11Dは、一実施形態による分割画面に含まれたウィンドウの縮小方向を決定する動作を説明するための図である。
図11Aを参照すると、一実施形態による電子装置のディスプレイに表示される画面1110は、少なくとも1つのアプリの実行ウィンドウを含む分割画面1111及び分割画面1111の上位レイヤに表示されるポップアップウィンドウ1112を含む。一例として、分割画面1111は、第1アプリの実行ウィンドウ及び第2アプリの実行ウィンドウを含む。一例として、ポップアップウィンドウ1112は、第3アプリの実行ウィンドウに該当する。
上述したように、ポップアップウィンドウ1112の位置を制御する第1ユーザ入力に基づいてポップアップウィンドウ1112の位置が変更され、例えば、ポップアップウィンドウ1112は、ハンドル領域1101を分割画面1111の上側にドラッグする第1ユーザ入力により分割画面1111の上段に位置が変更されてもよい。電子装置のプロセッサ(例えば、図1のプロセッサ120又は図6のプロセッサ120)は、トリガー領域の少なくとも一部がポップアップウィンドウ1112によってオーバーレイされるか否かを検出することができる。トリガー領域の少なくとも一部がポップアップウィンドウによってオーバーレイされた場合、プロセッサは、オーバーレイされたトリガー領域の位置に基づいて、分割画面に含まれたウィンドウの縮小方向を決定することができる。一例として、分割画面に含まれているウィンドウの縮小方向は、オーバーレイされたトリガー領域の分割画面内の位置とは反対方向に決定されてもよい。例えば、ポップアップウィンドウ1112によりオーバーレイされたトリガー領域の位置が分割画面1111の上段に該当する場合、分割画面1111に含まれているウィンドウの縮小方向は、下方向に決定される。
図11Bを参照すると、ポップアップウィンドウ1122は、ハンドル領域1102を分割画面1121の下方にドラッグする第1ユーザ入力により分割画面1121の下段に位置変更されてもよい。ポップアップウィンドウ1122によりオーバーレイされたトリガー領域の位置が分割画面1121の下段に該当する場合、分割画面1121に含まれているウィンドウの縮小方向は上方に決定される。
図11Cを参照すると、ポップアップウィンドウ1132は、ハンドル領域1103を分割画面1131の左側にドラッグする第1ユーザ入力により分割画面1131の左側に位置変更されてもよい。ポップアップウィンドウ1132によりオーバーレイされたトリガー領域の位置が分割画面1131の左側に該当する場合、分割画面1131に含まれているウィンドウの縮小方向は右側方向に決定される。
図11Dを参照すると、ポップアップウィンドウ1142は、ハンドル領域1104を分割画面1141の右側にドラッグする第1ユーザ入力により分割画面1141の右側に位置変更されてもよい。ポップアップウィンドウ1142によりオーバーレイされたトリガー領域の位置が分割画面1141の右側に該当する場合、分割画面1141に含まれているウィンドウの縮小方向は左側方向に決定される。
図12A~図12Cは、一実施形態による分割画面に含まれたウィンドウのうち縮小されるウィンドウを決定する動作を説明するための図である。
上述したように、ディバイダーは画面を分割する基準線であって、例えば、図12Aに示されている線1201、図12Bに示された線1202、及び図12Cに示されている線1203が分割画面のレイアウトのディバイダーに該当する。
一実施形態によれば、ハンドル領域とディバイダーの相対的位置に基づいて、分割画面に含まれたウィンドウのうち、縮小されるウィンドウが決定されてもよい。上述したように、ハンドル領域はポップアップウィンドウの一部領域に該当し、ポップアップウィンドウの制御に関する領域に該当する。ハンドル領域は、ポップアップウィンドウ内に予め決定された領域に決定されてもよく、ポップアップウィンドウ内の第1ユーザ入力が受信される領域に基づいて決定されてもよい。ポップアップウィンドウのハンドル領域とディバイダーとの間の相対的位置は、ハンドル領域がディバイダーを基準にしていずれの方向に位置するか、ハンドル領域がディバイダーと画面内のx座標又はy座標上にどれほど離れているかに基づいて決定され得る。一例として、ハンドル領域に含まれている基準ポイントの位置に基づいて、ディバイダーとの相対的位置が判断され得る。
例えば、図12Aを参照すると、画面1210の左側上段を(0,0)にし、右側下段を(W、H)にするxy平面に画面1210を示す場合、ハンドル領域のx座標がディバイダー1201のx座標よりどれほど小さいか、又はどれほど大きいかに応じて、縮小されるウィンドウが決定されてもよい。一例として、プロセッサは、ハンドル領域のx座標が0以上及びディバイダー1201のx座標-a(例えば、aは0よりも大きい予め決定された任意の定数)未満であれば、ウィンドウ1211を縮小されるウィンドウとして決定し、ディバイダー(1201)のx座標-a以上及びディバイダー(1201)のx座標+a未満であれば、ウィンドウ1211及びウィンドウ1212を縮小されるウィンドウとして決定し、ディバイダー1201のx座標+a以上であれば、ウィンドウ1212を縮小されるウィンドウとして決定してもよい。図12Aに図示されているものとは異なり、上下に分割された分割画面の場合、プロセッサは、ディバイダーのy座標とハンドル領域のy座標とを比較して縮小されるウィンドウを決定することができる。
例えば、aの値は任意の固定値に決定されてもよく、画面の幅又は高さに基づいて決定されてもよく、ユーザのタッチ入力が受信されるタッチ領域の大きさに基づいて決定されてもよい。
一実施形態によれば、レイアウトのディバイダーを基準にして決定された細部トリガー領域にハンドル領域の位置が含まれているか否かに基づいて、分割画面のうち縮小される少なくとも1つのウィンドウが決定されてもよい。トリガー領域は、ディバイダーを基準にして細部トリガー領域に区分され得る。例えば、図12Bを参照すると、トリガー領域は、画面を左右に分割するディバイダー1202を基準にして3個の細部トリガー領域1221,1222,1223に区分されてもよい。トリガー領域は、ディバイダー1202を中央に含む予め決定された長さの細部トリガー領域1222と、細部トリガー領域1222あるいはディバイダー1202の左側及び右側に位置する細部トリガー領域1221,1223に区分することができる。ハンドル領域の位置がディバイダー1202の左側に位置する細部トリガー領域1221に含まれている場合、ディバイダー1202の左側に位置するウィンドウ1213が縮小されるウィンドウとして決定され、ディバイダー1202を含む細部トリガー領域1222に含まれる場合、ウィンドウ1213及びウィンドウ1214が縮小されるウィンドウとして決定され、ディバイダー1202の右側に位置する細部トリガー領域1223に含まれている場合、ディバイダー1202の右側に位置するウィンドウ1214が縮小されるウィンドウとして決定されてもよい。
また、例えば、図12Cを参照すると、トリガー領域は、画面を上下に分割するディバイダー1203を基準にして3つの細部トリガー領域1224,1225,1226に区分されてもよい。トリガー領域は、ディバイダー1203を中央に含む予め決定された長さの細部トリガー領域1225と、細部トリガー領域1225あるいはディバイダー1203の上側及び下側に位置する細部トリガー領域1224,1226に区分される。ハンドル領域の位置がディバイダー1203の上側に位置する細部トリガー領域1224に含まれている場合、ディバイダー1203の上側に位置するウィンドウ1215が縮小されるウィンドウとして決定され、ディバイダー1203を含む細部トリガー領域1225に含まれている場合、ウィンドウ1215及びウィンドウ1216が縮小されるウィンドウとして決定され、ディバイダー1203の下側に位置する細部トリガー領域1226に含まれている場合、ディバイダー1203の下側に位置するウィンドウ1216が縮小されるウィンドウとして決定されてもよい。
例えば、ディバイダーを中央に含む細部トリガー領域の長さは任意の固定値に決定されてもよく、画面の幅又は高さに基づいて決定されてもよく、ユーザのタッチ入力が受信されるタッチ領域の大きさに基づいて決定されてもよい。
図13A~図13Cは、様々な実施形態による分割画面のレイアウトを変更してポップアップウィンドウの位置を表示する動作を説明するための図である。
一実施形態によれば、プロセッサは縮小方向及び縮小されるウィンドウが決定された場合、決定された縮小方向に決定された縮小されるウィンドウを縮小することで、ポップアップウィンドウが位置する新しいウィンドウの領域を生成することができる。
例えば、図13Aは図12Bに示す上段のトリガー領域がポップアップウィンドウによってオーバーレイされ、細部トリガー領域1221にポップアップウィンドウのハンドル領域が位置している場合、分割画面の変更されたレイアウトを示す。図11Aを参照して上述したように、ポップアップウィンドウによりオーバーレイされたトリガー領域の位置が分割画面の上段に該当する場合、縮小方向は下方向に決定され、及び図12Bを参照して上述したように、ポップアップウィンドウのハンドル領域の位置がディバイダーを基準にして左側に位置する細部トリガー領域に含まれている場合、ディバイダーを基準にして左側に位置するウィンドウが縮小されるウィンドウとして決定されてもよい。図13Aを参照すると、縮小されるウィンドウとして決定された第1アプリの実行ウィンドウが、縮小方向に決定された下方向に縮小されることにより、縮小された第1アプリの実行ウィンドウの上側にポップアップウィンドウが位置する新しい領域が生成され得る。
また、例えば、図13Bを参照すると、図12Bに示す上段のトリガー領域がポップアップウィンドウによってオーバーレイされ、細部トリガー領域1222にポップアップウィンドウのハンドル領域が位置している場合、分割画面の変更されたレイアウトを示す。この場合、第1アプリの実行ウィンドウ及び第2アプリの実行ウィンドウが縮小されるウィンドウとして決定され、下方向に縮小方向が決定されてもよい。決定に応じて縮小された第1アプリの実行ウィンドウ及び縮小された第2アプリの実行ウィンドウの上側にポップアップウィンドウが位置する新しい領域が生成され得る。
また、例えば、図13Cを参照すると、図12Bに示す上段のトリガー領域がポップアップウィンドウによってオーバーレイされ、細部トリガー領域1223にポップアップウィンドウのハンドル領域が位置している場合、分割画面の変更されたレイアウトを示す。この場合、第2アプリの実行ウィンドウが縮小されるウィンドウとして決定され、下方向に縮小方向が決定されてもよい。決定に応じて縮小された第2アプリの実行ウィンドウの上側にポップアップウィンドウが位置する新しい領域が生成され得る。
同じ原理に基づいて、上下に分割された分割画面及び2つ以上の領域を含む分割画面で縮小方向及び縮小されるウィンドウが決定され、決定に応じて、少なくとも1つのウィンドウが縮小されることでポップアップウィンドウが位置する新しい領域が生成されてもよい。
一例として、ウィンドウが縮小される程度は、ウィンドウの幅あるいは高さが半分に縮小されるように決定されてもよく、予め決定された値に縮小されるよう決定されてもよく、ユーザの入力に基づいて決定されてもよい。
図14は、様々な実施形態による電子装置のディスプレイに表示される画面制御方法の動作フローチャートである。
図14を参照すると、一実施形態による電子装置のディスプレイに表示される画面制御方法は、ディスプレイに表示される分割画面のレイアウトに基づいて分割画面内のトリガー領域を確認する動作1410、分割画面の上位レイヤに表示されるポップアップウィンドウ内のハンドル領域を制御する第1ユーザ入力に基づいて、トリガー領域の少なくとも一部がポップアップウィンドウによってオーバーレイされることを検出する動作1420、ポップアップウィンドウによってオーバーレイされたトリガー領域の位置及びハンドル領域とレイアウトのディバイダーの相対的位置のうち少なくとも1つに基づいて、分割画面のレイアウトを変更する動作1430、及び変更された分割画面のレイアウトに基づいて、分割画面内のポップアップウィンドウが位置する領域を表示する動作1440を含む。
一実施形態による分割画面内のトリガー領域を確認する動作1410は、分割画面の分割方向に基づいてトリガー領域を確認する動作を含む。
一実施形態による分割画面のレイアウトを変更する動作1430は、ポップアップウィンドウによってオーバーレイされたトリガー領域の位置に基づいて、分割画面に含まれた少なくとも1つのウィンドウの縮小方向を決定する動作、及びハンドル領域とレイアウトのディバイダーの相対的位置に基づいて分割画面に含まれたウィンドウのうち縮小されるウィンドウを決定する動作を含む。
一実施形態による分割画面の縮小方向を決定する動作は、ポップアップウィンドウによってオーバーレイされたトリガー領域の位置と反対方向に分割画面の縮小方向を決定する動作を含む。
一実施形態による縮小される少なくとも1つのウィンドウを決定する動作は、レイアウトのディバイダーを基準にして決定された細部トリガー領域にハンドル領域の位置が含まれているか否かに基づいて、分割画面のうち縮小される少なくとも1つのウィンドウを決定する動作を含んでもよい。
一実施形態による画面制御方法は、決定された縮小方向に縮小されるウィンドウを縮小することによって、ポップアップウィンドウが位置する新しいウィンドウの領域を生成する動作をさらに含んでもよい。
一実施形態によるポップアップウィンドウが位置する領域を表示する動作1440は、ポップアップウィンドウの位置を決定する第2ユーザ入力に基づいて、分割画面内表示された領域にポップアップウィンドウを配置する動作を含んでもよい。
一実施形態によるポップアップウィンドウを配置する動作は、ポップアップウィンドウが表示されたレイヤのレベルを分割画面が表示されたレイヤのレベルに変更する動作をさらに含んでもよい。
一実施形態によるハンドル領域は、ポップアップウィンドウ内に予め決定された少なくとも一部の領域を含んでもよい。
一実施形態によるハンドル領域は、ポップアップウィンドウ内の第1ユーザ入力が受信される領域に基づいて決定されてもよい。
一実施形態による分割画面は、電子装置で駆動する少なくとも1つのアプリの実行ウィンドウを含んでもよい。
一実施形態によるポップアップウィンドウは、電子装置で駆動する第1アプリの実行ウィンドウを含んでもよい。
図15A及び図15Bは、様々な実施形態による電子装置のディスプレイに表示される画面制御方法を説明するための図である。
一実施形態によれば、ポップアップウィンドウの位置は、画面内予め決定されたターゲット領域に基づいて決定されてもよい。図15Aを参照すると、第1アプリの実行ウィンドウが全体画面に表示された第1画面上位レイヤに第2アプリの実行ウィンドウがポップアップウィンドウとして表示された場合、第1画面内のポップアップウィンドウが配置される位置を決定するためのターゲット領域1510が予め決定され得る。一実施形態によるプロセッサは、ユーザの入力に反応して、ポップアップウィンドウの位置が含まれたターゲット領域1510内の特定領域1511、1512、1513、又は1514を識別し、識別された領域に対応する画面内の一部領域にポップアップウィンドウが配置されるよう第1画面のレイアウトを調整することができる。
一例として、プロセッサは、スイッチモードで第1ユーザ入力によってポップアップウィンドウ内の特定ポイント(例えば、ポップアップウィンドウのハンドル領域の中央に該当するポイント)の位置が領域1511に含まれている場合、第2ユーザ入力によって第1アプリの実行ウィンドウを下方に縮小し、ポップアップウィンドウを第1画面内に縮小された第1アプリの実行ウィンドウの上段に配置することができる。同じ原理に基づいて、プロセッサは、スイッチモードでポップアップウィンドウ内の特定ポイントが領域1512に含まれている場合、第1アプリの実行ウィンドウを右側方向に縮小し、ポップアップウィンドウを第1画面内に縮小された第1アプリの実行ウィンドウの左側に配置し、ポップアップウィンドウ内の特定ポイントが領域1513に含まれている場合、第1アプリの実行ウィンドウを上側方向に縮小し、ポップアップウィンドウを第1画面内に縮小された第1アプリの実行ウィンドウの下段に配置し、特定ポイントが領域1514に含まれている場合、第1アプリの実行ウィンドウを左側方向に縮小し、ポップアップウィンドウを第1画面内に縮小された第1アプリの実行ウィンドウの右側に配置することができる。
図15Bを参照すると、複数のアプリの実行ウィンドウが複数の領域それぞれに表示された分割画面の上位レイヤに第1アプリの実行ウィンドウがポップアップウィンドウとして表示された場合、分割画面内のポップアップウィンドウが配置される位置を決定するためのターゲット領域1520が予め決定され得る。一実施形態によるプロセッサは、ユーザの入力に反応して、ポップアップウィンドウの位置が含まれているターゲット領域1520内の特定領域を識別し、識別された領域に対応する画面内の一部領域にポップアップウィンドウが配置されるように分割画面のレイアウトを調整することができる。
本文書に開示された多様な実施形態による電子装置は、多様な形態の装置になり得る。電子装置は、例えば携帯用通信装置(例えば、スマートフォン)コンピュータ装置、携帯用マルチメディア装置、携帯用医療機器、カメラ、ウェアラブル装置、又は家電装置を含んでもよい。本文書の実施形態による電子装置は、前述の機器に限定されない。
本文書の様々な実施形態及びこれに使用された用語は、本文書に記載された技術的特徴を特定した実施形態に限定しようとするものではなく、該当の実施形態の様々な変更、均等物、又は、代替物を含むものとして理解しなければならない。図面の説明に関連して、類似又は関連する構成要素に対して同じ参照符号が使用されてもよい。アイテムに対応する名詞の単数は関連する文脈上、明白に異なるように指示しない限り前記アイテムの1つ又は複数を含む。本文書において、「A又はB」、「A及びBのうち少なくとも1つ」、「A又はBのうち少なくとも1つ」、「A、B又はC」、「A、B及びCのうち少なくとも1つ」、及び「A、B、又は、Cのうち少なくとも1つ」のような文句のそれぞれは、その文句のうち該当する文句と共に羅列された項目のいずれか1つ、又は、その全ての可能な組み合せを含む。「第1」、「第2」、又は「最初」又は「2番目」のような用語は、単に当該の構成要素を他の当該の構成要素と区分するために使用され、当該の構成要素を他の側面(例えば、重要性又は順序)に限定しない。いずれかの(例えば、第1)構成要素が他の(例えば、第2)構成要素に、「機能的に」又は「通信的に」という用語と共に、又はこのような用語なしに、「カップルド」又は「コネクテッド」のように言及された場合、それは、いずれかの構成要素が他の構成要素に直接的に(例えば、有線に)、無線に、又は、第3構成要素を介して接続され得ることを意味する。
本文書の様々な実施形態で使用された用語「モジュール」は、ハードウェア、ソフトウェア又はファームウェア又はこれらの組み合せで具現されたユニットを含んでもよく、例えば、ロジック、論理ブロック、部品、又は、回路のような用語と互いに互換的に使用されてもよい。モジュールは、一体に構成された部品又は1つ又はそれ以上の機能を行う、部品の最小単位又はその一部である。例えば、一実施形態によれば、モジュールは、ASIC(application-specific integrated circuit)の形態に実現してもよい。
本文書の様々な実施形態は、機器(machine)(例えば、電子装置101)により読込み可能な格納媒体(storage medium)(例えば、内装メモリ136又は外装メモリ138)に格納された1つ以上の命令語を含むソフトウェア(例えば、プログラム140)として実現されてもよい。例えば、機器(例えば、電子装置101)のプロセッサ(例えば、プロセッサ120)は、格納媒体から格納された1つ以上の命令語のうち少なくとも1つの命令を呼び出し、それを実行できる。これは機器が呼び出された少なくとも1つの命令語に応じて、少なくとも1つの機能を行うように運営されることを可能にする。1つ以上の命令語は、コンパイラによって生成されたコード又はインタープリタによって実行され得るコードを含む。機器で読込み可能な格納媒体は、非一時的(non-transitory)格納媒体の形態に提供されてもよい。ここで、「非一時的」は、格納媒体が実在する装置であり、信号(例えば、電磁波)を含まないことを意味するだけであって、この用語は、データが格納媒体に半永久的に格納される場合と臨時的に格納される場合とを区分しない。
一実施形態によれば、本文書に開示された様々な実施形態による方法は、コンピュータプログラム製品(computer program product)に含まれて提供されてもよい。コンピュータプログラム製品は、商品として販売者と購買者との間に取引されてもよい。コンピュータプログラム製品は、機器で読込み可能な格納媒体(例えば、compact disc read only memory(CD-ROM))の形態で配布されるか、又は、アプリケーションストア(例えば、プレーストアTM)を介して又は2つのユーザ装置(例えば、スマートフォン)間に直接、オンラインに配布(例えば、ダウンロード又はアップロード)することができる。オンライン配布の場合、コンピュータプログラム製品の少なくとも一部はメーカーのサーバ、アプリケーションストアのサーバ、又は、中継サーバのメモリのような機器で読込み可能な格納媒体に少なくとも一時格納されたり、臨時的に生成されたりしてもよい。
様々な実施形態によれば、前述した構成要素のそれぞれの構成要素(例えば、モジュール又はプログラム)は単数又は複数の個体を含んでもよく、複数の個体のうち一部は、他の構成要素に分離配置されてもよい。様々な実施形態によれば、前述した当該構成要素のうちの1つ以上の構成要素又は動作が省略されるか、又は1つ以上の他の構成要素又は動作が追加されてもよい。代替的に、又は追加的に、複数の構成要素(例えば、モジュール又はプログラム)は、1つの構成要素に統合されてもよい。このような場合、統合された構成要素は、複数の構成要素それぞれの構成要素の1つ以上の機能を統合以前に複数の構成要素のうち当該構成要素によって実行されるものと同一又は同様に行われてもよい。様々な実施形態によれば、モジュール、プログラム又は他の構成要素によって実行される動作は、順次に、並列的に、繰り返し、又は、ヒューリスティックに実行されたり、動作のうちの1つ以上が異なる順に実行されたり、省略されたり、又は1つ以上の他の動作が追加されてもよい。
100 ネットワーク環境
101、102、104、200 電子装置
108 サーバ
120 プロセッサ
121 メインプロセッサ
123 補助プロセッサ
130、533 メモリ
140 プログラム
150 入力モジュール
155 音響出力モジュール
160 ディスプレイモジュール
170 オーディオモジュール
176 センサモジュール
177 インターフェース
178 接続端子
179 ハプティックモジュール
180 カメラモジュール
188 電力管理モジュール
189 バッテリ
190 通信モジュール
196 加入者識別モジュール
197 アンテナモジュール
201 フォルダブルハウジング
210 第1ハウジング構造
215 第1後面カバー
220 第2ハウジング構造
222 センサ領域
225 第2後面カバー
230 ヒンジ構造
250、510、610 ディスプレイ
251 第1領域
252 第2領域
253 フォールディング領域
530 ディスプレイドライバIC
531 インターフェースモジュール
535 イメージ処理モジュール
537 マッピングモジュール
550 タッチ回路
551 タッチセンサ
553 タッチセンサIC
703、1112、1122、1132、1142 ポップアップウィンドウ
801、802、803、804、901、1101、1102、1103、1104 ハンドル領域
1201、1202、1203 ディバイダー

Claims (13)

  1. 電子装置のディスプレイに表示される画面制御方法であって、
    前記ディスプレイに表示される分割画面のレイアウトに基づいて、前記分割画面内のトリガー領域を確認する動作と、
    前記分割画面の上位レイヤに表示されるポップアップウィンドウ内のハンドル領域を制御する第1入力に基づいて、前記トリガー領域の少なくとも一部が前記ポップアップウィンドウによってオーバーレイされることを検出する動作と、
    前記ポップアップウィンドウによってオーバーレイされたトリガー領域の位置及び前記ハンドル領域と前記レイアウトのディバイダーの相対的位置のうち少なくとも1つに基づいて、前記分割画面のレイアウトを変更する動作と、
    前記変更された分割画面のレイアウトに基づいて、前記分割画面内に前記ポップアップウィンドウが位置する領域を表示する動作と、
    を含み、
    前記分割画面のレイアウトを変更する動作は、前記ハンドル領域と前記レイアウトのディバイダーの相対的位置に基づいて、前記分割画面に含まれたウィンドウのうち縮小される少なくとも1つのウィンドウを決定する動作を含み、
    前記縮小される少なくとも1つのウィンドウを決定する動作は、前記レイアウトのディバイダーを基準にして決定された細部トリガー領域に前記ハンドル領域の位置が含まれているか否かに基づいて、前記分割画面のうち縮小される少なくとも1つのウィンドウを決定する動作を含むことを特徴とする画面制御方法。
  2. 前記分割画面のレイアウトを変更する動作は、
    前記ポップアップウィンドウによってオーバーレイされたトリガー領域の位置に基づいて、前記分割画面に含まれた少なくとも1つのウィンドウの縮小方向を決定する動作を含むことを特徴とする請求項1に記載の画面制御方法。
  3. 前記分割画面の縮小方向を決定する動作は、前記ポップアップウィンドウによってオーバーレイされたトリガー領域の位置と反対方向に前記分割画面の縮小方向を決定する動作を含むことを特徴とする請求項2に記載の画面制御方法。
  4. 前記決定された縮小方向に前記縮小されるウィンドウを縮小することによって、前記ポップアップウィンドウが位置する新しいウィンドウの領域を生成する動作をさらに含むことを特徴とする請求項2に記載の画面制御方法。
  5. 前記分割画面内のトリガー領域を確認する動作は、前記分割画面の分割方向に基づいて、前記トリガー領域を確認する動作を含むことを特徴とする請求項1に記載の画面制御方法。
  6. 前記ポップアップウィンドウが位置する領域を表示する動作は、前記ポップアップウィンドウの位置を決定する第2入力に基づいて、前記分割画面内に表示された領域に前記ポップアップウィンドウを配置する動作を含むことを特徴とする請求項1に記載の画面制御方法。
  7. 前記ポップアップウィンドウを配置する動作は、前記ポップアップウィンドウが表示されたレイヤのレベルを前記分割画面が表示されたレイヤのレベルに変更する動作をさらに含むことを特徴とする請求項に記載の画面制御方法。
  8. 前記ハンドル領域は、前記ポップアップウィンドウ内の予め決定された少なくとも一部の領域を含むことを特徴とする請求項1に記載の画面制御方法。
  9. 前記ハンドル領域は、前記ポップアップウィンドウ内の前記第1入力が受信される領域に基づいて決定されることを特徴とする請求項1に記載の画面制御方法。
  10. 前記分割画面は、前記電子装置で駆動する少なくとも1つのアプリの実行ウィンドウを含み、
    前記ポップアップウィンドウは、前記電子装置で駆動する第1アプリの実行ウィンドウを含むことを特徴とする請求項1に記載の画面制御方法。
  11. ハードウェアと結合して請求項1に記載の方法を実行させるために媒体に格納されたことを特徴とするコンピュータプログラム。
  12. 画面を出力するディスプレイと、
    前記ディスプレイと作動的に結合して前記ディスプレイに表示される画面を制御するプロセッサと、
    を含み、
    前記プロセッサは、
    前記ディスプレイに表示される分割画面のレイアウトに基づいて、前記分割画面内のトリガー領域を確認し、
    前記分割画面の上位レイヤに表示されるポップアップウィンドウ内のハンドル領域を制御する第1入力に基づいて、前記トリガー領域の少なくとも一部が前記ポップアップウィンドウによってオーバーレイされることを検出し、
    前記ポップアップウィンドウによってオーバーレイされたトリガー領域の位置及び前記ハンドル領域と前記レイアウトのディバイダーの相対的位置のうち少なくとも1つに基づいて、前記分割画面のレイアウトを変更し、
    前記変更された分割画面のレイアウトに基づいて、前記分割画面内前記ポップアップウィンドウが位置する領域を表示し、
    前記プロセッサは、
    前記分割画面のレイアウトを変更することにおいて、前記ハンドル領域と前記レイアウトのディバイダーの相対的位置に基づいて、前記分割画面に含まれたウィンドウのうち縮小される少なくとも1つのウィンドウを決定し、
    前記縮小される少なくとも1つのウィンドウを決定することにおいて、前記レイアウトのディバイダーを基準にして決定された細部トリガー領域に前記ハンドル領域の位置が含まれているか否かに基づいて、前記分割画面のうち縮小される少なくとも1つのウィンドウを決定することを特徴とする電子装置。
  13. 前記プロセッサは、
    前記分割画面のレイアウトを変更することにおいて、
    前記ポップアップウィンドウによってオーバーレイされたトリガー領域の位置に基づいて、前記分割画面に含まれたウィンドウの縮小方向を決定することを特徴とする請求項12に記載の電子装置。
JP2022578926A 2021-08-02 2022-07-08 画面制御方法及び装置 Active JP7440669B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR1020210101549A KR20230019703A (ko) 2021-08-02 2021-08-02 화면 제어 방법 및 장치
KR10-2021-0101549 2021-08-02
PCT/KR2022/010011 WO2023013904A1 (ko) 2021-08-02 2022-07-08 화면 제어 방법 및 장치

Publications (2)

Publication Number Publication Date
JP2023540657A JP2023540657A (ja) 2023-09-26
JP7440669B2 true JP7440669B2 (ja) 2024-02-28

Family

ID=85037499

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2022578926A Active JP7440669B2 (ja) 2021-08-02 2022-07-08 画面制御方法及び装置

Country Status (3)

Country Link
US (1) US11934622B2 (ja)
EP (1) EP4287631A1 (ja)
JP (1) JP7440669B2 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
USD1003318S1 (en) * 2020-10-27 2023-10-31 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017068671A (ja) 2015-09-30 2017-04-06 富士通株式会社 表示制御装置、表示制御方法及び表示制御プログラム
JP2017068670A (ja) 2015-09-30 2017-04-06 富士通株式会社 表示制御装置、表示制御方法及び表示制御プログラム
JP2017526057A (ja) 2014-07-31 2017-09-07 マイクロソフト テクノロジー ライセンシング,エルエルシー アプリケーションウィンドウの領域ベースのサイズ調節および適所配置
US20210109653A1 (en) 2019-10-14 2021-04-15 Samsung Electronics Co., Ltd. Electronic device and method of processing pop-up window using multi-window thereof

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020191028A1 (en) 2001-06-19 2002-12-19 Senechalle David A. Window manager user interface
CA2415112A1 (en) 2002-12-24 2004-06-24 Gerald Michael O'brien System and method for real-time web fragment identification and extraction
KR102016975B1 (ko) * 2012-07-27 2019-09-02 삼성전자주식회사 디스플레이 장치 및 그 제어 방법
KR102155708B1 (ko) 2013-02-26 2020-09-14 삼성전자 주식회사 휴대 단말기 및 그의 멀티 어플리케이션 운용 방법
US10809893B2 (en) * 2013-08-09 2020-10-20 Insyde Software Corp. System and method for re-sizing and re-positioning application windows in a touch-based computing device
WO2015026101A1 (ko) 2013-08-22 2015-02-26 삼성전자 주식회사 디스플레이 장치의 애플리케이션 실행 방법 및 그 디스플레이 장치
US10678412B2 (en) 2014-07-31 2020-06-09 Microsoft Technology Licensing, Llc Dynamic joint dividers for application windows
KR102426070B1 (ko) 2015-11-18 2022-07-28 삼성전자 주식회사 전자 장치 및 전자 장치의 디스플레이 설정 방법
CN107203369A (zh) 2016-03-16 2017-09-26 阿里巴巴集团控股有限公司 基于Android的弹框提示方法及装置
US10289292B2 (en) 2016-06-12 2019-05-14 Apple Inc. Device, method, and graphical user interface for window manipulation and management
CN108089786B (zh) 2017-12-14 2019-12-31 Oppo广东移动通信有限公司 用户界面显示方法、装置、设备及存储介质
KR20200122945A (ko) 2019-04-19 2020-10-28 삼성전자주식회사 복수의 어플리케이션의 실행화면들을 표시하는 전자 장치 및 그의 동작 방법

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017526057A (ja) 2014-07-31 2017-09-07 マイクロソフト テクノロジー ライセンシング,エルエルシー アプリケーションウィンドウの領域ベースのサイズ調節および適所配置
JP2017068671A (ja) 2015-09-30 2017-04-06 富士通株式会社 表示制御装置、表示制御方法及び表示制御プログラム
JP2017068670A (ja) 2015-09-30 2017-04-06 富士通株式会社 表示制御装置、表示制御方法及び表示制御プログラム
US20210109653A1 (en) 2019-10-14 2021-04-15 Samsung Electronics Co., Ltd. Electronic device and method of processing pop-up window using multi-window thereof

Also Published As

Publication number Publication date
JP2023540657A (ja) 2023-09-26
US20230035438A1 (en) 2023-02-02
EP4287631A1 (en) 2023-12-06
US11934622B2 (en) 2024-03-19

Similar Documents

Publication Publication Date Title
US11081090B2 (en) Method for displaying objects and electronic device using the same
KR20200132008A (ko) 전자 장치 및 그의 알림 제공 방법
US11556246B2 (en) Electronic device and control method thereof
US20230176721A1 (en) Electronic device comprising flexible display module and method for operating same
KR20220032875A (ko) 사용자 인터페이스를 제공하는 전자 장치 및 그 방법
KR102542398B1 (ko) 폴더블 전자 장치 및 상기 폴더블 전자 장치에서 정보를 표시하는 방법
JP7440669B2 (ja) 画面制御方法及び装置
KR20220000729A (ko) 디스플레이의 폴딩 상태에 따른 이용 방법 및 이를 이용한 전자 장치
KR20220069370A (ko) 확장 가능한 디스플레이를 포함하는 전자 장치 및 컨텐츠 제공 방법
KR20220101327A (ko) 플렉서블 디스플레이를 갖는 전자 장치 및 그의 모드 변경에 따른 제어 패널 제공 방법
KR20220017231A (ko) 전자 장치 및 그의 필기 입력을 처리하는 방법
KR20230019703A (ko) 화면 제어 방법 및 장치
EP4239624A1 (en) Electronic device and electronic device operation method
KR20240034075A (ko) 컨텐트를 처리하기 위한 방법 및 이를 지원하는 전자 장치
KR20220169635A (ko) 플렉서블 디스플레이에 화면을 표시하는 전자 장치 및 이의 동작 방법
KR20240044285A (ko) 디바이스간 데이터 동기화 방법 및 그 전자 장치
KR20240056364A (ko) 폴더블 디스플레이를 제어하는 전자 장치 및 방법
KR20240039921A (ko) 전자 장치의 어플리케이션 실행 화면 제어 방법 및 그 전자 장치
KR20230043549A (ko) 어플리케이션의 실행 화면을 표시하는 방법 및 이를 지원하는 전자 장치
KR20240050951A (ko) 전자 장치 및 그 동작 방법
KR20220074165A (ko) 플렉서블 디스플레이의 사용자 인터페이스 제어 방법 및 장치
KR20230156616A (ko) 연성 인쇄 회로 기판을 지지하기 위한 구조를 포함하는 전자 장치
KR20240011580A (ko) 플렉서블 디스플레이를 포함하는 전자 장치 및 이의 동작 방법
KR20230054116A (ko) 사용자 인터페이스를 제공하는 방법 및 그 전자 장치
KR20240043038A (ko) 접힘 상태에서 호버링을 수행하기 위한 전자 장치 및 방법

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20221221

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20221221

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20231031

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240117

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240130

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240215

R150 Certificate of patent or registration of utility model

Ref document number: 7440669

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150