JP6605094B2 - Display control apparatus and display control method - Google Patents

Display control apparatus and display control method Download PDF

Info

Publication number
JP6605094B2
JP6605094B2 JP2018146645A JP2018146645A JP6605094B2 JP 6605094 B2 JP6605094 B2 JP 6605094B2 JP 2018146645 A JP2018146645 A JP 2018146645A JP 2018146645 A JP2018146645 A JP 2018146645A JP 6605094 B2 JP6605094 B2 JP 6605094B2
Authority
JP
Japan
Prior art keywords
application
display
window
display information
applications
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018146645A
Other languages
Japanese (ja)
Other versions
JP2019008805A (en
Inventor
達也 三次
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Priority to JP2018146645A priority Critical patent/JP6605094B2/en
Publication of JP2019008805A publication Critical patent/JP2019008805A/en
Application granted granted Critical
Publication of JP6605094B2 publication Critical patent/JP6605094B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Digital Computer Display Output (AREA)
  • Controls And Circuits For Display Device (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephone Function (AREA)

Description

本発明は、マルチディスプレイを行う表示制御装置及び表示制御方法に関する。   The present invention relates to a display control apparatus and a display control method for performing multi-display.

従来、異なる複数のアプリケーション(マルチアプリケーション)の複数のウィンドウ(マルチウィンドウ)を複数のディスプレイに表示するマルチディスプレイシステムが知られている。例えば特許文献1には、拡張デスクトップ機能の使用中に外部モニターの切断を検知した場合に、外部モニターの表示内容を内蔵モニターに表示するウィンドウを表示することで、操作不能の状態に陥ることを防止することができるシステムが開示されている。   Conventionally, a multi-display system that displays a plurality of windows (multi-windows) of a plurality of different applications (multi-applications) on a plurality of displays is known. For example, in Patent Document 1, when disconnection of an external monitor is detected while the extended desktop function is being used, a window for displaying the display content of the external monitor on the built-in monitor is displayed, thereby causing an inoperable state. A system that can be prevented is disclosed.

特開2006−350755号公報JP 2006-350755 A

しかし、一般にスマートフォン用のOS(Operating System)はマルチディスプレイに対応しておらず、こうしたOSを用いる場合にはマルチディスプレイを実現できないという問題があった。   However, generally, an OS (Operating System) for a smartphone does not support multi-display, and there is a problem that multi-display cannot be realized when using such an OS.

本発明は上述の問題に鑑み、マルチディスプレイに対応していないスマートフォン用のOSを用いてマルチディスプレイを実現することを目的とする。   In view of the above-described problems, an object of the present invention is to realize a multi-display using an OS for a smartphone that does not support the multi-display.

本発明の表示制御装置は、スマートフォン用のオペレーティングシステムを用いた表示制御装置であって、複数のディスプレイの夫々について表示領域であるウィンドウを作成するウィンドウ作成部と、ウィンドウ作成部が作成したウィンドウを複数のアプリケーションに割り当てるウィンドウ割当部と、複数のアプリケーションから表示情報を取得し、当該表示情報をウィンドウの割り当てに沿ってウィンドウに対応する複数のディスプレイに表示させる表示制御部と、を備え、複数のアプリケーションは、オペレーティングシステムの仕様で表示を制御するアプリケーションとして規定された第1アプリケーションと、オペレーティングシステムの仕様で表示を制御しないアプリケーションとして規定された第2アプリケーションとを含み、第1アプリケーションは、ウィンドウ割当部により一つのウィンドウのみの割り当てが可能なアプリケーションを含み、ウィンドウ割当部により一つのウィンドウのみの割り当てが可能なアプリケーションは、第1アプリケーションのうちメインで動作しないアプリケーションであり、ウィンドウ割り当て部は、第1アプリケーション及び第2アプリケーションにウィンドウを割り当て、表示制御部は、第1アプリケーションの表示情報が表示されるディスプレイと異なるディスプレイに、第2アプリケーションの表示情報を表示させる。   The display control device of the present invention is a display control device using an operating system for a smartphone, and includes a window creation unit that creates a window that is a display area for each of a plurality of displays, and a window created by the window creation unit. A window assigning unit to be assigned to a plurality of applications, and a display control unit for acquiring display information from the plurality of applications and displaying the display information on a plurality of displays corresponding to the windows in accordance with the assignment of the windows. The application includes a first application defined as an application that controls display according to operating system specifications, and a second application defined as an application that does not control display according to operating system specifications. The first application includes an application in which only one window can be allocated by the window allocation unit, and an application in which only one window can be allocated by the window allocation unit is an application that does not operate in the main among the first applications. The window assigning unit assigns windows to the first application and the second application, and the display control unit displays the display information of the second application on a display different from the display on which the display information of the first application is displayed.

本発明の表示制御装置は、スマートフォン用のオペレーティングシステムを用いた表示制御装置であって、複数のディスプレイの夫々について表示領域であるウィンドウを作成するウィンドウ作成部と、ウィンドウ作成部が作成したウィンドウを複数のアプリケーションに割り当てるウィンドウ割当部と、複数のアプリケーションから表示情報を取得し、当該表示情報をウィンドウの割り当てに沿って複数のディスプレイに表示させる表示制御部と、を備え、複数のアプリケーションは、オペレーティングシステムの仕様で表示を制御するアプリケーションとして規定された第1アプリケーションと、オペレーティングシステムの仕様で表示を制御しないアプリケーションとして規定された第2アプリケーションとを含み、ウィンドウ割当部は、少なくとも第1アプリケーションのうちメインで動作しない第1アプリケーションに対しては一つのウィンドウのみの割り当てが可能である。従って、マルチディスプレイに対応していないスマートフォン用のOSを用いてマルチディスプレイを実現することができる。   The display control device of the present invention is a display control device using an operating system for a smartphone, and includes a window creation unit that creates a window that is a display area for each of a plurality of displays, and a window created by the window creation unit. A window assigning unit that assigns to a plurality of applications, and a display control unit that obtains display information from the plurality of applications and displays the display information on a plurality of displays according to the assignment of the windows. A window allocating unit including a first application defined as an application that controls display according to system specifications and a second application defined as an application that does not control display according to operating system specifications , It is possible to allocate only one window at least for the first does not work in the main of the application first application. Therefore, a multi-display can be realized using an OS for a smartphone that does not support the multi-display.

本発明の目的、特徴、態様、および利点は、以下の詳細な説明と添付図面とによって、より明白となる。   Objects, features, aspects, and advantages of the present invention will become more apparent from the following detailed description and the accompanying drawings.

パソコン用OSを用いてマルチディスプレイを行う表示制御装置の構成を示す図である。It is a figure which shows the structure of the display control apparatus which performs multi-display using OS for personal computers. アプリケーションの表示情報を示す図である。It is a figure which shows the display information of an application. アプリケーションの表示情報をウィンドウで切り取る様子を示す図である。It is a figure which shows a mode that the display information of an application is cut off with a window. ディスプレイの表示画像を示す図である。It is a figure which shows the display image of a display. アプリケーションの表示情報を示す図である。It is a figure which shows the display information of an application. アプリケーションの表示情報をウィンドウで切り取る様子を示す図である。It is a figure which shows a mode that the display information of an application is cut off with a window. ウィンドウに切り取られたアプリケーションの表示情報を示す図である。It is a figure which shows the display information of the application cut out by the window. アプリケーションの表示情報を示す図である。It is a figure which shows the display information of an application. アプリケーションの表示情報をウィンドウで切り取る様子を示す図である。It is a figure which shows a mode that the display information of an application is cut off with a window. ウィンドウに切り取られたアプリケーションの表示情報を示す図である。It is a figure which shows the display information of the application cut out by the window. アプリケーションの表示情報をウィンドウで切り取る様子を示す図である。It is a figure which shows a mode that the display information of an application is cut off with a window. ウィンドウに切り取られたアプリケーションの表示情報を示す図である。It is a figure which shows the display information of the application cut out by the window. ディスプレイの表示画像を示す図である。It is a figure which shows the display image of a display. ディスプレイの表示画像を示す図である。It is a figure which shows the display image of a display. パソコン用OSを用いてシングルディスプレイを行う表示制御装置の構成を示す図である。It is a figure which shows the structure of the display control apparatus which performs a single display using OS for personal computers. アンドロイドOSを用いてシングルディスプレイを行う表示制御装置の構成を示す図である。It is a figure which shows the structure of the display control apparatus which performs a single display using Android OS. アンドロイドOSを用いてマルチディスプレイを行う表示制御装置の構成を示す図である。It is a figure which shows the structure of the display control apparatus which performs a multi-display using Android OS. アクティビティアプリケーションの表示情報を示す図である。It is a figure which shows the display information of an activity application. アクティビティアプリケーションの表示情報をウィンドウで切り取る様子を示す図である。It is a figure which shows a mode that the display information of an activity application is cut off with a window. ウィンドウに切り取られたアクティビティアプリケーションの表示情報を示す図である。It is a figure which shows the display information of the activity application cut out by the window. アクティビティアプリケーションの表示情報をウィンドウで切り取る様子を示す図である。It is a figure which shows a mode that the display information of an activity application is cut off with a window. ウィンドウに切り取られたアクティビティアプリケーションの表示情報を示す図である。It is a figure which shows the display information of the activity application cut out by the window. アクティビティアプリケーションの表示情報を示す図である。It is a figure which shows the display information of an activity application. アクティビティアプリケーションの表示情報をウィンドウで切り取る様子を示す図である。It is a figure which shows a mode that the display information of an activity application is cut off with a window. ウィンドウに切り取られたアクティビティアプリケーションの表示情報を示す図である。It is a figure which shows the display information of the activity application cut out by the window. 本発明の表示制御装置の構成を示す図である。It is a figure which shows the structure of the display control apparatus of this invention. 本発明の表示制御装置のソフトウェア構成を示す図である。It is a figure which shows the software structure of the display control apparatus of this invention. アクティビティアプリケーションが表示情報を作成する様子を示す図である。It is a figure which shows a mode that an activity application produces display information. サービスアプリケーションが表示情報を作成する様子を示す図である。It is a figure which shows a mode that a service application produces display information. 本発明の表示制御装置の動作を示すタイムチャートである。It is a time chart which shows operation | movement of the display control apparatus of this invention. アクティビティアプリケーションの表示情報を示す図である。It is a figure which shows the display information of an activity application. アクティビティアプリケーションの表示情報をウィンドウで切り取る様子を示す図である。It is a figure which shows a mode that the display information of an activity application is cut off with a window. ウィンドウに切り取られたアクティビティアプリケーションの表示情報を示す図である。It is a figure which shows the display information of the activity application cut out by the window. アクティビティアプリケーションの表示情報をウィンドウで切り取る様子を示す図である。It is a figure which shows a mode that the display information of an activity application is cut off with a window. ウィンドウに切り取られたアクティビティアプリケーションの表示情報を示す図である。It is a figure which shows the display information of the activity application cut out by the window. サービスアプリケーションの表示情報を示す図である。It is a figure which shows the display information of a service application. サービスアプリケーションの表示情報をウィンドウで切り取る様子を示す図である。It is a figure which shows a mode that the display information of a service application is cut off with a window. ウィンドウに切り取られたサービスアプリケーションの表示情報を示す図である。It is a figure which shows the display information of the service application cut out by the window.

<A.前提技術>
<A−1.パソコン用OS>
図1は、パソコン用OSを用いてマルチディスプレイを行う表示制御装置の構成を示している。図1の表示制御装置は、2つのディスプレイD1,D2と、ウィンドウマネージャWM1と、アプリケーションA1,A2,A3とを備えている。
<A. Prerequisite technology>
<A-1. PC OS>
FIG. 1 shows a configuration of a display control apparatus that performs multi-display using a personal computer OS. The display control device of FIG. 1 includes two displays D1, D2, a window manager WM1, and applications A1, A2, A3.

アプリケーションA1,A2,A3は、ユーザに対する表示情報を有しており、これを用いてユーザへの情報提供を行う。あるいは、ユーザからの指示を受けて動作する。また、アプリケーションA1,A2,A3は同時に動作することによってマルチアプリケーションを実現する。   The applications A1, A2, and A3 have display information for the user, and use this to provide information to the user. Or it operates in response to an instruction from the user. The applications A1, A2, and A3 operate simultaneously to realize a multi-application.

但し、マルチアプリケーションだけでは、マルチウィンドウ、すなわち複数のディスプレイにそれぞれのアプリケーションの表示情報を表示することはできない。   However, the display information of each application cannot be displayed on a multi-window, that is, a plurality of displays only by the multi-application.

ウィンドウマネージャWM1は、複数のディスプレイD1,D2に対してそれぞれのアプリケーションA1,A2,A3の表示情報を表示するために、アプリケーションA1,A2,A3の表示情報を書き込む領域であるウィンドウを管理制御している。ウィンドウマネージャWM1は、ディスプレイD1,D2からその画面サイズ等の情報を入手し、ディスプレイD1のウィンドウW1と、ディスプレイD2のウィンドウW2を生成する。そして、ウィンドウW1,W2をアプリケーションA1,A2,A3に提供する。   The window manager WM1 manages and controls a window which is an area in which the display information of the applications A1, A2, and A3 is written in order to display the display information of the applications A1, A2, and A3 on the plurality of displays D1 and D2. ing. The window manager WM1 obtains information such as the screen size from the displays D1 and D2, and generates a window W1 of the display D1 and a window W2 of the display D2. Then, the windows W1, W2 are provided to the applications A1, A2, A3.

アプリケーションA1,A2,A3は、ウィンドウマネージャWM1から取得したウィンドウW1,W2に対してそれぞれの表示情報を提示する。   The applications A1, A2, and A3 present their display information to the windows W1 and W2 acquired from the window manager WM1.

今、アプリケーションA1はウィンドウW1に、アプリケーションA3はウィンドウW2に、アプリケーションA2はウィンドウW1,W2に表示情報を提示する場合を考える。そして、アプリケーションA2の表示情報がアプリケーションA1,A3の表示情報より画面のZ軸の上方、すなわち手前側に位置しているものとする。   Assume that the application A1 presents display information in the window W1, the application A3 presents the display information in the window W2, and the application A2 presents the display information in the windows W1 and W2. It is assumed that the display information of the application A2 is positioned above the Z axis of the screen, that is, on the near side of the display information of the applications A1 and A3.

図2は、アプリケーションA1の表示情報V1を示している。ウィンドウマネージャWM1は、表示情報V1のどの部分をウィンドウW1で切り取るかを定める。図3は、表示情報V1と、表示情報V1の所定の矩形領域を切り取るウィンドウW1とを示している。従って、ディスプレイD1には図4のようにウィンドウW1で切り取られたアプリケーションA1の表示情報V1が表示される。   FIG. 2 shows display information V1 of the application A1. The window manager WM1 determines which part of the display information V1 is cut out by the window W1. FIG. 3 shows display information V1 and a window W1 for cutting out a predetermined rectangular area of the display information V1. Accordingly, the display information V1 of the application A1 cut out in the window W1 as shown in FIG. 4 is displayed on the display D1.

図5は、アプリケーションA3の表示情報V3を示している。ウィンドウマネージャWM1は、表示情報V3のどの部分をウィンドウW2で切り取るかを定める。図6は、表示情報V3と、表示情報V2の所定の矩形領域を切り取るウィンドウW2とを示している。従って、ディスプレイD2には図7のようにウィンドウW2で切り取られたアプリケーションA3の表示情報V3が表示される。   FIG. 5 shows display information V3 of the application A3. The window manager WM1 determines which part of the display information V3 is cut out by the window W2. FIG. 6 shows display information V3 and a window W2 for cutting out a predetermined rectangular area of the display information V2. Accordingly, the display information V3 of the application A3 cut out in the window W2 as shown in FIG. 7 is displayed on the display D2.

図8は、アプリケーションA2の表示情報V2を示している。ウィンドウマネージャWM1は、表示情報V2のどの部分をウィンドウW1で切り取るかを定める。図9は、表示情報V2と、表示情報V2の所定の矩形領域を切り取るウィンドウW1とを示している。従って、ディスプレイD1には図10のようにウィンドウW1で切り取られたアプリケーションA2の表示情報V2が表示される。   FIG. 8 shows display information V2 of the application A2. The window manager WM1 determines which part of the display information V2 is cut out by the window W1. FIG. 9 shows display information V2 and a window W1 for cutting out a predetermined rectangular area of the display information V2. Accordingly, the display information V2 of the application A2 cut out in the window W1 as shown in FIG. 10 is displayed on the display D1.

また、表示情報V2は、ウィンドウW1だけでなくウィンドウW2にも配置される。ウィンドウマネージャWM1は、表示情報V2のどの部分をウィンドウW1で切り取るかを定める。図11は、表示情報V2と、表示情報V2の所定の矩形領域を切り取るウィンドウW2とを示している。従って、ディスプレイD2には図12のようにウィンドウW2で切り取られたアプリケーションA2の表示情報V2が表示される。   The display information V2 is arranged not only in the window W1 but also in the window W2. The window manager WM1 determines which part of the display information V2 is cut out by the window W1. FIG. 11 shows display information V2 and a window W2 for cutting out a predetermined rectangular area of the display information V2. Accordingly, the display information V2 of the application A2 cut out in the window W2 as shown in FIG. 12 is displayed on the display D2.

ディスプレイD1には、図4で示した表示情報V1と図10で示した表示情報V2とが表示される。従って、実際には、ウィンドウマネージャWM1により両表示情報V1,V2が重ね合せられ、ディスプレイD1には図13に示す表示が行われる。表示情報V2は表示情報V1より画面のZ軸の上方に位置するため、ディスプレイD1の左上の領域で表示情報V2が表示情報V1をマスクする。   The display information V1 shown in FIG. 4 and the display information V2 shown in FIG. 10 are displayed on the display D1. Therefore, actually, the display information V1 and V2 are overlapped by the window manager WM1, and the display shown in FIG. 13 is performed on the display D1. Since the display information V2 is positioned above the Z axis of the screen from the display information V1, the display information V2 masks the display information V1 in the upper left area of the display D1.

ディスプレイD2には、図7で示した表示情報V3と図12で示した表示情報V2とが表示される。従って、実際には、ウィンドウマネージャWM1により両表示情報V2,V3が重ね合せられ、ディスプレイD2には図14に示す表示が行われる。表示情報V2は表示情報V3より画面のZ軸の上方に位置するため、ディスプレイD2の右上の領域で表示情報V2が表示情報V3をマスクする。   The display information V3 shown in FIG. 7 and the display information V2 shown in FIG. 12 are displayed on the display D2. Therefore, in practice, the display information V2 and V3 are superimposed by the window manager WM1, and the display shown in FIG. 14 is performed on the display D2. Since the display information V2 is positioned above the Z axis of the screen from the display information V3, the display information V2 masks the display information V3 in the upper right area of the display D2.

このように、パソコン用OSのウィンドウマネージャWM1は、異なるアプリケーションに対して異なるディスプレイのウィンドウを割り当てることができるため、マルチアプリケーションによるマルチディスプレイが実現できる。   As described above, since the window manager WM1 of the personal computer OS can assign different display windows to different applications, multi-display by multi-application can be realized.

図15は、パソコン用OSを用いてシングルディスプレイを行う表示制御装置の構成を示す図である。図1に示す表示制御装置と比較すると、ディスプレイがディスプレイD1唯一つである点が異なる。この場合、図1に示す表示制御装置と同様に、アプリケーションA1,A2,A3にディスプレイD1のウィンドウW1が割り当てられ、ディスプレイD1にアプリケーションA1,A2,A3の表示情報が表示される。   FIG. 15 is a diagram illustrating a configuration of a display control apparatus that performs a single display using a personal computer OS. Compared with the display control apparatus shown in FIG. 1, the display is different in that there is only one display D1. In this case, similarly to the display control apparatus shown in FIG. 1, the window W1 of the display D1 is assigned to the applications A1, A2, and A3, and the display information of the applications A1, A2, and A3 is displayed on the display D1.

<A−2.アンドロイド(登録商標)>
図16は、スマートフォン用のOSであるアンドロイド(登録商標)を用いてシングルディスプレイを行う表示制御装置の構成を示している。アンドロイド(登録商標)におけるアプリケーションには、表示情報を持つアクティビティアプリケーションと、表示情報を持たないサービスアプリケーションとがある。図16の表示制御装置は、ウィンドウマネージャWM2、ディスプレイD1及びアクティビティアプリケーションAA1,AA2,AA3を備えている。ウィンドウマネージャWM2は、アクティビティアプリケーションAA1,AA2,AA3にディスプレイD1のウィンドウW1を割り当て、ディスプレイD1にアクティビティアプリケーションAA1,AA2,AA3の表示情報が表示される。
<A-2. Android (registered trademark)>
FIG. 16 shows a configuration of a display control apparatus that performs a single display using Android (registered trademark), which is an OS for smartphones. Applications in Android (registered trademark) include an activity application having display information and a service application having no display information. The display control apparatus of FIG. 16 includes a window manager WM2, a display D1, and activity applications AA1, AA2, and AA3. The window manager WM2 assigns the window W1 of the display D1 to the activity applications AA1, AA2, and AA3, and the display information of the activity applications AA1, AA2, and AA3 is displayed on the display D1.

図17は、スマートフォン用のOSであるアンドロイド(登録商標)を用いてマルチディスプレイを行う表示制御装置の構成を示している。図17の表示制御装置は、図16の表示制御装置の構成に加えて、ディスプレイD2,D3、プレゼンテーションP1を備えている。なお、図17ではアクティビティアプリケーションAA2,AA3は図示を省略している。   FIG. 17 shows a configuration of a display control apparatus that performs multi-display using Android (registered trademark), which is an OS for smartphones. The display control apparatus of FIG. 17 includes displays D2 and D3 and a presentation P1 in addition to the configuration of the display control apparatus of FIG. In FIG. 17, the activity applications AA2 and AA3 are not shown.

図17の表示制御装置において、ウィンドウマネージャWM2は、ディスプレイD1のウィンドウW1をアクティビティアプリケーションAA1,AA2,AA3に提供し、ウィンドウW1に対するアクティビティアプリケーションAA1,AA2,AA3の表示情報を取得する。そして、これらの表示情報をディスプレイD1において重ね合せ表示する。なお、アクティビティアプリケーションAA1,AA2,AA3のうち、アクティビティアプリケーションAA1がメインアプリケーション、すなわち最前面に表示されているアプリケーションである。   In the display control apparatus of FIG. 17, the window manager WM2 provides the window W1 of the display D1 to the activity applications AA1, AA2, and AA3, and acquires display information of the activity applications AA1, AA2, and AA3 for the window W1. Then, the display information is displayed in an overlapping manner on the display D1. Of the activity applications AA1, AA2, and AA3, the activity application AA1 is the main application, that is, the application displayed in the foreground.

また、プレゼンテーションP1は、アンドロイド(登録商標)における拡張ウィンドウマネージャであり、アクティビティアプリケーションAA1,AA2,AA3のうちメインのアクティビティアプリケーションAA1に対して、ディスプレイD2,D3のウィンドウW2,W3を割り当てる。具体的には、ウィンドウマネージャWM2がプレゼンテーションP1にウィンドウW2,W3を送り、プレゼンテーションP1がアクティビティアプリケーションAA1にウィンドウW2,W3を送る。そして、プレゼンテーションP1はアクティビティアプリケーションAA1からウィンドウW2,W3に対する表示情報を取得し、これをウィンドウマネージャWM2に送る。こうして、ディスプレイD2,D3にはアクティビティアプリケーションAA1の表示情報が表示される。   The presentation P1 is an extended window manager in Android (registered trademark), and assigns the windows W2 and W3 of the displays D2 and D3 to the main activity application AA1 among the activity applications AA1, AA2, and AA3. Specifically, the window manager WM2 sends windows W2 and W3 to the presentation P1, and the presentation P1 sends windows W2 and W3 to the activity application AA1. The presentation P1 acquires display information for the windows W2 and W3 from the activity application AA1, and sends this to the window manager WM2. Thus, the display information of the activity application AA1 is displayed on the displays D2 and D3.

図18は、アクティビティアプリケーションAA1のウィンドウW1に対する表示情報VA1を示している。ウィンドウマネージャWM2は、表示情報VA1のどの部分をウィンドウW1で切り取るかを定める。図19は、表示情報VA1と、表示情報VA1の所定の矩形領域を切り取るウィンドウW1とを示している。従って、ディスプレイD1には図20のようにウィンドウW1で切り取られたアプリケーションA1の表示情報VA1が表示される。なお、ディスプレイD1にはアクティビティアプリケーションAA2及びアクティビティアプリケーションAA3の表示情報も表示されるが、ここでは図示を省略する。   FIG. 18 shows display information VA1 for the window W1 of the activity application AA1. The window manager WM2 determines which part of the display information VA1 is cut out by the window W1. FIG. 19 shows display information VA1 and a window W1 for cutting out a predetermined rectangular area of the display information VA1. Accordingly, the display information VA1 of the application A1 cut out in the window W1 as shown in FIG. 20 is displayed on the display D1. The display information of the activity application AA2 and the activity application AA3 is also displayed on the display D1, but the illustration is omitted here.

また、ウィンドウマネージャWM2は、表示情報VA1のどの部分をウィンドウW2で切り取るかを定める。図21は、アクティビティアプリケーションAA1のウィンドウW2に対する表示情報VA1と、表示情報VA1の所定の矩形領域を切り取るウィンドウW2とを示している。従って、ディスプレイD2には図22のようにウィンドウW2で切り取られたアプリケーションA1の表示情報VA1が表示される。   Further, the window manager WM2 determines which part of the display information VA1 is cut out by the window W2. FIG. 21 shows display information VA1 for the window W2 of the activity application AA1, and a window W2 for cutting out a predetermined rectangular area of the display information VA1. Accordingly, the display information VA1 of the application A1 cut out in the window W2 as shown in FIG. 22 is displayed on the display D2.

図23は、アクティビティアプリケーションAA1のウィンドウW3に対する表示情報VA1を示している。この表示情報VA1は、図18に示したアクティビティアプリケーションAA1のウィンドウW1に対する表示情報VA1とは異なる。このように、アクティビティアプリケーションAA1はウィンドウごとに表示情報を複数用意することができる。ウィンドウマネージャWM2は、表示情報VA1のどの部分をウィンドウW3で切り取るかを定める。図24は、表示情報VA1と、表示情報VA1の所定の矩形領域を切り取るウィンドウW3とを示している。従って、ディスプレイD3には図25のようにウィンドウW3で切り取られたアクティビティアプリケーションAA1の表示情報VA1が表示される。   FIG. 23 shows display information VA1 for the window W3 of the activity application AA1. This display information VA1 is different from the display information VA1 for the window W1 of the activity application AA1 shown in FIG. Thus, the activity application AA1 can prepare a plurality of display information for each window. The window manager WM2 determines which part of the display information VA1 is cut out by the window W3. FIG. 24 shows display information VA1 and a window W3 for cutting out a predetermined rectangular area of the display information VA1. Accordingly, the display information VA1 of the activity application AA1 cut out in the window W3 as shown in FIG. 25 is displayed on the display D3.

このように、アクティビティアプリケーションAA1の表示情報はディスプレイD1,D2,D3に表示され、マルチディスプレイが実現する。しかし、ウィンドウマネージャWM2には、パソコン用OSにおけるウィンドウマネージャWM1とは異なり、一つのアクティビティアプリケーションに対して一つのウィンドウしか割り当てることが出来ないという制約がある。上記したように、プレゼンテーションP1によれば、アクティビティアプリケーションAA1に対してウィンドウW2,W3を割り当てることが可能だが、メインのアクティビティアプリケーションではないアクティビティアプリケーションAA2,AA3に対してはウィンドウW2,W3の割り当てが不可能である。そのため、ディスプレイD2,D3にはアクティビティアプリケーションAA2,AA3の表示情報を表示することが出来ない。また、メインのアクティビティアプリケーションをアクティビティアプリケーションAA1からアクティビティアプリケーションAA2,AA3に切り替えるとディスプレイD2,D3でアクティビティアプリケーションAA1の表示情報を表示できなくなるという不都合がある。従って、複数のディスプレイに、複数のアクティビティアプリケーションの表示情報を表示することは出来ない。   As described above, the display information of the activity application AA1 is displayed on the displays D1, D2, and D3, thereby realizing a multi-display. However, unlike the window manager WM1 in the personal computer OS, the window manager WM2 has a restriction that only one window can be assigned to one activity application. As described above, according to the presentation P1, the windows W2 and W3 can be assigned to the activity application AA1, but the windows W2 and W3 are assigned to the activity applications AA2 and AA3 which are not the main activity applications. Impossible. Therefore, the display information of the activity applications AA2 and AA3 cannot be displayed on the displays D2 and D3. Further, when the main activity application is switched from the activity application AA1 to the activity applications AA2 and AA3, there is a problem that the display information of the activity application AA1 cannot be displayed on the displays D2 and D3. Accordingly, display information of a plurality of activity applications cannot be displayed on a plurality of displays.

<B.実施の形態1>
<B−1.構成>
図26は、本発明の実施の形態1に係る表示制御装置の構成を示す図である。この表示制御装置は、スマートフォン用のOSであるアンドロイド(登録商標)を用いてマルチディスプレイを行う。
<B. Embodiment 1>
<B-1. Configuration>
FIG. 26 is a diagram showing the configuration of the display control apparatus according to Embodiment 1 of the present invention. This display control apparatus performs multi-display using Android (registered trademark) which is an OS for a smartphone.

実施の形態1に係る表示制御装置は、ウィンドウマネージャWM2と、ディスプレイD1,D2,D3と、プレゼンテーションP1と、アクティビティアプリケーションAA1と、サービスアプリケーションSA1とを備える。   The display control apparatus according to the first embodiment includes a window manager WM2, displays D1, D2, D3, a presentation P1, an activity application AA1, and a service application SA1.

ウィンドウマネージャWM2及びプレゼンテーションP1は、アンドロイドで用意された機能である。また、アンドロイドにおいてアプリケーションは、表示を制御するアプリケーションであるアクティビティアプリケーション(第1アプリケーション)と、表示を制御しないアプリケーションであるサービスアプリケーション(第2アプリケーション)に分類される。アクティビティアプリケーションは、起動され(Create状態)、動作が始まる(Start状態)。アクティビティアプリケーションは、ウィンドウの最前面になるとResume状態になり、最前面から外れると一時中断し(Pause状態)、アプリケーションとして動作の必要がなければStop状態となる。アクティビティアプリケーションは、Stop状態から再開されると(Restart状態)、Stat状態、Resume状態と移行する。アクティビティアプリケーションが完全に動作を終了した場合、Stop状態からDestroy状態となる。すなわち、アクティビティアプリケーションは、表示の状態によって、アプリケーションの状態が変化する。これに対して、表示を制御しない(本来、表示情報を生成しない)サービスアプリケーションは、起動され(Create状態)、動作が始まる(Start状態)点は、アクティブアプリケーションと同様である。しかしながら、サービスアプリケーションは、表示の状態によってアプリケーションの状態が変化せず、アプリケーションが稼働中は、常に動作し続け、Pause状態、Stop状態となることはない。そのため、サービスアプリケーションには、Restart状態またはResume状態となることもない。   The window manager WM2 and the presentation P1 are functions prepared by Android. In Android, applications are classified into an activity application (first application) that is an application that controls display and a service application (second application) that is an application that does not control display. The activity application is activated (Create state), and the operation starts (Start state). The activity application enters a Resume state when it comes to the forefront of the window, pauses when it goes off the foreground (Pause state), and enters a Stop state when it is not necessary to operate as an application. When the activity application is resumed from the Stop state (Restart state), the activity application shifts to the Stat state and the Resume state. When the activity application is completely terminated, the state changes from the Stop state to the Destroy state. That is, in the activity application, the state of the application changes depending on the display state. On the other hand, a service application that does not control display (originally does not generate display information) is activated (Create state), and the operation starts (Start state) in the same manner as the active application. However, the service application does not change depending on the display state, and the service application always operates while the application is running, and does not enter the Pause state or the Stop state. Therefore, the service application does not enter the Restart state or the Resume state.

ウィンドウマネージャWM2は、ディスプレイD1,D2,D3の夫々について表示領域であるウィンドウを作成し、当該ウィンドウをアクティビティアプリケーションAA1,サービスアプリケーションSA1に割り当てる。そして、アクティビティアプリケーションAA1,サービスアプリケーションSA1から表示情報を取得し、当該表示情報をウィンドウの割り当てに沿ってウィンドウに対応するディスプレイD1,D2,D3に表示させる。すなわち、ウィンドウマネージャWM2は、複数のディスプレイD1、D2,D3の夫々についてウィンドウを作成するウィンドウ作成部と、ウィンドウを複数のアプリケーションに割り当てるウィンドウ割当部と、ウィンドウの割り当てに沿って複数のディスプレイにアプリケーションの表示情報を表示させる表示制御部として機能する。   The window manager WM2 creates a window that is a display area for each of the displays D1, D2, and D3, and assigns the window to the activity application AA1 and the service application SA1. Then, the display information is acquired from the activity application AA1 and the service application SA1, and the display information is displayed on the displays D1, D2, and D3 corresponding to the windows according to the window assignment. That is, the window manager WM2 includes a window creation unit that creates a window for each of the plurality of displays D1, D2, and D3, a window allocation unit that allocates windows to a plurality of applications, and an application to a plurality of displays according to the window allocation. It functions as a display control unit for displaying the display information.

ここでの特徴は、ウィンドウマネージャWM2がアクティビティアプリケーションAA1だけでなくサービスアプリケーションSA1にもウィンドウを割り当てることである。具体的には、ウィンドウマネージャWM2はアクティビティアプリケーションAA1に対してウィンドウW1を、サービスアプリケーションSA1に対してウィンドウW3をそれぞれ割り当てる。また、ウィンドウマネージャWM2はプレゼンテーションP1を介してアクティビティアプリケーションAA1に対してウィンドウW2を割り当てる。サービスアプリケーションSA1はプレゼンテーションP1を介さず直接ウィンドウマネージャWM2からウィンドウW3を取得するため、プレゼンテーションP1による制約を受けることなくウィンドウW3を取得することが出来る。また、図17の表示制御装置におけるウィンドウマネージャWM2及びプレゼンテーションP1の構成に変更を加える必要もない。   The feature here is that the window manager WM2 assigns windows not only to the activity application AA1 but also to the service application SA1. Specifically, the window manager WM2 assigns a window W1 to the activity application AA1 and a window W3 to the service application SA1. The window manager WM2 assigns a window W2 to the activity application AA1 via the presentation P1. Since the service application SA1 obtains the window W3 directly from the window manager WM2 without going through the presentation P1, the service application SA1 can obtain the window W3 without being restricted by the presentation P1. Further, it is not necessary to change the configurations of the window manager WM2 and the presentation P1 in the display control apparatus of FIG.

図27は、実施の形態1に係る表示制御装置のハードウェア構成を示す図である。当該表示制御装置は、ユーザインタフェース11、メモリ12、CPU(Central Processing Unit)13、ディスプレイD1,D2,D3を備えて構成される。CPU13は、自身が備える出力端子21,22,23によってディスプレイD1,D2,D3とそれぞれ接続されている。また、CPU13は、自身が備えるバス14によってユーザインタフェース11及びメモリ12と接続されている。   FIG. 27 is a diagram illustrating a hardware configuration of the display control apparatus according to the first embodiment. The display control apparatus includes a user interface 11, a memory 12, a CPU (Central Processing Unit) 13, and displays D1, D2, and D3. The CPU 13 is connected to the displays D1, D2, and D3 through output terminals 21, 22, and 23 provided in the CPU 13, respectively. The CPU 13 is connected to the user interface 11 and the memory 12 by a bus 14 provided therein.

図26に示す表示制御装置の構成のうち、ウィンドウマネージャWM2(ウィンドウ作成部、ウィンドウ割当部、表示制御部)、プレゼンテーションP1、アクティビティアプリケーションAA1、サービスアプリケーションSA1は、メモリ12に格納されたソフトウェアのプログラムをCPU13が実行することにより実現する。   26, a window manager WM2 (window creation unit, window allocation unit, display control unit), presentation P1, activity application AA1, and service application SA1 are software programs stored in the memory 12. This is realized by the CPU 13 executing.

<B−2.動作>
図28は、アクティビティアプリケーションAA1が表示情報を生成する様子を示している。アクティビティアプリケーションAA1は、ウィンドウマネージャWM2にウィンドウW1の獲得要求を行い、それに対してウィンドウマネージャWM2がアクティビティアプリケーションAA1にウィンドウW1を送る。ウィンドウW1を取得したアクティビティアプリケーションAA1は、view機能を呼び出し、表示部品を配置して表示情報を生成する。view機能はアンドロイドにおいて用意された機能である。
<B-2. Operation>
FIG. 28 shows how the activity application AA1 generates display information. The activity application AA1 makes a request to acquire the window W1 to the window manager WM2, and the window manager WM2 sends a window W1 to the activity application AA1 in response thereto. The activity application AA1 that has acquired the window W1 calls the view function, arranges display components, and generates display information. The view function is a function prepared in Android.

図29は、サービスアプリケーションSA1が表示情報を生成する様子を示している。サービスアプリケーションSA1からウィンドウマネージャWM2にウィンドウW3の獲得要求を行い、それに対してウィンドウマネージャWM2がサービスアプリケーションSA1にウィンドウW3を送る。ウィンドウW3を取得したサービスアプリケーションSA1は、view機能を呼び出し、表示部品(view)を配置して表示情報を生成する。アンドロイド(登録商標)の仕様では、アクティビティアプリケーション(第1アプリケーション)は表示を制御するアプリケーションとして規定されているのに対し、サービスアプリケーション(第2アプリケーション)は表示を制御しないアプリケーションとして規定されている。しかし、出願人は、サービスアプリケーションでもアクティビティアプリケーションと同様に、view機能を呼び出し、表示情報を生成することが可能であることを見出した。   FIG. 29 shows how the service application SA1 generates display information. The service application SA1 makes a window W3 acquisition request to the window manager WM2, and in response to this, the window manager WM2 sends the window W3 to the service application SA1. The service application SA1 that has acquired the window W3 calls the view function, arranges display components (view), and generates display information. In the specification of Android (registered trademark), the activity application (first application) is defined as an application that controls display, while the service application (second application) is defined as an application that does not control display. However, the applicant has found that the service application can call the view function and generate display information in the same manner as the activity application.

図17で説明したように、ウィンドウマネージャWM2は、一つのアクティビティアプリケーションに対して一つのウィンドウしか割り当てることが出来ず、また、プレゼンテーションP1を用いた場合でも複数のウィンドウを割り当てることが出来るのは、メインのアクティビティアプリケーションに限られていた。すなわち、ウィンドウマネージャWM2のウィンドウ割当部は、アクティビティアプリケーション(第1アプリケーション)のうちメインで動作しないアプリケーションに対しては一つのウィンドウのみの割り当てしか出来ない。しかし、アクティビティアプリケーションに加えてサービスアプリケーションを用いて表示を行う事により、複数のアプリケーションに対して複数のウィンドウを配置し、マルチディスプレイが実現する。また、図26ではサービスアプリケーションを一つしか示していないが、実際にはサービスアプリケーションを複数用意し、各サービスアプリケーションに別のウィンドウを割り当てることが出来る。従って、ウィンドウ数に制限のないマルチディスプレイが可能となる。   As described with reference to FIG. 17, the window manager WM2 can only allocate one window to one activity application, and can allocate a plurality of windows even when the presentation P1 is used. It was limited to the main activity application. That is, the window allocation unit of the window manager WM2 can allocate only one window to an application that does not operate in the main among the activity applications (first application). However, by displaying using a service application in addition to an activity application, a plurality of windows are arranged for a plurality of applications, thereby realizing a multi-display. Although only one service application is shown in FIG. 26, in practice, a plurality of service applications can be prepared and a different window can be assigned to each service application. Therefore, a multi-display with no limit on the number of windows is possible.

図30は、サービスアプリケーションSA1が表示情報を生成する様子を示すタイムチャートである。まず、ウィンドウマネージャWM2に電源が投入されると、ウィンドウマネージャWM2からサービスアプリケーションSA1にその旨が通知される。すると、サービスアプリケーションSA1はウィンドウマネージャWM2にディスプレイリストの取得要求を行う(ステップS1)。   FIG. 30 is a time chart showing how the service application SA1 generates display information. First, when the window manager WM2 is powered on, the window manager WM2 notifies the service application SA1 of that fact. Then, the service application SA1 makes a display list acquisition request to the window manager WM2 (step S1).

この取得要求に対して、ウィンドウマネージャWM2はサービスアプリケーションSA1にディスプレイリストを提供する(ステップS2)。ここでディスプレイリストには、ディスプレイD1,D2,D3のリストが含まれる。サービスアプリケーションSA1はディスプレイリストを取得すると、ウィンドウマネージャWM2に対してディスプレイD3情報の獲得要求を行う(ステップS3)。   In response to this acquisition request, the window manager WM2 provides a display list to the service application SA1 (step S2). Here, the display list includes a list of displays D1, D2, and D3. When the service application SA1 acquires the display list, the service application SA1 requests the window manager WM2 to acquire display D3 information (step S3).

この獲得要求に対してウィンドウマネージャWM2は、サービスアプリケーションSA1にディスプレイD3情報を提供する(ステップS4)。サービスアプリケーションSA1はディスプレイD3情報を取得すると、ウィンドウマネージャWM2に対してウィンドウW3の獲得要求を行う(ステップS5)。   In response to this acquisition request, the window manager WM2 provides the display D3 information to the service application SA1 (step S4). When the service application SA1 acquires the display D3 information, the service application SA1 makes a window W3 acquisition request to the window manager WM2 (step S5).

この獲得要求に対してウィンドウマネージャWM2は、サービスアプリケーションSA1にウィンドウW3を提供する(ステップS6)。こうして、サービスアプリケーションSA1にウィンドウW3が割り当てられる。サービスアプリケーションSA1はウィンドウW3を取得すると、ウィンドウマネージャWM2に対して表示レイヤの指定要求を行う(ステップS7)。   In response to this acquisition request, the window manager WM2 provides the window W3 to the service application SA1 (step S6). Thus, the window W3 is allocated to the service application SA1. When the service application SA1 acquires the window W3, the service application SA1 makes a display layer designation request to the window manager WM2 (step S7).

この指定要求に対してウィンドウマネージャWM2は、サービスアプリケーションSA1に承認応答を行う(ステップS8)。こうして、サービスアプリケーションSA1の表示レイヤが確定する。その後、サービスアプリケーションSA1はview機能を呼び出して表示部品(view)を配置し、表示情報を生成する。この表示情報はウィンドウマネージャWM2に送られ、ウィンドウマネージャWM2によりディスプレイD3に表示される。   In response to this designation request, the window manager WM2 sends an approval response to the service application SA1 (step S8). In this way, the display layer of the service application SA1 is determined. Thereafter, the service application SA1 calls the view function, arranges the display component (view), and generates display information. This display information is sent to the window manager WM2 and displayed on the display D3 by the window manager WM2.

図31は、アクティビティアプリケーションAA1のウィンドウW1に対する表示情報VA1を示している。ウィンドウマネージャWM2は、表示情報VA1のどの部分をウィンドウW1で切り取るかを定める。図32は、表示情報VA1と、表示情報VA1の所定の矩形領域を切り取るウィンドウW1とを示している。従って、ディスプレイD1には図33のようにウィンドウW1で切り取られたアクティビティアプリケーションAA1の表示情報VA1が表示される。   FIG. 31 shows display information VA1 for the window W1 of the activity application AA1. The window manager WM2 determines which part of the display information VA1 is cut out by the window W1. FIG. 32 shows display information VA1 and a window W1 for cutting out a predetermined rectangular area of the display information VA1. Accordingly, the display information VA1 of the activity application AA1 cut out in the window W1 as shown in FIG. 33 is displayed on the display D1.

ウィンドウマネージャWM2は、表示情報VA1のどの部分をウィンドウW2で切り取るかを定める。図34は、アクティビティアプリケーションAA1のウィンドウW2に対する表示情報VA1と、表示情報VA1の所定の矩形領域を切り取るウィンドウW2とを示している。従って、ディスプレイD2には図35のようにウィンドウW2で切り取られたアクティビティアプリケーションAA1の表示情報VA1が表示される。   The window manager WM2 determines which part of the display information VA1 is cut out by the window W2. FIG. 34 shows display information VA1 for the window W2 of the activity application AA1, and a window W2 for cutting out a predetermined rectangular area of the display information VA1. Accordingly, the display information VA1 of the activity application AA1 cut out in the window W2 as shown in FIG. 35 is displayed on the display D2.

図36は、サービスアプリケーションSA1の表示情報VS1を示している。例えば、図36における各四辺形および各円形が表示部品である。サービスアプリケーションSA1は、表示部品である各四辺形および各円形に対して、拡大縮小、回転、平行移動、色、または透過を示す情報を与えて、表示情報VS1上の配置を決定する。サービスアプリケーションSA1は、各表示部品の配置を決定する。すなわち、サービスアプリケーションSA1は、表示情報VS1における各表示部品のレイアウトを決定する。各表示部品の配置には、表示情報VS1上の座標を決定する必要があるが、座標には、相対座標と絶対座標がある。相対座標とは、他の表示部品との前後も含む相対的な位置関係を示し、絶対座標は表示情報における原点からの位置関係を示す。サービスアプリケーションSA1は、view機能を呼び出し、各表示部品を配置することによって、表示情報を生成する。ウィンドウマネージャWM2は、表示情報VS1のどの部分をウィンドウW3で切り取るかを定める。図37は、表示情報VS1と、表示情報VS1の所定の矩形領域を切り取るウィンドウW3とを示している。従って、ディスプレイD3には図38のようにウィンドウW3で切り取られたサービスアプリケーションSA1の表示情報VS1が表示される。   FIG. 36 shows the display information VS1 of the service application SA1. For example, each quadrangle and each circle in FIG. 36 are display components. The service application SA1 determines the arrangement on the display information VS1 by giving information indicating enlargement / reduction, rotation, translation, color, or transmission to each quadrangle and each circle that is a display component. The service application SA1 determines the arrangement of each display component. That is, the service application SA1 determines the layout of each display component in the display information VS1. For the arrangement of each display component, it is necessary to determine coordinates on the display information VS1, and there are relative coordinates and absolute coordinates. Relative coordinates indicate a relative positional relationship including before and after other display components, and absolute coordinates indicate a positional relationship from the origin in the display information. The service application SA1 generates display information by calling the view function and arranging each display component. The window manager WM2 determines which part of the display information VS1 is cut out by the window W3. FIG. 37 shows the display information VS1 and a window W3 for cutting out a predetermined rectangular area of the display information VS1. Accordingly, the display information VS1 of the service application SA1 cut out in the window W3 as shown in FIG. 38 is displayed on the display D3.

すなわち、実施の形態1のスマートフォン用のオペレーティングシステムを用いた表示制御方法は、複数のディスプレイの夫々について表示領域であるウィンドウを作成し、ウィンドウを、オペレーティングシステムの仕様で表示を制御するアプリケーションとして規定された第1アプリケーションと、オペレーティングシステムの仕様で表示を制御しないアプリケーションとして規定された第2アプリケーションとを含む複数のアプリケーションに割り当て、複数のアプリケーションに表示情報を用意させ、複数のアプリケーションから表示情報を取得し、当該表示情報をウィンドウの割り当てに沿ってウィンドウに対応する複数のディスプレイに表示させる。そして、第1アプリケーションは、一つのウィンドウのみの割り当てが可能なアプリケーションを含む。従って、第1アプリケーションと第2アプリケーションのマルチアプリケーションによるマルチディスプレイが可能である。   In other words, the display control method using the smartphone operating system according to the first embodiment creates a window that is a display area for each of a plurality of displays, and defines the window as an application that controls display according to the specifications of the operating system. Assigned to a plurality of applications including the first application and the second application defined as an application that does not control display in the operating system specification, and causes the plurality of applications to prepare display information. The display information is acquired and displayed on a plurality of displays corresponding to the window according to the window assignment. The first application includes an application that can allocate only one window. Accordingly, multi-display by multi-applications of the first application and the second application is possible.

<B−3.変形例>
以上の説明では、スマートフォン用のオペレーティングシステムとしてアンドロイド(登録商標)を例に挙げたが、他のスマートフォン用のオペレーティングシステムも本発明に適用可能である。
<B-3. Modification>
In the above description, Android (registered trademark) is taken as an example of an operating system for a smartphone, but other operating systems for a smartphone can also be applied to the present invention.

また、ウィンドウマネージャWM2はウィンドウW1等をアクティビティアプリケーションAA1に送り、これに対してアクティビティアプリケーションが表示情報を用意すると説明した。しかし、ウィンドウマネージャWM2はアクティビティアプリケーションAA1にウィンドウW1を割り当てるだけで、ウィンドウW1自体を送らなくても良い。この場合、ウィンドウマネージャWM2はアクティビティアプリケーションAA1から取得した表示情報をウィンドウW1に配置する。   Further, it has been described that the window manager WM2 sends the window W1 and the like to the activity application AA1, and the activity application prepares display information for this. However, the window manager WM2 only assigns the window W1 to the activity application AA1, and does not need to send the window W1 itself. In this case, the window manager WM2 arranges the display information acquired from the activity application AA1 in the window W1.

なお、本発明は、その発明の範囲内において、実施の形態を適宜、変形、省略することが可能である。   In the present invention, the embodiments can be appropriately modified and omitted within the scope of the invention.

この発明は詳細に説明されたが、上記した説明は、すべての態様において、例示であって、この発明がそれに限定されるものではない。例示されていない無数の変形例が、この発明の範囲から外れることなく想定され得るものと解される。   Although the present invention has been described in detail, the above description is illustrative in all aspects, and the present invention is not limited thereto. It is understood that countless variations that are not illustrated can be envisaged without departing from the scope of the present invention.

11 ユーザインタフェース、12 メモリ、13 CPU、14 バス、21,22,23 出力端子、A1,A2,A3 アプリケーション、AA1,AA2,AA3 アクティビティアプリケーション、D1,D2,D3 ディスプレイ、P1 プレゼンテーション、W1,W2 ウィンドウマネージャ。   11 user interface, 12 memory, 13 CPU, 14 bus, 21, 22, 23 output terminal, A1, A2, A3 application, AA1, AA2, AA3 activity application, D1, D2, D3 display, P1 presentation, W1, W2 window manager.

Claims (2)

スマートフォン用のオペレーティングシステムを用いた表示制御装置であって、
複数のディスプレイの夫々について表示領域であるウィンドウを作成するウィンドウ作成部と、
前記ウィンドウ作成部が作成したウィンドウを複数のアプリケーションに割り当てるウィンドウ割当部と、
前記複数のアプリケーションから表示情報を取得し、当該表示情報を前記ウィンドウの割り当てに沿って前記ウィンドウに対応する前記複数のディスプレイに表示させる表示制御部と、を備え、
前記複数のアプリケーションは、表示を制御するアプリケーションとして前記オペレーティングシステムの仕様で規定された第1アプリケーションと、表示を制御しないアプリケーションとして前記オペレーティングシステムの仕様で規定された第2アプリケーションとを含み、
前記第1アプリケーションは、前記ウィンドウ割当部により一つのウィンドウのみの割り当てが可能なアプリケーションを含み、
前記ウィンドウ割当部により一つのウィンドウのみの割り当てが可能なアプリケーションは、前記第1アプリケーションのうちメインで動作しないアプリケーションであり、
前記ウィンドウ割り当て部は、前記第1アプリケーション及び前記第2アプリケーションにウィンドウを割り当て、
前記表示制御部は、前記第1アプリケーションの表示情報が表示されるディスプレイと異なるディスプレイに、前記第2アプリケーションの表示情報を表示させる、
表示制御装置。
A display control device using an operating system for a smartphone,
A window creation unit for creating a window that is a display area for each of a plurality of displays;
A window allocation unit that allocates a window created by the window creation unit to a plurality of applications;
A display control unit that obtains display information from the plurality of applications and displays the display information on the plurality of displays corresponding to the windows in accordance with the allocation of the windows, and
The plurality of applications include a first application defined by the operating system specification as an application that controls display, and a second application defined by the operating system specification as an application that does not control display,
The first application includes an application capable of assigning only one window by the window assigning unit,
An application that can assign only one window by the window assigning unit is an application that does not operate in the main among the first applications,
The window assigning unit assigns windows to the first application and the second application,
The display control unit displays the display information of the second application on a display different from the display on which the display information of the first application is displayed.
Display control device.
スマートフォン用のオペレーティングシステムを用いた表示制御方法であって、
複数のディスプレイの夫々について表示領域であるウィンドウを作成し、
前記ウィンドウを、前記オペレーティングシステムの仕様で表示を制御するアプリケーションとして規定された第1アプリケーションと、前記オペレーティングシステムの仕様で表示を制御しないアプリケーションとして規定された第2アプリケーションとを含む複数のアプリケーションに割り当て、
前記複数のアプリケーションに表示情報を用意させ、
前記複数のアプリケーションから表示情報を取得し、当該表示情報を前記ウィンドウの割り当てに沿って前記ウィンドウに対応する前記複数のディスプレイに表示させ、
前記第1アプリケーションは、一つのウィンドウのみの割り当てが可能なアプリケーションを含み、
前記一つのウィンドウのみの割り当てが可能なアプリケーションは、前記第1アプリケーションのうちメインで動作しないアプリケーションであり、
前記第1アプリケーション及び前記第2アプリケーションにウィンドウを割り当て、
前記第1アプリケーションの表示情報が表示されるディスプレイと異なるディスプレイに、前記第2アプリケーションの表示情報を表示させる、
表示制御方法。
A display control method using an operating system for a smartphone,
Create a window that is the display area for each of the multiple displays,
The window is assigned to a plurality of applications including a first application defined as an application that controls display according to the specifications of the operating system and a second application defined as an application that does not control display according to the specifications of the operating system ,
The display information is prepared for the plurality of applications,
Obtaining display information from the plurality of applications, causing the display information to be displayed on the plurality of displays corresponding to the windows in accordance with the allocation of the windows,
The first application includes an application capable of assigning only one window;
The application capable of assigning only one window is an application that does not operate in the main among the first applications,
Assign windows to the first application and the second application;
Displaying the display information of the second application on a display different from the display on which the display information of the first application is displayed;
Display control method.
JP2018146645A 2018-08-03 2018-08-03 Display control apparatus and display control method Active JP6605094B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2018146645A JP6605094B2 (en) 2018-08-03 2018-08-03 Display control apparatus and display control method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018146645A JP6605094B2 (en) 2018-08-03 2018-08-03 Display control apparatus and display control method

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2017537080A Division JP6387193B2 (en) 2015-08-31 2015-08-31 Display control apparatus and display control method

Publications (2)

Publication Number Publication Date
JP2019008805A JP2019008805A (en) 2019-01-17
JP6605094B2 true JP6605094B2 (en) 2019-11-13

Family

ID=65026049

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018146645A Active JP6605094B2 (en) 2018-08-03 2018-08-03 Display control apparatus and display control method

Country Status (1)

Country Link
JP (1) JP6605094B2 (en)

Also Published As

Publication number Publication date
JP2019008805A (en) 2019-01-17

Similar Documents

Publication Publication Date Title
US9798565B2 (en) Data processing system and method having an operating system that communicates with an accelerator independently of a hypervisor
CN109324903B (en) Display resource scheduling method and device for embedded system
KR20190021141A (en) Electronic device for controlling multi-window and method for operating thereof
JP2017507398A (en) Vehicle having multiple user interface operating domains
US20120236012A1 (en) Method and Device for Displaying Application Image
CN109343922B (en) GPU (graphics processing Unit) virtual picture display method and device
JP2001084154A (en) Synchronization of graphics texture management in computer system using thread
AU2016269452A1 (en) User interface displaying and processing method and user interface displaying and processing device
US9684548B2 (en) Integrating operating systems
US20190317784A1 (en) Display method for use in multi-operating systems and electronic device
US9471357B2 (en) Monitoring virtual machine interface and local graphical user interface on a thin client and alternating therebetween
CN113050899B (en) Method and system for directly displaying video and UI drm based on Wayland protocol
US8223158B1 (en) Method and system for connecting multiple shaders
KR20080113881A (en) System and method for providing virtual interface
CN112799801A (en) Method, device, equipment and medium for drawing simulation mouse pointer
JP6387193B2 (en) Display control apparatus and display control method
US20180307497A1 (en) System and method of interactive splash screen in embedded environments
CN117170883B (en) Method, device, equipment and storage medium for rendering display
JP6605094B2 (en) Display control apparatus and display control method
CN109791444B (en) Method and device for calling input method, server and terminal
JP2014203461A (en) Desktop sharing system and its method
CN113986064A (en) Cloud desktop cursor processing method and device and storage medium
CN110728773A (en) Image storage method and device and electronic equipment
US20120252536A1 (en) Mobile terminal
EP3522530A1 (en) System performance improvement method, system performance improvement device and display device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180803

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190917

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20191015

R150 Certificate of patent or registration of utility model

Ref document number: 6605094

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250