CN107924317B - 应用程序执行装置以及应用程序执行方法 - Google Patents

应用程序执行装置以及应用程序执行方法 Download PDF

Info

Publication number
CN107924317B
CN107924317B CN201580082566.6A CN201580082566A CN107924317B CN 107924317 B CN107924317 B CN 107924317B CN 201580082566 A CN201580082566 A CN 201580082566A CN 107924317 B CN107924317 B CN 107924317B
Authority
CN
China
Prior art keywords
application
display
display mechanism
application program
camera
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201580082566.6A
Other languages
English (en)
Other versions
CN107924317A (zh
Inventor
三次达也
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Publication of CN107924317A publication Critical patent/CN107924317A/zh
Application granted granted Critical
Publication of CN107924317B publication Critical patent/CN107924317B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/14—Display of multiple viewports
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/4401—Bootstrapping
    • G06F9/4406—Loading of operating system
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/445—Program loading or initiating
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/02—Improving the quality of display appearance
    • G09G2320/0247—Flicker reduction other than flicker reduction circuits used for single beam cathode-ray tubes
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2330/00—Aspects of power supply; Aspects of display protection and defect management
    • G09G2330/02—Details of power systems and of start or stop of display operation
    • G09G2330/026—Arrangements or methods related to booting a display
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/12—Overlay of images, i.e. displayed pixel being the result of switching between the corresponding input pixels
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00—Aspects of the architecture of display systems
    • G09G2360/12—Frame memory handling
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00—Aspects of the architecture of display systems
    • G09G2360/18—Use of a frame buffer in a display terminal, inclusive of the display panel
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2380/00—Specific applications
    • G09G2380/10—Automotive applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Computer Security & Cryptography (AREA)
  • Stored Programmes (AREA)
  • Studio Devices (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

本发明提供一种应用程序执行装置以及应用程序执行方法，使得冷启动时高速地启动，且摄像头影像接替时在显示图像中不产生闪烁。本发明所涉及的应用程序执行装置，其特征在于，包括：内核，该内核具有显示机构；框架控制机构，该框架控制机构对包含于显示机构的多个窗口框架进行控制；构架，该构架由内核启动，具有将显示机构抽象化的抽象化显示机构；第一应用程序，该第一应用程序直接利用显示机构进行动作；以及第二应用程序，该第二应用程序经由抽象化显示机构间接利用显示机构进行动作，具有第一应用程序的功能，框架控制机构在第一应用程序以及第二应用程序各自动作时进行控制，使得分配相同的窗口框架。

Description

应用程序执行装置以及应用程序执行方法
技术领域
本发明涉及执行应用程序的应用程序执行装置以及应用程序执行方法。
背景技术
已知有如下技术：即，将拍摄后方的摄像头搭载至车辆，在向后方启动时将由摄像头拍摄到的影像(以下称为摄像头影像)显示在显示器上。在该技术中，要求在后方启动时将摄像头影像尽快显示在显示器上。
例如，在将具有高性能OS(Operating System：处理系统)的CPU(CentralProcessing Unit：中央处理单元)以外的硬件所处理的摄像头影像输出至显示器、或利用具有高性能OS的CPU中引导加载程序(boot loader)的功能将摄像头影像输出至显示器之后，通过CPU以外的硬件、或高性能OS中摄像头应用程序，在摄像头影像上重叠引导线，并输出至显示器。像这样，首先显示摄像头影像，之后进行显示重叠了引导线的摄像头影像这样的影像的接替。这里，高性能OS是指进行高级的信息处理的OS，例如列举有Linux(注册商标，以下相同)OS以及Android(注册商标，以下相同)(安卓)OS等。
以往，公开了一种车载用后方监视装置，包括：设置在车辆后部的摄像头；对影像信号实施加工处理，向图像显示单元进行输出的图像处理电路；以及与倒车档的输入操作联动地判断能否由图像处理电路进行加工处理(对图像重叠引导线的处理)的判断单元，不需要引导线时不实施对摄像头影像重叠引导线的处理，需要引导线时实施对摄像头影像重叠引导线的处理(例如参照专利文献1)。
此外，还公开了一种车辆用显示装置，包括：判定主CPU的启动是否完成的启动判定单元；以及在由启动判定单元判定为主CPU的启动未完成的情况下，不利用主CPU而通过显示CPU将由拍摄装置获得的图像显示在车载显示设备上的显示控制单元(例如参照专利文献2)。
此外，还公开了一种电子设备，包括：指示电子设备的正常启动的第一指示部；指示电子设备的暂时启动的第二指示部；第一运算处理部；以及第二运算处理部，第一运算处理部在由第一指示部发出了指示的情况下执行第一处理系统，第一处理系统的启动完成后执行第一用户界面的处理，在由第二指示部发出了指示的情况下不执行第一处理系统以及第一用户界面的处理，第二运算处理部执行以与第一处理系统相比较短的时间被启动的第二处理系统，在由第一指示部发出了指示的情况下，第二处理系统的启动完成后执行第二用户界面的处理，在第一处理系统的启动完成时抑制第二用户界面的处理的执行(例如参照专利文献3)。
现有技术文献
专利文献
专利文献1：日本专利特许第4498771号公报
专利文献2：日本专利特许第4978558号公报
专利文献3：日本专利特许第5028904号公报
发明内容
发明所要解决的技术问题
如上文所述，在车辆向后方启动时将摄像头影像显示在显示器上时，要求将摄像头影像尽快(例如在电源导通后2秒以内)显示于显示器。即，如何高速地启动用于显示摄像头影像的应用程序(以下称为摄像头应用程序)成为课题。特别是，由于冷启动(cold boot)时的启动耗费时间，因此需要加快冷启动时的启动。
专利文献1中，倒车档接通时判断是否能由图形LSI进行加工处理，判断为不能由图形LSI进行加工处理时，摄像头的影像信号被切换开关单元进行切换，使得成为不经由图形LSI而被直接输入至LCD面板的状态。由此，需要对摄像头影像重叠引导线的硬件，耗费成本。此外，由于通过切换开关单元切换摄像头影像的通过路径，因此摄像头影像接替时在显示图像中会产生闪烁。
专利文献2中，由于切换主CPU和显示CPU，因此摄像头影像的通过路径不同。从而，摄像头影像接替时在显示图像中会产生闪烁。此外，需要对摄像头影像重叠引导线的硬件，耗费成本。
专利文献3中，由于切换第一处理系统和第二处理系统，因此在切换时(摄像头影像接替时)在显示图像中会产生闪烁。
在通过具有高性能OS的CPU中的引导加载程序的功能将摄像头影像输出至显示器的情况下，摄像头影像接替时在显示图像中会产生闪烁。
由上文所述，以往，存在摄像头影像接替时在显示图像中会产生闪烁这样的问题。从而，期望使得在冷启动时高速地启动，且在摄像头影像接替时显示图像中不产生闪烁。
本发明是为了解决上述问题而完成的，其目的在于提供一种应用程序执行装置以及应用程序执行方法，使得冷启动时高速地启动，且摄像头影像接替时在显示图像中不产生闪烁。
解决技术问题的技术方案
为了解决上述问题，本发明所涉及的应用程序执行装置的特征在于，包括：内核，该内核具有显示机构；框架控制机构，该框架控制机构对包含于显示机构的多个窗口框架进行控制；构架，该构架由内核启动，具有将显示机构抽象化的抽象化显示机构；第一应用程序，该第一应用程序直接利用显示机构进行动作；以及第二应用程序，该第二应用程序经由抽象化显示机构间接利用显示机构进行动作，具有第一应用程序的功能，框架控制机构在第一应用程序以及第二应用程序各自动作时进行控制，使得分配相同的窗口框架。
此外，本发明所涉及的应用程序执行方法，至少以内核以及构架的顺序进行启动来执行第一应用程序以及第二应用程序，该应用程序执行方法的特征在于，内核具有显示机构，框架控制机构对包含于显示机构的多个窗口框架进行控制；构架由内核启动，具有将显示机构抽象化的抽象化显示机构，第一应用程序直接利用显示机构进行动作，第二应用程序经由抽象化显示机构间接利用显示机构进行动作，具有第一应用程序的功能，框架控制机构在第一应用程序以及第二应用程序各自动作时进行控制，使得分配相同的窗口框架。
发明效果
根据本发明，应用程序执行装置包括：内核，该内核具有显示机构；框架控制机构，该框架控制机构对包含于显示机构的多个窗口框架进行控制；构架，该构架由内核启动，具有将显示机构抽象化的抽象化显示机构；第一应用程序，该第一应用程序直接利用显示机构进行动作；以及第二应用程序，该第二应用程序经由抽象化显示机构间接利用显示机构进行动作，具有第一应用程序的功能，框架控制机构在第一应用程序以及第二应用程序各自动作时进行控制，使得分配相同的窗口框架，因此能使得冷启动时高速地启动，且摄像头影像接替时在显示图像中不产生闪烁。
此外，应用程序执行方法至少以内核以及构架的顺序进行启动来执行第一应用程序以及第二应用程序，该应用程序执行方法中，内核具有显示机构，框架控制机构对包含于显示机构的多个窗口框架进行控制；构架由内核启动，具有将显示机构抽象化的抽象化显示机构，第一应用程序直接利用显示机构进行动作，第二应用程序经由抽象化显示机构间接利用显示机构进行动作，具有第一应用程序的功能，框架控制机构在第一应用程序以及第二应用程序各自动作时进行控制，使得分配相同的窗口框架，因此能使得冷启动时高速地启动，且摄像头影像接替时在显示图像中不产生闪烁。
本发明的目的、特征、形态以及优点通过以下详细的说明和附图会变得更为明了。
附图说明
图1是表示本发明的实施方式1所涉及的应用程序执行装置的硬件结构的一个示例的框图。
图2是表示本发明的实施方式1所涉及的应用程序执行装置的软件结构的一个示例的框图。
图3是表示本发明的实施方式1所涉及的应用程序执行装置的软件结构的一个示例的框图。
图4是表示本发明的实施方式1所涉及的应用程序执行装置的硬件结构的一个示例的框图。
图5是表示本发明的实施方式1所涉及的应用程序执行装置的启动顺序的一个示例的图。
图6是表示本发明的实施方式1所涉及的应用程序执行装置的动作的一个示例的图。
图7是表示本发明的实施方式1所涉及的应用程序执行装置的动作的一个示例的图。
图8是表示本发明的实施方式1所涉及的应用程序执行装置的动作的一个示例的图。
图9是表示本发明的实施方式1所涉及的应用程序执行装置的软件结构的一个示例的框图。
图10是表示本发明的实施方式1所涉及的应用程序执行装置的软件结构的一个示例的框图。
图11是表示本发明的实施方式1所涉及的框架控制机构与显示机构的关系的图。
图12是表示本发明的实施方式1所涉及的应用程序执行装置的动作的一个示例的图。
图13是表示本发明的实施方式1所涉及的应用程序执行装置的动作的一个示例的图。
图14是表示本发明的实施方式1所涉及的应用程序执行装置的动作的一个示例的图。
图15是表示本发明的实施方式1所涉及的应用程序执行装置的动作的一个示例的图。
图16是表示仅使以往的常规摄像头应用程序进行动作的情况的一个示例的图。
图17是表示本发明的实施方式2所涉及的应用程序执行装置的动作的一个示例的图。
图18是表示本发明的实施方式2所涉及的应用程序执行装置的动作的一个示例的图。
图19是表示本发明的实施方式3所涉及的应用程序执行装置的动作的一个示例的图。
图20是表示本发明的实施方式3所涉及的应用程序执行装置的动作的一个示例的图。
图21是表示现有技术的硬件结构的一个示例的框图。
图22是表示现有技术的软件结构的一个示例的框图。
具体实施方式
以下，基于附图来说明本发明的实施方式。
<实施方式1>
首先，对本发明的实施方式1所涉及的应用程序执行装置的结构进行说明。
图1是表示本发明的实施方式1所涉及的应用程序执行装置的硬件结构的一个示例的框图。此外，图1中示出了对将由摄像头1拍摄的摄像头影像显示在显示器4上的应用程序进行执行的应用程序执行装置所涉及的硬件结构的一例。
如图1所示，由摄像头1拍摄的摄像头影像通过影像捕捉器2被转换为适用于CPU3的格式。由影像捕捉器2转换后的摄像头影像通过CPU3被附加了引导线等绘制信息，输出至显示器4。CPU3对摄像头影像、和附加了引导线等绘制信息的摄像头影像进行切换。本实施方式1的应用程序执行装置由CPU3的动作来实现。
图1所示的硬件结构与将常规的摄像头影像输出至显示器的硬件结构(不需要高速启动的硬件结构)相同，不单独具备用于进行高速启动的硬件。本实施方式1中，通过图1所示的硬件结构实现高速启动。
图21是表示现有技术的硬件结构的一个示例的框图。此外，图21简要地示出了专利文献1、2的硬件结构。
如图21所示，CPU28启动前，由摄像头25拍摄到的摄像头影像通过影像捕捉器26、图形处理器27、开关29以及显示器30的路径被输出至显示器30。这时，在显示器30中显示由摄像头25所拍摄的摄像头影像。
此外，若CPU28启动，则由摄像头25所拍摄的摄像头影像通过影像捕捉器26、图形处理器27、CPU28以及开关29的路径被输出至显示器30。这时，在显示器30中显示由CPU28实施了引导线的重叠处理后的摄像头影像。
如上所述，图21所示的现有技术中，由于通过开关29切换摄像头影像的通过路径，因此在摄像头影像接替时会产生闪烁。
图2是表示本发明的实施方式1所涉及的应用程序执行装置的软件结构的一个示例的框图。另外，图2中示出了由图1的CPU3所执行的软件结构。
如图2所示，CPU3具有执行内核5、构架7、本地摄像头应用程序9以及常规摄像头应用程序10的功能。
内核5具有作为在显示器4上进行显示的功能的显示机构6。此外，内核5具有用于使显示器4显示的驱动器(图2的例子中为显示器驱动器、影像捕捉器驱动器)、以及硬件资源(图2的例子中为CPU3所具备的、与显示器4相连的设备)。显示机构6存在于驱动器的上级。此外，本实施方式1中，以内核5是Linux内核进行了说明，但不限于此。此外，显示机构6也可以是Android OS的Surface Flinger(界面投递器)以及Hardware Composer(硬件合成器)。
构架7具有：将内核所具有的显示机构6、驱动器、以及硬件资源抽象化的抽象化显示机构8。
本地摄像头应用程序9是用于将摄像头影像显示在显示器4上的应用程序，直接利用显示机构6进行动作。此外，本地摄像头应用程序9仅具有输出或不输出摄像头影像这样的基本功能，不具有对摄像头影像重叠引导线的功能。即，本地摄像头应用程序9具有后文所述的常规摄像头应用程序10所具有的功能中的特定功能。
常规摄像头应用程序10是用于将摄像头影像显示在显示器4上的应用程序，经由抽象化显示机构8间接利用显示机构6来进行动作。此外，常规摄像头应用程序10具有对摄像头影像重叠引导线的功能等复杂的功能。
图3是表示本发明的实施方式1所涉及的应用程序执行装置的软件结构的一个示例的框图。此外，图3所示的软件结构是将图2所示的软件结构一般化后的结构。
如图3所示，内核5具有包含图2的显示机构6的功能机构11。此外，内核5具有包含图2中说明的驱动器以及硬件资源的、外围组的驱动器以及硬件资源。
构架7具有将功能机构11、驱动器以及硬件资源抽象化的抽象化功能机构12。
本地应用程序13(第一应用程序)直接利用功能机构11进行动作。此外，常规应用程序14(第二应用程序)具有本地应用程序13的功能，经由抽象化功能机构12间接利用功能机构11进行动作。本地应用程序13具有常规应用程序14所具有的功能中的特定功能。
图22是表示现有技术的硬件结构的一个示例的框图。此外，图22简要示出了专利文献3的硬件结构。
如图22所示，OS31具有显示机构32，应用程序33利用显示机构32进行动作。此外，OS34具有显示机构35，应用程序36利用显示机构35进行动作。另外，应用程序33、36被设为是用于将影像显示在显示器上的应用程序。
如图22所示的现有技术中，由于每个应用程序33、36的OS31、34不同，因此切换应用程序33、36时需要切换OS31、34。这时，由于每个应用程序33、36的显示机构32、35不同，因此在切换应用程序33、36时会产生影像的闪烁。
图4是表示本发明的实施方式1所涉及的应用程序执行装置的硬件结构的一个示例的框图。另外，图4中示出了图1的CPU3周边的硬件结构。
如图4所示，CPU3与NOR型闪存15、eMMC(embedded Multi Media Card：嵌入式多媒体卡)16、以及DRAM(Dynamic Random Access Memory：动态随机存取存储器)17相连接。此外，NOR型闪存15、eMMC16以及DRAM17在图1中省略图示。
NOR型闪存15储存引导加载程序18。另外，NOR型闪存15只要是小规模容量的存储器即可，例如可以是ROM(Read Only Memory：只读储存器)等。
eMMC16储存包含内核5、构架7、本地摄像头应用程序9以及常规摄像头应用程序10的应用程序(未图示)。另外，eMMC16只要是大规模容量的存储器即可，例如可以是硬盘等。
CPU3将内核5、构架7、以及引导加载程序18中的至少一个载入DRAM17以使其动作。另外，图2的本地摄像头应用程序9以及常规摄像头应用程序10、与图3的本地摄像头应用程序13以及常规应用程序14被储存至eMMC16。
接着，利用图5～8对应用程序执行装置的整体的动作进行说明。
如图5所示，应用程序执行装置通过依次启动引导加载程序18、内核5、构架7来进行动作。下面，对引导加载程序18、内核5、构架7启动的详情进行说明。
如图6所示，CPU3利用储存于NOR型闪存15的程序，将储存于NOR型闪存15的引导加载程序18载入DRAM17。所载入的引导加载程序18由DRAM17来启动，从而进行动作。这里，储存至NOR型闪存15的程序具有将引导加载程序18载入DRAM17的功能。
如图7所示，引导加载程序18将储存于eMMC16的内核5载入DRAM17。所载入的内核5由DRAM17进行启动，从而进行动作。具体而言，内核5将驱动器、硬件资源、以及功能机构进行初始化展开。
如图8所示，内核5将储存于eMMC16的构架7载入DRAM17。所载入的构架7由DRAM17进行启动，从而进行动作。具体而言，构架7对抽象化功能机构以及其它的软件组件(被抽象化后的其它功能机构)进行初始化展开。
上述内容中，高性能OS由构架7构成。内核5以及构架7由DRAM17协调地进行动作。另一方面，若高性能OS的加载完成，则引导加载程序18从DRAM17放出且不进行动作。引导加载程序18和高性能OS的系统不同。此外，本实施方式1中，以高性能OS(构架7)是Android OS进行了说明，但不限于此。
图9、10是表示本发明的实施方式1所涉及的应用程序执行装置的软件结构的另一个示例的框图。图9表示应用程序执行装置的整体的结构，图10主要表示内核5的详细的结构。另外，图9中示出了具备图2中框架控制机构19的结构，但也可以是具备图3中框架控制机构19的结构。
如图9所示，应用程序执行装置包括框架控制机构19。如图10所示，显示机构6具有窗口框架(window frame)20～22以及混合器23。此外，内核5具有显示器驱动器24。
框架控制机构19是本地应用程序之一，是对窗口框架20～22进行抽象化的机构。框架控制机构19进行对各个本地应用程序以及常规应用程序分别分配窗口框架20～22中的任一个的控制。
窗口框架20～22是对由本地应用程序以及常规应用程序构成的画面设计即绘制窗口、以及该绘制窗口中的图层进行储存的区域。另外，本实施方式1中，对显示机构6具有三个窗口框架的情况进行了说明，但窗口框架不限于三个，只要是多个即可。
混合器23具有将多个应用程序重合的功能。显示器驱动器24具有将摄像头影像输出至显示器4的功能。
图11是表示框架控制机构19和显示机构6的关系的图。
框架控制机构19对由本地应用程序或构架7的抽象化显示机构8所进行的、对显示机构6的任意窗口框架的访问进行管理控制。即，特定的窗口框架的用途能由框架控制机构19来进行管理控制。
接着，利用图12～14对图9所示的应用程序执行装置的动作进行说明。
图12表示本地摄像头应用程序9进行动作的情况。如图12所示，框架控制机构19对本地摄像头应用程序9分配显示机构6的窗口框架20。若本地摄像头应用程序9进行动作，则摄像头影像通过窗口框架20以及混合器23，利用内核5的显示器驱动器24的驱动被输出至显示器4。这时，本地摄像头应用程序9可以不掌握利用了显示机构6的哪个窗口框架。
图13表示不具有将摄像头影像输出至显示器4的功能的(常规摄像头应用程序10以外的)任意的常规应用程序进行动作的情况。如图13所示，框架控制机构19对构架7的抽象化显示机构8分配显示机构6的窗口框架22。若常规应用程序进行动作，则由该常规应用程序所绘制的图像通过窗口框架22以及混合器23，利用内核5的显示器驱动器24的驱动被输出至显示器4。这时，构架7的抽象化显示机构8可以不掌握利用了显示机构6的哪个窗口框架。
在同时执行图12以及图13的情况下，向窗口框架20输入由本地摄像头应用程序9的动作所产生的摄像头影像，向窗口框架22输入由常规摄像头应用程序10以外的任意的常规应用程序的动作所产生的图像。
显示机构6的混合器23进行下述任一种动作：仅将本地摄像头应用程序9的动作所产生的摄像头影像输出至显示器4，仅将任意的常规应用程序的动作所产生的图像输出至显示器4，或将本地摄像头应用程序9的动作所产生的摄像头影像和任意的常规应用程序的动作所产生的图像重合并输出至显示器4。像这样，能对本地摄像头应用程序9的动作所产生的摄像头影像、和任意的常规应用程序的动作所产生的图像的输出进行切换、或进行重叠。
图14表示常规摄像头应用程序10进行动作的情况。如图14所示，框架控制机构19经由构架7的抽象化显示机构8对常规摄像头应用程序10分配显示机构6的窗口框架20。若常规摄像头应用程序10进行动作，则摄像头影像通过窗口框架20以及混合器23，利用内核5的显示器驱动器24的驱动被输出至显示器4。
如上所述，框架控制机构19依照硬件资源来控制窗口框架，而与框架控制机构19的上级状态即本地摄像头应用程序9和常规摄像头应用程序10无关。图12、14的例子中，本地摄像头应用程序9和常规摄像头应用程序10中作为硬件资源的摄像头影像是共同的，因此被分配相同的窗口框架20。
此外，从本地摄像头应用程序9切换至常规摄像头应用程序10(使摄像头影像接替)时，由于通过框架控制机构19的控制利用窗口框架20来持续输出摄像头影像，因此在切换时不产生显示图像的闪烁(摄像头影像的扰乱)。
图15是将图12、14所示的动作总结的流程图。
如图15所示，若内核5启动，则显示器驱动器24、显示机构6、框架控制机构19进行初始化处理。框架控制机构19在初始化处理中从显示机构6获取窗口列表。
若框架控制机构19的初始化处理完成，则本地摄像头应用程序9从框架控制机构19获取了窗口信息之后，获得窗口1。这时，显示机构6从存储器获得帧缓存(framebuffer)。由此，通过本地摄像头应用程序9的动作，捕捉到摄像头影像。另外，窗口1与图12的例子中的窗口框架20相对应。此外，存储器例如与图4的DRAM17相对应。此外，摄像头影像的捕捉例如由图1的影像捕捉器2来进行。
若内核5成为动作状态，则抽象化显示机构8在初始化处理中从框架控制机构19获取窗口信息。若抽象化显示机构8的初始化处理完成，则常规摄像头应用程序10从抽象化显示机构8获取窗口信息之后，对本地摄像头应用程序9进行停止请求。之后，常规摄像头应用程序10从抽象化显示机构8获得窗口1。
常规摄像头应用程序10从显示机构6获得窗口2，利用该窗口2进行引导线等的绘制。另外，窗口2例如也可以是窗口框架22(参照图13)。
如上所述，进行从本地摄像头应用程序9向常规摄像头应用程序10的切换(即，进行摄像头影像的接替。)。这时，由于本地摄像头应用程序9和常规摄像头应用程序10利用共同的窗口1，因此在摄像头影像中不产生闪烁。
图16是表示以往的仅使常规摄像头应用程序进行动作的情况的一个示例的图。如图16所示，常规摄像头应用程序不进行图15所示那样的利用了与本地摄像头应用程序共同的窗口的摄像头影像的接替。由此，以往在由常规摄像头应用程序的动作而使摄像头影像接替时会产生闪烁。
如上所述，根据本实施方式1，通过对本地摄像头应用程序9和常规摄像头应用程序10分配相同的窗口框架，从而能在摄像头影像接替时在显示图像中不产生闪烁。
<实施方式2>
本发明的实施方式2中，其特征在于，将本地应用程序的功能设为最小限度。其它结构以及动作与实施方式1相同，因此这里省略说明。
图17是表示CPU3具有图3所示的各功能的情况下、应用程序执行装置的动作的一例的图。
如图17所示，CPU3的电源导通后，引导加载程序18将内核5载入DRAM17。内核5由DRAM17进行启动(参照图6、7)。
CPU3将本地应用程序13载入DRAM17，启动本地应用程序13。本地应用程序13直接利用内核5的功能机构11，执行预先确定的功能。
本地应用程序13启动后，内核5将构架7载入DRAM17。构架7由DRAM17进行启动(参照图8)。
构架7启动后，CPU3将常规应用程序14载入DRAM17，启动常规应用程序14。常规应用程序14经由构架7的抽象化功能机构12，间接利用内核5的功能机构11，执行预先确定的功能。
上述内容中，由于本地应用程序13被载入DRAM17而被展开，因此载入时间依赖于本地应用程序13的容量。为了从CPU3的电源导通开始以短时间启动本地应用程序13，需要将本地应用程序13的功能设为最小限度，抑制本地应用程序13的程序容量(即本地摄像头应用程序9比常规摄像头应用程序10的容量要小)。由此，使本地应用程序13的载入时间最优化，缩短从CPU3的电源导通开始到本地应用程序13进行动作为止的时间。
此外，本地应用程序13在常规应用程序14执行后，在任意时刻结束动作。作为任意时刻，可以是常规应用程序14开始动作时，也可以是常规应用程序14完全进行完动作时(常规应用程序14动作后)。
图18是表示CPU3具有图2所示的各功能的情况下、应用程序执行装置的动作的一例的图。
如图18所示，CPU3的电源导通后，引导加载程序18将内核5载入DRAM17。内核5由DRAM17进行启动(参照图6、7)。
CPU3将本地摄像头应用程序9载入DRAM17，启动本地摄像头应用程序9。本地摄像头应用程序9利用内核5的显示机构6，将摄像头影像输出至显示器4。
本地摄像头应用程序9启动后，内核5将构架7载入DRAM17。构架7由DRAM17进行启动(参照图8)。
构架7启动后，CPU3将常规摄像头应用程序10载入DRAM17，启动常规应用程序10。常规摄像头应用程序10经由构架7的抽象化显示机构8，间接利用内核5的显示机构6，将重叠了引导线等附加信息的摄像头影像显示在显示器4上。
上述内容中，由于本地摄像头应用程序9被载入DRAM17而被展开，因此载入时间依赖于本地摄像头应用程序9的容量。为了从CPU3的电源导通开始以短时间启动本地摄像头应用程序9，需要将本地摄像头应用程序9的功能设为最小限度，抑制本地摄像头应用程序9的程序容量(即本地摄像头应用程序9比常规摄像头应用程序10的容量要小)。由此，使本地摄像头应用程序9的载入时间最优化，缩短从CPU3的电源导通开始到本地摄像头应用程序9进行动作为止的时间。
此外，本地摄像头应用程序9以及常规摄像头应用程序10直接或间接利用同一显示机构6进行动作。由此，在从本地摄像头应用程序9所显示的摄像头影像、向常规摄像头应用程序10所显示的摄像头影像切换时，不产生显示画面的闪烁。
此外，本地摄像头应用程序9在常规摄像头应用程序10执行后，在任意时刻结束动作。作为任意时刻，可以是常规摄像头应用程序10开始动作时，也可以是常规摄像头应用程序10完全进行完动作时(常规摄像头应用程序10动作后)。
如上述内容所示，根据本实施方式2，通过将本地应用程序13(或本地摄像头应用程序9)的功能设为最小限度，从而能在冷启动时高速地进行启动。
此外，上述内容中对图2、3所示的结构进行了说明，但也能适用于图9所示的结构。
<实施方式3>
实施方式2中，为了使构架7中全部的抽象化功能机构12动作，需要启动内核5中全部的功能机构11。因此，内核5对全部的驱动器、全部的硬件资源、以及全部的功能机构进行初始化展开，从而内核的初始化展开需要耗费时间(参照图17)。
本发明的实施方式3中，其特征在于，预先将本地应用程序的动作所需的功能机构等启动。其它结构以及动作与实施方式2相同，因此这里省略详细说明。
图19是表示CPU3具有图3所示的各功能的情况下、应用程序执行装置的动作的一例的图。
如图19所示，CPU3的电源导通后，引导加载程序18将内核5载入DRAM17。内核5由DRAM17进行启动(参照图6、7)。这时，内核5对功能机构11中的本地应用程序13所需的驱动器、硬件资源、以及功能机构进行初始化展开。
CPU3将本地应用程序13载入DRAM17，启动本地应用程序13。本地应用程序13直接利用内核5的功能机构11中的本地应用程序13所需的功能机构，执行预先确定的功能。
本地应用程序13执行后，内核5对功能机构11中的本地应用程序13无需的驱动器、硬件资源、以及功能机构进行初始化展开。
之后的动作(常规应用程序14的启动等)与实施方式2相同(参照图17)因此省略说明。
通过上述内容，能缩短从CPU3的电源导通到本地应用程序13进行动作为止的时间。
图20是表示CPU3具有图2所示的各功能的情况下、应用程序执行装置的动作的一例的图。
如图20所示，CPU3的电源导通后，引导加载程序18将内核5载入DRAM17。内核5由DRAM17进行启动(参照图6、7)。这时，内核5对功能机构11中的本地摄像头应用程序9所需的驱动器、硬件资源、以及功能机构6进行初始化展开。
CPU3将本地摄像头应用程序9载入DRAM17，启动本地摄像头应用程序9。本地摄像头应用程序9直接利用内核5的显示机构6，将摄像头影像输出至显示器4。
本地摄像头应用程序9执行后，内核5对功能机构11中的本地摄像头应用程序9无需的驱动器、硬件资源、以及功能机构(显示机构6以外的功能机构)进行初始化展开。
之后的动作(常规摄像头应用程序10的启动等)与实施方式1相同(参照图18)，因此省略说明。
通过上述内容，能缩短从CPU3的电源导通到本地摄像头应用程序9进行动作为止的时间。
如上述内容所述，根据本实施方式3，预先启动本地应用程序13(或本地摄像头应用程序9)所需的功能机构，执行本地应用程序13(或本地摄像头应用程序9)，从而能在冷启动时高速地进行启动。
另外，也可以如实施方式2所述，使本地应用程序13(或本地摄像头应用程序9)比常规应用程序14(或常规摄像头应用程序10)的容量要小。
另外，本发明在其发明的范围内，可将各实施方式进行自由组合，或将各实施方式适当地进行变形、省略。
本发明详细地进行了说明，但上述的说明在所有的形态中都是示例，本发明并不局限于此。未示例的无数的变形例被解释为可设想到而未脱离本发明的范围。
标号说明
1摄像头，2影像捕捉器，3CPU，4显示器，5内核，6显示机构，7构架，8抽象化显示机构，9本地摄像头应用程序，10常规摄像头应用程序，11功能机构，12抽象化功能机构，13本地应用程序，14常规应用程序，15NOR型闪存，16eMMC，17DRAM，18引导加载程序，19框架控制机构，20、21、22窗口框架，23混合器，24显示器驱动器，25摄像头，26影像捕捉器，27图形处理器，28CPU，29开关，30显示器，31OS，32显示机构，33应用程序，34OS，35显示机构，36应用程序。

Claims (8)

1.一种应用程序执行装置，其特征在于，包括：
内核，该内核具有显示机构；
框架控制机构，该框架控制机构对包含于所述显示机构的多个窗口框架进行控制；
构架，该构架由所述内核启动，具有将所述显示机构抽象化的抽象化显示机构；
第一应用程序，该第一应用程序直接利用所述显示机构进行动作；以及
第二应用程序，该第二应用程序经由所述抽象化显示机构间接利用所述显示机构进行动作，具有所述第一应用程序的功能，
所述框架控制机构在所述第一应用程序以及所述第二应用程序各自动作时进行控制，使得分配相同的所述窗口框架。
2.如权利要求1所述的应用程序执行装置，其特征在于，
所述第一应用程序比所述第二应用程序的容量要小。
3.如权利要求1所述的应用程序执行装置，其特征在于，
所述内核具有包含所述显示机构的多个功能机构，在仅启动了所述第一应用程序的动作所需的所述显示机构之后，启动所述第一应用程序的动作无需的其它所述功能机构。
4.如权利要求1所述的应用程序执行装置，其特征在于，
所述第一应用程序在所述第二应用程序执行后结束动作。
5.如权利要求1所述的应用程序执行装置，其特征在于，
所述内核为Linux内核。
6.如权利要求1所述的应用程序执行装置，其特征在于，
所述构架为Android OS。
7.如权利要求1所述的应用程序执行装置，其特征在于，
所述显示机构是Android OS的Surface Flinger和Hardware Composer。
8.一种应用程序执行方法，至少以内核以及构架的顺序进行启动从而执行第一应用程序以及第二应用程序，该应用程序执行方法的特征在于，
所述内核具有显示机构，
框架控制机构对包含于所述显示机构的多个窗口框架进行控制，
所述构架由所述内核启动，具有将所述显示机构抽象化的抽象化显示机构，
所述第一应用程序直接利用所述显示机构进行动作，
所述第二应用程序经由所述抽象化功能机构间接利用所述显示机构进行动作，具有所述第一应用程序的功能，
所述框架控制机构在所述第一应用程序以及所述第二应用程序各自动作时进行控制，使得分配相同的所述窗口框架。
CN201580082566.6A 2015-08-31 2015-08-31 应用程序执行装置以及应用程序执行方法 Active CN107924317B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2015/074575 WO2017037819A1 (ja) 2015-08-31 2015-08-31 アプリケーション実行装置およびアプリケーション実行方法

Publications (2)

Publication Number Publication Date
CN107924317A CN107924317A (zh) 2018-04-17
CN107924317B true CN107924317B (zh) 2020-12-22

Family

ID=58187120

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201580082566.6A Active CN107924317B (zh) 2015-08-31 2015-08-31 应用程序执行装置以及应用程序执行方法

Country Status (5)

Country Link
US (1) US10417998B2 (zh)
JP (1) JP6272580B2 (zh)
CN (1) CN107924317B (zh)
DE (1) DE112015006856T5 (zh)
WO (1) WO2017037819A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019172167A1 (ja) * 2018-03-09 2019-09-12 パナソニックＩｐマネジメント株式会社 車載装置
CN109885340B (zh) * 2019-01-10 2022-06-10 北京字节跳动网络技术有限公司 一种应用程序冷启动加速方法、装置、电子设备
FR3104794B1 (fr) * 2019-12-13 2021-11-19 Continental Automotive Gmbh Dispositif d’affichage multimédia pour véhicule

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11265289A (ja) * 1998-03-16 1999-09-28 Mitsubishi Electric Corp 情報処理装置および情報処理装置の高速初期起動方法
CN1698042A (zh) * 2003-04-24 2005-11-16 三菱电机株式会社 影像设备,影像模块单元以及影像设备操作方法
JP2007323181A (ja) * 2006-05-30 2007-12-13 Canon Inc 起動方法及び起動装置
US20090282477A1 (en) * 2008-05-08 2009-11-12 Google Inc. Method for validating an untrusted native code module
CN101853221A (zh) * 2005-02-14 2010-10-06 松下电器产业株式会社 应用程序执行装置、应用程序执行方法和程序
CN102243571A (zh) * 2011-07-08 2011-11-16 西安交通大学 一种面向嵌入式Hypervisor的多视窗显示虚拟化操作方法
US20130055135A1 (en) * 2009-07-23 2013-02-28 Rockwell Automation Technologies, Inc. Intelligent device framework
WO2013142948A1 (en) * 2012-03-30 2013-10-03 Irdeto Canada Corporation Method and system for preventing and detecting security threats
JP2014197370A (ja) * 2013-03-08 2014-10-16 株式会社デンソー データ処理装置

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3876302A (en) 1972-11-02 1975-04-08 Dick Co Ab High speed low inertia scanning system for a copying machine
JPS5028904A (zh) 1973-07-17 1975-03-24
JP4498771B2 (ja) 2004-03-03 2010-07-07 クラリオン株式会社 車載用後方監視装置
JP5028904B2 (ja) 2006-08-10 2012-09-19 ソニー株式会社 電子機器、および起動方法
JP4978558B2 (ja) 2008-05-19 2012-07-18 株式会社デンソー 車両用表示装置
EP2747425B1 (en) 2012-12-19 2019-05-08 2236008 Ontario Inc. Integrated system for media playback during startup
US20160188279A1 (en) * 2014-12-27 2016-06-30 Intel Corporation Mode-switch protocol and mechanism for hybrid wireless display system with screencasting and native graphics throwing

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11265289A (ja) * 1998-03-16 1999-09-28 Mitsubishi Electric Corp 情報処理装置および情報処理装置の高速初期起動方法
CN1698042A (zh) * 2003-04-24 2005-11-16 三菱电机株式会社 影像设备,影像模块单元以及影像设备操作方法
CN101853221A (zh) * 2005-02-14 2010-10-06 松下电器产业株式会社 应用程序执行装置、应用程序执行方法和程序
JP2007323181A (ja) * 2006-05-30 2007-12-13 Canon Inc 起動方法及び起動装置
US20090282477A1 (en) * 2008-05-08 2009-11-12 Google Inc. Method for validating an untrusted native code module
US20130055135A1 (en) * 2009-07-23 2013-02-28 Rockwell Automation Technologies, Inc. Intelligent device framework
CN102243571A (zh) * 2011-07-08 2011-11-16 西安交通大学 一种面向嵌入式Hypervisor的多视窗显示虚拟化操作方法
WO2013142948A1 (en) * 2012-03-30 2013-10-03 Irdeto Canada Corporation Method and system for preventing and detecting security threats
JP2014197370A (ja) * 2013-03-08 2014-10-16 株式会社デンソー データ処理装置

Also Published As

Publication number Publication date
JPWO2017037819A1 (ja) 2017-10-26
US10417998B2 (en) 2019-09-17
US20180114507A1 (en) 2018-04-26
CN107924317A (zh) 2018-04-17
WO2017037819A1 (ja) 2017-03-09
JP6272580B2 (ja) 2018-01-31
DE112015006856T5 (de) 2018-05-09

Similar Documents

Publication Publication Date Title
JP6272579B2 (ja) アプリケーション実行装置およびアプリケーション実行方法
JP7259571B2 (ja) 車両用制御装置、車両用表示システム、及び車両用表示制御方法
CN107924317B (zh) 应用程序执行装置以及应用程序执行方法
CN105335178B (zh) 一种启动控制方法，及装置
US10569726B2 (en) In-vehicle system
CN112199222B (zh) 一种视频显示方法、装置、电子设备及存储介质
JP6272578B2 (ja) アプリケーション実行装置およびアプリケーション実行方法
CN108351775B (zh) 嵌入式多处理器系统的启动时间优化的方法和系统
CN110622209B (zh) 环绕视图无缝转变到3d视图的系统和方法
CN109710352B (zh) 一种开机动画的显示方法及装置
CN113939430B (zh) 车辆用控制装置、车辆用显示系统和车辆用显示控制方法
JP7180542B2 (ja) 情報処理装置および情報処理方法
CN115098264B (zh) 一种虚拟化管理下的相机调用方法、装置、车辆及介质
CN110908624A (zh) 一种屏幕异显的控制方法及系统
CN114633690B (zh) 快速显示倒车影像的方法、系统、设备及介质
CN116009803A (zh) 一种控制方法、设备和计算机可读存储介质
CN115904295A (zh) 一种多屏显示控制方法、装置、介质、系统、芯片及面板
JP2004125866A (ja) 画像表示方法
JP2024065631A (ja) 画像処理装置及び画像処理方法
CN114827510A (zh) 图片矩阵背光的方法、装置、设备及计算机存储介质
JP2004249621A (ja) プリンタ制御装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant