WO2022209395A1 - 情報処理装置、情報処理方法、プログラム - Google Patents

情報処理装置、情報処理方法、プログラム Download PDF

Info

Publication number
WO2022209395A1
WO2022209395A1 PCT/JP2022/006434 JP2022006434W WO2022209395A1 WO 2022209395 A1 WO2022209395 A1 WO 2022209395A1 JP 2022006434 W JP2022006434 W JP 2022006434W WO 2022209395 A1 WO2022209395 A1 WO 2022209395A1
Authority
WO
WIPO (PCT)
Prior art keywords
application
icon
screen
control unit
displayed
Prior art date
Application number
PCT/JP2022/006434
Other languages
English (en)
French (fr)
Inventor
研冴 田倉
久美子 宗
Original Assignee
ソニーグループ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニーグループ株式会社 filed Critical ソニーグループ株式会社
Priority to US18/551,179 priority Critical patent/US20240176649A1/en
Publication of WO2022209395A1 publication Critical patent/WO2022209395A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/48Program initiating; Program switching, e.g. by interrupt
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2209/00Indexing scheme relating to G06F9/00
    • G06F2209/48Indexing scheme relating to G06F9/48
    • G06F2209/482Application

Definitions

  • the present technology relates to an information processing device, an information processing method, and a program.
  • Patent Literature 1 discloses a technique of synthesizing an image of a user playing a game application on a game screen and distributing it.
  • this disclosure proposes a technology that enables a more comfortable user experience to be provided.
  • the information processing apparatus activates a second application via an extended application that provides an extended function to the first application while the first application is running, and displays the second application on the screen of the first application. It is provided with a control section for displaying application screens in an overlapping manner.
  • the information processing method starts a second application via an extended application that provides an extended function to the first application while the first application is running, and displays the above on the screen of the first application.
  • the screen of the second application is superimposed and displayed.
  • the program according to the present technology activates a second application via an extended application that provides an extended function to the first application while the first application is running, and displays the second application on the screen of the first application.
  • the information processing apparatus is caused to execute a process of overlapping and displaying the screens of the applications.
  • FIG. 1 is a block diagram showing a functional configuration example of an information processing apparatus according to an embodiment
  • FIG. FIG. 10 is a diagram showing an example of an operation related to menu display of extended applications
  • FIG. 10 is a diagram showing an example of an operation position for displaying an extended function menu
  • FIG. 10 is a diagram illustrating an example of an operation related to menu display of extended applications and an OS
  • It is a figure which shows an example of an extended function menu.
  • It is a figure which shows an example of a multitask menu.
  • FIG. 10 is a diagram showing an example of another operation related to switching of the second application
  • FIG. 4 is a diagram showing an example of a multitasking operation area
  • FIG. 11 is a diagram showing another example of an operation related to switching of the second application;
  • FIG. 11 is a diagram showing another example of an operation related to switching of the second application;
  • FIG. 11 is a diagram showing another example of an operation related to switching of the second application;
  • It is a figure which shows an example of operation regarding multiple activation of a 2nd application.
  • It is a figure which shows an example of operation regarding multiple activation of a 2nd application.
  • FIG. 10 is a diagram illustrating another example of operation related to multiple activations of the second application;
  • FIG. 10 is a diagram illustrating another example of operation related to multiple activations of the second application;
  • FIG. 10 is a diagram illustrating another example of operation related to multiple activations of the second application;
  • FIG. 10 is a diagram illustrating another example of operation related to multiple activations of the second application;
  • FIG. 10 is a diagram showing an example of a display regarding the priority of the second application;
  • FIG. 10 is a diagram showing another example of display regarding the priority of the second application;
  • FIG. 10 is a diagram showing another example of display regarding the priority of the second application;
  • FIG. 10 is a diagram illustrating another example of operation related to multiple activations of the second application;
  • FIG. 10 is a diagram illustrating another example of operation related to multiple activations of the second application;
  • 3 is a block diagram of the hardware configuration of the information processing device;
  • FIG. It is a figure which shows the example of a display of the 2nd application screen in a modification. It is a figure which shows the example of a display of the 2nd application screen in a modification.
  • the information processing apparatus 10 may be a mobile terminal such as a smart phone or a tablet PC (Personal Computer) capable of executing various applications, or may be a stationary terminal installed in a user's home or office.
  • a mobile terminal such as a smart phone or a tablet PC (Personal Computer) capable of executing various applications
  • a tablet PC Personal Computer
  • FIG. 1 is a block diagram showing a functional configuration example of an information processing apparatus 10 according to this embodiment.
  • the information processing apparatus 10 includes an operation unit 110, a storage unit 120, an imaging unit 130, a sensor unit 140, a display unit 150, an audio input unit 160, an audio output unit 170, a screen imaging unit 180, and a control unit. 190.
  • the operation unit 110 detects various user operations such as device operations for applications.
  • the device operations described above include, for example, touch operations, press operations, and insertion of an earphone terminal into the information processing apparatus 10 .
  • the touch operation refers to various contact operations on the display unit 150, such as tapping, double tapping, swiping, and pinching. Further, the touch operation includes an action of bringing an object such as a finger close to the display unit 150 .
  • a pressing operation is an operation of pressing the operation unit 110 .
  • the operation unit 110 includes, for example, a touch panel, buttons, keyboard, mouse, proximity sensor, and the like. The operation unit 110 inputs information related to the detected user's operation to the control unit 190 .
  • the storage unit 120 is a storage area for temporarily or permanently storing various programs and data.
  • the storage unit 120 may store programs and data for the information processing apparatus 10 to execute various functions.
  • the storage unit 120 may store programs for executing various applications, management data for managing various settings, and the like.
  • the above is just an example, and the type of data stored in storage unit 120 is not particularly limited.
  • the photographing unit 130 photographs, for example, the face of the user who operates the information processing device 10 under the control of the control unit 190 .
  • the photographing unit 130 includes an imaging device.
  • a smartphone which is an example of the information processing device 10, has a front camera arranged on the display unit 150 side for photographing a user's face and the like, and a main camera arranged on the back side of the display unit 150 for photographing scenery and the like.
  • control unit 190 controls photographing with the front camera as an example.
  • the sensor unit 140 has a function of collecting sensor information related to user behavior using various sensors.
  • the sensor unit 140 includes, for example, an acceleration sensor, a gyro sensor, a geomagnetic sensor, a vibration sensor, a GNSS (Global Navigation Satellite System) signal receiver, and the like.
  • the sensor unit 140 detects, for example, that the user holds the information processing apparatus 10 sideways using a gyro sensor, and inputs the detected information to the control unit 190 .
  • the display unit 150 displays various visual information under the control of the control unit 190 .
  • the display unit 150 may display, for example, an image related to an application.
  • the display unit 150 includes various display devices such as a liquid crystal display (LCD) device and an organic light emitting diode (OLED) display device.
  • the display unit 150 can superimpose a UI (User Interface) of another application on a layer higher than the image of the application being displayed.
  • UI User Interface
  • the voice input unit 160 collects voices uttered by the user based on control by the control unit 190 .
  • the voice input unit 160 includes a microphone or the like.
  • the audio output unit 170 outputs various sounds.
  • the voice output unit 170 outputs voices and sounds according to the status of the application under the control of the control unit 190, for example.
  • the audio output unit 170 includes a speaker and an amplifier.
  • the screen shooting unit 180 Under the control of the control unit 190 , the screen shooting unit 180 shoots a screen shot (SS) of the screen displayed on the display unit 150 and a moving image, and stores them in the storage unit 120 .
  • SS screen shot
  • control unit 190 controls each component included in the information processing apparatus 10 .
  • control unit 190 controls function expansion for applications. It should be noted that functional extension to the application is performed by another application. In order to distinguish between an application whose function is to be expanded and another application whose function is to be expanded, they are called a "first application” and an “extended application", respectively.
  • the control unit 190 activates an extension application in addition to the first application, and controls both applications simultaneously.
  • the control unit 190 activates (executes) an application different from the first application and the extended application via the extended application. An application started via an extended application is called a "second application". Details of the functions of the control unit 190 will be described later.
  • the functional configuration example of the information processing apparatus 10 has been described so far, the functional configuration described above with reference to FIG. 1 is merely an example, and the functional configuration of the information processing apparatus 10 is not limited to the example.
  • the information processing apparatus 10 does not necessarily have to include all of the configurations shown in FIG. . That is, the functional configuration of the information processing apparatus 10 can be flexibly modified according to specifications and operations.
  • each component is stored in a ROM (Read Only Memory) or RAM (Random Access Memory) that stores a control program that describes the processing procedure for an arithmetic unit such as a CPU (Central Processing Unit) to realize these functions.
  • the control program may be read out from the recording medium, and the program may be interpreted and executed. Therefore, it is possible to appropriately change the configuration to be used according to the technical level at which the present embodiment is implemented. An example of the hardware configuration of the information processing device 10 will be described later.
  • the control unit 190 of the information processing apparatus 10 controls the execution of extended applications that provide extended functions to various first applications.
  • the first application is, for example, a game application.
  • the first application is not limited to the game application. Contains various applications used.
  • the extended application it is possible to easily provide extended functions to various first applications without editing the source code. Also, when providing an extended function, the extended application can operate without interfering with the first application or the user's operation on the OS (Operating System) and the behavior of the first application.
  • OS Operating System
  • FIG. 2 is a diagram illustrating an example of an operation related to menu display of an extended application.
  • FIG. 2 shows a state in which the sensor unit 140 detects that the user has turned the information processing apparatus 10 vertically, and the screen on the display unit 150 is displayed vertically by the control unit 190 .
  • FIG. 2 shows a state in which the control unit 190 has already started the first application (here, the game application) and has caused the display unit 150 to display the screen of the first application in full screen.
  • the screen of a 1st application may be described with the "1st application screen 201.”
  • a GE icon 202 is displayed on the display unit 150 on the left side of FIG.
  • the GE icon 202 is an icon for displaying the extended function menu 200 of the extended application.
  • the extended application may be activated by control unit 190 upon detection of activation of the first application, or may be activated upon detection of any operation during activation of the first application.
  • An arbitrary operation is, for example, a user operation detected by the operation unit 110 or the sensor unit 140, a voice operation recognized by the voice input unit 160, or the like.
  • the extended application may be activated by the user tapping the GE icon 202 displayed on the display unit 150 .
  • the extension application may be automatically started when the OS of the information processing apparatus 10 is started.
  • the extended application may be running while the first application is running, the GE icon 202 may not be displayed when the extended application is not being used by the user.
  • the logo may be displayed when the extended application is activated, or, for example, the control unit 190 may control the logo to be automatically displayed in a small size or disappear after a certain period of time.
  • the center of FIG. 2 shows a state in which the user is about to perform a touch operation on the display unit 150 in order to use the extended application.
  • the right side of FIG. 2 shows a state in which the extended function menu 200 of the extended application is displayed superimposed on the first application screen 201 by the user swiping from the edge of the screen of the display unit 150 .
  • the extended function menu 200 is, for example, a pull-down menu that opens from the edge of the screen in response to swiping. Although details will be described later, the extended function menu 200 is displayed by swiping the menu bar 203 (center of FIG. 3). Strictly speaking, therefore, the operation unit 110 detects a touch operation on the display unit 150, information on the detected operation and position (screen coordinates) is sent to the control unit 190, and the control unit 190 displays the extended function menu 200. It is determined whether or not to When the condition for displaying the extended function menu 200 (predetermined operation at a predetermined position) is met, the control section 190 causes the display section 150 to display the extended function menu 200 .
  • the touch operation for displaying the extended function menu 200 is not limited to swipe, and may be tap, double tap, pinch, or the like.
  • the extended function menu 200 may be displayed by tapping the GE icon 202 .
  • the display position of the extended function menu 200 is not limited to the upper portion of the display section 150 as shown on the right side of FIG. Although illustration is omitted, even when the display unit 150 is a so-called horizontal screen, the extended function menu 200 of the extended application is displayed by the user swiping the display unit 150, as in the vertical screen of FIG. , is superimposed on the first application.
  • FIG. 3 is a diagram showing an example of an operation position for displaying the extended function menu 200.
  • Fixing the operation position for displaying the extended function menu 200 of the extended application may significantly hinder the user's operation of the first application and the OS and the behavior of the first application.
  • the operation position may be set to the operation button or icon of the first application, or the display portion of the first application that the user wants to see at all times. Therefore, the operation position for displaying the extended function menu 200 is controlled by the control unit 190 so that the user can freely change it.
  • the left side of FIG. 3 shows a state in which the user taps a predetermined position on the display unit 150 in order to change the operation position for displaying the extended function menu 200 .
  • the predetermined position here is, for example, a predetermined area near the position (the center of FIG. 2) where swiping is started to expand the advanced function menu 200 .
  • the center of FIG. 3 shows a state in which the extended application menu bar 203 is displayed by tapping the display unit 150 (left side of FIG. 3).
  • the touch operation for displaying the menu bar 203 is not limited to tapping.
  • the menu bar 203 is superimposed on the first application screen 201, it is desirable that the shape, color, size, and transmittance of the menu bar 203 be such that they do not interfere with the display of the first application screen 201 as much as possible.
  • the menu bar 203 is not limited to such a shape.
  • the menu bar 203 is controlled by the control unit 190 to be in a non-display state when an area other than the menu bar 203 on the display unit 150 is tapped or when the menu bar 203 is not operated for a certain period of time. be. In this manner, the menu bar 203 is also controlled by the control unit 190 so as to be in a non-display state when not used by the user. As a result, the extended application can operate without further hindering the user's operation on the first application or the OS and the behavior of the first application.
  • FIG. 3 shows a state in which the menu bar 203 displayed in the upper right portion of the display unit 150 is moved to the upper left portion of the display unit 150 by the user dragging and dropping.
  • the display position of the menu bar 203 is changed from the upper right portion (center of FIG. 3) on the display section 150 to the upper left portion (left side of FIG. 3).
  • the display position of the menu bar 203 is not limited to the upper right portion or the upper left portion of the display section 150 .
  • the display position of the menu bar 203 changed on the right side of FIG. 3 is stored in the storage unit 120 by the control unit 190, and the menu bar 203 is displayed at the stored display position when the extended application is used thereafter. . Furthermore, the display position of menu bar 203 may be associated with the first application and stored in storage unit 120 for each first application. This eliminates the need to change the display position of the menu bar 203 in accordance with the first application to be used each time when using various first applications.
  • FIG. 4 is a diagram illustrating an example of an operation related to menu display of extended applications and an OS. Swiping from the edge of the screen as shown on the left side of FIG. 4 may also be used to display the OS menu 204 . That is, the extended function menu 200 and the OS menu 204 may be displayed by the same operation. In such a case, the control unit 190 preferentially displays the extended function menu 200 when swiping at a predetermined position (left side of FIG. 4), and displays the OS menu 204 when swiping at other positions (FIG. 4). center and right).
  • the OS menu 204 is normally displayed by swiping from any position on the upper screen edge of the display unit 150 .
  • the control unit 190 preferentially displays the advanced function menu 200. (left side of FIG. 4).
  • control unit 190 controls to display the OS menu 204 (right side of FIG. 4).
  • the control unit 190 displays the extended function menu 200 by swiping from the upper right portion of the display unit 150, A swipe from the part controls to display the OS menu 204 . Further, when the display position of the extended function menu 200 is set to a position other than the upper part of the display unit 150, the control unit 190 displays the OS menu 204 regardless of the swipe from any position on the screen edge of the upper part of the display unit 150. control to display This allows the extended application to operate without interfering with user operations on the OS.
  • FIG. 5 is a diagram showing an example of the extended function menu 200.
  • the extended function menu 200 of the extended application includes, for example, a brightness adjustment bar display area 210, a quick access icon display area 220, and a menu icon display area 230.
  • FIG. 5 is a diagram showing an example of the extended function menu 200.
  • the extended function menu 200 of the extended application includes, for example, a brightness adjustment bar display area 210, a quick access icon display area 220, and a menu icon display area 230.
  • a brightness adjustment bar display area 210 is an area in which a brightness adjustment bar 211 is displayed.
  • the control unit 190 changes the brightness of the display unit 150 to the brightness corresponding to the dragged position on the brightness adjustment bar 211 .
  • the quick access icon display area 220 is an area that displays icons for immediately using various functions from the extended function menu 200 .
  • the quick access icon display area 220 is provided with an SS icon 221, a continuous shooting SS icon 222, a record icon 223, and a batch restriction icon 224.
  • FIG. 1 A quick access icon display area 220 is an area that displays icons for immediately using various functions from the extended function menu 200 .
  • the quick access icon display area 220 is provided with an SS icon 221, a continuous shooting SS icon 222, a record icon 223, and a batch restriction icon 224.
  • control unit 190 captures one screen shot (image) of the screen displayed on the display unit 150 via the screen capture unit 180, and stores the captured image in the storage unit 120. memorize to
  • the control unit 190 continuously takes a plurality of screenshots of the screen displayed on the display unit 150 for a certain period of time (so-called burst mode) via the screen shooting unit 180. shoot). Then, the control unit 190 generates a data file such as a GIF format from a plurality of screen shots taken within a certain period of time, and stores the data file in the storage unit 120 . This makes it possible to reduce the file size while maintaining high fps (frames per second) compared to video files, making it easier to capture the decisive moment when shooting even with a smartphone.
  • control unit 190 When the record icon 223 is tapped by the user, the control unit 190 performs control to shoot a moving image of the screen displayed on the display unit 150 via the screen shooting unit 180 .
  • control unit 190 controls the advanced function menu 200 to be in a non-display state.
  • the extended function menu 200 can be prevented from appearing in the captured image.
  • control unit 190 When the collective restriction icon 224 is tapped by the user, the control unit 190 performs processing for collectively restricting multiple functions.
  • a game mode icon 231, a focus icon 232, a screen and sound icon 233, a multitask icon 234, a screenshot icon 235, and a record icon 236 are displayed in the menu icon display area 230.
  • the game mode icon 231 is an icon for displaying a UI for setting the game mode.
  • the focus icon 232 is an icon for displaying a UI for selecting the type of menu display, such as floating.
  • the multitask icon 234 is an icon for displaying a UI for executing other applications and other functions concurrently with the first application, as will be described later in detail.
  • the screenshot icon 235 is an icon for displaying a UI for operating a screenshot.
  • the record icon 236 is an icon for displaying a UI for recording (or recording and recording) operations.
  • the control unit 190 causes the UI corresponding to the tapped icon to be displayed on the display unit. Display at 150.
  • the display contents of the extended function menu 200 as shown in FIG. 5 are an example, and are not limited to this. It is possible to increase or decrease icons and areas for using various functions that provide extended functions to the first application, and to change their arrangement. Also, various shapes, colors, sizes, transmittances, and the like of the extended function menu 200 are conceivable.
  • FIG. 6 is a diagram showing an example of the multitasking UI 240. As shown in FIG. As shown in the left side of FIG. 6, when the multitasking icon 234 of the extended function menu 200 is tapped, the control unit 190 displays the multitasking UI 240 instead of the extended function menu 200 as shown in the center of FIG.
  • the multitask UI 240 is provided with a return icon 241, a web selection icon 242, a video selection icon 243, and an application selection icon 244, and a task display area 250 is provided below these icons.
  • the control unit 190 hides the multitask UI 240 and displays the extended function menu 200 again.
  • the control unit 190 causes the task display area 250 to display a UI for displaying a website.
  • the control unit 190 causes the task display area 250 to display a UI for reproducing the moving image of the predetermined action site.
  • the control unit 190 displays a plurality of application icons 251 in the task display area 250 as shown in the center of FIG.
  • the application icon 251 is an icon for activating the second application, and is provided in association with each second application.
  • the second application is an application that is activated via an extended application. and various other applications.
  • the second application is an application installed in the information processing device 10 .
  • application icons 251 corresponding to all applications installed in the information processing apparatus 10 are displayed.
  • the second application is stored in association with each first application, and the task display area 250 displays an app icon 251 corresponding to the second application associated with the running first application.
  • the application icons 251 may be arranged and displayed in the name order (alphabetical order) of the corresponding second applications in the task display area 250 .
  • the control unit 190 may count the number of times the second application has been activated for each first application, and display the application icons 251 in order of the number of times the second application has been activated.
  • the order of the application icons 251 displayed in the task display area 250 may be any order.
  • the control unit 190 activates the second application corresponding to the tapped application icon 251 .
  • the control unit 190 causes the screen of the activated second application (hereinafter referred to as “second application screen”) to be superimposed on the first application screen 201 and displayed.
  • second application screen the screen of the activated second application
  • the application icon 251 corresponding to the second application for displaying the website is tapped, and as shown in the right side of FIG. A screen of the second application is displayed.
  • the second application screen will be referred to as the second application screen 260 when the second application screen is described without distinguishing between the second applications.
  • the second application that displays a website is referred to as a browser application
  • the second application that performs SNS is referred to as an SNS application
  • the second application that reproduces a video is referred to as a video application.
  • the second application screen corresponding to the browser application is referred to as a browser application screen 260a
  • the second application screen corresponding to the SNS application as an SNS application screen 260b
  • the second application screen corresponding to the video application as a video application screen 260c.
  • the size and position of the second application screen 260 displayed on the display unit 150 may be set in advance for each second application, or may be stored in association with the first application. Further, when the second application is terminated, the size and position of the second application screen 260 are stored in the storage unit 120 for each second application, and when the second application is started again, the second application screen 260 is displayed with the stored size and position. An application screen 260 may be displayed.
  • control unit 190 controls the multitasking UI 240 to continue to be displayed.
  • FIG. 7 is a diagram illustrating an example of an operation related to switching of the second application.
  • the information processing apparatus 10 in the single mode in which the number of second applications to be started is one, it is possible to switch the second application to be started.
  • the second application corresponding to the tapped application icon 251 is activated, and the second application is activated.
  • a screen 260 is displayed on the display unit 150 .
  • the user may tap the wrong application icon 251.
  • the extended function menu 200 is displayed again, the multitask icon 234 is tapped to display the task display area 250, and the user taps the application icon 251 corresponding to the desired second application. Then, the user is forced to perform multiple touch operations.
  • control unit 190 keeps the advanced function menu 200 displayed as it is.
  • the control unit 190 terminates the browser application and activates the SNS application. 7, the control unit 190 hides the browser application screen 260a and displays the SNS application screen 260b overlaid on the first application screen 201. As shown in FIG. 7, for example, assume that the browser application is running and the browser application screen 260a is displayed on the display unit 150 together with the extended function menu 200. In this state, when the application icon 251 corresponding to the SNS application is tapped, the control unit 190 terminates the browser application and activates the SNS application. 7, the control unit 190 hides the browser application screen 260a and displays the SNS application screen 260b overlaid on the first application screen 201. As shown in FIG.
  • control unit 190 controls so that the extended function menu 200 continues to be displayed when the SNS application screen 260b is displayed.
  • the focused state refers to a state in which a higher priority than other applications is set, and processing corresponding to the touch operation is executed when the user performs a touch operation.
  • the control unit 190 hides the multitasking UI 240 and brings the first application into focus. Then, when a touch operation is performed on the display unit 150, the control unit 190 executes processing corresponding to the touch operation for the first application.
  • control unit 190 brings the second application into focus.
  • control unit 190 activates the second application via the extension application while the first application is running, and displays the second application screen 260 overlaid on the first application screen 201 .
  • the control unit 190 can execute the second application simultaneously with the first application.
  • the browser application can be activated so that the user can look up the strategy on the website while running the first application.
  • the user wants to watch a moving image in his/her spare time while executing the first application, the user can watch the moving image while executing the first application by activating the moving image application.
  • the information processing apparatus 10 can improve the user experience.
  • by executing an application installed in the information processing apparatus 10 as the second application it is possible to provide the user with greater ease of use than when searching or playing back moving images using an extended application.
  • FIG. 8 is a diagram illustrating an example of another operation related to switching of the second application.
  • the control unit 190 As shown on the left side of FIG. 8, an extended function menu 200 is displayed on the display unit 150.
  • a multitasking display area 300 and a multitask selection area 310 are provided in addition to a brightness adjustment bar display area 210 and a quick access icon display area 220. That is, the extended function menu 200 when the second application is running does not have the menu icon display area 230 and the multitasking display area 300 is not provided as compared to when the second application is not running. and a multitask selection area 310 is provided.
  • characters or the like are displayed to the effect that the second application is being started, and that the second application is terminated by tapping the multitasking display area 300.
  • control unit 190 terminates the second application and hides the second application screen 260 . Further, the control unit 190 displays an extended function menu 200 as shown on the left side of FIG.
  • a multitask icon 311, a running application icon 312, and a candidate application icon 313 are displayed side by side. The details of the multitask icon 311 will be described later.
  • the running application icon 312 is an icon corresponding to the running second application. Then, the active application icon 312 is displayed on the left side of the screen from the candidate application icon 313 . An icon bar 312a is displayed below the running application icon 312 to indicate that the corresponding second application is running.
  • the candidate application icons 313 are icons corresponding to the second applications that have not been started, and for example, three of them are displayed. For example, three candidate application icons 313 may be displayed in alphabetical order of the applications installed in the information processing apparatus 10 . Further, the control unit 190 may count the number of times the second application has been activated for each first application, and arrange and display the candidate application icons 313 in descending order of the number of times the second application has been activated.
  • the control unit 190 terminates the activated SNS application. , activates the video application corresponding to the tapped candidate application icon 313 . That is, the control unit 190 switches and activates the second application.
  • control unit 190 hides the SNS application screen 260b and displays the video application screen 260c overlaid on the first application screen 201. Furthermore, the control unit 190 displays the icon corresponding to the video application as the active application icon 312 and displays the icon corresponding to the terminated SNS application as the candidate application icon 313 .
  • the extended function menu 200 continues to be displayed, and when the user taps the first application screen 201 or the second application screen 260, the control unit 190 The function menu 200 is hidden, and the application corresponding to the tapped application screen is focused.
  • FIG. 9 is a diagram showing an example of the multitasking operation area 270.
  • a multitasking operation area 270 is displayed above the second application screen 260 .
  • the multitasking operation area 270 is hidden while the extended function menu 200 or the multitasking UI 240 is displayed on the display unit 150 (see FIG. 7), and the extended function menu 200 and the multitasking UI 240 are hidden. When displayed, it is displayed above the second application screen 260 .
  • An end icon 271, a maximize icon 272, a minimize icon 273, a multitask icon 274, an application add icon 275, and a size change icon 276 are provided in the multitask operation area 270. That is, it can be said that these icons are displayed at positions associated with the second application screen 260 .
  • the exit icon 271 is an icon for terminating the corresponding second application.
  • the control unit 190 ends the corresponding second application and hides the second application screen 260 .
  • the maximize icon 272 is an icon for maximizing the corresponding second application screen 260 .
  • the control unit 190 enlarges and displays the second application screen 260 on the entire surface of the display unit 150 .
  • the control unit 190 displays the second application screen 260 in the size and position before maximization. Therefore, the control unit 190 stores the size and position of the second application screen 260 when the maximize icon 272 is tapped.
  • the minimize icon 273 is an icon for minimizing the second application screen 260.
  • the control unit 190 hides the corresponding second application screen 260 . Note that when the minimize icon 273 is tapped, the control unit 190 hides the second application screen 260, but does not end the second application.
  • the multitask icon 274 is an icon for switching the running second application. Details of the processing when the multitask icon 274 is tapped will be described later.
  • the application add icon 275 is an icon for adding a second application to be activated. The details of the process when the application add icon 275 is tapped will be described later.
  • the size change icon 276 is an icon for changing the size of the second application screen 260.
  • the control unit 190 changes the size of the second application screen 260 according to the dragged position.
  • FIG. 10 is a diagram illustrating another example of an operation related to switching of the second application. As shown in the left side of FIG. 10, when the multitasking icon 274 in the multitasking operation area 270 displayed above the SNS application screen 260b is tapped, the control unit 190 performs the multitasking operation as shown in the center of FIG. An application selection popup 320 is displayed above the area 270 .
  • a running application icon 321 and candidate application icons 322 are displayed side by side.
  • the running application icon 321 is an icon corresponding to the running second application.
  • the icon corresponding to the SNS application being activated is displayed as the application icon 321 being activated.
  • the running application icon 321 is displayed to the left of the candidate application icon 322 in the application selection popup 320 .
  • An icon bar 321a is displayed below the running application icon 321 to indicate that the corresponding second application is running.
  • Candidate application icons 322 are icons corresponding to the second applications that have not been started, and for example, two of them are displayed. For example, two candidate application icons 322 may be displayed in alphabetical order of the applications installed in the information processing apparatus 10 . Further, the control unit 190 may count the number of times the second application has been activated for each first application, and arrange and display the candidate application icons 322 in descending order of the number of times the second application has been activated.
  • the control unit 190 terminates the activated SNS application, A video application corresponding to the tapped candidate application icon 322 is activated.
  • control unit 190 hides the SNS application screen 260b and displays the video application screen 260c overlaid on the first application screen 201. Furthermore, the control unit 190 displays the icon corresponding to the video application as the active application icon 321 and displays the icon corresponding to the terminated SNS application as the candidate application icon 322 .
  • the application selection popup 320 continues to be displayed when the video application screen 260c is displayed.
  • the control unit 190 hides the application selection popup 320 and focuses on the application corresponding to the tapped application screen. state.
  • FIG. 11 is a diagram illustrating another example of an operation related to switching of the second application.
  • the control unit 190 displays the OS menu 204 as shown on the left side of FIG. 11 .
  • an extended application notification box 330 is displayed in the OS menu 204.
  • the extended application notification box 330 is an area for notifying extended applications, and displays a multitask icon 331, a running application icon 332, and a candidate application icon 333 side by side. The details of the multitask icon 331 will be described later.
  • the running application icon 332 is an icon corresponding to the running second application.
  • the SNS application is running, and the icon corresponding to the SNS application is displayed as the running app icon 332 .
  • the running application icon 332 is displayed to the left of the candidate application icon 333 in the extended application notification box 330 .
  • An icon bar 332a is displayed below the running application icon 332 to indicate that the corresponding second application is running.
  • the candidate application icons 333 are icons corresponding to the second applications that have not been started, and for example, three of them are displayed. For example, three candidate application icons 333 may be displayed in alphabetical order of the applications installed in the information processing apparatus 10 . Further, the control unit 190 may count the number of times the second application has been activated for each first application, and arrange and display the candidate application icons 333 in descending order of the number of times the second application has been activated.
  • the control unit 190 terminates the activated SNS application. , activates the video application corresponding to the tapped candidate application icon 333 .
  • control unit 190 hides the SNS application screen 260b and displays the video application screen 260c overlaid on the first application screen 201. Furthermore, the control unit 190 displays the icon corresponding to the video application as the active application icon 332 and displays the icon corresponding to the terminated SNS application as the candidate application icon 333 .
  • the OS menu 204 continues to be displayed when the video application screen 260c is displayed.
  • the control unit 190 hides the OS menu 204 and focuses on the application corresponding to the tapped application screen. state.
  • FIG. 12 is a diagram illustrating another example of an operation related to switching of the second application.
  • the control unit 190 moves (corresponding to) the vicinity of the operation unit 110 . location) displays the app selection popup 340 .
  • a running application icon 341 and candidate application icons 342 are displayed side by side.
  • the active application icon 341 is an icon corresponding to the active second application (here, the SNS application).
  • the active application icon 341 is displayed on the left side of the application selection popup 340 relative to the candidate application icon 342 .
  • An icon bar 341a is displayed below the running application icon 341 to indicate that the corresponding second application is running.
  • the candidate application icon 342 is an icon corresponding to the second application that has not been started, and for example, two of them are displayed. For example, two candidate application icons 342 may be displayed in alphabetical order of the applications installed in the information processing apparatus 10 . Further, the control unit 190 may count the number of times the second application has been activated for each first application, and arrange and display the candidate application icons 342 in descending order of the number of times the second application has been activated.
  • the control unit 190 terminates the activated SNS application, and changes the tapped candidate application icon 342 to Launch a compatible video app.
  • control unit 190 hides the SNS application screen 260 b and displays the video application screen 260 c superimposed on the first application screen 201 . Further, the control unit 190 displays the icon corresponding to the video application as the active application icon 341 and displays the icon corresponding to the terminated SNS application as the candidate application icon 342 .
  • the application selection popup 340 continues to be displayed when the video application screen 260c is displayed.
  • the control unit 190 hides the application selection popup 340 and focuses on the application corresponding to the tapped application screen. state.
  • the control unit 190 can activate a plurality of second applications using an extended application.
  • the single mode or the multi mode may be selected in advance by setting or the like, or may be switched according to a predetermined user operation.
  • either only single mode or only multimode may be provided.
  • 13 and 14 are diagrams illustrating an example of operations related to multiple activations of the second application.
  • the user performs a user operation to display the extended function menu 200 while the second application screen 260 (here, the SNS application screen 260b) is displayed superimposed on the first application screen 201.
  • control unit 190 displays extended function menu 200 on display unit 150 .
  • the extended function menu 200 displayed here includes a multitasking display area 300 and a multitask selection display area 300 in addition to the brightness adjustment bar display area 210 and the quick access icon display area 220, as in the diagram shown on the left side of FIG. A region 310 is provided.
  • the controller 190 displays a startup application selection area below the multitask selection area 310 in the extended function menu 200 as shown in the center of FIG. 400 is displayed. Therefore, the multitask icon 311 also functions as an operator for displaying the activation application selection area 400 .
  • a thumbnail image 401 of the second application being activated and an application addition icon 402 are displayed.
  • a thumbnail image 401 is a captured image of the second application screen 260 immediately before the extended function menu 200 is displayed. By displaying the thumbnail image 401 of the running second application in this manner, the user can recognize, for example, the minimized second application.
  • the application addition icon 402 is an icon for adding a second application to be activated.
  • the control unit 190 displays an application selection popup 403 instead of the application addition icon 402, as shown on the right side of FIG.
  • Candidate application icons 404 are displayed side by side in the application selection popup 403 .
  • Candidate application icons 404 are icons corresponding to the second applications that have not been started, and for example, three of them are displayed.
  • three candidate application icons 404 may be displayed in alphabetical order of the applications installed in the information processing apparatus 10 .
  • the control unit 190 may count the number of times the second application has been activated for each first application, and arrange and display the candidate application icons 404 in descending order of the number of times the second application has been activated.
  • the control unit 190 activates the video application corresponding to the tapped candidate application icon 404.
  • control unit 190 displays the SNS application screen 260b and the video application screen 260c overlaid on the first application screen 201. Further, the control unit 190 displays the thumbnail image 401 of the video application screen 260c instead of the application selection popup 403, as shown on the left side of FIG. Note that an application add icon 402 or an application selection popup 403 may be displayed in the startup application selection area 400 .
  • control unit 190 causes the multitask selection area 310 to display a running application icon 312 corresponding to the video application. Then, the control unit 190 displays an icon bar 312a below the active application icon 312 corresponding to the video application.
  • the extended function menu 200 continues to be displayed. Then, when the user taps the first application screen 201 or the second application screen 260, the control unit 190 hides the extended function menu 200 as shown on the right side of FIG. Focus on the application corresponding to .
  • priority is set for the running second applications, and the voice of the second application with the highest priority is output from the voice output unit 170.
  • the refresh rate of the second application screen 260 having a high priority is set high. That is, the second application with the higher priority is preferentially executed.
  • running application icons 312 are displayed in order according to the priority. Specifically, the priority of the second application corresponding to the running application icon 312 displayed on the leftmost side is set to be the highest, and the priority is lowered toward the right side.
  • FIG. 15 is a diagram illustrating an example of an operation related to the priority of the second application; For example, it is assumed that an SNS application and a video application are activated and the priority of the SNS application is set higher than that of the video application. In such a case, the running app icon 312 corresponding to the SNS app is displayed on the leftmost side of the multitask selection area 310, and the running app icon 312 corresponding to the video app is displayed on the right side thereof. Become.
  • the audio of the SNS application is output from the audio output unit 170, and the audio of the video application is not output from the audio output unit 170.
  • the SNS application screen 260b is displayed in a higher layer than the video application screen 260c. Also, the refresh rate of the SNS application screen 260b is set higher than that of the video application screen 260c.
  • the active application icon 312 corresponding to the video application is dragged and moved to the left of the active application icon 312 corresponding to the SNS application. Then, as shown in the right side of FIG. 15, the active application icon 312 corresponding to the video application is displayed on the left side, and the active application icon 312 corresponding to the SNS application is displayed on the right side.
  • the control unit 190 sets the priority of the video application higher than that of the SNS application, so that the video application is focused.
  • control unit 190 causes the sound of the video application to be output from the audio output unit 170, and displays the video application screen 260c in a higher layer than the SNS application screen 260b.
  • control unit 190 sets a higher refresh rate for the video application screen 260c than for the SNS application screen 260b.
  • FIG. 16 is a diagram illustrating an example of another operation related to multiple activations of the second application.
  • the control unit 190 displays an application selection popup 320 above the multitask operation area 270 as shown in the center of FIG. display.
  • the control unit 190 keeps the SNS application running and The video application corresponding to the candidate application icon 322 is activated.
  • control unit 190 displays the SNS application screen 260b and the video application screen 260c overlaid on the first application screen 201. Furthermore, the control unit 190 displays icons corresponding to the SNS application and the video application as the active application icon 321 . Note that, in this example, the control unit 190 sets the priority of the second application (video application) started later higher than the priority of the second application (SNS application) that was being started.
  • the application selection popup 320 continues to be displayed, and when the user taps the first application screen 201 or the second application screen 260, the control unit 190 The selection popup 320 is hidden, and the application corresponding to the tapped application screen is focused.
  • FIG. 17 is a diagram illustrating an example of another operation related to multiple activations of the second application.
  • the control unit 190 causes the OS The menu 204 is displayed on the display unit 150 .
  • the additional application icon 410 is displayed in the extended application notification box 330 .
  • the application addition icon 410 is an icon for adding a second application to be activated.
  • the control unit 190 displays the candidate application icons 411 side by side below the application addition icon 410 as shown in the center of FIG. 17 .
  • the candidate application icons 411 are icons corresponding to the second applications that have not been started, and for example, three of them are displayed. For example, three candidate application icons 411 may be displayed in alphabetical order of the applications installed in the information processing apparatus 10 . Further, the control unit 190 may count the number of times the second application has been activated for each first application, and arrange and display the candidate application icons 411 in descending order of the number of times the second application has been activated.
  • the control unit 190 activates the video application corresponding to the tapped candidate application icon 411.
  • control unit 190 displays the SNS application screen 260b and the video application screen 260c overlaid on the first application screen 201. Furthermore, as shown in the right side of FIG. 17, the control unit 190 displays an icon bar 332a below the active application icon 332 corresponding to the video application. Note that, in this example, the control unit 190 sets the priority of the second application (video application) started later higher than the priority of the second application (SNS application) that was being started.
  • OS menu 204 continues to be displayed when the video application screen 260c is displayed. 204 is hidden, and the application corresponding to the tapped application screen is focused.
  • FIG. 18 is a diagram showing an example of display regarding the priority of the second application. Assume that a plurality of second applications (SNS application and video application) are running, and that the SNS application has a higher priority than the video application. In this case, as shown in FIG. 18 , running application icons 332 corresponding to the running second application are displayed side by side in extended application notification box 330 of OS menu 204 .
  • an icon bar 332a is displayed, along with a sound on/off mark 421 and a refresh rate 422.
  • the audio on/off mark 421 is a mark that indicates whether audio is being output based on the order of priority.
  • the voice on/off mark 421 is displayed as a mark outputting voice below the active application icon 332 (left side) corresponding to the SNS application, for example.
  • the audio on/off mark 421 is displayed as a mark that does not output audio below the active application icon 332 corresponding to the video application.
  • the refresh rate 422 indicates the refresh rate of the second application screen 260 based on priority.
  • the refresh rate 422 is displayed to be refreshed at 120 Hz, for example, below the active application icon 332 (left side) corresponding to the SNS application. Also, the refresh rate 422 is displayed to be refreshed at 60 Hz below the active application icon 332 corresponding to the video application.
  • the control unit 190 sets the priority of the video application corresponding to the tapped active application icon 332 higher than the SNS application. For example, a sound on/off mark 421 is displayed below the active application icon 332 corresponding to the video application as a mark for outputting audio, and a mark for not outputting audio is displayed below the active application icon 332 corresponding to the SNS application. , the audio on/off mark 421 is displayed.
  • FIG. 19 is a diagram showing another example of display regarding the priority of the second application. It is assumed here that a plurality of second applications (the SNS application and the video application) are running, and that the SNS application has a higher priority than the video application.
  • a running app icon 332 corresponding to the running second application (SNS app and video app) is displayed in the extended app notification box 330 .
  • the priority of the second application corresponding to the running application icon 332 displayed on the left side is set high.
  • the active application icon 332 corresponding to the video application is dragged and moved to the left of the active application icon 332 corresponding to the SNS application. Then, the control unit 190 sets the priority of the video application higher than that of the SNS application. Further, as shown on the right side of FIG. 19, an active application icon 332 corresponding to the video application is displayed on the left side, and an active application icon 332 corresponding to the SNS application is displayed on the right side.
  • control unit 190 causes the sound of the video application to be output from the audio output unit 170, and displays the video application screen 260c in a higher layer than the SNS application screen 260b.
  • FIG. 20 is a diagram showing another example of display regarding the priority of the second application.
  • a plurality of second applications (the SNS application and the video application) are running and the video application is given higher priority than the SNS application.
  • a running app icon 332 corresponding to the running second application is displayed in the extended app notification box 330 of the OS menu 204 .
  • the running application icon 332 displayed on the left side is superimposed on the running application icon 332 displayed on the right side. This makes it possible for the user to easily determine the second application with the higher priority.
  • numbers 335 may be displayed in order from 1 near the active application icon 332 displayed in the extended application notification box 330 . This makes it possible for the user to easily determine the second application with the higher priority.
  • FIG. 21 is a diagram illustrating an example of another operation related to multiple activations of the second application.
  • the operation button 110a as the predetermined operation unit 110 while the second application (here, the SNS application) is running
  • the control unit 190 an application selection popup 340 is displayed near (at a corresponding position) the operation button 110a.
  • a running application icon 341 and candidate application icons 342 are displayed side by side.
  • the running application icon 341 is an icon corresponding to the running second application.
  • the active application icon 341 is displayed on the left side of the application selection popup 340 relative to the candidate application icon 342 .
  • An icon bar 341a is displayed below the running application icon 341 to indicate that the corresponding second application is running.
  • the candidate application icon 342 is an icon corresponding to the second application that has not been started, and for example, two of them are displayed. For example, two candidate application icons 342 may be displayed in alphabetical order of the applications installed in the information processing apparatus 10 . Further, the control unit 190 may count the number of times the second application has been activated for each first application, and arrange and display the candidate application icons 342 in descending order of the number of times the second application has been activated.
  • the control unit 190 activates the video application corresponding to the tapped candidate application icon 342.
  • control unit 190 displays an SNS application screen 260b and a video application screen 260c overlaid on the first application screen 201. Furthermore, the control unit 190 displays icons corresponding to the SNS application and the video application as the active application icon 321 .
  • the application selection popup 340 continues to be displayed when the video application screen 260c is displayed.
  • the control unit 190 hides the application selection popup 340 and focuses on the application corresponding to the tapped application screen. state.
  • FIG. 22 is a diagram illustrating an example of another operation related to multiple activations of the second application.
  • the control unit 190 performs the following operations as shown on the left side of FIG.
  • An application selection popup 500 is displayed near the operation button 110a.
  • the application selection popup 500 displays a thumbnail image 501 of the running second application.
  • a thumbnail image 501 is a captured image of the second application screen 260 immediately before the extended function menu 200 is displayed. By displaying the thumbnail image 501 of the running second application in this manner, the user can recognize, for example, the minimized second application.
  • control unit 190 activates a plurality of second applications, and displays a second application screen 260 corresponding to the activated second application as shown on the right side of FIG. It is superimposed on the first application screen 201 and displayed. Also, when the thumbnail image 501 corresponding to the video application is tapped, the control unit 190 sets the priority of the tapped thumbnail image 501 higher than that of the SNS application.
  • FIG. 23 is a block diagram showing a hardware configuration example of the information processing apparatus 10. As shown in FIG.
  • the information processing apparatus 10 includes, for example, a processor 871, a ROM 872, a RAM 873, a host bus 874, a bridge 875, an external bus 876, an interface 877, an input device 878, and an output device. 879 , a storage 880 , a drive 881 , a connection port 882 and a communication device 883 .
  • the hardware configuration shown here is an example, and some of the components may be omitted. Moreover, it may further include components other than the components shown here.
  • the processor 871 functions as, for example, an arithmetic processing device or a control device, and performs all or part of the operation of each component based on various programs and data recorded in the ROM 872, the RAM 873, the storage 880, or the removable recording medium 901. Control.
  • the ROM 872 is means for storing programs to be read into the processor 871, data used for calculation, and the like.
  • the RAM 873 temporarily or permanently stores, for example, programs to be read into the processor 871 and various parameters that change appropriately when the programs are executed.
  • the processor 871, ROM 872, and RAM 873 are interconnected via, for example, a host bus 874 capable of high-speed data transmission.
  • the host bus 874 is connected, for example, via a bridge 875 to an external bus 876 with a relatively low data transmission speed.
  • External bus 876 is also connected to various components via interface 877 .
  • the input device 878 for example, a mouse, keyboard, touch panel, button, switch, lever, or the like is used. Furthermore, as the input device 878, a remote controller (hereinafter referred to as a remote controller) capable of transmitting control signals using infrared rays or other radio waves may be used.
  • the input device 878 also includes a voice input device such as a microphone.
  • the output device 879 is, for example, a display device such as a CRT (Cathode Ray Tube), LCD, or organic EL, an audio output device such as a speaker, headphones, a printer, a mobile phone, or a facsimile, etc., to provide the acquired information to the user. It is a device capable of visually or audibly notifying Output devices 879 according to the present disclosure also include various vibration devices capable of outputting tactile stimuli.
  • Storage 880 is a device for storing various data.
  • a magnetic storage device such as a hard disk drive (HDD), a semiconductor storage device, an optical storage device, a magneto-optical storage device, or the like is used.
  • the drive 881 is, for example, a device that reads information recorded on a removable recording medium 901 such as a magnetic disk, optical disk, magneto-optical disk, or semiconductor memory, or writes information to the removable recording medium 901 .
  • a removable recording medium 901 such as a magnetic disk, optical disk, magneto-optical disk, or semiconductor memory
  • the removable recording medium 901 is, for example, DVD media, Blu-ray (registered trademark) media, HD DVD media, various semiconductor storage media, and the like.
  • the removable recording medium 901 may be, for example, an IC card equipped with a contactless IC chip, an electronic device, or the like.
  • connection port 882 is a port for connecting an external connection device 902 such as a USB (Universal Serial Bus) port, IEEE1394 port, SCSI (Small Computer System Interface), RS-232C port, or an optical audio terminal.
  • an external connection device 902 such as a USB (Universal Serial Bus) port, IEEE1394 port, SCSI (Small Computer System Interface), RS-232C port, or an optical audio terminal.
  • the external connection device 902 is, for example, a printer, a portable music player, a digital camera, a digital video camera, an IC recorder, or the like.
  • the communication device 883 is a communication device for connecting to a network. subscriber line), or a modem for various communications.
  • the configuration of the information processing apparatus 10 described above can be considered to be the configuration of a terminal device (smartphone or PC) on which the first application is activated, for example. It can also be considered as an information processing device as the server device described above.
  • the second application is started via an extended application that provides extended functions to the first application, and the screen of the second application is displayed over the screen of the first application. It is equipped with a control unit that allows Thereby, the second application can be easily executed simultaneously with the first application via the extended application. Therefore, the information processing device 10 can improve user experience.
  • the control unit 190 displays a plurality of application icons (application icons 251) on the extended function menu 200 of the extended application, and when the icon displayed on the extended function menu is selected by the user, the selected icon is displayed.
  • the application corresponding to the selected icon is started as the second application, and the state in which the extended function menu is displayed is maintained (FIG. 6).
  • the user can immediately tap another application icon 251 and activate the second application corresponding to that application icon 251 . That is, the information processing apparatus 10 can easily switch the second application.
  • the control unit 190 hides the extended function menu 200 and focuses on the application corresponding to the operated screen. (Fig. 7). As a result, the user can immediately operate the application corresponding to the screen touched by the user.
  • the control unit 190 terminates the running second application, The second application corresponding to the selected icon is activated, and the screen of the second application corresponding to the selected icon is superimposed on the screen of the first application (FIG. 7). This makes it possible to easily change the second application screen to be superimposed and displayed on the first application screen.
  • control unit 190 hides the screen of the terminated second application (second application screen 260). Thereby, the screen of the newly selected second application can be displayed in an easy-to-see manner.
  • the control unit 190 when the second application is activated, causes the extended function menu 200 to display a display area indicating that the second application is activated (multitasking display area 300). is provided (Fig. 8). Thereby, it is possible to confirm whether or not the second application is running in the display area.
  • control unit 190 terminates the second application when the display area (multitasking display area 300) is operated (FIG. 8). This makes it possible to easily end the second application. Also, even when a plurality of second applications are activated, they can be terminated collectively.
  • control unit 190 displays predetermined icons (the running application icon 321 and the candidate application icon 322) at positions corresponding to the screen of the second application, and displays the second application according to the operation on the icon. (Fig. 10).
  • the second application can be easily switched without displaying the extended function menu 200 on the display unit 150 .
  • control unit 190 activates a plurality of second applications, and displays the screens of the plurality of second applications being activated so as to be superimposed on the screen of the first application (FIG. 14).
  • the control unit 190 activates a plurality of second applications, and displays the screens of the plurality of second applications being activated so as to be superimposed on the screen of the first application (FIG. 14).
  • control unit 190 displays the icon of the second application being activated (activated application icon 312 ) side by side in extended function menu 200 .
  • the activated second application can be confirmed in the extended function menu 200 .
  • control unit 190 changes the priority of the second application according to the user's operation on the icon (running application icon 312) (FIG. 15). Thereby, for example, the audio and video of the second application having the higher priority can be preferentially output.
  • control unit 190 displays a predetermined icon (candidate application icon 342) at a position corresponding to second application screen 260, and activates the second application selected according to the operation on the icon (Fig. 21). Thereby, it is possible to easily activate a plurality of second applications and easily show the screens of those second applications to the user.
  • control unit 190 causes the notification menu (OS menu 204) of the operating system to display the icon of the second application (candidate application icon 411), and displays the second application corresponding to the icon in response to the operation on the icon. 2 Start the application (Fig. 17).
  • the second application can be activated via the extended application even by operating the notification menu of the operating system, and the user experience can be further improved.
  • control unit 190 causes the notification menu (OS menu 204) to display the icon of the second application (running application icon 332) according to the priority (FIG. 19).
  • OS menu 204 causes the notification menu to display the icon of the second application (running application icon 332) according to the priority (FIG. 19).
  • the control unit 190 when the operation button 110a is operated by the user, the control unit 190 causes the icon of the second application (the running application icon 341 and the candidate application icon 342) to be displayed in the vicinity of the operation button.
  • the second application is switched and activated according to the operation (FIG. 12). This makes it possible to switch the second application in response to the operation of the physical operation button.
  • the second application is started via the extended application that provides the extended function to the first application, and the screen of the second application is displayed on the screen of the first application. are superimposed on each other.
  • a program activates a second application via an extended application that provides extended functions to the first application while the first application is running, and overlays the screen of the second application on the screen of the first application.
  • the information processing apparatus is caused to execute the process of displaying the This program is a program to be executed by the processor 871 of the information processing device 10 .
  • a program for realizing such an information processing apparatus 10 can be recorded in advance in a HDD as a recording medium built in a device such as a computer device, a ROM in a microcomputer having a CPU, or the like.
  • a flexible disc a CD-ROM (Compact Disc Read Only Memory), an MO (Magneto Optical) disc, a DVD (Digital Versatile Disc), a Blu-ray disc (Blu-ray Disc (registered trademark)), a magnetic disc, a semiconductor memory, It can be temporarily or permanently stored (recorded) in a removable recording medium such as a memory card.
  • Such removable recording media can be provided as so-called package software.
  • a program from a removable recording medium to a personal computer or the like, it can also be downloaded from a download site via a network such as a LAN (Local Area Network) or the Internet.
  • LAN Local Area Network
  • Such a program is suitable for widely providing the information processing apparatus 10 of the embodiment.
  • a mobile terminal device such as a smartphone or tablet, a mobile phone, a personal computer, a dedicated game device, a video device, a PDA (Personal Digital Assistant), etc.
  • the smartphone or the like can be used as the information processing device 10 of the present disclosure.
  • a mobile terminal device such as a smartphone or tablet
  • a mobile phone such as a personal computer, a dedicated game device, a video device, a PDA (Personal Digital Assistant), etc.
  • the smartphone or the like can be used as the information processing device 10 of the present disclosure.
  • the smartphone or the like can function as
  • the method of switching the second application and the method of activating a plurality of the second applications described above are merely examples, and the information processing apparatus 10 may execute at least one of these methods.
  • the position, size, transparency, and hierarchical order may be changed as appropriate. For example, if the line-of-sight position of the user can be detected, the second application screen 260 corresponding to the line-of-sight position of the user may be displayed in a large size.
  • the audio output corresponding to the plurality of second application screens 260 may be changed as appropriate. For example, when the line-of-sight position of the user can be detected, the sound of the second application screen 260 corresponding to the line-of-sight position of the user may be increased, or the sound of the second application screen 260 not at the line-of-sight position may be decreased.
  • the icon bar indicating that the second application screen is minimized is displayed in the extended function menu 200 or the OS menu 204 by the corresponding running application icon 312, You may make it display below 332.
  • FIG. For example, as shown on the left side of FIG. 24, it is assumed that the SNS application and the video application are activated and the SNS application screen 260b and the video application screen 260c are displayed. In such a case, when the minimize icon 273 of the multitasking operation area 270 corresponding to the SNS application screen 260b is tapped, the control unit 190 minimizes the SNS application screen 260b as shown on the right side of FIG. (You want to hide). Further, when the OS menu 204 is displayed, the control unit 190 checks that the corresponding SNS application (second application) is minimized below the running application icon 332 corresponding to the SNS application in the OS menu 204. icon bar 332b indicating .
  • the control unit 190 displays a display icon 600 indicating whether or not to take a screenshot near the second application screen 260 or in the multitasking operation area 270 .
  • the display icon 600 is displayed as either a display icon 600a indicating that a screenshot is taken or a non-display icon 600b that indicates that a screenshot is not taken. (Second application screen 260).
  • the control unit 190 switches the display icon 600a or the non-display icon 600b that was displayed before being tapped to a different icon and displays it. Further, when capturing a screenshot, the control unit 190 also captures the second application screen 260 associated with the display icon 600a, and captures the second application screen 260 associated with the non-display icon 600b. Avoid taking pictures.
  • control unit 190 distinguishes between the second application considered important for the user and the other second applications, and displays the second application screen 260 corresponding to the second application considered important. You can also make your voice louder.
  • the present technology can also adopt the following configuration.
  • An information processing apparatus comprising a control unit that displays a screen of the second application overlaid on a screen of the first application.
  • the control unit When the user selects one of the icons in the extended function menu while the second application is running, the running second application is terminated and the second application corresponding to the selected icon is launched. start it, The information processing apparatus according to (2) or (3), wherein the screen of the second application corresponding to the selected icon is superimposed on the screen of the first application. (5) The control unit The information processing apparatus according to (4), wherein the screen of the terminated second application is hidden. (6) The control unit The information processing according to any one of (2) to (5), wherein, when the second application is activated, a display area for displaying that the second application is activated is provided in the extended function menu. Device.
  • the control unit The information processing apparatus according to (6), wherein the second application is terminated when the display area is operated.
  • the control unit displaying a predetermined icon at a position corresponding to the screen of the second application;
  • the control unit Launch a plurality of second applications, The information processing apparatus according to any one of (1) to (8), wherein the screens of the plurality of second applications being activated are superimposed on the screen of the first application.
  • the control unit The information processing apparatus according to any one of (2) to (7), wherein icons of the second application being activated are arranged and displayed on the extended function menu.
  • the control unit The information processing apparatus according to (10), wherein the priority of the second application is changed according to a user operation on the icon.
  • the control unit displaying a predetermined icon at a position corresponding to the screen of the second application; The information processing apparatus according to any one of (1) to (11), wherein a second application selected according to an operation on the icon is activated.
  • the control unit displaying the icon of the second application in the notification menu of the operating system; The information processing apparatus according to any one of (1) to (12), wherein the second application corresponding to the icon is started according to an operation on the icon.
  • the control unit The information processing apparatus according to (13), wherein icons of the second applications are displayed on the notification menu according to priority.
  • the control unit displaying an icon of the second application near the operation button when the operation button is operated by the user;
  • Information processing device 110 Operation unit 120 Storage unit 130 Photographing unit 140 Sensor unit 150 Display unit 160 Audio input unit 170 Audio output unit 180 Screen photographing unit 190 Control unit

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Software Systems (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

情報処理装置は、第1アプリケーションの起動中に、前記第1アプリケーションに拡張機能を提供する拡張アプリケーションを介して第2アプリケーションを起動させ、前記第1アプリケーションの画面に、前記第2アプリケーションの画面を重ねて表示させる制御部を備える。

Description

情報処理装置、情報処理方法、プログラム
 本技術は、情報処理装置、情報処理方法、プログラムに関する。
 近年、エンターテイメント性の高い種々のアプリケーションが開発されている。また、上記のようなアプリケーションと連携し拡張機能を付与することで、各種の付加価値を創出する技術も提案されている。例えば、特許文献1には、ゲームアプリケーションをプレイするユーザの画像をゲーム画面上に合成し配信を行う技術が開示されている。
国際公開第2020/170453号公報
 ところで、アプリケーションに対し拡張機能を付与する場合、快適なユーザエクスペリエンスが得られるようにすることが重要である。
 そこで本開示では、より快適なユーザエクスペリエンスを提供することができるようにする技術を提案する。
 本技術に係る情報処理装置は、第1アプリケーションの起動中に、前記第1アプリケーションに拡張機能を提供する拡張アプリケーションを介して第2アプリケーションを起動させ、前記第1アプリケーションの画面に、前記第2アプリケーションの画面を重ねて表示させる制御部を備えたものである。
 また、本技術に係る情報処理方法は、第1アプリケーションの起動中に、前記第1アプリケーションに拡張機能を提供する拡張アプリケーションを介して第2アプリケーションを起動させ、前記第1アプリケーションの画面に、前記第2アプリケーションの画面を重ねて表示させるものである。
 また、本技術に係るプログラムは、第1アプリケーションの起動中に、前記第1アプリケーションに拡張機能を提供する拡張アプリケーションを介して第2アプリケーションを起動させ、前記第1アプリケーションの画面に、前記第2アプリケーションの画面を重ねて表示させる処理を情報処理装置に実行させるものである。
本実施の形態に係る情報処理装置の機能構成例を示すブロック図である。 拡張アプリケーションのメニュー表示に係る操作の一例を示す図である。 拡張機能メニューを表示するための操作位置の一例を示す図である。 拡張アプリケーション及びOSのメニュー表示に係る操作の一例を示す図である。 拡張機能メニューの一例を示す図である。 マルチタスクメニューの一例を示す図である。 第2アプリケーションの切り替えに係る操作の一例を示す図である。 第2アプリケーションの切り替えに係る他の操作の一例を示す図である。 マルチタスク操作領域の一例を示す図である。 第2アプリケーションの切り替えに係る操作の他の例を示す図である。 第2アプリケーションの切り替えに係る操作の他の例を示す図である。 第2アプリケーションの切り替えに係る操作の他の例を示す図である。 第2アプリケーションの複数起動に係る操作の一例を示す図である。 第2アプリケーションの複数起動に係る操作の一例を示す図である。 第2アプリケーションの優先順位に係る操作の一例を示す図である。 第2アプリケーションの複数起動に係る他の操作の一例を示す図である。 第2アプリケーションの複数起動に係る他の操作の一例を示す図である。 第2アプリケーションの優先順位に関する表示の一例を示す図である。 第2アプリケーションの優先順位に関する表示の他の例を示す図である。 第2アプリケーションの優先順位に関する表示の他の例を示す図である。 第2アプリケーションの複数起動に係る他の操作の一例を示す図である。 第2アプリケーションの複数起動に係る他の操作の一例を示す図である。 情報処理装置のハードウェア構成のブロック図である。 変形例における第2アプリケーション画面の表示例を示す図である。 変形例における第2アプリケーション画面の表示例を示す図である。
 以下、実施の形態を次の順序で説明する。
<1.機能構成>
<2.拡張機能>
<3.ハードウェア構成例>
<4.まとめ及び変形例>

 なお、本明細書及び図面において、実質的に同一の部位には、同一の符号を付することにより重複する説明を省略する。
 また以下の説明及び図面では、「アプリケーション」を単に「アプリ」と省略表記する場合がある。
<1.機能構成>
 まず、本実施の形態に係る情報処理装置10の機能構成例について説明する。
 情報処理装置10は、各種アプリケーションを実行可能なスマートフォンやタブレットPC(Personal Computer)などのモバイル端末であってもよいし、ユーザの自宅や会社などに設置される据え置き端末であってもよい。
 図1は、本実施の形態に係る情報処理装置10の機能構成例を示すブロック図である。図1に示すように、情報処理装置10は、操作部110、記憶部120、撮影部130、センサ部140、表示部150、音声入力部160、音声出力部170、画面撮影部180、制御部190を備える。
 (操作部110)
 操作部110は、アプリに対する機器操作など、ユーザによる各種の操作を検知する。上記の機器操作には、例えばタッチ操作、押下操作や情報処理装置10に対するイヤホン端子の挿入などが含まれる。ここでタッチ操作とは、表示部150に対する種々の接触動作、例えばタップ、ダブルタップ、スワイプ、ピンチなどをいう。また、タッチ操作には、表示部150に対し、例えば指などの物体を近づける動作を含む。押下操作とは、操作部110を押下する操作をいう。このために、操作部110は、例えば、タッチパネル、ボタン、キーボード、マウス、近接センサなどを備える。操作部110は、検知したユーザの操作に係る情報を制御部190に入力する。
 (記憶部120)
 記憶部120は、各種プログラムやデータを一時的または恒常的に記憶するための記憶領域である。例えば、記憶部120には、情報処理装置10が各種機能を実行するためのプログラムやデータが記憶されてもよい。具体的な一例として、記憶部120には、各種アプリケーションを実行するためのプログラムや、各種設定等を管理するための管理データ等が記憶されてよい。もちろん、上記はあくまで一例であり、記憶部120に記憶されるデータの種別は特に限定されない。
 (撮影部130)
 撮影部130は、制御部190による制御に基づいて、例えば、情報処理装置10を操作するユーザの顔などを撮影する。このために、撮影部130は、撮像素子を備える。情報処理装置10の一例であるスマートフォンは、表示部150側に配置されユーザの顔などを撮影するためのフロントカメラと、表示部150の背面側に配置され風景などを撮影するためのメインカメラとを備える。本実施の形態では、制御部190は、一例としてフロントカメラでの撮影を制御する。
 (センサ部140)
 センサ部140は、ユーザの行動に係るセンサ情報を、各種センサを用いて収集する機能を有する。センサ部140は、例えば加速度センサ、ジャイロセンサ、地磁気センサ、振動センサ、GNSS(Global Navigation Satellite System)信号受信装置などを備える。センサ部140は、例えば、ユーザが情報処理装置10を横向きに構えたことをジャイロセンサによって検知し、検知した情報を制御部190に入力する。
 (表示部150)
 表示部150は、制御部190による制御に基づいて各種の視覚情報を表示する。表示部150は、例えば、アプリケーションに係る画像などを表示してよい。このために、表示部150は、液晶ディスプレイ(LCD:Liquid Crystal Display)装置、OLED(Organic Light Emitting Diode)ディスプレイ装置など、各種のディスプレイ装置を備える。また、表示部150は、表示しているアプリケーションの画像よりも上位のレイヤに、他のアプリケーションのUI(User Interface)を重畳表示させることもできる。
 (音声入力部160)
 音声入力部160は、制御部190による制御に基づいてユーザが発する音声などを収集する。このために、音声入力部160は、マイクロフォンなどを備える。
 (音声出力部170)
 音声出力部170は、各種の音声を出力する。音声出力部170は、例えば、制御部190による制御に基づいてアプリケーションの状況に応じた音声や音を出力する。このために、音声出力部170は、スピーカやアンプを備える。
 (画面撮影部180)
 画面撮影部180は、制御部190による制御に基づいて、表示部150に表示される画面のスクリーンショット(SS)や動画の撮影を行い、記憶部120に記憶する。
 (制御部190)
 制御部190は、情報処理装置10が備える各構成を制御する。また、制御部190は、アプリケーションに対する機能拡張を制御する。
 なお、アプリケーションに対する機能拡張は、別のアプリケーションによって行われる。機能拡張が行われるアプリケーションと、機能拡張を行う別のアプリケーションとを区別するため、それぞれを「第1アプリケーション」「拡張アプリケーション」と呼ぶ。
 機能拡張を行う際、制御部190は、第1アプリケーションの他、拡張アプリケーションを起動し、両方のアプリケーションを同時に制御する。
 また、制御部190は、機能拡張の一例として、第1アプリケーション及び拡張アプリケーションとは異なるアプリケーションを、拡張アプリケーションを介して起動(実行)させる。拡張アプリケーションを介して起動されるアプリケーションを「第2アプリケーション」と呼ぶ。
 制御部190が有する機能の詳細については後述する。
 ここまで情報処理装置10の機能構成例を述べたが、図1を用いて説明した上記の機能構成はあくまで一例であり、情報処理装置10の機能構成は係る例に限定されない。
 例えば、情報処理装置10は、必ずしも図1に示す構成のすべてを備えなくてもよいし、音声入力部160などの各構成を情報処理装置10とは異なる別の装置に備えることも可能である。すなわち、情報処理装置10の機能構成は、仕様や運用に応じて柔軟に変形可能である。
 また、各構成要素の機能を、CPU(Central Processing Unit)などの演算装置がこれらの機能を実現する処理手順を記述した制御プログラムを記憶したROM(Read Only Memory)やRAM(Random Access Memory)などの記録媒体から制御プログラムを読み出し、そのプログラムを解釈して実行することにより行ってもよい。従って、本実施の形態を実施する時々の技術レベルに応じて、適宜利用する構成を変更することが可能である。また情報処理装置10のハードウェア構成の一例については後述する。
<2.拡張機能>
[2.1 拡張アプリケーションの概要]
 次に、情報処理装置10が有する機能について説明する。
 情報処理装置10の制御部190は、各種の第1アプリケーションに対し拡張機能を提供する拡張アプリケーションを実行制御することを特徴の一つとする。
 第1アプリケーションとは、例えば、ゲームアプリケーションである。しかしながら、第1アプリケーションは、ゲームアプリケーションに限られず、描画アプリケーションや編集アプリケーション、動画や楽曲などを視聴するための音楽アプリケーション、録音や録画のためのアプリケーションなど、情報処理装置10にインストールしてユーザによって使用される各種のアプリケーションを含む。
 拡張アプリケーションによれば、各種の第1アプリケーションに対し、ソースコードの編集などを行わずに手軽に拡張機能を提供することが可能である。また、拡張機能を提供する際も、拡張アプリケーションは、第1アプリケーションやOS(Operating System)に対するユーザ操作、及び、第1アプリケーションの挙動を妨げないように動作することができる。
 図2は、拡張アプリケーションのメニュー表示に係る操作の一例を示す図である。
 図2では、ユーザが情報処理装置10を縦向きにしたことにより、センサ部140がそれを検知し、制御部190によって表示部150における画面は縦画面で表示されている状態を示している。
 図2左側は、制御部190が既に第1アプリケーション(ここでは、ゲームアプリケーション)を起動し、表示部150に第1アプリケーションの画面を全画面表示させた状態を示している。なお、以下では、第1アプリケーションの画面を「第1アプリケーション画面201」と表記する場合がある。
 図2左側における表示部150には、GEアイコン202が表示されている。GEアイコン202は、拡張アプリケーションの拡張機能メニュー200を表示させるためのアイコンである。
 拡張アプリケーションは、第1アプリケーションの起動を検知して制御部190によって起動されてもよいし、第1アプリケーション起動中の任意の操作を検知して起動されてもよい。任意の操作とは、例えば、操作部110やセンサ部140によって検知されるユーザ操作や、音声入力部160によって認識される音声操作などである。例えば、拡張アプリケーションは、表示部150に表示されたGEアイコン202がユーザによってタップされることで起動されてもよい。
 また、拡張アプリケーションは、情報処理装置10のOSの起動と共に自動起動されてもよい。
 なお、第1アプリケーションの起動中に拡張アプリケーションも起動中の場合があるが、拡張アプリケーションをユーザが使用していない時は、GEアイコン202は表示されないようにしてもよい。
 また、拡張アプリケーションの起動時にロゴなどを表示してもよいが、例えば、一定時間後にロゴが自動的に小さく表示される制御や消える制御などが制御部190によって行われるようにしてもよい。これにより、拡張アプリケーションをユーザが使用していない時、拡張アプリケーションは、第1アプリケーションやOSに対するユーザ操作、及び、第1アプリケーションの挙動を妨げないように動作することができる。
 図2中央は、拡張アプリケーションを使用するため、ユーザが表示部150に対し、タッチ操作を行おうとしている状態を示している。
 図2右側は、ユーザが表示部150の画面端からスワイプを行ったことにより、拡張アプリケーションの拡張機能メニュー200が、第1アプリケーション画面201上に重畳表示された状態を示している。
 拡張機能メニュー200は、例えばスワイプの動きに対応して、画面端から展開されるプルダウンメニューである。なお、詳しくは後述するが、拡張機能メニュー200は、メニューバー203(図3中央)がスワイプされることによって表示される。そのため、厳密には、操作部110が表示部150に対するタッチ操作を検知し、制御部190に検知した操作と位置(画面座標)の情報が送られ、制御部190によって、拡張機能メニュー200を表示するか否かが判定される。拡張機能メニュー200を表示するための条件(予め定められた位置における予め定められた操作)に合致した場合、制御部190は、表示部150に拡張機能メニュー200を表示させる。
 なお、拡張機能メニュー200を表示するためのタッチ操作は、スワイプに限られず、タップ、ダブルタップ、ピンチなどであってもよい。また、GEアイコン202に対するタップによって拡張機能メニュー200が表示されるようにしてもよい。
 また、拡張機能メニュー200の表示位置も、図2右側のような表示部150における上部分に限定されず、表示部150における様々な位置であってよい。
 また図示は省略するが、表示部150がいわゆる横画面とされている場合も、図2の縦画面同様、ユーザが表示部150に対してスワイプを行うことにより、拡張アプリケーションの拡張機能メニュー200が、第1アプリケーションに対して重畳表示される。
 図3は、拡張機能メニュー200を表示するための操作位置の一例を示す図である。拡張アプリケーションの拡張機能メニュー200を表示するための操作位置を固定してしまうと、第1アプリケーションやOSに対するユーザ操作、及び、第1アプリケーションの挙動を著しく妨げてしまう場合がある。
 例えば、第1アプリケーションの操作ボタンやアイコン、又は、ユーザが常に見ておきたい第1アプリケーションの表示部分などに操作位置が設定されてしまう場合である。そのため、拡張機能メニュー200を表示するための操作位置は、ユーザによって自由に変更できるように制御部190によって制御される。
 図3左側は、拡張機能メニュー200を表示するための操作位置を変更するため、ユーザが表示部150の予め定められた位置をタップしている状態を示している。ここでの予め定められた位置は、例えば、拡張機能メニュー200を展開するためにスワイプを開始する位置(図2中央)付近の所定領域である。
 図3中央は、表示部150に対するタップ(図3左側)により、拡張アプリケーションのメニューバー203が表示された状態を示している。なお、メニューバー203を表示するためのタッチ操作は、タップに限られない。また、メニューバー203は、第1アプリケーション画面201に対して重畳表示されるため、第1アプリケーション画面201の表示を極力妨げない形状や色、大きさ、透過率であることが望ましい。しかしながら、メニューバー203はこのような形状などに限定されない。
 また、メニューバー203は、表示部150におけるメニューバー203以外の領域がタップされた場合、又は、メニューバー203を一定時間操作しなかった場合、非表示状態となるように制御部190によって制御される。このように、メニューバー203も、ユーザが使用しない場合は非表示状態となるように制御部190によって制御される。これにより、拡張アプリケーションは、第1アプリケーションやOSに対するユーザ操作、及び、第1アプリケーションの挙動をさらに妨げないように動作することができる。
 図3右側は、表示部150における右上部分に表示されていたメニューバー203を、ユーザがドラッグ・アンド・ドロップすることにより、表示部150における左上部分に移動させた状態を示している。これにより、メニューバー203の表示位置が、表示部150における右上部分(図3中央)から、左上部分(図3左側)に変更される。なお、メニューバー203の表示位置は、表示部150における右上部分や左上部分に限定されない。
 また、図3右側で変更したメニューバー203の表示位置は、制御部190によって記憶部120に記憶され、以降、拡張アプリケーションを使用する場合は、記憶された表示位置にメニューバー203が表示される。
 さらに、メニューバー203の表示位置は、第1アプリケーションと関連付けて、第1アプリケーションごとに記憶部120に記憶されてもよい。これにより、様々な第1アプリケーションを使用する際に、都度、使用する第1アプリケーションに合わせてメニューバー203の表示位置を変更する必要がなくなる。
 図4は、拡張アプリケーションおよびOSのメニュー表示に係る操作の一例を示す図である。
 図4左側に示すような、画面端からのスワイプは、OSメニュー204を表示させる際にも用いられることがある。すなわち、拡張機能メニュー200及びOSメニュー204が同一の操作によって表示されてしまうことがある。
 このような場合、制御部190は、予め定められた位置におけるスワイプでは拡張機能メニュー200を優先して表示し(図4左側)、それ以外の位置におけるスワイプではOSメニュー204を表示する(図4中央および右側)ように制御する。
 より具体的には、例えば、OSメニュー204は、本来であれば、表示部150における上部の画面端のどの位置からスワイプを行なっても表示される。しかしながら、表示部150における左上部分からのスワイプ、すなわち、メニューバー203に対するスワイプが、拡張機能メニュー200を表示するように設定されているため、制御部190は、拡張機能メニュー200を優先して表示するように制御する(図4左側)。
 一方で、表示部150における右上部分からのスワイプの場合、すなわち、メニューバー203以外に対するスワイプの場合(図4中央)、制御部190は、OSメニュー204を表示するように制御する(図4右側)。
 なお、当然ながら、拡張機能メニュー200の表示位置が表示部150における右上部分に設定されている場合、制御部190は、表示部150における右上部分からのスワイプでは拡張機能メニュー200を表示し、左上部分からのスワイプではOSメニュー204を表示するように制御する。
 また、拡張機能メニュー200の表示位置が表示部150における上部以外に設定されている場合、制御部190は、表示部150における上部の画面端のどの位置からスワイプが行われても、OSメニュー204を表示するように制御する。
 これにより、拡張アプリケーションは、OSに対するユーザ操作を妨げないように動作することができる。
 図5は、拡張機能メニュー200の一例を示す図である。図5に示すように、拡張アプリケーションの拡張機能メニュー200には、例えば、輝度調整バー表示領域210、クイックアクセスアイコン表示領域220、メニューアイコン表示領域230が設けられる。
 輝度調整バー表示領域210は、輝度調整バー211が表示される領域である。輝度調整バー211がユーザにドラッグされると、制御部190は、輝度調整バー211においてドラッグされている位置に対応する輝度に表示部150の輝度を変更させる。
 クイックアクセスアイコン表示領域220は、拡張機能メニュー200から即時に各種機能を利用するためのアイコンを表示する領域である。図5の例では、クイックアクセスアイコン表示領域220には、SSアイコン221、連写SSアイコン222、レコードアイコン223、一括制限アイコン224が設けられている。
 SSアイコン221がユーザによってタップされると、制御部190は、画面撮影部180を介して、表示部150に表示された画面のスクリーンショット(画像)を1枚撮影し、撮影画像を記憶部120に記憶する。
 連写SSアイコン222がユーザによってタップされると、制御部190は、画面撮影部180を介して、表示部150に表示された画面のスクリーンショットを一定時間連続して複数枚撮影(いわゆるバーストモード撮影)する。そして、制御部190は、一定時間内に撮影された複数枚のスクリーンショットからGIF形式などのデータファイルを生成し、記憶部120に記憶する。これにより、動画ファイルと比較して、高fps(frames per second)を維持しつつ、ファイルサイズを小さくすることができ、スマートフォンなどであっても撮影時の決定的瞬間を捉え易くなる。
 レコードアイコン223がユーザによってタップされると、制御部190は、画面撮影部180を介して、表示部150に表示された画面の動画撮影する制御を行う。
 なお、SSアイコン221、連写SSアイコン222、レコードアイコン223がタップされた場合、拡張機能メニュー200は非表示状態となるように制御部190によって制御される。これにより、撮影された画像に、拡張機能メニュー200が写り込まないようにすることができる。
 一括制限アイコン224がユーザによってタップされると、制御部190は、複数の機能を一括して制限するための処理を行う。
 メニューアイコン表示領域230には、ゲームモードアイコン231、フォーカスアイコン232、スクリーンアンドサウンドアイコン233、マルチタスクアイコン234、スクリーンショットアイコン235、レコードアイコン236が表示される。
 ゲームモードアイコン231は、ゲームモードを設定するためのUIを表示させるためのアイコンである。
 フォーカスアイコン232は、メニュー表示のタイプ、例えばフローティング等を選択するためのUIを表示させるためのアイコンである。
 マルチタスクアイコン234は、詳しくは後述するように、第1アプリケーションと同時に他のアプリケーションや他の機能を実行させるためのUIを表示させるためのアイコンである。
 スクリーンショットアイコン235は、スクリーンショット操作のUIを表示させるためのアイコンである。
 レコードアイコン236は、録画(又は録画及び録音)の操作のUIを表示させるためのアイコンである。
 ゲームモードアイコン231、フォーカスアイコン232、スクリーンアンドサウンドアイコン233、マルチタスクアイコン234、スクリーンショットアイコン235、レコードアイコン236がタップされると、制御部190は、タップされたアイコンに対応するUIを表示部150に表示させる。
 なお、図5のような拡張機能メニュー200の表示内容は一例であり、これに限定されない。第1アプリケーションに拡張機能を提供する各種機能を利用するためのアイコンや領域を増減させたり、それらの配置を変更させたりすることができる。また、拡張機能メニュー200の形状や色、大きさ、透過率なども各種考えられる。
 図6は、マルチタスクUI240の一例を示す図である。
 図6左側に示すように、拡張機能メニュー200のマルチタスクアイコン234がタップされると、制御部190は、図6中央に示すように、拡張機能メニュー200に代えてマルチタスクUI240を表示させる。
 マルチタスクUI240には、リターンアイコン241、WEB選択アイコン242、動画選択アイコン243、アプリ選択アイコン244が設けられるとともに、これらのアイコンの下方にタスク表示領域250が設けられる。
 リターンアイコン241がユーザにタップされると、制御部190は、マルチタスクUI240を非表示にし、拡張機能メニュー200を再度表示させる。
 WEB選択アイコン242がユーザにタップされると、制御部190は、ウェブサイトを表示するためのUIをタスク表示領域250に表示させる。
 動画選択アイコン243がユーザにタップされると、制御部190は、所定の動作サイトの動画を再生するためのUIをタスク表示領域250に表示させる。
 アプリ選択アイコン244がユーザにタップされると、制御部190は、図6中央に示すように、複数のアプリアイコン251をタスク表示領域250に表示させる。
 アプリアイコン251は、第2アプリケーションを起動させるためのアイコンであり、第2アプリケーションごとに対応付けられて設けられている。
 ここで、第2アプリケーションは、拡張アプリケーションを介して起動されるアプリケーションであり、例えば、ウェブサイトを表示するためのアプリケーション、SNS(Social Networking Service)を行うためのアプリケーション、動画を再生するためのアプリケーションなど、種々のアプリケーションが含まれている。例えば、第2アプリケーションは、情報処理装置10にインストールされたアプリケーションである。
 そして、タスク表示領域250には、情報処理装置10にインストールされた全てのアプリケーションに対応するアプリアイコン251が表示される。なお、第2アプリケーションは、第1アプリケーションごとに関連付けて記憶されており、タスク表示領域250には、起動中の第1アプリケーションに関連付けられた第2アプリケーションに対応するアプリアイコン251が表示されるようにしてもよい。
 また、アプリアイコン251は、タスク表示領域250において、対応する第2アプリケーションの名前順(アルファベット順)に並べて表示されてもよい。また、制御部190は、第1アプリケーションごとに起動された第2アプリケーションの回数をカウントし、起動された回数が多い順にアプリアイコン251を並べて表示させるようにしてもよい。
 このように、タスク表示領域250に表示されるアプリアイコン251の順序はどのような順序であってもよい。
 そして、タスク表示領域250に表示されたいずれかのアプリアイコン251がタップされると、制御部190は、タップされたアプリアイコン251に対応する第2アプリケーションを起動させる。そして、制御部190は、起動させた第2アプリケーションの画面(以下、「第2アプリケーション画面」と表記する)を、第1アプリケーション画面201に重畳して表示させる。
 例えば、図6中央の例では、ウェブサイトを表示するための第2アプリケーションに対応したアプリアイコン251がタップされ、図6右側に示すように、表示部150には、ウェブサイトを表示するための第2アプリケーションの画面が表示される。
 なお、以下では、第2アプリケーション画面を第2アプリケーションごとに区別することなく説明する場合、第2アプリケーション画面260と表記する。また、以下では、ウェブサイトを表示する第2アプリケーションをブラウザアプリ、SNSを行う第2アプリケーションをSNSアプリ、動画を再生する第2アプリケーションを動画アプリと表記する。さらに、ブラウザアプリに対応する第2アプリケーション画面をブラウザアプリ画面260a、SNSアプリに対応する第2アプリケーション画面をSNSアプリ画面260b、動画アプリに対応する第2アプリケーション画面を動画アプリ画面260cと表記する。
 また、表示部150に表示される第2アプリケーション画面260のサイズ及び位置は、第2アプリケーションごとに予め設定されていてもよく、第1アプリケーションに関連付けて記憶されていてもよい。さらに、第2アプリケーションが終了したときに、第2アプリケーション画面260のサイズ及び位置を第2アプリケーションごとに記憶部120に記憶しておき、再び起動されたときには、記憶されたサイズ及び位置で第2アプリケーション画面260が表示されるようにしてもよい。
 また、ブラウザアプリに対応するアプリアイコン251がタップされ、ブラウザアプリ画面260aが表示部150に表示される際、制御部190は、マルチタスクUI240がそのまま表示され続けるよう制御する。
[2.2 第2アプリケーションの切り替え]
 図7は、第2アプリケーションの切り替えに係る操作の一例を示す図である。
 情報処理装置10では、起動させる第2アプリケーションの数が1つであるシングルモードにおいて、起動させる第2アプリケーションを切り替えることが可能である。
 上記したように、情報処理装置10では、タスク表示領域250に表示されたアプリアイコン251のいずれかがタップされると、タップされたアプリアイコン251に対応する第2アプリケーションが起動され、第2アプリケーション画面260が表示部150に表示される。
 しかしながら、タスク表示領域250には多数のアプリアイコン251が表示されているため、ユーザが誤ったアプリアイコン251をタップすることがある。このような場合に、例えば、拡張機能メニュー200を再度表示させ、マルチタスクアイコン234をタップしてタスク表示領域250を表示させ、ユーザが所望する第2アプリケーションに対応するアプリアイコン251をタップさせるとなると、複数回のタッチ操作をユーザに強いることになる。
 そこで、制御部190は、上記したように、アプリアイコン251がタップされ、第2アプリケーション画面260が表示されても、拡張機能メニュー200をそのまま表示した状態で維持している。
 そして、図7左側に示すように、例えば、ブラウザアプリが起動中であり、ブラウザアプリ画面260aが拡張機能メニュー200とともに表示部150に表示されているとする。この状態において、SNSアプリに対応するアプリアイコン251がタップされると、制御部190は、ブラウザアプリを終了させるとともにSNSアプリを起動させる。また、制御部190は、図7中央に示すように、ブラウザアプリ画面260aを非表示にするとともに、SNSアプリ画面260bを第1アプリケーション画面201に重ねて表示させる。
 また、制御部190は、SNSアプリ画面260bが表示されたときに、拡張機能メニュー200がそのまま表示され続けるよう制御する。
 その後、図7中央に示すように、ユーザによって、第1アプリケーション画面201、又は、第2アプリケーション画面260がタップされると、制御部190は、図7右側に示すように、マルチタスクUI240を非表示にするとともに、タップされた画面に対応するアプリケーションにフォーカスを当てた状態にする。ここで、フォーカスを当てた状態とは、他のアプリケーションよりも優先順位が高く設定され、ユーザがタッチ操作を行った際に、そのタッチ操作に対応する処理が実行される状態を指す。
 例えば、第1アプリケーション画面201が表示されている領域がタップされると、制御部190は、マルチタスクUI240を非表示にするとともに、第1アプリケーションにフォーカスを当てた状態にする。そして、表示部150に対してタッチ操作が行われると、制御部190は、第1アプリケーションについてタッチ操作に対応する処理を実行する。
 なお、例えば第1アプリケーションにフォーカスが当てられた状態で、第2アプリケーション画面260をユーザがタップすると、制御部190は、第2アプリケーションにフォーカスを当てた状態にする。
 このように、制御部190は、第1アプリケーションの起動中に、拡張アプリケーションを介して第2アプリケーションを起動させ、第1アプリケーション画面201に第2アプリケーション画面260を重ねて表示させる。
 これにより、制御部190は、第1アプリケーションと同時に第2アプリケーションを実行させることができる。
 例えば、第1アプリケーションについての攻略法などをウェブサイトで調べたいときには、ブラウザアプリを起動させることで、ユーザは第1アプリケーションを行いながらウェブサイトで攻略法などを調べることが可能となる。
 また、第1アプリケーションを行いながら空いている時間で動画を視聴したいときには、動画アプリを起動させることで、ユーザは第1アプリケーションを行いながら動画を視聴することが可能となる。
 このようにすることで、情報処理装置10は、ユーザエクスペリエンスを向上することができる。特に、情報処理装置10にインストールされたアプリケーションを第2アプリケーションとして実行することで、拡張アプリケーションで検索や動画再生する場合よりも、ユーザに使い勝手の良さを提供することができる。
 図8は、第2アプリケーションの切り替えに係る他の操作の一例を示す図である。
 第1アプリケーション画面201に重畳して第2アプリケーション画面260(ここでは、SNSアプリ画面260b)が表示されている状態で、拡張機能メニュー200を表示するユーザ操作が行われると、制御部190は、図8左側に示すように、拡張機能メニュー200を表示部150に表示する。
 ここで表示される拡張機能メニュー200には、輝度調整バー表示領域210、クイックアクセスアイコン表示領域220に加え、マルチタスク実行中表示領域300及びマルチタスク選択領域310が設けられている。すなわち、第2アプリケーションが実行されているときの拡張機能メニュー200は、第2アプリケーションが実行されていないときと比べて、メニューアイコン表示領域230が設けられておらず、マルチタスク実行中表示領域300及びマルチタスク選択領域310が設けられている点で相違する。
 マルチタスク実行中表示領域300には、第2アプリケーションが起動中である旨、及び、マルチタスク実行中表示領域300をタップすることで第2アプリケーションが終了する旨が文字等によって表示されている。
 そして、マルチタスク実行中表示領域300がタップされると、制御部190は、第2アプリケーションを終了させ、第2アプリケーション画面260を非表示にする。また、制御部190は、図6左側に示したような拡張機能メニュー200を表示させる。
 マルチタスク選択領域310には、マルチタスクアイコン311、起動中アプリアイコン312及び候補アプリアイコン313が並べて表示される。なお、マルチタスクアイコン311について詳しくは後述する。
 起動中アプリアイコン312は、起動中の第2アプリケーションに対応するアイコンである。そして、起動中アプリアイコン312は、候補アプリアイコン313よりも画面上の左側に表示される。また、起動中アプリアイコン312の下方には、対応する第2アプリケーションが起動中であることを示すアイコンバー312aが表示されている。
 候補アプリアイコン313は、起動していない第2アプリケーションに対応するアイコンであり、例えば3つ表示される。候補アプリアイコン313は、例えば、情報処理装置10にインストールされているアプリケーションのアルファベット順に3つが表示されるようにしてもよい。また、制御部190は、第1アプリケーションごとに、起動された第2アプリケーションの回数をカウントし、起動された回数が多い順に候補アプリアイコン313を並べて表示させるようにしてもよい。
 そして、図8左側に示すように、例えば、マルチタスク選択領域310に表示された動画アプリに対応する候補アプリアイコン313がタップされると、制御部190は、起動されていたSNSアプリを終了させ、タップされた候補アプリアイコン313に対応する動画アプリを起動させる。すなわち、制御部190は、第2アプリケーションを切り替えて起動させる。
 また、制御部190は、図8右側に示すように、SNSアプリ画面260bを非表示にするとともに、動画アプリ画面260cを第1アプリケーション画面201に重ねて表示する。さらに、制御部190は、動画アプリに対応するアイコンを起動中アプリアイコン312として表示させるとともに、終了したSNSアプリに対応するアイコンを候補アプリアイコン313として表示させる。
 なお、動画アプリ画面260cが表示されたときに、拡張機能メニュー200はそのまま表示され続けており、ユーザに第1アプリケーション画面201又は第2アプリケーション画面260がタップされると、制御部190は、拡張機能メニュー200を非表示にするとともに、タップされたアプリケーション画面に対応するアプリケーションにフォーカスを当てた状態にする。
 次に、第2アプリケーションを切り替える他の方法を説明する。ここでは、まず、第2アプリケーション画面260とともに表示されるマルチタスク操作領域270について説明した後、第2アプリケーションを切り替える他の方法を説明する。
 図9は、マルチタスク操作領域270の一例を示す図である。図9に示すように、第2アプリケーション画面260の上方には、マルチタスク操作領域270が表示される。なお、マルチタスク操作領域270は、拡張機能メニュー200又はマルチタスクUI240が表示部150に表示されている間は非表示となっており(図7参照)、拡張機能メニュー200及びマルチタスクUI240が非表示になると第2アプリケーション画面260の上方に表示される。
 マルチタスク操作領域270には、終了アイコン271、最大化アイコン272、最小化アイコン273、マルチタスクアイコン274、アプリ追加アイコン275、及びサイズ変更アイコン276が設けられている。すなわち、これらのアイコンは、第2アプリケーション画面260に対応付けられた位置に表示されていると言える。
 終了アイコン271は、対応する第2アプリケーションを終了させるためのアイコンである。終了アイコン271がタップされると、制御部190は、対応する第2アプリケーションを終了させ、第2アプリケーション画面260を非表示にする。
 最大化アイコン272は、対応する第2アプリケーション画面260を最大化させるためのアイコンである。最大化アイコン272がタップされると、制御部190は、第2アプリケーション画面260を表示部150の全面に拡大表示する。なお、制御部190は、第2アプリケーション画面260を最大化している状態で、最大化アイコン272が再度タップされると、最大化する前のサイズ及び位置で第2アプリケーション画面260を表示する。したがって、制御部190は、最大化アイコン272がタップされると、第2アプリケーション画面260のサイズ及び位置を記憶しておく。
 最小化アイコン273は、第2アプリケーション画面260を最小化させるためのアイコンである。最小化アイコン273がタップされると、制御部190は、対応する第2アプリケーション画面260を非表示とする。なお、最小化アイコン273がタップされた場合、制御部190は、第2アプリケーション画面260を非表示にするが、第2アプリケーションを終了させることはない。
 マルチタスクアイコン274は、起動している第2アプリケーションを切り替えるためのアイコンである。なお、マルチタスクアイコン274がタップされたときの処理について詳しくは後述する。
 アプリ追加アイコン275は、起動させる第2アプリケーションを追加するためのアイコンである。なお、アプリ追加アイコン275がタップされたときの処理について詳しくは後述する。
 サイズ変更アイコン276は、第2アプリケーション画面260のサイズを変更するためのアイコンである。サイズ変更アイコン276がドラッグされると、制御部190は、ドラッグされている位置に応じて第2アプリケーション画面260のサイズを変更する。
 図10は、第2アプリケーションの切り替えに係る操作の他の例を示す図である。
 図10左側に示すように、SNSアプリ画面260bの上方に表示されたマルチタスク操作領域270のマルチタスクアイコン274がタップされると、制御部190は、図10中央に示すように、マルチタスク操作領域270の上方に、アプリ選択ポップアップ320を表示させる。
 アプリ選択ポップアップ320には、起動中アプリアイコン321及び候補アプリアイコン322が並べて表示される。
 起動中アプリアイコン321は、起動中の第2アプリケーションに対応するアイコンである。図10中央の例では、起動中のSNSアプリに対応するアイコンが起動中アプリアイコン321として表示されている。
 そして、起動中アプリアイコン321は、候補アプリアイコン322よりもアプリ選択ポップアップ320内において左側に表示される。また、起動中アプリアイコン321の下方には、対応する第2アプリケーションが起動中であることを示すアイコンバー321aが表示されている。
 候補アプリアイコン322は、起動していない第2アプリケーションに対応するアイコンであり、例えば2つ表示される。候補アプリアイコン322は、例えば、情報処理装置10にインストールされているアプリケーションのアルファベット順に2つが表示されてもよい。また、制御部190は、第1アプリケーションごとに、起動された第2アプリケーションの回数をカウントし、起動された回数が多い順に候補アプリアイコン322を並べて表示させるようにしてもよい。
 そして、図10中央に示すように、例えば、アプリ選択ポップアップ320に表示された動画アプリに対応する候補アプリアイコン322がタップされると、制御部190は、起動されていたSNSアプリを終了させ、タップされた候補アプリアイコン322に対応する動画アプリを起動させる。
 また、図10右側に示すように、制御部190は、SNSアプリ画面260bを非表示にするとともに、動画アプリ画面260cを第1アプリケーション画面201に重ねて表示させる。さらに、制御部190は、動画アプリに対応するアイコンを起動中アプリアイコン321として表示させるとともに、終了したSNSアプリに対応するアイコンを候補アプリアイコン322として表示させる。
 なお、動画アプリ画面260cが表示されたときに、アプリ選択ポップアップ320はそのまま表示され続けている。そして、ユーザに第1アプリケーション画面201又は第2アプリケーション画面260がタップされると、制御部190は、アプリ選択ポップアップ320を非表示にするとともに、タップされたアプリケーション画面に対応するアプリケーションにフォーカスを当てた状態にする。
 次に、第2アプリケーションを切り替えるさらなる他の方法を説明する。
 図11は、第2アプリケーションの切り替えに係る操作の他の例を示す図である。
 第2アプリケーションの起動中にOSメニュー204を表示する操作がユーザによって行われると、制御部190は、図11左側に示すように、OSメニュー204を表示させる。
 第2アプリケーションの起動中にOSメニュー204が表示されると、OSメニュー204には、拡張アプリ通知ボックス330が表示される。
 拡張アプリ通知ボックス330は、拡張アプリケーションに関する通知を行うための領域であり、マルチタスクアイコン331、起動中アプリアイコン332及び候補アプリアイコン333が並べて表示される。なお、マルチタスクアイコン331について詳しくは後述する。
 起動中アプリアイコン332は、起動中の第2アプリケーションに対応するアイコンである。図11左側の例では、SNSアプリが起動中であり、SNSアプリに対応するアイコンが起動中アプリアイコン332として表示されている。
 また、起動中アプリアイコン332は、候補アプリアイコン333よりも拡張アプリ通知ボックス330内において左側に表示される。また、起動中アプリアイコン332の下方には、対応する第2アプリケーションが起動中であることを示すアイコンバー332aが表示されている。
 候補アプリアイコン333は、起動していない第2アプリケーションに対応するアイコンであり、例えば3つ表示される。候補アプリアイコン333は、例えば、情報処理装置10にインストールされているアプリケーションのアルファベット順に3つが表示されてもよい。また、制御部190は、第1アプリケーションごとに、起動された第2アプリケーションの回数をカウントし、起動された回数が多い順に候補アプリアイコン333を並べて表示させるようにしてもよい。
 そして、図11左側に示すように、例えば、拡張アプリ通知ボックス330に表示された動画アプリに対応する候補アプリアイコン333がタップされると、制御部190は、起動されていたSNSアプリを終了させ、タップされた候補アプリアイコン333に対応する動画アプリを起動させる。
 また、図11右側に示すように、制御部190は、SNSアプリ画面260bを非表示にするとともに、動画アプリ画面260cを第1アプリケーション画面201に重ねて表示する。さらに、制御部190は、動画アプリに対応するアイコンを起動中アプリアイコン332として表示させるとともに、終了したSNSアプリに対応するアイコンを候補アプリアイコン333として表示させる。
 なお、動画アプリ画面260cが表示されたときに、OSメニュー204はそのまま表示され続けている。そして、ユーザに第1アプリケーション画面201又は第2アプリケーション画面260がタップされると、制御部190は、OSメニュー204を非表示にするとともに、タップされたアプリケーション画面に対応するアプリケーションにフォーカスを当てた状態にする。
 次に、第2アプリケーションを切り替えるさらなる他の方法を説明する。
 図12は、第2アプリケーションの切り替えに係る操作の他の例を示す図である。
 図12左側に示すように、第2アプリケーションの起動中に所定の操作部110としての操作ボタン110aを押下する操作がユーザに行われると、制御部190は、操作部110の近傍に(対応する位置に)アプリ選択ポップアップ340を表示する。
 アプリ選択ポップアップ340には、起動中アプリアイコン341及び候補アプリアイコン342が並べて表示される。
 起動中アプリアイコン341は、起動中の第2アプリケーション(ここでは、SNSアプリ)に対応するアイコンである。そして、起動中アプリアイコン341は、候補アプリアイコン342よりもアプリ選択ポップアップ340内において左側に表示される。また、起動中アプリアイコン341の下方には、対応する第2アプリケーションが起動中であることを示すアイコンバー341aが表示されている。
 候補アプリアイコン342は、起動していない第2アプリケーションに対応するアイコンであり、例えば2つ表示される。候補アプリアイコン342は、例えば、情報処理装置10にインストールされているアプリケーションのアルファベット順に2つが表示されてもよい。また、制御部190は、第1アプリケーションごとに、起動された第2アプリケーションの回数をカウントし、起動された回数が多い順に候補アプリアイコン342を並べて表示させるようにしてもよい。
 そして、例えば、アプリ選択ポップアップ340に表示された動画アプリに対応する候補アプリアイコン342がタップされると、制御部190は、起動されていたSNSアプリを終了させ、タップされた候補アプリアイコン342に対応する動画アプリを起動させる。
 また、図12右側に示すように、制御部190は、SNSアプリ画面260bを非表示にするとともに、動画アプリ画面260cを第1アプリケーション画面201に重ねて表示する。さらに、制御部190は、動画アプリに対応するアイコンを起動中アプリアイコン341として表示させるとともに、終了したSNSアプリに対応するアイコンを候補アプリアイコン342として表示させる。
 なお、動画アプリ画面260cが表示されたときに、アプリ選択ポップアップ340はそのまま表示され続けている。そして、ユーザに第1アプリケーション画面201又は第2アプリケーション画面260がタップされると、制御部190は、アプリ選択ポップアップ340を非表示にするとともに、タップされたアプリケーション画面に対応するアプリケーションにフォーカスを当てた状態にする。
[2.3 第2アプリケーションの複数起動]
 制御部190は、起動させる第2アプリケーションの数が複数であるマルチモードにおいて、拡張アプリケーションを用いて第2アプリケーションを複数起動させることが可能である。なお、シングルモードとマルチモードとは予め設定等によりどちらかが選択されているようにしてもよく、また、所定のユーザ操作に応じて切り替えるようにしてもよい。さらに、シングルモード又はマルチモードのどちらかのみが設けられていてもよい。
 図13及び図14は、第2アプリケーションの複数起動に係る操作の一例を示す図である。
 図13左側に示すように、第1アプリケーション画面201に重畳して第2アプリケーション画面260(ここでは、SNSアプリ画面260b)が表示されている状態で、拡張機能メニュー200を表示するユーザ操作が行われると、制御部190は、拡張機能メニュー200を表示部150に表示する。
 ここで表示される拡張機能メニュー200には、図8左側に示した図と同様に、輝度調整バー表示領域210、クイックアクセスアイコン表示領域220に加え、マルチタスク実行中表示領域300及びマルチタスク選択領域310が設けられている。
 そして、マルチタスク実行中表示領域300のマルチタスクアイコン311がタップされると、図13中央に示すように、制御部190は、拡張機能メニュー200においてマルチタスク選択領域310の下方に起動アプリ選択領域400を表示させる。したがって、マルチタスクアイコン311は、起動アプリ選択領域400を表示させるための操作子としても機能する。
 起動アプリ選択領域400には、起動中の第2アプリケーションのサムネイル画像401と、アプリ追加アイコン402とが表示される。
 サムネイル画像401は、拡張機能メニュー200が表示される直前の第2アプリケーション画面260をキャプチャした画像である。このように、起動中の第2アプリケーションのサムネイル画像401を表示することで、例えば最小化している第2アプリケーションなどをユーザに認識させることができる。
 アプリ追加アイコン402は、起動させる第2アプリケーションを追加するためのアイコンである。アプリ追加アイコン402がタップされると、制御部190は、図13右側に示すように、アプリ追加アイコン402に代えてアプリ選択ポップアップ403を表示する。
 アプリ選択ポップアップ403には、候補アプリアイコン404が並べて表示される。候補アプリアイコン404は、起動していない第2アプリケーションに対応するアイコンであり、例えば3つ表示される。候補アプリアイコン404は、例えば、情報処理装置10にインストールされているアプリケーションのアルファベット順に3つが表示されてもよい。また、制御部190は、第1アプリケーションごとに、起動された第2アプリケーションの回数をカウントし、起動された回数が多い順に候補アプリアイコン404を並べて表示させるようにしてもよい。
 そして、例えば、アプリ選択ポップアップ403に表示された動画アプリに対応する候補アプリアイコン404がタップされると、制御部190は、タップされた候補アプリアイコン404に対応する動画アプリを起動させる。
 また、制御部190は、SNSアプリ画面260bとともに動画アプリ画面260cを第1アプリケーション画面201に重ねて表示する。さらに、制御部190は、図14左側に示すように、アプリ選択ポップアップ403に代えて動画アプリ画面260cのサムネイル画像401を表示する。なお、起動アプリ選択領域400には、アプリ追加アイコン402又はアプリ選択ポップアップ403が表示されていてもよい。
 また、制御部190は、マルチタスク選択領域310に、動画アプリに対応する起動中アプリアイコン312を表示させる。そして、制御部190は、動画アプリに対応する起動中アプリアイコン312の下方にアイコンバー312aを表示させる。
 なお、動画アプリ画面260cが表示されたときに、拡張機能メニュー200はそのまま表示され続けている。そして、ユーザに第1アプリケーション画面201又は第2アプリケーション画面260がタップされると、制御部190は、図14右側に示すように、拡張機能メニュー200を非表示にするとともに、タップされたアプリケーション画面に対応するアプリケーションにフォーカスを当てた状態にする。
 また、第2アプリケーションが複数起動している場合、起動している複数の第2アプリケーションには優先順位が設定されており、優先順位が高い第2アプリケーションの音声が音声出力部170から出力されたり、優先順位が高い第2アプリケーション画面260のリフレッシュレートが高く設定されたりする。すなわち、優先順位が高い第2アプリケーションが優先的に実行される。
 そして、マルチタスク選択領域310には、優先順位に応じた順番で起動中アプリアイコン312が表示される。具体的には、最も左側に表示された起動中アプリアイコン312に対応する第2アプリケーションの優先順位が最も高く設定され、右側に向かうに連れて優先順位が下がっていく。
 図15は、第2アプリケーションの優先順位に係る操作の一例を示す図である。
 例えば、SNSアプリ及び動画アプリが起動されており、SNSアプリの優先順位が動画アプリよりも高く設定されているとする。このような場合、マルチタスク選択領域310には、SNSアプリに対応する起動中アプリアイコン312が最も左側に表示され、その右側に、動画アプリに対応する起動中アプリアイコン312が表示されることになる。
 そのため、SNSアプリの音声が音声出力部170から出力され、動画アプリの音声は音声出力部170から出力されない。また、SNSアプリ画面260bが動画アプリ画面260cよりも上位のレイヤで表示されている。また、SNSアプリ画面260bが動画アプリ画面260cよりもリフレッシュレートが高く設定されている。
 そして、ユーザが動画アプリの音声を聴取したい場合、動画アプリの優先順位を変更させる。
 具体的には、図15左側において矢印で示すように、動画アプリに対応する起動中アプリアイコン312をドラッグして、SNSアプリに対応する起動中アプリアイコン312よりも左側に移動させる。そうすると、図15右側に示すように、動画アプリに対応する起動中アプリアイコン312が左側に表示され、SNSアプリに対応する起動中アプリアイコン312が右側に表示される。このとき、制御部190は、動画アプリの優先順位をSNSアプリより高く設定し、動画アプリにフォーカスが当てた状態にする。
 これにより、制御部190は、動画アプリの音声を音声出力部170から出力させるとともに、動画アプリ画面260cをSNSアプリ画面260bよりも上位のレイヤで表示させる。また、制御部190は、動画アプリ画面260cについてSNSアプリ画面260bよりもリフレッシュレートを高く設定する。
 次に、第2アプリケーションを複数起動させる他の方法を説明する。
 図16は、第2アプリケーションの複数起動に係る他の操作の一例を示す図である。
 図16左側に示すように、マルチタスク操作領域270のアプリ追加アイコン275がタップされると、制御部190は、図16中央に示すように、マルチタスク操作領域270の上方に、アプリ選択ポップアップ320を表示する。
 そして、図16中央に示すように、例えば、アプリ選択ポップアップ320に表示された動画アプリに対応する候補アプリアイコン322がタップされると、制御部190は、SNSアプリを起動させたまま、タップされた候補アプリアイコン322に対応する動画アプリを起動させる。
 また、図16右側に示すように、制御部190は、SNSアプリ画面260bとともに動画アプリ画面260cを第1アプリケーション画面201に重ねて表示する。さらに、制御部190は、SNSアプリ及び動画アプリに対応するアイコンを起動中アプリアイコン321として表示させる。なお、この例では、制御部190は、後に起動させた第2アプリケーション(動画アプリ)の優先順位を、起動中であった第2アプリケーション(SNSアプリ)の優先順位よりも高く設定する。
 なお、動画アプリ画面260cが表示されたときに、アプリ選択ポップアップ320はそのまま表示され続けており、ユーザに第1アプリケーション画面201又は第2アプリケーション画面260がタップされると、制御部190は、アプリ選択ポップアップ320を非表示にするとともに、タップされたアプリケーション画面に対応するアプリケーションにフォーカスを当てた状態にする。
 次に、第2アプリケーションを複数起動させるさらなる他の方法を説明する。
 図17は、第2アプリケーションの複数起動に係る他の操作の一例を示す図である。
 第1アプリケーション画面201に重畳して第2アプリケーション画面260(ここでは、SNSアプリ画面260b)が表示されている状態で、OSメニュー204を表示するユーザ操作が行われると、制御部190は、OSメニュー204を表示部150に表示させる。
 このとき、図17左側に示すように、拡張アプリ通知ボックス330には、マルチタスクアイコン331、起動中アプリアイコン332に加え、アプリ追加アイコン410が表示される。
 アプリ追加アイコン410は、起動させる第2アプリケーションを追加するためのアイコンである。アプリ追加アイコン410がタップされると、制御部190は、図17中央に示すように、アプリ追加アイコン410の下方に、候補アプリアイコン411を並べて表示させる。
 候補アプリアイコン411は、起動していない第2アプリケーションに対応するアイコンであり、例えば3つ表示される。候補アプリアイコン411は、例えば、情報処理装置10にインストールされているアプリケーションのアルファベット順に3つが表示されてもよい。また、制御部190は、第1アプリケーションごとに、起動された第2アプリケーションの回数をカウントし、起動された回数が多い順に候補アプリアイコン411を並べて表示させるようにしてもよい。
 そして、例えば、拡張アプリ通知ボックス330に表示された動画アプリに対応する候補アプリアイコン411がタップされると、制御部190は、タップされた候補アプリアイコン411に対応する動画アプリを起動させる。
 また、制御部190は、SNSアプリ画面260bとともに動画アプリ画面260cを第1アプリケーション画面201に重ねて表示する。さらに、制御部190は、図17右側に示すように、動画アプリに対応する起動中アプリアイコン332の下方にアイコンバー332aを表示させる。なお、この例では、制御部190は、後に起動させた第2アプリケーション(動画アプリ)の優先順位を、起動中であった第2アプリケーション(SNSアプリ)の優先順位よりも高く設定する。
 なお、動画アプリ画面260cが表示されたときに、OSメニュー204はそのまま表示され続けており、ユーザに第1アプリケーション画面201又は第2アプリケーション画面260がタップされると、制御部190は、OSメニュー204を非表示にするとともに、タップされたアプリケーション画面に対応するアプリケーションにフォーカスを当てた状態にする。
 図18は、第2アプリケーションの優先順位に関する表示の一例を示す図である。複数の第2アプリケーション(SNSアプリ及び動画アプリ)が起動しており、SNSアプリが動画アプリより優先順位が高く設定されているとする。この場合、図18に示すように、OSメニュー204の拡張アプリ通知ボックス330において、起動中の第2アプリケーションに対応する起動中アプリアイコン332が並んで表示される。
 また、起動中アプリアイコン332の下方には、アイコンバー332aが表示されるとともに、音声オンオフマーク421及びリフレッシュレート422が表示される。
 音声オンオフマーク421は、優先順位に基づいて音声が出力されているかを示すマークである。音声オンオフマーク421は、例えばSNSアプリに対応する起動中アプリアイコン332(左側)の下方では音声が出力されるマークで表示されている。また、音声オンオフマーク421は、動画アプリに対応する起動中アプリアイコン332の下方では音声が出力されないマークで表示されている。
 リフレッシュレート422は、優先順位に基づいた第2アプリケーション画面260のリフレッシュレートが示されている。リフレッシュレート422は、例えばSNSアプリに対応する起動中アプリアイコン332(左側)の下方では120Hzでリフレッシュされることが表示されている。また、リフレッシュレート422は、動画アプリに対応する起動中アプリアイコン332の下方では60Hzでリフレッシュされることが表示されている。
 そして動画アプリに対応する起動中アプリアイコン332がタップされると、制御部190は、タップされた起動中アプリアイコン332に対応する動画アプリの優先順位をSNSアプリより高く設定する。そして、例えば、動画アプリに対応する起動中アプリアイコン332の下方では音声が出力されるマークで音声オンオフマーク421が表示され、SNSアプリに対応する起動中アプリアイコン332の下方では音声が出力されないマークで音声オンオフマーク421が表示される。
 このように、音声オンオフマーク421及びリフレッシュレート422を起動中アプリアイコン332に関連付けて表示することで、優先順位が高い第2アプリケーションをユーザに容易に判断させることができる。
 図19は、第2アプリケーションの優先順位に関する表示の他の例を示す図である。なお、ここでも、複数の第2アプリケーション(SNSアプリ及び動画アプリ)が起動しており、SNSアプリが動画アプリより優先順位が高く設定されているとする。
 拡張アプリ通知ボックス330に起動中の第2アプリケーション(SNSアプリ及び動画アプリ)に対応する起動中アプリアイコン332が表示されている。この例では、左側に表示された起動中アプリアイコン332に対応する第2アプリケーションの優先順位が高く設定されている。
 そして、図19左側において矢印で示すように、動画アプリに対応する起動中アプリアイコン332をドラッグして、SNSアプリに対応する起動中アプリアイコン332よりも左側に移動させる。そうすると、制御部190は、動画アプリの優先順位をSNSアプリより高く設定する。また、図19右側に示すように、動画アプリに対応する起動中アプリアイコン332が左側に表示され、SNSアプリに対応する起動中アプリアイコン332が右側に表示される。
 これにより、制御部190は、動画アプリの音声を音声出力部170から出力させるとともに、動画アプリ画面260cをSNSアプリ画面260bよりも上位のレイヤで表示させる。
 図20は、第2アプリケーションの優先順位に関する表示の他の例を示す図である。なお、この例では、複数の第2アプリケーション(SNSアプリ及び動画アプリ)が起動しており、動画アプリがSNSアプリより優先順位が高く設定されているとする。
 OSメニュー204の拡張アプリ通知ボックス330に起動中の第2アプリケーション(SNSアプリ及び動画アプリ)に対応する起動中アプリアイコン332が表示されている。このとき、図20左側に示すように、左側に表示された起動中アプリアイコン332を右側に表示された起動中アプリアイコン332に重ねて表示する。これにより、優先順位が高く設定されている第2アプリケーションをユーザに容易に判断させることが可能となる。
 また、図20右側に示すように、拡張アプリ通知ボックス330に表示された起動中アプリアイコン332の近傍に1から順に数字表示335を行うようにしてもよい。これにより、優先順位が高く設定されている第2アプリケーションをユーザに容易に判断させることが可能となる。
 次に、第2アプリケーションを複数起動させる他の方法を説明する。
 図21は、第2アプリケーションの複数起動に係る他の操作の一例を示す図である。
 図21左側に示すように、第2アプリケーション(ここではSNSアプリ)の起動中に所定の操作部110としての操作ボタン110aを押下する操作がユーザに行われると、制御部190は、図21中央に示すように、操作ボタン110aの近傍に(対応する位置に)アプリ選択ポップアップ340を表示する。
 アプリ選択ポップアップ340には、起動中アプリアイコン341及び候補アプリアイコン342が並べて表示される。
 起動中アプリアイコン341は、起動中の第2アプリケーションに対応するアイコンである。そして、起動中アプリアイコン341は、候補アプリアイコン342よりもアプリ選択ポップアップ340内において左側に表示される。また、起動中アプリアイコン341の下方には、対応する第2アプリケーションが起動中であることを示すアイコンバー341aが表示されている。
 候補アプリアイコン342は、起動していない第2アプリケーションに対応するアイコンであり、例えば2つ表示される。候補アプリアイコン342は、例えば、情報処理装置10にインストールされているアプリケーションのアルファベット順に2つが表示されてもよい。また、制御部190は、第1アプリケーションごとに、起動された第2アプリケーションの回数をカウントし、起動された回数が多い順に候補アプリアイコン342を並べて表示させるようにしてもよい。
 そして、例えば、アプリ選択ポップアップ340に表示された動画アプリに対応する候補アプリアイコン342がタップされると、制御部190は、タップされた候補アプリアイコン342に対応する動画アプリを起動させる。
 また、図21右側に示すように、制御部190は、SNSアプリ画面260bとともに動画アプリ画面260cを第1アプリケーション画面201に重ねて表示する。さらに、制御部190は、SNSアプリ及び動画アプリに対応するアイコンを起動中アプリアイコン321として表示させる。
 なお、動画アプリ画面260cが表示されたときに、アプリ選択ポップアップ340はそのまま表示され続けている。そして、ユーザに第1アプリケーション画面201又は第2アプリケーション画面260がタップされると、制御部190は、アプリ選択ポップアップ340を非表示にするとともに、タップされたアプリケーション画面に対応するアプリケーションにフォーカスを当てた状態にする。
 次に、第2アプリケーションを複数起動させる他の方法を説明する。
 図22は、第2アプリケーションの複数起動に係る他の操作の一例を示す図である。
 第2アプリケーション(ここではSNSアプリ及び動画アプリ)の起動中に所定の操作部110としての操作ボタン110aを押下する操作がユーザに行われると、制御部190は、図22左側に示すように、操作ボタン110aの近傍にアプリ選択ポップアップ500を表示する。
 アプリ選択ポップアップ500には、起動中の第2アプリケーションのサムネイル画像501が表示される。
 サムネイル画像501は、拡張機能メニュー200が表示される直前の第2アプリケーション画面260をキャプチャした画像である。このように、起動中の第2アプリケーションのサムネイル画像501を表示することで、例えば最小化している第2アプリケーションなどをユーザに認識させることができる。
 そして、例えば、図13で示した方法と同様に、制御部190は、第2アプリケーションを複数起動させ、図22右側に示すように、起動させた第2アプリケーションに対応する第2アプリケーション画面260を第1アプリケーション画面201に重ねて表示させる。また、動画アプリに対応するサムネイル画像501がタップされると、制御部190は、タップされたサムネイル画像501の優先順位をSNSアプリより高く設定する。
<3.ハードウェア構成例>
 本開示の一実施の形態に係る情報処理装置10のハードウェア構成例について説明する。図23は、情報処理装置10のハードウェア構成例を示すブロック図である。
 図23に示すように、情報処理装置10は、例えば、プロセッサ871と、ROM872と、RAM873と、ホストバス874と、ブリッジ875と、外部バス876と、インターフェース877と、入力装置878と、出力装置879と、ストレージ880と、ドライブ881と、接続ポート882と、通信装置883と、を有する。なお、ここで示すハードウェア構成は一例であり、構成要素の一部が省略されてもよい。また、ここで示される構成要素以外の構成要素をさらに含んでもよい。
 (プロセッサ871)
 プロセッサ871は、例えば、演算処理装置又は制御装置として機能し、ROM872、RAM873、ストレージ880、又はリムーバブル記録媒体901に記録された各種プログラムやデータに基づいて各構成要素の動作全般又はその一部を制御する。
 (ROM872、RAM873)
 ROM872は、プロセッサ871に読み込まれるプログラムや演算に用いるデータ等を格納する手段である。RAM873には、例えば、プロセッサ871に読み込まれるプログラムや、そのプログラムを実行する際に適宜変化する各種パラメータ等が一時的又は永続的に格納される。
 (ホストバス874、ブリッジ875、外部バス876、インターフェース877)
 プロセッサ871、ROM872、RAM873は、例えば、高速なデータ伝送が可能なホストバス874を介して相互に接続される。一方、ホストバス874は、例えば、ブリッジ875を介して比較的データ伝送速度が低速な外部バス876に接続される。また、外部バス876は、インターフェース877を介して種々の構成要素と接続される。
 (入力装置878)
 入力装置878には、例えば、マウス、キーボード、タッチパネル、ボタン、スイッチ、及びレバー等が用いられる。さらに、入力装置878としては、赤外線やその他の電波を利用して制御信号を送信することが可能なリモートコントローラ(以下、リモコン)が用いられることもある。また、入力装置878には、マイクロフォンなどの音声入力装置が含まれる。
 (出力装置879)
 出力装置879は、例えば、CRT(Cathode Ray Tube)、LCD、又は有機EL等のディスプレイ装置、スピーカ、ヘッドホン等のオーディオ出力装置、プリンタ、携帯電話、又はファクシミリ等、取得した情報を利用者に対して視覚的又は聴覚的に通知することが可能な装置である。また、本開示に係る出力装置879は、触覚刺激を出力することが可能な種々の振動デバイスを含む。
 (ストレージ880)
 ストレージ880は、各種のデータを格納するための装置である。ストレージ880としては、例えば、ハードディスクドライブ(HDD)等の磁気記憶デバイス、半導体記憶デバイス、光記憶デバイス、又は光磁気記憶デバイス等が用いられる。
 (ドライブ881)
 ドライブ881は、例えば、磁気ディスク、光ディスク、光磁気ディスク、又は半導体メモリ等のリムーバブル記録媒体901に記録された情報を読み出し、又はリムーバブル記録媒体901に情報を書き込む装置である。
 (リムーバブル記録媒体901)
 リムーバブル記録媒体901は、例えば、DVDメディア、Blu-ray(登録商標)メディア、HD DVDメディア、各種の半導体記憶メディア等である。もちろん、リムーバブル記録媒体901は、例えば、非接触型ICチップを搭載したICカード、又は電子機器等であってもよい。
 (接続ポート882)
 接続ポート882は、例えば、USB(Universal Serial Bus)ポート、IEEE1394ポート、SCSI(Small Computer System Interface)、RS-232Cポート、又は光オーディオ端子等のような外部接続機器902を接続するためのポートである。
 (外部接続機器902)
 外部接続機器902は、例えば、プリンタ、携帯音楽プレーヤ、デジタルカメラ、デジタルビデオカメラ、又はICレコーダ等である。
 (通信装置883)
通信装置883は、ネットワークに接続するための通信デバイスであり、例えば、有線又は無線LAN、Bluetooth(登録商標)、又はWUSB(Wireless USB)用の通信カード、光通信用のルータ、ADSL(Asymmetric Digital Subscriber Line)用のルータ、又は各種通信用のモデム等である。
 以上の情報処理装置10の構成は、例えば第1アプリケーションが起動される端末装置(スマートホンやPC)の構成と考えることができる。また上述のサーバ装置としての情報処理装置として考えることもできる。
<4.まとめ及び変形例>
 以上の実施の形態では次の効果が得られる。
 実施の形態では、第1アプリケーションの起動中に、第1アプリケーションに拡張機能を提供する拡張アプリケーションを介して第2アプリケーションを起動させ、第1アプリケーションの画面に、第2アプリケーションの画面を重ねて表示させる制御部を備えるようにした。
 これにより、拡張アプリケーションを介して、第1アプリケーションと同時に第2アプリケーションを容易に実行させることができる。
 しがって、情報処理装置10は、ユーザエクスペリエンスを向上することができる。
 実施の形態では、制御部190は、拡張アプリケーションの拡張機能メニュー200に複数のアプリケーションのアイコン(アプリアイコン251)を表示し、拡張機能メニューに表示されたアイコンがユーザに選択されると、選択されたアイコンに対応するアプリケーションを第2アプリケーションとして起動させ、拡張機能メニューが表示された状態を維持する(図6)。
 これにより、ユーザが誤ってアプリアイコン251をタップした場合であっても、直ぐに他のアプリアイコン251をタップし、そのアプリアイコン251に対応する第2アプリケーションを起動させることができる。すなわち、情報処理装置10では、容易に第2アプリケーションを切り替えさせることができる。
 実施の形態では、制御部190は、第1アプリケーション画面201、又は、第2アプリケーション画面260がユーザに操作されると、拡張機能メニュー200を非表示にし、操作された画面に対応するアプリケーションにフォーカスを当てる(図7)。
 これにより、ユーザは、自身がタッチした画面に対応するアプリケーションに対する操作を直ぐに行うことができる。
 実施の形態では、制御部190は、第2アプリケーションの起動中に、拡張機能メニュー200においてアイコン(アプリアイコン251)のいずれかがユーザに選択されると、起動中の第2アプリケーションを終了させ、選択されたアイコンに対応する第2アプリケーションを起動させ、第1アプリケーションの画面に、選択されたアイコンに対応する第2アプリケーションの画面を重ねて表示させる(図7)。
 これにより、第1アプリケーション画面に重ねて表示させる第2アプリケーション画面を容易に変更させることができる。
 実施の形態では、制御部190は、終了させた第2アプリケーションの画面(第2アプリケーション画面260)を非表示にする。
 これにより、新たに選択された第2アプリケーションの画面を見やすく表示することができる。
 実施の形態では、制御部190は、第2アプリケーションが起動している場合、拡張機能メニュー200に、第2アプリケーションが起動している旨の表示を行う表示領域(マルチタスク実行中表示領域300)を設ける(図8)。
 これにより、表示領域において第2アプリケーションが起動しているかを確認させることができる。
 実施の形態では、制御部190は、表示領域(マルチタスク実行中表示領域300)が操作されると、第2アプリケーションを終了させる(図8)。
 これにより、第2アプリケーションを容易に終了させることができる。また、複数の第2アプリケーションが起動されている場合であっても、まとめて終了させることができる。
 実施の形態では、制御部190は、第2アプリケーションの画面に対応する位置に所定のアイコン(起動中アプリアイコン321及び候補アプリアイコン322)を表示し、アイコンに対する操作に応じて、前記第2アプリケーションを切り替えて起動させる(図10)。
 これにより、表示部150に拡張機能メニュー200を表示させることなく、容易に第2アプリケーションを切り替えることができる。
 実施の形態では、制御部190は、複数の第2アプリケーションを起動させ、起動中の複数の第2アプリケーションの画面を、前記第1アプリケーションの画面に重ねて表示する(図14)。
 これにより、第1アプリケーションの他に複数の第2アプリケーションを同時に起動させ、それらの画面をユーザに見させることができる。
 しがって、情報処理装置10は、ユーザエクスペリエンスを向上することができる。
 実施の形態では、制御部190は、起動中の第2アプリケーションのアイコン(起動中アプリアイコン312)を拡張機能メニュー200に並べて表示する。
 これにより、拡張機能メニュー200において、起動中の第2アプリケーションを確認させることができる。
 実施の形態では、制御部190は、アイコン(起動中アプリアイコン312)に対するユーザ操作に応じて、第2アプリケーションの優先順位を変更する(図15)。
 これにより、例えば、優先順位の高い第2アプリケーションの音声及び映像を優先して出力することができる。
 実施の形態では、制御部190は、第2アプリケーション画面260に対応する位置に所定のアイコン(候補アプリアイコン342)を表示し、アイコンに対する操作に応じて選択された第2アプリケーションを起動させる(図21)。
 これにより、複数の第2アプリケーションを容易に起動させ、それらの第2アプリケーションの画面をユーザに容易に見せることができる。
 実施の形態では、制御部190は、オペレーションシステムの通知メニュー(OSメニュー204)に、第2アプリケーションのアイコン(候補アプリアイコン411)を表示させ、アイコンに対する操作に応じて、アイコンに対応する前記第2アプリケーションを起動させる(図17)。
 これにより、オペレーションシステムの通知メニューに対する操作によっても、拡張アプリケーションを介した第2アプリケーションの起動を行うことができ、さらにユーザエクスペリエンスを向上することができる。
 実施の形態では、制御部190は、通知メニュー(OSメニュー204)に、第2アプリケーションのアイコン(起動中アプリアイコン332)を優先順位に応じて表示させる(図19)。
 これにより、オペレーションシステムの通知メニューによっても、第2アプリケーションの優先順位を把握させることができる。
 実施の形態では、制御部190は、操作ボタン110aがユーザに操作されると、操作ボタンの近傍に、第2アプリケーションのアイコン(起動中アプリアイコン341及び候補アプリアイコン342)を表示させ、アイコンに対する操作に応じて、第2アプリケーションを切り替えて起動させる(図12)。
 これにより、物理的な操作ボタンの操作に対応して第2アプリケーションを切り替えることが可能となる。
 実施の形態の情報処理方法では、第1アプリケーションの起動中に、第1アプリケーションに拡張機能を提供する拡張アプリケーションを介して第2アプリケーションを起動させ、第1アプリケーションの画面に、第2アプリケーションの画面を重ねて表示させる。
 実施の形態のプログラムは、第1アプリケーションの起動中に、第1アプリケーションに拡張機能を提供する拡張アプリケーションを介して第2アプリケーションを起動させ、第1アプリケーションの画面に、第2アプリケーションの画面を重ねて表示させる処理を情報処理装置に実行させる。
 このプログラムは、情報処理装置10のプロセッサ871に実行させるプログラムである。
 このような情報処理装置10を実現するプログラムはコンピュータ装置等の機器に内蔵されている記録媒体としてのHDDや、CPUを有するマイクロコンピュータ内のROM等に予め記録しておくことができる。
 あるいはまた、フレキシブルディスク、CD-ROM(Compact Disc Read Only Memory)、MO(Magneto Optical)ディスク、DVD(Digital Versatile Disc)、ブルーレイディスク(Blu-ray Disc(登録商標))、磁気ディスク、半導体メモリ、メモリカードなどのリムーバブル記録媒体に、一時的あるいは永続的に格納(記録)しておくことができる。このようなリムーバブル記録媒体は、いわゆるパッケージソフトウェアとして提供することができる。
 また、このようなプログラムは、リムーバブル記録媒体からパーソナルコンピュータ等にインストールする他、ダウンロードサイトから、LAN(Local Area Network)、インターネットなどのネットワークを介してダウンロードすることもできる。
 またこのようなプログラムによれば、実施の形態の情報処理装置10の広範な提供に適している。例えばスマートフォンやタブレット等の携帯端末装置、携帯電話機、パーソナルコンピュータ、ゲーム専用機器、ビデオ機器、PDA(Personal Digital Assistant)等にプログラムをダウンロードすることで、当該スマートフォン等を、本開示の情報処理装置10として機能させることができる。
 なお、本明細書に記載された効果はあくまでも例示であって限定されるものではなく、また他の効果があってもよい。
 また、上記した第2アプリケーションの切り替え方法、第2アプリケーションの複数の起動方法は、例示したものであり、情報処理装置10は、少なくともいずれかの方法を実行できるようにすればよい。
 また、複数の第2アプリケーション画面260を表示部150に表示する場合、位置、サイズ、透明度、階層順を適宜変更するようにしてもよい。例えば、ユーザの視線位置を検出できる場合、ユーザの視線位置に対応する第2アプリケーション画面260を大きく表示するようにしてもよい。
 また、複数の第2アプリケーション画面260に対応する音声の出力も適宜変更するようにしてもよい。例えば、ユーザの視線位置を検出できる場合、ユーザの視線位置に対応する第2アプリケーション画面260の音声を大きくしたり、視線位置にない第2アプリケーション画面260の音声を小さくしたりしてもよい。
 また、第2アプリケーション画面260を最小化する際には、拡張機能メニュー200やOSメニュー204において、第2アプリケーション画面が最小化されていることを示すアイコンバーを、対応する起動中アプリアイコン312、332の下方に表示するようにしてもよい。
 例えば、図24左側に示すように、SNSアプリ及び動画アプリが起動されており、SNSアプリ画面260b及び動画アプリ画面260cが表示されているとする。このような場合に、SNSアプリ画面260bに対応するマルチタスク操作領域270の最小化アイコン273がタップされると、制御部190は、図24右側に示すように、SNSアプリ画面260bを最小化する(非表示にする)。また、制御部190は、OSメニュー204が表示されると、OSメニュー204におけるSNSアプリに対応する起動中アプリアイコン332の下方に、対応するSNSアプリ(第2アプリケーション)が最小化されていることを示すアイコンバー332bを表示させる。
 また、複数の第2アプリケーション画面260を表示部150に表示する際に、スクリーンショットで撮影される第2アプリケーション画面260と、スクリーンショットで撮影されない第2アプリケーション画面260とを、それぞれ設定できるようにしてもよい。
 例えば、図25に示すように、制御部190は、第2アプリケーション画面260の近傍、又は、マルチタスク操作領域270に、スクリーンショットで撮影されるか否かを示す表示アイコン600を表示する。なお、表示アイコン600は、スクリーンショットで撮影されることを示す表示化アイコン600aと、スクリーンショットで撮影されないことを示す非表示化アイコン600bとのどちらかで表示されており、それぞれの第2アプリケーション(第2アプリケーション画面260)に対応付けられている。そして、表示アイコン600がタップされると、制御部190は、タップされるまでに表示されていた表示化アイコン600a又は非表示化アイコン600bを、それとは異なるアイコンに切り替えて表示する。
 また、制御部190は、スクリーンショットを撮影する場合、表示化アイコン600aに対応付けられた第2アプリケーション画面260を一緒に撮影し、非表示化アイコン600bに対応付けられた第2アプリケーション画面260を撮影しないようにする。
 また、制御部190は、ユーザにとって重要とされる第2アプリケーションと、それ以外の第2アプリケーションとを判別し、重要とされる第2アプリケーションに対応する第2アプリケーション画面260を大きく表示したり、音声を大きくしたりしてもよい。
 なお本技術は以下のような構成も採ることができる。
 (1)
 第1アプリケーションの起動中に、前記第1アプリケーションに拡張機能を提供する拡張アプリケーションを介して第2アプリケーションを起動させ、
 前記第1アプリケーションの画面に、前記第2アプリケーションの画面を重ねて表示させる制御部
を備えた情報処理装置。
 (2)
 前記制御部は、
 前記拡張アプリケーションの拡張機能メニューに複数の第2アプリケーションのアイコンを表示させ、
 前記拡張機能メニューに表示されたアイコンがユーザに選択されると、選択されたアイコンに対応する前記第2アプリケーションを起動させ、前記拡張機能メニューが表示された状態を維持する
 (1)に記載の情報処理装置。
(3)
 前記制御部は、
 前記第1アプリケーションの画面、又は、前記第2アプリケーションの画面がユーザに操作されると、前記拡張機能メニューを非表示にし、操作された画面に対応するアプリケーションにフォーカスを当てる
 (2)に記載の情報処理装置。
 (4)
 前記制御部は、
 前記第2アプリケーションの起動中に、前記拡張機能メニューにおいて前記アイコンのいずれかがユーザに選択されると、起動中の前記第2アプリケーションを終了させ、選択されたアイコンに対応する前記第2アプリケーションを起動させ、
 前記第1アプリケーションの画面に、選択されたアイコンに対応する前記第2アプリケーションの画面を重ねて表示させる
 (2)又は(3)に記載の情報処理装置。
 (5)
 前記制御部は、
 終了させた前記第2アプリケーションの画面を非表示にする
 (4)に記載の情報処理装置。
(6)
 前記制御部は、
 前記第2アプリケーションが起動している場合、前記拡張機能メニューに、前記第2アプリケーションが起動している旨の表示を行う表示領域を設ける
 (2)から(5)のいずれかに記載の情報処理装置。
(7)
 前記制御部は、
 前記表示領域が操作されると、前記第2アプリケーションを終了させる
 (6)に記載の情報処理装置。
(8)
 前記制御部は、
 前記第2アプリケーションの画面に対応する位置に所定のアイコンを表示し、
 前記アイコンに対する操作に応じて、前記第2アプリケーションを切り替えて起動させる
 (1)から(7)のいずれかに記載の情報処理装置。
(9)
 前記制御部は、
 複数の第2アプリケーションを起動させ、
 起動中の複数の前記第2アプリケーションの画面を、前記第1アプリケーションの画面に重ねて表示する
 (1)から(8)のいずれかに記載の情報処理装置。
(10)
 前記制御部は、
 起動中の前記第2アプリケーションのアイコンを前記拡張機能メニューに並べて表示する
 (2)から(7)のいずれかに記載の情報処理装置。
(11)
 前記制御部は、
 前記アイコンに対するユーザ操作に応じて、前記第2アプリケーションの優先順位を変更する
 (10)に記載の情報処理装置。
(12)
 前記制御部は、
 前記第2アプリケーションの画面に対応する位置に所定のアイコンを表示し、
 前記アイコンに対する操作に応じて選択された第2アプリケーションを起動させる
 (1)から(11)のいずれかに記載の情報処理装置。
(13)
 前記制御部は、
 オペレーションシステムの通知メニューに、前記第2アプリケーションのアイコンを表示させ、
 前記アイコンに対する操作に応じて、前記アイコンに対応する前記第2アプリケーションを起動させる
 (1)から(12)のいずれかに記載の情報処理装置。
(14)
 前記制御部は、
 前記通知メニューに、前記第2アプリケーションのアイコンを優先順位に応じて表示させる
 (13)に記載の情報処理装置。
(15)
 前記制御部は、
 操作ボタンがユーザに操作されると、前記操作ボタンの近傍に、前記第2アプリケーションのアイコンを表示させ、
 前記アイコンに対する操作に応じて、前記第2アプリケーションを切り替えて起動させる
 (10)に記載の情報処理装置。
(16)
 第1アプリケーションの起動中に、前記第1アプリケーションに拡張機能を提供する拡張アプリケーションを介して第2アプリケーションを起動させ、
 前記第1アプリケーションの画面に、前記第2アプリケーションの画面を重ねて表示させる
情報処理方法。
(17)
 第1アプリケーションの起動中に、前記第1アプリケーションに拡張機能を提供する拡張アプリケーションを介して第2アプリケーションを起動させ、
 前記第1アプリケーションの画面に、前記第2アプリケーションの画面を重ねて表示させる
処理を情報処理装置に実行させるプログラム。
10 情報処理装置
110 操作部
120 記憶部
130 撮影部
140 センサ部
150 表示部
160 音声入力部
170 音声出力部
180 画面撮影部
190 制御部

Claims (17)

  1.  第1アプリケーションの起動中に、前記第1アプリケーションに拡張機能を提供する拡張アプリケーションを介して第2アプリケーションを起動させ、
     前記第1アプリケーションの画面に、前記第2アプリケーションの画面を重ねて表示させる制御部
    を備えた情報処理装置。
  2.  前記制御部は、
     前記拡張アプリケーションの拡張機能メニューに複数の第2アプリケーションのアイコンを表示させ、
     前記拡張機能メニューに表示されたアイコンがユーザに選択されると、選択されたアイコンに対応する前記第2アプリケーションを起動させ、前記拡張機能メニューが表示された状態を維持する
     請求項1に記載の情報処理装置。
  3.  前記制御部は、
     前記第1アプリケーションの画面、又は、前記第2アプリケーションの画面がユーザに操作されると、前記拡張機能メニューを非表示にし、操作された画面に対応するアプリケーションにフォーカスを当てる
     請求項2に記載の情報処理装置。
  4.  前記制御部は、
     前記第2アプリケーションの起動中に、前記拡張機能メニューにおいて前記アイコンのいずれかがユーザに選択されると、起動中の前記第2アプリケーションを終了させ、選択されたアイコンに対応する前記第2アプリケーションを起動させ、
     前記第1アプリケーションの画面に、選択されたアイコンに対応する前記第2アプリケーションの画面を重ねて表示させる
     請求項2に記載の情報処理装置。
  5.  前記制御部は、
     終了させた前記第2アプリケーションの画面を非表示にする
     請求項4に記載の情報処理装置。
  6.  前記制御部は、
     前記第2アプリケーションが起動している場合、前記拡張機能メニューに、前記第2アプリケーションが起動している旨の表示を行う表示領域を設ける
     請求項2に記載の情報処理装置。
  7.  前記制御部は、
     前記表示領域が操作されると、前記第2アプリケーションを終了させる
     請求項6に記載の情報処理装置。
  8.  前記制御部は、
     前記第2アプリケーションの画面に対応する位置に所定のアイコンを表示し、
     前記アイコンに対する操作に応じて、前記第2アプリケーションを切り替えて起動させる
     請求項1に記載の情報処理装置。
  9.  前記制御部は、
     複数の第2アプリケーションを起動させ、
     起動中の複数の前記第2アプリケーションの画面を、前記第1アプリケーションの画面に重ねて表示する
     請求項1に記載の情報処理装置。
  10.  前記制御部は、
     起動中の前記第2アプリケーションのアイコンを前記拡張機能メニューに並べて表示する
     請求項2に記載の情報処理装置。
  11.  前記制御部は、
     前記アイコンに対するユーザ操作に応じて、前記第2アプリケーションの優先順位を変更する
     請求項10に記載の情報処理装置。
  12.  前記制御部は、
     前記第2アプリケーションの画面に対応する位置に所定のアイコンを表示し、
     前記アイコンに対する操作に応じて選択された第2アプリケーションを起動させる
     請求項1に記載の情報処理装置。
  13.  前記制御部は、
     オペレーションシステムの通知メニューに、前記第2アプリケーションのアイコンを表示させ、
     前記アイコンに対する操作に応じて、前記アイコンに対応する前記第2アプリケーションを起動させる
     請求項1に記載の情報処理装置。
  14.  前記制御部は、
     前記通知メニューに、前記第2アプリケーションのアイコンを優先順位に応じて表示させる
     請求項13に記載の情報処理装置。
  15.  前記制御部は、
     操作ボタンがユーザに操作されると、前記操作ボタンの近傍に、前記第2アプリケーションのアイコンを表示させ、
     前記アイコンに対する操作に応じて、前記第2アプリケーションを切り替えて起動させる
     請求項1に記載の情報処理装置。
  16.  第1アプリケーションの起動中に、前記第1アプリケーションに拡張機能を提供する拡張アプリケーションを介して第2アプリケーションを起動させ、
     前記第1アプリケーションの画面に、前記第2アプリケーションの画面を重ねて表示させる
    情報処理方法。
  17.  第1アプリケーションの起動中に、前記第1アプリケーションに拡張機能を提供する拡張アプリケーションを介して第2アプリケーションを起動させ、
     前記第1アプリケーションの画面に、前記第2アプリケーションの画面を重ねて表示させる
    処理を情報処理装置に実行させるプログラム。
PCT/JP2022/006434 2021-03-29 2022-02-17 情報処理装置、情報処理方法、プログラム WO2022209395A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US18/551,179 US20240176649A1 (en) 2021-03-29 2022-02-17 Information processing device, information processing method, and program

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2021056047 2021-03-29
JP2021-056047 2021-03-29

Publications (1)

Publication Number Publication Date
WO2022209395A1 true WO2022209395A1 (ja) 2022-10-06

Family

ID=83458831

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2022/006434 WO2022209395A1 (ja) 2021-03-29 2022-02-17 情報処理装置、情報処理方法、プログラム

Country Status (2)

Country Link
US (1) US20240176649A1 (ja)
WO (1) WO2022209395A1 (ja)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050188329A1 (en) * 2004-02-20 2005-08-25 Stephen Cutler System for and method of generating and navigating within a workspace of a computer application
JP2013047923A (ja) * 2011-08-29 2013-03-07 Kyocera Corp 装置、方法、及びプログラム
US20140137020A1 (en) * 2012-11-09 2014-05-15 Sameer Sharma Graphical user interface for navigating applications
JP2014109833A (ja) * 2012-11-30 2014-06-12 Brother Ind Ltd 接触操作処理装置、接触操作処理方法およびプログラム
JP2015201074A (ja) * 2014-04-09 2015-11-12 アルパイン株式会社 情報処理装置及びコンピュータプログラム
US20160044153A1 (en) * 2014-08-05 2016-02-11 Lg Electronics Inc. Mobile terminal and method for controlling the same

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050188329A1 (en) * 2004-02-20 2005-08-25 Stephen Cutler System for and method of generating and navigating within a workspace of a computer application
JP2013047923A (ja) * 2011-08-29 2013-03-07 Kyocera Corp 装置、方法、及びプログラム
US20140137020A1 (en) * 2012-11-09 2014-05-15 Sameer Sharma Graphical user interface for navigating applications
JP2014109833A (ja) * 2012-11-30 2014-06-12 Brother Ind Ltd 接触操作処理装置、接触操作処理方法およびプログラム
JP2015201074A (ja) * 2014-04-09 2015-11-12 アルパイン株式会社 情報処理装置及びコンピュータプログラム
US20160044153A1 (en) * 2014-08-05 2016-02-11 Lg Electronics Inc. Mobile terminal and method for controlling the same

Also Published As

Publication number Publication date
US20240176649A1 (en) 2024-05-30

Similar Documents

Publication Publication Date Title
US20210081560A1 (en) Device, method, and graphical user interface for accessing an application in a locked device
US11360634B1 (en) Shared-content session user interfaces
US11907605B2 (en) Shared-content session user interfaces
EP4280040A2 (en) Multifunction device control of another electronic device
EP2214174A2 (en) Apparatus and method for playing of multimedia item
JP2011036424A (ja) ゲーム装置、ゲーム制御プログラム、及びゲーム制御方法
WO2022209395A1 (ja) 情報処理装置、情報処理方法、プログラム
WO2021044601A1 (ja) アプリケーション拡張プログラム、情報処理装置、および方法
US20240187514A1 (en) Program, information processing device, and information processing method
KR102666081B1 (ko) 공유 콘텐츠 세션 사용자 인터페이스들
US20230367468A1 (en) Information processing device, information processing method, and information processing program
JP2024054872A (ja) 共有コンテンツセッションユーザインタフェース

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 22779622

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 18551179

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 22779622

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: JP