WO2017138153A1 - 端末装置、管理方法、制御方法、管理プログラム、及び制御プログラム - Google Patents

端末装置、管理方法、制御方法、管理プログラム、及び制御プログラム Download PDF

Info

Publication number
WO2017138153A1
WO2017138153A1 PCT/JP2016/054165 JP2016054165W WO2017138153A1 WO 2017138153 A1 WO2017138153 A1 WO 2017138153A1 JP 2016054165 W JP2016054165 W JP 2016054165W WO 2017138153 A1 WO2017138153 A1 WO 2017138153A1
Authority
WO
WIPO (PCT)
Prior art keywords
list
mounted display
head
display
server device
Prior art date
Application number
PCT/JP2016/054165
Other languages
English (en)
French (fr)
Inventor
村上伊織
Original Assignee
富士通株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 富士通株式会社 filed Critical 富士通株式会社
Priority to PCT/JP2016/054165 priority Critical patent/WO2017138153A1/ja
Priority to JP2017566492A priority patent/JPWO2017138153A1/ja
Publication of WO2017138153A1 publication Critical patent/WO2017138153A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units

Definitions

  • This case relates to a terminal device, a management method, a control method, a management program, and a control program.
  • Patent Document 1 As one of wearable computers, a head-mounted display (Head-Mounted Display) that is worn on the head of a human body is known (see, for example, Patent Document 1).
  • Patent Document 2 There is also known an information processing system in which a head mounted display, a smartphone, and a server device cooperate to execute information processing (see, for example, Patent Document 2).
  • Patent Document 2 discloses that a head-mounted display has an application program (hereinafter simply referred to as an application).
  • the application that the head mounted display has is appropriately managed by the user. Therefore, for example, when performing field work using a head-mounted display, if an application that supports field work is not installed on the head-mounted display before work, it is desirable to install the application on the head-mounted display. For example, if the installed application on the head mounted display is not the latest version, it is desirable to update the installed application.
  • the user When a user installs an app on the head-mounted display or updates an installed app, the user installs the head-mounted display and installs or updates it according to the screen guidance displayed on the display section of the head-mounted display.
  • the screen displayed on the display unit is small and the head-mounted display has few operation buttons, there is a problem that it takes time to properly manage the application.
  • an object of one aspect is to provide a terminal device, a management method, a control method, a management program, and a control program that can easily manage an application used by a head mounted display.
  • a terminal device disclosed in the present specification is based on a sharing unit that shares a screen displayed on a head-mounted display, a display unit that displays a screen shared by the sharing unit, and an instruction for a screen displayed by the display unit.
  • a distribution control unit that distributes the list of applications to the head-mounted display to a server device that distributes the application selected by the head-mounted display and the application selected from the list. This is a characteristic terminal device.
  • the terminal device disclosed in the present specification includes a first acquisition unit that acquires a first list of first applications installed on the head-mounted display from a head-mounted display, and a second used by the head-mounted display.
  • the terminal device disclosed in the present specification when receiving a specific operation in a terminal device connected to a head-mounted display, transmits the identification information of the head-mounted display to a server device; and When a list of software corresponding to the identification information is received, a selection is received when receiving a selection of one of the display unit that displays the received list and the software included in the list displayed by the display unit. And a notification unit configured to notify the head-mounted display of an installation instruction related to the received software.
  • the management method disclosed in the present specification shares a screen displayed on a head-mounted display, displays the shared screen, and, based on an instruction to the screen, a list of apps used by the head-mounted display and the A management method is characterized in that a computer executes a process of causing a server device that distributes an application selected from a list to distribute the list of applications toward the head-mounted display.
  • the management method disclosed in the present specification acquires a first list of first apps installed on the head mounted display from a head mounted display, and stores a second list of second apps used by the head mounted display.
  • the second list related to the first list is acquired from a server device that distributes the second app selected from the list and the second list, the second list is displayed, and the second list is displayed.
  • the computer executes a process of causing the server device to distribute the second application toward the head-mounted display based on an instruction to the list.
  • the control method disclosed in the present specification is a control method for controlling a terminal device connected to a head-mounted display.
  • identification information of the head-mounted display is transmitted to a server device, and the server device.
  • the software list corresponding to the identification information is received from the software, the received list is displayed, and when the selection of any one of the software included in the displayed list is received, the selection is received.
  • a control method is characterized in that a computer executes a process of notifying the head-mounted display of an installation instruction.
  • the management program disclosed in this specification shares a screen displayed on a head-mounted display, displays the shared screen, and lists the apps used by the head-mounted display and the list based on an instruction to the screen.
  • a management program causing a computer to execute a process of distributing a list of the applications toward the head-mounted display to a server device that distributes an application selected from the above.
  • the management program disclosed in this specification acquires a first list of first apps installed on the head mounted display from a head mounted display, and stores a second list of second apps used by the head mounted display.
  • the second list related to the first list is acquired from a server device that distributes the second app selected from the list and the second list, the second list is displayed, and the second list is displayed.
  • the management program causes the computer to execute a process for distributing the second application toward the head mounted display to the server device based on an instruction to the list.
  • the control program disclosed in the present specification is a control program for controlling a terminal device connected to a head mounted display.
  • the control program transmits identification information of the head mounted display to a server device, and the server device.
  • the software list corresponding to the identification information is received from the software, the received list is displayed, and when the selection of any one of the software included in the displayed list is received, the selection is received.
  • management method, control method, management program, and control program disclosed in this specification it is possible to easily manage an application used by the head mounted display.
  • FIG. 1 is a diagram illustrating an example of an application management system according to the first embodiment.
  • FIG. 2 is an example of a hardware configuration of the terminal device.
  • FIG. 3 is an example of a block diagram of the terminal device according to the first embodiment.
  • FIG. 4 is a flowchart illustrating an example of processing executed by the terminal device according to the first embodiment.
  • FIG. 5 is a flowchart showing an example of processing executed by the head mounted display according to the first embodiment.
  • FIG. 6 is a flowchart illustrating an example of processing executed by the server device according to the first embodiment.
  • FIG. 7 is an example of a screen showing a usage list.
  • FIG. 8 is an example of a notification screen.
  • FIG. 9 is a diagram illustrating an example of an application management system according to the second embodiment.
  • FIG. 9 is a diagram illustrating an example of an application management system according to the second embodiment.
  • FIG. 10 is an example of a block diagram of a terminal device according to the second embodiment.
  • FIG. 11 is a flowchart illustrating an example of processing executed by the terminal device according to the second embodiment.
  • FIG. 12 is a flowchart illustrating an example of processing executed by the head mounted display according to the second embodiment.
  • FIG. 13 is a flowchart illustrating an example of processing executed by the server device according to the second embodiment.
  • FIG. 14 is an example of a confirmation screen.
  • FIG. 1 is a diagram illustrating an example of an application management system S1 according to the first embodiment.
  • the application management system S ⁇ b> 1 includes a terminal device 100, a head mounted display (hereinafter referred to as “HMD”) 200, and a server device 300.
  • HMD head mounted display
  • the terminal device 100 is directly connected to the HMD 200 by the first wireless communication without going through the access point AP.
  • the first wireless communication for example, there is a standard such as Wi-Fi Direct (registered trademark). Therefore, the terminal device 100 can be connected to the HMD 200 even if the terminal device 100 is not included in the communicable range of the access point AP.
  • the terminal device 100 displays various screens and browsers on the display unit 110, and transmits various requests and instructions to the HMD 200.
  • the smart phone is shown as an example of the terminal device 100 in FIG. 1, if it is portable information terminals, such as a tablet terminal, for example, it will not specifically limit to a smart phone.
  • the HMD 200 is connected to the access point AP by the second wireless communication different from the first wireless communication.
  • the second wireless communication for example, there is a standard such as Wi-Fi (registered trademark).
  • the access point AP is also connected to the server device 300 via the gateway device GW and the communication network NW. Accordingly, the HMD 200 is indirectly connected to the server device 300 by the second wireless communication and wired connection.
  • the HMD 200 receives an instruction or request transmitted from the terminal device 100 and executes various processes, or transmits a request or the like to the server device 300.
  • An example of the communication network NW is the Internet.
  • the HMD 200 includes a display unit 210, an imaging unit (for example, a camera) 220, and a control unit 230.
  • the display method of the display unit 210 may be any of a video transmission type, an optical transmission type, and a non-transmission type.
  • the control unit 230 controls operations of the display unit 210 and the imaging unit 220, and executes wireless communication.
  • the control unit 230 displays the video imaged by the imaging unit 220 on the display unit 210.
  • the control unit 230 displays the home screen on the display unit 210 after a predetermined activation time has elapsed.
  • the home screen is a screen that is displayed first after activation, for example.
  • An example of the home screen is a standby screen.
  • the server device 300 manages applications used by the HMD 200 and a list thereof. More specifically, the storage unit 310 of the server device 300 stores a plurality of applications used by the HMD 200. Examples of the application include a support application that supports field work, an AR application that implements Augmented Reality (AR), a customer service application, and a control application that controls cameras and voice commands. For example, when the control unit 320 of the server apparatus 300 receives a request transmitted from the HMD 200, the control unit 320 uses the name, attribute, signature, and the like of the application included in the request to store an application corresponding to the request in the storage unit 310. And is distributed to the HMD 200. As shown in FIG. 1, the server device 300 is installed in a data center DC on the cloud CL. The data center DC is deployed at a base different from the base 10 where the terminal device 100 and the HMD 200 are used.
  • the data center DC is deployed at a base different from the base 10 where the terminal device 100 and the HMD 200 are used.
  • the HMD 200 and the server device 300 described above have basically the same hardware configuration as that of the terminal device 100, and thus the description thereof is omitted.
  • the hardware configuration of the access point AP and the gateway device GW is basically the same as that of the terminal device 100.
  • FIG. 2 is an example of a hardware configuration of the terminal device 100.
  • the terminal device 100 includes a central processing unit (CPU) 100A, a random access memory (RAM) 100B, a read only memory (ROM) 100C, an electrically erasable programmable read only memory (EEPROM) 100D, and a communication circuit 100E. Is included.
  • An antenna 100E ′ is connected to the communication circuit 100E.
  • a CPU that realizes a communication function may be used.
  • the terminal device 100 includes a speaker 100F, a camera 100G, a touch panel 100H as a display unit 110, a display 100I, and a microphone 100J.
  • the camera 100G includes an imaging device using, for example, Complementary Metal Metal Oxide Semiconductor (CMOS) or Charge Coupled Device (CCD) and an optical system such as a lens.
  • CMOS Complementary Metal Metal Oxide Semiconductor
  • CCD Charge Coupled Device
  • the CPU 100A,..., The microphone 100J are connected to each other by an internal bus 100K. At least the CPU 100A and the RAM 100B cooperate to realize a computer.
  • the program stored in the ROM 100C or the EEPROM 100D is stored by the CPU 100A.
  • the stored program is executed by the CPU 100A, various functions described later are realized, and various processes are executed.
  • what is necessary is just to make a program according to the flowchart mentioned later.
  • FIG. 3 is an example of a block diagram of the terminal device 100 according to the first embodiment.
  • the terminal device 100 includes a sharing unit 101 and a distribution control unit 102. Since the display unit 110 is hardware, it is indicated by a broken line.
  • the sharing unit 101 shares the home screen displayed on the HMD 200. More specifically, when the user of the terminal device 100 operates the display unit 110 to request the HMD 200 to share the home screen displayed on the display unit 210 of the HMD 200, the sharing unit 101 uses a screen transmission technology such as miracast (registered trademark). Use to share the home screen. As a result, the display unit 110 displays the shared home screen. That is, the same home screen as the home screen displayed on the display unit 210 of the HMD 200 is displayed on the display unit 110 of the terminal device 100. Further, when the user performs an operation for starting a browser in the home screen via the display unit 110, the sharing unit 101 transmits the operation content to the HMD 200. As a result, the display unit 210 of the HMD 200 starts a browser, and the display unit 110 displays the browser. Although details will be described later, the sharing unit 101 executes various processes described later.
  • the distribution control unit 102 causes the server device 300 to distribute a list of applications to the HMD 200 based on an instruction for the home screen displayed by the display unit 110.
  • the display unit 210 of the HMD 200 displays a list of apps
  • the display unit 110 of the terminal device also displays a list of apps.
  • the distribution control unit 102 causes the server device 300 to distribute the application to the HMD 200 based on an instruction for the application list.
  • the HMD 200 (more specifically, the control unit 230) receives the application and executes processing such as installation and update.
  • FIG. 4 is a flowchart showing an example of processing executed by the terminal device 100 according to the first embodiment.
  • FIG. 5 is a flowchart showing an example of processing executed by the HMD 200 according to the first embodiment.
  • FIG. 6 is a flowchart illustrating an example of processing executed by the server device 300 according to the first embodiment.
  • FIG. 7 is an example of a screen showing a usage list.
  • FIG. 8 is an example of a notification screen.
  • step S201 when the user presses the power button of the HMD 200, the display unit 210 of the HMD 200 displays a home screen after a predetermined activation time has elapsed (step S201), and the control unit 230 displays the home screen. Wait until screen sharing is requested (step S202: NO).
  • the sharing unit 101 of the terminal device 100 requests sharing of the home screen displayed on the HMD 200 (more specifically, the display unit 210). (Step S101). More specifically, when the user gives a predetermined instruction (for example, a tap operation) to the display unit 110 of the terminal device, the sharing unit 101 requests sharing of the home screen.
  • a predetermined instruction for example, a tap operation
  • step S202 YES
  • step S203 NO
  • the sharing unit 101 receives the home screen and shares the home screen (step S102), and the display unit 110 displays the shared home screen. (Step S103).
  • the sharing unit 101 sets the terminal device 100 in a state in which the HMD 200 can be remotely operated (for example, remote operation or remote operation).
  • the home screen displayed on the display unit 210 of the HMD 200 is displayed on the display unit 110 of the terminal device 100, and the HMD 200 is operated by performing a predetermined operation on the home screen displayed on the display unit 110. Can be operated.
  • step S104 the sharing unit 101 requests activation of the browser of the HMD 200 by remote operation. For example, when the user double-taps an image (for example, an icon image) that activates a browser in the home screen, the sharing unit 101 transmits a browser activation request to the HMD 200.
  • image for example, an icon image
  • the control unit 230 determines that the browser activation is requested (step S203: YES), and the display unit 210 selects the browser. Displayed (step S204).
  • the control unit 230 waits until it receives Uniform
  • the URL is identification information representing the location value of the server 300.
  • the sharing unit 101 shares the screen displayed on the display unit 210 and the screen displayed on the display unit 110. Therefore, when the display unit 210 displays a browser in the process of step S204, the display unit 110 displays the browser as shown in FIG. 4 (step S105). When the process of step S105 is completed, the sharing unit 101 then transmits the URL of the server device 300 to the HMD 200 (step S106). More specifically, when the user inputs a URL to the browser displayed on display unit 110, sharing unit 101 transmits the URL to HMD 200.
  • step S205 YES
  • step S206 the control unit 230 transmits a list of applications installed in the HMD 200 (hereinafter referred to as an installation list) to the server device 300 (step S207).
  • the control unit 320 of the server apparatus 300 is on standby until an installation list is received (step S301: NO).
  • the control unit 320 determines that the installation list has been received (step S301: YES).
  • the control unit 320 distributes a list of applications used by the HMD 200 (hereinafter referred to as a use list) to the HMD 200 (step S302). Wait until requested (step S303: NO).
  • the control unit 320 delivers the usage list in the process of step S302 shown in FIG. 6, as shown in FIG. 5, the control unit 230 of the HMD 200 receives the usage list (step S208), and the display unit 210 displays the usage list. (Step S209).
  • the display unit 110 displays a usage list of applications as shown in FIG. (Step S107). Thereby, as shown in FIG. 7, the display part 110 of the terminal device 100 displays the usage list of an application.
  • step S108 the distribution control unit 102 waits until an instruction is given to the usage list.
  • step S210 displays the use list in the process of step S209 shown in FIG. 5
  • step S210: NO the control unit 230 waits until an instruction is received.
  • the usage list includes the attributes of the application. There may be one or more app attributes.
  • the usage list includes a plurality of application names such as “AR client”, “chrome”, “HMD setting”, and “remote setting”, application sizes, application versions, and the like as attributes.
  • images IM1, IM3, and IM4 that can be pressed with the finger FG are associated with each attribute of the plurality of applications as operation buttons.
  • the images IM1 and IM4 that give instructions for installing these applications in the HMD 200 are associated with the attributes.
  • the application “HMD setting” is installed in the HMD 200, the version of the application is not the latest, so the image IM3 that gives an instruction to update is associated with the attribute.
  • the application “Chrome” is installed in the HMD 200 and the version of the application is also the latest, the image IM2 that cannot be pressed and cannot be pressed is associated with the attribute.
  • step S108 when the distribution control unit 102 determines that there is an instruction in the process of step S108 (step S108: YES), the distribution control unit 102 transmits the instruction to the HMD 200 (step S109). Therefore, for example, when the user presses the above-described image IM1 with the finger FG, the distribution control unit 102 transmits an instruction for installing the application “AR client” to the HMD 200 to the HMD 200.
  • control unit 230 of the HMD 200 receives the instruction.
  • control unit 230 determines that the instruction has been received (step S210: YES), and requests the server device 300 to distribute the application in accordance with the instruction (step S211).
  • the control unit 320 of the server device 300 determines that distribution is requested (step S303: YES), and the HMD 200 determines an application according to the request. (Step S304).
  • the control unit 320 distributes the application as illustrated in FIG. 5, the control unit 230 of the HMD 200 receives the application distributed from the server device 300 (step S212), and executes installation or update (step S213).
  • the control unit 230 installs an application.
  • the control unit 230 updates the application.
  • the display unit 110 of the terminal device 100 and the display unit 210 of the HMD 200 each display a screen notifying that the installation is completed.
  • the terminal device 100 displays the sharing unit 101 that shares the screen displayed on the HMD 200, the display unit 110 that displays the shared screen, and the display unit 110.
  • a distribution control unit 102 is provided that causes the server device 300 to distribute an application usage list to the HMD 200.
  • the terminal device 100 and the HMD 200 can directly communicate wirelessly without going through the access point AP. Therefore, even if the terminal device 100 does not exist within the communicable range of the access point AP, the application used by the HMD 200 can be easily managed.
  • FIG. 9 is a diagram illustrating an example of the application management system S2 according to the second embodiment.
  • the application management system S2 is basically the same as the application management system S1 described in the first embodiment, except that the terminal device 100 is also connected to the access point AP. Note that the terminal device 100 is connected to the access point AP by the second wireless communication described in the first embodiment.
  • FIG. 10 is an example of a block diagram of the terminal device 100 according to the second embodiment.
  • the terminal device 100 includes a first acquisition unit 105, a second acquisition unit 106 as a transmission unit, and a distribution control unit 107 as a notification unit. Since the display unit 110 is hardware, it is indicated by a broken line.
  • the first acquisition unit 105 acquires an installation list of applications installed in the HMD 200 from the HMD 200. More specifically, the first acquisition unit 105 requests an installation list of applications installed in the HMD 200 to acquire and hold the installation list. When the first acquisition unit 105 finishes acquiring the installation list, the display unit 110 displays a message indicating that the installation list has been acquired and asks whether to permit transmission of the installation list to the server device 300. Is displayed.
  • the second acquisition unit 106 acquires a usage list associated with the installation list from the server device 300. More specifically, when the user instructs transmission permission via the display unit 110 on the above-described transmission permission screen, the second acquisition unit 106 acquires the installation list held by the first acquisition unit 105 and stores it in the server device 300. Send. Thereafter, the second acquisition unit 106 acquires a use list corresponding to the installation list distributed from the server device 300. When the second acquisition unit 106 finishes acquiring the usage list, the display unit 110 displays the usage list (see FIG. 7).
  • the distribution control unit 107 distributes the application to the server device 300 toward the HMD 200 based on the instruction for the use list displayed by the display unit 110. More specifically, when a user gives a predetermined instruction to an application that appears in the use list displayed on the display unit 110, application information related to the instructed application is transmitted to the HMD 200. When the HMD 200 receives the application information, the HMD 200 requests the server apparatus 300 to distribute the application according to the application information, and receives the application distributed from the server apparatus 300. When the HMD 200 receives an application, the HMD 200 installs or updates the application. Although details will be described later, the distribution control unit 107 executes various types of information processing.
  • FIG. 11 is a flowchart illustrating an example of processing executed by the terminal device 100 according to the second embodiment.
  • FIG. 12 is a flowchart illustrating an example of processing executed by the HMD 200 according to the second embodiment.
  • FIG. 13 is a flowchart illustrating an example of processing executed by the server apparatus 300 according to the second embodiment.
  • FIG. 14 is an example of a confirmation screen.
  • step S501 NO
  • step S401 the first acquisition unit 105 of the terminal device 100 requests an installation list of applications installed in the HMD 200
  • the control unit 230 determines that an installation list is requested (step S501: YES), and transmits the installation list (step S401). S502). As a result, as shown in FIG. 11, the first acquisition unit 105 acquires an installation list (step S402). The first acquisition unit 105 temporarily holds the installation list acquired from the HMD 200 and waits for a transmission instruction (step S403: NO). In addition, after the control unit 230 transmits the installation list in the process of step S502, the control unit 230 waits until application information is received (step S503: NO).
  • the second acquisition unit 106 transmits the installation list to the server device 300 (step S404). More specifically, when the user performs a predetermined operation on the transmission permission screen displayed on the display unit 110, the second acquisition unit 106 transmits an installation list. When the second acquisition unit 106 transmits the installation list, the identification information of the HMD 200 may be transmitted together with the installation list.
  • the control unit 320 of the server device 300 is on standby until it receives the installation list (step S601: NO). If the control unit 320 determines that the installation list has been received (step S601: YES), the control unit 320 distributes the application usage list to the terminal device 100 (step S602). More specifically, the control unit 320 distributes a usage list related to apps that are not included in the installation list and that can be updated. When the control unit 320 determines that the identification information of the HMD 200 is received together with the installation list, a use list corresponding to the identification information is distributed. Accordingly, as illustrated in FIG.
  • the second acquisition unit 106 acquires a usage list of applications used by the HMD 200 (step S405), and the display unit 110 displays the usage list of applications acquired by the second acquisition unit 106. (Step S406). That is, as described with reference to FIG. 7 in the first embodiment, the display unit 110 displays a usage list of applications. As shown in FIG. 13, after distributing the installation list, the control unit 320 waits until distribution of an application is requested (step S603: NO).
  • step S406 When the process of step S406 is completed, as shown in FIG. 11, the distribution control unit 107 waits until an instruction is given to the use list (step S407: NO), and when there is an instruction (step S407: YES), the instruction is given.
  • Application information as an installation instruction related to the application is transmitted to the HMD 200 (step S408). Instead of transmission, the distribution control unit 107 may notify the HMD 200 of application information as an installation instruction. Thereafter, the distribution control unit 107 waits until a confirmation request is received (step S409: NO). The confirmation request will be described later.
  • the control unit 230 of the HMD 200 determines that the application information has been received in the process of step S503 (step S503: YES). Then, the server apparatus 300 is requested to distribute the application according to the application information (step S504).
  • the control unit 320 of the server device 300 determines that distribution of the application is requested (step S603: YES), and distributes the application according to the request to the HMD 200 ( Step S604).
  • step S604 the control unit 230 receives the application distributed from the server device 300 (step S505), and executes the installation or update of the application (step S506).
  • the control unit 230 determines whether or not it is necessary to confirm with the user while the application is being installed or updated (step S507). More specifically, depending on an application to be installed or updated, there is a case where it is not suitable for continuing installation or update due to a relationship with an existing application.
  • control unit 230 detects the necessity of confirmation (step S507: YES)
  • the control unit 230 transmits a confirmation request for confirmation of processing continuation to the terminal device 100 (step S508), and waits until a response instruction is received (step S508). S509).
  • step S410 when the distribution control unit 107 receives a confirmation request in the process of step S409 (step S409: YES), a confirmation screen is displayed (step S410).
  • the display unit 110 may confirm whether the user needs to install because the vibration control, the voice setting change, and the like may be accessed. Display the screen.
  • the distribution control unit 107 waits until a response instruction is received (step S411: NO).
  • a response instruction is received (step S411: YES)
  • the response instruction is transmitted to the HMD 200 (step S412).
  • the finger FG on the image IM6 as an operation button indicating that the installation is not continued on the confirmation screen shown in FIG. .
  • step S412 determines that a response instruction has been received (step S509: YES), and further determines whether or not to continue the process (step S510). If the received response instruction includes continuation, control unit 230 returns to the process of step S506. As a result, for example, when the installation of the application is completed, the display unit 110 displays a notification screen as shown in FIG. On the other hand, if the received response instruction includes a message indicating not to continue, the control unit 230 ends the process. Further, in the process of step S507, the control unit 230 also ends the process when it does not detect the necessity of confirmation (step S507: NO).
  • the terminal device 100 includes the first acquisition unit 105 that acquires the installation list of applications installed in the HMD 200 from the HMD 200 and the application related to the installation list from the server device 300.
  • a second acquisition unit 106 that acquires a usage list
  • a display unit 110 that displays a usage list
  • a distribution control unit 107 that distributes an application to the server device 300 toward the HMD 200 based on an instruction for the usage list.
  • the server apparatus 300 is deployed in a base different from the base 10, but the local network is used for the communication network NW, and the server apparatus 300 is deployed in the base 10. May be.
  • the distribution control unit 107 transmits application information to the HMD 200, and the HMD 200 requests the server device 300 to distribute the application according to the application information.
  • the distribution control unit 107 receives the application from the server device 300. You may acquire and transmit the acquired application to HMD200.
  • S1, S2 Application management system 100 Terminal device 101 Sharing unit 102 Distribution control unit 105 First acquisition unit 106 Second acquisition unit 107 Distribution control unit 200 HMD 210 Display Unit 220 Imaging Unit 230 Control Unit 300 Server Device 310 Storage Unit 320 Control Unit

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Transfer Between Computers (AREA)
  • Controls And Circuits For Display Device (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

端末装置は、ヘッドマウントディスプレイに表示される画面を共有する共有部と、共有部が共有した画面を表示する表示部と、表示部が表示する画面に対する指示に基づいて、ヘッドマウントディスプレイが使用するアプリの一覧と一覧から選択されたアプリを配信するサーバ装置に対しアプリの一覧をヘッドマウントディスプレイに向けて配信させる配信制御部と、を有することを特徴とする。

Description

端末装置、管理方法、制御方法、管理プログラム、及び制御プログラム
 本件は、端末装置、管理方法、制御方法、管理プログラム、及び制御プログラムに関する。
 ウェアラブルコンピュータの一つとして、人体の頭部に装着されるヘッドマウントディスプレイ(Head Mounted Display)が知られている(例えば特許文献1参照)。また、ヘッドマウントディスプレイとスマートフォンとサーバ装置とが連携して情報処理を実行する情報処理システムも知られている(例えば特許文献2参照)。例えば特許文献2はヘッドマウントディスプレイがアプリケーションプログラム(以下、単にアプリという)を有することを開示する。
特開2015-166816号公報 特開2015-222519号公報
 ところで、ヘッドマウントディスプレイが有するアプリはユーザによって適切に管理されていることが望ましい。したがって、例えばヘッドマウントディスプレイを利用して現場作業を行う場合に、現場作業を支援するアプリが作業前にヘッドマウントディスプレイにインストールされていなければ、ヘッドマウントディスプレイにアプリをインストールすることが望ましい。また、例えばヘッドマウントディスプレイにインストール済みのアプリが最新のバージョンでなければ、インストール済みのアプリをアップデートすることが望ましい。
 ユーザがヘッドマウントディスプレイにアプリをインストールしたり、インストール済みのアプリをアップデートしたりする場合、ユーザはヘッドマウントディスプレイを装着し、ヘッドマウントディスプレイの表示部に表示される画面案内に従ってインストールやアップデートを行うことがある。ところが、表示部に表示される画面は小さく、また、ヘッドマウントディスプレイには操作ボタンが少ないため、アプリの適切な管理に手間がかかるという問題点がある。
 そこで、1つの側面では、ヘッドマウントディスプレイが使用するアプリを容易に管理できる端末装置、管理方法、制御方法、管理プログラム、及び制御プログラムを提供することを目的とする。
 本明細書に開示の端末装置は、ヘッドマウントディスプレイに表示される画面を共有する共有部と、前記共有部が共有した画面を表示する表示部と、前記表示部が表示する画面に対する指示に基づいて、前記ヘッドマウントディスプレイが使用するアプリの一覧と前記一覧から選択されたアプリを配信するサーバ装置に対し前記アプリの一覧を前記ヘッドマウントディスプレイに向けて配信させる配信制御部と、を有することを特徴とする端末装置である。
 本明細書に開示の端末装置は、ヘッドマウントディスプレイから前記ヘッドマウントディスプレイにインストールされた第1のアプリの第1の一覧を取得する第1取得部と、前記ヘッドマウントディスプレイが使用する第2のアプリの第2の一覧と前記第2の一覧から選択された第2のアプリを配信するサーバ装置から前記第1の一覧と関連する前記第2の一覧を取得する第2取得部と、前記第2の一覧を表示する表示部と、前記第2の一覧に対する指示に基づいて、前記第2のアプリを前記ヘッドマウントディスプレイに向けて前記サーバ装置に配信させる配信制御部と、を有することを特徴とする端末装置である。
 本明細書に開示の端末装置は、ヘッドマウントディスプレイに接続された端末装置において、特定の操作を受け付けると、前記ヘッドマウントディスプレイの識別情報をサーバ装置に送信する送信部と、前記サーバ装置から前記識別情報に応じたソフトウェアの一覧を受信すると、受信した前記一覧を表示する表示部と、前記表示部が表示した前記一覧に含まれるソフトウェアのうち、いずれかのソフトウェアの選択を受け付けると、選択を受け付けた前記ソフトウェアに関するインストール指示を前記ヘッドマウントディスプレイに通知する通知部と、を有することを特徴とする端末装置である。
 本明細書に開示の管理方法は、ヘッドマウントディスプレイに表示される画面を共有し、共有した前記画面を表示し、前記画面に対する指示に基づいて、前記ヘッドマウントディスプレイが使用するアプリの一覧と前記一覧から選択されたアプリを配信するサーバ装置に対し前記アプリの一覧を前記ヘッドマウントディスプレイに向けて配信させる、処理をコンピュータが実行することを特徴とする管理方法である。
 本明細書に開示の管理方法は、ヘッドマウントディスプレイから前記ヘッドマウントディスプレイにインストールされた第1のアプリの第1の一覧を取得し、前記ヘッドマウントディスプレイが使用する第2のアプリの第2の一覧と前記第2の一覧から選択された第2のアプリを配信するサーバ装置から前記第1の一覧と関連する前記第2の一覧を取得し、前記第2の一覧を表示し、前記第2の一覧に対する指示に基づいて、前記第2のアプリを前記ヘッドマウントディスプレイに向けて前記サーバ装置に配信させる、処理をコンピュータが実行することを特徴とする管理方法である。
 本明細書に開示の制御方法は、ヘッドマウントディスプレイに接続された端末装置を制御する制御方法において、特定の操作を受け付けると、前記ヘッドマウントディスプレイの識別情報をサーバ装置に送信し、前記サーバ装置から前記識別情報に応じたソフトウェアの一覧を受信すると、受信した前記一覧を表示し、表示した前記一覧に含まれるソフトウェアのうち、いずれかのソフトウェアの選択を受け付けると、選択を受け付けた前記ソフトウェアに関するインストール指示を前記ヘッドマウントディスプレイに通知する、処理をコンピュータが実行することを特徴とする制御方法である。
 本明細書に開示の管理プログラムは、ヘッドマウントディスプレイ表示される画面を共有し、共有した前記画面を表示し、前記画面に対する指示に基づいて、前記ヘッドマウントディスプレイが使用するアプリの一覧と前記一覧から選択されたアプリを配信するサーバ装置に対し前記アプリの一覧を前記ヘッドマウントディスプレイに向けて配信させる、処理をコンピュータに実行させることを特徴とする管理プログラムである。
 本明細書に開示の管理プログラムは、ヘッドマウントディスプレイから前記ヘッドマウントディスプレイにインストールされた第1のアプリの第1の一覧を取得し、前記ヘッドマウントディスプレイが使用する第2のアプリの第2の一覧と前記第2の一覧から選択された第2のアプリを配信するサーバ装置から前記第1の一覧と関連する前記第2の一覧を取得し、前記第2の一覧を表示し、前記第2の一覧に対する指示に基づいて、前記第2のアプリを前記ヘッドマウントディスプレイに向けて前記サーバ装置に配信させる、処理をコンピュータに実行させることを特徴とする管理プログラムである。
 本明細書に開示の制御プログラムは、ヘッドマウントディスプレイに接続された端末装置を制御する制御プログラムにおいて、特定の操作を受け付けると、前記ヘッドマウントディスプレイの識別情報をサーバ装置に送信し、前記サーバ装置から前記識別情報に応じたソフトウェアの一覧を受信すると、受信した前記一覧を表示し、表示した前記一覧に含まれるソフトウェアのうち、いずれかのソフトウェアの選択を受け付けると、選択を受け付けた前記ソフトウェアに関するインストール指示を前記ヘッドマウントディスプレイに通知する、処理をコンピュータに実行させることを特徴とする制御プログラムである。
 本明細書に開示の端末装置、管理方法、制御方法、管理プログラム、及び制御プログラムによれば、ヘッドマウントディスプレイが使用するアプリを容易に管理することができる。
図1は第1実施形態に係るアプリ管理システムの一例を示す図である。 図2は端末装置のハードウェア構成の一例である。 図3は第1実施形態に係る端末装置のブロック図の一例である。 図4は第1実施形態に係る端末装置が実行する処理の一例を示すフローチャートである。 図5は第1実施形態に係るヘッドマウントディスプレイが実行する処理の一例を示すフローチャートである。 図6は第1実施形態に係るサーバ装置が実行する処理の一例を示すフローチャートである。 図7は使用一覧を示す画面の一例である。 図8は通知画面の一例である。 図9は第2実施形態に係るアプリ管理システムの一例を示す図である。 図10は第2実施形態に係る端末装置のブロック図の一例である。 図11は第2実施形態に係る端末装置が実行する処理の一例を示すフローチャートである。 図12は第2実施形態に係るヘッドマウントディスプレイが実行する処理の一例を示すフローチャートである。 図13は第2実施形態に係るサーバ装置が実行する処理の一例を示すフローチャートである。 図14は確認画面の一例である。
 以下、本件を実施するための形態について図面を参照して説明する。
(第1実施形態)
 図1は第1実施形態に係るアプリ管理システムS1の一例を示す図である。アプリ管理システムS1は、端末装置100、ヘッドマウントディスプレイ(以下、HMDという)200、及びサーバ装置300を含んでいる。
 端末装置100はHMD200と第1の無線通信によりアクセスポイントAPを介さずに直接的に接続されている。第1の無線通信としては例えばWi-Fi Direct(登録商標)といった規格がある。したがって、アクセスポイントAPの通信可能範囲内に端末装置100が含まれていなくても端末装置100はHMD200と接続することができる。詳細は後述するが、端末装置100は表示部110に各種の画面やブラウザを表示したり、各種の要求や指示をHMD200に送信したりする。尚、図1では端末装置100の一例としてスマートフォンが示されているが、例えばタブレット端末といった携帯情報端末であればスマートフォンに特に限定されない。
 HMD200は第1の無線通信と異なる第2の無線通信によりアクセスポイントAPに接続されている。第2の無線通信としては例えばWi-Fi(登録商標)といった規格がある。アクセスポイントAPはゲートウェイ装置GW及び通信ネットワークNWを介してサーバ装置300とも接続されている。したがって、HMD200は第2の無線通信及び有線によりサーバ装置300と間接的に接続されている。詳細は後述するが、HMD200は端末装置100から送信された指示や要求を受信して各種の処理を実行したり、サーバ装置300に要求などを送信したりする。尚、通信ネットワークNWとしては例えばインターネットがある。
 ここで、図1に示すように、HMD200は表示部210、撮像部(例えばカメラ)220及び制御部230を備えている。表示部210の表示方式はビデオ透過型、光学透過型、非透過型のいずれでもよい。制御部230は表示部210や撮像部220の動作を制御したり、無線通信を実行したりする。例えば制御部230は撮像部220が撮像した映像を表示部210に表示する。また、例えばHMD200の電源ボタンが押下されると、制御部230は所定の起動時間を経過した後に表示部210にホーム画面を表示する。尚、ホーム画面は例えば起動後に最初に表示される画面をいう。ホーム画面としては例えば待ち受け画面がある。
 サーバ装置300はHMD200が使用するアプリ及びその一覧を管理する。より詳しくは、サーバ装置300の記憶部310はHMD200が使用する複数のアプリを記憶している。アプリとしては、例えば現場作業を支援する支援アプリ、Augmented Reality(AR:拡張現実)を実現するARアプリ、顧客業務用アプリ、カメラや音声コマンドを制御する制御アプリなどがある。例えばHMD200から送信された要求などをサーバ装置300の制御部320が受信すると、制御部320は要求に含まれるアプリの名称や属性、署名などを利用してその要求に応じたアプリを記憶部310から抽出し、HMD200に配信する。尚、図1に示すように、サーバ装置300はクラウドCL上のデータセンターDCに設置されている。データセンターDCは端末装置100及びHMD200が使用される拠点10とは異なる拠点に配備される。
 続いて、図2を参照して、端末装置100のハードウェア構成について説明する。尚、上述したHMD200及びサーバ装置300については基本的に端末装置100と同様のハードウェア構成であるため説明を省略する。アクセスポイントAPやゲートウェイ装置GWのハードウェア構成も基本的に端末装置100と同様である。
 図2は端末装置100のハードウェア構成の一例である。図2に示すように、端末装置100は、Central Processing Unit(CPU)100A、Random Access Memory(RAM)100B、Read Only Memory(ROM)100C、Electrically Erasable Programmable Read Only Memory(EEPROM)100D及び通信回路100Eを含んでいる。通信回路100Eにはアンテナ100E´が接続されている。通信回路100Eに代えて通信機能を実現するCPUが利用されてもよい。
 また、端末装置100は、スピーカー100F、カメラ100G、表示部110としてのタッチパネル100H及びディスプレイ100I、並びにマイク100Jを含んでいる。カメラ100Gは、例えばComplementary Metal Oxide Semiconductor(CMOS)やCharge Coupled Device(CCD)を用いた撮像素子とレンズなどの光学系とを含んでいる。CPU100A、・・・、マイク100Jは、内部バス100Kによって互いに接続されている。少なくともCPU100AとRAM100Bとが協働することによってコンピュータが実現される。
 上述したRAM100Bには、ROM100CやEEPROM100Dに記憶されたプログラムがCPU100Aによって格納される。格納されたプログラムをCPU100Aが実行することにより、後述する各種の機能が実現され、また、各種の処理が実行される。尚、プログラムは後述するフローチャートに応じたものとすればよい。
 次に、図3を参照して、第1実施形態に係る端末装置100の機能について説明する。
 図3は第1実施形態に係る端末装置100のブロック図の一例である。図3に示すように、端末装置100は共有部101と配信制御部102とを備えている。尚、表示部110はハードウェアであるため、破線で示している。
 共有部101は、HMD200に表示されるホーム画面を共有する。より詳しくは、端末装置100のユーザが表示部110を操作して、HMD200の表示部210に表示されるホーム画面の共有をHMD200に要求すると、共有部101はmiracast(登録商標)といった画面伝送技術を利用して、ホーム画面を共有する。これにより、表示部110は共有したホーム画面を表示する。すなわち、端末装置100の表示部110にはHMD200の表示部210に表示されるホーム画面と同じホーム画面が表示される。また、ユーザが表示部110を介してホーム画面内のブラウザを起動する操作を行うと、共有部101は操作内容をHMD200に送信する。これにより、HMD200の表示部210はブラウザを起動し、そのブラウザを表示部110が表示する。尚、詳細は後述するが、共有部101は後述する各種の処理を実行する。
 配信制御部102は表示部110が表示するホーム画面に対する指示に基づいて、サーバ装置300に対しアプリの一覧をHMD200に向けて配信させる。これにより、HMD200の表示部210はアプリの一覧を表示し、併せて、端末装置の表示部110もアプリの一覧を表示する。また、表示部110がアプリの一覧を表示した後、配信制御部102はアプリの一覧に対する指示に基づいて、サーバ装置300に対しアプリをHMD200に向けて配信させる。したがって、HMD200(より詳しくは制御部230)はアプリを受信してインストールやアップデートといった処理を実行する。
 続いて、図4から図8までを参照して、端末装置100、HMD200、及びサーバ装置300の各動作について説明する。
 図4は第1実施形態に係る端末装置100が実行する処理の一例を示すフローチャートである。図5は第1実施形態に係るHMD200が実行する処理の一例を示すフローチャートである。図6は第1実施形態に係るサーバ装置300が実行する処理の一例を示すフローチャートである。図7は使用一覧を示す画面の一例である。図8は通知画面の一例である。
 まず、図5に示すように、HMD200の電源ボタンがユーザによって押下されると、HMD200の表示部210は所定の起動時間を経過した後にホーム画面を表示し(ステップS201)、制御部230はホーム画面の共有が要求されるまで待機する(ステップS202:NO)。
 一方、表示部210がホーム画面を表示した後、図4に示すように、端末装置100の共有部101はHMD200(より具体的には表示部210)に表示されるホーム画面の共有を要求する(ステップS101)。より詳しくは、端末装置の表示部110に対してユーザが所定の指示(例えばタップ操作など)を行うと、共有部101はホーム画面の共有を要求する。
 ステップS101の処理において共有部101がホーム画面の共有を要求すると、図5に示すように、制御部230はホーム画面の共有が要求されたと判断して(ステップS202:YES)、ホーム画面を端末装置100に送信し、ブラウザの起動が要求されるまで待機する(ステップS203:NO)。
 一方、制御部230がホーム画面を送信すると、図4に示すように、共有部101はホーム画面を受信してホーム画面を共有し(ステップS102)、表示部110は共有したホーム画面を表示する(ステップS103)。尚、ステップS102又はステップS103の処理の後、又はいずれかの処理と並行して、共有部101はHMD200をリモート操作(例えば遠隔操作又は離隔操作)可能な状態に端末装置100を設定する。以上の処理により、HMD200の表示部210に表示されるホーム画面が端末装置100の表示部110に表示され、表示部110に表示されるホーム画面に対して所定の操作を行うことで、HMD200を操作することができる。
 ステップS103の処理が完了すると、図4に示すように、共有部101はリモート操作によりHMD200のブラウザの起動を要求する(ステップS104)。例えば、ユーザがホーム画面内にあるブラウザを起動させる画像(例えばアイコン画像)をダブルタップ操作すると、共有部101はブラウザの起動要求をHMD200に送信する。
 ステップS104の処理において共有部101がブラウザの起動を要求すると、図5に示すように、制御部230はブラウザの起動が要求されたと判断して(ステップS203:YES)、表示部210はブラウザを表示する(ステップS204)。ステップS204の処理が完了すると、制御部230はUniform Resource Locator(URL)を受信するまで待機する(ステップS205:NO)。URLはサーバ300の所在値を表す識別情報である。
 ここで、共有部101は表示部210に表示される画面と表示部110に表示される画面を共有している。このため、ステップS204の処理において表示部210がブラウザを表示すると、図4に示すように、表示部110はブラウザを表示する(ステップS105)。ステップS105の処理が完了すると、次いで、共有部101はサーバ装置300のURLをHMD200に送信する(ステップS106)。より詳しくは、ユーザが表示部110に表示されたブラウザにURLを入力すると、共有部101はURLをHMD200に送信する。
 ステップS106の処理において共有部101がURLを送信し、制御部230がURLを受信すると、図5に示すように、制御部230はURLを受信したと判断して(ステップS205:YES)、URLで指定されたサーバ装置300と接続する(ステップS206)。ステップS206の処理が完了すると、次いで、制御部230はHMD200にインストールされているアプリの一覧(以下、インストール一覧という)をサーバ装置300に送信する(ステップS207)。
 ここで、図6に示すように、サーバ装置300の制御部320はインストール一覧を受信するまで待機している(ステップS301:NO)。上述したように、ステップS207の処理において制御部230がインストール一覧を送信し、制御部320がインストール一覧を受信すると、制御部320はインストール一覧を受信したと判断する(ステップS301:YES)。そして、ステップS301の処理において制御部320がインストール一覧を受信したと判断すると、制御部320はHMD200が使用するアプリの一覧(以下、使用一覧という)をHMD200に配信し(ステップS302)、配信が要求されるまで待機する(ステップS303:NO)。
 図6に示すステップS302の処理において制御部320が使用一覧を配信すると、図5に示すように、HMD200の制御部230が使用一覧を受信し(ステップS208)、表示部210は使用一覧を表示する(ステップS209)。上述したように、共有部101は表示部210に表示される画面と表示部110に表示される画面を共有しているため、図4に示すように、表示部110はアプリの使用一覧を表示する(ステップS107)。これにより、図7に示すように、端末装置100の表示部110はアプリの使用一覧を表示する。
 表示部110が使用一覧を表示した後、図4に示すように、配信制御部102は使用一覧に対して指示があるまで待機する(ステップS108:NO)。また、図5に示すステップS209の処理において表示部210が使用一覧を表示した後、制御部230は指示を受信するまで待機する(ステップS210:NO)。
 ここで、使用一覧はアプリの属性を含んでいる。アプリの属性は1つでもよいし複数でもよい。例えば図7では使用一覧は「ARクライアント」、「クローム」、「HMD設定」及び「リモート設定」といった複数のアプリの名称、アプリのサイズ及びアプリのバージョンなどを属性として含んでいる。また、複数のアプリの各属性には手指FGにより押下可能な画像IM1,IM3,IM4が操作ボタンとして関連付けられている。
 例えばアプリ「ARクライアント」及びアプリ「リモート設定」はHMD200にインストールされていないため、これらのアプリをHMD200にインストールするための指示を与える画像IM1,IM4が属性に関連付けられている。例えばアプリ「HMD設定」はHMD200にインストールされているものの、アプリのバージョンが最新でないため、アップデートするための指示を与える画像IM3が属性に関連付けられている。一方、アプリ「クローム」はHMD200にインストールされており、アプリのバージョンも最新であるため、指示を与えることができない押下不能な画像IM2が属性に関連付けられている。
 ここで、図4に示すように、ステップS108の処理において配信制御部102は指示があったと判断した場合(ステップS108:YES)、配信制御部102は指示をHMD200に送信する(ステップS109)。したがって、例えば上述した画像IM1をユーザが手指FGで押下すると、配信制御部102はアプリ「ARクライアント」をHMD200にインストールするための指示をHMD200に送信する。
 ステップS109の処理において配信制御部102が指示を送信すると、HMD200の制御部230は指示を受信する。制御部230が指示を受信すると、制御部230は指示を受信したと判断し(ステップS210:YES)、指示に応じたアプリの配信をサーバ装置300に要求する(ステップS211)。
 ステップS211の処理において制御部230が配信を要求すると、図6に示すように、サーバ装置300の制御部320は配信が要求されたと判断し(ステップS303:YES)、要求に応じたアプリをHMD200に配信する(ステップS304)。制御部320がアプリを配信すると、図5に示すように、HMD200の制御部230はサーバ装置300から配信されたアプリを受信し(ステップS212)、インストール又はアップデートを実行する(ステップS213)。例えば図7を参照して説明した画像IM1が押下された場合、制御部230はアプリをインストールする。例えば図7を参照して説明した画像IM3が押下された場合、制御部230はアプリをアップデートする。尚、インストールが完了すると、図8に示すように、端末装置100の表示部110及びHMD200の表示部210はそれぞれインストールが完了した旨を通知する画面を表示する。
 以上説明したように、第1実施形態によれば、端末装置100は、HMD200に表示される画面を共有する共有部101と、共有した画面を表示する表示部110と、表示部110が表示する画面に対する指示に基づいて、サーバ装置300に対しアプリの使用一覧をHMD200に向けて配信させる配信制御部102とを有する。これにより、ユーザはHMD200を装着して表示部210に表示される画面を見なくても、HMD200が使用するアプリを容易に管理することができる。特に、端末装置100とHMD200はアクセスポイントAPを介さずに無線により直接的に通信することができる。したがって、アクセスポイントAPの通信可能範囲内に端末装置100が存在しなくてもHMD200が使用するアプリを容易に管理することができる。
(第2実施形態)
 続いて、本件の第2実施形態について説明する。
 図9は第2実施形態に係るアプリ管理システムS2の一例を示す図である。アプリ管理システムS2は、端末装置100がアクセスポイントAPにも接続されている点を除き、第1実施形態で説明したアプリ管理システムS1と基本的に同様である。尚、端末装置100は第1実施形態で説明した第2の無線通信によりアクセスポイントAPに接続されている。
 次に、図10を参照して、第2実施形態に係る端末装置100の機能について説明する。
 図10は第2実施形態に係る端末装置100のブロック図の一例である。図10に示すように、端末装置100は第1取得部105と送信部としての第2取得部106と通知部としての配信制御部107とを備えている。尚、表示部110はハードウェアであるため、破線で示している。
 第1取得部105はHMD200からHMD200にインストールされたアプリのインストール一覧を取得する。より詳しくは、第1取得部105はHMD200にインストールされたアプリのインストール一覧を要求してインストール一覧を取得して保持する。第1取得部105がインストール一覧を取得し終えると、表示部110はインストール一覧を取得し終えた旨を表示し、インストール一覧のサーバ装置300への送信を許可するか否かを求める送信許可画面を表示する。
 第2取得部106は、サーバ装置300からインストール一覧と関連する使用一覧を取得する。より詳しくは、上述した送信許可画面に対しユーザが表示部110を介して送信の許可を指示すると、第2取得部106は第1取得部105が保持するインストール一覧を取得してサーバ装置300に送信する。その後、第2取得部106は、サーバ装置300から配信されたインストール一覧に応じた使用一覧を取得する。第2取得部106が使用一覧を取得し終えると、表示部110は使用一覧を表示する(図7参照)。
 配信制御部107は表示部110が表示する使用一覧に対する指示に基づいて、アプリをHMD200に向けてサーバ装置300に配信させる。より詳しくは、表示部110が表示する使用一覧に現れるアプリに対しユーザが所定の指示を行うと、指示したアプリに関するアプリ情報をHMD200に送信する。HMD200はアプリ情報を受信すると、アプリ情報に応じたアプリの配信をサーバ装置300に要求し、サーバ装置300から配信されたアプリを受信する。HMD200はアプリを受信すると、アプリをインストールしたり、アップデートしたりする。その他、詳細は後述するが、配信制御部107は各種の情報処理を実行する。
 続いて、図11から図14までを参照して、端末装置100、HMD200、及びサーバ装置300の各動作について説明する。
 図11は第2実施形態に係る端末装置100が実行する処理の一例を示すフローチャートである。図12は第2実施形態に係るHMD200が実行する処理の一例を示すフローチャートである。図13は第2実施形態に係るサーバ装置300が実行する処理の一例を示すフローチャートである。図14は確認画面の一例である。
 まず、図12に示すように、HMD200の電源ボタンがユーザによって押下されてHMD200が起動すると、HMD200の制御部230はインストール一覧が要求されるまで待機する(ステップS501:NO)。制御部230が待機している間、図11に示すように、端末装置100の第1取得部105はHMD200にインストールされたアプリのインストール一覧を要求する(ステップS401)。
 ステップS401の処理において第1取得部105がインストール一覧を要求すると、図12に示すように、制御部230はインストール一覧が要求されたと判断し(ステップS501:YES)、インストール一覧を送信する(ステップS502)。この結果、図11に示すように、第1取得部105はインストール一覧を取得する(ステップS402)。第1取得部105はHMD200から取得したインストール一覧を一時的に保持し、送信指示があるまで待機する(ステップS403:NO)。尚、ステップS502の処理において制御部230がインストール一覧を送信した後、制御部230はアプリ情報を受信するまで待機する(ステップS503:NO)。
 ここで、第1取得部105は送信指示があったと判断した場合(ステップS403:YES)、第2取得部106はインストール一覧をサーバ装置300に送信する(ステップS404)。より詳しくは、表示部110に表示された送信許可画面に対しユーザが所定の操作を行った場合、第2取得部106はインストール一覧を送信する。第2取得部106がインストール一覧を送信する際、HMD200の識別情報をインストール一覧と併せて送信してもよい。
 一方、図13に示すように、サーバ装置300の制御部320はインストール一覧を受信するまで待機している(ステップS601:NO)。制御部320はインストール一覧を受信したと判断すると(ステップS601:YES)、アプリの使用一覧を端末装置100に配信する(ステップS602)。より詳しくは、制御部320はインストール一覧に含まれていないアプリやアップデート可能なアプリに関する使用一覧を配信する。制御部320がインストール一覧と併せてHMD200の識別情報を受信した判断した場合には、識別情報に応じた使用一覧を配信する。これにより、図11に示すように、第2取得部106はHMD200が使用するアプリの使用一覧を取得し(ステップS405)、表示部110は第2取得部106が取得したアプリの使用一覧を表示する(ステップS406)。すなわち、第1実施形態で図7を参照して説明したように、表示部110はアプリの使用一覧を表示する。尚、図13に示すように、制御部320はインストール一覧を配信した後、アプリの配信が要求されるまで待機する(ステップS603:NO)。
 ステップS406の処理が完了すると、図11に示すように、配信制御部107は使用一覧に対し指示があるまで待機し(ステップS407:NO)、指示があると(ステップS407:YES)、指示したアプリに関するインストール指示としてのアプリ情報をHMD200に送信する(ステップS408)。送信に代えて、配信制御部107はインストール指示としてのアプリ情報をHMD200に通知してもよい。その後、配信制御部107は確認要求を受信するまで待機する(ステップS409:NO)。尚、確認要求については後述する。
 ステップS408の処理において配信制御部107がアプリ情報を送信又は通知すると、図12に示すように、ステップS503の処理においてHMD200の制御部230はアプリ情報を受信したと判断し(ステップS503:YES)、アプリ情報に応じたアプリの配信をサーバ装置300に要求する(ステップS504)。ここで、図13に示すように、ステップS603の処理においてサーバ装置300の制御部320はアプリの配信が要求されたと判断し(ステップS603:YES)、要求に応じたアプリをHMD200に配信する(ステップS604)。
 ステップS604の処理が完了すると、図12に示すように、制御部230はサーバ装置300から配信されたアプリを受信して(ステップS505)、アプリのインストール又はアップデートを実行する(ステップS506)。ここで、制御部230はアプリをインストールしている途中、又はアップデートしている途中でユーザへの確認要否を検出したか否かを判断する(ステップS507)。より詳しくは、インストール又はアップデートするアプリによっては、既存のアプリとの関係によりインストール又はアップデートの続行に適さない場合がある。したがって、制御部230は確認要否を検出した場合(ステップS507:YES)、端末装置100に処理続行の確認を求める確認要求を送信し(ステップS508)、応答指示を受信するまで待機する(ステップS509)。
 一方、図11に示すように、ステップS409の処理において配信制御部107が確認要求を受信すると(ステップS409:YES)、確認画面を表示する(ステップS410)。例えば、図14に示すように、アプリ「ARクライアント」をインストールした場合、バイブレーションの制御、音声設定の変更などにアクセスする場合があるため、表示部110はユーザにインストールの要否を確認する確認画面を表示する。
 図11に示すように、配信制御部107は応答指示があるまで待機し(ステップS411:NO)、応答指示があると(ステップS411:YES)、応答指示をHMD200に送信する(ステップS412)。例えば、図14に示す確認画面においてインストールを続行することを表す操作ボタンとしての画像IM5をユーザが手指FGで押下すると、配信制御部107は続行の旨を含むインストール指示としての応答指示をHMD200に送信又は通知する。一方、図14に示す確認画面においてインストールを続行しないことを表す操作ボタンとしての画像IM6をユーザが手指FGで押下すると、配信制御部107は続行しない旨を含む応答指示をHMD200に送信又は通知する。
 ステップS412の処理が完了すると、図12に示すように、制御部230は応答指示を受信したと判断し(ステップS509:YES)、さらに、処理続行か否かを判断する(ステップS510)。制御部230は受信した応答指示に続行の旨が含まれていれば、ステップS506の処理に戻る。この結果、例えばアプリのインストールが完了すれば、図8に示すように、表示部110は通知画面を表示する。一方、制御部230は受信した応答指示に続行しない旨が含まれていれば、処理を終了する。また、ステップS507の処理において、制御部230は確認要否を検出しなかった場合も(ステップS507:NO)、処理を終了する。
 以上説明したように、第2実施形態によれば、端末装置100は、HMD200からHMD200にインストールされたアプリのインストール一覧を取得する第1取得部105と、サーバ装置300からインストール一覧と関連するアプリの使用一覧を取得する第2取得部106と、使用一覧を表示する表示部110と、使用一覧に対する指示に基づいて、アプリをHMD200に向けてサーバ装置300に配信させる配信制御部107と、を有する。これにより、ユーザはHMD200を装着して表示部210に表示される画面を見なくても、HMD200が使用するアプリを容易に管理することができる。
 以上、本発明の好ましい実施形態について詳述したが、本発明に係る特定の実施形態に限定されるものではなく、特許請求の範囲に記載された本発明の要旨の範囲内において、種々の変形・変更が可能である。例えば、第1実施形態及び第2実施形態ではサーバ装置300を拠点10とは異なる拠点に配備したが、通信ネットワークNWにLocal Area Network(LAN)を利用し、サーバ装置300を拠点10に配備してもよい。また、第2実施形態では配信制御部107がアプリ情報をHMD200に送信し、HMD200がアプリ情報に応じたアプリの配信をサーバ装置300に要求したが、配信制御部107がサーバ装置300からアプリを取得し、取得したアプリをHMD200に送信してもよい。
  S1,S2 アプリ管理システム
  100 端末装置
  101 共有部
  102 配信制御部
  105 第1取得部
  106 第2取得部
  107 配信制御部
  200 HMD
  210 表示部
  220 撮像部
  230 制御部
  300 サーバ装置
  310 記憶部
  320 制御部

Claims (15)

  1.  ヘッドマウントディスプレイに表示される画面を共有する共有部と、
     前記共有部が共有した画面を表示する表示部と、
     前記表示部が表示する画面に対する指示に基づいて、前記ヘッドマウントディスプレイが使用するアプリの一覧と前記一覧から選択されたアプリを配信するサーバ装置に対し前記アプリの一覧を前記ヘッドマウントディスプレイに向けて配信させる配信制御部と、
     を有することを特徴とする端末装置。
  2.  前記表示部は、前記アプリの一覧を表示し、
     前記配信制御部は、前記一覧に対する指示に基づいて、前記サーバ装置に対し前記アプリを前記ヘッドマウントディスプレイに向けて配信させる、
     ことを特徴とする請求項1に記載の端末装置。
  3.  ヘッドマウントディスプレイから前記ヘッドマウントディスプレイにインストールされた第1のアプリの第1の一覧を取得する第1取得部と、
     前記ヘッドマウントディスプレイが使用する第2のアプリの第2の一覧と前記第2の一覧から選択された第2のアプリを配信するサーバ装置から前記第1の一覧と関連する前記第2の一覧を取得する第2取得部と、
     前記第2の一覧を表示する表示部と、
     前記第2の一覧に対する指示に基づいて、前記第2のアプリを前記ヘッドマウントディスプレイに向けて前記サーバ装置に配信させる配信制御部と、
     を有することを特徴とする端末装置。
  4.  前記表示部は、前記ヘッドマウントディスプレイに配信された前記第2のアプリをインストールしている途中で、又は前記第2のアプリに基づいて前記第1のアプリをアップデートしている途中でインストール又はアップデートの要否が要求される場合に、インストール又はアップデートの要否を確認する確認画面を表示し、
     前記配信制御部は、前記確認画面に対する指示を前記ヘッドマウントディスプレイに送信する、
     ことを特徴とする請求項3に記載の端末装置。
  5.  ヘッドマウントディスプレイに接続された端末装置において、
     特定の操作を受け付けると、前記ヘッドマウントディスプレイの識別情報をサーバ装置に送信する送信部と、
     前記サーバ装置から前記識別情報に応じたソフトウェアの一覧を受信すると、受信した前記一覧を表示する表示部と、
     前記表示部が表示した前記一覧に含まれるソフトウェアのうち、いずれかのソフトウェアの選択を受け付けると、選択を受け付けた前記ソフトウェアに関するインストール指示を前記ヘッドマウントディスプレイに通知する通知部と、
     を有することを特徴とする端末装置。
  6.  ヘッドマウントディスプレイに表示される画面を共有し、
     共有した前記画面を表示し、
     前記画面に対する指示に基づいて、前記ヘッドマウントディスプレイが使用するアプリの一覧と前記一覧から選択されたアプリを配信するサーバ装置に対し前記アプリの一覧を前記ヘッドマウントディスプレイに向けて配信させる、
     処理をコンピュータが実行することを特徴とする管理方法。
  7.  前記アプリの一覧を表示し、
     前記一覧に対する指示に基づいて、前記サーバ装置に対し前記アプリを前記ヘッドマウントディスプレイに向けて配信させる、
     処理を含むことを特徴とする請求項6に記載の管理方法。
  8.  ヘッドマウントディスプレイから前記ヘッドマウントディスプレイにインストールされた第1のアプリの第1の一覧を取得し、
     前記ヘッドマウントディスプレイが使用する第2のアプリの第2の一覧と前記第2の一覧から選択された第2のアプリを配信するサーバ装置から前記第1の一覧と関連する前記第2の一覧を取得し、
     前記第2の一覧を表示し、
     前記第2の一覧に対する指示に基づいて、前記第2のアプリを前記ヘッドマウントディスプレイに向けて前記サーバ装置に配信させる、
     処理をコンピュータが実行することを特徴とする管理方法。
  9.  前記ヘッドマウントディスプレイに配信された前記第2のアプリをインストールしている途中で、又は前記第2のアプリに基づいて前記第1のアプリをアップデートしている途中でインストール又はアップデートの要否が要求される場合に、インストール又はアップデートの要否を確認する確認画面を表示し、前記確認画面に対する指示を前記ヘッドマウントディスプレイに送信する、
     処理を含むことを特徴とする請求項8に記載の管理方法。
  10.  ヘッドマウントディスプレイに接続された端末装置を制御する制御方法において、
     特定の操作を受け付けると、前記ヘッドマウントディスプレイの識別情報をサーバ装置に送信し、
     前記サーバ装置から前記識別情報に応じたソフトウェアの一覧を受信すると、受信した前記一覧を表示し、
     表示した前記一覧に含まれるソフトウェアのうち、いずれかのソフトウェアの選択を受け付けると、選択を受け付けた前記ソフトウェアに関するインストール指示を前記ヘッドマウントディスプレイに通知する、
     処理をコンピュータが実行することを特徴とする制御方法。
  11.  ヘッドマウントディスプレイ表示される画面を共有し、
     共有した前記画面を表示し、
     前記画面に対する指示に基づいて、前記ヘッドマウントディスプレイが使用するアプリの一覧と前記一覧から選択されたアプリを配信するサーバ装置に対し前記アプリの一覧を前記ヘッドマウントディスプレイに向けて配信させる、
     処理をコンピュータに実行させることを特徴とする管理プログラム。
  12.  前記アプリの一覧を表示し、
     前記一覧に対する指示に基づいて、前記サーバ装置に対し前記アプリを前記ヘッドマウントディスプレイに向けて配信させる、
     処理を含むことを特徴とする請求項11に記載の管理プログラム。
  13.  ヘッドマウントディスプレイから前記ヘッドマウントディスプレイにインストールされた第1のアプリの第1の一覧を取得し、
     前記ヘッドマウントディスプレイが使用する第2のアプリの第2の一覧と前記第2の一覧から選択された第2のアプリを配信するサーバ装置から前記第1の一覧と関連する前記第2の一覧を取得し、
     前記第2の一覧を表示し、
     前記第2の一覧に対する指示に基づいて、前記第2のアプリを前記ヘッドマウントディスプレイに向けて前記サーバ装置に配信させる、
     処理をコンピュータに実行させることを特徴とする管理プログラム。
  14.  前記ヘッドマウントディスプレイに配信された前記第2のアプリをインストールしている途中で、又は前記第2のアプリに基づいて前記第1のアプリをアップデートしている途中でインストール又はアップデートの要否が要求される場合に、インストール又はアップデートの要否を確認する確認画面を表示し、前記確認画面に対する指示を前記ヘッドマウントディスプレイに送信する、
     処理を含むことを特徴とする請求項13に記載の管理プログラム。
  15.  ヘッドマウントディスプレイに接続された端末装置を制御する制御プログラムにおいて、
     特定の操作を受け付けると、前記ヘッドマウントディスプレイの識別情報をサーバ装置に送信し、
     前記サーバ装置から前記識別情報に応じたソフトウェアの一覧を受信すると、受信した前記一覧を表示し、
     表示した前記一覧に含まれるソフトウェアのうち、いずれかのソフトウェアの選択を受け付けると、選択を受け付けた前記ソフトウェアに関するインストール指示を前記ヘッドマウントディスプレイに通知する、
     処理をコンピュータに実行させることを特徴とする制御プログラム。
PCT/JP2016/054165 2016-02-12 2016-02-12 端末装置、管理方法、制御方法、管理プログラム、及び制御プログラム WO2017138153A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
PCT/JP2016/054165 WO2017138153A1 (ja) 2016-02-12 2016-02-12 端末装置、管理方法、制御方法、管理プログラム、及び制御プログラム
JP2017566492A JPWO2017138153A1 (ja) 2016-02-12 2016-02-12 端末装置、管理方法、制御方法、管理プログラム、及び制御プログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2016/054165 WO2017138153A1 (ja) 2016-02-12 2016-02-12 端末装置、管理方法、制御方法、管理プログラム、及び制御プログラム

Publications (1)

Publication Number Publication Date
WO2017138153A1 true WO2017138153A1 (ja) 2017-08-17

Family

ID=59562925

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2016/054165 WO2017138153A1 (ja) 2016-02-12 2016-02-12 端末装置、管理方法、制御方法、管理プログラム、及び制御プログラム

Country Status (2)

Country Link
JP (1) JPWO2017138153A1 (ja)
WO (1) WO2017138153A1 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020190982A (ja) * 2019-05-23 2020-11-26 未來市股▲ふん▼有限公司 ソフトウェアアップデート方法及び該方法を使用するヘッドマウントディスプレイシステム
US20210241534A1 (en) * 2020-01-31 2021-08-05 Surgical Theater, Inc. System and method for augmenting and synchronizing a virtual model with a physical model
US11983824B2 (en) * 2021-01-31 2024-05-14 Surgical Theater, Inc. System and method for augmenting and synchronizing a virtual model with a physical model

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004178201A (ja) * 2002-11-26 2004-06-24 Sharp Corp デジタル放送受信機
JP2005031804A (ja) * 2003-07-08 2005-02-03 Sony Corp コンテンツマネージメント端末,コンテンツ利用の管理方法,プログラム
JP2009146347A (ja) * 2007-12-18 2009-07-02 Ricoh Co Ltd 通信システム
JP2011217098A (ja) * 2010-03-31 2011-10-27 Ns Solutions Corp 情報処理システム、会議管理装置、情報処理方法、会議管理装置の制御方法及びプログラム
JP2013061833A (ja) * 2011-09-14 2013-04-04 Brother Ind Ltd 情報処理装置、情報通信システム、情報通信方法及びプログラム
JP2013168113A (ja) * 2012-02-17 2013-08-29 Ricoh Co Ltd 機器、情報処理システム、情報処理方法、及び情報処理プログラム
JP2013175048A (ja) * 2012-02-24 2013-09-05 Nikon Corp 情報表示装置、及び情報表示方法
JP2013246744A (ja) * 2012-05-29 2013-12-09 Cec:Kk 携帯端末を用いた業務システムおよびその制御方法
JP2013257780A (ja) * 2012-06-13 2013-12-26 Sharp Corp アプリケーションのバックアップ機能を備えた通信端末およびその設定方法
JP2015018537A (ja) * 2013-07-10 2015-01-29 インボディ カンパニー リミテッドInBody Co., Ltd. アプリケーションのダウンロード方法およびシステム

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002278767A (ja) * 2001-03-16 2002-09-27 Kenwood Corp ネットワーク通信システム、サーバ装置、携帯端末、通信方法及びプログラム
JP5756156B2 (ja) * 2013-09-26 2015-07-29 株式会社オプティム 画面共有端末、画面共有方法、画面共有端末用プログラム

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004178201A (ja) * 2002-11-26 2004-06-24 Sharp Corp デジタル放送受信機
JP2005031804A (ja) * 2003-07-08 2005-02-03 Sony Corp コンテンツマネージメント端末,コンテンツ利用の管理方法,プログラム
JP2009146347A (ja) * 2007-12-18 2009-07-02 Ricoh Co Ltd 通信システム
JP2011217098A (ja) * 2010-03-31 2011-10-27 Ns Solutions Corp 情報処理システム、会議管理装置、情報処理方法、会議管理装置の制御方法及びプログラム
JP2013061833A (ja) * 2011-09-14 2013-04-04 Brother Ind Ltd 情報処理装置、情報通信システム、情報通信方法及びプログラム
JP2013168113A (ja) * 2012-02-17 2013-08-29 Ricoh Co Ltd 機器、情報処理システム、情報処理方法、及び情報処理プログラム
JP2013175048A (ja) * 2012-02-24 2013-09-05 Nikon Corp 情報表示装置、及び情報表示方法
JP2013246744A (ja) * 2012-05-29 2013-12-09 Cec:Kk 携帯端末を用いた業務システムおよびその制御方法
JP2013257780A (ja) * 2012-06-13 2013-12-26 Sharp Corp アプリケーションのバックアップ機能を備えた通信端末およびその設定方法
JP2015018537A (ja) * 2013-07-10 2015-01-29 インボディ カンパニー リミテッドInBody Co., Ltd. アプリケーションのダウンロード方法およびシステム

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020190982A (ja) * 2019-05-23 2020-11-26 未來市股▲ふん▼有限公司 ソフトウェアアップデート方法及び該方法を使用するヘッドマウントディスプレイシステム
US20210241534A1 (en) * 2020-01-31 2021-08-05 Surgical Theater, Inc. System and method for augmenting and synchronizing a virtual model with a physical model
US11983824B2 (en) * 2021-01-31 2024-05-14 Surgical Theater, Inc. System and method for augmenting and synchronizing a virtual model with a physical model

Also Published As

Publication number Publication date
JPWO2017138153A1 (ja) 2018-11-22

Similar Documents

Publication Publication Date Title
US9491258B2 (en) Systems, communication endpoints, and related methods for distributing images corresponding to communication endpoints
CN105119790B (zh) 设备控制方法及装置
JP7028117B2 (ja) 情報処理システム、情報処理装置、情報処理方法及びプログラム
JP6866191B2 (ja) 通信装置、通信制御方法およびプログラム
JP2012113720A (ja) 携帯用端末機における撮影データを共有するための装置及びその方法
WO2021135648A1 (zh) 直播间礼物列表配置方法、装置、介质及电子设备
JP2017005705A (ja) 情報発信装置、情報発信方法、プログラム及び携帯端末
JP6473228B2 (ja) 無線通信端末、無線通信システム、無線通信方法、及びプログラム
US10412564B2 (en) Apparatus, method, and system for displaying antenna location of communication terminal, and recording medium
CN114265641A (zh) 控制方法、电子设备及计算机可读存储介质
JP2019215727A (ja) 会議装置、会議装置の制御方法、プログラム及び会議システム
US10567545B2 (en) Method and apparatus for sharing data quota
JP6724931B2 (ja) 画面解像度調整システム、表示制御システム、画面解像度調整方法、及び表示制御方法
CN109716779B (zh) 影像显示装置和影像显示装置的协作控制方法
WO2017138153A1 (ja) 端末装置、管理方法、制御方法、管理プログラム、及び制御プログラム
JP6568007B2 (ja) ウェアラブル端末、その通信方法およびプログラム
CN111935698A (zh) 网络接入方法、装置、终端和存储介质
JP2018037764A (ja) 制御プログラム
US10868921B2 (en) Information processing device, imaging device, and system
JP2020087178A (ja) 情報処理装置、情報処理システム、情報処理方法及びプログラム
JP6723124B2 (ja) 通信システム及び通信用プログラム
KR20180057919A (ko) 웨어러블 디바이스 등록 시스템 및 그 방법
KR20160046449A (ko) 데이터 다운로드 제어 방법
KR20160046444A (ko) 데이터 공유 다운로드 방법
KR20140114098A (ko) 화면 제어 방법 및 그 전자 장치

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16889855

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2017566492

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 16889855

Country of ref document: EP

Kind code of ref document: A1