WO2016051730A1 - 遠隔操作支援プログラム、遠隔操作支援方法、情報処理装置 - Google Patents

遠隔操作支援プログラム、遠隔操作支援方法、情報処理装置 Download PDF

Info

Publication number
WO2016051730A1
WO2016051730A1 PCT/JP2015/004819 JP2015004819W WO2016051730A1 WO 2016051730 A1 WO2016051730 A1 WO 2016051730A1 JP 2015004819 W JP2015004819 W JP 2015004819W WO 2016051730 A1 WO2016051730 A1 WO 2016051730A1
Authority
WO
WIPO (PCT)
Prior art keywords
program
information processing
remote operation
processing apparatus
information
Prior art date
Application number
PCT/JP2015/004819
Other languages
English (en)
French (fr)
Inventor
市田 貴志
伊藤 正也
誠也 高辻
義隆 尾崎
拡基 鵜飼
Original Assignee
株式会社デンソー
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社デンソー filed Critical 株式会社デンソー
Priority to US15/329,263 priority Critical patent/US20170214781A1/en
Publication of WO2016051730A1 publication Critical patent/WO2016051730A1/ja

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/60Substation equipment, e.g. for use by subscribers including speech amplifiers
    • H04M1/6033Substation equipment, e.g. for use by subscribers including speech amplifiers for providing handsfree use or a loudspeaker mode in telephone sets
    • H04M1/6041Portable telephones adapted for handsfree use
    • H04M1/6075Portable telephones adapted for handsfree use adapted for handsfree use in a vehicle
    • H04M1/6083Portable telephones adapted for handsfree use adapted for handsfree use in a vehicle by interfacing with the vehicle audio system
    • H04M1/6091Portable telephones adapted for handsfree use adapted for handsfree use in a vehicle by interfacing with the vehicle audio system including a wireless interface
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72406User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by software upgrading or downloading
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72412User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories using two-way short-range wireless interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72454User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to context-related or environment-related conditions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72469User interfaces specially adapted for cordless or mobile telephones for operating the device by selecting functions from two or more displayed items, e.g. menus or icons

Definitions

  • the present disclosure relates to a remote operation support program that supports operation of an information processing device by a remote operation device, a remote operation support method, and an information processing device in which the remote operation support program is installed.
  • An information processing apparatus that can install a plurality of programs and can execute a program selected by a user operation from the installed programs is widely known.
  • Patent Document 1 An example is an information processing device called a smartphone. Further, as disclosed in Patent Document 1, a remote operation device that remotely operates an information processing device is also known. In Patent Document 1, this remote operation device is described as a remote electronic device, and a portable electronic device is disclosed as an information processing device.
  • Patent Document 1 data is transmitted from a remote electronic device to a portable electronic device, and the portable electronic device specifies an application in the portable electronic device in order to process the data.
  • Patent Document 1 in order to process data from a remote control device, it is necessary to specify an application (that is, a program) stored in the information processing device.
  • the identified program needs to have a function capable of processing data from the remote control device.
  • a number of programs are usually installed in information processing devices such as smartphones, and some of these programs do not have a function for processing data from a remote control device (hereinafter not supported). Program).
  • executable programs are displayed as a list with icons. Therefore, it is necessary for the user to determine whether a large number of icons are corresponding programs or non-corresponding programs in order to activate the corresponding program. In addition, it may take a long time to look at the screen until a desired icon representing the corresponding program is found.
  • the present disclosure provides a remote operation for providing support so that the troublesomeness of an operation until a desired corresponding program corresponding to the remote operation device is found can be reduced, and the time required for gazing at the information processing device can be shortened. It is an object to provide a support program, a remote operation support method, and an information processing apparatus.
  • a plurality of corresponding programs corresponding to remote operation devices and non-corresponding programs not corresponding to the remote operation devices are respectively installed, and the corresponding programs and non-corresponding programs installed are
  • the remote operation support program installed in the information processing apparatus that executes one program selected by the operation is configured to change the information processing apparatus from the corresponding program and the non-corresponding program installed in the information processing apparatus.
  • the information processing apparatus is caused to function as a first display control section that causes the display section of the information processing apparatus to display a list of the corresponding programs detected by the detection section.
  • the first display control unit displays a list of corresponding programs on the display unit.
  • the user does not need to determine whether or not the program displayed in the list is a corresponding program by searching for the corresponding program to be started using this list. Therefore, it is possible to reduce the troublesomeness of the user's operation until finding a desired corresponding program, and to shorten the time for the user to watch the display unit of the information processing apparatus.
  • a plurality of corresponding programs corresponding to a remote operation device and a plurality of non-corresponding programs not corresponding to the remote operation device are installed.
  • a remote operation support method for supporting a selection operation for selecting one corresponding program includes the corresponding program installed in the information processing apparatus and the non-operation program.
  • the correspondence program is detected from the correspondence program, and a list of detected correspondence programs is displayed on the display unit of the information processing apparatus.
  • the information processing apparatus is installed with the remote operation support program in the first aspect.
  • An information processing apparatus that executes one program selected by an operation includes: a detection unit that detects the corresponding program from the installed corresponding program and non-corresponding program; a display unit; and the detection unit that detects the detection unit A first display control unit that displays a list of corresponding programs on the display unit.
  • the above-described remote operation support method and information processing apparatus can achieve the same effects as the remote operation support program.
  • FIG. 1 is a configuration diagram of a remote operation system including a smartphone that is an information processing apparatus to which the present disclosure is applied.
  • FIG. 2 is a block diagram of the smartphone of FIG.
  • FIG. 3 is a diagram illustrating an application selection screen displayed on the display unit.
  • FIG. 4 is a flowchart showing processing executed by the launcher application in the background.
  • FIG. 5 is a diagram for explaining the corresponding application information acquired from the server.
  • FIG. 6 is a flowchart showing a process that the launcher application executes at startup
  • FIG. 7 is a diagram illustrating an installed correspondence list displayed on the display unit.
  • FIG. 1 is a configuration diagram of a remote operation system including a smartphone that is an information processing apparatus to which the present disclosure is applied.
  • FIG. 2 is a block diagram of the smartphone of FIG.
  • FIG. 3 is a diagram illustrating an application selection screen displayed on the display unit.
  • FIG. 4 is a flowchart showing processing executed by the launcher application in the background.
  • FIG. 8 is a diagram in which a Setup icon is displayed at the end of the installed correspondence list.
  • FIG. 9 is a setting image displayed when the Setup icon is selected.
  • FIG. 10 is a flowchart showing a process executed when the App install image portion of FIG. 9 is selected.
  • FIG. 11 is a diagram illustrating an example of the entire list of supported applications.
  • FIG. 12 is a display example showing that the corresponding application is already installed.
  • a remote operation system 1 illustrated in FIG. 1 includes a smartphone 100, a remote operation device 20, an in-vehicle device 30, and a speaker 40, which are information processing devices used in a vehicle and to which the present disclosure is applied.
  • the smartphone 100 can communicate with other devices via the public communication network 50 as is widely known.
  • the smartphone 100 communicates with the server 60 via the public communication line network 50.
  • the smartphone 100 includes a display unit 110, and various icons 120 representing programs are displayed on the display unit 110.
  • the program is referred to as an application.
  • Other configurations of the smartphone 100 will be described later with reference to FIG.
  • the remote operation device 20 corresponds to a remote operation device.
  • the remote operation device 20 of this embodiment includes a cross button 21, a rotation selection button 22, a menu button 23, a return button 24, and a connection button 25.
  • the cross button 21 is a button that can input four directions, up, down, left, and right.
  • the rotation selection button 22 rotates around the axis and moves in the thickness direction of the remote operation device 20.
  • the remote operation device 20 transmits a scroll signal to a wirelessly connected device.
  • the rotation selection button 22 moves in the thickness direction of the remote operation device 20, the selection operation is performed.
  • the menu button 23 is a button operated when displaying a list of applications and a menu screen corresponding to the remote operation device 20 on the display unit 110 of the smartphone 100.
  • the return button 24 is a button operated when returning the image displayed on the display unit 110 of the smartphone 100 to the image displayed before the image displayed at that time.
  • the connection button 25 is a button that is pressed when the remote operation device 20 is wirelessly connected to a remote operation target device.
  • the remote operation device 20 includes a communication unit therein, and when the connection button 25 is pressed, the communication unit is used to establish a wireless connection by short-range wireless communication with the connection target device.
  • a wireless connection method for example, a method defined in a wireless standard such as Bluetooth Low Energy is used. Bluetooth is a registered trademark.
  • the in-vehicle device 30 is, for example, an in-vehicle audio device and is connected to the speaker 40.
  • the in-vehicle device 30 communicates with the smartphone 100 and outputs sound from the speaker 40 based on the sound data transmitted from the smartphone 100.
  • the server 60 stores various types of information (hereinafter referred to as “corresponding application information”) relating to a corresponding application (that is, a corresponding program) that is an application that is installed in the smartphone 100 and can be operated by the remote operation device 20. Details of the corresponding application information will be described later.
  • the smartphone 100 includes a display unit 110, a wide-area communication unit 130, a short-range communication unit 132, a storage unit 140, a speaker 150, an operation unit 160, and a control unit 170.
  • the display unit 110 displays icons 120 corresponding to each application installed in the smartphone 100.
  • the icon 120 represents each application by one or both of a graphic and a character other than characters.
  • the wide area communication unit 130 communicates with the public communication network 50 by wireless connection.
  • the short-range communication unit 132 performs wireless communication using the same communication method as that of the remote operation device 20.
  • the storage unit 140 includes a writable nonvolatile storage medium such as a flash memory.
  • the application installed in the smartphone 100 is stored in the storage unit 140.
  • This application includes a compatible application that supports the remote operation device 20 and a non-compatible application that cannot be operated by the remote operation device 20.
  • the storage unit 140 stores a launcher application 141 corresponding to a remote operation support program.
  • the operation unit 160 includes a touch panel superimposed on the surface of the display unit 110. Further, a touch switch or a mechanical switch arranged around the display unit 110 may be provided.
  • the control unit 170 is a computer including a CPU, a ROM, a RAM, and the like.
  • the control unit 170 detects the detection unit 171, the first display control unit 172, and the second display control unit. 173, a correspondence identification information acquisition unit 174, a name acquisition unit 175, a display information acquisition unit 176, a URL acquisition unit 177, and a reading processing unit 178.
  • a part or all of the functions executed by the control unit 170 may be configured by hardware using one or a plurality of ICs.
  • the processes of the detection unit 171, the first display control unit 172, the second display control unit 173, the correspondence identification information acquisition unit 174, the name acquisition unit 175, the display information acquisition unit 176, the URL acquisition unit 177, and the reading processing unit 178 are as follows. This will be described with reference to FIG.
  • FIG. 3 is an application selection screen displayed on the display unit 110.
  • icons 120 corresponding to the applications installed in the smartphone 100 are displayed.
  • icons 120A to 120H corresponding to the applications A to H, respectively, and an icon 120L corresponding to the launcher application 141 are displayed.
  • the launcher application 141 is activated.
  • icons 120A to H and L shown in FIG. 3 are figures in which characters are surrounded by a frame for convenience of explanation. However, as a matter of course, as shown in FIG. 7, an icon 120 that simply indicates the meaning of the application may be used as a graphic other than characters.
  • step S12 is executed by the correspondence identification information acquisition unit 174, the name acquisition unit 175, the display information acquisition unit 176, and the URL acquisition unit 177, and other processes, that is, steps S2 to S10, S14, and S16. Is executed by the detection unit 171. These steps S2 to S10, S14, and S16 correspond to detection steps.
  • step S2 it is determined whether it is a confirmation time for confirming whether the application installed in the smartphone 100 is a compatible application.
  • the confirmation time is when the launcher application 141 is activated and every certain period thereafter. Although the fixed period can be set as appropriate, it can be set to several days, for example.
  • step S2 If it is determined that it is not the confirmation time (S2: NO), the processing in FIG. 4 is terminated. When it is determined that it is the confirmation time (S2: YES), the process proceeds to step S4.
  • step S4 the application IDs and application versions of all applications installed in the smartphone 100 are acquired by making an inquiry to the operating system of the smartphone 100.
  • step S6 the application ID and application version acquired in step S4 are compared with the application ID and application version previously acquired in step S4. Note that the application ID and the application version acquired in the previous step S4 are stored in the storage unit 140 by executing the next step S8 at the previous execution of FIG.
  • step S8 the application ID and application version acquired in step S4 are stored in the storage unit 140.
  • step S10 it is determined whether or not the comparison result in step S6 is different. If it is determined that there is no difference (S10: NO), the processing in FIG. 4 is terminated. If it is determined that there is a difference (S10: YES), the process proceeds to step S12.
  • a request signal for requesting corresponding application information is transmitted to the server 60 using the wide area communication unit 130.
  • the request signal includes the model of the smartphone 100, the type and version of the operating system, and the model and version of the remote operation device 20. This is because there is a possibility that whether or not the corresponding application can be operated by the remote operation device 20 due to these differences.
  • the server 60 stores corresponding application information for a plurality of corresponding applications.
  • Corresponding application information is various information regarding the corresponding application.
  • the corresponding application information includes an application ID, an icon, a name, a genre, an installation URL, a corresponding operating system, a corresponding operating system version, and the like, as conceptually shown in FIG.
  • the name includes a display name and a reading name. If the remote operation device 20 and its version, the model and version of the smartphone 100 can be operated by the remote operation device 20 or not, the corresponding remote operation device 20 and version, the model and version of the smartphone 100, etc. Is also included in the corresponding application information.
  • the application ID, the corresponding remote operation device 20, the version, the model of the smartphone 100, and the version are correspondence identification information acquired by the correspondence identification information acquisition unit 174.
  • the icon and the display name are program identification information acquired by the display information acquisition unit 176.
  • the name acquisition unit 175 acquires the name for reading.
  • the URL acquisition unit 177 acquires the URL for installation.
  • the server 60 determines a compatible application that can be used by the combination of the smartphone 100 that transmitted the request signal and the remote operation device 20 connected to the smartphone 100. And corresponding application information about the determined corresponding application is transmitted to the smartphone 100 that transmitted the request signal.
  • step S14 of FIG. 4 the corresponding application information transmitted from the server 60 is received. Then, the received corresponding application information is stored in the storage unit 140.
  • step S16 based on the corresponding application information received in step S14, it is determined whether the application installed in the smartphone 100 is a compatible application or a non-compatible application.
  • the reason for periodically executing the processing of FIG. 4 is that a new application is installed on the smartphone 100 as needed, and the installed application is also upgraded at any time.
  • steps S20 to S24, S30, and S32 are executed by the first display control unit 172, and steps S26 and S28 are executed by the reading processing unit 178. Steps S20 to S24, S30, and S32 correspond to display control steps.
  • step S20 a list of compatible applications already installed in the smartphone 100 (hereinafter, “installed compatible list”) is displayed on the display unit 110. Which of the applications installed in the smartphone 100 is a compatible application and which is a non-compatible application is determined by executing the processing of FIG.
  • Fig. 7 shows a part of the installed correspondence list. Since the display unit 110 of the smartphone 100 is not so large, there are many cases where the installed correspondence list cannot be displayed all at once. When the installed correspondence list cannot be displayed all at once, a part of the installed correspondence list is displayed on the display unit 110 as shown in FIG.
  • FIG. 7 shows a corresponding application icon 120 and a corresponding application name 122 in the installation compatible list.
  • the corresponding application icon 120 and name 122 are extracted from the corresponding application information stored in the storage unit 140 in step S14.
  • step S22 it is determined whether or not a scroll signal is input from the remote operation device 20.
  • This scroll signal is transmitted from the remote operation device 20 when the rotation selection button 22 of the remote operation device 20 is rotated. Further, it may be transmitted from the remote operation device 20 by operating the cross button 21 up and down.
  • step S24 the installed correspondence list displayed on the display unit 110 is scrolled in the direction determined by the scroll signal by the amount determined by the scroll signal. If step S24 is executed, or if the determination in step S22 is NO, step S26 is executed.
  • step S26 it is determined whether the time during which the currently selected icon 120 is selected has reached the reading time.
  • the selected icon 120 is surrounded by a selection frame 124 and displayed larger than the non-selected icon 120 as shown in FIG.
  • step S26 it is determined whether or not the elapsed time since this state has reached the reading time. If this judgment is YES, it will progress to Step S28.
  • step S28 the voice that reads the name of the corresponding application represented by the selected icon 120 is output from one or both of the speaker 150 of the smartphone 100 and the speaker 40 mounted on the vehicle.
  • the voice that reads the name of the corresponding application is obtained by using the name for reading included in the corresponding application information stored in the storage unit 140 in step S14 and a known voice generation application that can generate voice from the name. Generate.
  • step S30 it is determined whether a screen transition signal is input from the remote operation device 20.
  • the screen transition signal includes a selection signal generated when the rotation selection button 22 is operated in the thickness direction, a return signal generated when the return button 24 is pressed, and the menu button 23 being pressed. Is a menu display signal generated by.
  • step S30 determines whether the determination in step S30 is YES. If the determination in step S30 is YES, the process proceeds to step S32. In step S32, processing according to the input signal is performed. Thereafter, the process returns to step S22. If the determination in step S30 is NO, the process returns to step S22 without executing step S32.
  • a Setup icon 120S is displayed at one end of the installed correspondence list.
  • the control unit 170 displays the setting image 126 illustrated in FIG. 9 on the display unit 110.
  • the control unit 170 executes the processing shown in FIG. In FIG. 10, steps S40 to S44, S50, and S52 are executed by the second display control unit 173, and steps S46 and S48 are executed by the reading processing unit 178.
  • step S40 the entire list of supported applications is displayed on the display unit 110.
  • This list of all supported applications is a list representing all the compatible applications included in the corresponding application information acquired from the server 60 in step S14.
  • Fig. 11 shows an example of the complete list of supported applications.
  • the corresponding list of all supported applications is also a list that displays the corresponding application icon 120 and the corresponding application name 122, like the installed corresponding list.
  • the correspondence application whole list includes a correspondence application installed on the smartphone 100 and a correspondence application not installed on the smartphone 100. Therefore, an installed mark 129 is added to the installed compatible application, so that it can be distinguished whether or not it has been installed in the smartphone 100.
  • the name 122 of the corresponding application that has been installed is shown in a lighter color than the name 122 of the corresponding application that has not been installed.
  • Steps S42 to S50 are the same as steps S22 to S30 in FIG.
  • step S52 when any one of the corresponding applications is selected, if the selected corresponding application is already installed, a message indicating that the selected corresponding application has already been installed is displayed as shown in FIG. indicate.
  • the URL of the site where the compatible application can be downloaded is determined. This URL is determined from the corresponding application information acquired from the server 60. Then, the screen of the site of the determined URL is displayed on the display unit 110.
  • the launcher application 141 is installed in the smartphone 100.
  • the detection unit 171 detects a corresponding application corresponding to the remote operation device 20 from the applications installed in the smartphone 100 (FIG. 4). Then, an installed correspondence list (FIG. 7) including only the installed correspondence applications is displayed on the display unit 110.
  • the corresponding application is detected from the application installed in the smartphone 100 using the corresponding application information received from the server 60 (S16). Accordingly, it is possible to quickly cope with a corresponding application that may be sequentially updated, and to detect the corresponding application from installed applications with high accuracy.
  • the voice that reads the name of the corresponding application is generated based on the name for reading included in the corresponding application information acquired from the server 60. Therefore, even if the operating system of the smartphone 100 does not provide the name of the corresponding application to the launcher application 141, it is possible to output the sound that reads out the name of the corresponding application from the speakers 40 and 150.
  • the corresponding application icon 120 and the corresponding application name 122 displayed in the installed correspondence list are included in the corresponding application information received from the server 60 (S14). Therefore, even if the operating system of the smartphone 100 does not provide the corresponding application icon 120 and the name 122 to the launcher application 141, the installed correspondence list can be created.
  • the corresponding application information is sequentially acquired from the server 60, when the corresponding application icon 120 is updated, it is possible to quickly respond to the update.
  • all the corresponding application information corresponding to the smartphone 100 and the remote operation device 20 is acquired from the server 60 among the corresponding application information stored in the server 60. Based on the acquired information, the corresponding application full list is displayed on the display unit 110.
  • the installed mark 129 distinguishes whether each corresponding application has been installed in the smartphone 100 or not installed.
  • a screen of a site where the corresponding program represented by the selected icon 120 can be downloaded is displayed on the display unit 110. Thereby, the user can easily install a new compatible application.
  • ⁇ Modification 1> For example, instead of or in addition to the corresponding list of all compatible applications displayed in the above-described embodiment, a list including only compatible applications that are not installed in the smartphone 100 is displayed on the display unit 110. May be. In this case, the display unit 110 can be switched between the installed correspondence list and the list including only the correspondence applications that are not installed in the smartphone 100.
  • step S ⁇ b> 12 of FIG. 4 difference information may be included in the request signal, and the server 60 may transmit only the corresponding application information about the corresponding application corresponding to the difference information to the smartphone 100. Even in this case, the processing of FIG. 6 can be executed.
  • the server 60 can use the combination of the smartphone 100 and the remote control device 20. All the corresponding application information about available compatible applications may be acquired.
  • the smartphone 100 is shown as the information processing device.
  • the information processing device may be a navigation device or a tablet computer.
  • the navigation device may be fixed to a moving body such as a vehicle or may be portable.
  • the display unit and the communication unit may be separate.
  • the remote operation device is not limited to that of the above-described embodiment.
  • it may be a remote control device that has a cylindrical shape and whose upper portion rotates relative to the base around an axis.
  • a remote operation device may be disposed on the steering.
  • a general-purpose remote controller may be used as the remote operation device.
  • each section is expressed as S2, for example.
  • each section can be divided into a plurality of subsections, while a plurality of sections can be combined into one section.
  • each section configured in this manner can be referred to as a device, module, or means.

Abstract

 遠隔操作装置に対応した複数の対応プログラムおよび対応していない複数の非対応プログラムがインストールされ、インストールされている前記対応および非対応プログラムから、選択された一つのプログラムを実行する情報処理装置(100)にインストールされる遠隔操作支援プログラム(141)は、前記情報処理装置を、インストールされている前記対応プログラムおよび非対応プログラムから、前記対応プログラムを検出する検出部(171)として機能させ、前記情報処理装置を、前記検出部が検出した前記対応プログラムのリストを、前記情報処理装置の表示部に表示させる第1表示制御部(172)として機能させる。

Description

遠隔操作支援プログラム、遠隔操作支援方法、情報処理装置 関連出願の相互参照
 本出願は、2014年10月3日に出願された日本出願番号2014-204929号に基づくもので、ここにその記載内容を援用する。
 本開示は、遠隔操作装置により情報処理装置を操作することを支援する遠隔操作支援プログラム、遠隔操作支援方法、および、遠隔操作支援プログラムがインストールされた情報処理装置に関するものである。
 複数のプログラムがインストール可能であり、インストールされているプログラムから、ユーザー操作により選択されたプログラムを実行することができる情報処理装置が広く知られている。
 スマートフォンと呼ばれている情報処理装置がその一例である。また、特許文献1に開示されているように、情報処理装置を遠隔操作する遠隔操作装置も知られている。なお、特許文献1では、この遠隔操作装置のことを、遠隔電子装置と記載しており、また、情報処理装置として携帯電子装置が開示されている。
 特許文献1では、遠隔電子装置から携帯電子装置にデータを送信し、携帯電子装置では、そのデータを処理するために、携帯電子装置内のアプリケーションを特定している。
 特許文献1にも開示されているように、遠隔操作装置からのデータを処理するためには、情報処理装置内に記憶されているアプリケーション(すなわちプログラム)を特定する必要がある。また、特定されたプログラムは、遠隔操作装置からのデータを処理することができる機能を備えている必要がある。
 スマートフォンなどの情報処理装置には多数のプログラムがインストールされることが通常であり、その多数のプログラムの中には、遠隔操作装置からのデータを処理する機能を備えていないプログラム(以下、非対応プログラム)が含まれている可能性もある。
 また、もちろん、遠隔操作装置からのデータを処理する機能を備えたプログラム(以下、対応プログラム)が、情報処理装置に複数インストールされている可能性もある。
 したがって、遠隔操作装置を介して情報処理装置を操作するためには、情報処理装置にインストールされている複数のプログラムから、遠隔操作装置により操作したい1つの対応プログラムを選択する必要がある。
 多数のプログラムがインストールされており、かつ、対応プログラムと非対応プログラムが混在していると、多数のプログラムのうち、どれが対応プログラムであるかを認識して、一つの対応プログラムを選択しなければならない。
 スマートフォンなどの情報処理装置では、通常、実行可能なプログラムが、アイコンにより一覧表示される。したがって、ユーザーは、対応プログラムを起動させるのは、多数のアイコンがそれぞれ対応プログラムであるか非対応プログラムであるかを判断する必要があり、煩わしさを感じてしまう。加えて、対応プログラムを表した所望のアイコンを見つけるまでに画面を注視する時間も長くなってしまう可能性があった。
 したがって、迅速に、対応プログラムを表した所望のアイコンを見つけることが望まれていた。遠隔操作装置による情報処理装置の操作は、車両において運転者が行うことも想定される。運転者が情報処理装置を注視する時間はできるだけ短いことが望まれる。
特表2013-535123号公報
 本開示は、遠隔操作装置に対応している所望の対応プログラムを見つけるまでの操作の煩わしさを軽減させ、かつ、情報処理装置を注視する時間を短くすることができるように支援を行う遠隔操作支援プログラム、遠隔操作支援方法、情報処理装置を提供することを目的とする。
 本開示の第一の態様において、遠隔操作装置に対応した対応プログラムおよび前記遠隔操作装置に対応していない非対応プログラムがそれぞれ複数インストールされ、インストールされている前記対応プログラムおよび非対応プログラムから、ユーザー操作により選択された一つのプログラムを実行する情報処理装置にインストールされる遠隔操作支援プログラムは、前記情報処理装置を、前記情報処理装置にインストールされている前記対応プログラムおよび非対応プログラムから、前記対応プログラムを検出する検出部として機能させ、前記情報処理装置を、前記検出部が検出した前記対応プログラムのリストを、前記情報処理装置の表示部に表示させる第1表示制御部として機能させる。
 この遠隔操作支援プログラムによれば、第1表示制御部が、対応プログラムのリストを表示部に表示する。ユーザーは、このリストを用いて、起動させたい対応プログラムを探すことにより、リストに表示されているプログラムが、対応プログラムであるか否かを判断する必要がない。したがって、所望の対応プログラムを見つけるまでのユーザーの操作の煩わしさを軽減させることができ、かつ、ユーザーが情報処理装置の表示部を注視する時間を短くすることができる。
 本開示の第二の態様において、遠隔操作装置に対応した対応プログラムおよび前記遠隔操作装置に対応していない非対応プログラムがそれぞれ複数インストールされており、インストールされている前記対応プログラムおよび非対応プログラムから、ユーザー操作により選択された一つのプログラムを実行する情報処理装置において、一つの対応プログラムを選択する選択操作を支援する遠隔操作支援方法は、前記情報処理装置にインストールされている前記対応プログラムおよび非対応プログラムから、前記対応プログラムを検出し、検出された対応プログラムのリストを、前記情報処理装置の表示部に表示させることを備える。
 本開示の第三の態様において、情報処理装置は、第一の態様における前記遠隔操作支援プログラムがインストールされている。
 本開示の第四の態様において、遠隔操作装置に対応した対応プログラムおよび前記遠隔操作装置に対応していない非対応プログラムがそれぞれ複数インストールされ、インストールされている前記対応プログラムおよび非対応プログラムから、ユーザー操作により選択された一つのプログラムを実行する情報処理装置は、インストールされている前記対応プログラムおよび非対応プログラムから、前記対応プログラムを検出する検出部と、表示部と、前記検出部が検出した前記対応プログラムのリストを、前記表示部に表示させる第1表示制御部とを有する。
 上記の遠隔操作支援方法、情報処理装置でも、遠隔操作支援プログラムと同様の効果が得られる。
 本開示についての上記目的およびその他の目的、特徴や利点は、添付の図面を参照しながら下記の詳細な記述により、より明確になる。その図面は、
図1は、本開示が適用された情報処理装置であるスマートフォンを含む遠隔操作システムの構成図であり、 図2は、図1のスマートフォンの構成図であり、 図3は、表示部に表示されるアプリケーション選択画面を説明する図であり、 図4は、ランチャーアプリケーションがバックグラウンドで実行する処理を示すフローチャートであり、 図5は、サーバーから取得する対応アプリケーション情報を説明する図であり、 図6は、ランチャーアプリケーションが起動時に実行する処理を示すフローチャートであり、 図7は、表示部に表示されるインストール済み対応リストを例示する図であり、 図8は、Setupのアイコンがインストール済み対応リストの端に表示されている図であり、 図9は、Setupのアイコンが選択されたときに表示される設定画像であり、 図10は、図9のAppインストール画像部が選択されたときに実行する処理を示すフローチャートであり、 図11は、対応アプリケーション全リストを例示する図であり、 図12は、対応アプリケーションがインストール済みであることを示す表示例である。
 以下、本開示の実施形態を図面に基づいて説明する。
 (全体構成)
 図1に示している遠隔操作システム1は、車両内で用いられ、本開示が適用された情報処理装置であるスマートフォン100、遠隔操作デバイス20、車載機30、スピーカー40を備えている。スマートフォン100は、広く知られているように、公衆通信回線網50を介して、他の機器と通信することができる。本実施形態では、スマートフォン100は、公衆通信回線網50を介してサーバー60と通信する。
 スマートフォン100は、表示部110を備えており、この表示部110に、プログラムを表した種々のアイコン120が表示される。なお、以下、本実施形態では、プログラムをアプリケーションと言う。スマートフォン100のその他の構成は、図2を用いて後述する。
 遠隔操作デバイス20は遠隔操作装置に相当する。本実施形態の遠隔操作デバイス20は、十字ボタン21、回転選択ボタン22、メニューボタン23、戻るボタン24、接続ボタン25を備える。
 十字ボタン21は、上下左右の4方向を入力することができるボタンである。回転選択ボタン22は、軸周りに回転するとともに、遠隔操作デバイス20の厚さ方向に移動する。ユーザー操作により、この回転選択ボタン22が軸周りに回転させられると、遠隔操作デバイス20は、無線接続している機器にスクロール信号を送信する。回転選択ボタン22が遠隔操作デバイス20の厚さ方向に移動すると、選択操作が行われたことになる。
 メニューボタン23は、スマートフォン100の表示部110に、遠隔操作デバイス20に対応したアプリケーションのリストやメニュー画面を表示させる際に操作されるボタンである。戻るボタン24は、スマートフォン100の表示部110に表示されている画像を、その時点で表示されている画像の前に表示されていた画像に戻す際に操作されるボタンである。接続ボタン25は、この遠隔操作デバイス20を、遠隔操作対象の機器と無線接続させる際に押されるボタンである。遠隔操作デバイス20は内部に通信部を備えており、接続ボタン25が押されると、その通信部を用いて、接続対象機器との間で近距離無線通信による無線接続を確立する。無線接続の方式は、たとえば、Bluetooth Low Energyなどの無線規格に定められた方式を用いる。なお、Bluetoothは登録商標である。
 車載機30は、たとえば、車載オーディオ機器であり、スピーカー40と接続されている。この車載機30は、スマートフォン100と通信して、スマートフォン100から送信されてくる音声データに基づいて、スピーカー40から音声を出力させる。
 サーバー60には、スマートフォン100にインストールされて、遠隔操作デバイス20により操作できるアプリケーションである対応アプリケーション(すなわち、対応プログラム)に関する種々の情報(以下、対応アプリケーション情報)が記憶されている。この対応アプリケーション情報の詳細は後述する。
 (スマートフォン100の構成)
 図2に示すように、スマートフォン100は、表示部110、広域通信部130、近距離通信部132、記憶部140、スピーカー150、操作部160、制御部170を備えている。
 表示部110には、このスマートフォン100にインストールされている各アプリケーションに対応したアイコン120が表示される。なお、アイコン120は、各アプリケーションを文字以外の図形と文字の一方または両方により表したものである。
 広域通信部130は、公衆通信回線網50に無線接続して通信を行う。近距離通信部132は、遠隔操作デバイス20と同じ通信方式により無線通信を行う。
 記憶部140は、フラッシュメモリなどの書き込み可能な不揮発性記憶媒体を備える。スマートフォン100にインストールされているアプリケーションは、この記憶部140に記憶される。このアプリケーションには、遠隔操作デバイス20に対応している対応アプリケーションと、遠隔操作デバイス20により操作を行うことができない非対応アプリケーションとがある。また、この記憶部140には、遠隔操作支援プログラムに相当するランチャーアプリケーション141が記憶されている。
 スピーカー150からは、対応アプリケーションの名称を読み上げた音声が出力される。操作部160は、表示部110の表面に重ねられたタッチパネルを備える。また、表示部110の周囲に配置されたタッチスイッチやメカニカルスイッチを備えていてもよい。
 制御部170は、CPU、ROM、RAM等を備えたコンピュータである。CPUが、RAMの一時記憶機能を利用しつつ記憶部140に記憶されているランチャーアプリケーション141を実行することで、制御部170は、検出部171、第1表示制御部172、第2表示制御部173、対応識別情報取得部174、名称取得部175、表示情報取得部176、URL取得部177、読み上げ処理部178として機能する。なお、制御部170が実行する機能の一部または全部を、一つあるいは複数のIC等によりハードウェア的に構成してもよい。
 これら検出部171、第1表示制御部172、第2表示制御部173、対応識別情報取得部174、名称取得部175、表示情報取得部176、URL取得部177、読み上げ処理部178の処理は、図4以降を用いて説明する。
 図3は、表示部110に表示されるアプリケーション選択画面である。このアプリケーション選択画面には、スマートフォン100にインストールされている各アプリケーションに対応したアイコン120が表示されている。図3の例では、アプリケーションA~Hにそれぞれ対応したアイコン120A~120Hと、ランチャーアプリケーション141に対応したアイコン120Lが表示されている。このアイコン120Lが、ユーザーによりタッチ操作されると、ランチャーアプリケーション141が起動する。
 なお、図3に示すアイコン120A~H、Lは、説明の便宜上、文字を枠で囲った図形である。しかし、もちろん、図7に示すように、文字以外の図形で、アプリケーションの意味を端的に示すアイコン120でもよい。
 (制御部170の処理)
 図4に示す処理は、ランチャーアプリケーション141が起動している際に周期的に実行する。なお、図4において、ステップS12は、対応識別情報取得部174、名称取得部175、表示情報取得部176、URL取得部177が実行し、その他の処理、すなわち、ステップS2~S10、S14、S16は、検出部171が実行する。また、これらのステップS2~S10、S14、S16は、検出ステップに相当する。
 ステップS2では、スマートフォン100にインストールされているアプリケーションが、対応アプリケーションであるか否かを確認する確認時期であるか否かを判断する。確認時期は、ランチャーアプリケーション141の起動時、および、その後の一定周期経過毎である。一定周期は適宜設定可能であるが、たとえば、数日程度とすることができる。
 確認時期でないと判断した場合(S2:NO)には、図4の処理を終了する。確認時期であると判断した場合(S2:YES)にはステップS4に進む。
 ステップS4では、スマートフォン100のオペレーティングシステムに問い合わせることにより、スマートフォン100にインストールされている全部のアプリケーションのアプリケーションIDおよびアプリケーションのバージョンを取得する。
 ステップS6では、ステップS4で取得したアプリケーションIDとアプリケーションのバージョンを、前回、上記ステップS4で取得したアプリケーションIDとアプリケーションのバージョンと比較する。なお、前回、上記ステップS4で取得したアプリケーションIDとアプリケーションのバージョンは、前回のこの図4の実行時に、次のステップS8を実行することで、記憶部140に記憶されている。
 ステップS8では、ステップS4で取得したアプリケーションIDおよびアプリケーションのバージョンを、記憶部140に記憶する。
 ステップS10では、ステップS6での比較結果が差異ありであるか否かを判断する。差異なしと判断した場合(S10:NO)には、図4の処理を終了する。差異ありと判断した場合(S10:YES)にはステップS12に進む。
 ステップS12では、広域通信部130を用いて、対応アプリケーション情報を要求するリクエスト信号を、サーバー60に送信する。このリクエスト信号には、スマートフォン100の機種、オペレーティングシステムの種類およびバージョン、遠隔操作デバイス20の機種およびバージョンも含まれている。これらの違いにより、対応アプリケーションが、遠隔操作デバイス20により操作できるか否かが異なる可能性があるからである。
 サーバー60には、複数の対応アプリケーションについて、対応アプリケーション情報が記憶されている。対応アプリケーション情報は、対応アプリケーションに関する種々の情報である。
 具体的には、対応アプリケーション情報は、図5に概念的に示すように、アプリケーションID、アイコン、名称、ジャンル、インストール用URL、対応オペレーティングシステムおよび対応オペレーティングシステムのバージョンなどを含む。また、名称には、表示用の名称と読み上げ用の名称が含まれている。また、遠隔操作デバイス20やそのバージョン、スマートフォン100の機種、バージョンによって、遠隔操作デバイス20により操作できるか否かが異なる場合には、対応する遠隔操作デバイス20、バージョン、スマートフォン100の機種、バージョンなども対応アプリケーション情報に含まれる。
 これらのうち、アプリケーションID、対応する遠隔操作デバイス20、バージョン、スマートフォン100の機種、バージョンは、対応識別情報取得部174が取得する対応識別情報である。アイコンと表示用の名称は表示情報取得部176が取得するプログラム特定情報である。読み上げ用の名称は、名称取得部175が取得する。インストール用URLはURL取得部177が取得する。
 サーバー60は、スマートフォン100からリクエスト信号を取得すると、そのリクエスト信号を送信したスマートフォン100およびそのスマートフォン100と接続されている遠隔操作デバイス20の組み合わせで利用可能な対応アプリケーションを決定する。そして、決定した対応アプリケーションについての対応アプリケーション情報を、リクエスト信号を送信したスマートフォン100に送信する。
 図4のステップS14では、サーバー60から送信されてくる対応アプリケーション情報を受信する。そして、受信した対応アプリケーション情報を、記憶部140に記憶する。
 続くステップS16では、ステップS14で受信した対応アプリケーション情報に基づいて、スマートフォン100にインストールされているアプリケーションが、対応アプリケーションであるか非対応アプリケーションであるかを決定する。
 この図4の処理を周期的に実行する理由は、スマートフォン100には、随時新たなアプリケーションがインストールされ、また、インストールされているアプリケーションも随時バージョンアップされるためである。
 また、ランチャーアプリケーション141が起動された時は、図6に示す処理も実行する。図6において、ステップS20~S24、S30、S32は第1表示制御部172が実行し、ステップS26、S28は読み上げ処理部178が実行する。また、ステップS20~S24、S30、S32は、表示制御ステップに相当する。
 ステップS20では、スマートフォン100にインストール済みの対応アプリケーションのリスト(以下、インストール済み対応リスト)を表示部110に表示する。スマートフォン100にインストールされているアプリケーションのうち、どれが対応アプリケーションであり、どれが非対応アプリケーションであるかは、図4の処理を実行することで決定されている。
 図7は、インストール済み対応リストの一部である。スマートフォン100の表示部110はそれほど大きくないので、インストール済み対応リストを一度に全部表示することはできない場合も多い。インストール済み対応リストを一度に全部表示できないときは、図7に示すように、インストール対応済みリストの一部が表示部110には表示される。
 図7のインストール対応済みリストは、対応アプリケーションのアイコン120と、対応アプリケーションの名称122が表示されている。これら対応アプリケーションのアイコン120および名称122は、ステップS14で記憶部140に記憶した対応アプリケーション情報から抽出する。
 ステップS22では、遠隔操作デバイス20から、スクロール信号が入力されたか否かを判断する。このスクロール信号は、遠隔操作デバイス20の回転選択ボタン22が回転操作されることにより、遠隔操作デバイス20から送信される。また、十字ボタン21が上下操作されることで、遠隔操作デバイス20から送信されるようになっていてもよい。
 ステップS22の判断がYESであればステップS24に進む。ステップS24では、スクロール信号により定まる方向に、スクロール信号により定まる量だけ、表示部110に表示されているインストール済み対応リストをスクロールさせる。ステップS24を実行した場合、または、ステップS22の判断がNOであった場合にはステップS26を実行する。
 ステップS26では、選択中のアイコン120を選択している時間が、読み上げ時間に達したか否かを判断する。本実施形態では、選択中のアイコン120は、図7に示すように、選択枠124で囲われ、かつ、非選択のアイコン120よりも大きく表示される。ステップS26では、この状態となってからの経過時間が読み上げ時間に達したか否かを判断する。この判断がYESであればステップS28に進む。
 ステップS28では、選択中のアイコン120が表している対応アプリケーションの名称を読み上げた音声を、スマートフォン100のスピーカー150および車両に搭載されたスピーカー40のうち、予め設定された一方または両方から出力させる。
 対応アプリケーションの名称を読み上げた音声は、ステップS14で記憶部140に記憶した対応アプリケーション情報に含まれている読み上げ用の名称と、名称から音声を生成することができる公知の音声生成アプリケーションを用いて生成する。
 ステップS28を実行した場合、または、ステップS26の判断がNOであった場合にはステップS30を実行する。ステップS30では、遠隔操作デバイス20から、画面遷移信号が入力されたか否かを判断する。この画面遷移信号は、具体的には、回転選択ボタン22が厚さ方向に操作されることにより発生する選択信号、戻るボタン24が押されることにより発生する戻る信号、メニューボタン23が押されることにより発生するメニュー表示信号である。
 ステップS30の判断がYESであればステップS32に進む。ステップS32では、入力された信号に応じた処理を行う。その後、ステップS22に戻る。また、ステップS30の判断がNOであれば、ステップS32を実行することなくステップS22に戻る。
 図8に示すように、本実施形態では、インストール済み対応リストの一方の端に、Setupのアイコン120Sを表示するようになっている。このアイコン120Sが選択されている状態で選択信号が入力された場合、制御部170は、図9に示す設定画像126を表示部110に表示する。
 設定画像126において、ユーザー操作によりAppインストール画像部128が選択されると、制御部170は図10に示す処理を実行する。図10において、ステップS40~S44、S50、S52は第2表示制御部173が実行し、ステップS46、S48は読み上げ処理部178が実行する。
 ステップS40では、対応アプリケーション全リストを表示部110に表示する。この対応アプリケーション全リストは、ステップS14で、サーバー60から取得した対応アプリケーション情報に含まれている全部の対応アプリケーションを表したリストである。
 図11に対応アプリケーション全リストを例示している。図11に示すように、対応アプリケーション全リストも、インストール済み対応リストと同様、対応アプリケーションのアイコン120と、対応アプリケーションの名称122を表示するリストである。
 ただし、インストール済み対応リストとは異なり、対応アプリケーション全リストには、スマートフォン100にインストールされている対応アプリケーションと、スマートフォン100にインストールされていない対応アプリケーションとが含まれている。そこで、インストール済みの対応アプリケーションにはインストール済みマーク129が付加されることで、スマートフォン100にインストール済みであるか否かが区別できるようになっている。また、インストール済みの対応アプリケーションの名称122は、インストールされていない対応アプリケーションの名称122よりも薄い色で表されている。
 ステップS42~S50までは、図6のステップS22~S30と同じである。ステップS52では、いずれかの対応アプリケーションが選択された場合、選択された対応アプリケーションがインストール済みであれば、図12に示すように、選択された対応アプリケーションは既にインストール済みであることを示すメッセージを表示する。
 一方、選択された対応アプリケーションがインストールされていない対応アプリケーションである場合には、その対応アプリケーションをダウンロードすることができるサイトのURLを決定する。このURLは、サーバー60から取得した対応アプリケーション情報から決定する。そして、決定したURLのサイトの画面を表示部110に表示させる。
 (実施形態の効果)
 以上、説明した本実施形態によれば、スマートフォン100には、ランチャーアプリケーション141がインストールされている。このランチャーアプリケーション141が起動すると、検出部171は、このスマートフォン100にインストールされているアプリケーションから、遠隔操作デバイス20に対応している対応アプリケーションを検出する(図4)。そして、インストール済みの対応アプリケーションのみが含まれているインストール済み対応リスト(図7)を表示部110に表示する。
 このインストール済み対応リストを用いて起動させたい対応アプリケーションを探すことにより、アイコン120と名称122が表示されているアプリケーションが、対応アプリケーションであるか否かを判断する必要がなくなる。したがって、所望の対応アプリケーションを見つけるまでの操作の煩わしさを軽減させることができ、かつ、スマートフォン100の表示部110を注視する時間を短くすることができる。
 また、本実施形態では、サーバー60から受信した対応アプリケーション情報を用いて、スマートフォン100にインストールされているアプリケーションから、対応アプリケーションを検出する(S16)。これにより、逐次、更新される可能性がある対応アプリケーションに迅速に対応して、精度よく、インストールされているアプリケーションから対応アプリケーションを検出することができる。
 また、インストール済み対応リストにおいて同じアイコン120が選択されている時間が読み上げ時間に到達すると、そのアイコン120が表している対応アプリケーションの名称を読み上げた音声が所定のスピーカー40、150から出力される(S28)。したがって、ユーザーは、表示部110を見なくても、どの対応アプリケーションが選択されているかを認識できる。これによっても、表示部110を注視する時間を短くできる。
 また、対応アプリケーションの名称を読み上げた音声は、サーバー60から取得した対応アプリケーション情報に含まれている読み上げ用の名称に基づいて生成する。したがって、スマートフォン100のオペレーティングシステムが、ランチャーアプリケーション141に対応アプリケーションの名称を提供しないとしても、対応アプリケーションの名称を読み上げた音声をスピーカー40、150から出力できる。
 また、インストール済み対応リストに表示する対応アプリケーションのアイコン120、対応アプリケーションの名称122は、サーバー60から受信する対応アプリケーション情報に含まれている(S14)。したがって、スマートフォン100のオペレーティングシステムが、ランチャーアプリケーション141に対応アプリケーションのアイコン120および名称122を提供しないとしても、インストール済み対応リストを作成することができる。
 また、対応アプリケーション情報は逐次、サーバー60から取得するので、対応アプリケーションのアイコン120が更新された場合に、その更新に迅速に対応できる。
 また、本実施形態では、サーバー60から、サーバー60に記憶されている対応アプリケーション情報のうち、スマートフォン100および遠隔操作デバイス20に対応する全部の対応アプリケーション情報を取得している。この取得した情報に基づいて、対応アプリケーション全リストを表示部110に表示している。この対応アプリケーション全リストは、インストール済みマーク129により、各対応アプリケーションが、スマートフォン100にインストール済みであるか、インストールされていないかが区別される。この対応アプリケーション全リストが表示されることにより、ユーザーは、まだ、スマートフォン100にインストールしていない対応アプリケーションを迅速に知ることができる。
 また、対応アプリケーション全リストからスマートフォン100にインストールされていない対応プログラムのアイコン120が選択された場合、選択されたアイコン120が表す対応プログラムをダウンロードできるサイトの画面を表示部110に表示される。これにより、ユーザーは、新しい対応アプリケーションを容易にインストールすることができる。
 以上、本開示の実施形態を説明したが、本開示は上述の実施形態に限定されるものではなく、次の変形例も本開示の技術的範囲に含まれ、さらに、下記以外にも要旨を逸脱しない範囲内で種々変更して実施できる。
 <変形例1>
 たとえば、前述の実施形態で表示していた対応アプリケーション全リストに代えて、あるいは、それに加えて、スマートフォン100にインストールされていない対応アプリケーションのみが含まれているリストを表示部110に表示するようにしてもよい。この場合、インストール済み対応リストと、スマートフォン100にインストールされていない対応アプリケーションのみが含まれているリストとを、切り替えて表示部110にできることになる。
 <変形例2>
 図4のステップS12において、リクエスト信号に差分情報を含ませ、サーバー60は差分情報に該当する対応アプリケーションについての対応アプリケーション情報のみをスマートフォン100に送信するようにしてもよい。このようにしても、図6の処理を実行することはできる。
 この場合、対応アプリケーション全リスト、あるいは、スマートフォン100にインストールされていない対応アプリケーションのみが含まれているリストを表示する必要が生じたときに、サーバー60から、スマートフォン100および遠隔操作デバイス20の組み合わせで利用可能な対応アプリケーションについての対応アプリケーション情報を、全部、取得すればよい。
 <変形例3>
 前述の実施形態では、情報処理装置としてスマートフォン100を示したが、情報処理装置は、ナビゲーション装置、タブレット型コンピュータであってもよい。また、ナビゲーション装置は、車両などの移動体に固定する形式でも、また、携帯型でもよい。ナビゲーション装置が移動体に固定する形式の場合、表示部と通信部が別々になっていてもよい。
 <変形例4>
 遠隔操作デバイスは前述の実施形態のものに限られない。たとえば、円柱型であり、上部が基部に対して軸周りに相対回転する遠隔操作デバイスでもよい。また、ステアリングに遠隔操作デバイスが配置されていてもよい。また、汎用のリモコンを遠隔操作デバイスとしてもよい。
 ここで、この出願に記載されるフローチャート、あるいは、フローチャートの処理は、複数のセクション(あるいはステップと言及される)から構成され、各セクションは、たとえば、S2と表現される。さらに、各セクションは、複数のサブセクションに分割されることができる、一方、複数のセクションが合わさって一つのセクションにすることも可能である。さらに、このように構成される各セクションは、デバイス、モジュール、ミーンズとして言及されることができる。
 本開示は、実施例に準拠して記述されたが、本開示は当該実施例や構造に限定されるものではないと理解される。本開示は、様々な変形例や均等範囲内の変形をも包含する。加えて、様々な組み合わせや形態、さらには、それらに一要素のみ、それ以上、あるいはそれ以下、を含む他の組み合わせや形態をも、本開示の範疇や思想範囲に入るものである。

Claims (22)

  1.  遠隔操作装置に対応した対応プログラムおよび前記遠隔操作装置に対応していない非対応プログラムがそれぞれ複数インストールされ、インストールされている前記対応プログラムおよび非対応プログラムから、ユーザー操作により選択された一つのプログラムを実行する情報処理装置(100)にインストールされる遠隔操作支援プログラム(141)であって、
     前記情報処理装置を、前記情報処理装置にインストールされている前記対応プログラムおよび非対応プログラムから、前記対応プログラムを検出する検出部(171)として機能させ、
     前記情報処理装置を、前記検出部が検出した前記対応プログラムのリストを、前記情報処理装置の表示部に表示させる第1表示制御部(172)として機能させる、
     遠隔操作支援プログラム。
  2.  請求項1において、
     前記遠隔操作支援プログラムは、サーバー(60)と通信を行う通信部(120)を備えた前記情報処理装置にインストールされ、
     前記情報処理装置を、前記対応プログラムであるか否かを識別する対応識別情報を、前記通信部を介してサーバーから取得する対応識別情報取得部(174)として機能させ、
     前記情報処理装置を、前記検出部が、前記対応識別情報取得部が取得した前記対応識別情報に基づいて、前記対応プログラムを検出するように機能させる遠隔操作支援プログラム。
  3.  請求項1において、
     前記情報処理装置を、前記表示部に表示されている前記対応プログラムのリストのうちいずれか一つの対応プログラムが選択されている状態において、前記一つの対応プログラムの名称を読み上げる音声を所定のスピーカーから出力させる読み上げ処理部(178)として機能させる遠隔操作支援プログラム。
  4.  請求項3において、
     前記遠隔操作支援プログラムは、サーバーと通信を行う通信部(120)を備えた前記情報処理装置にインストールされ、
     前記情報処理装置を、前記表示部に表示されている前記対応プログラムのリストに含まれている前記対応プログラムの名称を、前記通信部を介して前記サーバーから取得する名称取得部(175)として機能させ、
     前記情報処理装置を、前記読み上げ処理部が、前記名称取得部が取得した前記対応プログラムの名称に基づいて、前記一つの対応プログラムの名称を読み上げる音声を前記スピーカーから出力させるように機能させる遠隔操作支援プログラム。
  5.  請求項1において、
     前記遠隔操作支援プログラムは、サーバーと通信を行う通信部(120)を備えた前記情報処理装置にインストールされ、
     前記情報処理装置を、前記検出部が検出した前記対応プログラムの名称およびアイコンの少なくとも一方であるプログラム特定情報を、前記通信部を用いて前記サーバーから取得する表示情報取得部(176)として機能させ、
     前記情報処理装置を、前記第1表示制御部が、前記表示部に、前記表示情報取得部が取得した前記プログラム特定情報のリストを表示させるように機能させる遠隔操作支援プログラム。
  6.  請求項2において、
     前記遠隔操作支援プログラムが起動しているとき、前記対応識別情報取得部が、繰り返し、前記対応識別情報を前記サーバーから取得するように機能させる遠隔操作支援プログラム。
  7.  請求項5において、
     前記表示情報取得部を、前記サーバーから、前記サーバーに記憶されている前記プログラム特定情報のうち、前記情報処理装置および前記遠隔操作装置に対応する全部の前記プログラム特定情報を取得するように機能させ、
     前記情報処理装置を、前記検出部の検出結果に基づいて、前記表示情報取得部が取得した全部の前記プログラム特定情報を、前記情報処理装置にインストールされている前記対応プログラムと、前記情報処理装置にインストールされていない前記対応プログラムとに区別して、前記表示部に表示する第2表示制御部(173)として機能させる遠隔操作支援プログラム。
  8.  請求項7において、
     前記第2表示制御部が、前記表示情報取得部が取得した全部の前記プログラム特定情報を、一つのリストに、前記情報処理装置にインストールされている前記対応プログラムと、前記情報処理装置にインストールされていない前記対応プログラムとに区別して、前記表示部に表示するように機能させる遠隔操作支援プログラム。
  9.  請求項7において、
     前記第2表示制御部が、前記表示情報取得部が取得した全部の前記プログラム特定情報のうち、前記情報処理装置にインストールされている前記対応プログラムのリストと、前記情報処理装置にインストールされていない前記対応プログラムのリストとを切り替え可能に前記表示部に表示するように機能させる遠隔操作支援プログラム。
  10.  請求項7~9のいずれか1項において、
     前記情報処理装置を、前記サーバーから、前記情報処理装置にインストールされていない前記対応プログラムをダウンロードできるサイトのURLを取得するURL取得部(177)として機能させ、
     前記第2表示制御部は、前記情報処理装置にインストールされていない前記対応プログラムについての前記プログラム特定情報が表示されている状態で、ユーザー操作により、一つのプログラム特定情報が選択された場合、選択された前記一つのプログラム特定情報が表す前記対応プログラムをダウンロードできるサイトのURLを、前記URL取得部が取得した前記URLに基づいて決定して、決定した前記URLのサイトの画面を前記表示部に表示させるように機能させる遠隔操作支援プログラム。
  11.  遠隔操作装置に対応した対応プログラムおよび前記遠隔操作装置に対応していない非対応プログラムがそれぞれ複数インストールされており、インストールされている前記対応プログラムおよび非対応プログラムから、ユーザー操作により選択された一つのプログラムを実行する情報処理装置において、一つの対応プログラムを選択する選択操作を支援する遠隔操作支援方法であって、
     前記情報処理装置にインストールされている前記対応プログラムおよび非対応プログラムから、前記対応プログラムを検出し(S2~S10、S14、S16)、
     検出された対応プログラムのリストを、前記情報処理装置の表示部に表示させる(S20~S24、S30、S32)ことを備える遠隔操作支援方法。
  12.  請求項11において、
     サーバー(60)と通信を行い、
     前記対応プログラムであるか否かを識別する対応識別情報を、前記サーバーから取得することを、さらに備え、
     前記対応プログラムの検出において、取得した前記対応識別情報に基づいて、前記対応プログラムを検出する遠隔操作支援方法。
  13.  請求項11において、
     前記表示部に表示されている前記対応プログラムのリストのうちいずれか一つの対応プログラムが選択されている状態において、前記一つの対応プログラムの名称を読み上げる音声を所定のスピーカーから出力させることを、さらに備える遠隔操作支援方法。
  14.  請求項13において、
     サーバーと通信を行い、
     前記表示部に表示されている前記対応プログラムのリストに含まれている前記対応プログラムの名称を、前記サーバーから取得することを、さらに備え、
     前記音声の出力において、取得した前記対応プログラムの名称に基づいて、前記一つの対応プログラムの名称を読み上げる音声を前記スピーカーから出力させる遠隔操作支援方法。
  15.  請求項11において、
     サーバーと通信を行い、
     前記対応プログラムの検出において検出された前記対応プログラムの名称およびアイコンの少なくとも一方であるプログラム特定情報を、前記サーバーから取得し、
     前記表示部に、取得した前記プログラム特定情報のリストを表示させることを、さらに備える遠隔操作支援方法。
  16.  請求項12において、
     前記対応識別情報の取得において、繰り返し、前記対応識別情報を前記サーバーから取得する遠隔操作支援方法。
  17.  請求項15において、
     前記サーバーから、前記サーバーに記憶されている前記プログラム特定情報のうち、前記情報処理装置および前記遠隔操作装置に対応する全部の前記プログラム特定情報を取得し、
     前記対応プログラムの検出における検出結果に基づいて、取得した全部の前記プログラム特定情報を、前記情報処理装置にインストールされている前記対応プログラムと、前記情報処理装置にインストールされていない前記対応プログラムとに区別して、前記表示部に表示することを、さらに備える遠隔操作支援方法。
  18.  請求項17において、
     取得した全部の前記プログラム特定情報の表示において、取得した全部の前記プログラム特定情報を、一つのリストに、前記情報処理装置にインストールされている前記対応プログラムと、前記情報処理装置にインストールされていない前記対応プログラムとに区別して、前記表示部に表示する遠隔操作支援方法。
  19.  請求項17において、
     取得した全部の前記プログラム特定情報の表示において、取得した全部の前記プログラム特定情報のうち、前記情報処理装置にインストールされている前記対応プログラムのリストと、前記情報処理装置にインストールされていない前記対応プログラムのリストとを切り替え可能に前記表示部に表示する遠隔操作支援方法。
  20.  請求項17~19のいずれか1項において、
     前記サーバーから、前記情報処理装置にインストールされていない前記対応プログラムをダウンロードできるサイトのURLを取得し、
     前記情報処理装置にインストールされていない前記対応プログラムについての前記プログラム特定情報が表示されている状態で、ユーザー操作により、一つのプログラム特定情報が選択された場合、選択された一つのプログラム特定情報が表す前記対応プログラムをダウンロードできるサイトのURLを、取得した前記URLに基づいて決定し、
     決定した前記URLのサイトの画面を前記表示部に表示させることを、さらに備える遠隔操作支援方法。
  21.  請求項1~10のいずれか1項に記載の前記遠隔操作支援プログラムがインストールされた情報処理装置。
  22.  遠隔操作装置に対応した対応プログラムおよび前記遠隔操作装置に対応していない非対応プログラムがそれぞれ複数インストールされ、インストールされている前記対応プログラムおよび非対応プログラムから、ユーザー操作により選択された一つのプログラムを実行する情報処理装置(100)において、
     インストールされている前記対応プログラムおよび非対応プログラムから、前記対応プログラムを検出する検出部(171)と、
     表示部と、
     前記検出部が検出した前記対応プログラムのリストを、前記表示部に表示させる第1表示制御部(172)とを有する、
     情報処理装置。
     
     
PCT/JP2015/004819 2014-10-03 2015-09-22 遠隔操作支援プログラム、遠隔操作支援方法、情報処理装置 WO2016051730A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US15/329,263 US20170214781A1 (en) 2014-10-03 2015-09-22 Non-transitory computer readable storage medium, remote operation supporting method, and information processing apparatus

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2014204929A JP6365197B2 (ja) 2014-10-03 2014-10-03 遠隔操作支援プログラム、遠隔操作支援方法、情報処理装置
JP2014-204929 2014-10-03

Publications (1)

Publication Number Publication Date
WO2016051730A1 true WO2016051730A1 (ja) 2016-04-07

Family

ID=55629801

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2015/004819 WO2016051730A1 (ja) 2014-10-03 2015-09-22 遠隔操作支援プログラム、遠隔操作支援方法、情報処理装置

Country Status (3)

Country Link
US (1) US20170214781A1 (ja)
JP (1) JP6365197B2 (ja)
WO (1) WO2016051730A1 (ja)

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6547291B2 (ja) * 2014-12-17 2019-07-24 株式会社リコー 情報処理システムおよび情報処理方法
US10489453B2 (en) 2016-02-26 2019-11-26 Amazon Technologies, Inc. Searching shared video footage from audio/video recording and communication devices
US10748414B2 (en) 2016-02-26 2020-08-18 A9.Com, Inc. Augmenting and sharing data from audio/video recording and communication devices
US10841542B2 (en) 2016-02-26 2020-11-17 A9.Com, Inc. Locating a person of interest using shared video footage from audio/video recording and communication devices
US9965934B2 (en) 2016-02-26 2018-05-08 Ring Inc. Sharing video footage from audio/video recording and communication devices for parcel theft deterrence
US10397528B2 (en) 2016-02-26 2019-08-27 Amazon Technologies, Inc. Providing status information for secondary devices with video footage from audio/video recording and communication devices
KR102459633B1 (ko) 2016-02-26 2022-10-28 아마존 테크놀로지스, 인크. 오디오/비디오 레코딩 및 통신 디바이스로부터의 비디오 장면의 공유
US11393108B1 (en) 2016-02-26 2022-07-19 Amazon Technologies, Inc. Neighborhood alert mode for triggering multi-device recording, multi-camera locating, and multi-camera event stitching for audio/video recording and communication devices
KR101803521B1 (ko) * 2016-03-30 2017-11-30 지엠 글로벌 테크놀러지 오퍼레이션스 엘엘씨 차량용 인포테인먼트 시스템의 동작 제어 방법
JP6957855B2 (ja) * 2016-10-06 2021-11-02 富士フイルムビジネスイノベーション株式会社 情報処理装置、情報処理システム及びプログラム
US20180210630A1 (en) * 2017-01-26 2018-07-26 Kyocera Document Solutions Inc. Display device and display method
KR102033572B1 (ko) * 2017-05-16 2019-10-17 현대자동차주식회사 스마트 기기에 의한 차량의 avn 제어 방법 및 제어 시스템
KR20200017293A (ko) * 2018-08-08 2020-02-18 삼성전자주식회사 사용자 발화를 처리하는 전자 장치 및 그 전자 장치의 제어 방법
JP7293737B2 (ja) * 2019-03-08 2023-06-20 コニカミノルタ株式会社 超音波探触子、端末装置、超音波診断装置及び超音波診断システム
US11915691B2 (en) 2021-01-19 2024-02-27 Samsung Electronics Co., Ltd. Electronic apparatus and controlling method thereof
KR20220105036A (ko) * 2021-01-19 2022-07-26 삼성전자주식회사 전자 장치 및 그 제어 방법

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012043214A (ja) * 2010-08-19 2012-03-01 Ricoh Co Ltd 操作表示装置および操作表示方法
JP2012060396A (ja) * 2010-09-08 2012-03-22 Denso Corp 車載機器操作システム
JP2013005213A (ja) * 2011-06-16 2013-01-07 Denso Corp 表示装置、携帯通信端末および表示システム
JP2013237424A (ja) * 2012-05-17 2013-11-28 Denso Corp 車両用装置、携帯通信端末

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4887779B2 (ja) * 2005-12-28 2012-02-29 ソニー株式会社 情報処理装置および情報処理方法、プログラム、並びに、記録媒体
US9430120B2 (en) * 2012-06-08 2016-08-30 Apple Inc. Identification of recently downloaded content
WO2014064862A1 (ja) * 2012-10-22 2014-05-01 Necカシオモバイルコミュニケーションズ株式会社 携帯端末装置、情報提示方法、及びプログラム

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012043214A (ja) * 2010-08-19 2012-03-01 Ricoh Co Ltd 操作表示装置および操作表示方法
JP2012060396A (ja) * 2010-09-08 2012-03-22 Denso Corp 車載機器操作システム
JP2013005213A (ja) * 2011-06-16 2013-01-07 Denso Corp 表示装置、携帯通信端末および表示システム
JP2013237424A (ja) * 2012-05-17 2013-11-28 Denso Corp 車両用装置、携帯通信端末

Also Published As

Publication number Publication date
JP2016076778A (ja) 2016-05-12
US20170214781A1 (en) 2017-07-27
JP6365197B2 (ja) 2018-08-01

Similar Documents

Publication Publication Date Title
WO2016051730A1 (ja) 遠隔操作支援プログラム、遠隔操作支援方法、情報処理装置
KR102334213B1 (ko) 정보를 표시하는 방법 및 전자 장치
KR20140077015A (ko) 디스플레이 장치, 원격 제어 장치 및 그들의 사용자 인터페이스 제공 방법
WO2010047035A1 (ja) 機器利用支援装置及びシステム
KR20100017023A (ko) 화상형성장치 및 그의 어플리케이션 제어방법
WO2013015054A1 (ja) 車載機による遠隔操作システム
US9900389B2 (en) Information processing apparatus and execution management program
JP4993761B2 (ja) 地図情報管理システム、地図情報管理方法及び車載用地図情報管理装置
KR20120089000A (ko) 디지털 디바이스에서 어플리케이션 자동 인스톨 기능을 제공하기 위한 장치 및 방법
EP2802984A1 (en) Mobile device application integration with infotainment head units
CN105354003A (zh) 一种基于移动终端和车载终端互联的显示方法及装置
US10412564B2 (en) Apparatus, method, and system for displaying antenna location of communication terminal, and recording medium
JP4894336B2 (ja) 交差点検索装置および交差点検索方法
JP2015220533A (ja) 車載情報システム、車載装置、情報端末、アプリケーション実行方法
KR101580852B1 (ko) 모바일 단말을 사용하여 차량의 헤드 유닛의 사용자 인터페이스를 동적으로 구성하는 방법, 이를 이용한 헤드 유닛 및 컴퓨터 판독 가능한 기록 매체
JP2012099924A (ja) 車載装置およびアプリケーション起動制御方法
JP2009163436A (ja) 情報端末装置、コンピュータプログラム及び表示方法
EP2998859B1 (en) Display control device, display control method, and program
JP5725504B2 (ja) 車載装置
JP2016177535A (ja) データ送信装置、データ送信システムおよびプログラム
JP2008241590A (ja) 情報検索装置、その制御方法及び制御プログラム
JP2019003285A (ja) 情報表示装置および情報表示システム
JP2008108184A (ja) タッチパネル搭載装置、外部装置、及び外部装置の操作方法
JP2013205222A (ja) ナビゲーションシステム、ナビゲーション方法、サーバ及びプログラム
JP5133369B2 (ja) ナビゲーション装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 15847403

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 15329263

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 15847403

Country of ref document: EP

Kind code of ref document: A1