JP7051219B2 - Music search device, music search system and music search method - Google Patents

Music search device, music search system and music search method Download PDF

Info

Publication number
JP7051219B2
JP7051219B2 JP2018079636A JP2018079636A JP7051219B2 JP 7051219 B2 JP7051219 B2 JP 7051219B2 JP 2018079636 A JP2018079636 A JP 2018079636A JP 2018079636 A JP2018079636 A JP 2018079636A JP 7051219 B2 JP7051219 B2 JP 7051219B2
Authority
JP
Japan
Prior art keywords
music
image data
terminal
search
music search
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018079636A
Other languages
Japanese (ja)
Other versions
JP2019191629A (en
Inventor
徹 丸本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Alpine Electronics Inc
Original Assignee
Alpine Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alpine Electronics Inc filed Critical Alpine Electronics Inc
Priority to JP2018079636A priority Critical patent/JP7051219B2/en
Publication of JP2019191629A publication Critical patent/JP2019191629A/en
Application granted granted Critical
Publication of JP7051219B2 publication Critical patent/JP7051219B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Description

本発明は、楽曲検索装置、楽曲検索システムおよび楽曲検索方法に関し、特に、楽曲情報を管理するデータベースが記憶された端末と接続可能な楽曲検索装置、当該楽曲検索装置と当該端末とを含んで構成される楽曲検索システム、および、当該楽曲検索装置による楽曲検索方法に用いて好適なものである。 The present invention relates to a music search device, a music search system, and a music search method, and in particular, includes a music search device that can be connected to a terminal in which a database for managing music information is stored, the music search device, and the terminal. It is suitable for use in a music search system and a music search method by the music search device.

楽曲ごとの楽曲情報を管理するデータベースが記憶された端末(例えば、スマートフォンや、タブレット型コンピューター等)と、この端末と接続可能な楽曲検索装置とを含んで構成されたシステムに関し、特許文献1に以下の技術が記載されている。すなわち、楽曲検索装置(車載装置)と端末(携帯端末)との接続が確立されたときに、端末が楽曲検索装置に楽曲情報のそれぞれを送信し、楽曲検索装置は受信した楽曲情報に基づいてデータベース(検索DB)を生成する。その際、楽曲検索装置は、記憶スペースの空きスペース不足に起因してデータベースの生成が正常に完了しない(楽曲検索が有効とならない)ことを防止するため、データベースの生成中に空きスペースの不足が発生した場合には、特定の楽曲情報を削除し、空きスペースの容量を回復する。特許文献1によれば、空き容量の不足に起因してデータベースの生成が正常に完了しないことを防止できる。 Patent Document 1 relates to a system configured to include a terminal (for example, a smartphone, a tablet computer, etc.) in which a database for managing music information for each music is stored, and a music search device that can be connected to this terminal. The following techniques are described. That is, when the connection between the music search device (vehicle-mounted device) and the terminal (portable terminal) is established, the terminal transmits each of the music information to the music search device, and the music search device is based on the received music information. Generate a database (search DB). At that time, the music search device has insufficient free space during database generation in order to prevent the database generation from not being completed normally (the music search is not effective) due to the lack of free space in the storage space. If it occurs, the specific music information is deleted and the free space is restored. According to Patent Document 1, it is possible to prevent the database generation from being normally completed due to insufficient free space.

なお、特許文献2には、デジタル圧縮映像信号またはデジタル圧縮音声信号を復号装置に出力する際に、その復号装置が信号を復号可能であるか否かを判定し、復号可能であると判定した場合にのみ、その復号装置に対して信号を出力する技術について記載されている。また、特許文献3には、ユーザーにより特定のデータ形式のオーディオデータが選択され、かつ、オーディオデータを再生する再生機器として複数の機器が選択された場合、当該特定のデータ形式のデータを再生可能な再生機器がマスター機器として決定されると共に、コンテンツサーバーからマスター機器に対してオーディオデータが送信され、マスター機器においてオーディオデータのデータ形式が変換され変換後のデータが他の再生機器に転送されるように構成されたシステムについて記載されている。また、特許文献4には、モバイル機器が、再生可能なコンテンツのフォーマット情報を記憶し、ユーザーによりコンテンツが選択された場合、フォーマット情報に基づいてモバイル機器がそのコンテンツを再生可能か否か判定され、再生できない場合は、モバイル機器とLANを介して接続された他の再生機器によりそのコンテンツが再生されるように構成されたシステムについて記載されている。 In Patent Document 2, when a digitally compressed video signal or a digitally compressed audio signal is output to a decoding device, it is determined whether or not the decoding device can decode the signal, and it is determined that the decoding is possible. A technique for outputting a signal to the decoding device is described only in the case. Further, in Patent Document 3, when audio data in a specific data format is selected by the user and a plurality of devices are selected as playback devices for reproducing the audio data, the data in the specific data format can be reproduced. The playback device is determined as the master device, audio data is transmitted from the content server to the master device, the data format of the audio data is converted in the master device, and the converted data is transferred to another playback device. Describes a system configured as described above. Further, in Patent Document 4, when the mobile device stores the format information of the playable content and the content is selected by the user, it is determined whether or not the mobile device can play the content based on the format information. , If the content cannot be played, the system is configured so that the content is played by another playback device connected to the mobile device via a LAN.

特開2017-204113号公報Japanese Unexamined Patent Publication No. 2017-204113 特開2002-057984号公報Japanese Unexamined Patent Publication No. 2002-057984 特開2017-156671号公報JP-A-2017-156671 特開2009-252334号公報Japanese Unexamined Patent Publication No. 2009-252334

しかしながら、特許文献1に記載されたシステムでは、空き容量の不足に起因してデータベースの生成が完了しないことは防止できるものの、以下の問題がある。すなわち、データベースは楽曲検索に利用されるものであるが、データベースを生成する処理を行った後に楽曲検索ができない事態は、空き容量の不足に起因してデータベースの生成が完了しなかった場合だけでなく、記憶媒体に関するエラー、装置内部の通信エラー等の様々な原因で発生し得る。しかしながら、特許文献1に記載されたシステムでは、空き容量の不足以外の原因で楽曲検索ができないときに、楽曲検索を行うことが可能な状態とならず、ユーザーの利便性を損ねてしまうという問題がある。 However, in the system described in Patent Document 1, although it is possible to prevent the database generation from being completed due to insufficient free space, there are the following problems. That is, the database is used for music search, but the situation where music search cannot be performed after the process of generating the database is only when the database generation is not completed due to insufficient free space. It can occur due to various causes such as an error related to the storage medium and a communication error inside the device. However, in the system described in Patent Document 1, when a music search cannot be performed due to a reason other than insufficient free space, the music search cannot be performed, which impairs the convenience of the user. There is.

本発明は、このような問題を解決するために成されたものであり、データベースの生成が完了しなかったこと以外の原因でデータベースを利用した楽曲検索ができない場合であっても、楽曲検索を行える状態を構築することを目的とする。 The present invention has been made to solve such a problem, and even if a music search using a database cannot be performed due to a reason other than the completion of database generation, the music search can be performed. The purpose is to build a state where it can be done.

上記した課題を解決するために、本発明の楽曲検索装置は、楽曲ごとの楽曲情報を管理する端末側データベースが記憶された端末と通信可能であり、端末から楽曲情報を受信し、装置側データベースを生成する。そして、楽曲検索装置は、装置側データベースを利用した楽曲検索を正常に行うことができるか否かを判定し、正常に行うことができる場合は、装置側データベースを利用して楽曲検索を行う一方、正常に行うことができない場合は、端末と通信し、端末に記憶された端末側データベースを利用して楽曲検索を行う。 In order to solve the above-mentioned problems, the music search device of the present invention can communicate with a terminal in which a terminal-side database that manages music information for each music is stored, receives music information from the terminal, and receives music information from the device-side database. To generate. Then, the music search device determines whether or not the music search using the device-side database can be performed normally, and if it can be performed normally, the music search is performed using the device-side database. If it cannot be performed normally, it communicates with the terminal and searches for music using the database on the terminal side stored in the terminal.

上記のように構成した本発明によれば、装置側データベースの生成が正常に完了しなかった場合だけでなく、装置側データベースの生成が完了した後に装置側データベースを利用した楽曲検索ができない場合は、端末に記憶された端末側データベースを利用して楽曲検索が行われる。このため、装置側データベースの生成が正常に完了しなかったこと以外の原因で装置側データベースを利用した楽曲検索ができない場合であっても、最終的に楽曲検索を行える状態とすることができる。 According to the present invention configured as described above, not only when the generation of the device-side database is not completed normally, but also when the music search using the device-side database cannot be performed after the generation of the device-side database is completed. , Music search is performed using the terminal-side database stored in the terminal. Therefore, even if the music search using the device-side database cannot be performed due to a reason other than that the generation of the device-side database has not been completed normally, the music search can be finally performed.

本発明の一実施形態に係る楽曲検索システムの機能構成例を示すブロック図である。It is a block diagram which shows the functional structure example of the music search system which concerns on one Embodiment of this invention. 本発明の一実施形態に係る楽曲検索装置の動作を示すフローチャートである。It is a flowchart which shows the operation of the music search apparatus which concerns on one Embodiment of this invention.

以下、本発明の一実施形態を図面に基づいて説明する。図1は、本実施形態に係る楽曲検索システム1の機能構成例を示すブロック図である。図1に示すように、楽曲検索システム1は、車載装置2(特許請求の範囲の「楽曲検索装置」に相当)と、車載装置2と通信可能な携帯端末3(特許請求の範囲の「端末」に相当)とを備える。車載装置2は、車両に搭載された装置であり、タッチスクリーン4および音声処理装置5が接続されている。 Hereinafter, an embodiment of the present invention will be described with reference to the drawings. FIG. 1 is a block diagram showing a functional configuration example of the music search system 1 according to the present embodiment. As shown in FIG. 1, the music search system 1 includes an in-vehicle device 2 (corresponding to a “music search device” in the claims) and a mobile terminal 3 capable of communicating with the in-vehicle device 2 (“terminals” in the claims. Equivalent to). The in-vehicle device 2 is a device mounted on a vehicle, and a touch screen 4 and a voice processing device 5 are connected to the in-vehicle device 2.

タッチスクリーン4は、車両のダッシュボードや、センターコンソール等、搭乗者が視認可能な位置に設けられたディスプレー6(特許請求の範囲の「表示装置」に相当)と、ディスプレー6に重ねて配置され、ディスプレー6の表示領域に対するタッチ操作を検出するタッチパネル7とを備える。音声処理装置5は、D/Aコンバーターや、ボリューム、アンプ、スピーカー等を備え、入力された音声信号をD/A変換し、増幅した後、音声信号に基づく音声をスピーカーから出力する。 The touch screen 4 is arranged so as to be superimposed on the display 6 (corresponding to the "display device" within the scope of the patent claim) provided at a position visible to the passenger, such as the dashboard of the vehicle or the center console. A touch panel 7 for detecting a touch operation on the display area of the display 6 is provided. The audio processing device 5 includes a D / A converter, a volume, an amplifier, a speaker, and the like, D / A converts the input audio signal, amplifies it, and then outputs the audio based on the audio signal from the speaker.

携帯端末3は、搭乗者により車両に持ち込まれる携帯型の端末である。携帯端末3は、例えば、タブレット型コンピューターや、いわゆるスマートフォン等である。特に、本実施形態に係る携帯端末3は、特定のオペレーティングシステム(以下、「特定OS」と表現する)が搭載された端末であり、この特定OS上で動作し、携帯端末3に後述する各種処理を実行させる機能を有する特定のアプリケーション(以下、「特定アプリ」と表現する)がインストールされている。 The mobile terminal 3 is a portable terminal brought into the vehicle by the passenger. The mobile terminal 3 is, for example, a tablet computer, a so-called smartphone, or the like. In particular, the mobile terminal 3 according to the present embodiment is a terminal equipped with a specific operating system (hereinafter referred to as "specific OS"), operates on the specific OS, and is described later in the mobile terminal 3. A specific application (hereinafter referred to as "specific application") having a function to execute a process is installed.

図1に示すように、車載装置2は、機能構成として、通知部10、データベース生成部11、楽曲検索部12、表示制御部13および楽曲再生部14を備えている。また、携帯端末3は、機能構成として、アプリケーション実行部20を備えている。上記各機能ブロック10~14、20は、ハードウェア、DSP(Digital Signal Processor)、ソフトウェアの何れによっても構成することが可能である。例えばソフトウェアによって構成する場合、上記各機能ブロック10~14、20は、実際にはコンピューターのCPU、RAM、ROMなどを備えて構成され、RAMやROM、ハードディスクまたは半導体メモリー等の記録媒体に記憶されたプログラムが動作することによって実現される。特に、携帯端末3のアプリケーション実行部20は、CPU等のハードウェアが特定アプリ(OSが提供するAPI等、特定アプリに付随するプログラムを含む)を読み出して実行することによって各種処理を実行する。 As shown in FIG. 1, the in-vehicle device 2 includes a notification unit 10, a database generation unit 11, a music search unit 12, a display control unit 13, and a music reproduction unit 14 as functional configurations. Further, the mobile terminal 3 includes an application execution unit 20 as a functional configuration. Each of the above functional blocks 10 to 14 and 20 can be configured by any of hardware, DSP (Digital Signal Processor), and software. For example, when configured by software, each of the above functional blocks 10 to 14 and 20 is actually configured to include a computer CPU, RAM, ROM, etc., and is stored in a recording medium such as RAM, ROM, hard disk, or semiconductor memory. It is realized by running the program. In particular, the application execution unit 20 of the mobile terminal 3 executes various processes by reading and executing a specific application (including a program associated with the specific application such as an API provided by the OS) by hardware such as a CPU.

図1に示すように、車載装置2は、記憶手段として、データベース記憶部15を備えている。データベース記憶部15には、データベース生成部11により生成された装置側データベース16が記憶される。装置側データベース16については後述する。 As shown in FIG. 1, the in-vehicle device 2 includes a database storage unit 15 as a storage means. The device-side database 16 generated by the database generation unit 11 is stored in the database storage unit 15. The device-side database 16 will be described later.

また、携帯端末3は、記憶手段として、端末側記憶部21を備えている。端末側記憶部21には、端末側データベース22が記憶されている。端末側データベース22は、楽曲ごとに楽曲情報と楽曲音声データと楽曲関連画像データ(特許請求の範囲の「圧縮画像データ」に相当)とを対応付けて記憶するデータベースである。楽曲情報とは、楽曲の識別情報や、アーティスト名、曲名、楽曲のジャンル等の、楽曲に関する付加的な情報である。楽曲情報は、データベースを利用した楽曲検索にメタデータとして使用される。楽曲音声データとは、楽曲の音声が記録された所定の音声ファイルフォーマットの音声データである。楽曲関連画像データとは、楽曲が収録されたアルバムのジャケットの画像等の楽曲に関連する画像が記録された画像データであり、所定の圧縮方式で圧縮されている。圧縮方式は、例えば、JPEGや、TIFF、GIF、PNGなどである。 Further, the mobile terminal 3 includes a terminal-side storage unit 21 as a storage means. The terminal-side database 22 is stored in the terminal-side storage unit 21. The terminal-side database 22 is a database that stores music information, music audio data, and music-related image data (corresponding to "compressed image data" in the claims) in association with each other for each music. The music information is additional information about the music such as the identification information of the music, the artist name, the music name, the genre of the music, and the like. The music information is used as metadata for music search using the database. The music audio data is audio data in a predetermined audio file format in which the audio of the music is recorded. The music-related image data is image data in which images related to music such as an image of a jacket of an album in which music is recorded are recorded, and is compressed by a predetermined compression method. The compression method is, for example, JPEG, TIFF, GIF, PNG, or the like.

車載装置2の通信部10は、所定の通信規格に従って携帯端末3と通信する。通信部10と携帯端末3との間での通信に使用される通信規格は何でもよく、例えば、Bluetooth(登録商標)や、Wi-Fi(登録商標)、USB、イーサネット(登録商標)である。 The communication unit 10 of the in-vehicle device 2 communicates with the mobile terminal 3 according to a predetermined communication standard. The communication standard used for communication between the communication unit 10 and the mobile terminal 3 may be any, for example, Bluetooth (registered trademark), Wi-Fi (registered trademark), USB, Ethernet (registered trademark).

車載装置2のデータベース生成部11は、第1プロトコルに従って、携帯端末3から楽曲情報を受信し、受信した楽曲情報に基づいて装置側データベース16を生成する。第1プロトコルは、特定OSが搭載されたデバイス(携帯端末3が相当する)と、ホスト装置(車載装置2が相当する)との間での通信に用いるプロトコルであり、装置間通信を伴う所定の処理を実行するときの手順についても規定されている。装置間通信を伴う所定の処理には、楽曲検索に関する処理、および、デバイスに記憶された圧縮画像データ(楽曲関連画像データを含む)に基づく画像の表示に関する処理が含まれている。楽曲検索に関する処理に関し、第1プロトコルでは、ホスト装置側で装置側データベース16を生成し、装置側データベース16を利用して楽曲検索を行うことが規定されている。また、圧縮画像データに基づく画像の表示に関する処理に関し、第1プロトコルでは、楽曲関連画像データの復号をホスト装置側で行うことが規定されている。 The database generation unit 11 of the in-vehicle device 2 receives music information from the mobile terminal 3 according to the first protocol, and generates the device-side database 16 based on the received music information. The first protocol is a protocol used for communication between a device equipped with a specific OS (corresponding to a mobile terminal 3) and a host device (corresponding to an in-vehicle device 2), and is a predetermined protocol accompanied by inter-device communication. The procedure for executing the processing of is also specified. The predetermined process involving inter-device communication includes a process related to music search and a process related to displaying an image based on compressed image data (including music-related image data) stored in the device. Regarding the processing related to the music search, the first protocol stipulates that the device-side database 16 is generated on the host device side and the music search is performed using the device-side database 16. Further, regarding the process related to the display of the image based on the compressed image data, the first protocol stipulates that the music-related image data is decoded on the host device side.

以下、データベース生成部11の処理について詳述する。データベース生成部11による装置側データベース16の生成に先立って、車載装置2と携帯端末3とが接続されると共に、携帯端末3にインストールされている特定アプリが立ち上げられる。特定アプリは、車載装置2と携帯端末3とが接続されたときに自動で立ち上がる構成でもよく、また、ユーザーの指示によって立ち上がる構成でもよい。特定アプリが立ち上がると、携帯端末3のアプリケーション実行部20と、データベース生成部11、楽曲検索部12および楽曲再生部14との間でコネクション(論理的な通信経路)が確立し、これら機能ブロック間でデータの送受信が可能な状態となる。携帯端末3のアプリケーション実行部20は、データベース生成部11との間でコネクションが確立すると、第1プロトコルに従って、端末側データベース22で管理されている楽曲情報を楽曲ごとに順に車載装置2のデータベース生成部11に送信する。 Hereinafter, the processing of the database generation unit 11 will be described in detail. Prior to the generation of the device-side database 16 by the database generation unit 11, the in-vehicle device 2 and the mobile terminal 3 are connected, and a specific application installed in the mobile terminal 3 is launched. The specific application may be configured to start automatically when the in-vehicle device 2 and the mobile terminal 3 are connected, or may be configured to start according to a user's instruction. When the specific application is launched, a connection (logical communication path) is established between the application execution unit 20 of the mobile terminal 3 and the database generation unit 11, the music search unit 12, and the music playback unit 14, and between these functional blocks. Data can be sent and received. When the application execution unit 20 of the mobile terminal 3 establishes a connection with the database generation unit 11, the application execution unit 20 generates music information managed by the terminal side database 22 for each music in order according to the first protocol. It is transmitted to the unit 11.

携帯端末3のアプリケーション実行部20が送信した楽曲情報は、通信部10の機能により、順次、受信バッファー(不図示)に格納される。データベース生成部11は、第1プロトコルに従って、受信バッファーに格納されていく楽曲情報を読み出していき、読み出した楽曲情報に基づいて、データベース記憶部15の所定の記憶領域に装置側データベース16を構築することを試みる。装置側データベース16とは、楽曲情報を用いた楽曲検索に利用される所定のデータ構造のデータベースであり、楽曲ごとに楽曲情報を管理する。 Music information transmitted by the application execution unit 20 of the mobile terminal 3 is sequentially stored in a reception buffer (not shown) by the function of the communication unit 10. The database generation unit 11 reads out the music information stored in the reception buffer according to the first protocol, and builds the device-side database 16 in a predetermined storage area of the database storage unit 15 based on the read music information. Try to do that. The device-side database 16 is a database having a predetermined data structure used for music search using music information, and manages music information for each music.

正常に生成が完了した装置側データベース16は不揮発性メモリーに記憶され、装置側データベース16が生成された後に携帯端末3と車載装置2との通信接続が切断されても、データベース記憶部15から削除されない。そして、再び、車載装置2と携帯端末3との間での通信接続が確立され特定アプリが立ち上げられた場合、データベース生成部11は、以下の処理を実行する。すなわち、データベース生成部11は、第1プロトコルに従ってアプリケーション実行部20と通信し、端末側データベース22で管理されている楽曲情報と、装置側データベース16で管理される楽曲情報とが同一性を有した状態となるように装置側データベース16を更新する。装置側データベース16を更新する処理は、楽曲検索に使用する装置側データベース16を構築するために行われる処理であり、装置側データベース16を生成する処理に相当する。 The device-side database 16 that has been normally generated is stored in the non-volatile memory, and even if the communication connection between the mobile terminal 3 and the in-vehicle device 2 is disconnected after the device-side database 16 is generated, it is deleted from the database storage unit 15. Not done. Then, when the communication connection between the in-vehicle device 2 and the mobile terminal 3 is established again and the specific application is launched, the database generation unit 11 executes the following processing. That is, the database generation unit 11 communicates with the application execution unit 20 according to the first protocol, and the music information managed by the terminal-side database 22 and the music information managed by the device-side database 16 have the sameness. The device-side database 16 is updated so that the state is reached. The process of updating the device-side database 16 is a process performed for constructing the device-side database 16 used for music search, and corresponds to a process of generating the device-side database 16.

以上のように、データベース生成部11は、第1プロトコルに従って、装置側データベース16の生成を試みるが、装置側データベース16の生成は必ずしも正常に完了しない。例えば、データベース記憶部15の空き領域の不足、装置側データベース16の生成の試行中の通信障害等により、装置側データベース16の生成が正常に完了しないことがある。装置側データベース16の生成が正常に完了しなかった場合、以後、第1プロトコルでは楽曲検索を行うことができない。上述したように、第1プロトコルは、車載装置2に生成された装置側データベース16を利用して楽曲検索を行うことが規定されたプロトコルであり、装置側データベース16の生成が正常に完了しなかった場合、楽曲検索の実行が制限されるからである。 As described above, the database generation unit 11 tries to generate the device-side database 16 according to the first protocol, but the generation of the device-side database 16 is not always completed normally. For example, the generation of the device-side database 16 may not be completed normally due to a shortage of free space in the database storage unit 15, a communication failure during an attempt to generate the device-side database 16, or the like. If the generation of the device-side database 16 is not completed normally, the music search cannot be performed by the first protocol thereafter. As described above, the first protocol is a protocol in which music search is performed using the device-side database 16 generated in the in-vehicle device 2, and the generation of the device-side database 16 is not completed normally. This is because the execution of the music search is restricted.

また、装置側データベース16の生成が正常に完了した場合であっても、データベース記憶部15へのアクセスエラー、データベース記憶部15の記憶媒体に関する障害、その他の原因により装置側データベース16を利用した楽曲検索が正常に行えない場合がある。このような場合も、第1プロトコルでは、楽曲検索を行うことができない。以上を踏まえ、車載装置2の楽曲検索部12は、以下の処理を実行する。 Further, even if the generation of the database 16 on the device side is completed normally, the music using the database 16 on the device side due to an access error to the database storage unit 15, a failure related to the storage medium of the database storage unit 15, or other causes. The search may not be performed normally. Even in such a case, the first protocol cannot perform a music search. Based on the above, the music search unit 12 of the in-vehicle device 2 executes the following processing.

すなわち、楽曲検索部12は、ユーザーから楽曲検索の開始の指示があった場合、装置側データベース16を利用した楽曲検索を正常に行うことができるか否かを判定し、正常に行うことができる場合、装置側データベース16を利用して楽曲検索を行う。一方、楽曲検索部12は、楽曲検索を正常に行うことができない場合、携帯端末3と通信し、携帯端末3に記憶された端末側データベース22を利用して楽曲検索を行う。以下、楽曲検索部12の処理について詳述する。 That is, when the user gives an instruction to start the music search, the music search unit 12 determines whether or not the music search using the device-side database 16 can be performed normally, and can perform the music search normally. In this case, the music search is performed using the device-side database 16. On the other hand, when the music search unit 12 cannot normally perform the music search, it communicates with the mobile terminal 3 and performs the music search using the terminal-side database 22 stored in the mobile terminal 3. Hereinafter, the processing of the music search unit 12 will be described in detail.

所望の楽曲の検索を望むユーザーは、楽曲検索部12の機能によりタッチスクリーン4に表示されるユーザーインターフェースに対してタッチ操作を行って、所定の検索キーを入力すると共に、楽曲検索の開始を指示する。楽曲検索部12は、ユーザーから楽曲検索の開始が指示されると、まず、装置側データベース16を利用した楽曲検索を正常に行うことができるか否かを判定する。楽曲検索部12は、装置側データベース16に正常にアクセス可能か否か、また、アクセス可能な場合には、装置側データベース16が楽曲検索に利用可能な状態か否か(データ構造が正常か否か、データに破損がないか等)を検証し、装置側データベース16を利用した楽曲検索を正常に行うことができるか否かを判定する。 A user who desires to search for a desired song performs a touch operation on the user interface displayed on the touch screen 4 by the function of the song search unit 12, inputs a predetermined search key, and instructs the start of the song search. do. When the user instructs the start of the music search, the music search unit 12 first determines whether or not the music search using the device-side database 16 can be normally performed. Whether or not the music search unit 12 can normally access the device-side database 16, and if so, whether or not the device-side database 16 can be used for music search (whether or not the data structure is normal). Or, whether or not the data is damaged, etc.) is verified, and it is determined whether or not the music search using the device-side database 16 can be performed normally.

装置側データベース16を利用した楽曲検索を正常に行うことができる場合、楽曲検索部12は、装置側データベース16を利用してユーザーにより入力された検索キーに基づく楽曲検索を実行する。楽曲検索の実行後、楽曲検索部12は、検索結果をディスプレー6に表示する。本実施形態では、楽曲検索部12は、検索により見つかった1つまたは複数の楽曲のそれぞれについて、ディスプレー6に楽曲情報を一覧表示する。例えば、楽曲検索部12は、検索により見つかった1つまたは複数の楽曲のそれぞれのアーティスト名、曲名、楽曲のジャンル等を楽曲ごとに区分して表示する。ユーザーは、再生を希望する楽曲が検索結果に含まれている場合には、タッチパネル7に対して所定のタッチ操作を行って所望の楽曲を選択する。 When the music search using the device-side database 16 can be normally performed, the music search unit 12 executes the music search based on the search key input by the user using the device-side database 16. After executing the music search, the music search unit 12 displays the search result on the display 6. In the present embodiment, the music search unit 12 displays a list of music information on the display 6 for each of one or a plurality of music found by the search. For example, the music search unit 12 displays the artist name, the song name, the genre of the music, and the like of one or a plurality of music found by the search separately for each music. When the search result includes a song that the user wants to play, the user performs a predetermined touch operation on the touch panel 7 to select the desired song.

一方、装置側データベース16を利用した楽曲検索を正常に行うことができない場合、楽曲検索部12は、以下の処理を実行する。すなわち、楽曲検索部12は、携帯端末3のアプリケーション実行部20と通信し、車載装置2と携帯端末3との間での通信に用いるプロトコルを第1プロトコルから第2プロトコルへと切り替えることを通知すると共に、アプリケーション実行部20と手続きに従って通信し、プロトコルを第1プロトコルから第2プロトコルへと切り替える。 On the other hand, when the music search using the device-side database 16 cannot be performed normally, the music search unit 12 executes the following processing. That is, the music search unit 12 communicates with the application execution unit 20 of the mobile terminal 3 and notifies that the protocol used for communication between the in-vehicle device 2 and the mobile terminal 3 is switched from the first protocol to the second protocol. At the same time, it communicates with the application execution unit 20 according to the procedure, and switches the protocol from the first protocol to the second protocol.

第2プロトコルは、第1プロトコルと同様、特定OSが搭載されたデバイス(携帯端末3)と、ホスト装置(車載装置2)との間での通信に用いるプロトコルであり、装置間通信を伴う所定の処理を実行するときの手順についても規定されている。装置間通信を伴う所定の処理には、楽曲検索に関する処理、および、圧縮画像データ(楽曲関連画像データを含む)に基づく画像の表示に関する処理が含まれている。楽曲検索に関する処理に関し、第2プロトコルでは、ホスト装置側で装置側データベース16を生成することなく、デバイスの端末側データベース22を利用して楽曲検索することが規定されている。また、圧縮画像データに基づく画像の表示に関する処理に関し、第2プロトコルでは、圧縮画像データの復号をデバイス側で行う旨、規定されている。 Similar to the first protocol, the second protocol is a protocol used for communication between a device (portable terminal 3) equipped with a specific OS and a host device (vehicle-mounted device 2), and is a predetermined protocol accompanied by inter-device communication. The procedure for executing the processing of is also specified. A predetermined process involving communication between devices includes a process related to music search and a process related to display of an image based on compressed image data (including music-related image data). Regarding the process related to the music search, the second protocol stipulates that the music search is performed using the terminal database 22 of the device without generating the device database 16 on the host device side. Further, regarding the process related to the display of the image based on the compressed image data, the second protocol stipulates that the compressed image data is decoded on the device side.

プロトコルを第2プロトコルへと切り替えた後、楽曲検索部12は、第2プロトコルに従って、アプリケーション実行部20と通信し、ユーザーが入力した検索キーに基づく楽曲検索を端末側データベース22を利用して実行する。より詳細には、楽曲検索部12は、アプリケーション実行部20に対して所定の制御コマンドを送信し、ユーザーが入力した検索キーに基づく楽曲検索をアプリケーション実行部20に実行させると共に、楽曲検索の検索結果を送信させる。楽曲検索部12は、アプリケーション実行部20から検索結果を取得し、装置側データベース16を利用して楽曲検索を行ったときと同様の方法で、検索結果をディスプレー6に表示する。検索結果を表示した後、楽曲検索部12は、プロトコルを第2プロトコルから第1プロトコルへと切り替える。 After switching the protocol to the second protocol, the music search unit 12 communicates with the application execution unit 20 according to the second protocol, and executes a music search based on the search key input by the user using the terminal database 22. do. More specifically, the music search unit 12 transmits a predetermined control command to the application execution unit 20, causes the application execution unit 20 to execute a music search based on the search key input by the user, and searches for the music search. Send the result. The music search unit 12 acquires the search result from the application execution unit 20, and displays the search result on the display 6 in the same manner as when the music search is performed using the device-side database 16. After displaying the search result, the music search unit 12 switches the protocol from the second protocol to the first protocol.

以上のように、本実施形態では、装置側データベース16の生成が正常に完了しなかった場合だけでなく、装置側データベース16の生成が正常に完了したもののデータベース記憶部15へのアクセスエラー等により装置側データベース16を利用した楽曲検索を正常に行うことができない場合も、プロトコルが第1プロトコルから第2プロトコルへと切り替えられた上で、端末側データベース22を利用した楽曲検索が実行される。このため、装置側データベース16を利用した楽曲検索を正常に行うことができない場合であっても、最終的に楽曲検索が行える状態となり、ユーザーの利便性が高い。 As described above, in the present embodiment, not only when the generation of the device-side database 16 is not completed normally, but also due to an access error to the database storage unit 15 although the generation of the device-side database 16 is completed normally. Even when the music search using the device-side database 16 cannot be normally performed, the music search using the terminal-side database 22 is executed after the protocol is switched from the first protocol to the second protocol. Therefore, even if the music search using the device-side database 16 cannot be performed normally, the music search can be finally performed, which is highly convenient for the user.

車載装置2の表示制御部13は、楽曲検索の検索結果から楽曲が選択された場合、その楽曲の楽曲関連画像データ(圧縮画像データ)の送信を携帯端末3に要求して取得する。表示制御部13は、取得した楽曲関連画像データを、実装されたデコーダーにより復号可能か否か判定し、復号可能な場合はデコーダーにより楽曲関連画像データを復号して表示画像データを生成し、表示画像データに基づく画像をディスプレー6に表示する。一方、復号不可能な場合は楽曲関連画像データの復号、および、復号により生成された表示画像データの送信を携帯端末3に要求し、当該要求に応じて受信した表示画像データに基づく画像をディスプレー6に表示する。以下、表示制御部13の処理について詳述する。なお、以下の説明では、ユーザーにより選択された楽曲を「選択楽曲」という。 When a music is selected from the search result of the music search, the display control unit 13 of the in-vehicle device 2 requests and acquires the music-related image data (compressed image data) of the music from the mobile terminal 3. The display control unit 13 determines whether or not the acquired music-related image data can be decoded by the mounted decoder, and if it can be decoded, the decoder decodes the music-related image data to generate and display the music-related image data. An image based on the image data is displayed on the display 6. On the other hand, if decoding is not possible, the mobile terminal 3 is requested to decode the music-related image data and transmit the display image data generated by the decoding, and the image based on the displayed image data received in response to the request is displayed. Display in 6. Hereinafter, the processing of the display control unit 13 will be described in detail. In the following description, the music selected by the user is referred to as "selected music".

ユーザーにより楽曲検索の検索結果から選択楽曲が選択されると、表示制御部13は、第1プロトコルに従って、選択楽曲の楽曲関連画像データの送信を携帯端末3のアプリケーション実行部20に要求する。上述したように、第1プロトコルは、圧縮画像データに基づく画像の表示に関する処理に関し、圧縮画像データの復号をホスト装置(車載装置2)側で行う旨規定されたプロトコルである。アプリケーション実行部20は、当該要求に応じて、端末側データベース22から選択楽曲の楽曲関連画像データを取得し、取得した楽曲関連画像データを復号することなく車載装置2の表示制御部13に送信する。 When the selected music is selected from the search results of the music search by the user, the display control unit 13 requests the application execution unit 20 of the mobile terminal 3 to transmit the music-related image data of the selected music according to the first protocol. As described above, the first protocol is a protocol that defines that the host device (vehicle-mounted device 2) decodes the compressed image data in relation to the processing related to the display of the image based on the compressed image data. In response to the request, the application execution unit 20 acquires music-related image data of the selected music from the terminal-side database 22 and transmits the acquired music-related image data to the display control unit 13 of the in-vehicle device 2 without decoding the acquired music-related image data. ..

表示制御部13は、アプリケーション実行部20から楽曲関連画像データを受信し、取得する。表示制御部13は、取得した楽曲関連画像データについて、車載装置2に実装されているデコーダー(複数のデコーダーが実装されている場合には、複数のデコーダーのうちの何れか)により復号可能か否かを判定する。例えば、表示制御部13は、デコーダーにより楽曲関連画像データの復号を試み、復号が正常に完了するか否かによって、復号可能か否かを判定する。 The display control unit 13 receives and acquires music-related image data from the application execution unit 20. Whether or not the display control unit 13 can decode the acquired music-related image data by the decoder mounted on the in-vehicle device 2 (if a plurality of decoders are mounted, any one of the plurality of decoders). Is determined. For example, the display control unit 13 attempts to decode the music-related image data by the decoder, and determines whether or not the decoding is possible depending on whether or not the decoding is normally completed.

復号可能な場合、表示制御部13は、デコーダーにより選択楽曲の楽曲関連画像データを復号し、表示画像データを生成する。表示画像データは、画素ごとに色に関する情報を保持する所定の解像度のビットマップデータである。表示制御部13は、生成した表示画像データを画像バッファーに展開し、表示画像データに基づく画像をディスプレー6に表示する。 If it can be decoded, the display control unit 13 decodes the music-related image data of the selected music by the decoder and generates the display image data. The display image data is bitmap data having a predetermined resolution that holds information about colors for each pixel. The display control unit 13 expands the generated display image data into an image buffer, and displays an image based on the display image data on the display 6.

一方、楽曲関連画像データの圧縮方式に対応するデコーダーが車載装置2に実装されておらず、車載装置2に実装されたデコーダーでは楽曲関連画像データの復号が不可能な場合もある。このような場合、圧縮画像データの復号をホスト装置(車載装置2)側で行うことが規定されている第1プロトコルでは、楽曲関連画像データに基づく画像がディスプレー6に表示されない。以上を踏まえ、このような場合、表示制御部13は、以下の処理を実行する。 On the other hand, a decoder corresponding to the compression method of the music-related image data is not mounted on the vehicle-mounted device 2, and the decoder mounted on the vehicle-mounted device 2 may not be able to decode the music-related image data. In such a case, in the first protocol in which the host device (vehicle-mounted device 2) is required to decode the compressed image data, the image based on the music-related image data is not displayed on the display 6. Based on the above, in such a case, the display control unit 13 executes the following processing.

すなわち、表示制御部13は、携帯端末3のアプリケーション実行部20と通信し、車載装置2と携帯端末3との間での通信に用いるプロトコルを第1プロトコルから第2プロトコルへと切り替えることを通知すると共に、アプリケーション実行部20と手続きに従って通信し、プロトコルを第1プロトコルから第2プロトコルへと切り替える。次いで、表示制御部13は、第2プロトコルに従って、選択楽曲の楽曲関連画像データの復号、および、復号により生成された表示画像データの送信を携帯端末3のアプリケーション実行部20に要求する。 That is, the display control unit 13 communicates with the application execution unit 20 of the mobile terminal 3 and notifies that the protocol used for communication between the in-vehicle device 2 and the mobile terminal 3 is switched from the first protocol to the second protocol. At the same time, it communicates with the application execution unit 20 according to the procedure, and switches the protocol from the first protocol to the second protocol. Next, the display control unit 13 requests the application execution unit 20 of the mobile terminal 3 to decode the music-related image data of the selected music and transmit the display image data generated by the decoding according to the second protocol.

アプリケーション実行部20は、当該要求に応じて、端末側データベース22から選択楽曲の楽曲関連画像データを取得する。アプリケーション実行部20は、取得した楽曲関連画像データを携帯端末3に実装されたデコーダーにより復号可能か否かを判定する。復号可能な場合、アプリケーション実行部20は、楽曲関連画像データをデコーダーにより復号して表示画像データを生成し、表示制御部13に送信する。表示制御部13は、アプリケーション実行部20から表示画像データを受信し、取得する。表示制御部13は、取得した表示画像データを画像バッファーに展開し、ディスプレー6に表示画像データに基づく画像を表示する。 The application execution unit 20 acquires music-related image data of the selected music from the terminal-side database 22 in response to the request. The application execution unit 20 determines whether or not the acquired music-related image data can be decoded by the decoder mounted on the mobile terminal 3. If it can be decoded, the application execution unit 20 decodes the music-related image data by the decoder to generate the display image data, and transmits the display image data to the display control unit 13. The display control unit 13 receives and acquires display image data from the application execution unit 20. The display control unit 13 expands the acquired display image data into an image buffer, and displays an image based on the display image data on the display 6.

ここで、本実施形態に係る携帯端末3は、特定OSが搭載された端末であるが、携帯端末3は、多くの人間に汎用的に使用されることが前提の端末であり、車両に搭載される専用機の車載装置2と比較して、実装されたデコーダーの種類が充実している。このため、車載装置2により楽曲関連画像データの復号ができない場合であっても、携帯端末3では高い確率で楽曲関連画像データの復号が可能である。しかしながら、携帯端末3のデコーダーでも楽曲関連画像データを復号できない場合もある。このような場合は、携帯端末3は、楽曲関連画像データが復号できなかった旨、表示制御部13に通知する。表示制御部13は、当該通知を受け付けた場合、楽曲関連画像データに基づく画像の表示を行わない。 Here, the mobile terminal 3 according to the present embodiment is a terminal equipped with a specific OS, but the mobile terminal 3 is a terminal that is premised on being used universally by many humans and is mounted on a vehicle. Compared with the in-vehicle device 2 of the dedicated machine, the types of mounted decoders are substantial. Therefore, even if the in-vehicle device 2 cannot decode the music-related image data, the mobile terminal 3 can decode the music-related image data with a high probability. However, even the decoder of the mobile terminal 3 may not be able to decode the music-related image data. In such a case, the mobile terminal 3 notifies the display control unit 13 that the music-related image data could not be decoded. When the display control unit 13 receives the notification, the display control unit 13 does not display the image based on the music-related image data.

以上のように、本実施形態では、選択楽曲の楽曲関連画像データの圧縮方式に対応するデコーダーが車載装置2に実装されておらず、第1プロトコルでは楽曲関連画像データに基づく画像のディスプレー6への表示ができない場合、プロトコルが第1プロトコルから第2プロトコルへと切り替えられた上で、携帯端末3側で復号が実行され、携帯端末3から車載装置2へと表示画像データが送信される。車載装置2の表示制御部13は、受信した表示画像データに基づいて画像を表示する。この構成によれば、選択楽曲の楽曲関連画像データの圧縮方式に対応するデコーダーが車載装置2に実装されていない場合であっても、最終的に楽曲関連画像データに基づく画像の表示が高い確率で行われることになり、ユーザーの利便性が高い。 As described above, in the present embodiment, the decoder corresponding to the compression method of the music-related image data of the selected music is not mounted on the in-vehicle device 2, and in the first protocol, the image display 6 based on the music-related image data is displayed. If the display cannot be performed, the protocol is switched from the first protocol to the second protocol, decoding is executed on the mobile terminal 3 side, and the display image data is transmitted from the mobile terminal 3 to the in-vehicle device 2. The display control unit 13 of the in-vehicle device 2 displays an image based on the received display image data. According to this configuration, even if a decoder corresponding to the compression method of the music-related image data of the selected music is not mounted on the in-vehicle device 2, the probability that the image based on the music-related image data is finally displayed is high. It will be done in, and the convenience of the user is high.

なお、表示制御部13は、上述した機能に加えて以下の機能を有する。すなわち表示制御部13は、楽曲関連画像データにかかわらず、携帯端末3に記憶されている圧縮画像データに基づく画像の表示が指示された場合、第1プロトコルに従って、圧縮画像データの送信を要求し、圧縮画像データを取得する。表示制御部13は、取得した圧縮画像データを、車載装置2に実装されたデコーダーにより復号可能か否か判定し、復号可能な場合はデコーダーにより圧縮画像データを復号して表示画像データを生成し、表示画像データに基づく画像をディスプレー6に表示する。一方、表示制御部13は、復号不可能な場合は、プロトコルを第1プロトコルから第2プロトコルに切り替え、圧縮画像データの復号、および、復号により生成された表示画像データの送信を携帯端末3に要求し、当該要求に応じて受信した表示画像データに基づく画像をディスプレー6に表示する。この機能によれば、楽曲関連画像データにかかわらず、圧縮画像データの圧縮方式に対応するデコーダーが車載装置2に実装されていない場合であっても、最終的に圧縮画像データに基づく画像の表示が高い確率で行われることになり、ユーザーの利便性が高い。 The display control unit 13 has the following functions in addition to the above-mentioned functions. That is, the display control unit 13 requests the transmission of the compressed image data according to the first protocol when the display of the image based on the compressed image data stored in the mobile terminal 3 is instructed regardless of the music-related image data. , Get compressed image data. The display control unit 13 determines whether or not the acquired compressed image data can be decoded by the decoder mounted on the in-vehicle device 2, and if it can be decoded, the compressed image data is decoded by the decoder to generate the display image data. , The image based on the display image data is displayed on the display 6. On the other hand, if decoding is not possible, the display control unit 13 switches the protocol from the first protocol to the second protocol, decodes the compressed image data, and transmits the display image data generated by the decoding to the mobile terminal 3. An image based on the display image data requested and received in response to the request is displayed on the display 6. According to this function, regardless of the music-related image data, even if a decoder corresponding to the compression method of the compressed image data is not mounted on the in-vehicle device 2, the image finally displayed based on the compressed image data. Will be performed with a high probability, which is highly convenient for users.

車載装置2の楽曲再生部14は、楽曲検索部12による楽曲検索の検索結果から選択楽曲が選択された場合、携帯端末3のアプリケーション実行部20と通信し、音声処理装置5を制御して、選択楽曲の楽曲音声データをストリーミング再生等の手段により再生する。 When the selected music is selected from the search result of the music search by the music search unit 12, the music reproduction unit 14 of the in-vehicle device 2 communicates with the application execution unit 20 of the mobile terminal 3 to control the voice processing device 5. The music audio data of the selected music is played by means such as streaming playback.

次に、本実施形態に係る車載装置2の動作例についてフローチャートを用いて説明する。図2は、携帯端末3の特定アプリが立ち上がり、アプリケーション実行部20から車載装置2に対して第1プロトコルに従って楽曲情報の送信が行われた場合の車載装置2の動作例を示すフローチャートである。 Next, an operation example of the in-vehicle device 2 according to the present embodiment will be described with reference to a flowchart. FIG. 2 is a flowchart showing an operation example of the in-vehicle device 2 when the specific application of the mobile terminal 3 is started up and the music information is transmitted from the application execution unit 20 to the in-vehicle device 2 according to the first protocol.

図2に示すように、データベース生成部11は、第1プロトコルに従って携帯端末3のアプリケーション実行部20と通信し、アプリケーション実行部20から受信する楽曲情報に基づいて装置側データベース16を生成する(ステップSA1)。データベース生成部11による装置側データベース16の生成の試行後、楽曲検索部12は、ユーザーにより楽曲検索の開始の指示があったか否かを監視する(ステップSA2)。当該指示があった場合(ステップSA2:YES)、楽曲検索部12は、装置側データベース16を利用した楽曲検索を正常に行うことができるか否かを判定する(ステップSA3)。 As shown in FIG. 2, the database generation unit 11 communicates with the application execution unit 20 of the mobile terminal 3 according to the first protocol, and generates the device-side database 16 based on the music information received from the application execution unit 20 (step). SA1). After the attempt to generate the device-side database 16 by the database generation unit 11, the music search unit 12 monitors whether or not the user has instructed to start the music search (step SA2). When the instruction is given (step SA2: YES), the music search unit 12 determines whether or not the music search using the device-side database 16 can be performed normally (step SA3).

正常に行うことができる場合(ステップSA3:YES)、楽曲検索部12は、装置側データベース16を利用してユーザーにより入力された検索キーに基づく楽曲検索を実行する(ステップSA4)。次いで、楽曲検索部12は、検索結果をタッチスクリーン4に表示する(ステップSA5)。ステップSA5の処理後、処理手順がステップSA10へ移行する。 If it can be performed normally (step SA3: YES), the music search unit 12 executes a music search based on the search key input by the user using the device-side database 16 (step SA4). Next, the music search unit 12 displays the search result on the touch screen 4 (step SA5). After the processing of step SA5, the processing procedure shifts to step SA10.

一方、ステップSA3において、装置側データベース16を利用した楽曲検索を正常に行うことができないと判定した場合(ステップSA3:NO)、楽曲検索部12は、プロトコルを第1プロトコルから第2プロトコルへと切り替える(ステップSA6)。次いで、楽曲検索部12は、第2プロトコルに従って、アプリケーション実行部20と通信し、端末側データベース22を利用してユーザーが入力した検索キーに基づく楽曲検索を実行する(ステップSA7)。次いで、楽曲検索部12は、検索結果をタッチスクリーン4に表示する(ステップSA8)。次いで、楽曲検索部12は、プロトコルを第1プロトコルから第2プロトコルへと切り替える(ステップSA9)。ステップSA10の処理後、処理手順がステップSA10へ移行する。 On the other hand, when it is determined in step SA3 that the music search using the device-side database 16 cannot be performed normally (step SA3: NO), the music search unit 12 changes the protocol from the first protocol to the second protocol. Switch (step SA6). Next, the music search unit 12 communicates with the application execution unit 20 according to the second protocol, and executes a music search based on the search key input by the user using the terminal-side database 22 (step SA7). Next, the music search unit 12 displays the search result on the touch screen 4 (step SA8). Next, the music search unit 12 switches the protocol from the first protocol to the second protocol (step SA9). After the processing of step SA10, the processing procedure shifts to step SA10.

ステップSA10において、表示制御部13は、ユーザーにより楽曲が選択されたか否かを監視する(ステップSA10)。ユーザーにより楽曲が選択された場合(ステップSA10:YES)、表示制御部13は、第1プロトコルに従って、選択された楽曲の楽曲関連画像データの送信を携帯端末3のアプリケーション実行部20に要求する(ステップSA11)。次いで、表示制御部13は、当該要求に応じて、アプリケーション実行部20から楽曲関連画像データを受信し、取得する(ステップSA12)。次いで、表示制御部13は、楽曲関連画像データが、車載装置2に実装されているデコーダーにより復号可能か否かを判定する(ステップSA13)。 In step SA10, the display control unit 13 monitors whether or not the music is selected by the user (step SA10). When a music is selected by the user (step SA10: YES), the display control unit 13 requests the application execution unit 20 of the mobile terminal 3 to transmit the music-related image data of the selected music according to the first protocol (step SA10: YES). Step SA11). Next, the display control unit 13 receives and acquires music-related image data from the application execution unit 20 in response to the request (step SA12). Next, the display control unit 13 determines whether or not the music-related image data can be decoded by the decoder mounted on the in-vehicle device 2 (step SA13).

復号可能な場合(ステップSA13:YES)、表示制御部13は、選択された楽曲の楽曲関連画像データをデコーダーにより復号し、表示画像データを生成する(ステップSA14)。次いで、表示制御部13は、生成した表示画像データに基づく画像をディスプレー6に表示する(ステップSA15)。ステップSA15の処理後、処理手順がステップSA20へ移行する。 When the decoding is possible (step SA13: YES), the display control unit 13 decodes the music-related image data of the selected music by the decoder and generates the display image data (step SA14). Next, the display control unit 13 displays an image based on the generated display image data on the display 6 (step SA15). After the processing of step SA15, the processing procedure shifts to step SA20.

一方、ステップSA13において復号が不可能であると判定した場合(ステップSA13:NO)、表示制御部13は、プロトコルを第1プロトコルから第2プロトコルへと切り替える(ステップSA16)。次いで、表示制御部13は、第2プロトコルに従って、選択楽曲の楽曲関連画像データの復号、および、復号により生成された表示画像データの送信を携帯端末3のアプリケーション実行部20に要求する(ステップSA17)。次いで、表示制御部13は、携帯端末3のアプリケーション実行部20から表示画像データを受信し、取得する(ステップSA18)。次いで、表示制御部13は、生成した表示画像データを画像バッファーに展開し、表示画像データに基づく画像をディスプレー6に表示する(ステップSA19)。ステップSA19の処理後、処理手順がステップSA20へ移行する。ステップSA20において、楽曲再生部14は、携帯端末3のアプリケーション実行部20と通信し、音声処理装置5を制御して、楽曲検索部12による楽曲検索の検索結果から選択された楽曲の楽曲音声データを再生する(ステップSA20)。 On the other hand, when it is determined in step SA13 that decoding is impossible (step SA13: NO), the display control unit 13 switches the protocol from the first protocol to the second protocol (step SA16). Next, the display control unit 13 requests the application execution unit 20 of the mobile terminal 3 to decode the music-related image data of the selected music and transmit the display image data generated by the decoding according to the second protocol (step SA17). ). Next, the display control unit 13 receives and acquires display image data from the application execution unit 20 of the mobile terminal 3 (step SA18). Next, the display control unit 13 expands the generated display image data into an image buffer, and displays an image based on the display image data on the display 6 (step SA19). After the processing of step SA19, the processing procedure shifts to step SA20. In step SA20, the music reproduction unit 14 communicates with the application execution unit 20 of the mobile terminal 3, controls the voice processing device 5, and music voice data of the music selected from the search result of the music search by the music search unit 12. (Step SA20).

<変形例>
次に、上記実施形態の変形例について説明する。上述した実施形態では、携帯端末3に記憶された圧縮画像データ(楽曲関連画像データを含む)に基づく画像を表示する際、表示制御部13は、以下の処理を行っていた。すなわち、表示制御部13は、第1プロトコルに従って、携帯端末3から圧縮画像データを取得する。そして、表示制御部13は、車載装置2に実装されたデコーダーでは圧縮画像データを復号できない場合、プロトコルを第2プロトコルに切り替え、表示画像データを受信し、表示画像データに基づいて画像を表示する。この点に関し、変形例に係る表示制御部13は、以下の処理を実行する。
<Modification example>
Next, a modified example of the above embodiment will be described. In the above-described embodiment, when displaying an image based on compressed image data (including music-related image data) stored in the mobile terminal 3, the display control unit 13 performs the following processing. That is, the display control unit 13 acquires compressed image data from the mobile terminal 3 according to the first protocol. Then, when the decoder mounted on the in-vehicle device 2 cannot decode the compressed image data, the display control unit 13 switches the protocol to the second protocol, receives the display image data, and displays the image based on the display image data. .. Regarding this point, the display control unit 13 according to the modified example executes the following processing.

すなわち、携帯端末3に記憶された圧縮画像データに基づく画像を表示する必要が生じた場合、表示制御部13は、まず、第2プロトコルに従って、圧縮画像データの復号、および、復号により生成された表示画像データの送信を要求する。従って、本変形例では、現状のプロトコルが第1プロトコルの場合、表示制御部13は、プロトコルを第1プロトコルから第2プロトコルへと切り替え、上記要求を行う。 That is, when it becomes necessary to display an image based on the compressed image data stored in the mobile terminal 3, the display control unit 13 is first generated by decoding and decoding the compressed image data according to the second protocol. Request the transmission of display image data. Therefore, in this modification, when the current protocol is the first protocol, the display control unit 13 switches the protocol from the first protocol to the second protocol and makes the above request.

携帯端末3のアプリケーション実行部20は、圧縮画像データを取得し、携帯端末3に実装されたデコーダーにより圧縮画像データの復号可能か否かを判定する。復号可能な場合、携帯端末3のアプリケーション実行部20は、圧縮画像データを復号して表示画像データを生成し、車載装置2の表示制御部13に送信する。表示制御部13は、表示画像データに基づいて画像を表示する。 The application execution unit 20 of the mobile terminal 3 acquires the compressed image data, and determines whether or not the compressed image data can be decoded by the decoder mounted on the mobile terminal 3. When it can be decoded, the application execution unit 20 of the mobile terminal 3 decodes the compressed image data to generate the display image data, and transmits the compressed image data to the display control unit 13 of the in-vehicle device 2. The display control unit 13 displays an image based on the displayed image data.

一方、復号不可能な場合、携帯端末3のアプリケーション実行部20は、圧縮画像データの復号ができない旨、車載装置2の表示制御部13に通知する。表示制御部13は、当該通知を受け付けると、携帯端末3のアプリケーション実行部20と通信し、車載装置2と携帯端末3との間での通信に用いるプロトコルを第2プロトコルから第1プロトコルへと切り替えることを通知すると共に、アプリケーション実行部20と手続きに従って通信し、プロトコルを第2プロトコルから第1プロトコルへと切り替える。 On the other hand, when decoding is not possible, the application execution unit 20 of the mobile terminal 3 notifies the display control unit 13 of the in-vehicle device 2 that the compressed image data cannot be decoded. Upon receiving the notification, the display control unit 13 communicates with the application execution unit 20 of the mobile terminal 3 and changes the protocol used for communication between the in-vehicle device 2 and the mobile terminal 3 from the second protocol to the first protocol. It notifies the switching and communicates with the application execution unit 20 according to the procedure, and switches the protocol from the second protocol to the first protocol.

プロトコルの切り替え後、表示制御部13は、第1プロトコルに従って、圧縮画像データの送信を要求し、圧縮画像データを取得する。表示制御部13は、取得した圧縮画像データの復号が可能か否かを判定する。復号が可能な場合、表示制御部13は、圧縮画像データを復号して生成した表示画像データに基づいて画像を表示する。圧縮画像データの復号が不可能である場合、表示制御部13は、圧縮画像データに基づく画像の表示を行わない。 After switching the protocol, the display control unit 13 requests the transmission of the compressed image data and acquires the compressed image data according to the first protocol. The display control unit 13 determines whether or not the acquired compressed image data can be decoded. When decoding is possible, the display control unit 13 displays an image based on the display image data generated by decoding the compressed image data. When the compressed image data cannot be decoded, the display control unit 13 does not display the image based on the compressed image data.

本変形例によれば、上記実施形態と同様、携帯端末3のデコーダーと車載装置2のデコーダーの双方で圧縮画像データの復号ができない場合以外は、圧縮画像データに基づく画像を表示することが可能であり、ユーザーの利便性を向上できる。 According to this modification, it is possible to display an image based on the compressed image data except when the compressed image data cannot be decoded by both the decoder of the mobile terminal 3 and the decoder of the in-vehicle device 2 as in the above embodiment. Therefore, the convenience of the user can be improved.

上記実施形態は、何れも本発明を実施するにあたっての具体化の一例を示したものに過ぎず、これによって本発明の技術的範囲が限定的に解釈されてはならないものである。すなわち、本発明はその要旨、またはその主要な特徴から逸脱することなく、様々な形で実施することができる。 Each of the above embodiments is merely an example of the embodiment of the present invention, and the technical scope of the present invention should not be construed in a limited manner by this. That is, the present invention can be implemented in various forms without departing from its gist or its main features.

例えば、上記実施形態では、楽曲検索に使用するデータベースの変更や、圧縮画像データを復号(デコード)する装置の変更は、プロトコルの切り替えを伴って行われていた。しかしながら、上記実施形態で例示した第1プロトコルや第2プロトコルと異なるプロトコルにおいて、プロトコルの切り替えを伴わず、各処理が行われてもよい。 For example, in the above embodiment, the database used for music search and the device for decoding the compressed image data are changed with the switching of the protocol. However, in a protocol different from the first protocol and the second protocol exemplified in the above embodiment, each process may be performed without switching the protocol.

また、上記実施形態では、楽曲検索部12は、データベース生成部11による装置側データベース16の生成が正常に完了しなかった場合は、プロトコルを第1プロトコルから第2プロトコルに切り替え、端末側データベース22を利用して楽曲検索を実行した。この点に関し、装置側データベース16の生成が正常に完了しなかった場合であっても、構築された部分を用いて楽曲検索を行うことが可能な仕様の場合には、楽曲検索部12が、装置側データベース16の構築された部分を用いて楽曲検索を正常に行うことができない場合に、プロトコルを第1プロトコルから第2プロトコルへと切り替える構成でもよい。 Further, in the above embodiment, the music search unit 12 switches the protocol from the first protocol to the second protocol when the generation of the device-side database 16 by the database generation unit 11 is not completed normally, and the terminal-side database 22. I ran a song search using. Regarding this point, even if the generation of the device-side database 16 is not completed normally, in the case of the specification that the music search can be performed using the constructed part, the music search unit 12 may perform the music search unit 12. When the music search cannot be normally performed using the constructed portion of the device-side database 16, the protocol may be switched from the first protocol to the second protocol.

また、上記実施形態では、車両に搭載された車載装置2が特許請求の範囲の楽曲検索装置であるものとして発明の実施形態を説明したが、楽曲検索装置は、車両に搭載された装置である必要はない。また、ユーザーが車両に持ち込む携帯端末3が特許請求の範囲の端末であるものとして発明の実施形態を説明したが、端末は、ユーザーが車両に持ち込む携帯端末3である必要はない。 Further, in the above embodiment, the embodiment of the invention has been described assuming that the in-vehicle device 2 mounted on the vehicle is a music search device within the scope of claims, but the music search device is a device mounted on the vehicle. There is no need. Further, although the embodiment of the invention has been described assuming that the mobile terminal 3 brought into the vehicle by the user is a terminal within the scope of claims, the terminal does not have to be the mobile terminal 3 brought into the vehicle by the user.

1 楽曲検索システム
2 車載装置(楽曲検索装置)
3 携帯端末(端末)
6 ディスプレー(表示装置)
11 データベース生成部
12 楽曲検索部
13 表示制御部
16 装置側データベース
22 端末側データベース
1 Music search system 2 In-vehicle device (music search device)
3 Mobile terminal (terminal)
6 Display (display device)
11 Database generation unit 12 Music search unit 13 Display control unit 16 Device side database 22 Terminal side database

Claims (6)

楽曲ごとの楽曲情報を管理する端末側データベースが記憶された端末と通信可能な楽曲検索装置であって、
前記端末から前記楽曲情報を受信し、受信した前記楽曲情報に基づいて装置側データベースを生成するデータベース生成部と、
前記装置側データベースを利用した楽曲検索を正常に行うことができるか否かを判定し、正常に行うことができる場合、前記装置側データベースを利用して楽曲検索を行う一方、正常に行うことができない場合、前記端末と通信し前記端末に記憶された前記端末側データベースを利用して楽曲検索を行う楽曲検索部と、
を備えることを特徴とする楽曲検索装置。
A music search device that can communicate with a terminal that stores a terminal-side database that manages music information for each music.
A database generation unit that receives the music information from the terminal and generates a device-side database based on the received music information.
It is determined whether or not the music search using the device-side database can be performed normally, and if it can be performed normally, the music search can be performed normally while using the device-side database. If this is not possible, a music search unit that communicates with the terminal and searches for music using the terminal-side database stored in the terminal, and a music search unit.
A music search device characterized by being equipped with.
圧縮画像データの送信を前記端末に要求して取得し、取得した前記圧縮画像データを復号可能か否か判定し、復号可能な場合は前記圧縮画像データを復号して表示画像データを生成し、前記表示画像データに基づく画像を表示装置に表示する一方、復号不可能な場合は前記圧縮画像データの復号、および、復号により生成された前記表示画像データの送信を前記端末に要求し、当該要求に応じて受信した前記表示画像データに基づく画像を前記表示装置に表示する表示制御部を更に備えることを特徴とする請求項1に記載の楽曲検索装置。 The terminal is requested to transmit the compressed image data and acquired, it is determined whether or not the acquired compressed image data can be decoded, and if it can be decoded, the compressed image data is decoded to generate display image data. While displaying an image based on the displayed image data on the display device, if decoding is not possible, the terminal is requested to decode the compressed image data and transmit the displayed image data generated by the decoding, and the request is made. The music search device according to claim 1, further comprising a display control unit that displays an image based on the display image data received in response to the display device on the display device. 前記表示制御部は、
前記楽曲検索部による楽曲検索の検索結果から一の楽曲が選択された場合、当該一の楽曲に関する前記圧縮画像データの送信を前記端末に要求して取得し、取得した当該一の楽曲に関する前記圧縮画像データを復号可能か否か判定し、復号可能な場合は当該一の楽曲に関する前記圧縮画像データを復号して前記表示画像データを生成し、前記表示画像データに基づく画像を前記表示装置に表示する一方、復号不可能な場合は当該一の楽曲に関する前記圧縮画像データの復号、および、復号により生成された前記表示画像データの送信を前記端末に要求し、当該要求に応じて受信した前記表示画像データに基づく画像を前記表示装置に表示する
ことを特徴とする請求項2に記載の楽曲検索装置。
The display control unit
When one song is selected from the search result of the song search by the song search unit, the terminal is requested to transmit the compressed image data of the one song, and the acquired one song is compressed. It is determined whether or not the image data can be decoded, and if it can be decoded, the compressed image data related to the one music is decoded to generate the display image data, and the image based on the display image data is displayed on the display device. On the other hand, if decoding is not possible, the terminal is requested to decode the compressed image data related to the one music and to transmit the display image data generated by the decoding, and the display received in response to the request. The music search device according to claim 2, wherein an image based on image data is displayed on the display device.
圧縮画像データの復号、および、復号により生成された表示画像データの送信を前記端末に要求し、当該要求に応じて前記表示画像データを受信した場合は、受信した前記表示画像データに基づいて表示装置に画像を表示する一方、前記端末により前記圧縮画像データの復号が不可能な旨の通知があった場合は、前記圧縮画像データの送信を要求して取得し、取得した前記圧縮画像データを復号して前記表示画像データを生成し、生成した前記表示画像データに基づく画像を前記表示装置に表示する表示制御部を更に備えることを特徴とする請求項1に記載の楽曲検索装置。 When the terminal is requested to decode the compressed image data and transmit the display image data generated by the decoding and the display image data is received in response to the request, the display image data is received based on the received display image data. While the image is displayed on the display device, when the terminal notifies that the compressed image data cannot be decoded, the compressed image data is requested to be transmitted and acquired, and the acquired compressed image data is obtained. The music search device according to claim 1, further comprising a display control unit that decodes the data to generate the display image data and displays the generated image based on the display image data on the display device. 楽曲ごとの楽曲情報を管理する端末側データベースが記憶された端末と、前記端末と通信可能な楽曲検索装置とを備える楽曲検索システムであって、
前記端末は、
前記端末側データベースで管理されている前記楽曲情報を送信する処理実行部を有し、
前記楽曲検索装置は、
前記端末から前記楽曲情報を受信し、受信した前記楽曲情報に基づいて装置側データベースを生成するデータベース生成部と、
前記装置側データベースを利用した楽曲検索を正常に行うことができるか否かを判定し、正常に行うことができる場合、前記装置側データベースを利用して楽曲検索を行う一方、正常に行うことができない場合、前記端末と通信し前記端末に記憶された前記端末側データベースを利用して楽曲検索を行う楽曲検索部とを有する
ことを特徴とする楽曲検索システム。
A music search system including a terminal that stores a terminal-side database that manages music information for each music and a music search device that can communicate with the terminal.
The terminal is
It has a processing execution unit that transmits the music information managed by the terminal-side database.
The music search device is
A database generation unit that receives the music information from the terminal and generates a device-side database based on the received music information.
It is determined whether or not the music search using the device-side database can be performed normally, and if it can be performed normally, the music search can be performed normally while using the device-side database. A music search system characterized by having a music search unit that communicates with the terminal and searches for music using the database on the terminal side stored in the terminal.
楽曲ごとの楽曲情報を管理する端末側データベースが記憶された端末と通信可能な楽曲検索装置による楽曲検索方法であって、
前記楽曲検索装置のデータベース生成部が、前記端末から前記楽曲情報を受信し、受信した前記楽曲情報に基づいて装置側データベースを生成するステップと、
前記楽曲検索装置の楽曲検索部が、前記装置側データベースを利用した楽曲検索を正常に行うことができるか否かを判定し、正常に行うことができる場合、前記装置側データベースを利用して楽曲検索を行う一方、正常に行うことができない場合、前記端末と通信し前記端末に記憶された前記端末側データベースを利用して楽曲検索を行うステップと、
を備えることを特徴とする楽曲検索方法。
It is a music search method using a music search device that can communicate with a terminal that stores a terminal database that manages music information for each music.
A step in which the database generation unit of the music search device receives the music information from the terminal and generates a database on the device side based on the received music information.
The music search unit of the music search device determines whether or not the music search using the device-side database can be performed normally, and if it can be performed normally, the music search unit uses the device-side database to perform music. On the other hand, if the search cannot be performed normally, a step of communicating with the terminal and performing a music search using the terminal-side database stored in the terminal, and
A music search method characterized by being equipped with.
JP2018079636A 2018-04-18 2018-04-18 Music search device, music search system and music search method Active JP7051219B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2018079636A JP7051219B2 (en) 2018-04-18 2018-04-18 Music search device, music search system and music search method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018079636A JP7051219B2 (en) 2018-04-18 2018-04-18 Music search device, music search system and music search method

Publications (2)

Publication Number Publication Date
JP2019191629A JP2019191629A (en) 2019-10-31
JP7051219B2 true JP7051219B2 (en) 2022-04-11

Family

ID=68390334

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018079636A Active JP7051219B2 (en) 2018-04-18 2018-04-18 Music search device, music search system and music search method

Country Status (1)

Country Link
JP (1) JP7051219B2 (en)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006031180A (en) 2004-07-13 2006-02-02 Konica Minolta Photo Imaging Inc Control program and storage medium
JP2017204113A (en) 2016-05-11 2017-11-16 アルパイン株式会社 Electronic device, database construction method and system
JP2018045550A (en) 2016-09-16 2018-03-22 アルパイン株式会社 Electronic device and music reproduction system

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006031180A (en) 2004-07-13 2006-02-02 Konica Minolta Photo Imaging Inc Control program and storage medium
JP2017204113A (en) 2016-05-11 2017-11-16 アルパイン株式会社 Electronic device, database construction method and system
JP2018045550A (en) 2016-09-16 2018-03-22 アルパイン株式会社 Electronic device and music reproduction system

Also Published As

Publication number Publication date
JP2019191629A (en) 2019-10-31

Similar Documents

Publication Publication Date Title
US11115853B2 (en) Wireless network system and wireless communication method
KR101511881B1 (en) Adaptive media content scrubbing on a remote device
JP3890856B2 (en) Wireless audio equipment
EP2075719B1 (en) Content providing method, content playback method, portable wireless terminal, and content playback apparatus
JP2004080765A (en) Amusement system for vehicle
JP2005317177A (en) Device and method for recording/reproducing
JP2005236560A (en) Vehicle communications system and gateway device
JP6473054B2 (en) Storage device, information processing system, and program
JP4993491B2 (en) Music information display method and interface device
JP4003788B2 (en) Wireless audio equipment
US20150189002A1 (en) Information processing apparatus, information processing method and program
JP4881008B2 (en) COMMUNICATION DEVICE, COMMUNICATION SYSTEM, AND COMMUNICATION METHOD
JP7051219B2 (en) Music search device, music search system and music search method
JP4578831B2 (en) Display device capable of recording / reproducing video signal and / or audio signal and method of operating the same
JP5626794B2 (en) In-vehicle device system and in-vehicle device and portable terminal constituting the in-vehicle device system
JP2009037320A (en) Information processor and control method for information processor
KR20110047390A (en) Method, apparatus and system for managing drm contents
JP2005129110A (en) Audio system and content output method
JP4935386B2 (en) Content playback method and content playback system
JP2006094448A (en) Music playback apparatus, mobile telephone equipment, music playback system, and method of operating them
KR20140038791A (en) The method of playing multimedia data and the multimedia playing apparatus thereof
JP7004039B2 (en) In-vehicle device, in-vehicle device control method, control program, terminal device, terminal device control method and control program
JP2006215937A (en) Contents providing method, program of contents providing device, recording medium with program of contents providing device recorded and contents providing device
JP2007028142A (en) Apparatus and method for managing contents, reproducing apparatus, its controlling method, and program
JP2004318607A (en) Information processing device and method, program, and storage medium

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210108

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20211117

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211209

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220113

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220329

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220329

R150 Certificate of patent or registration of utility model

Ref document number: 7051219

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150