JP2019191629A - Music retrieval apparatus, music retrieval system and music retrieval method - Google Patents
Music retrieval apparatus, music retrieval system and music retrieval method Download PDFInfo
- Publication number
- JP2019191629A JP2019191629A JP2018079636A JP2018079636A JP2019191629A JP 2019191629 A JP2019191629 A JP 2019191629A JP 2018079636 A JP2018079636 A JP 2018079636A JP 2018079636 A JP2018079636 A JP 2018079636A JP 2019191629 A JP2019191629 A JP 2019191629A
- Authority
- JP
- Japan
- Prior art keywords
- music
- image data
- terminal
- search
- music search
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
Description
本発明は、楽曲検索装置、楽曲検索システムおよび楽曲検索方法に関し、特に、楽曲情報を管理するデータベースが記憶された端末と接続可能な楽曲検索装置、当該楽曲検索装置と当該端末とを含んで構成される楽曲検索システム、および、当該楽曲検索装置による楽曲検索方法に用いて好適なものである。 The present invention relates to a music search device, a music search system, and a music search method, and in particular, includes a music search device that can be connected to a terminal in which a database for managing music information is stored, the music search device, and the terminal. This is suitable for a music search system and a music search method by the music search device.
楽曲ごとの楽曲情報を管理するデータベースが記憶された端末（例えば、スマートフォンや、タブレット型コンピューター等）と、この端末と接続可能な楽曲検索装置とを含んで構成されたシステムに関し、特許文献１に以下の技術が記載されている。すなわち、楽曲検索装置（車載装置）と端末（携帯端末）との接続が確立されたときに、端末が楽曲検索装置に楽曲情報のそれぞれを送信し、楽曲検索装置は受信した楽曲情報に基づいてデータベース（検索ＤＢ）を生成する。その際、楽曲検索装置は、記憶スペースの空きスペース不足に起因してデータベースの生成が正常に完了しない（楽曲検索が有効とならない）ことを防止するため、データベースの生成中に空きスペースの不足が発生した場合には、特定の楽曲情報を削除し、空きスペースの容量を回復する。特許文献１によれば、空き容量の不足に起因してデータベースの生成が正常に完了しないことを防止できる。 Patent Document 1 discloses a system that includes a terminal (for example, a smart phone or a tablet computer) that stores a database for managing music information for each music and a music search device that can be connected to the terminal. The following techniques are described. That is, when the connection between the music search device (on-vehicle device) and the terminal (mobile terminal) is established, the terminal transmits each piece of music information to the music search device, and the music search device is based on the received music information. A database (search DB) is generated. At that time, the music search device prevents the generation of the database from being normally completed due to the lack of free space in the storage space (the music search is not effective). If it occurs, the specific music information is deleted and the free space capacity is recovered. According to Patent Document 1, it is possible to prevent the generation of a database from being normally completed due to insufficient free space.
なお、特許文献２には、デジタル圧縮映像信号またはデジタル圧縮音声信号を復号装置に出力する際に、その復号装置が信号を復号可能であるか否かを判定し、復号可能であると判定した場合にのみ、その復号装置に対して信号を出力する技術について記載されている。また、特許文献３には、ユーザーにより特定のデータ形式のオーディオデータが選択され、かつ、オーディオデータを再生する再生機器として複数の機器が選択された場合、当該特定のデータ形式のデータを再生可能な再生機器がマスター機器として決定されると共に、コンテンツサーバーからマスター機器に対してオーディオデータが送信され、マスター機器においてオーディオデータのデータ形式が変換され変換後のデータが他の再生機器に転送されるように構成されたシステムについて記載されている。また、特許文献４には、モバイル機器が、再生可能なコンテンツのフォーマット情報を記憶し、ユーザーによりコンテンツが選択された場合、フォーマット情報に基づいてモバイル機器がそのコンテンツを再生可能か否か判定され、再生できない場合は、モバイル機器とＬＡＮを介して接続された他の再生機器によりそのコンテンツが再生されるように構成されたシステムについて記載されている。 In Patent Document 2, when a digital compressed video signal or a digital compressed audio signal is output to a decoding device, it is determined whether or not the decoding device can decode the signal, and it is determined that decoding is possible. Only in this case, a technique for outputting a signal to the decoding apparatus is described. Further, in Patent Document 3, when audio data in a specific data format is selected by a user and a plurality of devices are selected as playback devices for playing back audio data, the data in the specific data format can be played back. A correct playback device is determined as the master device, audio data is transmitted from the content server to the master device, the data format of the audio data is converted in the master device, and the converted data is transferred to another playback device. A system configured as described above is described. Also, in Patent Document 4, the mobile device stores the format information of reproducible content, and when the content is selected by the user, it is determined whether or not the mobile device can reproduce the content based on the format information. In the case where reproduction cannot be performed, a system is described in which the content is reproduced by another reproduction device connected to the mobile device via a LAN.
しかしながら、特許文献１に記載されたシステムでは、空き容量の不足に起因してデータベースの生成が完了しないことは防止できるものの、以下の問題がある。すなわち、データベースは楽曲検索に利用されるものであるが、データベースを生成する処理を行った後に楽曲検索ができない事態は、空き容量の不足に起因してデータベースの生成が完了しなかった場合だけでなく、記憶媒体に関するエラー、装置内部の通信エラー等の様々な原因で発生し得る。しかしながら、特許文献１に記載されたシステムでは、空き容量の不足以外の原因で楽曲検索ができないときに、楽曲検索を行うことが可能な状態とならず、ユーザーの利便性を損ねてしまうという問題がある。 However, although the system described in Patent Document 1 can prevent the generation of a database from being completed due to a lack of free space, it has the following problems. In other words, the database is used for music search, but the situation where music search cannot be performed after the database generation processing is performed is only when the database generation is not completed due to insufficient free space. However, the error may occur due to various causes such as an error relating to the storage medium and a communication error inside the apparatus. However, in the system described in Patent Document 1, when music search cannot be performed due to reasons other than insufficient free space, music search cannot be performed and user convenience is impaired. There is.
本発明は、このような問題を解決するために成されたものであり、データベースの生成が完了しなかったこと以外の原因でデータベースを利用した楽曲検索ができない場合であっても、楽曲検索を行える状態を構築することを目的とする。 The present invention has been made to solve such problems, and even when music search using the database cannot be performed for reasons other than the generation of the database not being completed, the music search is performed. The goal is to build a state that can be done.
上記した課題を解決するために、本発明の楽曲検索装置は、楽曲ごとの楽曲情報を管理する端末側データベースが記憶された端末と通信可能であり、端末から楽曲情報を受信し、装置側データベースを生成する。そして、楽曲検索装置は、装置側データベースを利用した楽曲検索を正常に行うことができるか否かを判定し、正常に行うことができる場合は、装置側データベースを利用して楽曲検索を行う一方、正常に行うことができない場合は、端末と通信し、端末に記憶された端末側データベースを利用して楽曲検索を行う。 In order to solve the above-described problems, the music search device of the present invention can communicate with a terminal in which a terminal-side database that manages music information for each song is stored, receives music information from the terminal, and receives the device-side database. Is generated. Then, the music search device determines whether or not the music search using the device-side database can be normally performed. When the music search device can perform the music search normally, the music search device performs the music search using the device-side database. If it cannot be performed normally, it communicates with the terminal and performs a music search using the terminal side database stored in the terminal.
上記のように構成した本発明によれば、装置側データベースの生成が正常に完了しなかった場合だけでなく、装置側データベースの生成が完了した後に装置側データベースを利用した楽曲検索ができない場合は、端末に記憶された端末側データベースを利用して楽曲検索が行われる。このため、装置側データベースの生成が正常に完了しなかったこと以外の原因で装置側データベースを利用した楽曲検索ができない場合であっても、最終的に楽曲検索を行える状態とすることができる。 According to the present invention configured as described above, not only when the generation of the device-side database is not normally completed, but also when the music search using the device-side database cannot be performed after the generation of the device-side database is completed. The music search is performed using the terminal side database stored in the terminal. For this reason, even if the music search using the apparatus-side database cannot be performed due to reasons other than the generation of the apparatus-side database not being completed normally, the music search can be finally performed.
以下、本発明の一実施形態を図面に基づいて説明する。図１は、本実施形態に係る楽曲検索システム１の機能構成例を示すブロック図である。図１に示すように、楽曲検索システム１は、車載装置２（特許請求の範囲の「楽曲検索装置」に相当）と、車載装置２と通信可能な携帯端末３（特許請求の範囲の「端末」に相当）とを備える。車載装置２は、車両に搭載された装置であり、タッチスクリーン４および音声処理装置５が接続されている。 Hereinafter, an embodiment of the present invention will be described with reference to the drawings. FIG. 1 is a block diagram illustrating a functional configuration example of a music search system 1 according to the present embodiment. As shown in FIG. 1, the music search system 1 includes an in-vehicle device 2 (corresponding to the “music search device” in the claims) and a mobile terminal 3 (“terminal in the claims” that can communicate with the in-vehicle device 2. For example). The in-vehicle device 2 is a device mounted on a vehicle, and the touch screen 4 and the sound processing device 5 are connected thereto.
タッチスクリーン４は、車両のダッシュボードや、センターコンソール等、搭乗者が視認可能な位置に設けられたディスプレー６（特許請求の範囲の「表示装置」に相当）と、ディスプレー６に重ねて配置され、ディスプレー６の表示領域に対するタッチ操作を検出するタッチパネル７とを備える。音声処理装置５は、Ｄ／Ａコンバーターや、ボリューム、アンプ、スピーカー等を備え、入力された音声信号をＤ／Ａ変換し、増幅した後、音声信号に基づく音声をスピーカーから出力する。 The touch screen 4 is arranged so as to overlap the display 6 (corresponding to the “display device” in the claims) provided at a position where the passenger can visually recognize, such as a vehicle dashboard or a center console. And a touch panel 7 for detecting a touch operation on the display area of the display 6. The audio processing device 5 includes a D / A converter, a volume, an amplifier, a speaker, and the like. The input audio signal is D / A converted and amplified, and then the audio based on the audio signal is output from the speaker.
携帯端末３は、搭乗者により車両に持ち込まれる携帯型の端末である。携帯端末３は、例えば、タブレット型コンピューターや、いわゆるスマートフォン等である。特に、本実施形態に係る携帯端末３は、特定のオペレーティングシステム（以下、「特定ＯＳ」と表現する）が搭載された端末であり、この特定ＯＳ上で動作し、携帯端末３に後述する各種処理を実行させる機能を有する特定のアプリケーション（以下、「特定アプリ」と表現する）がインストールされている。 The portable terminal 3 is a portable terminal that is brought into the vehicle by a passenger. The mobile terminal 3 is, for example, a tablet computer or a so-called smartphone. In particular, the mobile terminal 3 according to the present embodiment is a terminal on which a specific operating system (hereinafter referred to as “specific OS”) is mounted, and operates on the specific OS. A specific application (hereinafter referred to as “specific application”) having a function for executing processing is installed.
図１に示すように、車載装置２は、機能構成として、通知部１０、データベース生成部１１、楽曲検索部１２、表示制御部１３および楽曲再生部１４を備えている。また、携帯端末３は、機能構成として、アプリケーション実行部２０を備えている。上記各機能ブロック１０〜１４、２０は、ハードウェア、ＤＳＰ（Digital Signal Processor）、ソフトウェアの何れによっても構成することが可能である。例えばソフトウェアによって構成する場合、上記各機能ブロック１０〜１４、２０は、実際にはコンピューターのＣＰＵ、ＲＡＭ、ＲＯＭなどを備えて構成され、ＲＡＭやＲＯＭ、ハードディスクまたは半導体メモリー等の記録媒体に記憶されたプログラムが動作することによって実現される。特に、携帯端末３のアプリケーション実行部２０は、ＣＰＵ等のハードウェアが特定アプリ（ＯＳが提供するＡＰＩ等、特定アプリに付随するプログラムを含む）を読み出して実行することによって各種処理を実行する。 As shown in FIG. 1, the in-vehicle device 2 includes a notification unit 10, a database generation unit 11, a music search unit 12, a display control unit 13, and a music playback unit 14 as functional configurations. Moreover, the portable terminal 3 is provided with the application execution part 20 as a function structure. Each of the functional blocks 10 to 14 and 20 can be configured by any of hardware, DSP (Digital Signal Processor), and software. For example, when configured by software, each of the functional blocks 10 to 14 and 20 is actually configured with a CPU, RAM, ROM, etc. of a computer, and stored in a recording medium such as RAM, ROM, hard disk, or semiconductor memory. It is realized by running the program. In particular, the application execution unit 20 of the mobile terminal 3 executes various processes by reading and executing a specific application (including programs attached to the specific application such as an API provided by the OS) by hardware such as a CPU.
図１に示すように、車載装置２は、記憶手段として、データベース記憶部１５を備えている。データベース記憶部１５には、データベース生成部１１により生成された装置側データベース１６が記憶される。装置側データベース１６については後述する。 As shown in FIG. 1, the in-vehicle device 2 includes a database storage unit 15 as a storage unit. The database storage unit 15 stores the device-side database 16 generated by the database generation unit 11. The device database 16 will be described later.
また、携帯端末３は、記憶手段として、端末側記憶部２１を備えている。端末側記憶部２１には、端末側データベース２２が記憶されている。端末側データベース２２は、楽曲ごとに楽曲情報と楽曲音声データと楽曲関連画像データ（特許請求の範囲の「圧縮画像データ」に相当）とを対応付けて記憶するデータベースである。楽曲情報とは、楽曲の識別情報や、アーティスト名、曲名、楽曲のジャンル等の、楽曲に関する付加的な情報である。楽曲情報は、データベースを利用した楽曲検索にメタデータとして使用される。楽曲音声データとは、楽曲の音声が記録された所定の音声ファイルフォーマットの音声データである。楽曲関連画像データとは、楽曲が収録されたアルバムのジャケットの画像等の楽曲に関連する画像が記録された画像データであり、所定の圧縮方式で圧縮されている。圧縮方式は、例えば、ＪＰＥＧや、ＴＩＦＦ、ＧＩＦ、ＰＮＧなどである。 Moreover, the portable terminal 3 is provided with the terminal side memory | storage part 21 as a memory | storage means. The terminal side storage unit 21 stores a terminal side database 22. The terminal-side database 22 is a database that stores music information, music audio data, and music-related image data (corresponding to “compressed image data” in the claims) in association with each music. The music information is additional information related to music such as music identification information, artist name, music name, music genre, and the like. The music information is used as metadata for music search using a database. The music audio data is audio data of a predetermined audio file format in which the audio of the music is recorded. The song-related image data is image data in which an image related to a song such as an image of an album jacket in which the song is recorded is recorded, and is compressed by a predetermined compression method. Examples of the compression method include JPEG, TIFF, GIF, and PNG.
車載装置２の通信部１０は、所定の通信規格に従って携帯端末３と通信する。通信部１０と携帯端末３との間での通信に使用される通信規格は何でもよく、例えば、Bluetooth（登録商標）や、Ｗｉ−Ｆｉ（登録商標）、ＵＳＢ、イーサネット（登録商標）である。 The communication unit 10 of the in-vehicle device 2 communicates with the mobile terminal 3 according to a predetermined communication standard. Any communication standard may be used for communication between the communication unit 10 and the portable terminal 3, such as Bluetooth (registered trademark), Wi-Fi (registered trademark), USB, or Ethernet (registered trademark).
車載装置２のデータベース生成部１１は、第１プロトコルに従って、携帯端末３から楽曲情報を受信し、受信した楽曲情報に基づいて装置側データベース１６を生成する。第１プロトコルは、特定ＯＳが搭載されたデバイス（携帯端末３が相当する）と、ホスト装置（車載装置２が相当する）との間での通信に用いるプロトコルであり、装置間通信を伴う所定の処理を実行するときの手順についても規定されている。装置間通信を伴う所定の処理には、楽曲検索に関する処理、および、デバイスに記憶された圧縮画像データ（楽曲関連画像データを含む）に基づく画像の表示に関する処理が含まれている。楽曲検索に関する処理に関し、第１プロトコルでは、ホスト装置側で装置側データベース１６を生成し、装置側データベース１６を利用して楽曲検索を行うことが規定されている。また、圧縮画像データに基づく画像の表示に関する処理に関し、第１プロトコルでは、楽曲関連画像データの復号をホスト装置側で行うことが規定されている。 The database generation unit 11 of the in-vehicle device 2 receives music information from the mobile terminal 3 according to the first protocol, and generates the device-side database 16 based on the received music information. The first protocol is a protocol used for communication between a device on which a specific OS is mounted (corresponding to the mobile terminal 3) and a host device (corresponding to the in-vehicle device 2), and is a predetermined protocol that involves inter-device communication. The procedure for executing this process is also defined. The predetermined process involving the communication between apparatuses includes a process related to music search and a process related to image display based on compressed image data (including music related image data) stored in the device. Regarding processing related to music search, the first protocol stipulates that a device database 16 is generated on the host device side and music search is performed using the device database 16. In addition, regarding processing related to image display based on compressed image data, the first protocol stipulates that the host device side decodes music-related image data.
以下、データベース生成部１１の処理について詳述する。データベース生成部１１による装置側データベース１６の生成に先立って、車載装置２と携帯端末３とが接続されると共に、携帯端末３にインストールされている特定アプリが立ち上げられる。特定アプリは、車載装置２と携帯端末３とが接続されたときに自動で立ち上がる構成でもよく、また、ユーザーの指示によって立ち上がる構成でもよい。特定アプリが立ち上がると、携帯端末３のアプリケーション実行部２０と、データベース生成部１１、楽曲検索部１２および楽曲再生部１４との間でコネクション（論理的な通信経路）が確立し、これら機能ブロック間でデータの送受信が可能な状態となる。携帯端末３のアプリケーション実行部２０は、データベース生成部１１との間でコネクションが確立すると、第１プロトコルに従って、端末側データベース２２で管理されている楽曲情報を楽曲ごとに順に車載装置２のデータベース生成部１１に送信する。 Hereinafter, the processing of the database generation unit 11 will be described in detail. Prior to the generation of the device-side database 16 by the database generation unit 11, the in-vehicle device 2 and the mobile terminal 3 are connected, and a specific application installed in the mobile terminal 3 is launched. The specific application may be configured to automatically start when the in-vehicle device 2 and the mobile terminal 3 are connected, or may be configured to start according to a user instruction. When a specific application is launched, a connection (logical communication path) is established between the application execution unit 20 of the mobile terminal 3, the database generation unit 11, the music search unit 12, and the music playback unit 14. In this state, data can be sent and received. When the connection is established with the database generation unit 11, the application execution unit 20 of the portable terminal 3 generates the database information of the in-vehicle device 2 in order for each piece of music information managed in the terminal-side database 22 according to the first protocol. To the unit 11.
携帯端末３のアプリケーション実行部２０が送信した楽曲情報は、通信部１０の機能により、順次、受信バッファー（不図示）に格納される。データベース生成部１１は、第１プロトコルに従って、受信バッファーに格納されていく楽曲情報を読み出していき、読み出した楽曲情報に基づいて、データベース記憶部１５の所定の記憶領域に装置側データベース１６を構築することを試みる。装置側データベース１６とは、楽曲情報を用いた楽曲検索に利用される所定のデータ構造のデータベースであり、楽曲ごとに楽曲情報を管理する。 The music information transmitted by the application execution unit 20 of the portable terminal 3 is sequentially stored in a reception buffer (not shown) by the function of the communication unit 10. The database generation unit 11 reads the music information stored in the reception buffer according to the first protocol, and constructs the apparatus-side database 16 in a predetermined storage area of the database storage unit 15 based on the read music information. Try that. The apparatus-side database 16 is a database having a predetermined data structure used for music search using music information, and manages music information for each music.
正常に生成が完了した装置側データベース１６は不揮発性メモリーに記憶され、装置側データベース１６が生成された後に携帯端末３と車載装置２との通信接続が切断されても、データベース記憶部１５から削除されない。そして、再び、車載装置２と携帯端末３との間での通信接続が確立され特定アプリが立ち上げられた場合、データベース生成部１１は、以下の処理を実行する。すなわち、データベース生成部１１は、第１プロトコルに従ってアプリケーション実行部２０と通信し、端末側データベース２２で管理されている楽曲情報と、装置側データベース１６で管理される楽曲情報とが同一性を有した状態となるように装置側データベース１６を更新する。装置側データベース１６を更新する処理は、楽曲検索に使用する装置側データベース１６を構築するために行われる処理であり、装置側データベース１６を生成する処理に相当する。 The device-side database 16 that has been successfully generated is stored in the nonvolatile memory, and is deleted from the database storage unit 15 even if the communication connection between the mobile terminal 3 and the in-vehicle device 2 is disconnected after the device-side database 16 is generated. Not. When the communication connection between the in-vehicle device 2 and the mobile terminal 3 is established again and the specific application is launched, the database generation unit 11 executes the following process. That is, the database generation unit 11 communicates with the application execution unit 20 according to the first protocol, and the music information managed in the terminal-side database 22 and the music information managed in the device-side database 16 have the same property. The apparatus side database 16 is updated so as to be in a state. The process for updating the apparatus-side database 16 is a process that is performed to construct the apparatus-side database 16 used for music search, and corresponds to a process for generating the apparatus-side database 16.
以上のように、データベース生成部１１は、第１プロトコルに従って、装置側データベース１６の生成を試みるが、装置側データベース１６の生成は必ずしも正常に完了しない。例えば、データベース記憶部１５の空き領域の不足、装置側データベース１６の生成の試行中の通信障害等により、装置側データベース１６の生成が正常に完了しないことがある。装置側データベース１６の生成が正常に完了しなかった場合、以後、第１プロトコルでは楽曲検索を行うことができない。上述したように、第１プロトコルは、車載装置２に生成された装置側データベース１６を利用して楽曲検索を行うことが規定されたプロトコルであり、装置側データベース１６の生成が正常に完了しなかった場合、楽曲検索の実行が制限されるからである。 As described above, the database generation unit 11 attempts to generate the device-side database 16 according to the first protocol, but the generation of the device-side database 16 is not necessarily completed normally. For example, the generation of the device-side database 16 may not be completed normally due to a lack of free space in the database storage unit 15 or a communication failure while attempting to generate the device-side database 16. If the generation of the device-side database 16 is not normally completed, music search cannot be performed using the first protocol. As described above, the first protocol is a protocol specified to perform music search using the device-side database 16 generated in the in-vehicle device 2, and the generation of the device-side database 16 is not normally completed. This is because the execution of music search is restricted.
また、装置側データベース１６の生成が正常に完了した場合であっても、データベース記憶部１５へのアクセスエラー、データベース記憶部１５の記憶媒体に関する障害、その他の原因により装置側データベース１６を利用した楽曲検索が正常に行えない場合がある。このような場合も、第１プロトコルでは、楽曲検索を行うことができない。以上を踏まえ、車載装置２の楽曲検索部１２は、以下の処理を実行する。 Even if the generation of the device-side database 16 is normally completed, the music using the device-side database 16 due to an access error to the database storage unit 15, a failure related to the storage medium of the database storage unit 15, or other causes Search may not be performed normally. Even in such a case, the music search cannot be performed by the first protocol. Based on the above, the music search unit 12 of the in-vehicle device 2 executes the following processing.
すなわち、楽曲検索部１２は、ユーザーから楽曲検索の開始の指示があった場合、装置側データベース１６を利用した楽曲検索を正常に行うことができるか否かを判定し、正常に行うことができる場合、装置側データベース１６を利用して楽曲検索を行う。一方、楽曲検索部１２は、楽曲検索を正常に行うことができない場合、携帯端末３と通信し、携帯端末３に記憶された端末側データベース２２を利用して楽曲検索を行う。以下、楽曲検索部１２の処理について詳述する。 That is, the music search unit 12 can determine whether or not the music search using the apparatus-side database 16 can be normally performed when the user gives an instruction to start the music search, and can normally perform the music search. In this case, the music search is performed using the apparatus-side database 16. On the other hand, when the music search unit 12 cannot perform the music search normally, the music search unit 12 communicates with the mobile terminal 3 and searches the music using the terminal-side database 22 stored in the mobile terminal 3. Hereinafter, the process of the music search unit 12 will be described in detail.
所望の楽曲の検索を望むユーザーは、楽曲検索部１２の機能によりタッチスクリーン４に表示されるユーザーインターフェースに対してタッチ操作を行って、所定の検索キーを入力すると共に、楽曲検索の開始を指示する。楽曲検索部１２は、ユーザーから楽曲検索の開始が指示されると、まず、装置側データベース１６を利用した楽曲検索を正常に行うことができるか否かを判定する。楽曲検索部１２は、装置側データベース１６に正常にアクセス可能か否か、また、アクセス可能な場合には、装置側データベース１６が楽曲検索に利用可能な状態か否か（データ構造が正常か否か、データに破損がないか等）を検証し、装置側データベース１６を利用した楽曲検索を正常に行うことができるか否かを判定する。 A user who wants to search for a desired music performs a touch operation on the user interface displayed on the touch screen 4 by the function of the music search unit 12, inputs a predetermined search key, and instructs the start of music search. To do. When the music search unit 12 is instructed by the user to start music search, the music search unit 12 first determines whether or not music search using the apparatus database 16 can be normally performed. The music search unit 12 determines whether or not the device-side database 16 can be normally accessed. If the device-side database 16 can be accessed, the device-side database 16 can be used for music search (whether the data structure is normal). Whether the data is damaged or not) is determined, and it is determined whether or not the music search using the apparatus-side database 16 can be normally performed.
装置側データベース１６を利用した楽曲検索を正常に行うことができる場合、楽曲検索部１２は、装置側データベース１６を利用してユーザーにより入力された検索キーに基づく楽曲検索を実行する。楽曲検索の実行後、楽曲検索部１２は、検索結果をディスプレー６に表示する。本実施形態では、楽曲検索部１２は、検索により見つかった１つまたは複数の楽曲のそれぞれについて、ディスプレー６に楽曲情報を一覧表示する。例えば、楽曲検索部１２は、検索により見つかった１つまたは複数の楽曲のそれぞれのアーティスト名、曲名、楽曲のジャンル等を楽曲ごとに区分して表示する。ユーザーは、再生を希望する楽曲が検索結果に含まれている場合には、タッチパネル７に対して所定のタッチ操作を行って所望の楽曲を選択する。 When the music search using the device-side database 16 can be normally performed, the music search unit 12 performs the music search based on the search key input by the user using the device-side database 16. After the music search is executed, the music search unit 12 displays the search result on the display 6. In the present embodiment, the music search unit 12 displays a list of music information on the display 6 for each of one or more music found by the search. For example, the song search unit 12 displays the artist name, song name, song genre, and the like of each of the one or more songs found by the search for each song. If the search result includes a music piece that the user desires to play, the user performs a predetermined touch operation on the touch panel 7 to select the desired music piece.
一方、装置側データベース１６を利用した楽曲検索を正常に行うことができない場合、楽曲検索部１２は、以下の処理を実行する。すなわち、楽曲検索部１２は、携帯端末３のアプリケーション実行部２０と通信し、車載装置２と携帯端末３との間での通信に用いるプロトコルを第１プロトコルから第２プロトコルへと切り替えることを通知すると共に、アプリケーション実行部２０と手続きに従って通信し、プロトコルを第１プロトコルから第２プロトコルへと切り替える。 On the other hand, when the music search using the apparatus-side database 16 cannot be normally performed, the music search unit 12 executes the following processing. That is, the music search unit 12 communicates with the application execution unit 20 of the mobile terminal 3 to notify that the protocol used for communication between the in-vehicle device 2 and the mobile terminal 3 is switched from the first protocol to the second protocol. At the same time, communication is performed with the application execution unit 20 according to the procedure, and the protocol is switched from the first protocol to the second protocol.
第２プロトコルは、第１プロトコルと同様、特定ＯＳが搭載されたデバイス（携帯端末３）と、ホスト装置（車載装置２）との間での通信に用いるプロトコルであり、装置間通信を伴う所定の処理を実行するときの手順についても規定されている。装置間通信を伴う所定の処理には、楽曲検索に関する処理、および、圧縮画像データ（楽曲関連画像データを含む）に基づく画像の表示に関する処理が含まれている。楽曲検索に関する処理に関し、第２プロトコルでは、ホスト装置側で装置側データベース１６を生成することなく、デバイスの端末側データベース２２を利用して楽曲検索することが規定されている。また、圧縮画像データに基づく画像の表示に関する処理に関し、第２プロトコルでは、圧縮画像データの復号をデバイス側で行う旨、規定されている。 Similar to the first protocol, the second protocol is a protocol used for communication between a device (mobile terminal 3) on which a specific OS is mounted and a host device (on-vehicle device 2), and is a predetermined protocol that involves inter-device communication. The procedure for executing this process is also defined. The predetermined process involving inter-device communication includes a process related to music search and a process related to image display based on compressed image data (including music related image data). Regarding the processing related to music search, the second protocol stipulates that music search should be performed using the device side database 22 of the device without generating the device side database 16 on the host device side. Regarding the processing related to the display of an image based on the compressed image data, the second protocol stipulates that the device decodes the compressed image data.
プロトコルを第２プロトコルへと切り替えた後、楽曲検索部１２は、第２プロトコルに従って、アプリケーション実行部２０と通信し、ユーザーが入力した検索キーに基づく楽曲検索を端末側データベース２２を利用して実行する。より詳細には、楽曲検索部１２は、アプリケーション実行部２０に対して所定の制御コマンドを送信し、ユーザーが入力した検索キーに基づく楽曲検索をアプリケーション実行部２０に実行させると共に、楽曲検索の検索結果を送信させる。楽曲検索部１２は、アプリケーション実行部２０から検索結果を取得し、装置側データベース１６を利用して楽曲検索を行ったときと同様の方法で、検索結果をディスプレー６に表示する。検索結果を表示した後、楽曲検索部１２は、プロトコルを第２プロトコルから第１プロトコルへと切り替える。 After switching the protocol to the second protocol, the music search unit 12 communicates with the application execution unit 20 according to the second protocol, and performs a music search based on the search key input by the user using the terminal-side database 22. To do. More specifically, the music search unit 12 transmits a predetermined control command to the application execution unit 20 to cause the application execution unit 20 to perform music search based on the search key input by the user, and to search for music search. Send the result. The music search unit 12 acquires the search result from the application execution unit 20 and displays the search result on the display 6 in the same manner as when the music search is performed using the apparatus-side database 16. After displaying the search result, the music search unit 12 switches the protocol from the second protocol to the first protocol.
以上のように、本実施形態では、装置側データベース１６の生成が正常に完了しなかった場合だけでなく、装置側データベース１６の生成が正常に完了したもののデータベース記憶部１５へのアクセスエラー等により装置側データベース１６を利用した楽曲検索を正常に行うことができない場合も、プロトコルが第１プロトコルから第２プロトコルへと切り替えられた上で、端末側データベース２２を利用した楽曲検索が実行される。このため、装置側データベース１６を利用した楽曲検索を正常に行うことができない場合であっても、最終的に楽曲検索が行える状態となり、ユーザーの利便性が高い。 As described above, in the present embodiment, not only when the generation of the device-side database 16 is not normally completed, but due to an access error to the database storage unit 15 although the generation of the device-side database 16 is normally completed. Even when the music search using the apparatus-side database 16 cannot be normally performed, the music search using the terminal-side database 22 is executed after the protocol is switched from the first protocol to the second protocol. For this reason, even if it is a case where the music search using the apparatus side database 16 cannot be performed normally, it will be in the state which can finally perform a music search, and a user's convenience is high.
車載装置２の表示制御部１３は、楽曲検索の検索結果から楽曲が選択された場合、その楽曲の楽曲関連画像データ（圧縮画像データ）の送信を携帯端末３に要求して取得する。表示制御部１３は、取得した楽曲関連画像データを、実装されたデコーダーにより復号可能か否か判定し、復号可能な場合はデコーダーにより楽曲関連画像データを復号して表示画像データを生成し、表示画像データに基づく画像をディスプレー６に表示する。一方、復号不可能な場合は楽曲関連画像データの復号、および、復号により生成された表示画像データの送信を携帯端末３に要求し、当該要求に応じて受信した表示画像データに基づく画像をディスプレー６に表示する。以下、表示制御部１３の処理について詳述する。なお、以下の説明では、ユーザーにより選択された楽曲を「選択楽曲」という。 When the music is selected from the search result of the music search, the display control unit 13 of the in-vehicle device 2 requests and acquires the mobile terminal 3 to transmit the music related image data (compressed image data) of the music. The display control unit 13 determines whether or not the acquired music related image data can be decoded by the installed decoder. If the decoder can decode the music related image data, the display control unit 13 generates the display image data by decoding the music related image data by the decoder. An image based on the image data is displayed on the display 6. On the other hand, when the decryption is impossible, the mobile terminal 3 is requested to decrypt the music-related image data and to transmit the display image data generated by the decryption, and display an image based on the display image data received in response to the request. 6 is displayed. Hereinafter, the processing of the display control unit 13 will be described in detail. In the following description, the music selected by the user is referred to as “selected music”.
ユーザーにより楽曲検索の検索結果から選択楽曲が選択されると、表示制御部１３は、第１プロトコルに従って、選択楽曲の楽曲関連画像データの送信を携帯端末３のアプリケーション実行部２０に要求する。上述したように、第１プロトコルは、圧縮画像データに基づく画像の表示に関する処理に関し、圧縮画像データの復号をホスト装置（車載装置２）側で行う旨規定されたプロトコルである。アプリケーション実行部２０は、当該要求に応じて、端末側データベース２２から選択楽曲の楽曲関連画像データを取得し、取得した楽曲関連画像データを復号することなく車載装置２の表示制御部１３に送信する。 When the user selects the selected music from the search result of the music search, the display control unit 13 requests the application execution unit 20 of the portable terminal 3 to transmit the music related image data of the selected music according to the first protocol. As described above, the first protocol relates to processing related to display of images based on compressed image data, and is a protocol that specifies that decoding of compressed image data is performed on the host device (in-vehicle device 2) side. In response to the request, the application execution unit 20 acquires the music related image data of the selected music from the terminal-side database 22 and transmits the acquired music related image data to the display control unit 13 of the in-vehicle device 2 without decoding the acquired music related image data. .
表示制御部１３は、アプリケーション実行部２０から楽曲関連画像データを受信し、取得する。表示制御部１３は、取得した楽曲関連画像データについて、車載装置２に実装されているデコーダー（複数のデコーダーが実装されている場合には、複数のデコーダーのうちの何れか）により復号可能か否かを判定する。例えば、表示制御部１３は、デコーダーにより楽曲関連画像データの復号を試み、復号が正常に完了するか否かによって、復号可能か否かを判定する。 The display control unit 13 receives and acquires music-related image data from the application execution unit 20. Whether the display control unit 13 can decode the acquired music-related image data by a decoder (one of a plurality of decoders when a plurality of decoders are installed) installed in the in-vehicle device 2. Determine whether. For example, the display control unit 13 attempts to decode music-related image data using a decoder, and determines whether or not decoding is possible depending on whether or not the decoding is normally completed.
復号可能な場合、表示制御部１３は、デコーダーにより選択楽曲の楽曲関連画像データを復号し、表示画像データを生成する。表示画像データは、画素ごとに色に関する情報を保持する所定の解像度のビットマップデータである。表示制御部１３は、生成した表示画像データを画像バッファーに展開し、表示画像データに基づく画像をディスプレー６に表示する。 If decoding is possible, the display control unit 13 uses the decoder to decode the music related image data of the selected music and generate display image data. The display image data is bitmap data having a predetermined resolution that holds information regarding color for each pixel. The display control unit 13 expands the generated display image data in the image buffer, and displays an image based on the display image data on the display 6.
一方、楽曲関連画像データの圧縮方式に対応するデコーダーが車載装置２に実装されておらず、車載装置２に実装されたデコーダーでは楽曲関連画像データの復号が不可能な場合もある。このような場合、圧縮画像データの復号をホスト装置（車載装置２）側で行うことが規定されている第１プロトコルでは、楽曲関連画像データに基づく画像がディスプレー６に表示されない。以上を踏まえ、このような場合、表示制御部１３は、以下の処理を実行する。 On the other hand, there is a case where a decoder corresponding to the compression method of the music related image data is not mounted on the in-vehicle device 2, and the decoder mounted on the in-vehicle device 2 cannot decode the music related image data. In such a case, an image based on the music-related image data is not displayed on the display 6 in the first protocol that stipulates that the decoding of the compressed image data is performed on the host device (in-vehicle device 2) side. Based on the above, in such a case, the display control unit 13 performs the following processing.
すなわち、表示制御部１３は、携帯端末３のアプリケーション実行部２０と通信し、車載装置２と携帯端末３との間での通信に用いるプロトコルを第１プロトコルから第２プロトコルへと切り替えることを通知すると共に、アプリケーション実行部２０と手続きに従って通信し、プロトコルを第１プロトコルから第２プロトコルへと切り替える。次いで、表示制御部１３は、第２プロトコルに従って、選択楽曲の楽曲関連画像データの復号、および、復号により生成された表示画像データの送信を携帯端末３のアプリケーション実行部２０に要求する。 That is, the display control unit 13 communicates with the application execution unit 20 of the mobile terminal 3 and notifies that the protocol used for communication between the in-vehicle device 2 and the mobile terminal 3 is switched from the first protocol to the second protocol. At the same time, communication is performed with the application execution unit 20 according to the procedure, and the protocol is switched from the first protocol to the second protocol. Next, the display control unit 13 requests the application execution unit 20 of the mobile terminal 3 to decode the music-related image data of the selected music and to transmit the display image data generated by the decoding according to the second protocol.
アプリケーション実行部２０は、当該要求に応じて、端末側データベース２２から選択楽曲の楽曲関連画像データを取得する。アプリケーション実行部２０は、取得した楽曲関連画像データを携帯端末３に実装されたデコーダーにより復号可能か否かを判定する。復号可能な場合、アプリケーション実行部２０は、楽曲関連画像データをデコーダーにより復号して表示画像データを生成し、表示制御部１３に送信する。表示制御部１３は、アプリケーション実行部２０から表示画像データを受信し、取得する。表示制御部１３は、取得した表示画像データを画像バッファーに展開し、ディスプレー６に表示画像データに基づく画像を表示する。 In response to the request, the application execution unit 20 acquires music-related image data of the selected music from the terminal-side database 22. The application execution unit 20 determines whether or not the acquired music-related image data can be decoded by a decoder installed in the mobile terminal 3. If decoding is possible, the application execution unit 20 generates display image data by decoding the music-related image data with a decoder, and transmits the display image data to the display control unit 13. The display control unit 13 receives and acquires display image data from the application execution unit 20. The display control unit 13 develops the acquired display image data in an image buffer, and displays an image based on the display image data on the display 6.
ここで、本実施形態に係る携帯端末３は、特定ＯＳが搭載された端末であるが、携帯端末３は、多くの人間に汎用的に使用されることが前提の端末であり、車両に搭載される専用機の車載装置２と比較して、実装されたデコーダーの種類が充実している。このため、車載装置２により楽曲関連画像データの復号ができない場合であっても、携帯端末３では高い確率で楽曲関連画像データの復号が可能である。しかしながら、携帯端末３のデコーダーでも楽曲関連画像データを復号できない場合もある。このような場合は、携帯端末３は、楽曲関連画像データが復号できなかった旨、表示制御部１３に通知する。表示制御部１３は、当該通知を受け付けた場合、楽曲関連画像データに基づく画像の表示を行わない。 Here, the mobile terminal 3 according to the present embodiment is a terminal on which a specific OS is installed. However, the mobile terminal 3 is a terminal that is presumed to be used universally by many people, and is installed in a vehicle. Compared with the in-vehicle device 2 which is a dedicated machine, the types of installed decoders are enriched. For this reason, even if the in-vehicle device 2 cannot decode the music-related image data, the mobile terminal 3 can decode the music-related image data with high probability. However, the music-related image data may not be decoded even by the decoder of the mobile terminal 3. In such a case, the portable terminal 3 notifies the display control unit 13 that the music related image data could not be decoded. When receiving the notification, the display control unit 13 does not display an image based on the music-related image data.
以上のように、本実施形態では、選択楽曲の楽曲関連画像データの圧縮方式に対応するデコーダーが車載装置２に実装されておらず、第１プロトコルでは楽曲関連画像データに基づく画像のディスプレー６への表示ができない場合、プロトコルが第１プロトコルから第２プロトコルへと切り替えられた上で、携帯端末３側で復号が実行され、携帯端末３から車載装置２へと表示画像データが送信される。車載装置２の表示制御部１３は、受信した表示画像データに基づいて画像を表示する。この構成によれば、選択楽曲の楽曲関連画像データの圧縮方式に対応するデコーダーが車載装置２に実装されていない場合であっても、最終的に楽曲関連画像データに基づく画像の表示が高い確率で行われることになり、ユーザーの利便性が高い。 As described above, in this embodiment, the decoder corresponding to the compression method of the music related image data of the selected music is not mounted on the in-vehicle device 2, and the first protocol is directed to the image display 6 based on the music related image data. When the display cannot be performed, the protocol is switched from the first protocol to the second protocol, the mobile terminal 3 performs decoding, and the display image data is transmitted from the mobile terminal 3 to the in-vehicle device 2. The display control unit 13 of the in-vehicle device 2 displays an image based on the received display image data. According to this configuration, even if the decoder corresponding to the music-related image data compression method of the selected music is not mounted on the in-vehicle device 2, the probability that the image based on the music-related image data will be finally displayed is high. The convenience of users is high.
なお、表示制御部１３は、上述した機能に加えて以下の機能を有する。すなわち表示制御部１３は、楽曲関連画像データにかかわらず、携帯端末３に記憶されている圧縮画像データに基づく画像の表示が指示された場合、第１プロトコルに従って、圧縮画像データの送信を要求し、圧縮画像データを取得する。表示制御部１３は、取得した圧縮画像データを、車載装置２に実装されたデコーダーにより復号可能か否か判定し、復号可能な場合はデコーダーにより圧縮画像データを復号して表示画像データを生成し、表示画像データに基づく画像をディスプレー６に表示する。一方、表示制御部１３は、復号不可能な場合は、プロトコルを第１プロトコルから第２プロトコルに切り替え、圧縮画像データの復号、および、復号により生成された表示画像データの送信を携帯端末３に要求し、当該要求に応じて受信した表示画像データに基づく画像をディスプレー６に表示する。この機能によれば、楽曲関連画像データにかかわらず、圧縮画像データの圧縮方式に対応するデコーダーが車載装置２に実装されていない場合であっても、最終的に圧縮画像データに基づく画像の表示が高い確率で行われることになり、ユーザーの利便性が高い。 The display control unit 13 has the following functions in addition to the functions described above. That is, when the display control unit 13 is instructed to display an image based on the compressed image data stored in the portable terminal 3 regardless of the music related image data, the display control unit 13 requests transmission of the compressed image data according to the first protocol. , To obtain compressed image data. The display control unit 13 determines whether or not the acquired compressed image data can be decoded by a decoder mounted on the in-vehicle device 2, and if it can be decoded, the decoder decodes the compressed image data to generate display image data. Then, an image based on the display image data is displayed on the display 6. On the other hand, if the decoding is impossible, the display control unit 13 switches the protocol from the first protocol to the second protocol, decodes the compressed image data, and transmits the display image data generated by the decoding to the portable terminal 3. An image based on the display image data received in response to the request is displayed on the display 6. According to this function, even if the decoder corresponding to the compression method of the compressed image data is not installed in the in-vehicle device 2 regardless of the music related image data, the image display based on the compressed image data is finally displayed. Will be performed with a high probability, and user convenience is high.
車載装置２の楽曲再生部１４は、楽曲検索部１２による楽曲検索の検索結果から選択楽曲が選択された場合、携帯端末３のアプリケーション実行部２０と通信し、音声処理装置５を制御して、選択楽曲の楽曲音声データをストリーミング再生等の手段により再生する。 The music playback unit 14 of the in-vehicle device 2 communicates with the application execution unit 20 of the mobile terminal 3 when the selected music is selected from the search result of the music search by the music search unit 12 and controls the audio processing device 5. The music audio data of the selected music is reproduced by means such as streaming reproduction.
次に、本実施形態に係る車載装置２の動作例についてフローチャートを用いて説明する。図２は、携帯端末３の特定アプリが立ち上がり、アプリケーション実行部２０から車載装置２に対して第１プロトコルに従って楽曲情報の送信が行われた場合の車載装置２の動作例を示すフローチャートである。 Next, an operation example of the in-vehicle device 2 according to the present embodiment will be described using a flowchart. FIG. 2 is a flowchart illustrating an operation example of the in-vehicle device 2 when a specific application of the mobile terminal 3 is started up and music information is transmitted from the application execution unit 20 to the in-vehicle device 2 according to the first protocol.
図２に示すように、データベース生成部１１は、第１プロトコルに従って携帯端末３のアプリケーション実行部２０と通信し、アプリケーション実行部２０から受信する楽曲情報に基づいて装置側データベース１６を生成する（ステップＳＡ１）。データベース生成部１１による装置側データベース１６の生成の試行後、楽曲検索部１２は、ユーザーにより楽曲検索の開始の指示があったか否かを監視する（ステップＳＡ２）。当該指示があった場合（ステップＳＡ２：ＹＥＳ）、楽曲検索部１２は、装置側データベース１６を利用した楽曲検索を正常に行うことができるか否かを判定する（ステップＳＡ３）。 As shown in FIG. 2, the database generation unit 11 communicates with the application execution unit 20 of the mobile terminal 3 according to the first protocol, and generates the device-side database 16 based on the music information received from the application execution unit 20 (step SA1). After the database generation unit 11 tries to generate the device-side database 16, the music search unit 12 monitors whether or not the user has instructed the start of music search (step SA2). When there is such an instruction (step SA2: YES), the music search unit 12 determines whether or not the music search using the device database 16 can be normally performed (step SA3).
正常に行うことができる場合（ステップＳＡ３：ＹＥＳ）、楽曲検索部１２は、装置側データベース１６を利用してユーザーにより入力された検索キーに基づく楽曲検索を実行する（ステップＳＡ４）。次いで、楽曲検索部１２は、検索結果をタッチスクリーン４に表示する（ステップＳＡ５）。ステップＳＡ５の処理後、処理手順がステップＳＡ１０へ移行する。 If it can be normally performed (step SA3: YES), the music search unit 12 performs a music search based on the search key input by the user using the device database 16 (step SA4). Next, the music search unit 12 displays the search result on the touch screen 4 (step SA5). After the processing in step SA5, the processing procedure moves to step SA10.
一方、ステップＳＡ３において、装置側データベース１６を利用した楽曲検索を正常に行うことができないと判定した場合（ステップＳＡ３：ＮＯ）、楽曲検索部１２は、プロトコルを第１プロトコルから第２プロトコルへと切り替える（ステップＳＡ６）。次いで、楽曲検索部１２は、第２プロトコルに従って、アプリケーション実行部２０と通信し、端末側データベース２２を利用してユーザーが入力した検索キーに基づく楽曲検索を実行する（ステップＳＡ７）。次いで、楽曲検索部１２は、検索結果をタッチスクリーン４に表示する（ステップＳＡ８）。次いで、楽曲検索部１２は、プロトコルを第１プロトコルから第２プロトコルへと切り替える（ステップＳＡ９）。ステップＳＡ１０の処理後、処理手順がステップＳＡ１０へ移行する。 On the other hand, when it is determined in step SA3 that the music search using the device-side database 16 cannot be normally performed (step SA3: NO), the music search unit 12 changes the protocol from the first protocol to the second protocol. Switching (step SA6). Next, the music search unit 12 communicates with the application execution unit 20 according to the second protocol, and executes a music search based on the search key input by the user using the terminal-side database 22 (step SA7). Next, the music search unit 12 displays the search result on the touch screen 4 (step SA8). Next, the music search unit 12 switches the protocol from the first protocol to the second protocol (step SA9). After the process of step SA10, the processing procedure proceeds to step SA10.
ステップＳＡ１０において、表示制御部１３は、ユーザーにより楽曲が選択されたか否かを監視する（ステップＳＡ１０）。ユーザーにより楽曲が選択された場合（ステップＳＡ１０：ＹＥＳ）、表示制御部１３は、第１プロトコルに従って、選択された楽曲の楽曲関連画像データの送信を携帯端末３のアプリケーション実行部２０に要求する（ステップＳＡ１１）。次いで、表示制御部１３は、当該要求に応じて、アプリケーション実行部２０から楽曲関連画像データを受信し、取得する（ステップＳＡ１２）。次いで、表示制御部１３は、楽曲関連画像データが、車載装置２に実装されているデコーダーにより復号可能か否かを判定する（ステップＳＡ１３）。 In step SA10, the display control unit 13 monitors whether or not a song has been selected by the user (step SA10). When the music is selected by the user (step SA10: YES), the display control unit 13 requests the application execution unit 20 of the portable terminal 3 to transmit the music related image data of the selected music according to the first protocol ( Step SA11). Next, in response to the request, the display control unit 13 receives and acquires music piece related image data from the application execution unit 20 (step SA12). Next, the display control unit 13 determines whether or not the music-related image data can be decoded by the decoder installed in the in-vehicle device 2 (step SA13).
復号可能な場合（ステップＳＡ１３：ＹＥＳ）、表示制御部１３は、選択された楽曲の楽曲関連画像データをデコーダーにより復号し、表示画像データを生成する（ステップＳＡ１４）。次いで、表示制御部１３は、生成した表示画像データに基づく画像をディスプレー６に表示する（ステップＳＡ１５）。ステップＳＡ１５の処理後、処理手順がステップＳＡ２０へ移行する。 When decoding is possible (step SA13: YES), the display control unit 13 decodes the music related image data of the selected music by the decoder, and generates display image data (step SA14). Next, the display control unit 13 displays an image based on the generated display image data on the display 6 (step SA15). After the process of step SA15, the processing procedure proceeds to step SA20.
一方、ステップＳＡ１３において復号が不可能であると判定した場合（ステップＳＡ１３：ＮＯ）、表示制御部１３は、プロトコルを第１プロトコルから第２プロトコルへと切り替える（ステップＳＡ１６）。次いで、表示制御部１３は、第２プロトコルに従って、選択楽曲の楽曲関連画像データの復号、および、復号により生成された表示画像データの送信を携帯端末３のアプリケーション実行部２０に要求する（ステップＳＡ１７）。次いで、表示制御部１３は、携帯端末３のアプリケーション実行部２０から表示画像データを受信し、取得する（ステップＳＡ１８）。次いで、表示制御部１３は、生成した表示画像データを画像バッファーに展開し、表示画像データに基づく画像をディスプレー６に表示する（ステップＳＡ１９）。ステップＳＡ１９の処理後、処理手順がステップＳＡ２０へ移行する。ステップＳＡ２０において、楽曲再生部１４は、携帯端末３のアプリケーション実行部２０と通信し、音声処理装置５を制御して、楽曲検索部１２による楽曲検索の検索結果から選択された楽曲の楽曲音声データを再生する（ステップＳＡ２０）。 On the other hand, when it is determined in step SA13 that decoding is impossible (step SA13: NO), the display control unit 13 switches the protocol from the first protocol to the second protocol (step SA16). Next, the display control unit 13 requests the application execution unit 20 of the mobile terminal 3 to decode the music related image data of the selected music and to transmit the display image data generated by the decoding according to the second protocol (step SA17). ). Next, the display control unit 13 receives and acquires display image data from the application execution unit 20 of the mobile terminal 3 (step SA18). Next, the display control unit 13 develops the generated display image data in the image buffer, and displays an image based on the display image data on the display 6 (step SA19). After the process of step SA19, the processing procedure proceeds to step SA20. In step SA20, the music playback unit 14 communicates with the application execution unit 20 of the mobile terminal 3, controls the audio processing device 5, and the music audio data of the music selected from the search result of the music search by the music search unit 12. Is reproduced (step SA20).
＜変形例＞
次に、上記実施形態の変形例について説明する。上述した実施形態では、携帯端末３に記憶された圧縮画像データ（楽曲関連画像データを含む）に基づく画像を表示する際、表示制御部１３は、以下の処理を行っていた。すなわち、表示制御部１３は、第１プロトコルに従って、携帯端末３から圧縮画像データを取得する。そして、表示制御部１３は、車載装置２に実装されたデコーダーでは圧縮画像データを復号できない場合、プロトコルを第２プロトコルに切り替え、表示画像データを受信し、表示画像データに基づいて画像を表示する。この点に関し、変形例に係る表示制御部１３は、以下の処理を実行する。
<Modification>
Next, a modification of the above embodiment will be described. In the embodiment described above, when displaying an image based on the compressed image data (including music-related image data) stored in the mobile terminal 3, the display control unit 13 performs the following processing. That is, the display control unit 13 acquires compressed image data from the mobile terminal 3 according to the first protocol. If the decoder mounted on the in-vehicle device 2 cannot decode the compressed image data, the display control unit 13 switches the protocol to the second protocol, receives the display image data, and displays an image based on the display image data. . In this regard, the display control unit 13 according to the modification executes the following process.
すなわち、携帯端末３に記憶された圧縮画像データに基づく画像を表示する必要が生じた場合、表示制御部１３は、まず、第２プロトコルに従って、圧縮画像データの復号、および、復号により生成された表示画像データの送信を要求する。従って、本変形例では、現状のプロトコルが第１プロトコルの場合、表示制御部１３は、プロトコルを第１プロトコルから第２プロトコルへと切り替え、上記要求を行う。 That is, when it becomes necessary to display an image based on the compressed image data stored in the mobile terminal 3, the display control unit 13 first generates the compressed image data by decoding and decoding according to the second protocol. Requests transmission of display image data. Therefore, in this modification, when the current protocol is the first protocol, the display control unit 13 switches the protocol from the first protocol to the second protocol, and makes the above request.
携帯端末３のアプリケーション実行部２０は、圧縮画像データを取得し、携帯端末３に実装されたデコーダーにより圧縮画像データの復号可能か否かを判定する。復号可能な場合、携帯端末３のアプリケーション実行部２０は、圧縮画像データを復号して表示画像データを生成し、車載装置２の表示制御部１３に送信する。表示制御部１３は、表示画像データに基づいて画像を表示する。 The application execution unit 20 of the mobile terminal 3 acquires the compressed image data, and determines whether or not the compressed image data can be decoded by a decoder installed in the mobile terminal 3. If decoding is possible, the application execution unit 20 of the mobile terminal 3 decodes the compressed image data to generate display image data, and transmits the display image data to the display control unit 13 of the in-vehicle device 2. The display control unit 13 displays an image based on the display image data.
一方、復号不可能な場合、携帯端末３のアプリケーション実行部２０は、圧縮画像データの復号ができない旨、車載装置２の表示制御部１３に通知する。表示制御部１３は、当該通知を受け付けると、携帯端末３のアプリケーション実行部２０と通信し、車載装置２と携帯端末３との間での通信に用いるプロトコルを第２プロトコルから第１プロトコルへと切り替えることを通知すると共に、アプリケーション実行部２０と手続きに従って通信し、プロトコルを第２プロトコルから第１プロトコルへと切り替える。 On the other hand, when the decryption is impossible, the application execution unit 20 of the mobile terminal 3 notifies the display control unit 13 of the in-vehicle device 2 that the compressed image data cannot be decrypted. When the display control unit 13 accepts the notification, the display control unit 13 communicates with the application execution unit 20 of the mobile terminal 3 and changes the protocol used for communication between the in-vehicle device 2 and the mobile terminal 3 from the second protocol to the first protocol. In addition to notifying the switching, the communication with the application execution unit 20 is performed according to the procedure, and the protocol is switched from the second protocol to the first protocol.
プロトコルの切り替え後、表示制御部１３は、第１プロトコルに従って、圧縮画像データの送信を要求し、圧縮画像データを取得する。表示制御部１３は、取得した圧縮画像データの復号が可能か否かを判定する。復号が可能な場合、表示制御部１３は、圧縮画像データを復号して生成した表示画像データに基づいて画像を表示する。圧縮画像データの復号が不可能である場合、表示制御部１３は、圧縮画像データに基づく画像の表示を行わない。 After switching the protocol, the display control unit 13 requests transmission of compressed image data according to the first protocol, and acquires the compressed image data. The display control unit 13 determines whether the acquired compressed image data can be decoded. When decoding is possible, the display control unit 13 displays an image based on display image data generated by decoding compressed image data. When the compressed image data cannot be decoded, the display control unit 13 does not display an image based on the compressed image data.
本変形例によれば、上記実施形態と同様、携帯端末３のデコーダーと車載装置２のデコーダーの双方で圧縮画像データの復号ができない場合以外は、圧縮画像データに基づく画像を表示することが可能であり、ユーザーの利便性を向上できる。 According to this modification, as in the above embodiment, an image based on the compressed image data can be displayed unless the compressed image data cannot be decoded by both the decoder of the mobile terminal 3 and the decoder of the in-vehicle device 2. It is possible to improve user convenience.
上記実施形態は、何れも本発明を実施するにあたっての具体化の一例を示したものに過ぎず、これによって本発明の技術的範囲が限定的に解釈されてはならないものである。すなわち、本発明はその要旨、またはその主要な特徴から逸脱することなく、様々な形で実施することができる。 Each of the above-described embodiments is merely an example of the implementation of the present invention, and the technical scope of the present invention should not be construed in a limited manner. That is, the present invention can be implemented in various forms without departing from the gist or the main features thereof.
例えば、上記実施形態では、楽曲検索に使用するデータベースの変更や、圧縮画像データを復号（デコード）する装置の変更は、プロトコルの切り替えを伴って行われていた。しかしながら、上記実施形態で例示した第１プロトコルや第２プロトコルと異なるプロトコルにおいて、プロトコルの切り替えを伴わず、各処理が行われてもよい。 For example, in the above-described embodiment, the change of the database used for music search and the change of the device that decodes (decodes) the compressed image data are performed with switching protocols. However, in a protocol different from the first protocol and the second protocol exemplified in the above embodiment, each process may be performed without switching protocols.
また、上記実施形態では、楽曲検索部１２は、データベース生成部１１による装置側データベース１６の生成が正常に完了しなかった場合は、プロトコルを第１プロトコルから第２プロトコルに切り替え、端末側データベース２２を利用して楽曲検索を実行した。この点に関し、装置側データベース１６の生成が正常に完了しなかった場合であっても、構築された部分を用いて楽曲検索を行うことが可能な仕様の場合には、楽曲検索部１２が、装置側データベース１６の構築された部分を用いて楽曲検索を正常に行うことができない場合に、プロトコルを第１プロトコルから第２プロトコルへと切り替える構成でもよい。 Moreover, in the said embodiment, when the production | generation of the apparatus side database 16 by the database production | generation part 11 is not completed normally, the music search part 12 switches a protocol from a 1st protocol to a 2nd protocol, and the terminal side database 22 A music search was performed using. In this regard, even if the generation of the device-side database 16 is not normally completed, in the case of a specification in which music search can be performed using the constructed part, the music search unit 12 A configuration may be adopted in which the protocol is switched from the first protocol to the second protocol when the music search cannot be normally performed using the constructed part of the apparatus-side database 16.
また、上記実施形態では、車両に搭載された車載装置２が特許請求の範囲の楽曲検索装置であるものとして発明の実施形態を説明したが、楽曲検索装置は、車両に搭載された装置である必要はない。また、ユーザーが車両に持ち込む携帯端末３が特許請求の範囲の端末であるものとして発明の実施形態を説明したが、端末は、ユーザーが車両に持ち込む携帯端末３である必要はない。 Moreover, in the said embodiment, although embodiment of invention was described as what the vehicle equipment 2 mounted in the vehicle is a music search device of a claim, a music search device is an apparatus mounted in the vehicle. There is no need. Moreover, although embodiment of invention was described as what the portable terminal 3 which a user brings in a vehicle is a terminal of a claim, a terminal does not need to be the portable terminal 3 which a user brings in a vehicle.
１ 楽曲検索システム
２ 車載装置（楽曲検索装置）
３ 携帯端末（端末）
６ ディスプレー（表示装置）
１１ データベース生成部
１２ 楽曲検索部
１３ 表示制御部
１６ 装置側データベース
２２ 端末側データベース
1 music search system 2 in-vehicle device (music search device)
3 Mobile devices (terminals)
6 Display (display device)
DESCRIPTION OF SYMBOLS 11 Database production | generation part 12 Music search part 13 Display control part 16 Apparatus side database 22 Terminal side database
Claims (6)
前記端末から前記楽曲情報を受信し、受信した前記楽曲情報に基づいて装置側データベースを生成するデータベース生成部と、
前記装置側データベースを利用した楽曲検索を正常に行うことができるか否かを判定し、正常に行うことができる場合、前記装置側データベースを利用して楽曲検索を行う一方、正常に行うことができない場合、前記端末と通信し前記端末に記憶された前記端末側データベースを利用して楽曲検索を行う楽曲検索部と、
を備えることを特徴とする楽曲検索装置。 A music search apparatus capable of communicating with a terminal in which a terminal-side database that manages music information for each music is stored,
A database generating unit that receives the music information from the terminal and generates a device-side database based on the received music information;
It is determined whether or not the music search using the device-side database can be normally performed. When the music search can be normally performed, the music search is performed using the device-side database, while the music search can be normally performed. If not, a music search unit that communicates with the terminal and searches for music using the terminal-side database stored in the terminal;
A music search apparatus comprising:
前記楽曲検索部による楽曲検索の検索結果から一の楽曲が選択された場合、当該一の楽曲に関する前記圧縮画像データの送信を前記端末に要求して取得し、取得した当該一の楽曲に関する前記圧縮画像データを復号可能か否か判定し、復号可能な場合は当該一の楽曲に関する前記圧縮画像データを復号して前記表示画像データを生成し、前記表示画像データに基づく画像を前記表示装置に表示する一方、復号不可能な場合は当該一の楽曲に関する前記圧縮画像データの復号、および、復号により生成された前記表示画像データの送信を前記端末に要求し、当該要求に応じて受信した前記表示画像データに基づく画像を前記表示装置に表示する
ことを特徴とする請求項２に記載の楽曲検索装置。 The display control unit
When one music is selected from the search result of the music search by the music search unit, the compressed image data related to the one music is requested to be transmitted to the terminal and acquired, and the acquired compression related to the one music is acquired. It is determined whether or not image data can be decoded. If the image data can be decoded, the compressed image data relating to the one piece of music is decoded to generate the display image data, and an image based on the display image data is displayed on the display device. On the other hand, if the decoding is impossible, the terminal requests the terminal to decode the compressed image data related to the one piece of music and to transmit the display image data generated by the decoding, and the display received in response to the request The music search device according to claim 2, wherein an image based on image data is displayed on the display device.
前記端末は、
前記端末側データベースで管理されている前記楽曲情報を送信する処理実行部を有し、
前記楽曲検索装置は、
前記端末から前記楽曲情報を受信し、受信した前記楽曲情報に基づいて装置側データベースを生成するデータベース生成部と、
前記装置側データベースを利用した楽曲検索を正常に行うことができるか否かを判定し、正常に行うことができる場合、前記装置側データベースを利用して楽曲検索を行う一方、正常に行うことができない場合、前記端末と通信し前記端末に記憶された前記端末側データベースを利用して楽曲検索を行う楽曲検索部とを有する
ことを特徴とする楽曲検索システム。 A music search system comprising a terminal in which a terminal-side database that manages music information for each music is stored, and a music search device that can communicate with the terminal,
The terminal
A processing execution unit that transmits the music information managed in the terminal-side database;
The music search device
A database generation unit that receives the music information from the terminal and generates a device-side database based on the received music information;
It is determined whether or not the music search using the device-side database can be normally performed. When the music search can be normally performed, the music search is performed using the device-side database, while the music search can be normally performed. If not possible, the music search system includes a music search unit that communicates with the terminal and searches for music using the terminal-side database stored in the terminal.
前記楽曲検索装置のデータベース生成部が、前記端末から前記楽曲情報を受信し、受信した前記楽曲情報に基づいて装置側データベースを生成するステップと、
前記楽曲検索装置の楽曲検索部が、前記装置側データベースを利用した楽曲検索を正常に行うことができるか否かを判定し、正常に行うことができる場合、前記装置側データベースを利用して楽曲検索を行う一方、正常に行うことができない場合、前記端末と通信し前記端末に記憶された前記端末側データベースを利用して楽曲検索を行うステップと、
を備えることを特徴とする楽曲検索方法。 A music search method by a music search apparatus capable of communicating with a terminal in which a terminal-side database for managing music information for each music is stored,
A database generation unit of the music search device receiving the music information from the terminal, and generating a device-side database based on the received music information;
The music search unit of the music search device determines whether or not the music search using the device-side database can be normally performed, and if the music search can be normally performed, the music using the device-side database is used. While performing the search, if not successful, performing a music search using the terminal-side database stored in the terminal in communication with the terminal;
The music search method characterized by comprising.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2018079636A JP7051219B2 (en) | 2018-04-18 | 2018-04-18 | Music search device, music search system and music search method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2018079636A JP7051219B2 (en) | 2018-04-18 | 2018-04-18 | Music search device, music search system and music search method |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2019191629A true JP2019191629A (en) | 2019-10-31 |
| JP7051219B2 JP7051219B2 (en) | 2022-04-11 |
Family
ID=68390334
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2018079636A Active JP7051219B2 (en) | 2018-04-18 | 2018-04-18 | Music search device, music search system and music search method |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP7051219B2 (en) |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006031180A (en) * | 2004-07-13 | 2006-02-02 | Konica Minolta Photo Imaging Inc | Control program and storage medium |
| JP2017204113A (en) * | 2016-05-11 | 2017-11-16 | アルパイン株式会社 | Electronic device, database construction method and system |
| JP2018045550A (en) * | 2016-09-16 | 2018-03-22 | アルパイン株式会社 | Electronic device and music reproduction system |
-
2018
- 2018-04-18 JP JP2018079636A patent/JP7051219B2/en active Active
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006031180A (en) * | 2004-07-13 | 2006-02-02 | Konica Minolta Photo Imaging Inc | Control program and storage medium |
| JP2017204113A (en) * | 2016-05-11 | 2017-11-16 | アルパイン株式会社 | Electronic device, database construction method and system |
| JP2018045550A (en) * | 2016-09-16 | 2018-03-22 | アルパイン株式会社 | Electronic device and music reproduction system |
Also Published As
| Publication number | Publication date |
|---|---|
| JP7051219B2 (en) | 2022-04-11 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5024610B2 (en) | Information processing system, information processing apparatus, information processing method, and program | |
| KR101511881B1 (en) | Adaptive media content scrubbing on a remote device | |
| US11115853B2 (en) | Wireless network system and wireless communication method | |
| JP4972160B2 (en) | Mobile radio communication terminal, system, method and computer program product for publishing, sharing and accessing media files | |
| JP4714294B1 (en) | Communication apparatus and communication method | |
| KR20090104292A (en) | Display apparatus, control method thereof and control method of external device | |
| JP4993491B2 (en) | Music information display method and interface device | |
| US20150189002A1 (en) | Information processing apparatus, information processing method and program | |
| KR20090022087A (en) | The method of connecting the external device and the multmedia replaying apparatus thereof | |
| JP2014075094A (en) | Display device, display system, portable information terminal and method for controlling display device | |
| WO2010095264A1 (en) | Content transmission device, content output system, transmission control method, transmission control program, and recording medium | |
| TWI531223B (en) | Portable electronic device and multimedia output method | |
| JP4578831B2 (en) | Display device capable of recording / reproducing video signal and / or audio signal and method of operating the same | |
| JP7051219B2 (en) | Music search device, music search system and music search method | |
| KR20090061246A (en) | Method and apparatus for reproducing media content of portable device through digital television | |
| KR20110047390A (en) | Method, apparatus and system for managing drm contents | |
| JP2009037320A (en) | Information processor and control method for information processor | |
| KR20140038791A (en) | The method of playing multimedia data and the multimedia playing apparatus thereof | |
| WO2010084590A1 (en) | Musical composition outputting device, musical composition reproducing device, musical composition outputting method, musical composition outputting program, and, musical information transmission program and recording medium | |
| JP2008182319A (en) | Stream data reproduction system and reproducing method, and portable terminal device | |
| KR101954802B1 (en) | System for providing presence infromation audio data, apparatus and method thereof | |
| JP2015207327A (en) | Content processing device, method, program and system | |
| KR100715202B1 (en) | Apparatus and method for using storage device in portable terminal | |
| WO2018003797A1 (en) | Acoustic apparatus and acoustic system | |
| JP5777532B2 (en) | Audio equipment |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210108 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20211117 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20211209 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220113 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220329 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220329 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7051219 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |