WO2018229846A1 - Video/audio playback device and video/audio playback method - Google Patents

Video/audio playback device and video/audio playback method Download PDF

Info

Publication number
WO2018229846A1
WO2018229846A1 PCT/JP2017/021727 JP2017021727W WO2018229846A1 WO 2018229846 A1 WO2018229846 A1 WO 2018229846A1 JP 2017021727 W JP2017021727 W JP 2017021727W WO 2018229846 A1 WO2018229846 A1 WO 2018229846A1
Authority
WO
WIPO (PCT)
Prior art keywords
video
audio
file
audio file
unit
Prior art date
Application number
PCT/JP2017/021727
Other languages
French (fr)
Japanese (ja)
Inventor
隆一 大前
Original Assignee
三菱電機株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 三菱電機株式会社 filed Critical 三菱電機株式会社
Priority to PCT/JP2017/021727 priority Critical patent/WO2018229846A1/en
Publication of WO2018229846A1 publication Critical patent/WO2018229846A1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/482—End-user interface for program selection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H04N5/93—Regeneration of the television signal or of selected parts thereof

Definitions

  • the present invention relates to a video / audio reproduction device capable of reproducing an audio file and a video file.
  • Patent Document 1 discloses a recording / reproducing apparatus that allows a CD to be enjoyed like a video clip by displaying a video related to the song when reproducing the song recorded on a CD (Compact Disc). Has been proposed.
  • the recording / reproducing apparatus of Patent Document 1 automatically records video data of a digital broadcast program related to each song on the recording apparatus based on the information (music title, artist name) of the music recorded on the CD, and instructs to reproduce the CD. If there is, the video data related to the music recorded on the CD is reproduced at the same time as the CD is reproduced. Since video data has a large data size, the recording / reproducing apparatus of Patent Document 1 requires a large-capacity recording apparatus. The recording / reproducing apparatus of Patent Document 1 acquires video data from digital broadcasting, but a program related to a recorded song on a CD is not always conveniently broadcast. Note that the recording / reproducing apparatus disclosed in Patent Document 1 is to display video on a display device while outputting audio of a CD from a speaker, and is mainly intended to reproduce a CD.
  • the present invention has been made to solve the above-described problems, and provides a video / audio reproduction device capable of automatically reproducing a video file corresponding to an audio file without requiring a large-capacity recording device. With the goal.
  • the video / audio reproduction device is included in a reproduction unit capable of reproducing an audio file and a video file, a playlist storage unit that stores a playlist in which the audio file is registered, and an audio file registered in the playlist.
  • a keyword extraction unit that extracts a keyword related to the audio file based on the data to be detected, a search unit that searches for a video file corresponding to the audio file based on the keyword extracted by the keyword extraction unit, and a detection unit
  • a video link information storage unit that stores video link information indicating the location of the video file corresponding to the audio file in association with the audio file, and a control unit that controls the operation of the playback unit.
  • the video / audio reproduction device when receiving an instruction to reproduce an audio file, reproduces the video file corresponding to the audio file instead of the audio file. Therefore, a highly decorative image is displayed on the display device, and the user can enjoy music visually. Further, since the video / audio reproduction device stores the video link information indicating the location of the video data, the video data itself does not necessarily have to be stored, and a large-capacity recording device is not required.
  • FIG. 1 is a diagram showing a configuration of a video / audio reproduction system according to an embodiment of the present invention.
  • the video / audio reproduction system includes a video / audio reproduction device 10 and an audio file storage device 21, a video file storage device 22, an operation input device 23, a display device 24, an audio output device 25, and a communication device connected thereto.
  • Device 26 is a diagram showing a configuration of a video / audio reproduction system according to an embodiment of the present invention.
  • the video / audio reproduction system includes a video / audio reproduction device 10 and an audio file storage device 21, a video file storage device 22, an operation input device 23, a display device 24, an audio output device 25, and a communication device connected thereto.
  • Device 26 is a diagram showing a configuration of a video / audio reproduction system according to an embodiment of the present invention.
  • the video / audio reproduction system includes a video / audio reproduction device 10 and an audio file storage device 21, a video file storage device 22, an operation input device 23, a display device 24, an audio output device 25, and a
  • the audio file storage device 21 and the video file storage device 22 are storage media locally connected to the video / audio reproduction device 10.
  • the audio file storage device 21 stores an audio file
  • the video file storage device 22 stores a video file. Is memorized.
  • the audio file storage device 21 and the video file storage device 22 are separate blocks, but they may be configured by a single storage device.
  • the audio file storage device 21 and the video file storage device 22 may be any storage media such as a hard disk, a USB (Universal Serial Bus) memory, a memory card, a CD, a DVD (Digital Versatile Disc), and a Blu-ray (registered trademark) disk. .
  • the operation input device 23 is a device for a user to input an operation to the video / audio reproduction device 10, and may be a hardware such as a push button, a keyboard, a touch pad, a mouse, or a software key displayed on the screen.
  • the display device 24 is a device that displays the video output from the video / audio reproduction device 10, and is configured by a liquid crystal display device, for example.
  • the operation input device 23 and the display device 24 may be configured as one touch panel by displaying a software key as the operation input device 23 on the screen of the display device 24.
  • the audio output device 25 is a speaker for outputting audio output from the video / audio reproduction device 10.
  • the communication device 26 is a device for the video / audio reproduction device 10 to communicate with the outside.
  • the communication device 26 may not be a communication device dedicated to the video / audio reproduction device 10, and may be a general-purpose communication device such as a mobile phone or a smartphone.
  • the video / audio reproduction device 10 can access the Internet 27 using the communication device 26.
  • OTT server 28 hereinafter referred to as “OTT server 28” of an OTT (Over The Top) service that distributes audio files and video files.
  • the video / audio reproduction device 10 is configured to operate the audio file stored in the audio file storage device 21, the video file stored in the video file storage device 22, or the OTT server 28 in accordance with a user operation input to the operation input device 23. Can play audio files, video files, and so on.
  • the audio file and the type of the video file handled by the video / audio reproduction device 10 are not limited.
  • the audio file is assumed to be a music file, and not only the audio data of the song but also the song title and album name are included in the audio file. It is assumed that information such as an artist name and a cover art image is included as metadata.
  • the video file includes not only video data and audio data but also information on at least a content name (video title).
  • the video / audio reproduction device 10 includes a reproduction unit 11, a control unit 12, a playlist storage unit 13, a keyword extraction unit 14, a search unit 15, and a video link information storage unit 16.
  • the playback unit 11 performs playback processing of audio files and video files. For example, when reproducing an audio file, the reproducing unit 11 causes the audio output device 25 to output audio corresponding to the audio data included in the audio file, and displays the content of the metadata included in the audio file on the display device 24. Let When playing back a video file, the playback unit 11 causes the display device 24 to display a video corresponding to the video data included in the video file, and outputs a sound corresponding to the audio data included in the video file to the audio output device. 25.
  • the control unit 12 controls the operation of the reproduction unit 11 based on the user operation input to the operation input device 23. Further, the control unit 12 has a function of creating a playlist capable of registering a plurality of audio files stored in the audio file storage device 21. In the playlist, the contents of the metadata included in each audio file, that is, information such as the song title, album name, artist name, etc. are also registered.
  • the playlist can be created by any method. For example, even when the audio file storage device 21 is connected to the video / audio reproduction device 10, the control unit 12 automatically creates a playlist in which all the audio files in the audio file storage device 21 are registered. Good. Further, the user may select an audio file to be registered in the playlist, or the user may edit an existing playlist.
  • the playlist created by the control unit 12 is stored in the playlist storage unit 13.
  • the control unit 12 can display the playlist stored in the playlist storage unit 13 on the display device 24, and the user can use the operation input device 23 to display the playlist displayed on the display device 24.
  • a desired audio file can be selected from among them, and the video / audio reproduction device 10 can be instructed to reproduce the selected audio file.
  • the keyword extraction unit 14 extracts keywords related to each audio file based on information (metadata contents) of each audio file registered in the playlist stored in the playlist storage unit 13. Specifically, the title, album name, artist name, etc. of the song of the audio file are extracted as keywords.
  • the search unit 15 searches for a video file corresponding to the audio file based on the keyword extracted by the keyword extraction unit 14.
  • the “video file corresponding to the audio file” is intended to express the content of the audio file with video, such as a promotion video of a song of the audio file.
  • the place where the search unit 15 searches for a video file may be the video file storage device 22 locally connected to the video / audio reproduction device 10 or the OTT server 28 on the Internet 27.
  • the search of the video file distributed by the OTT server 28 may use a search engine provided in the OTT server 28 or may use another search server (not shown).
  • the video link information storage unit 16 stores video link information indicating the location of the video file detected by the search unit 15, that is, the video file corresponding to the audio file, in association with the audio file.
  • the video link information is a path indicating the location of the video file in the video file storage device 22 or a URL (Uniform Resource Locator) indicating the location of the video file in the OTT server 28.
  • control unit 12 controls the operation of the reproduction unit 11 based on a user operation. Basically, the control unit 12 causes the playback unit 11 to play back an audio file or video file instructed to be played back by the user. However, when receiving an instruction to reproduce an audio file associated with the video link information, the playback unit 11 selects the video file indicated by the video link information associated with the audio file instead of the audio file. Play the playback unit.
  • the user reproduces the audio file to which the video link information is not linked.
  • the screen of the display device 24 shifts to the playback screen of the audio file.
  • the display on the display device 24 is a reproduction screen of the video file indicated by the video link information associated with the audio file. Will be transferred to.
  • FIG. 3 is a flowchart showing a process (video link information creation process) in which the video / audio reproduction device 10 creates video link information.
  • the operation when the video / audio reproduction device 10 creates video link information will be described below with reference to FIG.
  • the video link information creation process is executed when the control unit 12 creates or updates a playlist.
  • the execution timing of the video link information creation process may be any timing as long as the playlist is created.
  • the keyword extraction unit 14 selects one of the audio files registered in the playlist. Is selected (step S102). Then, the keyword extraction unit 14 extracts keywords related to the audio file, such as a song title, album name, artist name, and the like from the playlist (step S103).
  • the search unit 15 searches for a video file corresponding to the audio file using the keyword extracted by the keyword extraction unit 14 (step S104).
  • the place where the search unit 15 searches the video file may be the video file storage device 22 locally connected to the video / audio reproduction device 10 or the OTT server 28 on the Internet 27.
  • the search unit 15 determines the reliability of each candidate based on the content name of each video file, the number of times of playback, the provider (such as the OTT service domain), the playback time length, and whether or not there is a commercial inserted during playback. From the viewpoint of high quality (image quality, sound quality, etc.), video file candidates corresponding to the audio file are narrowed down to select an optimal video file.
  • the “number of times of reproduction” may be the total number of times of reproduction by an unspecified person regardless of the subject of reproduction, or may be the number of times of reproduction by the video / audio reproduction device 10.
  • the search unit 15 determines that a video file containing “HD” at the beginning of the content name has high image quality, a video file with a large number of playbacks, or a video provided by a major OTT service. It may be determined that a file or a video file whose playback time length is close to the playback time length of the audio file is highly reliable. Also, the user may be able to set whether or not to lower the priority of a commercial inserted during playback.
  • step S105 If a video file corresponding to the audio file is detected as a result of the search by the search unit 15 (YES in step S105), the video link information storage unit 16 displays the video link information indicating the location of the video file as the audio file. The file is stored in association with the file (step S106). If no video file corresponding to the audio file is detected (NO in step S105), step S106 is skipped.
  • a plurality of suitable video files corresponding to the audio file are detected by the search unit 15, when any of the video files is deleted (so-called “broken link” occurs)
  • a plurality of pieces of video link information may be associated with the audio file.
  • priority may be given to each piece of video link information.
  • the search unit 15 may store the narrowing-down conditions when narrowing down candidates for video files corresponding to audio files.
  • the video link information needs to be updated due to a broken link, and when the video file corresponding to the same audio file is searched again, the search unit 15 adds past keywords in addition to the keywords extracted by the keyword extraction unit 14.
  • Video files can be searched based on the filtering conditions. Thereby, the search unit 15 can efficiently narrow down candidate video files.
  • step S107 The above steps S102 to S106 are repeatedly executed for all audio files registered in the playlist until the search for the corresponding video file is completed (step S107). That is, the keyword extraction unit 14 automatically extracts keywords from all audio files registered in the playlist, and the search unit 15 corresponds to all audio files registered in the playlist. A video file search is automatically performed, and the video link information storage unit 16 automatically stores video link information for all audio files in which the corresponding video file is detected.
  • FIG. 4 is a flowchart showing processing (video / audio reproduction processing) in which the video / audio reproduction device 10 reproduces the video file and the audio file.
  • the operation of the video / audio reproduction device 10 described with reference to FIG. 2 is realized by the video / audio reproduction processing of FIG.
  • the operation when the video / audio reproduction device 10 reproduces the video file and the audio file will be described with reference to FIG.
  • the video / audio reproduction device 10 has previously executed the video link information creation processing of FIG.
  • the control unit 12 When the video / audio reproduction processing is started by the user's operation on the video / audio reproduction device 10, first, the control unit 12 reads the playlist from the playlist storage unit 13 and causes the display device 24 to display the playlist (step). S201). And the control part 12 selects the audio
  • control unit 12 refers to the video link information storage unit 16 and confirms whether there is video link information associated with the selected audio file (step S203).
  • Step S204 the control unit 12 controls the playback unit 11 to display a video corresponding to the video data included in the video file on the display device 24 and to output a sound corresponding to the audio data included in the video file. Output from the output device 25.
  • control unit 12 causes the reproduction unit 11 to reproduce the audio file (step S205). That is, the control unit 12 controls the playback unit 11 to output sound corresponding to the sound data included in the sound file from the sound output device 25 and display the content of the metadata included in the sound file as a display device. 24.
  • steps S202 to S204 of FIG. 4 are repeatedly executed.
  • the user when an instruction to reproduce an audio file associated with video link information is received, the corresponding video file is always reproduced. It is also possible that the user wants to play the audio file, such as when it does not fit. Therefore, the user may be able to set whether to play an audio file or a video file corresponding to it. That is, the user may be allowed to switch whether or not to permit the determination of YES in step S203 of FIG.
  • the setting may be performed for each audio file. That is, the user may be allowed to select an audio file that is permitted to be determined as YES in step S203 of FIG.
  • the video / audio reproduction device 10 when receiving the audio file reproduction instruction, reproduces the video file corresponding to the audio file instead of the audio file. Therefore, a highly decorative image such as a promotion video is displayed on the display device 24, and the user can enjoy music visually.
  • the video link information storage unit 16 does not store the video data itself, but stores video link information indicating the location of the video data, so that a large-capacity recording device is not required.
  • the video / audio reproduction device 10 of the present embodiment also has an advantage that the labor can be omitted.
  • FIG. 5 and FIG. 6 are diagrams each showing an example of the hardware configuration of the video / audio reproduction device 10.
  • Each element (the playback unit 11, the control unit 12, the playlist storage unit 13, the keyword extraction unit 14, the search unit 15, and the video link information storage unit 16) of the video / audio playback device 10 illustrated in FIG.
  • a keyword extraction unit 14 for extracting keywords related to the video, a search unit 15 for searching for a video file corresponding to the audio file based on the keywords extracted by the keyword extraction unit 14, and an audio file detected by the search unit 15
  • the video link information storage unit 16 that stores the video link information indicating the location of the video file corresponding to the video file is associated with the audio file and the reproduction instruction of the audio file that is associated with the video link information is received, Instead of the video file indicated by the video link information associated with the audio file.
  • It comprises a control unit 12 to be reproduced to the reproduction unit 11.
  • Dedicated hardware may be applied to the processing circuit 50, or a processor (Central Processing Unit (CPU), processing device, arithmetic device, microprocessor, micro processor that executes a program stored in the memory.
  • a computer or DSP Digital Signal Processor
  • the processing circuit 50 includes, for example, a single circuit, a composite circuit, a programmed processor, a processor programmed in parallel, an ASIC (Application Specific Integrated Circuit), an FPGA (Field-Programmable). Gate Array) or a combination of these.
  • ASIC Application Specific Integrated Circuit
  • FPGA Field-Programmable Gate Array
  • Each of the functions of each element of the video / audio reproduction device 10 may be realized by a plurality of processing circuits, or these functions may be realized by a single processing circuit.
  • FIG. 6 shows a hardware configuration of the video / audio reproduction device 10 when the processing circuit 50 is configured using a processor.
  • the function of each element of the video / audio reproduction device 10 is realized by a combination of software and the like (software, firmware, or software and firmware).
  • Software or the like is described as a program and stored in the memory 52.
  • the processor 51 as the processing circuit 50 implements the functions of the respective units by reading out and executing the program stored in the memory 52.
  • the video / audio reproduction device 10 when executed by the processing circuit 50, extracts a keyword related to the audio file based on data included in the audio file registered in the playlist, and the extracted keyword , A process for searching for a video file corresponding to the audio file, a process for storing video link information indicating the location of the video file corresponding to the detected audio file in association with the audio file, and a video link
  • a playback instruction for an audio file associated with information is received, a process of playing the video file indicated by the video link information associated with the audio file instead of the audio file is executed as a result.
  • a memory 52 for storing the program. In other words, it can be said that this program causes a computer to execute the operation procedure and method of each element of the video / audio reproduction device 10.
  • the memory 52 is nonvolatile or non-volatile such as RAM (Random Access Memory), ROM (Read Only Memory), flash memory, EPROM (Erasable Programmable Read Only Memory), EEPROM (Electrically Erasable Programmable Read Only Memory), or the like. Volatile semiconductor memory, HDD (Hard Disk Drive), magnetic disk, flexible disk, optical disk, compact disk, mini disk, DVD (Digital Versatile Disk) and its drive device, etc., or any storage media used in the future May be.
  • RAM Random Access Memory
  • ROM Read Only Memory
  • flash memory EPROM (Erasable Programmable Read Only Memory), EEPROM (Electrically Erasable Programmable Read Only Memory), or the like.
  • Volatile semiconductor memory Volatile semiconductor memory, HDD (Hard Disk Drive), magnetic disk, flexible disk, optical disk, compact disk, mini disk, DVD (Digital Versatile Disk) and its drive device, etc., or any storage media used in the future May be.
  • the present invention is not limited to this, and a configuration may be employed in which some elements of the video / audio reproduction device 10 are realized by dedicated hardware and another part is realized by software or the like.
  • the functions of some elements are realized by the processing circuit 50 as dedicated hardware, and the processing circuit 50 as the processor 51 reads a program stored in the memory 52 for the other some elements.
  • the function can be realized by executing.
  • the video / audio reproduction device 10 can realize the functions described above by hardware, software, or the like, or a combination thereof.
  • the audio file storage device 21, the video file storage device 22, the operation input device 23, the display device 24, the audio output device 25, and the communication device 26 are externally connected to the video / audio reproduction device 10. However, some or all of them may be integrated with the video / audio reproduction device 10. For example, when the video / audio reproduction system of FIG. 1 is applied to a portable device such as a mobile phone or a smartphone, all of them are housed in one casing.
  • the keyword extraction unit 14 and the search unit 15 may be constructed in a server 30 on the Internet 27. That is, when the video / audio reproduction device 10 transmits the playlist stored in the playlist storage unit 13 to the server 30, the keyword extraction unit 14 detects the keyword and the search unit 15 searches the video file on the server 30. The video link information indicating the location of the video file corresponding to each audio file registered in the playlist may be sent back to the video / audio reproduction device 10.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)

Abstract

In the present invention, a keyword extraction unit (14) extracts, on the basis of data included in an audio file registered in a playlist that is stored in a playlist storage unit (13), a keyword related to the audio file. A retrieval unit (15) retrieves, on the basis of the keyword, a video file corresponding to the audio file. A video link information storage unit (16) stores video link information in association with the audio file, the video link information indicating the location of the video file that corresponds to the audio file and that was detected by the retrieval unit (15). Upon receiving an instruction to playback the audio file associated with the video link information, a control unit (12) causes a playback unit (11) to play back, instead of the audio file, the video file indicated by the video link information associated with the audio file.

Description

映像音声再生装置および映像音声再生方法Video / audio playback apparatus and video / audio playback method
　本発明は、音声ファイルおよび映像ファイルを再生可能な映像音声再生装置に関するものである。 The present invention relates to a video / audio reproduction device capable of reproducing an audio file and a video file.
　音声ファイルおよび映像ファイルを再生可能な映像音声再生装置は、例えば携帯電話やスマートフォン、カーナビゲーション装置等に搭載されるなど、広く普及している。例えば下記の特許文献１には、ＣＤ（Compact Disc）に収録された曲を再生する際に、その曲に関連する映像を映し出すことで、ＣＤをビデオクリップのように楽しむことができる記録再生装置が提案されている。 Video / audio reproduction devices that can reproduce audio files and video files are widely used, for example, in mobile phones, smartphones, car navigation devices, and the like. For example, the following Patent Document 1 discloses a recording / reproducing apparatus that allows a CD to be enjoyed like a video clip by displaying a video related to the song when reproducing the song recorded on a CD (Compact Disc). Has been proposed.
特開２００３－２８１８６２号公報JP 2003-281862 A
　特許文献１の記録再生装置は、ＣＤの収録曲の情報（曲名、アーティスト名）に基づいて、各曲に関連するデジタル放送番組の映像データを自動的に記録装置に記録し、ＣＤの再生指示があると、ＣＤを再生すると同時に、当該ＣＤの収録曲に関連する映像データを再生する。映像データはデータサイズが大きいため、特許文献１の記録再生装置には大容量の記録装置が必要とされる。また、特許文献１の記録再生装置は、映像データをデジタル放送から取得するものであるが、ＣＤの収録曲に関連する番組が都合よく放送されるとは限らない。なお、特許文献１の記録再生装置は、スピーカからＣＤの音声を出力しつつ、表示装置に映像を表示させるものであり、ＣＤの再生を主目的としている。 The recording / reproducing apparatus of Patent Document 1 automatically records video data of a digital broadcast program related to each song on the recording apparatus based on the information (music title, artist name) of the music recorded on the CD, and instructs to reproduce the CD. If there is, the video data related to the music recorded on the CD is reproduced at the same time as the CD is reproduced. Since video data has a large data size, the recording / reproducing apparatus of Patent Document 1 requires a large-capacity recording apparatus. The recording / reproducing apparatus of Patent Document 1 acquires video data from digital broadcasting, but a program related to a recorded song on a CD is not always conveniently broadcast. Note that the recording / reproducing apparatus disclosed in Patent Document 1 is to display video on a display device while outputting audio of a CD from a speaker, and is mainly intended to reproduce a CD.
　本発明は以上のような課題を解決するためになされたものであり、大容量の記録装置を必要とせず、音声ファイルに対応する映像ファイルを自動的に再生できる映像音声再生装置を提供することを目的とする。 The present invention has been made to solve the above-described problems, and provides a video / audio reproduction device capable of automatically reproducing a video file corresponding to an audio file without requiring a large-capacity recording device. With the goal.
　本発明に係る映像音声再生装置は、音声ファイルおよび映像ファイルを再生可能な再生部と、音声ファイルが登録されたプレイリストを記憶するプレイリスト記憶部と、プレイリストに登録された音声ファイルに含まれるデータに基づいて音声ファイルに関連するキーワードを抽出するキーワード抽出部と、キーワード抽出部により抽出されたキーワードに基づいて、音声ファイルに対応する映像ファイルを検索する検索部と、検索部により検出された音声ファイルに対応する映像ファイルの所在を示す映像リンク情報を、音声ファイルと紐付けして記憶する映像リンク情報記憶部と、再生部の動作を制御する制御部と、を備え、制御部は、映像リンク情報が紐付けされた音声ファイルの再生指示を受けると、音声ファイルの代わりに、音声ファイルに紐付けされた映像リンク情報が示す映像ファイルを再生部に再生させる。 The video / audio reproduction device according to the present invention is included in a reproduction unit capable of reproducing an audio file and a video file, a playlist storage unit that stores a playlist in which the audio file is registered, and an audio file registered in the playlist. A keyword extraction unit that extracts a keyword related to the audio file based on the data to be detected, a search unit that searches for a video file corresponding to the audio file based on the keyword extracted by the keyword extraction unit, and a detection unit A video link information storage unit that stores video link information indicating the location of the video file corresponding to the audio file in association with the audio file, and a control unit that controls the operation of the playback unit. When an instruction to play an audio file linked with video link information is received, a sound file is sent instead of the audio file. Video link information linking to the file to be reproduced to the reproduction unit an image file indicated.
　本発明に係る映像音声再生装置は、音声ファイルの再生指示を受けると、その音声ファイルの代わりに、当該音声ファイルに対応する映像ファイルを再生する。そのため表示装置には装飾性の高い画像が表示され、ユーザは音楽を視覚的にも楽しむことができる。また、映像音声再生装置は、映像データの所在を示す映像リンク情報を記憶するため、必ずしも映像データそのものを記憶しなくてもよく、大容量の記録装置は必要とされない。 The video / audio reproduction device according to the present invention, when receiving an instruction to reproduce an audio file, reproduces the video file corresponding to the audio file instead of the audio file. Therefore, a highly decorative image is displayed on the display device, and the user can enjoy music visually. Further, since the video / audio reproduction device stores the video link information indicating the location of the video data, the video data itself does not necessarily have to be stored, and a large-capacity recording device is not required.
　本発明の目的、特徴、態様、および利点は、以下の詳細な説明と添付図面とによって、より明白となる。 The objects, features, aspects and advantages of the present invention will become more apparent from the following detailed description and the accompanying drawings.
本発明の実施の形態に係る映像音声再生システムの構成を示す図である。It is a figure which shows the structure of the video / audio reproduction system which concerns on embodiment of this invention. 本発明の実施の形態に係る映像音声再生システムの動作の概要を説明するための図である。It is a figure for demonstrating the outline | summary of operation | movement of the video / audio reproduction system which concerns on embodiment of this invention. 本発明の実施の形態に係る映像音声再生装置によって行われる映像リンク情報作成処理を示すフローチャートである。It is a flowchart which shows the video link information creation process performed by the video / audio reproduction device which concerns on embodiment of this invention. 本発明の実施の形態に係る映像音声再生装置によって行われる映像音声再生処理を示すフローチャートである。It is a flowchart which shows the video / audio reproduction process performed by the video / audio reproduction device which concerns on embodiment of this invention. 映像音声再生装置のハードウェア構成の例を示す図である。It is a figure which shows the example of the hardware constitutions of a video / audio reproduction device. 映像音声再生装置のハードウェア構成の例を示す図である。It is a figure which shows the example of the hardware constitutions of a video / audio reproduction device. 映像音声再生システムの構成の変形例を示す図である。It is a figure which shows the modification of a structure of a video / audio reproduction system.
　図１は、本発明の実施の形態に係る映像音声再生システムの構成を示す図である。図１のように、映像音声再生システムは、映像音声再生装置１０と、それに接続された音声ファイル記憶装置２１、映像ファイル記憶装置２２、操作入力装置２３、表示装置２４、音声出力装置２５および通信装置２６とを備えている。 FIG. 1 is a diagram showing a configuration of a video / audio reproduction system according to an embodiment of the present invention. As shown in FIG. 1, the video / audio reproduction system includes a video / audio reproduction device 10 and an audio file storage device 21, a video file storage device 22, an operation input device 23, a display device 24, an audio output device 25, and a communication device connected thereto. Device 26.
　音声ファイル記憶装置２１および映像ファイル記憶装置２２は、映像音声再生装置１０にローカル接続された記憶媒体であり、音声ファイル記憶装置２１には音声ファイルが記憶され、映像ファイル記憶装置２２には映像ファイルが記憶される。図１では、音声ファイル記憶装置２１と映像ファイル記憶装置２２とを別のブロックとしたが、それらは１つの記憶装置により構成されていてもよい。音声ファイル記憶装置２１および映像ファイル記憶装置２２は、例えばハードディスク、ＵＳＢ（Universal Serial Bus）メモリ、メモリカード、ＣＤ、ＤＶＤ（Digital Versatile Disc）、ブルーレイ（登録商標）ディスクなど、任意の記憶媒体でよい。 The audio file storage device 21 and the video file storage device 22 are storage media locally connected to the video / audio reproduction device 10. The audio file storage device 21 stores an audio file, and the video file storage device 22 stores a video file. Is memorized. In FIG. 1, the audio file storage device 21 and the video file storage device 22 are separate blocks, but they may be configured by a single storage device. The audio file storage device 21 and the video file storage device 22 may be any storage media such as a hard disk, a USB (Universal Serial Bus) memory, a memory card, a CD, a DVD (Digital Versatile Disc), and a Blu-ray (registered trademark) disk. .
　操作入力装置２３は、ユーザが映像音声再生装置１０に対する操作を入力するための装置であり、押しボタンやキーボード、タッチパッド、マウスなどのハードウェアでもよいし、画面に表示されるソフトウェアキーでもよい。表示装置２４は、映像音声再生装置１０が出力する映像を表示する装置であり、例えば液晶表示装置により構成される。操作入力装置２３としてのソフトウェアキーを表示装置２４の画面に表示させることで、操作入力装置２３および表示装置２４を一つのタッチパネルとして構成してもよい。音声出力装置２５は、映像音声再生装置１０が出力する音声を出力するためのスピーカである。 The operation input device 23 is a device for a user to input an operation to the video / audio reproduction device 10, and may be a hardware such as a push button, a keyboard, a touch pad, a mouse, or a software key displayed on the screen. . The display device 24 is a device that displays the video output from the video / audio reproduction device 10, and is configured by a liquid crystal display device, for example. The operation input device 23 and the display device 24 may be configured as one touch panel by displaying a software key as the operation input device 23 on the screen of the display device 24. The audio output device 25 is a speaker for outputting audio output from the video / audio reproduction device 10.
　通信装置２６は、映像音声再生装置１０が外部との通信を行うための装置である。通信装置２６は映像音声再生装置１０専用の通信機でなくてもよく、例えば携帯電話やスマートフォンなどの汎用の通信機でもよい。映像音声再生装置１０は、通信装置２６を用いて、インターネット２７にアクセスできる。インターネット２７上には、音声ファイルや映像ファイルを配信するＯＴＴ（Over The Top）サービスのサーバ２８（以下「ＯＴＴサーバ２８」という）が存在する。図１ではＯＴＴサーバ２８のブロックを１つのみ示しているが、インターネット２７上には多数のＯＴＴサービスのＯＴＴサーバ２８が存在する。 The communication device 26 is a device for the video / audio reproduction device 10 to communicate with the outside. The communication device 26 may not be a communication device dedicated to the video / audio reproduction device 10, and may be a general-purpose communication device such as a mobile phone or a smartphone. The video / audio reproduction device 10 can access the Internet 27 using the communication device 26. On the Internet 27, there is a server 28 (hereinafter referred to as “OTT server 28”) of an OTT (Over The Top) service that distributes audio files and video files. Although only one block of the OTT server 28 is shown in FIG. 1, there are many OTT servers 28 for OTT services on the Internet 27.
　映像音声再生装置１０は、操作入力装置２３に入力されたユーザの操作に従って、音声ファイル記憶装置２１に記憶されている音声ファイルや、映像ファイル記憶装置２２に記憶されている映像ファイル、ＯＴＴサーバ２８が配信する音声ファイルおよび映像ファイルなどを再生することができる。 The video / audio reproduction device 10 is configured to operate the audio file stored in the audio file storage device 21, the video file stored in the video file storage device 22, or the OTT server 28 in accordance with a user operation input to the operation input device 23. Can play audio files, video files, and so on.
　映像音声再生装置１０が取り扱う音声ファイルおよび映像ファイルの種類は問わないが、ここでは音声ファイルは音楽ファイルであるものとし、音声ファイルには、曲の音声データだけでなく、曲のタイトル、アルバム名、アーチスト名、カバーアートの画像などの情報がメタデータとして含まれているものとする。また、映像ファイルには、映像データおよび音声データだけでなく、少なくともコンテンツ名（映像のタイトル）の情報が含まれているものとする。 The audio file and the type of the video file handled by the video / audio reproduction device 10 are not limited. Here, the audio file is assumed to be a music file, and not only the audio data of the song but also the song title and album name are included in the audio file. It is assumed that information such as an artist name and a cover art image is included as metadata. The video file includes not only video data and audio data but also information on at least a content name (video title).
　図１に示すように、映像音声再生装置１０は、再生部１１、制御部１２、プレイリスト記憶部１３、キーワード抽出部１４、検索部１５および映像リンク情報記憶部１６を備えている。 As shown in FIG. 1, the video / audio reproduction device 10 includes a reproduction unit 11, a control unit 12, a playlist storage unit 13, a keyword extraction unit 14, a search unit 15, and a video link information storage unit 16.
　再生部１１は、音声ファイルおよび映像ファイルの再生処理を行う。例えば音声ファイルを再生する場合、再生部１１は、音声ファイルに含まれる音声データに応じた音声を音声出力装置２５から出力させると共に、その音声ファイルに含まれるメタデータの内容を表示装置２４に表示させる。また、映像ファイルを再生する場合、再生部１１は、映像ファイルに含まれる映像データに応じた映像を表示装置２４に表示させると共に、同映像ファイルに含まれる音声データに応じた音声を音声出力装置２５から出力させる。 The playback unit 11 performs playback processing of audio files and video files. For example, when reproducing an audio file, the reproducing unit 11 causes the audio output device 25 to output audio corresponding to the audio data included in the audio file, and displays the content of the metadata included in the audio file on the display device 24. Let When playing back a video file, the playback unit 11 causes the display device 24 to display a video corresponding to the video data included in the video file, and outputs a sound corresponding to the audio data included in the video file to the audio output device. 25.
　制御部１２は、操作入力装置２３に入力されたユーザの操作に基づいて、再生部１１の動作を制御する。また、制御部１２は、音声ファイル記憶装置２１に記憶されている音声ファイルを複数登録可能なプレイリストを作成する機能を有している。プレイリストには、各音声ファイルに含まれるメタデータの内容、すなわち曲のタイトル、アルバム名、アーチスト名などの情報も登録される。 The control unit 12 controls the operation of the reproduction unit 11 based on the user operation input to the operation input device 23. Further, the control unit 12 has a function of creating a playlist capable of registering a plurality of audio files stored in the audio file storage device 21. In the playlist, the contents of the metadata included in each audio file, that is, information such as the song title, album name, artist name, etc. are also registered.
　プレイリストの作成方法は任意の方法でよい。例えば、映像音声再生装置１０に音声ファイル記憶装置２１が接続されたときに、制御部１２が、音声ファイル記憶装置２１内の全ての音声ファイルが登録されたプレイリストを自動的に作成してもよい。また、プレイリストに登録する音声ファイルをユーザが選択したり、既存のプレイリストをユーザが編集したりできるようにしてもよい。 * The playlist can be created by any method. For example, even when the audio file storage device 21 is connected to the video / audio reproduction device 10, the control unit 12 automatically creates a playlist in which all the audio files in the audio file storage device 21 are registered. Good. Further, the user may select an audio file to be registered in the playlist, or the user may edit an existing playlist.
　制御部１２が作成したプレイリストは、プレイリスト記憶部１３に記憶される。また、制御部１２は、プレイリスト記憶部１３が記憶しているプレイリストを表示装置２４に表示することができ、ユーザは、操作入力装置２３を用いて、表示装置２４に表示されたプレイリストのうちから所望の音声ファイルを選択し、選択した音声ファイルの再生を映像音声再生装置１０に指示することができる。 The playlist created by the control unit 12 is stored in the playlist storage unit 13. In addition, the control unit 12 can display the playlist stored in the playlist storage unit 13 on the display device 24, and the user can use the operation input device 23 to display the playlist displayed on the display device 24. A desired audio file can be selected from among them, and the video / audio reproduction device 10 can be instructed to reproduce the selected audio file.
　キーワード抽出部１４は、プレイリスト記憶部１３に記憶されているプレイリストに登録された各音声ファイルの情報（メタデータの内容）に基づいて、各音声ファイルに関連するキーワードを抽出する。具体的には、音声ファイルの曲のタイトル、アルバム名、アーチスト名などがキーワードとして抽出される。 The keyword extraction unit 14 extracts keywords related to each audio file based on information (metadata contents) of each audio file registered in the playlist stored in the playlist storage unit 13. Specifically, the title, album name, artist name, etc. of the song of the audio file are extracted as keywords.
　検索部１５は、キーワード抽出部１４が抽出したキーワードに基づいて、音声ファイルに対応する映像ファイルを検索する。ここで、「音声ファイルに対応する映像ファイル」とは、例えば音声ファイルの曲のプロモーションビデオなど、音声ファイルのコンテンツを映像で表現したものを意図している。検索部１５が映像ファイルを検索する場所は、映像音声再生装置１０にローカル接続した映像ファイル記憶装置２２でもよいし、インターネット２７上のＯＴＴサーバ２８でもよい。ＯＴＴサーバ２８が配信する映像ファイルの検索は、ＯＴＴサーバ２８が備える検索エンジンを利用してもよいし、他の検索サーバ（不図示）を利用してもよい。 The search unit 15 searches for a video file corresponding to the audio file based on the keyword extracted by the keyword extraction unit 14. Here, the “video file corresponding to the audio file” is intended to express the content of the audio file with video, such as a promotion video of a song of the audio file. The place where the search unit 15 searches for a video file may be the video file storage device 22 locally connected to the video / audio reproduction device 10 or the OTT server 28 on the Internet 27. The search of the video file distributed by the OTT server 28 may use a search engine provided in the OTT server 28 or may use another search server (not shown).
　映像リンク情報記憶部１６は、検索部１５により検出された映像ファイル、すなわち音声ファイルに対応する映像ファイルの所在を示す映像リンク情報を、当該音声ファイルと紐付けして記憶する。映像リンク情報は、映像ファイル記憶装置２２における映像ファイルの所在を示すパスや、ＯＴＴサーバ２８における映像ファイルの所在を示すＵＲＬ（Uniform Resource Locator）などである。 The video link information storage unit 16 stores video link information indicating the location of the video file detected by the search unit 15, that is, the video file corresponding to the audio file, in association with the audio file. The video link information is a path indicating the location of the video file in the video file storage device 22 or a URL (Uniform Resource Locator) indicating the location of the video file in the OTT server 28.
　先に述べたように、制御部１２は、ユーザの操作に基づいて再生部１１の動作を制御する。基本的に、制御部１２は、ユーザが再生を指示した音声ファイルまたは映像ファイルを再生部１１に再生させる。ただし、映像リンク情報が紐付けされた音声ファイルの再生指示を受けた場合には、再生部１１は、その音声ファイルの代わりに、当該音声ファイルに紐付けされた映像リンク情報が示す映像ファイルを再生部に再生させる。 As described above, the control unit 12 controls the operation of the reproduction unit 11 based on a user operation. Basically, the control unit 12 causes the playback unit 11 to play back an audio file or video file instructed to be played back by the user. However, when receiving an instruction to reproduce an audio file associated with the video link information, the playback unit 11 selects the video file indicated by the video link information associated with the audio file instead of the audio file. Play the playback unit.
　よって、本実施の形態に係る映像音声再生システムでは、例えば図２のように、表示装置２４にプレイリストが表示された状態から、ユーザが、映像リンク情報が紐付けされていない音声ファイルの再生指示を行った場合には、表示装置２４の画面は、その音声ファイルの再生画面へ移行する。しかし、ユーザが、映像リンク情報が紐付けされた音声ファイルの再生指示を行った場合には、表示装置２４の表示は、その音声ファイルに紐付けされた映像リンク情報が示す映像ファイルの再生画面へ移行することになる。 Therefore, in the video / audio reproduction system according to the present embodiment, for example, as shown in FIG. 2, from the state where the playlist is displayed on the display device 24, the user reproduces the audio file to which the video link information is not linked. When the instruction is given, the screen of the display device 24 shifts to the playback screen of the audio file. However, when the user gives an instruction to reproduce the audio file associated with the video link information, the display on the display device 24 is a reproduction screen of the video file indicated by the video link information associated with the audio file. Will be transferred to.
　図３は、映像音声再生装置１０が映像リンク情報を作成する処理（映像リンク情報作成処理）をフローチャートである。以下、図３を参照しつつ、映像音声再生装置１０が映像リンク情報を作成するときの動作を説明する。ここでは、制御部１２がプレイリストを作成または更新したときに、映像リンク情報作成処理が実行されるものとする。ただし、映像リンク情報作成処理の実行タイミングは、プレイリストが作成された後であれば任意のタイミングでよい。 FIG. 3 is a flowchart showing a process (video link information creation process) in which the video / audio reproduction device 10 creates video link information. The operation when the video / audio reproduction device 10 creates video link information will be described below with reference to FIG. Here, it is assumed that the video link information creation process is executed when the control unit 12 creates or updates a playlist. However, the execution timing of the video link information creation process may be any timing as long as the playlist is created.
　制御部１２がプレイリストを作成または更新し（ステップＳ１０１）、新たなプレイリストがプレイリスト記憶部１３に記憶されると、キーワード抽出部１４は、そのプレイリストに登録されている音声ファイルの１つを選択する（ステップＳ１０２）。そして、キーワード抽出部１４は、当該音声ファイルに関連するキーワード、例えば、曲のタイトル、アルバム名、アーチスト名などをプレイリストから抽出する（ステップＳ１０３）。 When the control unit 12 creates or updates a playlist (step S101) and a new playlist is stored in the playlist storage unit 13, the keyword extraction unit 14 selects one of the audio files registered in the playlist. Is selected (step S102). Then, the keyword extraction unit 14 extracts keywords related to the audio file, such as a song title, album name, artist name, and the like from the playlist (step S103).
　次に、検索部１５が、キーワード抽出部１４が抽出したキーワードを用いて、当該音声ファイルに対応する映像ファイルを検索する（ステップＳ１０４）。検索部１５が映像ファイルを検索する対象とする場所は、映像音声再生装置１０にローカル接続した映像ファイル記憶装置２２でもよいし、インターネット２７上のＯＴＴサーバ２８でもよい。 Next, the search unit 15 searches for a video file corresponding to the audio file using the keyword extracted by the keyword extraction unit 14 (step S104). The place where the search unit 15 searches the video file may be the video file storage device 22 locally connected to the video / audio reproduction device 10 or the OTT server 28 on the Internet 27.
　検索部１５による検索で、当該音声ファイルに対応する映像ファイルの候補が複数検出されることが考えられる。その場合、検索部１５は、各映像ファイルのコンテンツ名、再生回数、提供元（ＯＴＴサービスのドメインなど）、再生時間長、再生時に挿入されるコマーシャルの有無などに基づいて、各候補の信頼性および品質（画質、音質など）の高さの観点から、当該音声ファイルに対応する映像ファイルの候補を絞り込み、最適な映像ファイルを選出する。上記の「再生回数」は、再生した主体を問わない不特定者による総再生回数でもよいし、当該映像音声再生装置１０による再生回数でもよい。 It is conceivable that a plurality of video file candidates corresponding to the audio file are detected by the search by the search unit 15. In this case, the search unit 15 determines the reliability of each candidate based on the content name of each video file, the number of times of playback, the provider (such as the OTT service domain), the playback time length, and whether or not there is a commercial inserted during playback. From the viewpoint of high quality (image quality, sound quality, etc.), video file candidates corresponding to the audio file are narrowed down to select an optimal video file. The “number of times of reproduction” may be the total number of times of reproduction by an unspecified person regardless of the subject of reproduction, or may be the number of times of reproduction by the video / audio reproduction device 10.
　例えば、検索部１５が、コンテンツ名の冒頭に「ＨＤ」の文字が入っている映像ファイルは画質が高いと判断したり、再生回数が多い映像ファイルや、大手のＯＴＴサービスから提供されている映像ファイル、再生時間長が当該音声ファイルの再生時間長に近い映像ファイルなどは信頼性が高いと判断したりするとよい。また、再生時にコマーシャルが挿入されるものの優先度を低くするか否かを、ユーザが設定できるようにしてもよい。 For example, the search unit 15 determines that a video file containing “HD” at the beginning of the content name has high image quality, a video file with a large number of playbacks, or a video provided by a major OTT service. It may be determined that a file or a video file whose playback time length is close to the playback time length of the audio file is highly reliable. Also, the user may be able to set whether or not to lower the priority of a commercial inserted during playback.
　検索部１５による検索の結果、当該音声ファイルに対応する映像ファイルが検出されれば（ステップＳ１０５でＹＥＳ）、映像リンク情報記憶部１６が、その映像ファイルの所在を示す映像リンク情報を、当該音声ファイルと紐付けして記憶する（ステップＳ１０６）。当該音声ファイルに対応する映像ファイルが検出されなかったときは（ステップＳ１０５でＮＯ）、ステップＳ１０６はスキップされる。 If a video file corresponding to the audio file is detected as a result of the search by the search unit 15 (YES in step S105), the video link information storage unit 16 displays the video link information indicating the location of the video file as the audio file. The file is stored in association with the file (step S106). If no video file corresponding to the audio file is detected (NO in step S105), step S106 is skipped.
　なお、検索部１５により、当該音声ファイルに対応する映像ファイルとして適したものが複数検出された場合には、そのいずれかの映像ファイルが削除された場合（いわゆる「リンク切れ」が生じた場合）に備え、当該音声ファイルに複数の映像リンク情報を紐付けしてもよい。１つの音声ファイルに複数の映像リンク情報を紐付けする場合、映像リンク情報のそれぞれに優先度を付すとよい。 In addition, when a plurality of suitable video files corresponding to the audio file are detected by the search unit 15, when any of the video files is deleted (so-called “broken link” occurs) In preparation, a plurality of pieces of video link information may be associated with the audio file. When a plurality of pieces of video link information are associated with one audio file, priority may be given to each piece of video link information.
　また、検索部１５が、音声ファイルに対応する映像ファイルを候補の絞り込みを行ったときの絞り込み条件を記憶するようにしてもよい。その場合、例えばリンク切れにより映像リンク情報の更新が必要となり、同じ音声ファイルに対応する映像ファイルを再度検索するときに、検索部１５が、キーワード抽出部１４が抽出したキーワードに加えて、過去の絞り込み条件に基づいて映像ファイルを検索することができる。それにより、検索部１５は、映像ファイルの候補の絞り込みを効率よく行うことができる。 Further, the search unit 15 may store the narrowing-down conditions when narrowing down candidates for video files corresponding to audio files. In that case, for example, the video link information needs to be updated due to a broken link, and when the video file corresponding to the same audio file is searched again, the search unit 15 adds past keywords in addition to the keywords extracted by the keyword extraction unit 14. Video files can be searched based on the filtering conditions. Thereby, the search unit 15 can efficiently narrow down candidate video files.
　上記のステップＳ１０２～Ｓ１０６は、プレイリストに登録されている全ての音声ファイルについて、それに対応する映像ファイルの検索が完了するまで繰り返し実行される（ステップＳ１０７）。つまり、キーワード抽出部１４は、プレイリストに登録されている全ての音声ファイルに対してキーワードの抽出を自動的に行い、検索部１５は、プレイリストに登録されている全ての音声ファイルに対応する映像ファイルの検索を自動的に行い、映像リンク情報記憶部１６は、対応する映像ファイルが検出された全ての音声ファイルについての映像リンク情報を自動的に記憶することになる。 The above steps S102 to S106 are repeatedly executed for all audio files registered in the playlist until the search for the corresponding video file is completed (step S107). That is, the keyword extraction unit 14 automatically extracts keywords from all audio files registered in the playlist, and the search unit 15 corresponds to all audio files registered in the playlist. A video file search is automatically performed, and the video link information storage unit 16 automatically stores video link information for all audio files in which the corresponding video file is detected.
　図４は、映像音声再生装置１０が、映像ファイルおよび音声ファイルを再生する処理（映像音声再生処理）を示すフローチャートである。図２を用いて説明した映像音声再生装置１０の動作は、図４の映像音声再生処理によって実現される。以下、図４を参照しつつ、映像音声再生装置１０が映像ファイルおよび音声ファイルを再生するときの動作を説明する。ここで、映像音声再生装置１０は、図３の映像リンク情報作成処理を予め実行しているものとする。 FIG. 4 is a flowchart showing processing (video / audio reproduction processing) in which the video / audio reproduction device 10 reproduces the video file and the audio file. The operation of the video / audio reproduction device 10 described with reference to FIG. 2 is realized by the video / audio reproduction processing of FIG. Hereinafter, the operation when the video / audio reproduction device 10 reproduces the video file and the audio file will be described with reference to FIG. Here, it is assumed that the video / audio reproduction device 10 has previously executed the video link information creation processing of FIG.
　映像音声再生装置１０に対するユーザの操作により、映像音声再生処理が開始されると、まず、制御部１２は、プレイリスト記憶部１３からプレイリストを読み出し、表示装置２４にプレイリストを表示させる（ステップＳ２０１）。そして、制御部１２は、プレイリストに登録されている音声ファイルのうちから、ユーザからの再生指示に応じた音声ファイルを選択する（ステップＳ２０２）。 When the video / audio reproduction processing is started by the user's operation on the video / audio reproduction device 10, first, the control unit 12 reads the playlist from the playlist storage unit 13 and causes the display device 24 to display the playlist (step). S201). And the control part 12 selects the audio | voice file according to the reproduction | regeneration instruction | indication from a user from the audio | voice file registered into the play list (step S202).
　次に、制御部１２は、映像リンク情報記憶部１６を参照し、選択された音声ファイルに紐付けされた映像リンク情報がある否かを確認する（ステップＳ２０３）。 Next, the control unit 12 refers to the video link information storage unit 16 and confirms whether there is video link information associated with the selected audio file (step S203).
　選択された音声ファイルに紐付けされた映像リンク情報があれば（ステップＳ２０３でＹＥＳ）、制御部１２は、当該音声ファイルに紐付けされた映像リンク情報が示す映像ファイルを、再生部１１に再生させる（ステップＳ２０４）。すなわち、制御部１２は、再生部１１を制御して、当該映像ファイルに含まれる映像データに応じた映像を表示装置２４に表示させると共に、同映像ファイルに含まれる音声データに応じた音声を音声出力装置２５から出力させる。 If there is video link information associated with the selected audio file (YES in step S203), the control unit 12 reproduces the video file indicated by the video link information associated with the audio file on the reproduction unit 11. (Step S204). That is, the control unit 12 controls the playback unit 11 to display a video corresponding to the video data included in the video file on the display device 24 and to output a sound corresponding to the audio data included in the video file. Output from the output device 25.
　選択された音声ファイルに紐付けされた映像リンク情報がなければ（ステップＳ２０３でＮＯ）、制御部１２は、当該音声ファイルを再生部１１に再生させる（ステップＳ２０５）。すなわち、制御部１２は、再生部１１を制御して、当該音声ファイルに含まれる音声データに応じた音声を音声出力装置２５から出力させると共に、同音声ファイルに含まれるメタデータの内容を表示装置２４に表示させる。 If there is no video link information associated with the selected audio file (NO in step S203), the control unit 12 causes the reproduction unit 11 to reproduce the audio file (step S205). That is, the control unit 12 controls the playback unit 11 to output sound corresponding to the sound data included in the sound file from the sound output device 25 and display the content of the metadata included in the sound file as a display device. 24.
　図４のフローは、ユーザが１つの音声ファイルの再生指示を行うことを前提としているが、ユーザの再生指示は複数の音声ファイルの再生を指示するものでもよい。例えば、プレイリストに登録されている全ての音声ファイルを順番あるいはランダムに再生する指示がこれに該当する。その場合、図４のステップＳ２０２～Ｓ２０４が繰り返し実行されることになる。 4 is based on the premise that the user instructs to reproduce one audio file, but the user's reproduction instruction may instruct the reproduction of a plurality of audio files. For example, this corresponds to an instruction to reproduce all audio files registered in the playlist in order or randomly. In that case, steps S202 to S204 of FIG. 4 are repeatedly executed.
　また、図４のフローでは、映像リンク情報が紐付けされた音声ファイルの再生指示を受けたときには、必ずそれに対応する映像ファイルが再生されることになるが、例えば映像ファイルの内容がユーザの好みに合わない場合など、ユーザが音声ファイルの方を再生したいことも考えられる。そのため、音声ファイルを再生するか、それに対応する映像ファイルを再生するかを、ユーザが設定できるようにしてもよい。すなわち、図４のステップＳ２０３でＹＥＳと判断されることを許可するか否かを、ユーザが切り替えできるようにしてもよい。また、その設定を、音声ファイルごとに行えるようにしてもよい。すなわち、図４のステップＳ２０３でＹＥＳと判断されることを許可する音声ファイルを、ユーザが選択できるようにしてもよい。 Also, in the flow of FIG. 4, when an instruction to reproduce an audio file associated with video link information is received, the corresponding video file is always reproduced. It is also possible that the user wants to play the audio file, such as when it does not fit. Therefore, the user may be able to set whether to play an audio file or a video file corresponding to it. That is, the user may be allowed to switch whether or not to permit the determination of YES in step S203 of FIG. The setting may be performed for each audio file. That is, the user may be allowed to select an audio file that is permitted to be determined as YES in step S203 of FIG.
　以上のように、本実施の形態に係る映像音声再生装置１０は、音声ファイルの再生指示を受けると、その音声ファイルの代わりに、当該音声ファイルに対応する映像ファイルを再生する。そのため、表示装置２４にはプロモーションビデオなど装飾性の高い画像が表示され、ユーザは音楽を視覚的にも楽しむことができる。また、映像リンク情報記憶部１６は、映像データそのものを記憶するのではなく、映像データの所在を示す映像リンク情報を記憶するため、大容量の記録装置は必要とされない。 As described above, when receiving the audio file reproduction instruction, the video / audio reproduction device 10 according to the present embodiment reproduces the video file corresponding to the audio file instead of the audio file. Therefore, a highly decorative image such as a promotion video is displayed on the display device 24, and the user can enjoy music visually. The video link information storage unit 16 does not store the video data itself, but stores video link information indicating the location of the video data, so that a large-capacity recording device is not required.
　また、従来の映像音声再生装置では、ＯＴＴサーバ２８が配信するプロモーションビデオを視聴するためには、ユーザが、曲のタイトルやアーチスト名などのキーワードを手作業で入力して検索する手間が必要であったが、本実施の形態の映像音声再生装置１０ではその手間を省略できるという利点も得られる。 In addition, in the conventional video / audio reproduction device, in order to view the promotional video distributed by the OTT server 28, the user needs to manually search for keywords such as the title of the song and the artist name. However, the video / audio reproduction device 10 of the present embodiment also has an advantage that the labor can be omitted.
　図５および図６は、それぞれ映像音声再生装置１０のハードウェア構成の一例を示す図である。図１に示した映像音声再生装置１０の各要素（再生部１１、制御部１２、プレイリスト記憶部１３、キーワード抽出部１４、検索部１５および映像リンク情報記憶部１６）は、例えば図５に示す処理回路５０により実現される。すなわち、処理回路５０は、音声ファイルおよび映像ファイルを再生可能な再生部１１と、音声ファイルが登録されたプレイリストを記憶するプレイリスト記憶部１３と、音声ファイルに含まれるデータに基づいて音声ファイルに関連するキーワードを抽出するキーワード抽出部１４と、キーワード抽出部１４により抽出されたキーワードに基づいて、音声ファイルに対応する映像ファイルを検索する検索部１５と、検索部１５により検出された音声ファイルに対応する映像ファイルの所在を示す映像リンク情報を、音声ファイルと紐付けして記憶する映像リンク情報記憶部１６と、映像リンク情報が紐付けされた音声ファイルの再生指示を受けると、音声ファイルの代わりに、音声ファイルに紐付けされた映像リンク情報が示す映像ファイルを再生部１１に再生させる制御部１２と、を備える。処理回路５０には、専用のハードウェアが適用されてもよいし、メモリに格納されるプログラムを実行するプロセッサ（中央処理装置（ＣＰＵ：Central Processing Unit）、処理装置、演算装置、マイクロプロセッサ、マイクロコンピュータ、ＤＳＰ（Digital Signal Processor）ともいう）が適用されてもよい。 FIG. 5 and FIG. 6 are diagrams each showing an example of the hardware configuration of the video / audio reproduction device 10. Each element (the playback unit 11, the control unit 12, the playlist storage unit 13, the keyword extraction unit 14, the search unit 15, and the video link information storage unit 16) of the video / audio playback device 10 illustrated in FIG. The processing circuit 50 shown in FIG. That is, the processing circuit 50 includes a reproduction unit 11 that can reproduce an audio file and a video file, a playlist storage unit 13 that stores a playlist in which the audio file is registered, and an audio file based on data included in the audio file. A keyword extraction unit 14 for extracting keywords related to the video, a search unit 15 for searching for a video file corresponding to the audio file based on the keywords extracted by the keyword extraction unit 14, and an audio file detected by the search unit 15 When the video link information storage unit 16 that stores the video link information indicating the location of the video file corresponding to the video file is associated with the audio file and the reproduction instruction of the audio file that is associated with the video link information is received, Instead of the video file indicated by the video link information associated with the audio file. It comprises a control unit 12 to be reproduced to the reproduction unit 11. Dedicated hardware may be applied to the processing circuit 50, or a processor (Central Processing Unit (CPU), processing device, arithmetic device, microprocessor, micro processor that executes a program stored in the memory. A computer or DSP (Digital Signal Processor) may also be applied.
　処理回路５０が専用のハードウェアである場合、処理回路５０は、例えば、単一回路、複合回路、プログラム化したプロセッサ、並列プログラム化したプロセッサ、ＡＳＩＣ（Application Specific Integrated Circuit）、ＦＰＧＡ（Field-Programmable Gate Array）、またはこれらを組み合わせたものなどが該当する。映像音声再生装置１０の各要素の機能のそれぞれは、複数の処理回路で実現されてもよいし、それらの機能がまとめて一つの処理回路で実現されてもよい。 When the processing circuit 50 is dedicated hardware, the processing circuit 50 includes, for example, a single circuit, a composite circuit, a programmed processor, a processor programmed in parallel, an ASIC (Application Specific Integrated Circuit), an FPGA (Field-Programmable). Gate Array) or a combination of these. Each of the functions of each element of the video / audio reproduction device 10 may be realized by a plurality of processing circuits, or these functions may be realized by a single processing circuit.
　図６は、処理回路５０がプロセッサを用いて構成されている場合における映像音声再生装置１０のハードウェア構成を示している。この場合、映像音声再生装置１０の各要素の機能は、ソフトウェア等（ソフトウェア、ファームウェア、またはソフトウェアとファームウェア）との組み合わせにより実現される。ソフトウェア等はプログラムとして記述され、メモリ５２に格納される。処理回路５０としてのプロセッサ５１は、メモリ５２に記憶されたプログラムを読み出して実行することにより、各部の機能を実現する。すなわち、映像音声再生装置１０は、処理回路５０により実行されるときに、プレイリストに登録された音声ファイルに含まれるデータに基づいて音声ファイルに関連するキーワードを抽出する処理と、抽出されたキーワードに基づいて、音声ファイルに対応する映像ファイルを検索する処理と、検出された音声ファイルに対応する映像ファイルの所在を示す映像リンク情報を、音声ファイルと紐付けして記憶する処理と、映像リンク情報が紐付けされた音声ファイルの再生指示を受けると、音声ファイルの代わりに、音声ファイルに紐付けされた映像リンク情報が示す映像ファイルを再生する処理と、が結果的に実行されることになるプログラムを格納するためのメモリ５２を備える。換言すれば、このプログラムは、映像音声再生装置１０の各要素の動作の手順や方法をコンピュータに実行させるものであるともいえる。 FIG. 6 shows a hardware configuration of the video / audio reproduction device 10 when the processing circuit 50 is configured using a processor. In this case, the function of each element of the video / audio reproduction device 10 is realized by a combination of software and the like (software, firmware, or software and firmware). Software or the like is described as a program and stored in the memory 52. The processor 51 as the processing circuit 50 implements the functions of the respective units by reading out and executing the program stored in the memory 52. That is, the video / audio reproduction device 10, when executed by the processing circuit 50, extracts a keyword related to the audio file based on data included in the audio file registered in the playlist, and the extracted keyword , A process for searching for a video file corresponding to the audio file, a process for storing video link information indicating the location of the video file corresponding to the detected audio file in association with the audio file, and a video link When a playback instruction for an audio file associated with information is received, a process of playing the video file indicated by the video link information associated with the audio file instead of the audio file is executed as a result. A memory 52 for storing the program. In other words, it can be said that this program causes a computer to execute the operation procedure and method of each element of the video / audio reproduction device 10.
　ここで、メモリ５２は、例えば、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）、フラッシュメモリー、ＥＰＲＯＭ（Erasable Programmable Read Only Memory）、ＥＥＰＲＯＭ（Electrically Erasable Programmable Read Only Memory）などの、不揮発性または揮発性の半導体メモリ、ＨＤＤ（Hard Disk Drive）、磁気ディスク、フレキシブルディスク、光ディスク、コンパクトディスク、ミニディスク、ＤＶＤ（Digital Versatile Disc）およびそのドライブ装置等、または、今後使用されるあらゆる記憶媒体であってもよい。 Here, the memory 52 is nonvolatile or non-volatile such as RAM (Random Access Memory), ROM (Read Only Memory), flash memory, EPROM (Erasable Programmable Read Only Memory), EEPROM (Electrically Erasable Programmable Read Only Memory), or the like. Volatile semiconductor memory, HDD (Hard Disk Drive), magnetic disk, flexible disk, optical disk, compact disk, mini disk, DVD (Digital Versatile Disk) and its drive device, etc., or any storage media used in the future May be.
　以上、映像音声再生装置１０の各要素の機能が、ハードウェアおよびソフトウェア等のいずれか一方で実現される構成について説明した。しかしこれに限ったものではなく、映像音声再生装置１０の一部の要素を専用のハードウェアで実現し、別の一部の要素をソフトウェア等で実現する構成であってもよい。例えば、一部の要素については専用のハードウェアとしての処理回路５０でその機能を実現し、他の一部の要素についてはプロセッサ５１としての処理回路５０がメモリ５２に格納されたプログラムを読み出して実行することによってその機能を実現することが可能である。 As described above, the configuration in which the function of each element of the video / audio reproduction device 10 is realized by either hardware or software has been described. However, the present invention is not limited to this, and a configuration may be employed in which some elements of the video / audio reproduction device 10 are realized by dedicated hardware and another part is realized by software or the like. For example, the functions of some elements are realized by the processing circuit 50 as dedicated hardware, and the processing circuit 50 as the processor 51 reads a program stored in the memory 52 for the other some elements. The function can be realized by executing.
　以上のように、映像音声再生装置１０は、ハードウェア、ソフトウェア等、またはこれらの組み合わせによって、上述の各機能を実現することができる。 As described above, the video / audio reproduction device 10 can realize the functions described above by hardware, software, or the like, or a combination thereof.
　なお、図１では、音声ファイル記憶装置２１、映像ファイル記憶装置２２、操作入力装置２３、表示装置２４、音声出力装置２５および通信装置２６が、映像音声再生装置１０に外部接続される構成としたが、それらの一部または全部は映像音声再生装置１０と一体的に構成されてもよい。例えば、図１の映像音声再生システムが携帯電話やスマートフォンなどの携帯型の装置に適用されるときには、それらの全部が一つの筐体に収められることになる。 In FIG. 1, the audio file storage device 21, the video file storage device 22, the operation input device 23, the display device 24, the audio output device 25, and the communication device 26 are externally connected to the video / audio reproduction device 10. However, some or all of them may be integrated with the video / audio reproduction device 10. For example, when the video / audio reproduction system of FIG. 1 is applied to a portable device such as a mobile phone or a smartphone, all of them are housed in one casing.
　また、図７に示すように、キーワード抽出部１４および検索部１５は、インターネット２７上のサーバ３０に構築されてもよい。すなわち、映像音声再生装置１０がプレイリスト記憶部１３に記憶されているプレイリストをサーバ３０へ送信すると、サーバ３０上で、キーワード抽出部１４によるキーワードの検出と、検索部１５による映像ファイルの検索が行われ、プレイリストに登録された各音声ファイルに対応する映像ファイルの所在を示す映像リンク情報が映像音声再生装置１０に返信されるように構成してもよい。 Further, as shown in FIG. 7, the keyword extraction unit 14 and the search unit 15 may be constructed in a server 30 on the Internet 27. That is, when the video / audio reproduction device 10 transmits the playlist stored in the playlist storage unit 13 to the server 30, the keyword extraction unit 14 detects the keyword and the search unit 15 searches the video file on the server 30. The video link information indicating the location of the video file corresponding to each audio file registered in the playlist may be sent back to the video / audio reproduction device 10.
　なお、本発明は、その発明の範囲内において、実施の形態を適宜、変形、省略することが可能である。 In the present invention, the embodiments can be appropriately modified or omitted within the scope of the invention.
　本発明は詳細に説明されたが、上記した説明は、すべての態様において、例示であって、この発明がそれに限定されるものではない。例示されていない無数の変形例が、この発明の範囲から外れることなく想定され得るものと解される。 Although the present invention has been described in detail, the above description is illustrative in all aspects, and the present invention is not limited thereto. It is understood that countless variations that are not illustrated can be envisaged without departing from the scope of the present invention.
　１０　映像音声再生装置、１１　再生部、１２　制御部、１３　プレイリスト記憶部、１４　キーワード抽出部、１５　検索部、１６　映像リンク情報記憶部、２１　音声ファイル記憶装置、２２　映像ファイル記憶装置、２３　操作入力装置、２４　表示装置、２５　音声出力装置、２６　通信装置、２７　インターネット、２８　ＯＴＴサーバ、３０　サーバ。 10 video / audio playback device, 11 playback unit, 12 control unit, 13 playlist storage unit, 14 keyword extraction unit, 15 search unit, 16 video link information storage unit, 21 audio file storage device, 22 video file storage device, 23 operation Input device, 24 display device, 25 audio output device, 26 communication device, 27 Internet, 28 OTT server, 30 server.

Claims (7)

  1. 　音声ファイルおよび映像ファイルを再生可能な再生部と、
    　音声ファイルが登録されたプレイリストを記憶するプレイリスト記憶部と、
    　前記プレイリストに登録された前記音声ファイルに含まれるデータに基づいて前記音声ファイルに関連するキーワードを抽出するキーワード抽出部と、
    　前記キーワード抽出部により抽出された前記キーワードに基づいて、前記音声ファイルに対応する映像ファイルを検索する検索部と、
    　前記検索部により検出された前記音声ファイルに対応する前記映像ファイルの所在を示す映像リンク情報を、前記音声ファイルと紐付けして記憶する映像リンク情報記憶部と、
    　前記再生部の動作を制御する制御部と、
    を備え、
    　前記制御部は、前記映像リンク情報が紐付けされた前記音声ファイルの再生指示を受けると、前記音声ファイルの代わりに、前記音声ファイルに紐付けされた前記映像リンク情報が示す前記映像ファイルを前記再生部に再生させる、
    映像音声再生装置。     A playback unit capable of playing back audio and video files;
    A playlist storage unit for storing a playlist in which an audio file is registered;
    A keyword extraction unit that extracts keywords related to the audio file based on data included in the audio file registered in the playlist;
    A search unit for searching for a video file corresponding to the audio file based on the keyword extracted by the keyword extraction unit;
    A video link information storage unit for storing video link information indicating a location of the video file corresponding to the audio file detected by the search unit in association with the audio file;
    A control unit for controlling the operation of the reproduction unit;
    With
    When the control unit receives an instruction to play the audio file associated with the video link information, the control unit displays the video file indicated by the video link information associated with the audio file instead of the audio file. Let the playback unit play,
    Video / audio playback device.
  2. 　前記プレイリストには、複数の前記音声ファイルを登録可能であり、
    　前記キーワード抽出部は、前記プレイリストに登録されている前記複数の音声ファイルのそれぞれに関連するキーワードを自動的に抽出し、
    　前記検索部は、前記プレイリストに登録されている前記複数の音声ファイルのそれぞれに対応する映像ファイルを自動的に検索し、
    　前記映像リンク情報記憶部は、前記検索部により検出された前記複数の音声ファイルのそれぞれに対応する前記映像ファイルの所在を示す前記映像リンク情報を自動的に記憶する、
    請求項１に記載の映像音声再生装置。     In the playlist, a plurality of the audio files can be registered,
    The keyword extraction unit automatically extracts keywords related to each of the plurality of audio files registered in the playlist,
    The search unit automatically searches for a video file corresponding to each of the plurality of audio files registered in the playlist,
    The video link information storage unit automatically stores the video link information indicating a location of the video file corresponding to each of the plurality of audio files detected by the search unit;
    The video / audio reproduction device according to claim 1.
  3. 　前記検索部は、前記音声ファイルに対応する映像ファイルの候補が複数検出されると、検出された各映像ファイルのコンテンツ名、再生回数、提供元、再生時間長、コマーシャルの有無のうちの１つ以上に基づいて、前記音声ファイルに対応する映像ファイルの候補を絞り込む、
    請求項１に記載の映像音声再生装置。     When a plurality of video file candidates corresponding to the audio file are detected, the search unit selects one of the detected content name, the number of times of reproduction, the providing source, the reproduction time length, and the presence / absence of a commercial. Based on the above, narrow down video file candidates corresponding to the audio file,
    The video / audio reproduction device according to claim 1.
  4. 　前記検索部は、前記音声ファイルに対応する映像ファイルを候補の絞り込みを行ったときの絞り込み条件を記憶し、前記映像リンク情報を更新するために前記音声ファイルに対応する映像ファイルを再度検索する際、前記キーワードおよび過去の絞り込み条件に基づいて映像ファイルを検索する、
    請求項３に記載の映像音声再生装置。     The search unit stores a narrowing-down condition when a candidate for a video file corresponding to the audio file is narrowed down, and when searching for a video file corresponding to the audio file again in order to update the video link information , Search for a video file based on the keyword and past filtering conditions,
    The video / audio reproduction device according to claim 3.
  5. 　前記検索部は、前記映像音声再生装置に内蔵またはローカル接続された記憶媒体に保存されている映像ファイルを検索する、
    請求項１に記載の映像音声再生装置。     The search unit searches for a video file stored in a storage medium built in or locally connected to the video / audio reproduction device,
    The video / audio reproduction device according to claim 1.
  6. 　前記検索部は、インターネット上のサーバが配信する映像ファイルを検索する、
    請求項１に記載の映像音声再生装置。     The search unit searches for a video file distributed by a server on the Internet.
    The video / audio reproduction device according to claim 1.
  7. 　音声ファイルおよび映像ファイルを再生可能な再生部を有する映像音声再生装置における映像音声再生方法であって、
    　前記映像音声再生装置のキーワード抽出部が、プレイリストに登録された音声ファイルに含まれるデータに基づいて前記音声ファイルに関連するキーワードを抽出し、
    　前記映像音声再生装置の検索部が、前記キーワード抽出部により抽出された前記キーワードに基づいて、前記音声ファイルに対応する映像ファイルを検索し、
    　前記映像音声再生装置の映像リンク情報記憶部が、前記検索部により検出された前記音声ファイルに対応する前記映像ファイルの所在を示す映像リンク情報を、前記音声ファイルと紐付けして記憶し、
    　前記映像音声再生装置の制御部が、前記映像リンク情報が紐付けされた前記音声ファイルの再生指示を受けると、前記音声ファイルの代わりに、前記音声ファイルに紐付けされた前記映像リンク情報が示す前記映像ファイルを前記再生部に再生させる、
    映像音声再生方法。     A video / audio reproduction method in a video / audio reproduction device having a reproduction unit capable of reproducing an audio file and a video file,
    A keyword extraction unit of the video / audio reproduction device extracts a keyword related to the audio file based on data included in the audio file registered in the playlist;
    The search unit of the video / audio reproduction device searches for a video file corresponding to the audio file based on the keyword extracted by the keyword extraction unit,
    The video link information storage unit of the video / audio reproduction device stores video link information indicating the location of the video file corresponding to the audio file detected by the search unit in association with the audio file,
    When the control unit of the video / audio reproduction device receives an instruction to reproduce the audio file associated with the video link information, the video link information associated with the audio file indicates instead of the audio file. Causing the playback unit to play the video file;
    Video / audio playback method.
PCT/JP2017/021727 2017-06-13 2017-06-13 Video/audio playback device and video/audio playback method WO2018229846A1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
PCT/JP2017/021727 WO2018229846A1 (en) 2017-06-13 2017-06-13 Video/audio playback device and video/audio playback method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2017/021727 WO2018229846A1 (en) 2017-06-13 2017-06-13 Video/audio playback device and video/audio playback method

Publications (1)

Publication Number Publication Date
WO2018229846A1 true WO2018229846A1 (en) 2018-12-20

Family

ID=64660947

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2017/021727 WO2018229846A1 (en) 2017-06-13 2017-06-13 Video/audio playback device and video/audio playback method

Country Status (1)

Country Link
WO (1) WO2018229846A1 (en)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012043258A (en) * 2010-08-20 2012-03-01 Ricoh Co Ltd Retrieval system, retrieval device, retrieval program, recording medium and retrieval method
JP2013500540A (en) * 2009-07-27 2013-01-07 ユナイテッド ビデオ プロパティーズ， インコーポレイテッド Method and system for associating and providing different types of media content sharing attributes

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013500540A (en) * 2009-07-27 2013-01-07 ユナイテッド ビデオ プロパティーズ， インコーポレイテッド Method and system for associating and providing different types of media content sharing attributes
JP2012043258A (en) * 2010-08-20 2012-03-01 Ricoh Co Ltd Retrieval system, retrieval device, retrieval program, recording medium and retrieval method

Similar Documents

Publication Publication Date Title
JP2010250023A (en) Information processing apparatus with text display function, and data acquisition method and data acquisition program
US8458616B2 (en) Data display method and reproduction apparatus
JP2005346747A (en) Information reproduction device
JP2006252734A (en) Information processor, information recording/reproducing system, and content transfer method
JP2006196145A (en) Device and method for recording information, device and method for reproducing information, and information recording/reproducing device
WO2018229846A1 (en) Video/audio playback device and video/audio playback method
JP4244011B2 (en) Data reproduction apparatus and reproduction data management method in data reproduction apparatus
JP2006196048A (en) On-vehicle music reproducing apparatus
US20080259746A1 (en) Method of managing playlist by using key
JP2007066370A (en) Play-back apparatus and play-back method
JP6112804B2 (en) Audio apparatus and video apparatus
JP4924243B2 (en) Content information acquisition apparatus, program, and content information acquisition method
JP4978306B2 (en) Content file processing apparatus, content file processing method, and content file processing program
JP2010108528A (en) Audio playback method and apparatus
JP5600077B2 (en) Content data playback device
JP4562544B2 (en) Storage device and storage method
JP2010066805A (en) Reproducing device and display method
JP2006236546A (en) On-vehicle information terminal
JP4379519B2 (en) Program, recording medium, playback apparatus, and playback method
JP4942102B2 (en) Content playback device
JP5885377B2 (en) Content playback program
JP4557088B2 (en) Program, recording medium, playback apparatus, and playback method
JP2017041195A (en) Music reproduction device and music reproduction method
JP2008059677A (en) Audio device
JP2008293550A (en) Audio device and its data base generating method

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 17913741

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 17913741

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: JP