JP7010236B2 - 情報処理装置、情報処理方法、及びプログラム - Google Patents

情報処理装置、情報処理方法、及びプログラム Download PDF

Info

Publication number
JP7010236B2
JP7010236B2 JP2018552466A JP2018552466A JP7010236B2 JP 7010236 B2 JP7010236 B2 JP 7010236B2 JP 2018552466 A JP2018552466 A JP 2018552466A JP 2018552466 A JP2018552466 A JP 2018552466A JP 7010236 B2 JP7010236 B2 JP 7010236B2
Authority
JP
Japan
Prior art keywords
reproduction
playback
information
mode
information processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018552466A
Other languages
English (en)
Other versions
JPWO2018096849A1 (ja
Inventor
孝次 藤田
亮 曽我部
琢磨 肥後
賢一郎 田久
綾香 佐藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Sony Group Corp
Original Assignee
Sony Corp
Sony Group Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp, Sony Group Corp filed Critical Sony Corp
Publication of JPWO2018096849A1 publication Critical patent/JPWO2018096849A1/ja
Application granted granted Critical
Publication of JP7010236B2 publication Critical patent/JP7010236B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8106Monomedia components thereof involving special audio data, e.g. different tracks for different languages
    • H04N21/8113Monomedia components thereof involving special audio data, e.g. different tracks for different languages comprising music, e.g. song in MP3 format
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/22Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks comprising specially adapted graphical user interfaces [GUI]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/08Configuration management of networks or network elements
    • H04L41/085Retrieval of network configuration; Tracking network configuration history
    • H04L41/0853Retrieval of network configuration; Tracking network configuration history by actively collecting configuration information or by backing up configuration information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/08Configuration management of networks or network elements
    • H04L41/085Retrieval of network configuration; Tracking network configuration history
    • H04L41/0853Retrieval of network configuration; Tracking network configuration history by actively collecting configuration information or by backing up configuration information
    • H04L41/0856Retrieval of network configuration; Tracking network configuration history by actively collecting configuration information or by backing up configuration information by backing up or archiving configuration information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/12Discovery or management of network topologies
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/43615Interfacing a Home Network, e.g. for connecting the client to a plurality of peripherals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363Adapting the video stream to a specific local network, e.g. a Bluetooth® network
    • H04N21/43637Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44227Monitoring of local network, e.g. connection or bandwidth variations; Detecting new devices in the local network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/443OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB
    • H04N21/4432Powering on the client, e.g. bootstrap loading using setup parameters being stored locally or received from the server
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/485End-user interface for client configuration
    • H04N21/4852End-user interface for client configuration for modifying audio parameters, e.g. switching between mono and stereo
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S7/00Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30Control circuits for electronic adaptation of the sound field
    • H04S7/308Electronic adaptation dependent on speaker or headphone connection
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2420/00Details of connection covered by H04R, not provided for in its groups
    • H04R2420/03Connection circuits to selectively connect loudspeakers or headphones to amplifiers

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Databases & Information Systems (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • User Interface Of Digital Computer (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Stereophonic System (AREA)
  • Circuit For Audible Band Transducer (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Otolaryngology (AREA)

Description

特許法第30条第2項適用 平成28年6月21日 ウェブサイトにて公開 https://apkpure.com
本技術は、再生装置の制御に適用可能な情報処理装置、情報処理方法、及びプログラムに関する。
従来、家庭内にホームネットワークを構築し、そこに接続された再生装置により、音楽や映像等のコンテンツを再生するシステムが知られている。例えば特許文献1には、ネットワークに接続された複数の再生装置によりグループを構成し、同一のコンテンツを同期再生させるマルチルーム再生の制御方法について記載されている(特許文献1の明細書段落[0043]~[0046]図8等)。
また特許文献2には、館内に配置された複合機をスピーカ代わりに利用し、従来の館内放送のような機能を実現する放送システムについて記載されている。この放送システムでは、複数の複合機により構成されるグループの情報が格納されたグループ情報テーブルが作成され、利用者の端末に表示される。利用者は、表示されたグループ情報テーブルの中から、音声を出力させたいグループを選択する。また新たなグループを作成して、グループ情報テーブルに登録することも可能である(特許文献2の明細書段落[0068]~[0085][0116]~[0118]図6、14等)。
国際公開第2016/103546号 特開2012-114577号公報
今後もネットワーク等を介して複数の再生装置を制御しコンテンツを再生する技術は多く利用されると考えられ、ユーザの操作性を向上可能な技術が求められている。
以上のような事情に鑑み、本技術の目的は、再生装置を操作性よく制御することが可能となる情報処理装置、情報処理方法、及びプログラムを提供することにある。
上記目的を達成するため、本技術の一形態に係る情報処理装置は、検出部と、第1の取得部と、第2の取得部と、生成部とを具備する。
前記検出部は、再生装置を検出する。
前記第1の取得部は、前記検出された再生装置の再生モードを取得する。
前記第2の取得部は、過去に選択された再生装置及び当該再生装置の過去の選択時の再生モードを含む履歴情報を取得する。
前記生成部は、前記検出された再生装置及び当該再生装置の検出時の再生モードを含む検出情報、及び前記取得された履歴情報を含む操作用画像を生成する。
この情報処理装置では、検出された再生装置及びその再生モードを含む検出情報と、過去に選択された再生装置及びその時の再生モードを含む履歴情報とを含む操作用画像が生成される。これにより例えば表示される履歴情報を用いて過去の再生環境を容易に再現すること等が可能となる。この結果、再生装置を操作性よく制御することが可能となる。
前記再生モードは、シングル再生モード、及びグループ再生モードを含んでもよい。
これによりシングル再生モードによるコンテンツの再生や、グループ再生モードによるコンテンツの再生を、操作性よく制御することが可能である。
前記履歴情報及び検出情報の各々は、前記再生モードが前記シングル再生モードである前記再生装置の情報として、前記再生装置の名称、及び前記シングル再生モードである旨を表すアイコンの少なくとも1つを含んでもよい。
これにより過去に選択された再生装置や検出された再生装置の再生モードを容易に把握することが可能となる。
前記履歴情報及び検出情報の各々は、前記再生モードが前記グループ再生モードである前記再生装置の情報として、前記再生装置を含むグループの名称、及び前記グループ再生モードである旨を表すアイコンの少なくとも1つを含んでもよい。
これにより過去に選択された再生装置や検出された再生装置の再生モードを容易に把握することが可能となる。
前記グループ再生モードは、同期再生モード、サラウンド再生モード、及びステレオ再生モードを含んでもよい。
これにより同期再生モード、サラウンド再生モード、及びステレオ再生モードの各々によるコンテンツの再生を、操作性よく制御することが可能となる。
前記操作用画像は、前記履歴情報が表示される第1の表示領域と、前記検出情報のうち前記履歴情報に含まれない新規検出情報が表示される第2の表示領域とを含んでもよい。
例えば第1及び第2の表示領域の各々の表示位置等を適宜設定することで、ユーザの操作性を向上させることが可能となる。
前記操作用画像は、リストであってもよい。この場合、前記第1の表示領域は、前記第2の表示領域よりも上に設定されてもよい。
これにより過去に選択した再生装置及びその再生モードを再び選択することが容易となり、高い操作性を発揮することが可能となる。
前記検出部は、ユーザからの接続の指示を必要とする未接続の再生装置を検出してもよい。この場合、前記リストは、前記未接続の再生装置の情報が表示される第3の表示領域を含んでもよい。
これにより未接続の再生装置を容易に把握することが可能となり、操作性を向上させることが可能となる。
前記検出部は、近距離無線通信を介して前記未接続の再生装置を検出してもよい。
これによりユーザの近辺にある未接続の再生装置が検出されるので、接続の指示を入力するか否かの判断等が容易となり、高い操作性が発揮される。
前記第3の表示領域は、前記第1の表示領域よりも上に設定されてもよい。
これにより未接続の再生装置を容易に把握することが可能となり、操作性を向上させることが可能となる。
前記生成部は、前記履歴情報に含まれる前記再生装置及びその再生モードの動作状態を判定し、当該判定結果に応じて表示態様が異なるように前記操作用画像を生成してもよい。
これにより過去に選択した再生装置及び再生モードが現在も構築されているか否かを容易に判断することが可能となり、高い操作性が発揮される。
前記情報処理装置は、さらに、前記操作用画像に含まれる前記再生装置及びその再生モードによるコンテンツの再生を指示する再生制御部を具備してもよい。
これにより例えば過去の再生環境を容易に再現すること等が可能となり、再生装置を操作性よく制御することが可能となる。
前記第2の取得部は、前記検出された再生装置から前記履歴情報を取得してもよい。
これにより必要なメモリ容量の低減を図ることが可能となり、また履歴情報を精度よく取得することが可能となる。
本技術の一形態に係る情報処理方法は、コンピュータシステムにより実行される情報処理方法であって、再生装置を検出することを含む。
前記検出された再生装置の再生モードが取得される。
過去に選択された再生装置及び当該再生装置の過去の選択時の再生モードを含む履歴情報が取得される。
前記検出された再生装置及び当該再生装置の検出時の再生モードを含む検出情報、及び前記取得された履歴情報を含む操作用画像が生成される。
本技術の一形態に係るプログラムは、コンピュータシステムに以下のステップを実行さ
せる。
再生装置を検出するステップ。
前記検出された再生装置の再生モードを取得するステップ。
過去に選択された再生装置及び当該再生装置の過去の選択時の再生モードを含む履歴情報を取得するステップ。
前記検出された再生装置及び当該再生装置の検出時の再生モードを含む検出情報、及び前記取得された履歴情報を含む操作用画像を生成するステップ。
以上のように、本技術によれば、再生装置を操作性よく制御することが可能となる。なお、ここに記載された効果は必ずしも限定されるものではなく、本開示中に記載されたいずれかの効果であってもよい。
一実施形態に係るコンテンツ再生システムの構成例を示す概略図である。 携帯端末の構成例を示すブロック図である。 本実施形態に係る再生リストの構成例を示す模式図である。 携帯端末のタッチパネルに再生リストが表示された状態を示す模式図である。 再生リストの作成例の概要を示すフローチャートである。 ホームネットワーク上の再生装置の検出から再生リストの作成までの処理例を示すフローチャートである。 グループ再生モードの再生環境情報が選択された場合の処理例を示すフローチャートである。 待機画面の構成例を示す模式図である。 ダッシュボード画面の構成例を示す模式図である。 エラー画面の構成例を示す模式図である。 グループ情報表示ダイアログの一例を示す模式図である。 履歴情報の登録処理例を示すフローチャートである。
以下、本技術に係る実施形態を、図面を参照しながら説明する。
[コンテンツ再生システム]
図1は、本技術の一実施形態に係るコンテンツ再生システムの構成例を示す概略図である。コンテンツ再生システム100は、家庭内に構築されたホームネットワーク1と、これに接続された複数の再生装置10、コンテンツを提供するサーバ装置20、及び携帯端末30を有する。携帯端末30は、本技術に係る情報処理装置の一実施形態に相当する。
複数の再生装置10、サーバ装置20、及び携帯端末30は、アクセスポイント5を介して、WiFi等の無線LAN通信によりホームネットワーク1に接続される。ホームネットワーク1としては、例えばDLNA(登録商標)(Digital Living Network Alliance)規格に準拠したネットワークが用いられる。
例えば複数の再生装置10はDMR(Digital Media Renderer)として機能し、サーバ装置20はDMS(Digital Media Server)として機能する。また携帯端末30は、DMC(Digital Media Controller)として機能する。なお他のプロトコルを利用したネットワークが構築される場合にも、本技術は適用可能である。
図1に示すように、複数の再生装置10は、リビングルーム、ホビールーム、及びベッドルームの各部屋に配置される。携帯端末30は、例えばUPnP(Universal Plug and Play)の制御メッセージ等を用いて、各再生装置10に、サーバ装置20からコンテンツを取得して再生する指示を送信する。
従ってユーザは、携帯端末30を操作することで、各部屋に配置された再生装置10の再生動作を制御することができる。なおBluetooth(登録商標)等の近距離無線通信を利用して、再生装置10にコンテンツを再生させることも可能である。
また図示しないホームゲートウェイを介して、ホームネットワーク1とグローバルネットワークとが接続されているとする。この場合、携帯端末30を操作することで、グローバルネットワーク上(クラウド上)に存在するコンテンツサーバ内のコンテンツを、各再生装置10に再生させることも可能である。
また携帯端末30内に記憶されているコンテンツを、再生装置10に転送又はストリーミング配信して再生させることや、再生装置10内のローカルコンテンツを再生させることも可能である。再生装置10内のローカルコンテンツとは、例えばCDやUSBを介して読み込んだコンテンツや、ラジオ等から取り込んだコンテンツである。
本実施形態では、複数の再生装置10により音楽コンテンツが再生される。しかしながら、本技術は、音楽コンテンツの再生に限定されず、映像等の種々のコンテンツの再生に適用可能である。また再生装置10やサーバ装置20等の数も限定されない。
再生装置10としては、例えばテレビジョン装置、PC(Personal computer)、オーディオビデオレシーバ、ビデオモニタ、又は家庭用ゲーム機器等の、種々のCE(Consumer Electronics)機器が用いられる。また車に搭載される車載オーディオや、ユーザに装着されるヘッドフォン等も、本技術に係る再生装置に含まれる。
サーバ装置20としては、例えばPC又はネットワーク対応のHDD(NAS)等が用いられる。携帯端末30としては、典型的にはスマートフォンが用いられるが、これに限定されずタブレット端末等の種々のPDA(Personal Digital Assistant)が用いられてもよい。その他、種々のコンピュータが、本技術に係る情報処理装置として使用可能である。
なお再生装置10として、DMP(Digital Media Player)として動作可能なものが用いられてもよい。この場合、当該再生装置10が有するUI(User Interface)を操作することで、コンテンツの再生を制御することができる。またこの場合、再生装置10が本技術に係る情報処理装置の一実施形態として機能し得る。
[携帯端末の構成]
図2は、携帯端末30の構成例を示すブロック図である。携帯端末30は、CPU(Central Processing Unit)31、ROM(Read Only Memory)32、RAM(Random Access Memory)33、スピーカ34、ディスプレイ35、及びタッチパネル36を有する。また携帯端末30は、赤外線(IR)通信部37、外部I/F(インタフェース)38、キー/スイッチ39、及び撮像部40を有する。さらに携帯端末30は、ネットワークモジュール41、及びBluetoothモジュール42を有する。
CPU31は、携帯端末30の各ブロックと信号をやり取りして各種演算を行い、再生装置10へのコンテンツの再生指示や、ディスプレイ35(タッチパネル36)へのGUI(Graphical User Interface)の表示等、携帯端末30で実行される種々の処理を統括的に制御する。
ROM32は、種々の画像データやメタデータ等のCPU31が処理する各種のデータや、アプリケーション等の各種のプログラムを記憶する。RAM33は、CPU31の作業領域として用いられる。アプリケーション等のプログラムが実行される際には、その実行に必要な各種データがRAM33へ読み出される。
ROM32に代えて又は追加して、HDD(Hard Disk Drive)や、フラッシュメモリ、その他の固体メモリ等の不揮発性メモリが設けられてもよい。そしてこれらの記憶デバイスに、上記した各種のデータやプログラムが記憶されてもよい。本実施形態では、ROM32やHDD等により、記憶部が構成される。
スピーカ34は、音楽コンテンツの再生やユーザへの音声ガイド等を出力する。ディスプレイ35は、例えば液晶やEL(Electro-Luminescence)等を用いた表示デバイスであり、種々のGUI等を表示する。図2に示すように、ディスプレイ35はタッチパネル36と一体的に構成される。
IR通信部37は、外部機器とIR通信を実行するためのモジュールである。外部I/F38は、例えばUSBやHDMI(登録商標)(High-Definition Multimedia Interface)等の規格に基づいて、外部機器と接続するためのインタフェースである。
キー/スイッチ39は、例えば電源スイッチ、ショートカットキー等、特にタッチパネル36では入力できないユーザの操作等を受け付ける。撮像部40は、例えばCMOS(Complementary Metal Oxide Semiconductor)やCCD(Charge Coupled Devices)センサ等を有し被写体のデジタル画像を生成する。
ネットワークモジュール41は、ホームネットワーク1に接続するためのインタフェースであり、例えばWiFi等の無線LANモジュールが用いられる。ネットワークモジュール41が動作することで、再生装置10やサーバ装置20との間で無線通信が可能となる。
Bluetoothモジュール42は、複数の再生装置10の各々との間で、Bluetooth規格に準拠した近距離無線通信を実行するためのモジュールである。本実施形態では、BLE(Bluetooth Low Energy)規格に準拠した通信(BLE通信)、及びClassic Bluetooth規格に準拠した近距離無線通信(BT通信)が実行可能である。例えばホームネットワーク1に接続されない非ネットワーク対応の再生装置10に対しても、BLE通信等の近距離無線通信を介して、その動作を制御することが可能である。
上記のようなハードウェア構成を有する携帯端末30による情報処理は、ROM32等に記憶されたソフトウェアと、携帯端末30のハードウェア資源との協働により実現される。例えばCPU31がROM32等に記憶された本技術に係るプログラム(アプリケーション)をRAM33にロードして実行することにより、本技術に係る情報処理方法が実現される。
図2に示すように、本実施形態では、CPU31が所定のプログラムを実行することにより、機能ブロックである装置検出部43、再生モード取得部44、履歴情報取得部45、リスト生成部46、及び再生制御部47が実現される。これらのブロックを実現するために、IC(集積回路)等の専用のハードウェアが適宜用いられてもよい。
アプリケーション等のプログラムは、例えばグローバルネットワークから携帯端末30にインストールされる。あるいは、記録媒体を介してプログラムが携帯端末30にインストールされてもよい。
[コンテンツの再生モード]
本実施形態では、携帯端末30を介して、各再生装置10のコンテンツの再生モードを設定することが可能である。本実施形態では、シングル再生モード、及びグループ再生モードのいずれかを設定することが可能である。
シングル再生モードは、単体の再生装置10により、コンテンツを再生するモードである。携帯端末30からシングル再生モードが設定された再生装置10に制御メッセージが送信され、コンテンツの再生に関する種々の動作が制御される。
例えば再生装置10の電源制御(例えばスタンバイ状態とアクティブ状態との切り替え)、コンテンツの再生音量の制御、再生対象となるコンテンツの切り替え、コンテンツのフェードイン/フェードアウト等の種々の制御が可能である。
BLE通信やBL通信を介して、シングル再生モードによるコンテンツの再生を指示することも可能である。例えば再生装置10から送信されるBLEビーコン信号を携帯端末30が受信することで、当該再生装置10が検出される。ユーザの指示等に応じて、検出された再生装置10との間でBLE接続が確立される。これによりコンテンツの再生制御や電源制御等が可能となる。
なおBLE接続は、ペアリングとペアリングレスの接続との両方を含む。ペアリングが実行される場合には、携帯端末30と再生装置10との間で、パスキー認証等が実行される。
BL通信が利用される場合には、ペアリングの処理が必要となる。例えばユーザにより、再生装置10がペアリングモードに設定され、携帯端末30と再生装置10との間で、ペアリング(BL接続)が確立される。これによりコンテンツの再生制御や電源制御等が可能となる。
グループ再生モードは、ホームネットワーク1に接続された複数の再生装置10によりグループを構成し、当該グループにてコンテンツを再生するモードである。グループ再生モードとして、マルチルーム再生モード(同期再生モード)、サラウンド再生モード、及びステレオ再生モードの各々を設定することが可能である。
マルチルーム再生とは、グループ内の複数の再生装置10により、同一のコンテンツを同期再生する再生方法である。例えば同一の部屋にある複数の再生装置10から同一のコンテンツを再生させることで、部屋全体にて大音量で音楽を楽しむことができる。あるいは多くの友人を家に招いてパーティを開催する場合等において、各部屋に配置された再生装置10から同一のコンテンツを再生させ、その動作を同時に制御することでパーティを盛り上げることができる。
例えばグループを構成する複数の再生装置10が選択され、そのうちの1つがマスタ装置として設定される。そして他の再生装置10が、スレーブ装置として設定される。マルチルーム再生が実行される際には、その指示がマスタ装置に送信される。マスタ装置は、再生対象となるコンテンツを取得し、スレーブ装置に同時にストリーミング配信する。これによりコンテンツのマルチルーム再生が実現される。
マスタ装置を選択する方法は限定されず、例えば、ネットワーク強度が高い再生装置10や、グローバルネットワークに接続されている再生装置10等がマスタ装置として設定される。またユーザが所望するコンテンツを再生するのに優位な再生装置10がマスタ装置として選択される。もちろんユーザによりマスタ装置が指定されてもよい。
なおマスタ装置及びスレーブ装置は、親機及び子機と呼ばれる場合もある。またスレーブ装置は、プレーヤ機と呼ばれる場合もある。
マルチルーム再生により、コンテンツの同期再生のみならず、再生音量の制御やコンテンツの切り替え等も、互いに同期して実行可能である。一方で、再生位置は互いに同期させながらも、再生音量の制御やフェードイン/フェードアウト等の制御等は、各再生装置に対して個別に実行することも可能である。
マスタ装置及びスレーブ装置による同期再生を実現するための方法は限定されず、例えば同期再生等に関する任意の技術が用いられてよい。例えばクロック及びタイムスタンプにより同期をとり、これにバッファ処理を組み合わせることで同期再生は実行可能である。例えばRTP(Real-time Transport Protocol)及びRTCP(RTP Control Protoco1)を組み合わせたフロー制御等が挙げられる。上記した特許文献1に記載の技術を利用することも可能である。
サラウンド再生は、3ch以上のマルチチャンネル再生に相当し、例えばホームシアターの5.1ch等が挙げられる。例えばグループを構成する複数の再生装置10が選択され、各再生装置10にチャンネルが設定される。例えば5.1chの場合には、フロント(前方左右)用、センター(前方中央)用、リア(後方左右)用、及びサブウーファ(超低音)用の、合計6つの再生装置10が選択される。
各再生装置10にチャンネルを割り当てる方法は限定されず、自動あるいは手動により実行される。なお単体の再生装置10が複数のスピーカを備える場合には、当該再生装置10に複数のチャンネルが割り当てられる場合もあり得る。従って、チャンネル数よりも少ない数の再生装置10によりグループが構成される場合もある。
サラウンド再生モードの設定により実現可能なマルチチャンネル再生システムの構成は限定されない。例えば2.1ch~7.1ch、その他の任意のチャンネル数のマルチチャンネル再生システムを構築することが可能である。
ステレオ再生では、LR(左右)の2chにてコンテンツが再生される。典型的には、2つの再生装置10によりグループが構成され、各再生装置10にLRのいずれかのチャンネルが設定される。チャンネルの設定方法は限定されず、また複数のスピーカを有する単体の再生装置10により、ステレオ再生が実行される場合もあり得る。この場合でも、グループが構成されたものとして、本技術を適用することが可能である。
本実施形態では、マルチルーム再生と同様に、グループを構成する複数の再生装置10の1つがマスタ装置として設定される。そしてマスタ装置により、スレーブ装置の再生動作が制御されることで、サラウンド再生又はステレオ再生が実行される。もちろん他の制御方法等が用いられてもよい。
[再生リスト]
図3は、本実施形態に係る再生リストの構成例を示す模式図である。図4は、携帯端末のタッチパネルに再生リストが表示された状態を示す模式図である。
携帯端末30を使用するユーザにより、コンテンツ再生システム100を利用するためのアプリケーションが起動される。そうすると携帯端末30のタッチパネル36に、本実施形態に係る再生用画像である再生リスト50が表示される。再生リスト50は、例えば上下にスクロール可能に表示される。
図3に示すように再生リスト50は、第1の表示領域51と、第2の表示領域52と、第3の表示領域53とを有する。第1の表示領域51には、過去に選択された再生装置10、及び当該再生装置10の過去の選択時の再生モードを含む、履歴情報55(55a~55e)が表示される。
本実施形態では、例えば履歴情報55b等に示すように、再生モードがシングル再生モードである再生装置10の情報として、以下の情報が表示される。
再生モードの名称(「Single」)+再生装置10の名称(「A」)
シングル再生モードである旨を表すアイコン56
接続状態(接続状態を表すマークのアクティブ表示の有無により表現)
接続状態を表すマークは、ホームネットワーク1を介した接続の場合は、WiFiマーク57aが用いられ、BLE接続又はBT接続の場合は、Bluetooth(登録商標)マーク57bが用いられる。
本実施形態では、再生装置の名称が、過去に選択された再生装置の情報に相当する。また再生モードの名称及びアイコン56が、過去の選択時の再生モードの情報に相当する。なお「Single A」が履歴情報55bの名称として扱われ、ユーザにより変更可能でもよい。この場合でも、アイコン56により、シングル再生モードの履歴情報55であることを把握することが可能である。
また履歴情報55a等に示すように、再生モードがグループ再生モードである再生装置10の情報として、以下の情報が表示される。なお下記のメンバーとは、グループを構成する再生装置10のことである。
グループの名称(再生モードの名称+メンバーの名称)
マルチルーム再生モードの場合は「Group」+メンバーの名称
サラウンド再生モードの場合は「Surround」+メンバーの名称
ステレオ再生モードの場合は「Stereo」+メンバーの名称
グループ再生モードである旨を表すアイコン58
マルチルーム再生モードの場合はアイコン58a
サラウンド再生モードの場合はアイコン58b
ステレオ再生モードの場合はアイコン58c
接続状態(WiFiマーク57aのアクティブ表示の有無により表現)
再生コンテンツの情報59
本実施形態では、グループの名称内のメンバーの名称が、過去に選択された再生装置の情報に相当する。また再生モードの名称及びアイコン58が、過去の選択時の再生モードの情報に相当する。なおグループの名称は、ユーザにより変更可能でもよい。少なくともアイコン58により、グループ再生モード(マルチルーム再生モード、サラウンド再生モード、ステレオ再生モード)の履歴情報55であることを把握することが可能である。また再生コンテンツの情報59は、シングル再生モードの履歴情報55にも表示されてもよい。
なおグループ再生モードの履歴情報55は、そのグループを構成する再生装置10の各々の履歴情報55に相当する。例えば履歴情報55aは、過去に選択されてマルチルーム再生が実行された再生装置A、B及びCの各々の履歴情報55に相当する。このように各々の履歴情報55を、グループを基準としたグループ情報として表示することで、当該グループの再現等が容易にとなり操作性を向上することが可能となる。
履歴情報55は、携帯端末30を介して再生装置10及びその再生モードが選択される度に生成され記憶される。履歴情報55は、新しく選択された再生装置10の履歴情報55が、第1の表示領域51の上方に表示される。そして新たに履歴情報55が生成される度に、当該履歴情報55が第1の表示領域51の上方に順に追加される。
なお「選択された」とは、典型的には、携帯端末30を利用するユーザにより選択されたという意味であり、ユーザごとに履歴情報55が生成される。そのために例えばユーザの識別情報(ID)、又は携帯端末30の識別情報(ID)等と関連付けられて、履歴情報55が生成される。その他、ユーザごとの履歴情報55を生成するための任意の方法が採用されてよい。なお本開示における「ユーザ」が1人の特定の人間である場合に限定される訳ではなく、携帯端末30を共有する複数の人間が「ユーザ」となる場合もあり得る。
図3に示す例では、過去に再生装置G及びHが選択されてステレオ再生が実行された。その後に、再生装置D、E及びFが選択されてサラウンド再生が実行された。その後に、再生装置Iが選択されてシングル再生モードにてコンテンツが再生された。なおこの際には、BLE通信又はBT通信により、再生装置Iが制御されている。
その後に、再生装置Aが選択されてシングル再生モードにてコンテンツが再生された。そして直近の操作として、再生装置A、B及びCが選択されてマルチルーム再生が実行されている。このマルチルーム再生が実行される際には、再生装置Aの再生モードが、シングル再生モードからマルチルーム再生に切替えられている。
図3に示す例では、「Group ABC」の履歴情報55aの接続状態がアクティブ状態である。これは現在も、再生装置A、B及びCによりグループが構成され、マルチルーム再生が可能であることを意味する。すなわち再生装置A、B及びCが検出されており、各々が同一のグループである旨のマルチルーム再生モードに設定されている状態である。
一方、履歴情報55b~55eの接続状態は非アクティブ状態である。これは現在の状態として、各々の履歴情報55に含まれる再生装置10及びその再生モードにより、コンテンツを再生することが可能な状態ではないことを意味する。例えば履歴情報55に含まれる再生装置10が未検出や未接続である場合が考えられる。また履歴情報55に含まれる再生モードと異なる再生モードに設定されている場合も考えられる。
図3に示す例では、「Group ABC」の履歴情報55aの接続状態がアクティブ状態であるので、再生装置Aはマルチルーム再生モードである。従って、「Single A」の履歴情報55bの接続状態は、非アクティブ状態となる。
本実施形態では、接続状態は、履歴情報55に含まれる再生装置10及びその再生モードの動作状態に相当する。本実施形態では、リスト生成部46により、各履歴情報55の接続状態が判定され、その判定結果に応じて表示態様が異なるように再生リスト50が生成される。
上記したように、WiFiマーク57a又はBluetooth(登録商標)マーク57bのアクティブ表示の有無が適宜制御される。また接続状態に応じて、履歴情報55の背景色として、異なる色が表示される。例えば接続状態がアクティブ状態の場合には、背景色は白色となり、非アクティブ状態では、グレーとなる(グレーアウト)。もちろんこれに限定される訳ではない。
第2の表示領域52には、携帯端末30により検出された再生装置10、及び当該再生装置10の検出時の再生モードを含む、検出情報が表示される。特に本実施形態では、当該検出情報のうち、履歴情報55に含まれない新規検出情報60(60a~60c)が表示される。すなわち第2の表示領域52には、携帯端末30により検出された再生装置10及びその再生モードのうち、過去に選択されたことがない再生装置10及びその再生モードが表示される。
本実施形態では、新規検出情報60として表示される情報は、履歴情報55と同様である。すなわち再生モードがシングル再生モードである再生装置10の情報として、再生モードの名称、シングル再生モードである旨を表すアイコン56、及び接続状態が表示される。再生装置の名称が、検出された再生装置の情報に相当する。また再生モードの名称及びアイコン56が、検出時の再生モードの情報に相当する。再生モードの名称が、ユーザにより変更可能であってもよい。
また再生モードがグループ再生モードである再生装置10の情報として、グループの名称、グループ再生モードである旨を表すアイコン58、接続状態、及び再生コンテンツの情報59が表示される。グループの名称内のメンバーの名称が、検出された再生装置の情報に相当する。また再生モードの名称及びアイコン58が、検出時の再生モードの情報に相当する。グループの名称が、ユーザにより変更可能であってもよい。
図3に示す例では、シングル再生モードの再生装置G、シングル再生モードの再生装置F、及びマルチルーム再生モードのグループ「Group DEJ」が検出され、新規検出情報60として表示されている。例えば他のユーザが他の携帯端末等を用いて、マルチルーム再生モードのグループ「Group DEJ」を作成した場合や、再生装置G及びFをシングル再生モードにて使用した場合が考えられる。あるいは新規に検出される再生装置10についてはシングル再生モードが設定される場合には、再生装置G及びFが新規にコンテンツ再生システム100内に追加された場合も考えられる。
例えば履歴情報55dに示すように、ユーザにより過去に再生装置D、E及びFによりサラウンド再生モードのグループ「Surround DEF」が作成された。その後、他のユーザによりグループの変更等が行われ、マルチルーム再生モードのグループ「Group DEJ」が作成される。当該作成されたグループ「Group DEJ」が検出された、というような場合も考えられる。その他、種々のシチュエーションが考えられる。
新規検出情報60は、現在検出される再生装置10及びその再生モードの情報なので、接続状態は全てアクティブ状態である。なお本実施形態では、新しく生成される新規検出情報60は、第2の表示領域52の下方に順に追加される。
後に説明するように、第1及び第2の表示領域51及び52に表示される履歴情報55及び新規検出情報60が選択されると、選択された履歴情報55及び新規検出情報60に含まれる再生装置10及びその再生モードによるコンテンツの再生が指示される。例えばアクティブ状態である履歴情報55や新規検出情報60が選択されると、現在実現されている各情報に対応する再生環境にて、コンテンツが再生される。非アクティブ状態の履歴情報55が選択されると、対応する再生環境を構築するための処理(アクティブ状態とする処理)が実行され、成功した場合にはコンテンツが再生される。
図3に示すように、本実施形態では、再生リスト50内において、履歴情報55が表示される第1の表示領域51が、新規検出情報60が表示される第2の表示領域52の上方に設定される。これによりユーザは、過去に選択した再生装置10及びその再生モードを容易に選択することが可能となり、使用頻度の高い好みの再生環境を容易に再現することが可能となる。
特に、新しく選択された再生装置10の履歴情報55が、第1の表示領域51の最も上方に順に追加されるので、使用する可能性が高い再生装置10及びその再生モードを選択することが可能となる。この結果、最近のお気に入りの再生環境を容易に再現することが可能となり、非常に高い操作性を発揮することが可能となる。
一方で、新規検出情報60を選択することで、新たな再生環境を容易に構築することも可能である。なお新規検出情報60については、第2の表示領域52の下方に順に追加される。従って、例えば好みではない再生環境に関する新規検出情報60が第2の表示領域52の上方にどんどん追加されて、再生リストへの操作を邪魔してしまうといったことを防止することができる。例えば選択操作する入力する際に、新規検出情報60が不用意に移動してしまい、選択ミスをしてしまうことを防止することが可能となる。この結果、高い操作性が発揮される。
第3の表示領域53には、BLEビーコン信号を受信することで検出された未接続の再生装置10の検出情報61が表示される。ここに表示される未接続の再生装置10は、BLT接続を確立するための、ユーザからの接続の指示を必要とする再生装置10である。
未接続の再生装置10の検出情報61は、以下の情報を含む。
BLEビーコン信号により検出した旨のテキスト(「Single(BLE)」)
シングル再生モードである旨を表すアイコン56
接続の指示が必要な旨のテキスト(「Need Setup」)
なお未接続の再生装置10の検出情報61は、新しく生成される度に、第3の表示領域53の情報に順に追加される。
第3の表示領域53に表示される検出情報61が選択されると、BLT接続を確立するための処理が実行される。BLT接続が確立後、BLT通信を介してコンテンツの再生が指示されと、履歴情報55が生成され第1の表示領域51に表示される。当該履歴情報55の接続状態については、Bluetooth(登録商標)マーク57bのアクティブ表示の有無、及び背景色が適宜制御される(履歴情報55c参照)。
なおBT接続が確立される場合には、ユーザにより再生装置10がペアリングモードに設定され、その後ペアリングが実行される。当該ペアリングは、コンテンツの再生を指示する際に行われることが多い。従ってBT接続の確立とともに履歴情報55が生成され、第1の表示領域51に表示されることが多い。この結果、第2の表示領域52に表示される新規検出情報60は、ホームネットワーク1を介して検出される再生装置10の情報である場合が多い。もちろんこれに限定されず、コンテンツ再生の指示が入力される前の、BLE接続やBT接続が確立した再生装置10の新規検出情報60が生成され、第2の表示領域52に表示されてもよい。
再生リスト内において、第3の表示領域53は、第1の表示領域51の上方に設定される。近距離無線通信であるBLE通信のBLEビーコン信号により、携帯端末30を携帯するユーザに近接した再生装置10が検出される。従って、検出される再生装置10の数はそれほど多くないので、第1の表示領域51が再生リスト50の下方にずれてしまうことはない。
またコンテンツ再生システム100を利用する際に、目の前に未接続の再生装置10が存在する場合には、コンテンツの再生のために接続を所望する可能性は高いと考えられる。従って第3の表示領域53を再生リスト50の上方に設定することで、未接続の再生装置10の発見、当該再生装置10との接続の指示の入力が非常に容易となる。この結果、高い操作性が発揮される。
なお本実施形態では、第1~第3の表示領域51~53の各々が識別可能に表示される訳ではない。すなわち再生リスト50内に、各表示領域の境界等が表示される訳ではない。従ってユーザにとって、例えば履歴情報55や新規検出情報60を区別して操作を入力するといったことは必要なく、自然と使用頻度の高い履歴情報55を中心に、再生リスト50を操作することが可能となる。すなわちシンプルに所望とする再生環境を構築するための操作を入力することが可能であり、高い操作性が発揮される。もちろん各表示領域を識別可能に再生リスト50が生成されてもよい。
再生リスト50を、再生環境に関する一覧として見なすことも可能である。すなわち履歴情報55及び新規検出情報60は、ともに再生環境を実現するための情報として見なすことができる。以下、履歴情報55及び新規検出情報60を、再生環境情報として包括的に記載して説明する場合がある。
図5は、再生リスト50の作成例の概要を示すフローチャートである。本技術に係るアプリケーションが起動すると、履歴情報取得部45により、履歴情報55が取得される(ステップ101)。本実施形態では、履歴情報55は、携帯端末30のROM32等により構成される記憶部から読み出される。履歴情報取得部45は、第2の取得部に相当する。
装置検出部43により、ホームネットワーク1上の再生装置10、及びBLEビーコン信号を送信する未接続の再生装置10が検出される(ステップ102)。リスト生成部46により、履歴情報55、新規検出情報60、及び未接続の再生装置10の検出情報61を含む、再生リスト50が生成される(ステップ103)。
図6は、ホームネットワーク1上の再生装置10の検出から再生リスト50の作成までの処理例を示すフローチャートである。まず装置検出部43により、ホームネットワーク1上の再生装置10が検出される(ステップ201)。
例えばネットワークモジュール41を介して、デバイス検索メッセージがマルチキャストで送信される。ホームネットワーク1に接続された再生装置10により、デバイス検索メッセージに応じて、デバイス応答メッセージが返される。これにより再生装置10を検出することが可能である。他の検出方法が用いられてもよい。
再生モード取得部44により、検出された再生装置10の再生モードが取得される。例えばHTTP GET等のメソッドを用いて生成された要求メッセージを用いて、再生装置10の再生モードを含む装置情報の要求が送信される。当該要求に応じて再生装置10から送信された装置情報を受け取ることで、各再生装置10の再生モードを取得することができる。再生モード取得部44は、第1の取得部に相当する。
リスト生成部46により、検出された再生装置10に関する検出情報が生成される(ステップ203)。そして検出情報が、履歴情報55に含まれるか否かが判定される(ステップ204)。検出情報が履歴情報55に含まれない新規検出情報60である場合には(ステップ204のNo)、第2の表示領域52に新規検出情報60が追加される(ステップ205)。
検出情報が履歴情報55に含まれる場合には(ステップ204のYes)、第1の表示領域51に表示されている、検出情報に対応する履歴情報55のネットワークステータス(接続状態)がアクティブに設定される(ステップ206)。これにより再生リスト50を生成することが可能である。もちろんこの方法に限定される訳ではない。
再生リスト50に対する操作例を説明する。再生リスト50内の再生環境情報(履歴情報55及び新規検出情報60)が選択されると、再生制御部47により、再生環境情報に含まれる再生装置10及びその再生モードによるコンテンツの再生が指示される。
図7は、グループ再生モードの再生環境情報が選択された場合の処理例を示すフローチャートである。図8~図10は、当該処理内にて表示される画面(画像)の一例を示す模式図である。当該画面は、例えばリスト生成部46により生成されてもよいし、他の画像生成ブロックにより生成されてもよい。
再生環境情報が選択されると(ステップ301)、図8に示す待機画面70が表示される。待機画面70には、選択された再生環境情報(この例では履歴情報55a)と、コンテンツの再生を制御するための操作用GUI71とが表示される。画面中央は操作情報の表示領域72となっており、そこには処理中であることを表すマーク73が表示される。
待機画面70が表示されている間に、選択された再生環境情報のネットワークステイタスが判定される(ステップ302)。ネットワークステイタスがアクティブ状態の場合(ステップ302のYes)、図9に示すダッシュボード画面75が表示される(ステップ303)。例えばアクティブ状態の履歴情報55や新規検出情報60が選択された場合が相当する。
ダッシュボード画面75は、選択された再生環境情報に関する再生環境の準備が完了した場合に表示される画面である。従ってネットワークステイタスがアクティブ状態である場合には、速やかにダッシュボード画面75に移動する(待機画面70が表示されない場合もあり得る)。
ダッシュボード画面75の表示領域72には、準備が完了した再生環境にて再生可能なコンテンツの種類を表すアイコン76が表示される。図9に示す例では、再生装置A、B及びCによるマルチルーム再生が可能なコンテンツのアイコン76が表示される。ユーザはダッシュボード画面75の表示を確認することで、再生環境が実現したことを把握することが可能である。
なおユーザの操作に応じて、表示領域72に、種々の情報が表示される。例えば再生可能なコンテンツのリスト、再生中のコンテンツの情報、各種設定を実行するためGUI等が表示される。例えば音質設定、EQ(イコライザ)設定、タイマー設定、その他の設定等を行うためのGUI等が挙げられる。
ネットワークステイタスが非アクティブ状態の場合(ステップ302のNo)、グループを構成する全ての再生装置10が検出されているか否かが判定される(ステップ304)。未検出の再生装置10が存在する場合には(ステップ304のNo)、その再生装置10に、電源ONパケット(WOLパケット)が送信される(ステップ305)。
電源ONパケットの送信後、所定の時間内に全ての再生装置10が検出されたか否かが判定される(ステップ306)。未検出の再生装置10が存在する場合には(ステップ306のNo)、図10に示すエラー画面77が表示される。エラー画面77の表示領域72には、エラーダイアログ78が表示される(ステップ307)。エラー画面77が表示されると、選択された再生環境情報に対応する再生環境が構築されることなく処理が終了する。
なお未検出の再生装置10を検出可能とする処理として、電源ONパケットの送信に限定されず、他の処理が実行されてもよい。
ステップ304又は306にて全ての再生装置10が検出された場合には、Yesに進み、他のグループに所属する再生装置10が存在するか否かが判定される(ステップ308)。他のグループに所属するとは、典型的には、再生環境情報に含まれていない他の再生装置10とグループを構成している場合である。その他、他のグループ再生モードが設定されている場合も含まれる。
他のグループに所属する再生装置10が存在しない場合(ステップ308のNo)、検出された全ての再生装置10により、再生環境情報に含まれるグループ再生モードのグループが作成される(ステップ309)。例えば上記したように、マスタ装置及びスレーブ装置が設定され、マスタ装置を中心にグループが構成される。
他のグループに所属する再生装置10が存在する場合(ステップ308のYes)、その他のグループを解散させて、全ての再生装置10がシングル再生モードになるまで待機する(ステップ310)。グループの解散は、例えばそのグループのマスタ装置にグループ解散要求を送信することで実現される。グループの解散が完了すると、各再生装置10の再生モードは、シングル再生モードに設定される。
全ての再生装置10がシングル再生モードとなると、選択された再生環境情報に含まれるグループ再生モードのグループが作成される(ステップ309)。グループの作成が成功した場合には(ステップ311のYes)、図9に示すダッシュボード画面75が表示される(ステップ303)。一方、グループの作成が失敗した場合には(ステップ311No)、図10に示すエラー画面77が表示される(ステップ307)。グループ作成の成功/失敗は、例えばマスタ装置からの通知等に基づいて実行される。
新規検出情報60が選択されてダッシュボード画面75が表示された場合には、当該新規検出情報60は履歴情報55として登録され、第1の表示領域51に追加される。履歴情報55が選択されてダッシュボード画面75が表示された場合には、第1の表示領域51での表示位置が最上方に移動する。履歴情報55の第1の表示領域51内の移動を規制するモード等が設定可能でもよい。
なおシングル再生モードの再生環境情報が選択された場合には、再生環境情報に含まれる再生装置10のネットワークステイタスが判定され、非アクティブ状態の場合は電源ONパケットが送信される。所定の時間が経過しても再生装置10が未検出の場合には、エラー画面77が表示される。
ネットワークステイタスがアクティブ状態の場合には、シングル再生モードであるか否かが判定され、Yesの場合は、ダッシュボード画面75が表示される。グループ再生モードである場合には、そのグループを解散させ、シングル再生モードになるのを待つ。シングル再生モードになれば、ダッシュボード画面75が表示される。
図11は、グループ情報表示ダイアログ79の一例を示す模式図である。グループ再生モードの再生環境情報内に表示された、装置表示ボタン(「See All」)が選択されると、グループを構成する各再生装置10の情報を含むグループ情報表示ダイアログ79が表示される。図11に示す例では、各再生装置10の名称が表示され、当該名称を選択することで、各再生装置10に関する詳細画面に遷移する。グループ情報表示ダイアログ79の具体的な構成や、表示される情報等については、適宜設定されてよい。
図12は、履歴情報55の登録処理例を示すフローチャートである。上記したように、ユーザにより再生装置10及びその再生モードが選択されるたびに履歴情報55が生成されて記憶部に登録される。その登録例として、図12に示すような、グループ名称に基づいた処理が実行されてもよい。
例えばグループ作成用のGUI等を介して、グループが作成される(ステップ401)。グループが作成されると、例えばデフォルトのグループ名称が生成される、あるいはユーザによりグループ名称が入力される。
また新規に検出されたグループが選択される、すなわちグループ再生モードの新規検出情報60が選択される(ステップ402)。この場合、グループ名称は新規検出情報60内に含まれている。
グループのメンバーが変更される(ステップ403)。例えば再生リスト50内のグルーム再生モードの再生環境情報が選択された後に、所定のメンバー変更ボタン等が選択されることで、メンバーの変更が実行される。ユーザによるメンバー変更の操作に応じて、グループへの追加やグループからの離脱等の要求が、マスタ装置に送信される。なおグループ名称は、選択された再生環境情報に含まれている。
ユーザによりグループ名が変更される(ステップ404)。例えば例えば再生リスト50内のグルーム再生モードの再生環境情報が選択された後に、グループ名称の変更操作が入力される。その方法や用いられるGUI等は限定されない。
ステップ401~404が実行された場合、記憶部に登録されている履歴情報55の中に同じグループ名称の履歴情報55が存在するか否かが判定される(ステップ405)。同じグループ名称の履歴情報55が存在する場合には(ステップ405のYes)、履歴情報55が上書きされる(ステップ406)。
このように履歴情報55の上書きが実行されてもよい。これにより再生装置10の配置を変更した場合や、古い再生装置10を廃棄して新しい再生装置10を配置した場合等において、この先再現する必要のない再生環境に関する履歴情報55を更新するといったことが可能となる。なお上書きを実行するか否かをユーザに問い合わせるダイアログ等が表示されてもよい。
同じグループ名の履歴情報55が存在しない場合には(ステップ405のNo)、登録済みの履歴情報55の数が最大であるか否かが判定される(ステップ407)。登録可能な最大数は限定されず適宜設定されてよい。
登録済みの履歴情報55の数が最大である場合(ステップ408のYes)、最も古い履歴情報55が削除される(ステップ409)。そしてステップ410~404の操作に応じて生成/変更された再生環境情報が、最新の履歴情報55として登録される(ステップ410)。登録済みの履歴情報55の数が最大ではない場合は(ステップ408のNo)、最も古い履歴情報55の削除を実行することなく、最新の履歴情報55が登録される(ステップ410)。
このように登録可能な履歴情報55の最大数が設定されもよい。これにより長らく使用されていない再生環境に対応する再生環境情報を削除することが可能となり、また必要なメモリ容量を低減することが可能となる。なおユーザが再生リスト50から所望の履歴情報55を選択して削除することも可能である。
再生モードごとに登録可能な履歴情報55の最大数が設定されてもよい。例えばシングル再生モードの登録可能数と、グループ再生モードの登録可能数がそれぞれ設定されてもよい。そして再生モードごとに履歴情報の更新(古い履歴情報の削除等)が実行されてもよい。また各グループ再生モード(マルチルーム再生モード、サラウンド再生モード、ステレオ再生モード)ごとに登録可能数が設定されてもよい。
以上、本実施形態に係るコンテンツ再生システム100では、携帯端末30により検出された再生装置10及びその再生モードを含む検出情報(新規検出情報60)と、過去に選択された再生装置10及びその時の再生モードを含む履歴情報55とを含む再生リスト50が生成される。これにより例えば表示される履歴情報55を用いて過去の再生環境を容易に再現すること等が可能となる。この結果、再生装置10を操作性よく制御することが可能となる。
検出された再生装置やそのグループのみを表示する場合について考察する。この場合、未検出の再生装置(電源OFFあるいはスタンバイ状態の再生装置)、及びその再生装置が所属するグループの情報が表示されない。従ってよく利用するグループの再生装置が未検出な場合等においては、そのよく利用するグループによるコンテンツの再生を実現することが難しい。例えばそのグループが表示されない原因を自分で探し出し、未検出の再生装置の電源をONにするといった操作により、グループを検出可能な状態にする必要がある。その後、グループが検出されてリストに表示されて始めて、コンテンツの再生が可能となる。
また他のユーザによりグループの変更等が行われたことにより、よく利用するグループが存在しなくなる場合等においても同様である。すなわち当該グループが表示されない原意を考えて、変更されたグループを再度構築し直すといったことが必要となる。
これに対して、本コンテンツ再生システム100では、再生リスト50に、よく利用するグループの履歴情報55が表示される。当該履歴情報55は、ネットワークステイタスにかかわらず、すなわち現在そのグループが存在するか否か、あるいは所属する再生装置10がアクティブ状態であるか否かにかかわらず表示される。従ってユーザは、再生リスト50からよく利用するグループの履歴情報55をワンタップで選択するだけで、当該グループによるコンテンツの再生を容易に実現することが可能となる。この結果、非常に高い操作性を発揮することが可能となる。
<その他の実施形態>
本技術は、以上説明した実施形態に限定されず、他の種々の実施形態を実現することができる。
上記では、携帯端末の記憶部に履歴情報が登録される場合を説明した。これに限定されず、ユーザにより選択された再生装置のメモリ等に、選択された時の再生モードを含む履歴情報が記憶されてもよい。そして携帯端末により、検出された再生装置に対して履歴情報が要求され、それに応答して履歴情報が返されてもよい。すなわち携帯端末の履歴情報取得部により、検出された再生装置から履歴情報が取得されてもよい。これにより必要なメモリ容量の低減を図ることが可能となり、また履歴情報を精度よく取得することが可能となる。
携帯端末及び再生装置のいずれにも履歴情報が記憶され場合、再生リストの第1の表示領域に、携帯端末により記憶された履歴情報が表示される第4の表示領域と、再生装置から取得された履歴情報が表示される第5の表示領域とがそれぞれ設定されてもよい。すなわち携帯端末により記憶された履歴情報と、再生装置から取得された履歴情報とが異なる位置に表示されてもよい。例えば携帯端末が記憶する場合、及び再生装置が記憶する場合を規定する条件等を定めることで、その条件に則った履歴情報の表示が実現する。この結果、高い操作性を発揮させることが可能となる。
再生リストに対して入力可能な操作の種類は限定されない。上記したようなグループの新規作成、グループの解散、グループメンバーの変更、再生情報の削除等、任意の操作が可能である。
再生リスト内の再生環境情報の表示順、すなわち第1の表示領域における履歴情報の表示順(追加順)や、第2の表示領域における検出情報の表示順(追加順)は、任意に設定されてよい。また当該表示分が、ユーザにより適宜変更可能であってもよい。
上記では、本技術に係る操作用画像として再生リストが表示された。これに限定されず、他の任意の操作用GUIが、操作用画像として表示されてもよい。またグループ再生モード(マルチルーム再生モード、サラウンド再生モード、ステレオ再生モード)のみの履歴情報及び検出情報を含むグループ再生リストが、操作用画像として表示されてもよい。
上記では、再生装置を制御するための通信例として、ネットワーク通信、BLE通信、及びBT通信を例に挙げて説明した。これらの通信に限定されず、任意の通信方法に対して、本技術は適用可能である。例えばネットワーク通信とは異なる近距離無線通信等により、グループ再生モードが構築されてもよい。
上記ではユーザにより操作される携帯端末等のコンピュータにより、本技術に係る情報処理方法が実行される場合を説明した。しかしながらユーザが操作するコンピュータとネットワーク等を介して通信可能な他のコンピュータとにより、本技術に係る情報処理方法、及びプログラムが実行されてもよい。またユーザが操作するコンピュータと、他のコンピュータとが連動して、本技術に係るコンテンツ再生システムが構築されてもよい。
すなわち本技術に係る情報処理方法、及びプログラムは、単体のコンピュータにより構成されたコンピュータシステムのみならず、複数のコンピュータが連動して動作するコンピュータシステムにおいても実行可能である。なお本開示において、システムとは、複数の構成要素(装置、モジュール(部品)等)の集合を意味し、すべての構成要素が同一筐体中にあるか否かは問わない。したがって、別個の筐体に収納され、ネットワークを介して接続されている複数の装置、及び、1つの筐体の中に複数のモジュールが収納されている1つの装置は、いずれもシステムである。
コンピュータシステムによる本技術に係る情報処理方法、及びプログラムの実行は、例えば履歴情報の取得や操作用画像の生成等が、単体のコンピュータにより実行される場合、及び各処理が異なるコンピュータにより実行される場合の両方を含む。また所定のコンピュータによる各処理の実行は、当該処理の一部または全部を他のコンピュータに実行させその結果を取得することを含む。
すなわち本技術に係る情報処理方法及びプログラムは、1つの機能をネットワークを介して複数の装置で分担、共同して処理するクラウドコンピューティングの構成にも適用することが可能である。
以上説明した本技術に係る特徴部分のうち、少なくとも2つの特徴部分を組み合わせることも可能である。すなわち各実施形態で説明した種々の特徴部分は、各実施形態の区別なく、任意に組み合わされてもよい。また上記で記載した種々の効果は、あくまで例示であって限定されるものではなく、また他の効果が発揮されてもよい。
なお、本技術は以下のような構成も採ることができる。
(1)再生装置を検出する検出部と、
前記検出された再生装置の再生モードを取得する第1の取得部と、
過去に選択された再生装置及び当該再生装置の過去の選択時の再生モードを含む履歴情報を取得する第2の取得部と、
前記検出された再生装置及び当該再生装置の検出時の再生モードを含む検出情報、及び前記取得された履歴情報を含む操作用画像を生成する生成部と
を具備する情報処理装置。
(2)(1)に記載の情報処理装置であって、
前記再生モードは、シングル再生モード、及びグループ再生モードを含む
情報処理装置。
(3)(2)に記載の情報処理装置であって、
前記履歴情報及び検出情報の各々は、前記再生モードが前記シングル再生モードである前記再生装置の情報として、前記再生装置の名称、及び前記シングル再生モードである旨を表すアイコンの少なくとも1つを含む
情報処理装置。
(4)(2)又は(3)に記載の情報処理装置であって、
前記履歴情報及び検出情報の各々は、前記再生モードが前記グループ再生モードである前記再生装置の情報として、前記再生装置を含むグループの名称、及び前記グループ再生モードである旨を表すアイコンの少なくとも1つを含む
情報処理装置。
(5)(2)から(4)のうちいずれか1つに記載の情報処理装置であって、
前記グループ再生モードは、同期再生モード、サラウンド再生モード、及びステレオ再生モードを含む
情報処理装置。
(6)(1)から(5)のうちいずれか1つに記載の情報処理装置であって、
前記操作用画像は、前記履歴情報が表示される第1の表示領域と、前記検出情報のうち前記履歴情報に含まれない新規検出情報が表示される第2の表示領域とを含む
情報処理装置。
(7)(6)に記載の情報処理装置であって、
前記操作用画像は、リストであり、
前記第1の表示領域は、前記第2の表示領域よりも上に設定される
情報処理装置。
(8)(6)又は(7)に記載の情報処理装置であって、
前記検出部は、ユーザからの接続の指示を必要とする未接続の再生装置を検出し、
前記リストは、前記未接続の再生装置の情報が表示される第3の表示領域を含む
情報処理装置。
(9)(8)に記載の情報処理装置であって、
前記検出部は、近距離無線通信を介して前記未接続の再生装置を検出する
情報処理装置。
(10)(8)又は(9)に記載の情報処理装置であって、
前記第3の表示領域は、前記第1の表示領域よりも上に設定される
情報処理装置。
(11)(1)から(10)のうちいずれか1つに記載の情報処理装置であって、
前記生成部は、前記履歴情報に含まれる前記再生装置及びその再生モードの動作状態を判定し、当該判定結果に応じて表示態様が異なるように前記操作用画像を生成する
情報処理装置。
(12)(1)から(11)のうちいずれか1つに記載の情報処理装置であって、さらに、
前記操作用画像に含まれる前記再生装置及びその再生モードによるコンテンツの再生を指示する再生制御部を具備する
情報処理装置。
(13)(1)から(12)のうちいずれか1つに記載の情報処理装置であって、
前記第2の取得部は、前記検出された再生装置から前記履歴情報を取得する
情報処理装置。
1…ホームネットワーク
10…再生装置
30…携帯端末
43…装置検出部
44…再生モード取得部
45…履歴情報取得部
46…リスト生成部
47…再生制御部
50…再生リスト
51…第1の表示領域
52…第2の表示領域
53…第3の表示領域
55…履歴情報
56…シングル再生モードである旨を表すアイコン
58…グループ再生モードである旨を表すアイコン
60…新規検出情報
61…検出情報
70…待機画面
75…ダッシュボード画面
77…エラー画面
100…コンテンツ再生システム

Claims (15)

  1. 再生装置を検出する検出部と、
    前記検出された再生装置の再生モードを取得する第1の取得部と、
    過去に選択された再生装置及び当該再生装置の過去の選択時の再生モードを含む履歴情報を取得する第2の取得部と、
    前記検出された再生装置及び当該再生装置の検出時の再生モードを含む検出情報、及び前記取得された履歴情報を含む操作用画像を生成する生成部と
    を具備する情報処理装置。
  2. 請求項1に記載の情報処理装置であって、
    前記再生モードは、シングル再生モード、及びグループ再生モードを含む
    情報処理装置。
  3. 請求項2に記載の情報処理装置であって、
    前記履歴情報及び検出情報の各々は、前記再生モードが前記シングル再生モードである前記再生装置の情報として、前記再生装置の名称、及び前記シングル再生モードである旨を表すアイコンの少なくとも1つを含む
    情報処理装置。
  4. 請求項2に記載の情報処理装置であって、
    前記履歴情報及び検出情報の各々は、前記再生モードが前記グループ再生モードである前記再生装置の情報として、前記再生装置を含むグループの名称、及び前記グループ再生モードである旨を表すアイコンの少なくとも1つを含む
    情報処理装置。
  5. 請求項2に記載の情報処理装置であって、
    前記グループ再生モードは、同期再生モード、サラウンド再生モード、及びステレオ再生モードを含む
    情報処理装置。
  6. 請求項1に記載の情報処理装置であって、
    前記操作用画像は、前記履歴情報が表示される第1の表示領域と、前記検出情報のうち前記履歴情報に含まれない新規検出情報が表示される第2の表示領域とを含む
    情報処理装置。
  7. 請求項6に記載の情報処理装置であって、
    前記操作用画像は、リストであり、
    前記第1の表示領域は、前記第2の表示領域よりも上に設定される
    情報処理装置。
  8. 請求項に記載の情報処理装置であって、
    前記検出部は、ユーザからの接続の指示を必要とする未接続の再生装置を検出し、
    前記リストは、前記未接続の再生装置の情報が表示される第3の表示領域を含む
    情報処理装置。
  9. 請求項8に記載の情報処理装置であって、
    前記検出部は、近距離無線通信を介して前記未接続の再生装置を検出する
    情報処理装置。
  10. 請求項8に記載の情報処理装置であって、
    前記第3の表示領域は、前記第1の表示領域よりも上に設定される
    情報処理装置。
  11. 請求項1に記載の情報処理装置であって、
    前記生成部は、前記履歴情報に含まれる前記再生装置及びその再生モードの動作状態を判定し、当該判定結果に応じて表示態様が異なるように前記操作用画像を生成する
    情報処理装置。
  12. 請求項1に記載の情報処理装置であって、さらに、
    前記操作用画像に含まれる前記再生装置及びその再生モードによるコンテンツの再生を指示する再生制御部を具備する
    情報処理装置。
  13. 請求項1に記載の情報処理装置であって、
    前記第2の取得部は、前記検出された再生装置から前記履歴情報を取得する
    情報処理装置。
  14. 再生装置を検出し、
    前記検出された再生装置の再生モードを取得し、
    過去に選択された再生装置及び当該再生装置の過去の選択時の再生モードを含む履歴情報を取得し、
    前記検出された再生装置及び当該再生装置の検出時の再生モードを含む検出情報、及び前記取得された履歴情報を含む操作用画像を生成する
    ことをコンピュータシステムが実行する情報処理方法。
  15. 再生装置を検出するステップと、
    前記検出された再生装置の再生モードを取得するステップと、
    過去に選択された再生装置及び当該再生装置の過去の選択時の再生モードを含む履歴情報を取得するステップと、
    前記検出された再生装置及び当該再生装置の検出時の再生モードを含む検出情報、及び前記取得された履歴情報を含む操作用画像を生成するステップと
    をコンピュータシステムに実行させるプログラム。
JP2018552466A 2016-11-25 2017-10-19 情報処理装置、情報処理方法、及びプログラム Active JP7010236B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2016229277 2016-11-25
JP2016229277 2016-11-25
PCT/JP2017/037827 WO2018096849A1 (ja) 2016-11-25 2017-10-19 情報処理装置、情報処理方法、及びプログラム

Publications (2)

Publication Number Publication Date
JPWO2018096849A1 JPWO2018096849A1 (ja) 2019-10-17
JP7010236B2 true JP7010236B2 (ja) 2022-02-10

Family

ID=62195447

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018552466A Active JP7010236B2 (ja) 2016-11-25 2017-10-19 情報処理装置、情報処理方法、及びプログラム

Country Status (4)

Country Link
US (1) US11418406B2 (ja)
EP (1) EP3547695A4 (ja)
JP (1) JP7010236B2 (ja)
WO (1) WO2018096849A1 (ja)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3769510A1 (en) 2018-05-07 2021-01-27 Apple Inc. User interfaces for viewing live video feeds and recorded video
US10904029B2 (en) 2019-05-31 2021-01-26 Apple Inc. User interfaces for managing controllable external devices
US11589010B2 (en) 2020-06-03 2023-02-21 Apple Inc. Camera and visitor user interfaces
US20220365667A1 (en) * 2021-05-15 2022-11-17 Apple Inc. User interfaces for managing accessories

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160026427A1 (en) 2014-07-22 2016-01-28 Sonos, Inc. Audio Settings
WO2016103546A1 (ja) 2014-12-26 2016-06-30 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS62146568A (ja) 1985-12-19 1987-06-30 Nissei Reiki Kk ソフトクリ−ム製造機の洗浄方法とその装置
JP5055769B2 (ja) 2005-05-23 2012-10-24 ソニー株式会社 コンテンツ表示再生システム、コンテンツ表示再生方法、記録媒体、及び操作制御装置
JP4207135B2 (ja) * 2006-07-21 2009-01-14 ソニー株式会社 再生装置、再生方法及び再生プログラム
WO2009086599A1 (en) * 2008-01-07 2009-07-16 Avega Systems Pty Ltd A user interface for managing the operation of networked media playback devices
JP2012114577A (ja) 2010-11-22 2012-06-14 Sharp Corp 放送システム
JP2013062624A (ja) * 2011-09-12 2013-04-04 Sharp Corp 再生装置、再生方法、配信装置、配信システム、再生プログラムおよび記録媒体
KR102164455B1 (ko) * 2013-05-08 2020-10-13 삼성전자주식회사 콘텐트 제공 방법, 콘텐트 제공 장치 및 그 콘텐트 제공 시스템
US10209947B2 (en) 2014-07-23 2019-02-19 Sonos, Inc. Device grouping

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160026427A1 (en) 2014-07-22 2016-01-28 Sonos, Inc. Audio Settings
WO2016103546A1 (ja) 2014-12-26 2016-06-30 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム

Also Published As

Publication number Publication date
US11418406B2 (en) 2022-08-16
JPWO2018096849A1 (ja) 2019-10-17
EP3547695A4 (en) 2020-04-22
US20190273664A1 (en) 2019-09-05
WO2018096849A1 (ja) 2018-05-31
EP3547695A1 (en) 2019-10-02

Similar Documents

Publication Publication Date Title
US20230315278A1 (en) Device group management via information processing apparatus, method, and program
CN108141629B (zh) 在显示设备上呈现虚拟操作系统用户界面的方法、系统和介质
JP7010236B2 (ja) 情報処理装置、情報処理方法、及びプログラム
EP3005649B1 (en) Systems, methods, and media for presenting media content
JP6973083B2 (ja) 情報処理方法、プログラム、及び情報処理システム
JP6690645B2 (ja) 情報処理方法、プログラム、情報処理装置、及び情報処理システム
JPWO2008117586A1 (ja) コンテンツ再生システム、コンテンツ再生・制御装置およびコンピュータプログラム
JPWO2016199346A6 (ja) 情報処理方法、プログラム、情報処理装置、及び情報処理システム
US20140140674A1 (en) Wireless transmission of media to an audio/visual output device
US11362854B2 (en) Information processing apparatus, information processing method, program, and information processing system
JP7044076B2 (ja) 再生装置、情報処理方法、及びプログラム
JP2015019196A (ja) サーバ装置、クライアント機器及びコンテンツ再生プログラム
JP6933224B2 (ja) 情報処理装置、情報処理方法、プログラム、及び情報処理システム
WO2014207931A1 (ja) 通信システムおよび方法

Legal Events

Date Code Title Description
A80 Written request to apply exceptions to lack of novelty of invention

Free format text: JAPANESE INTERMEDIATE CODE: A801

Effective date: 20190418

A80 Written request to apply exceptions to lack of novelty of invention

Free format text: JAPANESE INTERMEDIATE CODE: A80

Effective date: 20190418

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200721

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210928

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211124

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20211124

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20211214

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20211227

R151 Written notification of patent or utility model registration

Ref document number: 7010236

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151