JPWO2020149366A1 - 情報処理装置 - Google Patents

情報処理装置 Download PDF

Info

Publication number
JPWO2020149366A1
JPWO2020149366A1 JP2020566475A JP2020566475A JPWO2020149366A1 JP WO2020149366 A1 JPWO2020149366 A1 JP WO2020149366A1 JP 2020566475 A JP2020566475 A JP 2020566475A JP 2020566475 A JP2020566475 A JP 2020566475A JP WO2020149366 A1 JPWO2020149366 A1 JP WO2020149366A1
Authority
JP
Japan
Prior art keywords
distribution
video
user
image
status information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2020566475A
Other languages
English (en)
Other versions
JP7179089B2 (ja
Inventor
ゆりか 村瀬
河村　大輔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Interactive Entertainment Inc
Original Assignee
Sony Interactive Entertainment Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Interactive Entertainment Inc filed Critical Sony Interactive Entertainment Inc
Publication of JPWO2020149366A1 publication Critical patent/JPWO2020149366A1/ja
Application granted granted Critical
Publication of JP7179089B2 publication Critical patent/JP7179089B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/85—Providing additional services to players
    • A63F13/86—Watching games played by other players
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/30—Interconnection arrangements between game servers and game devices; Interconnection arrangements between game devices; Interconnection arrangements between game servers
    • A63F13/35—Details of game servers
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/70—Game security or game management aspects
    • A63F13/79—Game security or game management aspects involving player-related data, e.g. identities, accounts, preferences or play histories
    • A63F13/795—Game security or game management aspects involving player-related data, e.g. identities, accounts, preferences or play histories for finding other players; for building a team; for providing a buddy list
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00—Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23614—Multiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24—Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • H04N21/2407—Monitoring of transmitted content, e.g. distribution time, number of downloads
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/27—Server based end-user applications
    • H04N21/274—Storing end-user multimedia data in response to end-user request, e.g. network recorder
    • H04N21/2743—Video hosting of uploaded data from client
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4348—Demultiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/482—End-user interface for program selection
    • H04N21/4821—End-user interface for program selection using a grid, e.g. sorted out by channel and broadcast time
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/485—End-user interface for client configuration
    • H04N21/4858—End-user interface for client configuration for modifying screen layout parameters, e.g. fonts, size of the windows

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Marketing (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Computer Security & Cryptography (AREA)
  • General Business, Economics & Management (AREA)
  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

複数の配信映像を選択候補として含む配信映像選択画面をユーザーに提示し、当該配信映像選択画面内において、複数の配信映像のそれぞれに関連づけて、当該配信映像の配信状況に関する配信状況情報を提示する情報処理装置であって、配信状況情報として、対応する配信映像を視聴する視聴者の数に応じて決まる数の単位画像を含む視聴者画像を、当該配信映像を表す画像の周囲に表示する情報処理装置である。

Description

本発明は、他者が配信する映像を表示する情報処理装置、情報処理システム、情報処理方法、及びプログラムに関する。
例えば家庭用ゲーム機などの情報処理装置は、他者がリアルタイムで配信するゲームのプレイ動画などの映像を受信し、表示することがある。
上述した情報処理装置は、複数の配信映像の中からユーザーに所望の配信映像を選択させるために、複数の配信映像を選択候補として提示することがある。このような配信映像をユーザーが選択する際には、単に配信中の映像の内容だけで選択するわけではなく、配信映像が視聴者の間でどの程度盛り上がっているかなど、その配信映像の配信状況も選択に影響する要素となる。そのため、配信映像の配信状況をユーザーがより容易に把握することのできるユーザーインターフェースが望まれている。
本発明は上記実情を考慮してなされたものであって、その目的の一つは、選択候補となる複数の配信映像をユーザーに提示する場合において、配信映像の配信状況をユーザーがより把握しやすくすることのできる情報処理装置、情報処理システム、情報処理方法、及びプログラムを提供することにある。
本発明の一態様に係る情報処理装置は、複数の配信映像を選択候補として含む配信映像選択画面をユーザーに提示する配信映像選択画面提示部と、前記配信映像選択画面内において、前記複数の配信映像のそれぞれに関連づけて、当該配信映像の配信状況に関する配信状況情報を提示する配信状況情報提示部と、を含み、前記配信状況情報提示部は、前記配信状況情報として、対応する配信映像を視聴する視聴者の数に応じて決まる数の単位画像を含む視聴者画像を、当該配信映像を表す画像の周囲に表示することを特徴とする。
本発明の一態様に係る情報処理方法は、複数の配信映像を選択候補として含む配信映像選択画面をユーザーに提示する配信映像選択画面提示ステップと、前記配信映像選択画面内において、前記複数の配信映像のそれぞれに関連づけて、当該配信映像の配信状況に関する配信状況情報を提示する配信状況情報提示ステップと、を含み、前記配信状況情報提示ステップでは、前記配信状況情報として、対応する配信映像を視聴する視聴者の数に応じて決まる数の単位画像を含む視聴者画像を、当該配信映像を表す画像の周囲に表示することを特徴とする。
本発明の一態様に係るプログラムは、複数の配信映像を選択候補として含む配信映像選択画面をユーザーに提示する配信映像選択画面提示ステップと、前記配信映像選択画面内において、前記複数の配信映像のそれぞれに関連づけて、当該配信映像の配信状況に関する配信状況情報を提示する配信状況情報提示ステップと、をコンピュータに実行させるためのプログラムであって、前記配信状況情報提示ステップでは、前記配信状況情報として、対応する配信映像を視聴する視聴者の数に応じて決まる数の単位画像を含む視聴者画像を、当該配信映像を表す画像の周囲に表示するプログラムである。このプログラムは、コンピュータ読み取り可能で非一時的な情報記憶媒体に格納されて提供されてよい。
本発明の実施の形態に係る情報処理装置であるクライアント装置を含む情報処理システムの構成ブロック図である。 クライアント装置の機能ブロック図である。 配信映像選択画面の一例を示す図である。 配信映像のプレビュー映像が表示された画面の一例を示す図である。 配信映像のプレビュー映像が表示された状態においてコメントが投稿された際の表示例を示す図である。
以下、本発明の実施の形態について、図面に基づき詳細に説明する。
図１は、本発明の一実施形態に係る情報処理装置であるクライアント装置１０を含む情報処理システム１の全体概要を示す構成ブロック図である。同図に示されるように、情報処理システム１は、複数のクライアント装置１０と、サーバ装置２０と、を含んで構成されている。
各クライアント装置１０は、例えば家庭用ゲーム機やパーソナルコンピューター、スマートホン等の情報処理装置であって、他者に映像を配信したり、他者が配信する映像を視聴したりするために用いられる。なお、以下では説明の便宜のため、複数のクライアント装置１０のそれぞれを使用するユーザーのうち、他者に映像の配信を行うユーザーを配信ユーザーと表記する。また、他者が配信する映像を視聴するユーザーを視聴ユーザーと表記する。図１に示されるように、クライアント装置１０は、制御部１１と、記憶部１２と、インタフェース部１３と、を含んで構成される。また、操作デバイス１４、及び表示装置１５と接続されている。
制御部１１は、ＣＰＵ等のプロセッサを少なくとも一つ含み、記憶部１２に記憶されているプログラムを実行して各種の情報処理を実行する。なお、本実施形態において制御部１１が実行する処理の具体例については、後述する。記憶部１２は、ＲＡＭ等のメモリデバイスを少なくとも一つ含み、制御部１１が実行するプログラム、及び当該プログラムによって処理されるデータを格納する。
インタフェース部１３は、操作デバイス１４、及び表示装置１５との間のデータ通信のためのインタフェースである。クライアント装置１０は、インタフェース部１３を介して有線又は無線のいずれかで操作デバイス１４、及び表示装置１５のそれぞれと接続される。具体的にインタフェース部１３は、クライアント装置１０が供給する映像データを表示装置１５に送信するために、ＨＤＭＩ（登録商標）（High-Definition Multimedia Interface）等のマルチメディアインタフェースを含むこととする。また、操作デバイス１４が受け付けたユーザーの操作内容を示す操作信号を受信するために、ＵＳＢ（Universal Serial Bus）等のデータ通信インタフェースを含んでいる。
さらに本実施形態において、インタフェース部１３は、インターネット等の通信ネットワーク経由で他の情報処理装置とデータを送受信するために、ＬＡＮ等の通信インタフェースを含むこととする。このインタフェース部１３を介して、クライアント装置１０は、他のクライアント装置１０、及びサーバ装置２０と通信接続される。
操作デバイス１４は、例えば家庭用ゲーム機の専用コントローラなどであって、ユーザーからの操作指示を受け付け、その内容を示す操作信号をクライアント装置１０に送信する。
表示装置１５は、クライアント装置１０から送信される映像信号に応じた映像を表示して、ユーザーに閲覧させる。表示装置１５は、家庭用テレビ受像機などの据え置き型表示装置であってよい。また、ユーザーが頭部に装着して使用するヘッドマウントディスプレイなどであってもよい。
サーバ装置２０は、各クライアント装置１０と通信接続されるサーバコンピュータである。本実施形態においてサーバ装置２０は、各クライアント装置１０による映像の配信を管理する。具体的にサーバ装置２０は、情報処理システム１が提供するサービスを利用する各ユーザーからの登録を受け付けて、その情報を管理する。そして、各クライアント装置１０のユーザーが映像を配信しようとする場合に、その配信映像を受信し、閲覧を要求するクライアント装置１０に配信する。
次に、各クライアント装置１０が実現する機能について、図２を用いて説明する。図２に示すように、クライアント装置１０は、機能的に、映像配信部５１と、配信映像選択画面提示部５２と、配信映像提示部５３と、配信状況情報提示部５４と、を含んでいる。これらの機能は、制御部１１が記憶部１２に記憶されたプログラムを実行することにより実現される。このプログラムは、インターネット等の通信ネットワークを介してクライアント装置１０に提供されてもよいし、光ディスク等のコンピュータ読み取り可能な情報記憶媒体に格納されて提供されてもよい。
映像配信部５１は、そのクライアント装置１０から他のクライアント装置１０へ向けた映像の配信を実現する。本実施形態において映像配信部５１は、ゲームのプレイ状況を示す映像を配信することとする。具体的に、クライアント装置１０がゲームプログラムを実行して配信ユーザーがゲームをプレイしている間に、映像配信部５１は、配信ユーザーの指示に応じてそのゲームの画面を表す映像を配信する。以下では、映像配信部５１が配信するゲーム画面を含んだ映像を配信映像Ｍと表記する。配信映像Ｍは、表示装置１５の表示領域に表示されて配信ユーザーに提示されるゲーム画面と同じ内容の動画像、及びスピーカーから再生されてユーザーに提示されるゲーム音声を含んだ映像であるものとする。なお、本実施形態において映像配信部５１は、配信映像Ｍを一旦サーバ装置２０に送信する。
映像配信部５１は、ゲーム画面を含む配信映像Ｍとともに、ゲームをプレイ中の配信ユーザーの様子をカメラで撮影して得られる動画像や、配信ユーザーの発話内容をマイクロホンで録音して得られる音声を含んだ映像を、併せて配信してもよい。以下では、配信ユーザーを撮影ないし録音して得られる映像を、ユーザー映像ＵＭと表記する。
配信映像選択画面提示部５２は、そのクライアント装置１０のユーザーが視聴ユーザーとして他者が配信する映像を視聴しようとする場合に、配信映像選択画面ＭＳを描画し、表示装置１５の表示領域に表示する。配信映像選択画面ＭＳは、その画面が表示されるタイミングで配信中の複数の配信映像Ｍを視聴ユーザーに選択させるための画面であって、各配信映像Ｍを表すサムネイル画像ＴＩを含んでいる。サムネイル画像ＴＩは、配信映像Ｍのスクリーンショットなどの静止画像であってよい。さらにこのサムネイル画像ＴＩは、所定時間おきに別のスクリーンショットなどに更新されてもよい。
また、配信映像選択画面提示部５２は、各サムネイル画像ＴＩに、その配信を行っているユーザーを表すユーザー画像ＵＩを対応付けて表示する。ユーザー画像ＵＩは、予め各ユーザーがサーバ装置２０に対して登録したアバター画像や写真画像などであってよい。
さらに配信映像選択画面提示部５２は、視聴ユーザーがいずれかの配信映像Ｍを選択状態にした場合に、その配信映像Ｍのサムネイル画像ＴＩに代えて、プレビュー映像ＰＭを表示する。プレビュー映像ＰＭは、実際に配信中の配信映像Ｍを縮小表示するものであってよい。視聴ユーザーは、配信映像選択画面ＭＳが提示された状態において、プレビュー映像ＰＭや後述する配信状況情報を確認しながら、自身が視聴したい配信映像Ｍを選択し、視聴開始を指示する操作を行う。この操作に応じて、後述する配信映像提示部５３が選択された配信映像Ｍの表示を開始する。
配信映像選択画面提示部５２は、選択候補となる配信映像Ｍ、及びその配信を行っているユーザーの情報を、サーバ装置２０から取得する。具体的に、配信映像選択画面ＭＳの表示が視聴ユーザーによって指示された場合、配信映像選択画面提示部５２は、サーバ装置２０に対して現在配信中の配信映像Ｍについての問い合わせを行う。サーバ装置２０はこの問い合わせに応じて、現配信中の配信映像Ｍについて、配信を行っている配信ユーザーのユーザー名やユーザー画像ＵＩ、配信映像Ｍに含まれるゲームの種類、配信映像Ｍのサムネイル画像ＴＩなどの情報を、問い合わせを行ったクライアント装置１０に送信する。配信映像選択画面提示部５２は、このサーバ装置２０から受信した情報を用いて、現在配信中の配信映像Ｍを視聴ユーザーに選択させるための配信映像選択画面ＭＳを描画する。
配信映像提示部５３は、配信映像選択画面ＭＳが提示された状態において視聴ユーザーがいずれかの配信映像Ｍを選択し、その視聴を開始する指示を行った場合に、当該配信映像Ｍの再生を開始する。具体的に配信映像提示部５３は、サーバ装置２０に対して選択された配信映像Ｍの配信要求を送信する。サーバ装置２０は、この配信要求に応じて、要求された配信映像Ｍを要求元のクライアント装置１０に対して配信する。配信映像提示部５３は、サーバ装置２０から配信される配信映像Ｍを受信して、表示装置１５の表示領域に表示させる。また、配信映像提示部５３は、配信映像Ｍとともに配信されているユーザー映像ＵＭを、配信映像Ｍと並べて表示してもよい。
さらに、配信映像提示部５３は、配信映像Ｍの提示中、その配信映像Ｍに対するコメントの投稿を受け付ける。配信映像提示部５３は、投稿されたコメントをサーバ装置２０に送信する。また、配信映像提示部５３は、その配信映像Ｍに対して投稿された他の視聴ユーザーからのコメントをサーバ装置２０から受信し、随時表示装置１５の表示領域に表示する。これにより、視聴ユーザーは、配信映像Ｍを視聴しながら、随時投稿される他の視聴ユーザーのコメントをリアルタイムで閲覧したり、自身も配信ユーザーや他の視聴ユーザー宛てにコメントを投稿したりすることができる。
配信状況情報提示部５４は、配信映像選択画面提示部５２が配信映像選択画面ＭＳを提示する際に、各配信映像Ｍを表す画像（サムネイル画像ＴＩ又はプレビュー映像ＰＭ）と関連づけて、その配信映像Ｍの配信状況を示す配信状況情報を提示する。より具体的に、配信状況情報提示部５４は、配信映像選択画面ＭＳで提示される各配信映像Ｍについて、配信状況情報として、配信映像Ｍの視聴者数を示す情報をサーバ装置２０から取得する。視聴者数は、その時点で現に配信映像Ｍを視聴している視聴ユーザーの総数であってもよいし、配信映像Ｍの配信が開始されてから現時点までの累計視聴ユーザー数であってもよい。
視聴者数を示す情報を取得した配信状況情報提示部５４は、各配信映像Ｍの視聴者数を表す画像（以下、視聴者画像ＶＩという）を、対応する配信映像Ｍのサムネイル画像ＴＩと関連づけて表示する。この視聴者画像ＶＩは、視聴者を表す複数の単位画像を含み、この単位画像の数で視聴者数を表現する画像であるものとする。配信状況情報提示部５４は、サーバ装置２０から取得した実際の視聴者数に応じて表示する単位画像の数を決定し、決定された数の単位画像を含む視聴者画像ＶＩをサムネイル画像ＴＩの周囲に表示する。具体的に視聴者画像ＶＩは、配信映像Ｍの視聴者数が多ければ多いほど、多数の単位画像を含むものとする。複数の単位画像は、サムネイル画像ＴＩの外周に沿ってその周囲に配置される。視聴者画像ＶＩをサムネイル画像ＴＩの外側に配置することで、視聴者画像ＶＩがサムネイル画像ＴＩを隠蔽しないようにすることができる。
図３は、このような複数の単位画像を含む視聴者画像ＶＩがサムネイル画像ＴＩの上辺に知って配置された配信映像選択画面ＭＳの一例を示している。図３の例では、各単位画像は円形の形状を有するドット画像であって、各ドット画像の位置、及び大きさはランダムに決定されている。各ドット画像の位置をランダムに決定することで、視聴者が点在している様子を表現できる。また、ドット画像の大きさをランダムに決定することで、奥行き方向にも様々な位置に視聴者が点在しているかのように演出することができる。さらに配信状況情報提示部５４は、このドット画像の位置、及び大きさが、時間とともにランダムに変化する様子をアニメーションとして表示してもよい。このように位置や大きさをランダムに変化させることにより、単なるドット画像が群衆であるかのように演出することができる。図３の例では、視聴者画像ＶＩのほかに、視聴者数そのものもサムネイル画像ＴＩの左上に表示されている。しかしながら視聴ユーザーは、視聴者画像ＶＩによって、数字を読み取らずとも直感的に各配信映像Ｍの視聴者数が多いか少ないかを把握できる。
なお、各配信映像Ｍに対して一度に表示する単位画像の数には、上限を設けてもよい。この場合、所定数を超える視聴者が視聴中の配信映像Ｍについては、予め定められた数（最大数）の単位画像を視聴者画像ＶＩとして表示し、それ以上視聴者数が増えても単位画像の数を変化させないこととする。あるいは、配信映像選択画面ＭＳで提示される配信映像Ｍのうち視聴者数が最大のものを単位画像の最大数に対応させることとして、その他の配信映像Ｍについて表示される単位画像の数は、最大の視聴者数に対する単位画像の最大数の比と同じ比になるように決定してもよい。また、多数の視聴者数が配信映像Ｍを視聴している場合、単位画像の数を増やすだけでなく、単位画像の大きさの幅（最大値と最小値との差異）を大きくすることによって、奥行き方向に多数の人がいるかのように演出してもよい。
さらに配信状況情報提示部５４は、各配信映像Ｍの配信状況を示す情報として、当該配信映像Ｍに対してコメントが投稿されたことを示す画像（以下、コメント画像ＣＩという）を表示する。このコメント画像ＣＩは、その配信映像Ｍに対してコメントが投稿されたタイミングに応じたタイミングでポップアップ表示され、所定時間が経過すると消去される。このコメント画像ＣＩには、コメントの内容自体は含まれなくともよい。このようなコメント画像ＣＩを表示することで、視聴ユーザーは頻繁にコメントが投稿されている配信映像Ｍを容易に把握することができる。また、図３の例ではコメント画像ＣＩは吹き出しの形状をしており、視聴者画像ＶＩのさらに上方（視聴者画像ＶＩから見てサムネイル画像ＴＩ側と逆側）に表示されている。このようにコメント画像ＣＩを視聴者画像ＶＩに隣接する位置に表示することで、視聴者がコメントを発言している様子を表すことができる。また、コメント画像ＣＩをサムネイル画像ＴＩ側と逆側に表示することで、コメント画像ＣＩによってサムネイル画像ＴＩが隠蔽されないようにすることができる。
また、図３の例では、配信ユーザーの属性を示す情報が、ユーザー画像ＵＩとともに表示されている。具体的に、図３の例においてユーザー画像ＵＩは、サムネイル画像ＴＩの上辺中央近傍に、一部サムネイル画像ＴＩと重なるように配置されている。そして、一部のユーザー画像ＵＩの上部には、王冠を模した画像が重ねて配置され、その内部に数字が表示されている。この画像は、過去のゲーム大会におけるランキングや視聴者数ランキングなどの所定のランキングにおける順位が高い配信ユーザーと、その順位を示している。また、一部のユーザー画像ＵＩの下部には、その配信ユーザーの属性や獲得した実績などを示すバッジを模した画像が１又は複数個配置されている。このようなランキングや属性、実績などに関する情報は、いずれもサーバ装置２０によって管理され、各クライアント装置１０に提供されてよい。
さらに、配信状況情報提示部５４は、プレビュー映像ＰＭが表示された状態では、そのプレビュー映像ＰＭに対応する配信映像Ｍの配信状況について、より詳細な情報を表示することとする。図４は、このようなプレビュー映像ＰＭが表示された状態の配信映像選択画面ＭＳの一例を示している。
図４に示されるように、プレビュー映像ＰＭが表示された状態では、視聴者画像ＶＩに含まれる単位画像が、ドット画像から実際にその配信映像Ｍを視聴中の視聴ユーザーのユーザー画像ＵＩに変更される。このユーザー画像ＵＩは、配信ユーザーのユーザー画像ＵＩと同様に、各視聴ユーザーによって予めサーバ装置２０に登録されたアバター画像などであってよい。ドット画像の場合と同様に、このユーザー画像ＵＩによって構成される視聴者画像ＶＩも、視聴者数が多いほど含まれるユーザー画像ＵＩの数が多くなる。これにより、視聴ユーザーは視聴者数が多い配信映像Ｍを直感的に把握できる。
なお、プレビュー映像ＰＭに対する相対的な視聴者画像ＶＩの表示位置は、プレビュー映像ＰＭ表示前におけるサムネイル画像ＴＩに対する相対的な視聴者画像ＶＩの表示位置と同じ位置にすることが望ましい。これにより視聴ユーザーは、プレビュー映像ＰＭの表示前後を見比べることで、視聴者画像ＶＩに含まれるドット画像とユーザー画像ＵＩがともに視聴者を表現していることを容易に理解することができる。具体的に図４の例では、図３でサムネイル画像ＴＩの上辺に沿って視聴者画像ＶＩが配置されていたのと同様に、プレビュー映像ＰＭの上辺に沿ってプレビュー映像ＰＭ自体には重ならないように視聴者画像ＶＩが配置されている。
詳細表示が行われる場合に視聴者画像ＶＩに含まれるユーザー画像ＵＩは、実際に対応する配信映像Ｍを視聴している視聴ユーザーのうち、所与の基準に従って選択された視聴ユーザーのユーザー画像ＵＩであってよい。この場合に表示対象となるユーザー画像ＵＩを選択するための所与の基準としては、例えばコメントの投稿数が多い視聴ユーザーを選択する、情報処理システム１が提供するサービスの利用量やサービスに対する支払金額の多いユーザーを選択する、などの基準が挙げられる。また、各ユーザーによるゲームのプレイ状況（ゲームで所定条件を満たした際に獲得可能なトロフィーの獲得数など）に関する基準を使用してもよい。いずれの場合にも、サーバ装置２０は、このような基準に従ってユーザー画像ＵＩを選択するために必要な情報を管理し、各クライアント装置１０からの要求を受け付けた場合には表示対象とする視聴ユーザーをこのような基準に従って選択し、選択された視聴ユーザーのユーザー画像ＵＩを要求元のクライアント装置１０に対して送信する。
また、配信状況情報提示部５４は、プレビュー映像ＰＭが表示される場合、配信ユーザーのユーザー画像ＵＩに代えて、ユーザー映像ＵＭの一部分を再生表示してもよい。具体的に図４では、図３において配信ユーザーのユーザー画像ＵＩが表示されていた領域（ここではユーザー表示領域という）内に、同じ配信ユーザーが配信中のユーザー映像ＵＭが動画像として再生表示される。このとき、ユーザー表示領域内に表示されるのは、ユーザー映像ＵＭの全体ではなく、一部であるものとする。ユーザー表示領域内に表示される部分は、配信ユーザーの顔が映っている部分であってよい。具体的に、配信状況情報提示部５４は、プレビュー映像ＰＭを表示する際にサーバ装置２０からユーザー映像ＵＭの配信を併せて受け付けて、その映像内に含まれる顔領域を認識する。そして、認識された顔領域に外接する所定形状（例えば円形）の領域をクリッピングして、ユーザー表示領域内に表示する。これにより視聴ユーザーは、配信ユーザーが配信している様子を確認しながら、視聴する配信映像Ｍを選択できる。さらに、ユーザー映像ＵＭをそれまでユーザー画像ＵＩが表示されていたユーザー表示領域内にユーザー画像ＵＩの代わりに表示することで、ユーザー表示領域に表示されているのが配信ユーザーであることを視聴ユーザーは容易に把握することができる。また、ユーザー映像ＵＭを表示するための領域を別途確保する必要がないので、プレビュー映像ＰＭの表示を妨げにくい態様でユーザー映像ＵＭを表示することができる。
さらに、配信状況情報提示部５４は、プレビュー映像ＰＭが表示された状態において当該プレビュー映像ＰＭに対応する配信映像Ｍに対してコメントが投稿された場合、そのコメントについて詳細な情報を表示することとする。具体的に配信状況情報提示部５４は、吹き出しを模したコメント画像ＣＩに代えて、そのコメントの内容（メッセージ）そのものをプレビュー映像ＰＭの外側に表示する。この場合にも、コメント画像ＣＩと同様、コメントの内容は視聴者画像ＶＩから見てプレビュー映像ＰＭと反対側に表示されてよい。さらに、配信状況について詳細な情報を表示する場合、コメントの内容とともにそのコメントを投稿したユーザーを示す情報を視聴ユーザーに提示してもよい。
図５は、図４に例示したようなプレビュー映像ＰＭが表示されている状態において、対応する配信映像Ｍに対してコメントが投稿された場合の表示例を示している。この図の例では、コメントの内容「Ｇｒｅａｔ！」が視聴者画像ＶＩの上方に表示されるとともに、そのコメントの下方において視聴者画像ＶＩに含まれるユーザー画像ＵＩのうち、実際にそのコメントを投稿したユーザーのユーザー画像ＵＩｘがそれまで表示されていた位置より上方にシフトする様子がアニメーション表示される。これにより、そのユーザー画像ＵＩｘが表すユーザーがコメントの内容を投稿した様子を表現でき、視聴ユーザーは誰がそのコメントを投稿したのかを把握できる。なお、それまでユーザー画像ＵＩが表示されていなかったユーザーがコメントを投稿した場合、そのコメントを投稿したユーザーのユーザー画像ＵＩを新たに表示するとともに、投稿されたコメントの内容を表示してもよい。
以上説明したように、本実施形態に係るクライアント装置１０によれば、これから視聴する配信映像Ｍを視聴ユーザーに選択させるための配信映像選択画面ＭＳを提示する場合に、選択候補となる配信映像Ｍそれぞれの配信状況を視聴ユーザーにとって分かり易い態様で提示することができる。
なお、本発明の実施の形態は以上説明したものに限られない。例えば以上の説明における配信映像選択画面ＭＳのレイアウトや表示内容は、いずれも例示に過ぎない。また、配信状況情報提示部５４が提示する配信状況情報の内容や配置も、以上説明したものに限られない。例えば視聴者画像ＶＩに含まれる単位画像は、ドット画像に限らず、例えば人型の画像など、様々な形状であってよい。また、単位画像としてアバター画像を表示する場合に、このアバター画像は実際にその配信映像Ｍを視聴中のユーザーに関連づけられたユーザー画像ＵＩではなく、予め用意された候補画像から選択されたものであってもよい。また、視聴者画像ＶＩの配置位置はサムネイル画像ＴＩやプレビュー映像ＰＭの上辺に限らず、その他の辺に沿って配置されてもよい。また、以上の説明においては、プレビュー映像ＰＭとともに配信状況情報を表示するまでは、配信映像選択画面ＭＳには各配信映像Ｍに対応する静止画のサムネイル画像ＴＩを表示することとしたが、このサムネイル画像ＴＩに代えてプレビュー映像ＰＭを最初から表示してもよい。
また、以上の説明においてサーバ装置２０が実行することとした処理の少なくとも一部は、クライアント装置１０が実行してもよい。また、以上の説明において単体のサーバ装置２０が実行することとした処理の内容は、複数のサーバ装置によって実現されてもよい。例えば以上の説明では配信ユーザーや視聴ユーザーの管理と配信映像Ｍの配信の双方をサーバ装置２０が実行することとしたが、配信映像Ｍの配信はサーバ装置２０とは別の配信用サーバによって実現されてもよい。この場合、配信を行うクライアント装置１０は、配信の開始時や終了時などのタイミングで、配信の状況をサーバ装置２０に通知することとし、サーバ装置２０は通知された情報に基づいて各クライアント装置１０による配信状況を管理することとする。また、各クライアント装置１０は、サーバ装置２０や他の配信用サーバを介さずに、他のクライアント装置１０に対して直接配信映像Ｍを配信してもよい。
１ 情報処理システム、１０ クライアント装置、１１ 制御部、１２ 記憶部、１３ インタフェース部、１４ 操作デバイス、１５ 表示装置、２０ サーバ装置、５１ 映像配信部、５２ 配信映像選択画面提示部、５３ 配信映像提示部、５４ 配信状況情報提示部。

Claims (7)

  1. 複数の配信映像を選択候補として含む配信映像選択画面をユーザーに提示する配信映像選択画面提示部と、
    前記配信映像選択画面内において、前記複数の配信映像のそれぞれに関連づけて、当該配信映像の配信状況に関する配信状況情報を提示する配信状況情報提示部と、
    を含み、
    前記配信状況情報提示部は、前記配信状況情報として、対応する配信映像を視聴する視聴者の数に応じて決まる数の単位画像を含む視聴者画像を、当該配信映像を表す画像の周囲に表示する
    ことを特徴とする情報処理装置。
  2. 請求項１に記載の情報処理装置において、
    前記配信状況情報提示部は、前記単位画像の大きさをランダムに変化させる
    ことを特徴とする情報処理装置。
  3. 請求項１又は２に記載の情報処理装置において、
    前記配信状況情報提示部は、前記複数の配信映像の少なくとも一つの配信状況に関する配信状況情報に含まれる前記単位画像として、当該配信映像を視聴するいずれかの視聴者に対応づけられたユーザー画像を複数含む視聴者画像を表示する
    ことを特徴とする情報処理装置。
  4. 請求項１から３のいずれか一項に記載の情報処理装置において、
    前記配信状況情報提示部は、前記配信状況情報として、対応する配信映像に対してコメントが投稿されたことを示すコメント画像を、当該コメントが投稿されたタイミングに応じたタイミングで表示する
    ことを特徴とする情報処理装置。
  5. 請求項１から４のいずれか一項に記載の情報処理装置において、
    前記配信状況情報提示部は、前記複数の配信映像のそれぞれに関連づけて、当該配信映像を配信する配信ユーザーを表すユーザー画像を表示し、
    前記複数の配信映像のいずれかが選択状態になった場合、当該選択状態になった配信映像に関連づけられた前記ユーザー画像に代えて、前記配信ユーザーを撮影して得られるユーザー映像を表示する
    ことを特徴とする情報処理装置。
  6. 複数の配信映像を選択候補として含む配信映像選択画面をユーザーに提示する配信映像選択画面提示ステップと、
    前記配信映像選択画面内において、前記複数の配信映像のそれぞれに関連づけて、当該配信映像の配信状況に関する配信状況情報を提示する配信状況情報提示ステップと、
    を含み、
    前記配信状況情報提示ステップでは、前記配信状況情報として、対応する配信映像を視聴する視聴者の数に応じて決まる数の単位画像を含む視聴者画像を、当該配信映像を表す画像の周囲に表示する
    ことを特徴とする情報処理方法。
  7. 複数の配信映像を選択候補として含む配信映像選択画面をユーザーに提示する配信映像選択画面提示ステップと、
    前記配信映像選択画面内において、前記複数の配信映像のそれぞれに関連づけて、当該配信映像の配信状況に関する配信状況情報を提示する配信状況情報提示ステップと、
    をコンピュータに実行させるためのプログラムであって、
    前記配信状況情報提示ステップでは、前記配信状況情報として、対応する配信映像を視聴する視聴者の数に応じて決まる数の単位画像を含む視聴者画像を、当該配信映像を表す画像の周囲に表示する
    プログラム。
JP2020566475A 2019-01-17 2020-01-16 情報処理装置 Active JP7179089B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2019006063 2019-01-17
JP2019006063 2019-01-17
PCT/JP2020/001307 WO2020149366A1 (ja) 2019-01-17 2020-01-16 情報処理装置

Publications (2)

Publication Number Publication Date
JPWO2020149366A1 true JPWO2020149366A1 (ja) 2021-10-28
JP7179089B2 JP7179089B2 (ja) 2022-11-28

Family

ID=71613919

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020566475A Active JP7179089B2 (ja) 2019-01-17 2020-01-16 情報処理装置

Country Status (3)

Country Link
US (1) US11523171B2 (ja)
JP (1) JP7179089B2 (ja)
WO (1) WO2020149366A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117336549A (zh) 2022-01-10 2024-01-02 抖音视界有限公司 视频的处理方法、装置和非易失性计算机可读存储介质

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003250146A (ja) * 2001-12-21 2003-09-05 Nippon Telegr & Teleph Corp <Ntt> 番組選択支援情報提供サービスシステムとサーバ装置および端末装置ならびに番組選択支援情報提供方法とプログラムおよび記録媒体
WO2008090859A1 (ja) * 2007-01-22 2008-07-31 Sony Corporation 情報処理装置および方法、並びにプログラム
JP2009124606A (ja) * 2007-11-16 2009-06-04 Sony Corp 情報処理装置、情報処理方法、プログラム及び情報共有システム
JP2010066790A (ja) * 2008-09-08 2010-03-25 Taito Corp コンテンツ編集サーバ及びコンテンツ編集プログラム
JP2011044936A (ja) * 2009-08-21 2011-03-03 Olympus Imaging Corp カメラ、カメラの表示制御方法、表示装置、及び表示方法
WO2012096013A1 (ja) * 2011-01-13 2012-07-19 楽天株式会社 オブジェクト表示サーバ、オブジェクト表示方法、オブジェクト表示プログラム、及びそのプログラムを記憶するコンピュータ読取可能な記録媒体
WO2013099392A1 (ja) * 2011-12-29 2013-07-04 株式会社ソニー・コンピュータエンタテインメント 映像再生システム
JP2014226359A (ja) * 2013-05-23 2014-12-08 任天堂株式会社 情報処理システム、情報処理装置、プログラムおよび表示方法
JP2015186250A (ja) * 2014-03-26 2015-10-22 株式会社ドワンゴ 端末装置、動画配信装置、プログラム
JP2016225967A (ja) * 2016-02-02 2016-12-28 株式会社コロプラ ヘッドマウント・ディスプレイを用いたコンテンツ視聴システム
JP2017121021A (ja) * 2015-12-28 2017-07-06 株式会社 ディー・エヌ・エー デジタルコンテンツを配信するシステム、方法、及びプログラム

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7552460B2 (en) * 2000-05-08 2009-06-23 Microsoft Corporation Modifying an electronic program guide based on viewer statistics
JP2005354541A (ja) * 2004-06-11 2005-12-22 Fuji Xerox Co Ltd 表示装置、システムおよび表示方法
WO2008121967A2 (en) * 2007-03-30 2008-10-09 Google Inc. Interactive media display across devices
US9246613B2 (en) * 2008-05-20 2016-01-26 Verizon Patent And Licensing Inc. Method and apparatus for providing online social networking for television viewing
US9055311B1 (en) * 2012-01-03 2015-06-09 Google Inc. Providing a program listing
US20150074718A1 (en) * 2013-09-11 2015-03-12 Sony Corporation Electronic programming guide with real-time audio video content information updates
US9942519B1 (en) * 2017-02-21 2018-04-10 Cisco Technology, Inc. Technologies for following participants in a video conference
DK201870364A1 (en) * 2018-05-07 2019-12-03 Apple Inc. MULTI-PARTICIPANT LIVE COMMUNICATION USER INTERFACE
US10897637B1 (en) * 2018-09-20 2021-01-19 Amazon Technologies, Inc. Synchronize and present multiple live content streams

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003250146A (ja) * 2001-12-21 2003-09-05 Nippon Telegr & Teleph Corp <Ntt> 番組選択支援情報提供サービスシステムとサーバ装置および端末装置ならびに番組選択支援情報提供方法とプログラムおよび記録媒体
WO2008090859A1 (ja) * 2007-01-22 2008-07-31 Sony Corporation 情報処理装置および方法、並びにプログラム
JP2009124606A (ja) * 2007-11-16 2009-06-04 Sony Corp 情報処理装置、情報処理方法、プログラム及び情報共有システム
JP2010066790A (ja) * 2008-09-08 2010-03-25 Taito Corp コンテンツ編集サーバ及びコンテンツ編集プログラム
JP2011044936A (ja) * 2009-08-21 2011-03-03 Olympus Imaging Corp カメラ、カメラの表示制御方法、表示装置、及び表示方法
WO2012096013A1 (ja) * 2011-01-13 2012-07-19 楽天株式会社 オブジェクト表示サーバ、オブジェクト表示方法、オブジェクト表示プログラム、及びそのプログラムを記憶するコンピュータ読取可能な記録媒体
WO2013099392A1 (ja) * 2011-12-29 2013-07-04 株式会社ソニー・コンピュータエンタテインメント 映像再生システム
JP2014226359A (ja) * 2013-05-23 2014-12-08 任天堂株式会社 情報処理システム、情報処理装置、プログラムおよび表示方法
JP2015186250A (ja) * 2014-03-26 2015-10-22 株式会社ドワンゴ 端末装置、動画配信装置、プログラム
JP2017121021A (ja) * 2015-12-28 2017-07-06 株式会社 ディー・エヌ・エー デジタルコンテンツを配信するシステム、方法、及びプログラム
JP2016225967A (ja) * 2016-02-02 2016-12-28 株式会社コロプラ ヘッドマウント・ディスプレイを用いたコンテンツ視聴システム

Also Published As

Publication number Publication date
WO2020149366A1 (ja) 2020-07-23
JP7179089B2 (ja) 2022-11-28
US20220078510A1 (en) 2022-03-10
US11523171B2 (en) 2022-12-06

Similar Documents

Publication Publication Date Title
US11436803B2 (en) Insertion of VR spectator in live video of a live event
US11794102B2 (en) Cloud-based game streaming
JP6858737B2 (ja) 視聴プログラム、配信プログラム、視聴プログラムを実行する方法、配信プログラムを実行する方法、情報処理装置、および情報処理システム
TWI573619B (zh) 基於所記錄之遊戲玩法自動產生為雲遊戲建議的小遊戲
JP6321150B2 (ja) 三次元ゲームプレイの共有
CN103885768B (zh) 第二用户对第一用户的游戏玩法的远程控制
WO2019234879A1 (ja) 情報処理システム、情報処理方法およびコンピュータプログラム
JP7339318B2 (ja) ゲーム内位置ベースのゲームプレイコンパニオンアプリケーション
JP6219548B1 (ja) 仮想処理サーバ、仮想処理サーバの制御方法、コンテンツ配信システム、および端末装置のアプリケーションプログラム
US20140018157A1 (en) Reward-based features for videogame observers
KR102307714B1 (ko) 서버 장치, 및 그것에 사용되는 컴퓨터 프로그램
US20220277493A1 (en) Content generation system and method
JP6941245B1 (ja) 情報処理システム、情報処理方法およびコンピュータプログラム
KR102280496B1 (ko) 서버 장치, 및 그것에 사용되는 컴퓨터 프로그램
JP7179089B2 (ja) 情報処理装置
KR20220065388A (ko) 전자 스포츠 경기에 관한 증강 현실 인터페이스 제공 장치 및 방법
KR102293619B1 (ko) 서버 장치, 및 그것에 사용되는 컴퓨터 프로그램
JP7071745B2 (ja) ゲームシステム、それに用いるコンピュータプログラム、及び制御方法
JP7125134B2 (ja) ユーザ端末に用いられるコンピュータプログラム、それが適用されたユーザ端末に用いるイベントシステム、それに用いるコンピュータプログラム、及び制御方法
JP2022164676A (ja) ユーザ端末に用いられるコンピュータプログラム、それが適用されたユーザ端末に用いるイベントシステム、それに用いるコンピュータプログラム、及び制御方法
JP2022164675A (ja) ユーザ端末に用いられるコンピュータプログラム、それが適用されたユーザ端末に用いるイベントシステム、それに用いるコンピュータプログラム、及び制御方法
JP2018173931A (ja) 仮想処理サーバ、仮想処理サーバの制御方法、コンテンツ配信システム、および端末装置のアプリケーションプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210209

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220419

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220617

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20221018

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20221115

R150 Certificate of patent or registration of utility model

Ref document number: 7179089

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150