JPWO2014178219A1 - 情報処理装置および情報処理方法 - Google Patents

情報処理装置および情報処理方法 Download PDF

Info

Publication number
JPWO2014178219A1
JPWO2014178219A1 JP2015514766A JP2015514766A JPWO2014178219A1 JP WO2014178219 A1 JPWO2014178219 A1 JP WO2014178219A1 JP 2015514766 A JP2015514766 A JP 2015514766A JP 2015514766 A JP2015514766 A JP 2015514766A JP WO2014178219 A1 JPWO2014178219 A1 JP WO2014178219A1
Authority
JP
Japan
Prior art keywords
information
tag
content
tag information
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2015514766A
Other languages
English (en)
Other versions
JP6384474B2 (ja
Inventor
周藤 泰広
泰広 周藤
北野 宏明
宏明 北野
翔太朗 寳理
翔太朗 寳理
大二 伊藤
大二 伊藤
哲 夏目
哲 夏目
大島 浩一
浩一 大島
弘也 水村
弘也 水村
良浩 高木
良浩 高木
康夫 佐久間
康夫 佐久間
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of JPWO2014178219A1 publication Critical patent/JPWO2014178219A1/ja
Application granted granted Critical
Publication of JP6384474B2 publication Critical patent/JP6384474B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213Monitoring of end-user related data
    • H04N21/44222Analytics of user selections, e.g. selection of programs or purchase activity
    • H04N21/44224Monitoring of user activity on external systems, e.g. Internet browsing
    • H04N21/44226Monitoring of user activity on external systems, e.g. Internet browsing on social networks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/535Tracking the activity of the user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/01Social networking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/52User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail for supporting social networking services
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2668Creating a channel for a dedicated end-user group, e.g. insertion of targeted commercials based on end-user profiles
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/4508Management of client data or end-user data
    • H04N21/4532Management of client data or end-user data involving end-user characteristics, e.g. viewer profile, preferences
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4622Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47217End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for controlling playback functions for recorded or on-demand content, e.g. using progress bars, mode or play-point indicators or bookmarks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/475End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/478Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84Generation or processing of descriptive data, e.g. content descriptors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845Structuring of content, e.g. decomposing content into time segments
    • H04N21/8455Structuring of content, e.g. decomposing content into time segments involving pointers to the content, e.g. pointers to the I-frames of the video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/854Content authoring
    • H04N21/8547Content authoring involving timestamps for synchronizing content
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/858Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Databases & Information Systems (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Social Psychology (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Marketing (AREA)
  • Computing Systems (AREA)
  • Strategic Management (AREA)
  • Tourism & Hospitality (AREA)
  • Economics (AREA)
  • General Business, Economics & Management (AREA)
  • Primary Health Care (AREA)
  • Human Resources & Organizations (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Hardware Design (AREA)
  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

【課題】コンテンツに対するユーザのアクティビティによって発生した情報を、コンテンツに関連付けて有効に活用する。【解決手段】コンテンツ再生中のユーザによるアクティビティを検出するアクティビティ検出部と、上記アクティビティに関する情報に基づいてタグ情報を生成するタグ生成部と、上記タグ情報を上記アクティビティに対応する上記コンテンツ内の1または複数の位置に関連付けるタグ関連付け部とを備える情報処理装置が提供される。【選択図】図3

Description

本開示は、情報処理装置および情報処理方法に関する。
例えば放送されるテレビ番組のように、元来一方的なものであったコンテンツの視聴体験は、近年のコンテンツ提供手段の多様化と、ソーシャルメディアなどの情報発信手段の普及とによって、視聴者がコンテンツに対して何らかのアクティビティを実行する双方向的なものになりつつある。例えば、特許文献1には、放送中の番組の視聴者に対して外部の投稿サイトへの投稿コメントを提示することによって双方向的な視聴体験を提供する技術が記載されている。
特開2013−12955号公報
上記の例のように双方向的なコンテンツの視聴体験が実現されつつある結果、ネットワーク上でコンテンツに対するユーザのアクティビティによって膨大な情報が発生している。例えば特許文献1の例のようにユーザがコンテンツに対して入力したコメントや、ユーザがコンテンツの内容に関して実行したWeb検索の結果、ユーザがコンテンツの内容に触発されて視聴した他のコンテンツなどの情報の多くは、ネットワーク上のサーバや端末装置の中に蓄積されているが、元のコンテンツに関連付けて活用されていはいない。
そこで、本開示では、コンテンツに対するユーザのアクティビティによって発生した情報を、コンテンツに関連付けて有効に活用することを可能にする、新規かつ改良された情報処理装置および情報処理方法を提案する。
本開示によれば、コンテンツ再生中のユーザによるアクティビティを検出するアクティビティ検出部と、上記アクティビティに関する情報に基づいてタグ情報を生成するタグ生成部と、上記タグ情報を上記アクティビティに対応する上記コンテンツ内の1または複数の位置に関連付けるタグ関連付け部とを備える情報処理装置が提供される。
また、本開示によれば、コンテンツ再生中のユーザによるアクティビティを検出することと、上記アクティビティに関する情報に基づいてタグ情報を生成することと、上記タグ情報を上記アクティビティに対応する上記コンテンツ内の1または複数の位置に関連付けることとを含む情報処理方法が提供される。
以上説明したように本開示によれば、コンテンツに対するユーザのアクティビティによって発生した情報を、コンテンツに関連付けて有効に活用することができる。
本開示の第1の実施形態に係るシステムの概要について説明するための図である。 図1に示したシステムにおける情報のフローの例を示す図である。 本開示の第1の実施形態に係る各装置の概略的な機能構成を示すブロック図である。 本開示の第1の実施形態におけるホーム画面の表示例を示す図である。 本開示の第1の実施形態におけるホーム画面の表示例を示す図である。 本開示の第1の実施形態における再生画面の表示例を示す図である。 本開示の第1の実施形態における再生画面の表示例を示す図である。 本開示の第1の実施形態における再生画面と他の画面との連携の例を示す図である。 本開示の第1の実施形態における再生画面で画面内位置を指定する場合の表示例を示す図である。 本開示の第1の実施形態における再生画面でコミュニケーションサービスが提供される場合の表示例を示す図である。 本開示の第2の実施形態に係る各装置の概略的な機能構成を示すブロック図である。 本開示の第2の実施形態における再生画面の表示例を示す図である。 本開示の第2の実施形態における再生画面の表示例を示す図である。 本開示の第2の実施形態におけるタグカテゴリ情報表示の例を示す図である。 本開示の第2の実施形態におけるタグカテゴリ情報表示の表示プロセスの例を示すフローチャートである。 本開示の第3の実施形態に係る各装置の概略的な機能構成を示すブロック図である。 情報処理装置のハードウェア構成を説明するためのブロック図である。
以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書および図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
なお、説明は以下の順序で行うものとする。
1.第1の実施形態
1−1.システムの概要
1−2.機能構成
1−3.画面表示例
2.第2の実施形態
3.第3の実施形態
4.ハードウェア構成
5.補足
(1.第1の実施形態)
(1−1.システムの概要)
図1は、本開示の第1の実施形態に係るシステムの概要について説明するための図である。図1を参照すると、本実施形態に係るシステム10は、サーバ100とクライアント200とを含む。サーバ100とクライアント200とは、いずれも後述する情報処理装置のハードウェア構成によって実現され、有線または無線の各種ネットワークによって互いに接続される。なお、サーバ100は、必ずしも単一の情報処理装置によって実現されなくてもよく、ネットワークによって互いに接続された複数の情報処理装置の協働によって実現されてもよい。
まず、サーバ100は、クライアント200に対して視聴可能なコンテンツを提示する(S101)。クライアント200のユーザは、提示されたコンテンツの中から視聴したいコンテンツを選択し、サーバ100にリクエストを送信する(S103)。リクエストを受信したサーバ100は、例えば動画配信サーバなどのコンテンツプロバイダ50にリクエストを転送し(S105)、クライアント200のユーザからリクエストされたコンテンツを取得する(S107)。
サーバ100は、コンテンツプロバイダ50から取得したコンテンツをクライアント200に提供する(S109)にあたって、タグ情報を一緒に提供する(S111)。タグ情報は、例えばサーバ100が同じコンテンツを視聴した他のユーザのアクティビティに基づいて生成した情報であり、少なくともコンテンツの再生位置に関連付けられている。ここでいうユーザのアクティビティは、例えばコンテンツの再生中にコメントを投稿したり、Web検索を実行したり、写真や映像などの他のコンテンツを視聴したりすることでありうる。本実施形態では、こうしたユーザのアクティビティに基づいて生成されたタグ情報がコンテンツとともに提示される。クライアント200のユーザは、タグ情報を選択することによって、例えばコンテンツに関連する情報に容易にアクセスできたり、コンテンツに対する他のユーザの受け取り方を知ることができる。
クライアント200のユーザによっていずれかのタグ情報が選択された場合(S113)、サーバ100は、例えば選択されたタグ情報に含まれるURL(Uniform Resource Locator)を用いてWWW(World Wide Web)60にアクセスし(S115)、Webページのスナップショットを取得する(S117)。取得されたスナップショットは、クライアント200に送信される(S119)。また、タグ情報に他のユーザのコメントや他のコンテンツ(Video)が含まれる場合、同様にサーバ100はこれらの情報をクライアント200に提供する(S121)。
また、クライアント200のユーザは、コンテンツに対してコメントを入力することができる(S123)。サーバ100は、クライアント200から受信した新たなコメントに基づいて、さらにタグ情報を生成する。さらに、クライアント200のユーザによるコンテンツに対する他のアクティビティ、例えばコンテンツの内容に関して実行したWeb検索の結果や、他のコンテンツの視聴などの情報も、コメントと同様にサーバ100に送信されうる。サーバ100はこれらの情報に基づいて新たなタグ情報を生成してコンテンツに追加で関連付ける。
さらに、サーバ100は、クライアント200に対して、コンテンツ自体の提供とは別に、他のユーザのコメントやコンテンツのリコメンド、ランキングなどの情報を提供してもよい(S125〜S129)。こうした情報によって、例えばクライアント200のユーザが視聴するコンテンツを選択しやすくすることができる。
図2は、図1に示したシステムにおける情報のフローの例を示す図である。図2を参照すると、本実施形態に係るシステム10では、大きく分けて、コンテンツ選択(S201〜S213)、リコメンド(S215〜S221)、およびサブ情報(S223〜S231)のフローが発生しうる。
まず、クライアント200においてユーザがコンテンツ視聴のためのアプリケーションを起動(S201)すると、ホーム画面(S203)が表示される。ホーム画面には、キュレータリスト(S205)および/またはグループリスト(S207)が表示される。本実施形態において、キュレータは、システム10を介して提供されるコンテンツを整理する役割を担うユーザである。キュレータは、例えば多数あるコンテンツの中から自らの好みに従ってコンテンツを収集する。ユーザがキュレータリスト(S205)の中からいずれかのキュレータを選択すると、そのキュレータが収集したコンテンツのリスト(S209)が表示される。一般のユーザは、好みが近いキュレータをフォローすることによって、好みに合うコンテンツにアクセスすることが容易になる。
一方、本実施形態において、グループは、上記のキュレータとフォロワーのような従属関係ではなく、各ユーザが対等な関係で形成されるグループである。システム10では、例えばグループに属する複数のユーザが視聴したり、ポジティブに評価したりしたコンテンツが収集されうる。グループは、例えば友人同士などのユーザが意図的に設定した社会的なグループであってもよいし、コンテンツの視聴履歴や後述するタグ情報の収集などによって好みが似ていること推定されるユーザが自動的に分類されるグループであってもよい。ユーザがグループリスト(S207)の中からいずれかのグループを選択すると、そのグループに関連付けて収集されたコンテンツのリスト(S209)が表示される。ユーザは、グループリストを介して、例えば友人が視聴したコンテンツや、好みが似た他のユーザが視聴したコンテンツなどに容易にアクセスすることができる。
ユーザがコンテンツのリスト(S209)の中からいずれかのコンテンツを選択すると、そのコンテンツの再生画面(S211)が表示される。再生画面に表示されるホームボタン(S213)を選択することで、ユーザはホーム画面(S203)に戻ることができる。なお、例えば以前にアプリケーションがコンテンツの視聴途中で終了した場合や、最初に視聴するコンテンツが予め設定されている場合などには、アプリケーションの起動(S201)に続いて自動的にコンテンツの再生画面(S211)が表示されてもよい。
コンテンツの再生画面(S211)には、再生中のコンテンツに加えてリコメンドに関する情報が表示されうる。図示された例では、再生画面にソーシャルメディアからのリコメンド情報(S215)が表示される。また、再生画面には同じコンテンツを視聴した友人の情報(S217)も表示されうる。さらに、ユーザは、再生画面に表示されたボタンなどを用いて、コンテンツに対するポジティブな評価(S219“Nice!”)を入力することもできる。ポジティブな評価が入力された場合、そのコンテンツについてのリコメンド(S221)が実行されうる。リコメンドは、例えばユーザと同じグループに属する他のユーザに対して実行されてもよく、ユーザがキュレータである場合にはそのフォロワーに対して実行されてもよい。このとき、同じコンテンツを視聴した友人の情報(S217)に基づいて、既にそのコンテンツを視聴したユーザはリコメンドの対象から除外されてもよい。
また、コンテンツの再生画面(S211)には、再生中のコンテンツに加えてタグ情報(S223)が表示されうる。図示された例では、ユーザによるソーシャルメディアなどへのコメントの投稿(S225)およびWebなどの検索(S227)によってタグ情報が生成されている。このようなタグ情報の生成については、後で詳しく説明する。タグ情報や、検索によって得られたURLリスト(S229)などは、サブ情報(S231)としてコンテンツに関連付けて再生画面(S211)に表示されてもよい。
(1−2.機能構成)
図3は、本開示の第1の実施形態に係る各装置の概略的な機能構成を示すブロック図である。以下、図3を参照して、各装置の機能構成について説明する。なお、図示されている機能構成は本実施形態の説明のために簡略化されており、各装置は図示されていない機能構成をさらに含んでもよい。図示されていない機能構成は、各装置の一般的な機能構成として既に知られたものでありうるため、詳細な説明は省略する。
(サーバ)
サーバ100は、通信部110と、再生制御部120と、タグDB130と、タグ情報表示制御部140と、アクティビティ検出部150と、タグ生成部160と、タグ関連付け部170と、コミュニケーションサービス提供部180とを含む。
通信部110は、例えば通信装置によって実現され、有線または無線の各種ネットワークを介してクライアント200と通信する。また、通信部110は、ネットワークを介して上述したコンテンツプロバイダ50やWWW60などとも通信し、コンテンツデータなどを取得する。通信部110は、受信したコンテンツデータを再生制御部120に提供し、再生制御部120の制御に従ってコンテンツデータをクライアント200に送信する。また、通信部110は、タグ情報表示制御部140の制御に従って、タグ情報を表示するためのデータをクライアント200に送信する。さらに、通信部110は、クライアント200のユーザがコンテンツに対して実行した各種のアクティビティに関連してクライアント200の通信部210が送受信する情報を傍受してアクティビティ検出部150に提供する。また、通信部110は、コミュニケーションサービス提供部180によって提供されるサービスに関する情報をクライアント200との間で送受信する。
再生制御部120は、例えばCPUなどのプロセッサがメモリに格納されたプログラムに従って動作することによって実現され、通信部110が取得したコンテンツデータの再生を制御する。例えば、再生制御部120は、クライアント200のユーザによって別途の操作がされない場合には、コンテンツプロバイダ50から取得したコンテンツを最初から順次再生しうる。ここで、例えば、後述するタブ情報表示制御部140によってコンテンツについて生成されたタグ情報がコンテンツの再生画面に表示され、クライアント200のユーザが表示されたタグ情報を選択したような場合、再生制御部120はコンテンツを当該タグ情報に対応する再生位置から再生してもよい。また、後述するコミュニケーションサービス提供部180によってタグ情報に関連するコミュニケーションサービスが提供されている場合、再生制御部120は、コンテンツを当該タグ情報に対応する再生位置を含む範囲で繰り返し再生してもよい。また、再生制御部120は、コンテンツを選択するためのホーム画面を表示させてもよい。
タグDB130は、例えばストレージ装置によって実現され、コンテンツについて生成されたタグ情報を格納する。タグ情報は、例えば後述するタグ生成部160によって生成され、タグ関連付け部170によって少なくともコンテンツの再生位置に関連付けられた上で、タグDB130に格納される。また、タグ情報は、初期設定として用意されたものを含んでもよい。タグ情報は、例えばテキストを含みうる他、Webページや他のコンテンツなどへのリンクやサムネイルなどを含んでもよい。例えば、コンテンツの再生位置がタイムスタンプによって定義される場合、タグ情報は「タイムスタンプ1h23m45s678に関連付けられたタグ情報」として記録されうる。なお、タグ情報が関連付けられる再生位置は、範囲として定義されてもよい。さらに、タグ情報は、コンテンツが映像コンテンツである場合、映像コンテンツの画面内位置に関連付けられてもよい。この場合、タグ情報は例えば「(X,Y,T)=(0.123,0.456,1h23m45s678)に関連付けられたタグ情報」として記録されうる。この例において、Xは画面内の横位置、Yは画面内の縦位置、Tはタイムスタンプを表す。なお、XおよびYのような画面内位置は、例えばクライアント200ごとの再生画面のサイズの相違を考慮して、正規化した値で記録されてもよい。タグ情報が関連付けられる画面内位置も、範囲または領域として定義されうる。
タグ情報表示制御部140は、例えばCPUなどのプロセッサがメモリに格納されたプログラムに従って動作することによって実現され、タグDB130から読み出されたタグ情報を、コンテンツの再生画面に表示させる。例えば、タグ情報表示制御部140は、タグ情報を、関連付けられた再生位置ごとに配列して再生画面に表示させてもよい。このとき、タグ情報表示制御部140は、互いに近接する再生位置に関連付けられたタグ情報をグループ化して表示させてもよい。また、タグ情報が画面内位置にも関連付けられている場合、タグ情報表示制御部140は、同じまたは近接する再生位置に関連付けられているが異なる画面内位置に関連付けられたタグ情報を別々に表示させてもよい。また、タグ情報表示制御部140は、タグ情報を選択可能なアイコンとして再生画面に表示させうる。アイコンは、例えば、タグ情報に関連付けられた再生位置でのコンテンツのキャプチャ画像や、タグ情報に含まれる情報の種類を示すアイコンなどを含みうる。クライアント200のユーザがタグ情報のアイコンを選択した場合、タグ情報表示制御部140は、当該タグ情報とともにグループ化されたタグ情報を個別に表示する画面を再生画面に別途表示させてもよい。また、上記のように、このとき、再生制御部120によって、コンテンツが選択されたタグ情報の再生位置にジャンプして再生されてもよい。なお、タグ情報表示制御部140によるタグ情報の表示の具体的な例については後述する。
アクティビティ検出部150は、例えばCPUなどのプロセッサがメモリに格納されたプログラムに従って動作することによって実現され、コンテンツ再生中のユーザによるアクティビティを検出する。より具体的には、アクティビティ検出部150は、通信部110を介して、コンテンツが再生されているクライアント200との間で送受信された情報を傍受し、その情報に基づいて、クライアント200でコンテンツの再生中にユーザが実行したアクティビティを検出する。例えば、アクティビティ検出部150によって検出されるアクティビティは、ユーザによるコメントの投稿を含みうる。コメントは、例えばサーバ100によって提供されるサービス上で投稿されてもよいし、他のソーシャルメディアに投稿されてもよい。また、アクティビティ検出部150によって検出されるアクティビティは、ユーザによる再生中のコンテンツ以外の情報へのアクセスを含んでもよい。ここでアクセスされる情報は、例えばWebページであってもよく、また別のコンテンツであってもよい。これらの情報は、例えばユーザがキーワード検索を実行することによってアクセスされうる。さらに、アクティビティ検出部150は、後述するコミュニケーションサービス提供部180によって提供されるコミュニケーションサービスにおけるユーザの発言をアクティビティとして検出してもよい。
タグ生成部160は、例えばCPUなどのプロセッサがメモリに格納されたプログラムに従って動作することによって実現され、アクティビティ検出部150によって検出されたアクティビティに関する情報に基づいて新たなタグ情報を生成する。上記の通り、生成されるタグ情報は、例えばテキストを含みうる他、Webページや他のコンテンツなどへのリンクやサムネイルなどを含みうる。タグ生成部160は、かかるタグ情報を、検出されたユーザのアクティビティに関する各種のログを解析することによって生成しうる。例えば、クライアント200でコンテンツの再生中にユーザがコメントを投稿したり、コミュニケーションサービスにおいて発言したりした場合、アクティビティ検出部150は投稿されたコメントまたは発言の情報を取得し、タグ生成部160はコメントをテキストとして含むタグ情報を生成しうる。また、例えば、クライアント200でコンテンツの再生中にユーザがWeb検索を実行した場合、アクティビティ検出部150は検索クエリや検索結果の情報を取得し、タグ生成部160は検索クエリに含まれるキーワードのテキストと検索結果のWebページのリンクやスナップショットとを含むタグ情報を生成しうる。さらに、例えば、クライアント200でコンテンツの再生中にユーザが他のコンテンツを再生した場合、アクティビティ検出部150は再生された他のコンテンツのアドレスまたは他のコンテンツ自体の情報を取得し、タグ生成部160は他のコンテンツへのリンクまたは他のコンテンツ自体を含むタグ情報を生成しうる。なお、リンクや他のコンテンツは、例えばコメント投稿時のユーザ操作によって明示的に添付されてもよい。
タグ関連付け部170は、例えばCPUなどのプロセッサがメモリに格納されたプログラムに従って動作することによって実現され、タグ生成部160によって生成されたタグ情報を、タグ情報の元になったアクティビティに対応するコンテンツの再生位置に関連付ける。タグ関連付け部170によってコンテンツに関連付けられたタグ情報は、例えばタグDB130に格納されてもよく、またタグ情報表示制御部140に提供されてクライアント200でリアルタイムに表示されてもよい。例えば、タグ情報が関連付けられる再生位置は、コメントが投稿された時や、Web検索が実行された時、他のコンテンツの再生が開始された時のコンテンツ(元々再生されているコンテンツ)の再生位置でありうる。あるいは、ユーザがコメントの入力を開始した時や、Web検索のためのキーワードの入力を開始した時、他のコンテンツの再生のためのアプリケーションを起動した時などが特定可能であれば、それらに対応する再生位置にタグ情報が関連付けられてもよい。なお、タグ関連付け部170は、複数のタグ情報について特定された再生位置が互いに近接している場合、これらのタグ情報を共通する再生位置に関連付けてもよい。また、上述のように本実施形態においてタグ情報は映像コンテンツの画面内位置にも関連付けられうる。タグ関連付け部170は、例えばユーザがアクティビティにおいて明示的に指定した画面内位置にタグ情報を関連付ける。ここで、画面内位置は範囲または領域として指定されてもよい。あるいは、例えばユーザがクライアント200でHMD(Head Mounted Display)などを用いてコンテンツを視聴しており、視線検出などを利用してコンテンツの再生画面におけるユーザの注視領域が検出可能である場合、タグ関連付け部170は、検出された注視領域に基づいてタグ情報を関連付ける画面内位置を決定してもよい。
コミュニケーションサービス提供部180は、例えばCPUなどのプロセッサがメモリに格納されたプログラムに従って動作することによって実現され、複数のクライアント200のユーザにコミュニケーションサービスを提供する。提供されるコミュニケーションサービスは、例えばユーザ間で発言を交換するチャットのようなものでありうる。例えば、コミュニケーションサービス提供部180は、同じコンテンツの近接する再生位置(および/または近接する画面内位置)に関連付けられるタグ情報の元になるアクティビティを実行した複数のユーザにコミュニケーションサービスを提供しうる。より具体的には、コミュニケーションサービス提供部180は、例えばこれらのユーザが参加するチャットルームを開設する。チャットルームに入室したユーザは、例えば後述する再生画面内の別画面において発言を交換することが可能である。発言には、例えばWebページや他のコンテンツなどへのリンクが付加されていてもよい。こうしたチャットルームでのユーザの発言や、発言に付加されたリンクなどの情報も、アクティビティ検出部150によってコンテンツ再生中のアクティビティとして検出されうる。また、ユーザがチャットルームを利用している間、再生制御部120が対象の再生位置を含む範囲でコンテンツを繰り返し再生してもよい。
(クライアント)
クライアント200は、通信部210と、表示制御部220と、表示部230と、音声制御部240と、音声出力部250と、操作部260とを含む。クライアント200は、例えば、各種のPC(Personal Computer)、タブレット端末、スマートフォン、ゲーム機、メディアプレーヤなど、ユーザがコンテンツを視聴することが可能な各種の端末装置でありうる。
通信部210は、例えば通信装置によって実現され、有線または無線の各種ネットワークを介してサーバ100と通信する。通信部210は、コンテンツデータをサーバ100から受信して、表示制御部220および音声制御部240に提供する。また、通信部210は、コンテンツに関するタグ情報を表示するためのデータをサーバ100から受信して、表示制御部220に提供する。さらに、通信部210は、コンテンツの再生中にユーザが操作部260に与えた操作入力に従ってデータを送受信する。例えば、通信部210は、操作部260に与えられた検索の操作入力(検索キーワードの入力および検索実行の指示)に従って検索クエリを送信し、検索結果のWebページや他のコンテンツなどの情報を受信する。また、例えば、通信部210は、操作部260に与えられたコメント投稿の操作入力(コメントのテキスト入力および投稿実行の指示)に従ってサーバ100またはソーシャルメディアのサーバなどにコメントを送信する。このようにしてコンテンツの再生中に通信部210が送受信するデータは、サーバ100の通信部110を介して他のサーバなどとやりとりされる。上述の通り、サーバ100の通信部110は、このときに送受信されるデータを傍受することによって、ユーザがコンテンツに対して実行した各種のアクティビティに関する情報をアクティビティ検出部150に提供する。
表示制御部220は、例えばCPUなどのプロセッサがメモリに格納されたプログラムに従って動作することによって実現され、例えばLCDまたは有機ELディスプレイなどの各種の表示装置によって実現される表示部230における画像の表示を制御する。表示制御部220は、通信部210から、コンテンツデータと、コンテンツに関するタグ情報を表示するためのデータと、ユーザが操作部260に与えた操作入力に従って受信されたデータとを取得する。これらのデータに基づいて、表示制御部220は、表示部230に、コンテンツの再生画面を表示させる。再生画面は、例えば、コンテンツ画像と、コンテンツ画像の周辺に表示されるタグ情報のアイコンとを含みうる。また、表示制御部220は、ユーザがコンテンツに対する各種のアクティビティを実行するための画面を、再生画面の中に、または再生画面とは別に表示させてもよい。表示制御部220は、例えば、ユーザがコメントを入力するためのコメント入力欄や、検索キーワードを入力するためのキーワード入力欄、および/またはアクティビティの対象になる画面内位置を指定するための操作要素などを表示させる。また、表示制御部220は、サーバ100から取得したデータに基づいて表示部230にホーム画面を表示させてもよい。なお、表示制御部220が表示部230に表示させる画面の例については、後にさらに詳しく説明する。
音声制御部240は、例えばCPUなどのプロセッサがメモリに格納されたプログラムに従って動作することによって実現され、例えばスピーカなどによって実現される音声出力部250における音声の出力を制御する。音声制御部240は、通信部210から取得したコンテンツデータに基づいて、音声出力部250からコンテンツ音声を出力させる。コンテンツ音声は、表示部230に表示されるコンテンツ画像に連動する音声である。また、音声制御部240は、ユーザが操作部260に与えた操作入力に従って受信されたデータを通信部210から取得し、このデータに基づいて音声出力部250から音声を出力させてもよい。なお、本実施形態ではコンテンツが映像コンテンツである場合を例として説明しているが、他の実施形態では、再生されるコンテンツや再生中のユーザのアクティビティによって取得されるコンテンツが、音楽コンテンツなど画像を含まないコンテンツであってもよい。そのようなコンテンツは主に音声制御部240および音声出力部250を介して出力されうる。
操作部260は、例えばタッチパネル、マウス、またはキーボードのような各種の入力装置によって実現され、ユーザによる操作入力を取得する。取得された操作入力に基づいて、例えば通信部210を介してサーバ100を含む各種サーバに情報が送信される。これによって、例えば再生するコンテンツの選択や、コンテンツ再生の開始および終了などが制御されうる。また、コンテンツ再生中に操作部260によって取得された検索の操作入力(検索キーワードの入力および検索実行の指示)やコメント投稿の操作入力(コメントのテキスト入力および投稿実行の指示)なども、通信部210を介して各種サーバに送信されうる。また、操作部260が取得した操作入力は、表示制御部220または音声制御部240に提供され、表示部230に表示される画像または音声出力部250から出力される音声の制御に用いられてもよい。
(1−3.画面表示例)
(ホーム画面)
図4および図5は、本開示の第1の実施形態におけるホーム画面の表示例を示す図である。ホーム画面は、例えばクライアント200でユーザがコンテンツ視聴のためのアプリケーションを起動したときに、表示制御部220の制御によって表示部230に表示されうる。
図4を参照すると、ホーム画面1000には、コンテンツアイコン1001が表示される。コンテンツアイコン1001は、例えばコンテンツのサムネイルまたはスナップショットなどの画像であり、キュレータ領域1003、またはグループ領域1005に区分して配置される。キュレータ領域1003には、上述したキュレータによって収集されたコンテンツのコンテンツアイコン1001が表示される。グループ領域1005には、上述したユーザのグループについて収集されたコンテンツのコンテンツアイコン1001が表示される。これらの領域は、上述したキュレータリストやグループリストとして機能しうる。図示された例では、キュレータ領域1003およびグループ領域1005がそれぞれ円形または楕円形で表示される。それぞれのキュレータ領域1003およびグループ領域1005は、例えばユーザがキュレータをフォローしている場合や、ユーザがグループに分類されている場合に大きく表示されうる。また、各領域は、ユーザがキュレータまたはグループについて収集されたコンテンツを視聴する頻度が高い場合や、キュレータの人気度が高い場合、ユーザとグループとの好みが近い場合などに大きく表示されてもよい。
収集されたコンテンツが多い場合、各領域に配置されるコンテンツアイコン1001は、各キュレータまたはグループについて収集されたコンテンツのうち、人気度や視聴回数などに応じて抽出された代表的なものであってもよい。例えばコンテンツに対してコメントなどの他のユーザからのアクティビティが多く検出されている場合、コンテンツアイコン1001は光るなどのエフェクト1007を伴って表示され、ユーザが「盛り上がっている」コンテンツを見つけることを容易にしてもよい。ユーザがいずれかの領域を選択すると、そのキュレータまたはグループに対応するコンテンツのリストが表示されうる。また、ユーザがコンテンツアイコン1001を選択すると、直接的にそのコンテンツの視聴を開始することが可能であってもよい。
図5に示すように、ユーザがキュレータ領域1003またはグループ領域1005を拡大すると、その領域に配置されたコンテンツアイコン1001が拡大表示される。あるいは、領域に配置されたコンテンツが収集されたコンテンツの一部である場合、領域が拡大されたことによってその領域に配置される他のコンテンツについてのコンテンツアイコン1001が新たに表示されてもよい。ある領域が拡大された場合、他の領域は縮小されたり、ホーム画面1000の周辺部に移動されたりしうる。図示された例では、キュレータAについてのキュレータ領域1003aが拡大されたために、キュレータBについてのキュレータ領域1003b、およびグループ1,2についてのグループ領域1005a,1005bが縮小され、ホーム画面1000の周辺部に移動されている。
(再生画面)
図6および図7は、本開示の第1の実施形態における再生画面の表示例を示す図である。再生画面は、例えばクライアント200でユーザがコンテンツ視聴のためのアプリケーションを起動し、上述したホーム画面1000などを介して視聴するコンテンツを選択したときに、表示制御部220の制御によって表示部230に表示されうる。
図6を参照すると、再生画面2000には、コンテンツ画像2001と、タグ一覧表示2003と、タグ詳細表示2005と、コメント入力欄2007と、再生コントロール2009と、ホームボタン2011と、リコメンド情報2013とが表示される。
コンテンツ画像2001は、サーバ100が再生制御部120の制御に従ってクライアント200に送信したデータに基づいて表示されるコンテンツの画像である。図示された例においてコンテンツは映像コンテンツであるが、上述のようにコンテンツは音楽コンテンツなど画像を含まないコンテンツであってもよい。その場合、コンテンツ画像2001としては、例えば音楽コンテンツに対応してサーバ100から提供されたイメージ画像、またはサーバ100もしくはクライアント200で生成された視覚エフェクト画像が表示されてもよく、再生画面2000がコンテンツ画像2001を含まなくてもよい。
(タグ一覧表示)
タグ一覧表示2003は、再生中のコンテンツ、すなわち図示された例ではコンテンツ画像2001として表示されているコンテンツに関連付けられたタグ情報の一覧を表示する。本実施形態において、タグ情報の一覧を表示するためのデータは、サーバ100のタグ情報表示制御部140によって提供される。上述のように、タグ情報表示制御部140は、既に生成されたタグ情報に加えてタグ関連付け部170新たにコンテンツに関連付けられたタグ情報に基づくデータを提供しうる。従って、再生画面2000でコンテンツを視聴しているユーザ、または他のユーザのアクティビティに基づいて、タグ関連付け部170がコンテンツに新たなタグ情報を関連付けた場合、タグ情報表示制御部140から提供される新たなデータによって、タグ一覧表示2003は新たなタグ情報を含む表示に動的に更新されうる。より具体的には、例えば、後述する種類アイコン2025が追加されたり、グループ内タグ数2027の数字が徐々に増えたりしてもよい。
図示された例において、タグ一覧表示2003では、タグ情報を示すアイコンとして、各タグ情報に関連付けられた再生位置でのコンテンツのキャプチャ画像2021が表示される。キャプチャ画像2021は、対応する再生位置を示すタイムスタンプ2023とともに表示されうる。また、キャプチャ画像2021には、タグ情報の種類アイコン2025が付加されていてもよい。図示された例において、タグ情報はテキスト(種類アイコン2025t)、Webページへのリンク(種類アイコン2025w)、および/または他のコンテンツへのリンク(種類アイコン2025v)などを含みうる。種類アイコン2025の表示によって、ユーザは、各タグ情報がどのような種類の情報を含むかを容易に識別することができる。
また、図示された例において、タグ一覧表示2003では、タグ情報を示すアイコンが、互いに近接する再生位置に関連付けられている場合にはグループ化して表示される。このような場合、キャプチャ画像2021にグループ内タグ数2027の表示が付加されてもよい。例えば、タイムスタンプ2023が「0:24」のキャプチャ画像2021aにグループ内タグ数2027として「18」が表示されている場合、この再生位置の近傍に関連付けられたタグ情報が18件あることがわかる。このようにタグ情報がグループ化される場合、種類アイコン2025もキャプチャ画像2021に複数付加されうる。例えば、上記のキャプチャ画像2021aには、種類アイコン2025t,2025w,2025vが表示されているため、18件のタグ情報の中にテキストとWebページへのリンクと他のコンテンツへのリンクとが含まれることがわかる。
(タグ詳細表示)
タグ詳細表示2005は、タグ一覧表示2003として表示されたタグ情報のアイコンが選択された場合に、当該タグ情報とともにグループ化されたタグ情報を個別に表示する。本実施形態では、タグ詳細表示2005を表示するためのデータも、タグ一覧表示2003と同様にサーバ100のタグ情報表示制御部140によって提供されうる。上述のように、タグ情報表示制御部140は、既存のタグ情報に加えて、タグ関連付け部170によって新たにコンテンツに関連付けられたタグ情報に基づくデータを提供しうる。従って、再生画面2000でコンテンツを視聴しているユーザ、または他のユーザのアクティビティに基づいてタグ生成部160が新たなタグ情報を生成した場合、タグ詳細表示2005は新たなタグ情報を含む表示に更新されうる。より具体的には、例えば、コンテンツの再生中に新たなタグ情報が追加して表示されうる。
ここで、図6に示した例では、ユーザがタグ一覧表示2003として表示されたタグ情報のアイコンを選択していないため、タグ詳細表示2005は空欄になっている。この場合に、タグ詳細表示2005に代えて広告などが表示されてもよい。一方、図7に示した例では、ユーザがタグ一覧表示2003として表示されたキャプチャ画像2021aを選択したために、キャプチャ画像2021aに対応するグループに含まれるタグ情報が、タグ詳細表示2005として表示されている。上述のように、このとき、コンテンツ画像2001として表示されているコンテンツの再生位置は、選択されたタグ情報の再生位置(図7の例ではタイムスタンプ「0:24」)にジャンプしうる。
図7の例において、タグ詳細表示2005には、テキスト、Webページ、および他のコンテンツをそれぞれ含む3件のタグ情報表示2029t,2029w,2029vが表示されている。これらのタグの情報の種類を識別するために、タグ一覧表示2003に表示された種類アイコン2025と同様の種類アイコン2031が表示されてもよい。
Webページを含むタグ情報表示2029wでは、Webページのスナップショット2033が表示されうる。スナップショット2033にはWebページへのリンクが設定されており、ユーザはスナップショット2033の画像を選択することによってWebページへアクセス可能であってもよい。また、他のコンテンツを含むタグ情報表示2029vでは、他のコンテンツのサムネイル2035が表示されうる。サムネイル2035には他のコンテンツを再生するためのリンクが設定されており、ユーザはサムネイル2035を選択することによって他のコンテンツにアクセス可能であってもよい。この場合、他のコンテンツは、例えば再生画面2000とは別の画面で再生されうる。別の実施形態では、例えば表示可能なタグ情報表示2029の数を増やすために、タグ詳細表示2005の開始時にはスナップショット2033やサムネイル2035が表示されず、タグ情報表示2029が選択された場合に詳細情報としてスナップショット2033やサムネイル2035が表示されてもよい。
上述の通り、キャプチャ画像2021aに対応するグループには18件のタグ情報が含まれ、図示された例のタグ詳細表示2005には一度に表示されない。このような場合、タグ詳細表示2005にはスクロールバー2037が表示され、上下方向に配列されたタグ情報表示2029をスクロールさせて閲覧することが可能であってもよい。タグ情報表示2029が配列される順番は、例えば時系列であってもよく、Webページやコンテンツのリンクへのアクセス数などによって決定される人気度順であってもよい。また、コンテンツに新たなタグ情報が関連付けられた場合、新たなタグ情報はタグ詳細表示2005の一番上または一番下に追加されてもよい。
また、後述する変形例の場合とは異なり、図7の例では、コンテンツの再生が、選択されたタグ情報の再生位置にジャンプした後はそのまま続行される。そこで、表示されているタグ情報がどのようなシーンについてのものであるかを示すために、タグ詳細表示2005にキャプチャ画像2039(図7の例であればキャプチャ画像2021aと同じ画像)が含まれてもよい。さらに、キャプチャ画像2039とともにジャンプボタン2041が表示されてもよい。ユーザがジャンプボタン2041を選択すると、コンテンツ画像2001として表示されているコンテンツの再生位置が、キャプチャ画像2039に対応する再生位置、つまりタグ詳細表示2005として表示されているタグ情報に対応する再生位置にジャンプする。
(ユーザのアクティビティに関する表示要素)
コメント入力欄2007は、テキスト入力欄2007aと投稿ボタン2007bとを含み、再生中のコンテンツに対するユーザのコメントの投稿を受け付ける。コメント入力欄2007を用いて投稿されたコメントは、例えばサーバ100によって提供されるサービス上でのコメントとして処理されてもよく、他のソーシャルメディアでのコメントとして処理されてもよい。いずれの場合も、タグ生成部160が投稿されたコメントに基づいて新たなタグ情報を生成し、タグ関連付け部170が生成されたタグ情報をコンテンツに関連付けうる。このとき、タグ関連付け部170は、投稿ボタン2007bの選択によってコメントの投稿が実行された時、またはテキスト入力欄2007aが選択されてテキスト入力が開始された時のコンテンツの再生位置を検出し、生成されたタグ情報をこの再生位置に関連付けてもよい。ユーザのコメント投稿によって新たに生成されたタグ情報が関連付けられた再生位置の近傍に、他のタグ情報が既に関連付けられている場合、ユーザのコメント投稿後、当該再生位置の近傍に関連付けられたタグ情報のグループが自動的にタグ詳細表示2005に表示されてもよい。
図8は、本開示の第1の実施形態における再生画面と他の画面との連携の例を示す図である。図8に示されるように、コメントの投稿と同様に、例えばWebブラウザ画面2100aを用いたWeb検索の結果や、Webブラウザ画面2100bを用いた他のコンテンツ(映像コンテンツ)の再生も、サーバ100でタグ生成部160が生成するタグ情報の元になりうる。このような処理のために、例えばWebブラウザ画面2100が再生画面2000と共通のサービスによって提供されてもよいし、通常のWebブラウザ画面2100にサーバ100によって提供されるサービスとの連携のためのプラグインが追加されてもよい。このようにして提供されるWebブラウザ画面2100において入力された情報は、クライアント200の通信部210によってサーバ100を介して他のサーバなどに送信されうる。
(画面内位置の指定)
図9は、本開示の第1の実施形態における再生画面で画面内位置を指定する場合の表示例を示す図である。図9を参照すると、再生画面2000において、ユーザが、ポインタ2043を用いてコンテンツ画像2001の画面内位置を指定した上で、コメント入力欄2007でコンテンツに対するコメントを入力している。このような場合、サーバ100のアクティビティ検出部150は、画面内位置の指定を含むアクティビティとしてユーザのコメント投稿を検出しうる。さらに、タグ関連付け部170は、タグ情報をコンテンツの再生位置に加えて画面内位置にも関連付ける。なお、画面内位置についても、再生位置と同様に、関連付けられる画面内位置が範囲または領域として定義されたり、近接した画面内位置に関連付けられたタグ情報がグループ化されたりしてもよい。
ここで、画面内位置に関連付けられたタグ情報は、例えばタグ一覧表示2003やタグ詳細表示2005において、近接した再生位置で別の画面内位置に関連付けられたタグ情報や、画面内位置に関連付けられていないタグ情報とは区別して表示されうる。より具体的には、図9に示されるように、タグ一覧表示2003で、タイムスタンプ2023が同じ(図9の例では「0:12」)でも、対応付けられた画面内位置が異なるタグ情報にそれぞれ対応するキャプチャ画像2021b,2021cが別々に表示される。キャプチャ画像2021bは画面全体に対応付けられたタグ情報を示し、キャプチャ画像2021cは画面内の一部、具体的には鳥が映っている領域に対応付けられたタグ情報を示す。画面の一部分に対応付けられたタグ情報を示すキャプチャ画像2021cは、コンテンツのキャプチャ画像から対応する画面内位置またはその近傍の画像を切り取ったものでありうる。上記の場合、タグ詳細表示2005でも、タグ一覧表示2003に対応して、近接した再生位置かつ近接した画面内位置のタグ情報が個別に表示されうる。
(その他の表示要素)
再び図6を参照して、再生コントロール2009は、再生画面2000におけるコンテンツの再生の開始、停止、再生位置の移動などを制御するためのGUI(Graphical User Interface)部品である。ホームボタン2011は、コンテンツの視聴を中断または終了して上述したホーム画面1000に遷移するためのボタンである。リコメンド情報2013は、例えばユーザがフォローしているキュレータや、ユーザと同じグループに属する他のユーザからのコンテンツのリコメンドを表示する。例えば、リコメンド情報2013として表示されたコンテンツのサムネイル2045を選択することによって、コンテンツ画像2001として表示されるコンテンツがサムネイル2045として表示されたコンテンツに切り替わり、そのコンテンツの視聴を開始することが可能であってもよい。
(変形例)
図10は、本開示の第1の実施形態における再生画面でコミュニケーションサービスが提供される場合の表示例を示す図である。図10を参照すると、再生画面3000には、コンテンツ画像2001と、タグ一覧表示2003と、チャット画面3001と、コメント入力欄2007と、再生コントロール2009と、ホームボタン2011と、リコメンド情報2013とが表示される。なお、チャット画面3001以外については、上記の再生画面2000と同様の構成要素であるため詳細な説明は省略する。
本実施形態では、サーバ100のコミュニケーションサービス提供部180の機能によって、例えばユーザがコメント入力欄2007を用いてコンテンツ再生中にコメントを投稿し、そのコメントに基づいてコンテンツの再生位置に新たなタグ情報が関連付けられたた場合に、その近傍の再生位置にコメントを入力した他のユーザとの間で開設されるチャットルームにユーザが招待されうる。チャット画面3001は、このチャットルームにおける各ユーザの発言のログを表示する。ユーザは、チャットルームに招待される前と同じくコメント入力欄2007を用いて、チャットルームでの発言を投稿することが可能である。チャット画面3001は、例えばそれまで表示されていたタグ詳細表示2005の表示が変化することによって表示されてもよい。あるいは、再生画面3000には最初からチャット画面3001が表示され、ユーザがコメント入力欄2007を用いてコメントを入力するまでは空欄であってもよい。
上記の例において、ユーザが最初にコメント入力欄2007を用いて投稿したコメントは、チャットルームにおけるそのユーザの最初の発言としてチャット画面3001に表示されてもよい。また、ユーザがチャットルームに招待されるためのトリガは、コメントの投稿には限られず、例えば図8に示したようなWeb検索や他のコンテンツの再生などであってもよい。この場合、Web検索の結果や他のコンテンツへのリンクが、ユーザの最初の発言としてチャット画面3001に表示されてもよい。あるいは、コメントなどのアクティビティを実行したユーザにはチャット画面3001のプレビューが提示され、プレビューを閲覧したユーザが希望した場合に限ってユーザがチャットルームに入室し、チャット画面3001が表示されてもよい。
上述の通り、チャット画面3001に表示されている各ユーザの発言も、サーバ100のアクティビティ検出部150によってアクティビティとして検出され、タグ生成部160によるタグ情報の生成の元になりうる。なお、ユーザのチャットルームにおける発言は、例えばWebページや他のコンテンツへのリンクなど、通常のコンテンツ視聴中のユーザのアクティビティと同様の情報を含みうる。
ユーザがチャットルームに入室し、チャット画面3001が再生画面3000に表示されている間、サーバ100の再生制御部120の制御によって、コンテンツ画像2001として表示されているコンテンツの再生は、対象になる再生位置を含む範囲で繰り返されうる。タグ関連付け部170は、各ユーザの発言に基づいて生成されるタグ情報を、発言が繰り返し範囲の中のどの位置で入力されたかにかかわらず、チャットルームごとに共通の再生位置(図9の例では「0:24」)に関連付けてもよい。コンテンツの視聴を先に進めたい場合、ユーザは、退室ボタン3003を選択することによってチャットルームから退室し、通常のコンテンツの視聴に戻ることができる。
以上で説明した本開示の第1の実施形態によれば、コンテンツ再生中のユーザによるアクティビティを検出し、検出されたアクティビティに関する情報に基づいてタグ情報を生成することによって、ユーザに別途のタグ情報入力の手間を感じさせることなく、大量の情報をコンテンツに関するタグ情報として収集することができる。また、生成されたタグ情報を、アクティビティに対応するコンテンツの再生位置および/または画面内位置に関連付けることによって、タグ情報がコンテンツの中の何に対するものであるのかが明確になり、上記のようにユーザのアクティビティによって無作為的に収集されたタグ情報であっても、そこから意味のある情報を読み取ることが容易になりうる。
(2.第2の実施形態)
次に、図11〜図15を参照して、本開示の第2の実施形態について説明する。本実施形態では、コンテンツについて生成されるタグ情報が、必ずしもコンテンツの再生位置に関連付けられない。本実施形態において、タグ情報は、コンテンツ内の1または複数の位置に関連付けられる。なお、それ以外の点については第1の実施形態と同様であるため、共通する符号を付することによって重複した説明を省略する。
(2−1.機能構成)
図11は、本開示の第2の実施形態に係る各装置の概略的な機能構成を示すブロック図である。図11を参照すると、本実施形態に係るシステム20は、サーバ300とクライアント400とを含む。サーバ300とクライアント400とは、いずれも後述する情報処理装置のハードウェア構成によって実現され、有線または無線の各種ネットワークによって互いに接続される。なお、サーバ300は、必ずしも単一の情報処理装置によって実現されなくてもよく、ネットワークによって互いに接続された複数の情報処理装置の協働によって実現されてもよい。また、図示されている機能構成は本実施形態の説明のために簡略化されており、各装置は図示されていない機能構成をさらに含んでもよい。図示されていない機能構成は、各装置の一般的な機能構成として既に知られたものでありうるため、詳細な説明は省略する。
(サーバ)
サーバ300は、通信部110と、再生制御部120と、タグDB330と、タグ情報表示制御部340と、アクティビティ検出部150と、タグ生成部160と、タグ関連付け部370と、コミュニケーションサービス提供部180とを含む。以下では、このうち上記の第1の実施形態とは異なる構成要素であるタグDB330、タグ情報表示制御部340、およびタグ関連付け部370について特に説明する。
(タグDB)
タグDB330は、例えばストレージ装置によって実現され、コンテンツについて生成されたタグ情報を格納する。タグ情報は、例えばタグ生成部160によって生成され、タグ関連付け部370によってコンテンツ内の1または複数の位置に関連付けられた上で、タグDB330に格納される。また、タグ情報は、初期設定として用意されたものを含んでもよい。本実施形態におけるタグ情報は、例えばテキスト、またはWebページや他のコンテンツへのリンクもしくはサムネイルなどを含みうる点で、上記の第1の実施形態でタグDB130に格納されるタグ情報と同様である。ただし、第1の実施形態との違いとして、本実施形態では、タグ情報はコンテンツ内の1または複数の位置に直接的または間接的に関連付けられていればよく、必ずしもコンテンツの再生位置に関連付けられていなくてもよい。
ここで、本明細書における「コンテンツ内の1または複数の位置」および「コンテンツの再生位置」といった用語について、改めて説明する。本明細書における「コンテンツ」は、例えば映像や楽曲のように時間とともに進行するコンテンツでありうる。この場合、例えばタイムスタンプ(T)などを用いてコンテンツの再生位置を定義することが可能である。例えば、あるコンテンツについて、1または複数のタイムスタンプにタグ情報を関連付けることは、タグ情報をコンテンツ内の1または複数の位置に関連付けることでありうる。
また、本明細書における「コンテンツ」は、例えば映像のように画面に表示されるコンテンツでもありうる。この場合、例えば横位置(X)や縦位置(Y)などを用いてコンテンツの画面内位置を定義することが可能である。例えば、あるコンテンツについて、1または複数の画面内位置にタグ情報を関連付けることは、タグ情報をコンテンツ内の1または複数の位置に関連付けることでありうる。
さらに、コンテンツが画面に表示される場合、タグ情報は被写体に関する情報に関連付けられてもよい。被写体は、例えば画面内のある領域(被写体の表示領域)に表示される人物または物などであり、視聴者に何らかの意味をもった画像部分として認識される。被写体は、例えば映像のような時間とともに進行し、かつ画面に表示されるコンテンツでは、一連のタイムスタンプ(複数の再生位置)において、表示領域を変化させながら(変化しない場合もある)表示されうる。従って、例えばタグ情報がある被写体を示す情報に関連付けられた場合、当該タグ情報は、コンテンツ内でその被写体の表示領域が存在する一連のタイムスタンプ(複数の再生位置)で、それぞれのタイムスタンプにおける被写体の表示領域(複数の画面内位置)に間接的に関連付けられるともいえる。
このように、本実施形態では、コンテンツに含まれる情報の少なくとも一部(少なくとも一部の再生位置および/または少なくとも一部の画面内位置)に対して与えられる何らかの意味(例えば被写体)を示す情報に対してタグ情報を関連付けることが可能である。この場合、タグ情報は、コンテンツ内で当該意味が与えられる部分を示す1または複数の位置に間接的に関連付けられるともいえる。このような意味を示す情報を、本明細書ではタグ情報のカテゴリともいう。従って、本実施形態では、タグDB330に格納されるタグ情報が、コンテンツ内の1または複数の位置に関連付けられており、より具体的には、タグ情報が、例えば再生位置、画面内位置、またはカテゴリのうちの1または複数に関連付けられるといえる。
(タグ情報表示制御部)
タグ情報表示制御部340は、例えばCPUなどのプロセッサがメモリに格納されたプログラムに従って動作することによって実現され、タグDB330から読み出されたタグ情報を、コンテンツの再生画面に表示させる。コンテンツの再生画面におけるタグ情報の表示は、例えば上記の第1の実施形態と同様でありうるが、上述の通り本実施形態ではタグ情報が例えばカテゴリにも関連付けられうるため、例えばタグ情報表示制御部340は共通するカテゴリに関連付けられたタグ情報をグループ化して表示させてもよい。
また、タグ情報表示制御部340は、新たに生成されるタグ情報が関連付けられるカテゴリを示すタグカテゴリ情報を、タグ情報の生成または登録に先立ってコンテンツの再生画面に表示させる。タグカテゴリ情報は、例えば、ユーザのアクティビティによってコンテンツの画面内位置が指定された場合に、当該アクティビティを含む一連のアクティビティによって生成されるタグ情報が関連付けられる情報(例えば被写体に関する情報)を前もって表示させるものでありうる。例えば、タグ情報表示制御部340は、タグカテゴリ情報として、当該画面内位置の近傍に位置する領域に表示される被写体の情報を表示する。当該被写体に既にタグ情報が関連付けられている場合、タグ情報表示制御部340は、それらのタグ情報をタグカテゴリ情報として表示させてもよい。なお、タグ情報表示制御部340によるタグカテゴリ情報の表示の具体的な例については後述する。
(タグ関連付け部)
タグ関連付け部370は、例えばCPUなどのプロセッサがメモリに格納されたプログラムに従って動作することによって実現され、タグ生成部160によって生成されたタグ情報を、タグ情報の元になったアクティビティに対応するコンテンツ内の1または複数の位置に直接的または間接的に関連付ける。タグ関連付け部370によってコンテンツに関連付けられたタグ情報は、例えばタグDB330に格納されてもよく、またタグ情報表示制御部340に提供されてクライアント400でリアルタイムに表示されてもよい。ここで、タグ情報を再生位置や画面内位置に関連付けるタグ関連付け部370の処理は、例えば上記の第1の実施形態におけるタグ関連付け部170と同様でありうる。
さらに、タグ関連付け部370は、タグ情報をカテゴリに関連付けることによって、間接的にコンテンツ内の1または複数の位置に関連付けてもよい。タグ関連付け部370は、例えばユーザがアクティビティにおいて明示的に指定した画面内位置の近傍に表示された被写体を検出し、検出された被写体にタグ情報を関連付けてもよい。ここで、タグ情報表示制御部340が、検出された被写体などの情報をタグカテゴリ情報としてコンテンツの再生画面に表示させる場合、タグ関連付け部370は、タグカテゴリ情報に応じてユーザがさらに実行したアクティビティに基づいて、タグ情報に関連付けられる情報を決定してもよい。例えば、タグ関連付け部370は、ユーザがタグカテゴリ情報を参照した上でそのままコメント投稿などのアクティビティを実行した場合、タグカテゴリ情報として表示された情報にタグ情報を関連付ける。また、タグ関連付け部370は、例えばユーザがタグカテゴリ情報に対する修正を含むアクティビティを実行した場合、タグカテゴリ情報として表示された情報を当該アクティビティに従って修正した上でタグ情報に関連付ける。
(2−2.画面表示例)
(再生画面)
図12および図13は、本開示の第2の実施形態における再生画面の表示例を示す図である。本実施形態における再生画面4000は、例えばクライアント200でユーザがコンテンツ視聴のためのアプリケーションを起動し、第1の実施形態で説明したものと同様のホーム画面1000などを介して視聴するコンテンツを選択したときに、表示制御部220の制御によって表示部230に表示されうる。
図12および図13を参照すると、再生画面4000には、コンテンツ画像2001と、タグ一覧表示2003と、タグカテゴリ情報4005と、コメント入力欄2007と、再生コントロール2009と、ホームボタン2011と、リコメンド情報2013と、ポインタ4015とが表示される。以下では、このうち上記の第1の実施形態とは異なる構成要素であるタグカテゴリ情報4005およびポインタ4015について特に説明する。
タグカテゴリ情報4005は、例えば、ユーザがポインタ4015を用いてコンテンツ画像2001内の位置(画面内位置)を指定するアクティビティを実行した場合に、続くユーザのアクティビティに基づいて生成されうるタグ情報に関連付けられるカテゴリの情報を前もって提示する。例えば、図12に示すように、ユーザがポインタ4015を用いてコンテンツ画像2001内のある位置Pを指定した場合、タグ情報表示制御部340が位置Pの近傍に位置する(位置Pを含んでもよい)領域に表示されている被写体を検索し、検索の結果発見された被写体に関する情報をタグカテゴリ情報4005として表示させてもよい。このとき、当該被写体に既に関連付けられているタグ情報がタグDB330に格納されている場合、タグ情報表示制御部340は、それらのタグ情報をタグカテゴリ情報4005においてタグ情報表示4029として表示させてもよい。
上記の例において、位置Pの近傍に表示されている被写体が発見されなかった場合、タグ情報表示制御部340は、位置Pを基準にした所定のサイズの領域(例えば、位置Pを中心とする矩形領域)を被写体の表示領域に代わる領域として特定し、この領域を示す情報をタグカテゴリ情報4005として表示させてもよい。このとき、当該領域に既に関連付けられているタグ情報がタグDB330に格納されている場合、タグ情報表示制御部340は、それらのタグ情報をタグカテゴリ情報4005においてタグ情報表示4029として表示させてもよい。このように、必ずしも被写体に関連づかないタグ情報の生成は、例えば、画像認識処理などによっては被写体の存在が検出されていないものの、ユーザにとっては何らかの意味を有するものが表示されている場合や、ユーザがコンテンツ画像2001の背景(街並みや風景など)についてコメントを投稿する(そのコメントに基づいてタグ情報が生成される)場合などに有用でありうる。
また、タグカテゴリ情報4005は、例えば、ユーザがポインタ4015を用いてコンテンツ画像2001の領域を指定するアクティビティを実行した場合(上述のように、コンテンツの画面内位置は範囲または領域として定義されうる)、続くユーザのアクティビティに基づいて生成されうるタグ情報に関連付けられる情報を提示してもよい。例えば、図13に示すように、ユーザがポインタ4015を用いてコンテンツ画像2001内の領域Qを指定した場合、タグ情報表示制御部340が、領域Qに含まれる(領域Qと部分的に重複してもよい)領域に表示されている被写体を検索し、検索の結果発見された被写体に関する情報をタグカテゴリ情報4005として表示させる。このとき、当該被写体に既に関連付けられているタグ情報がタグDB330に格納されている場合、タグ情報表示制御部340は、それらのタグ情報をタグカテゴリ情報4005においてタグ情報表示4029として表示させてもよい。一方、領域Qに含まれる領域に表示されている被写体が発見されなかった場合、タグ情報表示制御部340は、上記の図12の例と同様に、領域Qを基準にした所定のサイズの領域(領域Qそのものであってもよい)を被写体の表示領域に代わる領域として特定し、この領域を示す情報をタグカテゴリ情報4005として表示させてもよい。
(タグカテゴリ情報表示)
図14は、本開示の第2の実施形態におけるタグカテゴリ情報表示の例を示す図である。図12および図13を参照して説明したように、本実施形態では、再生画面4000において、ユーザのアクティビティに基づいて生成されるタグ情報に関連付けられる情報を提示するタグカテゴリ情報4005が表示される。上記の説明では、ユーザのアクティビティによって指定されたコンテンツ画像2001内の位置または領域について、その近傍に表示されている被写体が検索され、検索の結果発見された被写体に関する情報がタグカテゴリ情報4005として表示された。
しかしながら、実際には、例えば画像認識処理などによって検出された被写体は、必ずしも特定の人物または物として認識されているわけではない。従って、被写体であること、人物であること、または物であることは認識されているけれども、それが何であるか、誰であるかは特定されていない場合もある。以下では、そのような場合に対応したタグカテゴリ情報4005の表示例について説明する。
まず、何らかの被写体を含むコンテンツ画像2001aにおいて、ユーザのアクティビティによって位置Pが指定されたとする(S301)。このとき、クライアント400の通信部210から、サーバ300へ、コンテンツのタイムスタンプ(T)や位置Pの横位置および縦位置(X,Y)の情報に加えて、位置Pの近傍の画像を示す情報が送信されうる(S303)。位置Pの近傍の画像を示す情報は、例えば、位置Pを基準にした所定のサイズの領域でコンテンツ画像2001を切り出した画像データであってもよく、この画像データから抽出される特徴量に基づくデータであってもよい。
上記の情報を受信したサーバ300のタグ情報表示制御部340は、位置Pの近傍の領域に表示されている被写体を検索する(S305)。より具体的には、例えば、タグ情報表示制御部340は、コンテンツのタイムスタンプ(T)や位置Pの横位置および縦位置(X,Y)の情報に基づいて、既にタグ情報が関連付けられている位置Pの近傍の被写体を検索してもよい。また、コンテンツ全体の被写体検出が既に実行されているような場合、タグ情報表示制御部340は、被写体検出の結果を参照してもよい。
一方、既にタグ情報が関連付けられている位置Pの近傍の被写体がなく、また被写体検出もまだ実行されていないような場合、タグ情報表示制御部340は、クライアント400から受信した位置Pの近傍の画像を示す情報に基づいて被写体の検索を実行する。例えば、タグ情報表示制御部340は、コンテンツ2001を切り出した画像データ、または画像データから抽出される特徴量に基づくデータを用いて画像認識処理を実行することによって被写体を検出する。
上記のような処理によって被写体が発見され、かつ被写体が認識された場合、タグ情報表示制御部340は、その被写体を示す情報をタグカテゴリ情報4005としてクライアント400において表示させる。一方、被写体は発見されたものの、それが何であるか、誰であるかが特定されなかった場合、タグ情報表示制御部340は、被写体が未識別であることを示す情報をタグカテゴリ情報4005aとしてクライアント400において表示させる(S307)。
図示された例では、被写体が人物であることは識別されたものの、それが誰であるかは特定されなかったため、タグカテゴリ情報4005aは、被写体が未識別の人物であることを示す「Who is this?」というタイトル4017aとともに表示される。タイトル4017aは、ユーザによって上書きすることが可能であるような形態で表示されうる。ユーザは、その被写体が誰であるかを知っている場合、タイトル4017aに上書きして人物名を入力し、その上でコメントを投稿することが可能である(S309)。
上記のコメント投稿に基づいて、サーバ300ではタグ情報が生成され、生成されたタグ情報は被写体に関連付けられる(S311)。このとき、タグ関連付け部370は、タグ情報が関連付けられた被写体を、ユーザによって入力された被写体名と、以前にクライアント400から受信された位置Pの近傍の画像を示す情報とに関連付けて登録しうる。これによって、以降、コンテンツ内で類似した画像を含む画面内位置が指定された場合、タグ情報表示制御部340は上記で登録された被写体に関する情報をタグカテゴリ情報4005として表示させることができる。
上記のように、ユーザの入力に基づいて被写体名が設定される場合、ユーザによって異なる被写体名が入力される場合がありうる。また、例えば1人のユーザの入力に基づいて被写体名を設定するのは信頼性が低いと判断される場合もある。そのような場合に、タグ情報表示制御部340は、登録されている被写体名の信頼性が十分に高くないことを示す情報をタグカテゴリ情報4005bとしてクライアント400において表示させる(S313)。
図示された例において、タグカテゴリ情報4005bは、現在登録されている被写体名に「?」を付加することなどによって信頼性が高くないことを示すタイトル4017bを含みうる。この場合、タイトル4017bは、ユーザ(例えば、以前に被写体名を登録したユーザとは別のユーザ)によって上書きすることが可能であるような形態で表示されうる。ユーザは、その被写体が現在登録されている被写体名とは異なる人物であることを知っている場合、タイトル4017bに上書きして人物名を入力し、その上でコメントを投稿することが可能である(S315)。別の例として、タイトル4017bとして、複数の被写体名の候補が表示され、ユーザは候補の中から正しいと思う被写体名を選択した上でコメントを投稿することが可能であってもよい。
タグ関連付け部370(またはタグ情報表示制御部340)は、コメント投稿に基づいてタグ情報を生成し、これを被写体に関連付けるとともに、例えば上記のような被写体名の修正入力の蓄積などに基づいて、登録された被写体名の信頼度および代替案の有無などを判定し、必要に応じて被写体名修正する(S317)。このような処理を経て、ある程度正しい被写体名称が判明したところで、タグ情報表示制御部340は、登録されている被写体名の信頼性がある程度高いことを示す情報をタグカテゴリ情報4005cとしてクライアント400において表示させる(S319)。
図示された例において、タグカテゴリ情報4005cは、現在登録されている被写体名を「?」などを付加せずに表示するタイトル4017cを含みうる。タイトル4017cは、ユーザによって簡単には上書きされないような形態で表示されうる。ただし、タイトル4017cについても、ユーザが疑義を呈示する手段が設けられてもよい。例えば、タグカテゴリ情報4005cは疑義ボタン4019を含み、ユーザがタイトル4017cによって表示される被写体名が間違っていると思う場合には疑義ボタン4019を押下して正しいと思う被写体名を入力した上で、コメントを投稿することが可能であってもよい(S321)。この場合、疑義ボタン4019を用いて入力された被写体名は、例えばタグ関連付け部370(またはタグ情報表示制御部340)によって蓄積され、同様の修正提案がある程度蓄積された場合に被写体名が変更されるか、タグカテゴリ情報4005bが表示される場合のように被写体名が未確定の状態に戻る。
(2−3.処理フロー)
図15は、本開示の第2の実施形態におけるタグカテゴリ情報表示の表示プロセスの例を示すフローチャートである。
まず、サーバ300において、アクティビティ検出部150が、クライアント400でコンテンツを視聴中のユーザによる、コンテンツ画像2001内の位置Pを指定するアクティビティを取得する(S401)。ここで、アクティビティ検出部150によって取得される情報には、例えば、コンテンツのタイムスタンプ(T)や位置Pの横位置および縦位置(X,Y)の情報に加えて、位置Pの近傍の画像を示す情報が含まれうる。タグ情報表示制御部340は、上記の情報を用いて、タグDB330に格納されたタグ情報を検索する(S403)。より具体的には、タグ情報表示制御部340は、タイムスタンプ(T)ならびに横位置および縦位置(X,Y)について、それぞれ所定の範囲内で近傍に位置する被写体の表示領域または画像内の領域に関連付けられたタグ情報を検索する。
検索の結果、該当するタグ情報が発見された場合(S405のYES)、タグ情報表示制御部340は、発見されたタグ情報に基づいてタグ情報表示4029を生成する(S407)。また、タグ情報表示制御部340は、発見されたタグ情報に関連付けられた被写体の名称に基づいてタイトル4017を生成する(S409)。タグ情報表示制御部340は、クライアント400で表示されている再生画面4000に、タグ情報表示4029およびタイトル4017を含むタグカテゴリ情報4005を表示させる(S411)。
一方、検索の結果、該当するタグ情報が発見されなかった場合(S405のNO)、タグ情報表示制御部340は、アクティビティ検出部150によって取得された、位置Pの近傍の画像を示す情報に基づいて画像認識処理を実行する(S413)。ここで、画像認識処理の結果、被写体が人物であると認識された場合(S415のYES)、タグ情報表示制御部340は、認識された人物に関連付けられたタグ情報をタグDB330から検索する(S417)。上記のS403での検索との違いとして、S417では、タグ情報に関連付けられた被写体(人物)を条件として検索が実行されているため、タグ情報同士のタイムスタンプ(T)ならびに横位置および縦位置(X,Y)は必ずしも共通しない。例えばこのような処理を介して、本実施形態では、タグ情報が、被写体を媒介としてコンテンツの複数の再生位置および複数の画面内位置に関連付けられうる。
S417の検索の結果、該当するタグ情報が発見された場合(S419のYES)、タグ情報表示制御部340は、発見されたタグ情報に基づいてタグ情報表示4029を生成する(S407)。また、タグ情報表示制御部340は、発見されたタグ情報に関連付けられた被写体(人物)の名称に基づいてタイトル4017を生成する(S409)。タグ情報表示制御部340は、クライアント400で表示されている再生画面4000に、タグ情報表示4029およびタイトル4017を含むタグカテゴリ情報4005を表示させる(S411)。
一方、S417の検索の結果、該当するタグ情報が発見されなかった場合(S419のNO)、タグ情報表示制御部340は、被写体(人物)の名称に基づいてタイトル4017を生成する(S409)。なお、タグ情報表示制御部340は、被写体(人物)の名称が不明である場合、図14に示した例のように「Who is this?」などのタイトル4017を生成する。タグ情報表示制御部340は、クライアント400で表示されている再生画面4000に、タイトル4017を含むタグカテゴリ情報4005を表示させる(S411)。この場合、続くユーザのアクティビティ(コメント投稿)に基づいて新たに生成されるタグ情報は、そのコンテンツにおいて、当該被写体(人物)に関連付けられる最初のタグ情報として扱われうる。
画像認識処理の結果、被写体が人物ではなく(S415のNO)、人物以外の物であると認識された場合(S421のYES)、タグ情報表示制御部340は、認識された物に関連付けられたタグ情報をタグDB330から検索する(S417)。S417以降の処理は、上記の被写体が人物である場合と同様である(被写体(物)の名称が不明である場合は、例えば、「What is this?」などのタイトル4017が生成されうる)。
一方、画像認識処理の結果、被写体が物であるとも認識されなかった場合(S421のNO)、タグ情報表示制御部340は、位置Pを基準にした所定のサイズの領域をタグ情報に関連付けられる領域として特定し、この領域に関する情報を含むタグカテゴリ情報4005を表示させる(S423)。この場合、画像認識処理によって検出されなかっただけで、実際にはその領域に被写体が表示されていることもありうるため、タグ情報表示制御部140は、タグカテゴリ情報4005のタイトル4017として「What is this?」などの文字列を表示させてもよい。
以上で説明した本開示の第2の実施形態によれば、コンテンツ再生中のユーザのアクティビティに基づいて生成されるタグ情報が、単純にコンテンツの再生位置および/または画面内位置に関連付けられるのではなく、例えばコンテンツの被写体のようなカテゴリの情報に関連付けられることによってコンテンツの複数の再生位置および複数の画面内位置に間接的に関連付けられる。これによって、タグ情報を、コンテンツ内でユーザが何らかの意味を感じている一連の部分に関連付けることができ、タグ情報から意味のある情報を読み取ることが容易になりうる。
なお、上記の例では、被写体などのカテゴリがコンテンツ内で設定されたが、カテゴリはコンテンツをまたいで設定されてもよい。例えば、あるコンテンツと他のコンテンツとで共通する被写体に関連付けられたタグ情報が、相互に参照可能であってもよい。この場合、例えば、タグ情報表示4029を表示するときに、ある被写体についてコンテンツの中で既に関連付けられたタグ情報が存在しなければ、他のコンテンツのタグ情報が表示されてもよい。
(3.第3の実施形態)
次に、図16を参照して、本開示の第3の実施形態について説明する。本実施形態では、上記の第1または第2の実施形態ではサーバで実現されたアクティビティ検出部、タグ生成部およびタグ関連付け部の機能がクライアントで実現される。なお、各機能の詳細については第1または第2の実施形態と同様であるため、対応した符号を付することによって重複した説明を省略する。なお、以下の説明では第1の実施形態の構成を基にして説明するが、第2の実施形態の構成についても同様の変形が可能である。
図16は、本開示の第2の実施形態に係る各装置の概略的な機能構成を示すブロック図である。図16を参照すると、本実施形態に係るシステム30は、サーバ500とクライアント600とを含む。サーバ500とクライアント600とは、いずれも後述する情報処理装置のハードウェア構成によって実現され、有線または無線の各種ネットワークによって互いに接続される。なお、サーバ500は、必ずしも単一の情報処理装置によって実現されなくてもよく、ネットワークによって互いに接続された複数の情報処理装置の協働によって実現されてもよい。また、図示されている機能構成は本実施形態の説明のために簡略化されており、各装置は図示されていない機能構成をさらに含んでもよい。図示されていない機能構成は、各装置の一般的な機能構成として既に知られたものでありうるため、詳細な説明は省略する。
サーバ500は、通信部110と、タグDB130と、コミュニケーションサービス提供部180とを含む。本実施形態において、サーバ500は、例えば、クライアント600からのリクエストに従って動画配信サーバなどのコンテンツプロバイダ50から取得したコンテンツをタグDB130から読み出したタグ情報とともにクライアント600に提供する機能と、クライアント600からコンテンツに関して提供された新たなタグ情報をタグDB130に格納する機能とを実現する。つまり、サーバ500は、各クライアント600で生成されたタグ情報をとりまとめる役割を果たす。また、サーバ500は、コミュニケーションサービス提供部180の機能によって、同じコンテンツの近接する再生位置(および/または近接する画面内位置)に関連付けられるタグ情報を提供した複数のユーザにコミュニケーションサービスを提供してもよい。
クライアント600は、通信部210と、表示制御部220と、表示部230と、音声制御部240と、音声出力部250と、操作部260とに加えて、再生制御部120と、タグ情報表示制御部140と、アクティビティ検出部150と、タグ生成部160と、タグ関連付け部170とを含む。クライアント600は、コンテンツ再生中のユーザによるアクティビティの検出と、アクティビティに関する情報に基づくタグ情報の生成と、タグ情報のコンテンツへの関連付けとをサーバ500とは独立して実現する。このような本実施形態の構成によれば、例えばクライアント600がコンテンツの再生中にサーバ500と安定して通信できないような場合でも、ユーザのアクティビティに基づくタグ情報の生成および関連付けを実行することができる。
より具体的には、再生制御部120は、通信部110が取得したコンテンツデータの再生を制御する。本実施形態において再生制御部120はクライアント600に設けられるため、再生制御部120は表示制御部220および音声制御部240を制御しうる。タグ情報表示制御部140は、サーバ500においてタグDB130から読み出され、通信部110からクライアント600の通信部210へと送信されたタグ情報を、対応するコンテンツの再生画面に表示させる。本実施形態においてタグ情報表示制御部140はクライアント600に設けられるため、タグ情報表示制御部140は表示制御部220を制御しうる。アクティビティ検出部150は、操作部260が取得した操作入力に基づいて通信部210からサーバ500などに送信される情報、および通信部210によってサーバ500などから受信された情報を傍受し、その情報に基づいてユーザのアクティビティを検出する。なお、図中に破線で示すように、アクティビティ検出部150は、操作部260から直接的にユーザの操作入力の情報を取得してもよい。タグ関連付け部170は、タグ生成部160によって生成されてコンテンツに関連付けられたタグ情報を、通信部210からサーバ500に送信する。サーバ500では、受信されたタグ情報がタグDB130に格納される。
以上で説明したように、本開示の第3の実施形態では、第1または第2の実施形態と同様の機能が、第1または第2の実施形態とは異なる形でサーバとクライアントとに分散して実現される。このように、本開示の実施形態において、各機能をサーバとクライアントとのどちらで実現するかは自由に設定されうる。従って、本開示については、上記で説明した実施形態以外にも、さらに異なる形で各機能がサーバとクライアントとに分散して実現される各種の実施形態が可能である。
(4.ハードウェア構成)
次に、図17を参照して、本開示の実施形態に係る情報処理装置のハードウェア構成について説明する。図17は、情報処理装置のハードウェア構成を説明するためのブロック図である。図示された情報処理装置900は、例えば、上記の実施形態におけるサーバやクライアントなどを実現しうる。
情報処理装置900は、CPU(Central Processing unit)901、ROM(Read Only Memory)903、およびRAM(Random Access Memory)905を含む。また、情報処理装置900は、ホストバス907、ブリッジ909、外部バス911、インターフェース913、入力装置915、出力装置917、ストレージ装置919、ドライブ921、接続ポート923、通信装置925を含んでもよい。情報処理装置900は、CPU901に代えて、またはこれとともに、DSP(Digital Signal Processor)またはASIC(Application Specific Integrated Circuit)と呼ばれるような処理回路を有してもよい。
CPU901は、演算処理装置および制御装置として機能し、ROM903、RAM905、ストレージ装置919、またはリムーバブル記録媒体927に記録された各種プログラムに従って、情報処理装置900内の動作全般またはその一部を制御する。ROM903は、CPU901が使用するプログラムや演算パラメータなどを記憶する。RAM905は、CPU901の実行において使用するプログラムや、その実行時のパラメータなどを一次記憶する。CPU901、ROM903、およびRAM905は、CPUバスなどの内部バスにより構成されるホストバス907により相互に接続されている。さらに、ホストバス907は、ブリッジ909を介して、PCI(Peripheral Component Interconnect/Interface)バスなどの外部バス911に接続されている。
入力装置915は、例えば、マウス、キーボード、タッチパネル、ボタン、またはスイッチなど、ユーザによって操作される装置である。入力装置915は、例えば、赤外線やその他の電波を利用したリモートコントロール装置であってもよいし、情報処理装置900の操作に対応した携帯電話などの外部接続機器929であってもよい。入力装置915は、ユーザが入力した情報に基づいて入力信号を生成してCPU901に出力する入力制御回路を含む。ユーザは、この入力装置915を操作することによって、情報処理装置900に対して各種のデータを入力したり処理動作を指示したりする。
出力装置917は、取得した情報をユーザに対して視覚的または聴覚的に通知することが可能な装置で構成される。出力装置917は、例えば、LCD(Liquid Crystal Display)、または有機EL(Electro-Luminescence)ディスプレイなどの表示装置、スピーカまたはヘッドホンなどの音声出力装置などでありうる。出力装置917は、情報処理装置900の処理結果を、テキストまたは画像などの映像として出力したり、音声または音響などの音声として出力したりする。
ストレージ装置919は、情報処理装置900の記憶部の一例として構成されたデータ格納用の装置である。ストレージ装置919は、例えば、HDD(Hard Disk Drive)などの磁気記憶部デバイス、半導体記憶デバイス、光記憶デバイス、または光磁気記憶デバイスなどにより構成される。このストレージ装置919は、CPU901が実行するプログラムや各種データ、および外部から取得した各種のデータなどを格納する。
ドライブ921は、磁気ディスク、光ディスク、光磁気ディスク、または半導体メモリなどのリムーバブル記録媒体927のためのリーダライタであり、情報処理装置900に内蔵、あるいは外付けされる。ドライブ921は、装着されているリムーバブル記録媒体927に記録されている情報を読み出して、RAM905に出力する。また、ドライブ921は、装着されているリムーバブル記録媒体927に記録を書き込む。
接続ポート923は、機器を情報処理装置900に直接接続するためのポートである。接続ポート923は、例えば、USB(Universal Serial Bus)ポート、IEEE1394ポート、SCSI(Small Computer System Interface)ポートなどでありうる。また、接続ポート923は、RS−232Cポート、光オーディオ端子、HDMI(登録商標)(High-Definition Multimedia Interface)ポートなどであってもよい。接続ポート923に外部接続機器929を接続することで、情報処理装置900と外部接続機器929との間で各種のデータが交換されうる。
通信装置925は、例えば、通信ネットワーク931に接続するための通信デバイスなどで構成された通信インターフェースである。通信装置925は、例えば、有線または無線LAN(Local Area Network)、Bluetooth(登録商標)、またはWUSB(Wireless USB)用の通信カードなどでありうる。また、通信装置925は、光通信用のルータ、ADSL(Asymmetric Digital Subscriber Line)用のルータ、または、各種通信用のモデムなどであってもよい。通信装置925は、例えば、インターネットや他の通信機器との間で、TCP/IPなどの所定のプロトコルを用いて信号などを送受信する。また、通信装置925に接続される通信ネットワーク931は、有線または無線によって接続されたネットワークであり、例えば、インターネット、家庭内LAN、赤外線通信、ラジオ波通信または衛星通信などである。
以上、情報処理装置900のハードウェア構成の一例を示した。上記の各構成要素は、汎用的な部材を用いて構成されていてもよいし、各構成要素の機能に特化したハードウェアにより構成されていてもよい。かかる構成は、実施する時々の技術レベルに応じて適宜変更されうる。
(5.補足)
本開示の実施形態は、例えば、上記で説明したような情報処理装置、システム、情報処理装置またはシステムで実行される情報処理方法、情報処理装置を機能させるためのプログラム、およびプログラムが記録された一時的でない有形の媒体を含みうる。
以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
なお、以下のような構成も本開示の技術的範囲に属する。
(1)コンテンツ再生中のユーザによるアクティビティを検出するアクティビティ検出部と、
前記アクティビティに関する情報に基づいてタグ情報を生成するタグ生成部と、
前記タグ情報を前記アクティビティに対応する前記コンテンツ内の1または複数の位置に関連付けるタグ関連付け部と
を備える情報処理装置。
(2)前記アクティビティ検出部は、前記ユーザによるコメントの投稿を検出し、
前記タグ生成部は、前記コメントに含まれるテキストに基づいて前記タグ情報を生成する、前記(1)に記載の情報処理装置。
(3)前記アクティビティ検出部は、前記ユーザによるソーシャルメディアへのコメントの投稿を検出する、前記(2)に記載の情報処理装置。
(4)前記アクティビティ検出部は、前記ユーザによる前記コンテンツ以外の情報へのアクセスを検出し、
前記タグ生成部は、前記アクセスされた情報に基づいて前記タグ情報を生成する、前記(1)に記載の情報処理装置。
(5)前記タグ生成部は、前記アクセスされた情報へのリンクを含む前記タグ情報を生成する、前記(4)に記載の情報処理装置。
(6)共通する前記コンテンツ内の位置に関連付けられる複数のタグ情報にそれぞれ対応するアクティビティを実行した複数のユーザにコミュニケーションサービスを提供するコミュニケーションサービス提供部をさらに備える、前記(1)〜(5)のいずれか1項に記載の情報処理装置。
(7)前記タグ関連付け部は、時間とともに進行する前記コンテンツ内の1または複数の再生位置に前記複数のタグ情報を関連付け、
前記情報処理装置は、前記ユーザが前記コミュニケーションサービスを利用している間は前記コンテンツを前記1または複数の再生位置を含む範囲で繰り返し再生する再生制御部をさらに備える、前記(6)に記載の情報処理装置。
(8)前記アクティビティ検出部は、前記コミュニケーションサービスにおけるユーザの発言を検出し、
前記タグ生成部は、前記発言に含まれるテキストに基づいてさらに前記タグ情報を生成する、前記(6)または(7)に記載の情報処理装置。
(9)前記コンテンツは、映像コンテンツであり、
前記タグ関連付け部は、前記タグ情報を前記映像コンテンツの画面内位置に関連付ける、前記(1)〜(8)のいずれか1項に記載の情報処理装置。
(10)前記アクティビティ検出部は、前記画面内位置の指定を含む前記アクティビティを検出する、前記(9)に記載の情報処理装置。
(11)前記タグ関連付け部は、前記タグ情報を前記画面内位置に対応する領域に関する情報に関連付ける、前記(9)に記載の情報処理装置。
(12)前記領域は、被写体の表示領域を含み、
前記タグ関連付け部は、前記タグ情報を前記被写体に関する情報に関連付ける、前記(11)に記載の情報処理装置。
(13)前記タグ情報が関連付けられる前記被写体に関する情報を前記コンテンツの再生画面に前もって表示させるタグ情報表示制御部をさらに備え、
前記タグ関連付け部は、前記タグ情報表示制御部によって前もって表示された情報に応じてユーザがさらに実行したアクティビティに基づいて前記タグ情報に関連付けられる情報を決定する、前記(12)に記載の情報処理装置。
(14)前記タグ情報表示制御部は、前記タグ情報が関連付けられる前記被写体に関する情報を、前記アクティビティに対応する前記コンテンツ内の1または複数の位置に近接した位置に関連付けられた他のタグ情報に関連付けられた被写体の情報に基づいて決定する、前記(13)に記載の情報処理装置。
(15)前記タグ情報表示制御部は、前記タグ情報が関連付けられる前記被写体に関する情報を、前記領域の画像から抽出される情報に基づいて決定する、前記(13)に記載の情報処理装置。
(16)前記タグ関連付け部は、前記タグ情報表示制御部によって前もって表示された情報に応じてユーザがさらに実行したアクティビティに基づいて、前記タグ情報が関連付けられる前記被写体に関する情報を修正する、前記(13)〜(15)のいずれか1項に記載の情報処理装置。
(17)前記タグ関連付け部は、時間とともに進行する映像コンテンツ内の1または複数の再生位置に前記タグ情報を関連付け、
前記情報処理装置は、前記1または複数の再生位置での前記映像コンテンツのキャプチャ画像によって、前記タグ情報を前記映像コンテンツの再生画面に表示させるタグ情報表示制御部をさらに備える、前記(1)〜(16)のいずれか1項に記載の情報処理装置。
(18)前記タグ情報表示制御部は、さらに、前記タグ情報に含まれる情報の種類を示すアイコンによって、前記タグ情報を前記再生画面に表示させる、前記(17)に記載の情報処理装置。
(19)前記再生画面に表示されたタグ情報が選択された場合、前記映像コンテンツの再生を前記選択されたタグ情報に対応する再生位置にジャンプさせる再生制御部をさらに備える、前記(17)または(18)に記載の情報処理装置。
(20)コンテンツ再生中のユーザによるアクティビティを検出することと、
前記アクティビティに関する情報に基づいてタグ情報を生成することと、
前記タグ情報を前記アクティビティに対応する前記コンテンツ内の1または複数の位置に関連付けることと
を含む情報処理方法。
10,20 システム
100,500 サーバ
110 通信部
120 再生制御部
130 タグDB
140 タグ情報表示制御部
150 アクティビティ検出部
160 生成部
170 タグ関連付け部
180 コミュニケーションサービス提供部
200,600 クライアント
210 通信部
220 表示制御部
230 表示部
240 音声制御部
250 音声出力部
260 操作部

Claims (20)

  1. コンテンツ再生中のユーザによるアクティビティを検出するアクティビティ検出部と、
    前記アクティビティに関する情報に基づいてタグ情報を生成するタグ生成部と、
    前記タグ情報を前記アクティビティに対応する前記コンテンツ内の1または複数の位置に関連付けるタグ関連付け部と
    を備える情報処理装置。
  2. 前記アクティビティ検出部は、前記ユーザによるコメントの投稿を検出し、
    前記タグ生成部は、前記コメントに含まれるテキストに基づいて前記タグ情報を生成する、請求項1に記載の情報処理装置。
  3. 前記アクティビティ検出部は、前記ユーザによるソーシャルメディアへのコメントの投稿を検出する、請求項2に記載の情報処理装置。
  4. 前記アクティビティ検出部は、前記ユーザによる前記コンテンツ以外の情報へのアクセスを検出し、
    前記タグ生成部は、前記アクセスされた情報に基づいて前記タグ情報を生成する、請求項1に記載の情報処理装置。
  5. 前記タグ生成部は、前記アクセスされた情報へのリンクを含む前記タグ情報を生成する、請求項4に記載の情報処理装置。
  6. 共通する前記コンテンツ内の位置に関連付けられる複数のタグ情報にそれぞれ対応するアクティビティを実行した複数のユーザにコミュニケーションサービスを提供するコミュニケーションサービス提供部をさらに備える、請求項1に記載の情報処理装置。
  7. 前記タグ関連付け部は、時間とともに進行する前記コンテンツ内の1または複数の再生位置に前記複数のタグ情報を関連付け、
    前記情報処理装置は、前記ユーザが前記コミュニケーションサービスを利用している間は前記コンテンツを前記1または複数の再生位置を含む範囲で繰り返し再生する再生制御部をさらに備える、請求項6に記載の情報処理装置。
  8. 前記アクティビティ検出部は、前記コミュニケーションサービスにおけるユーザの発言を検出し、
    前記タグ生成部は、前記発言に含まれるテキストに基づいてさらに前記タグ情報を生成する、請求項6に記載の情報処理装置。
  9. 前記コンテンツは、映像コンテンツであり、
    前記タグ関連付け部は、前記タグ情報を前記映像コンテンツの画面内位置に関連付ける、請求項1に記載の情報処理装置。
  10. 前記アクティビティ検出部は、前記画面内位置の指定を含む前記アクティビティを検出する、請求項9に記載の情報処理装置。
  11. 前記タグ関連付け部は、前記タグ情報を前記画面内位置に対応する領域に関する情報に関連付ける、請求項9に記載の情報処理装置。
  12. 前記領域は、被写体の表示領域を含み、
    前記タグ関連付け部は、前記タグ情報を前記被写体に関する情報に関連付ける、請求項11に記載の情報処理装置。
  13. 前記タグ情報が関連付けられる前記被写体に関する情報を前記コンテンツの再生画面に前もって表示させるタグ情報表示制御部をさらに備え、
    前記タグ関連付け部は、前記タグ情報表示制御部によって前もって表示された情報に応じてユーザがさらに実行したアクティビティに基づいて前記タグ情報に関連付けられる情報を決定する、請求項12に記載の情報処理装置。
  14. 前記タグ情報表示制御部は、前記タグ情報が関連付けられる前記被写体に関する情報を、前記アクティビティに対応する前記コンテンツ内の1または複数の位置に近接した位置に関連付けられた他のタグ情報に関連付けられた被写体の情報に基づいて決定する、請求項13に記載の情報処理装置。
  15. 前記タグ情報表示制御部は、前記タグ情報が関連付けられる前記被写体に関する情報を、前記領域の画像から抽出される情報に基づいて決定する、請求項13に記載の情報処理装置。
  16. 前記タグ関連付け部は、前記タグ情報表示制御部によって前もって表示された情報に応じてユーザがさらに実行したアクティビティに基づいて、前記タグ情報が関連付けられる前記被写体に関する情報を修正する、請求項13に記載の情報処理装置。
  17. 前記タグ関連付け部は、時間とともに進行する映像コンテンツ内の1または複数の再生位置に前記タグ情報を関連付け、
    前記情報処理装置は、前記1または複数の再生位置での前記映像コンテンツのキャプチャ画像によって、前記タグ情報を前記映像コンテンツの再生画面に表示させるタグ情報表示制御部をさらに備える、請求項1に記載の情報処理装置。
  18. 前記タグ情報表示制御部は、さらに、前記タグ情報に含まれる情報の種類を示すアイコンによって、前記タグ情報を前記再生画面に表示させる、請求項17に記載の情報処理装置。
  19. 前記再生画面に表示されたタグ情報が選択された場合、前記映像コンテンツの再生を前記選択されたタグ情報に対応する再生位置にジャンプさせる再生制御部をさらに備える、請求項17に記載の情報処理装置。
  20. コンテンツ再生中のユーザによるアクティビティを検出することと、
    前記アクティビティに関する情報に基づいてタグ情報を生成することと、
    前記タグ情報を前記アクティビティに対応する前記コンテンツ内の1または複数の位置に関連付けることと
    を含む情報処理方法。
JP2015514766A 2013-04-30 2014-02-25 情報処理装置および情報処理方法 Active JP6384474B2 (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
JP2013095688 2013-04-30
JP2013095688 2013-04-30
JP2013148532 2013-07-17
JP2013148532 2013-07-17
PCT/JP2014/054573 WO2014178219A1 (ja) 2013-04-30 2014-02-25 情報処理装置および情報処理方法

Publications (2)

Publication Number Publication Date
JPWO2014178219A1 true JPWO2014178219A1 (ja) 2017-02-23
JP6384474B2 JP6384474B2 (ja) 2018-09-05

Family

ID=51808203

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015514766A Active JP6384474B2 (ja) 2013-04-30 2014-02-25 情報処理装置および情報処理方法

Country Status (5)

Country Link
US (1) US10075544B2 (ja)
EP (1) EP2993907A4 (ja)
JP (1) JP6384474B2 (ja)
CN (3) CN105144736A (ja)
WO (1) WO2014178219A1 (ja)

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180356961A1 (en) 2014-06-09 2018-12-13 Google Inc. Low-friction, instant, private, personalized video sharing widget
US20150382077A1 (en) * 2014-06-26 2015-12-31 Xiaomi Inc. Method and terminal device for acquiring information
US9912973B2 (en) * 2014-08-07 2018-03-06 Echostar Technologies L.L.C. Systems and methods for facilitating content discovery based on viewer ratings
WO2016098589A1 (ja) * 2014-12-15 2016-06-23 ソニー株式会社 情報処理装置、情報処理方法、プログラム、および情報処理システム
JP6482295B2 (ja) * 2015-01-27 2019-03-13 国立大学法人電気通信大学 動画配信システム及び動画再生装置
USD810106S1 (en) * 2016-01-15 2018-02-13 Microsoft Corporation Display screen with graphical user interface
CN107241622A (zh) * 2016-03-29 2017-10-10 北京三星通信技术研究有限公司 视频定位处理方法、终端设备及云端服务器
US10904192B2 (en) * 2016-07-27 2021-01-26 Sap Se Time series messaging persistence and publication
US10321193B2 (en) * 2016-09-02 2019-06-11 Google Llc Sharing a user-selected video in a group communication
US10659385B2 (en) 2016-11-03 2020-05-19 Sap Portals Israel Ltd. Provisioning insight services in a data provider landscape
CN106815351A (zh) * 2017-01-18 2017-06-09 腾讯科技(深圳)有限公司 一种标签推荐方法及服务器
US10349022B2 (en) * 2017-03-22 2019-07-09 Casio Computer Co., Ltd. Image processing apparatus, projector, image processing method, and storage medium storing image processing program
CN109118243B (zh) * 2017-06-26 2022-09-30 阿里巴巴集团控股有限公司 一种产品分享、有用评价识别、推送方法和服务器
KR102052068B1 (ko) * 2017-12-01 2019-12-05 주식회사 애드업 콘텐츠 추천 시스템 및 방법
CN108900924B (zh) * 2018-07-20 2021-03-09 广州方硅信息技术有限公司 直播间中推荐好友的方法和装置
CN110052026B (zh) * 2019-04-28 2023-03-21 网易(杭州)网络有限公司 游戏中的信息记录方法及装置、电子设备
CN110730382B (zh) * 2019-09-27 2020-10-30 北京达佳互联信息技术有限公司 一种视频交互方法、装置、终端及存储介质
JP6760676B1 (ja) * 2019-12-18 2020-09-23 Jeインターナショナル株式会社 チャットボットサーバー装置、学習装置、チャットボットシステム、チャットボットサーバー装置の動作方法、学習装置の動作方法、プログラム、および記録媒体
CN112765386A (zh) * 2020-06-14 2021-05-07 黄雨勤 基于大数据和互联网的信息管理方法、系统及云服务器
CN115243084B (zh) * 2022-06-28 2024-05-17 海信视像科技股份有限公司 显示设备及设备互联方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002251311A (ja) * 2001-02-22 2002-09-06 Nippon Telegr & Teleph Corp <Ntt> コンテキストデータ生成・利用方法、プログラム及び記録媒体
JP2003283981A (ja) * 2002-03-20 2003-10-03 Nippon Telegr & Teleph Corp <Ntt> 映像コメント入力・表示方法およびシステムと、クライアント装置と、映像コメント入力・表示プログラム及びその記録媒体
JP2008305435A (ja) * 2008-08-29 2008-12-18 Sony Corp 情報提供方法及び情報提供装置、並びに、情報受信方法及び情報受信装置
JP2009077443A (ja) * 2006-12-11 2009-04-09 Dowango:Kk コメント配信システム、端末装置、コメント配信方法、及びプログラム
JP2011055270A (ja) * 2009-09-02 2011-03-17 Canon Inc 情報送信装置及び情報送信方法
JP2011108147A (ja) * 2009-11-20 2011-06-02 Sony Corp 情報処理装置、ブックマーク設定方法およびプログラム
JP2012147404A (ja) * 2011-01-14 2012-08-02 Sony Computer Entertainment Inc 情報処理装置

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030093790A1 (en) * 2000-03-28 2003-05-15 Logan James D. Audio and video program recording, editing and playback systems using metadata
US20050005308A1 (en) * 2002-01-29 2005-01-06 Gotuit Video, Inc. Methods and apparatus for recording and replaying sports broadcasts
AU2003220618A1 (en) * 2002-04-05 2003-10-27 Matsushita Electric Industrial Co., Ltd. Asynchronous integration of portable handheld device
US8412021B2 (en) * 2007-05-18 2013-04-02 Fall Front Wireless Ny, Llc Video player user interface
US9609260B2 (en) * 2007-07-13 2017-03-28 Gula Consulting Limited Liability Company Video tag layout
US20100004975A1 (en) 2008-07-03 2010-01-07 Scott White System and method for leveraging proximity data in a web-based socially-enabled knowledge networking environment
JP5052691B1 (ja) 2011-06-29 2012-10-17 株式会社ソニー・コンピュータエンタテインメント 情報処理装置および情報処理方法
US8966513B2 (en) * 2011-06-29 2015-02-24 Avaya Inc. System and method for processing media highlights

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002251311A (ja) * 2001-02-22 2002-09-06 Nippon Telegr & Teleph Corp <Ntt> コンテキストデータ生成・利用方法、プログラム及び記録媒体
JP2003283981A (ja) * 2002-03-20 2003-10-03 Nippon Telegr & Teleph Corp <Ntt> 映像コメント入力・表示方法およびシステムと、クライアント装置と、映像コメント入力・表示プログラム及びその記録媒体
JP2009077443A (ja) * 2006-12-11 2009-04-09 Dowango:Kk コメント配信システム、端末装置、コメント配信方法、及びプログラム
JP2008305435A (ja) * 2008-08-29 2008-12-18 Sony Corp 情報提供方法及び情報提供装置、並びに、情報受信方法及び情報受信装置
JP2011055270A (ja) * 2009-09-02 2011-03-17 Canon Inc 情報送信装置及び情報送信方法
JP2011108147A (ja) * 2009-11-20 2011-06-02 Sony Corp 情報処理装置、ブックマーク設定方法およびプログラム
JP2012147404A (ja) * 2011-01-14 2012-08-02 Sony Computer Entertainment Inc 情報処理装置

Also Published As

Publication number Publication date
US20160112524A1 (en) 2016-04-21
CN104135694A (zh) 2014-11-05
EP2993907A4 (en) 2016-12-21
CN203933870U (zh) 2014-11-05
JP6384474B2 (ja) 2018-09-05
US10075544B2 (en) 2018-09-11
EP2993907A1 (en) 2016-03-09
WO2014178219A1 (ja) 2014-11-06
CN105144736A (zh) 2015-12-09
CN104135694B (zh) 2019-01-08

Similar Documents

Publication Publication Date Title
JP6384474B2 (ja) 情報処理装置および情報処理方法
CN109061985B (zh) 用于相机效果的用户界面
US10162865B2 (en) Generating image tags
WO2019165905A1 (zh) 信息显示方法、图形用户接口及终端
US10897637B1 (en) Synchronize and present multiple live content streams
US11277668B2 (en) Methods, systems, and media for providing media guidance
US20140372892A1 (en) On-demand interface registration with a voice control system
CN112752121B (zh) 一种视频封面生成方法及装置
US20150154302A1 (en) Information processing apparatus and recording medium
CN112866783A (zh) 评论交互方法和装置、电子设备
WO2024060559A1 (zh) 互动小说中弹幕的处理方法及装置
US20140324953A1 (en) Terminal device and content displaying method thereof, server and controlling method thereof
CN113553466A (zh) 页面展示方法、装置、介质和计算设备
JP2010288163A (ja) 評価システム、マーカー表示の制御方法およびプログラム
CN105677709A (zh) 一种信息处理方法和装置、一种用于信息处理的装置
CN105808231A (zh) 录制与播放脚本的系统及方法
CN108600845A (zh) 一种二维码信息共享方法
US20220350650A1 (en) Integrating overlaid digital content into displayed data via processing circuitry using a computing memory and an operating system memory
JP2014153990A (ja) 情報処理装置、情報処理方法およびプログラム
JP2019128850A (ja) 情報処理装置、動画検索方法、生成方法及びプログラム
CN113542845B (zh) 一种信息展示方法、装置、设备及存储介质
WO2024113679A1 (zh) 多媒体资源处理方法、装置和设备
KR20180053221A (ko) 전자 장치 및 그의 제어 방법
CN115278378B (zh) 信息显示方法、信息显示装置、电子设备和存储介质
US20230326094A1 (en) Integrating overlaid content into displayed data via graphics processing circuitry and processing circuitry using a computing memory and an operating system memory

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170106

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180206

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180328

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180710

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180723

R151 Written notification of patent or utility model registration

Ref document number: 6384474

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151