JP6982659B1 - Servers, terminals, distribution systems, distribution methods, and information processing methods - Google Patents

Servers, terminals, distribution systems, distribution methods, and information processing methods Download PDF

Info

Publication number
JP6982659B1
JP6982659B1 JP2020110498A JP2020110498A JP6982659B1 JP 6982659 B1 JP6982659 B1 JP 6982659B1 JP 2020110498 A JP2020110498 A JP 2020110498A JP 2020110498 A JP2020110498 A JP 2020110498A JP 6982659 B1 JP6982659 B1 JP 6982659B1
Authority
JP
Japan
Prior art keywords
marker
content
comment
information
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020110498A
Other languages
Japanese (ja)
Other versions
JP2022020079A (en
Inventor
直道 鹿島
達郎 深瀬
太清 五十嵐
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Dwango Co Ltd
Original Assignee
Dwango Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Dwango Co Ltd filed Critical Dwango Co Ltd
Priority to JP2020110498A priority Critical patent/JP6982659B1/en
Priority to JP2021164629A priority patent/JP7465856B2/en
Application granted granted Critical
Publication of JP6982659B1 publication Critical patent/JP6982659B1/en
Publication of JP2022020079A publication Critical patent/JP2022020079A/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

【課題】位置情報に基づくコンテンツを提供する。【解決手段】コンテンツを配信するコンテンツ配信システムであり、コンテンツを配信するサーバ１とコンテンツを視聴するためのユーザ端末３を備える。サーバ１は、マーカーと位置情報の組にコンテンツを関連付けて保持する蓄積部１５と、マーカー情報と位置情報を受信する受信部１１と、マーカー情報の示すマーカーと位置情報の組を蓄積部１５から検索し、当該マーカーと位置情報の組に関連付けられたコンテンツを取得する動画取得部１３と、マーカーと位置情報の組に関連付けられたコンテンツを送信する送信部１４を有する。ユーザ端末３は、画像を撮影する撮影部３１と、当該ユーザ端末３の位置情報を取得する位置検出部３２と、画像から得られるマーカー情報と位置情報を送信する送信部３３と、マーカー情報の示すマーカーと位置情報の組に関連付けられたコンテンツを受信する受信部３５と、コンテンツを表示する表示部３６を有する。【選択図】図５PROBLEM TO BE SOLVED: To provide a content based on location information. SOLUTION: This is a content distribution system for distributing content, and includes a server 1 for distributing the content and a user terminal 3 for viewing the content. The server 1 stores the storage unit 15 that holds the content associated with the marker and the position information set, the reception unit 11 that receives the marker information and the position information, and the marker and the position information set indicated by the marker information from the storage unit 15. It has a moving image acquisition unit 13 that searches and acquires content associated with the marker and location information set, and a transmission unit 14 that transmits content associated with the marker and location information set. The user terminal 3 includes a shooting unit 31 that captures an image, a position detection unit 32 that acquires the position information of the user terminal 3, a transmission unit 33 that transmits marker information and position information obtained from the image, and marker information. It has a receiving unit 35 for receiving the content associated with the set of the marker and the position information, and a display unit 36 for displaying the content. [Selection diagram] FIG. 5

Description

本発明は、サーバ、端末、配信システム、配信方法、および情報処理方法に関する。 The present invention relates to a server, a terminal, a distribution system, a distribution method, and an information processing method.

携帯端末の高性能化によって位置情報を利用したアプリケーションや画像認識を利用したアプリケーションが普及している。 Due to the high performance of mobile terminals, applications that use location information and applications that use image recognition are becoming widespread.

特許文献１の技術では、サーバは、携帯端末の位置に基づき、携帯端末により撮影される現実空間に対応した仮想表示情報を送信し、携帯端末は、撮影された現実空間に仮想表示情報を重ねて表示する。 In the technique of Patent Document 1, the server transmits virtual display information corresponding to the real space captured by the mobile terminal based on the position of the mobile terminal, and the mobile terminal superimposes the virtual display information on the captured real space. To display.

特許文献２の技術では、サーバは、端末からの画像に対する画像認識処理の結果から商品を特定し、商品に対して所定の行動を取った人を表す表示用オブジェクトを生成して端末へ送信し、端末は、画像上に表示用オブジェクトを重畳して表示する。 In the technique of Patent Document 2, the server identifies a product from the result of image recognition processing for an image from a terminal, generates a display object representing a person who has taken a predetermined action on the product, and transmits the display object to the terminal. , The terminal superimposes a display object on the image and displays it.

特開２０１１−２４２８１６号公報Japanese Unexamined Patent Publication No. 2011-242816 国際公開第２０１２／０９６０１３号International Publication No. 2012/096013

特許文献１では、仮想表示情報は位置のみに紐付けて管理されているので、様々な情報が混在し、ＡＲ空間が混沌としてしまうという問題があった。 In Patent Document 1, since the virtual display information is managed by associating it only with the position, there is a problem that various information is mixed and the AR space becomes chaotic.

特許文献２は、画像認識処理で商品を検出し、その商品についての情報を画像上に重畳して表示できるが、商品を撮影した位置情報を利用するものではない。 Patent Document 2 can detect a product by image recognition processing and superimpose and display information about the product on the image, but does not use the position information at which the product is photographed.

本発明は、上記に鑑みてなされたものであり、位置情報に基づくコンテンツを提供することを目的とする。 The present invention has been made in view of the above, and an object of the present invention is to provide content based on location information.

本発明の一態様の配信システムは、
コンテンツを配信する配信システムであって、コンテンツを配信するサーバと前記コンテンツを視聴するための端末を備え、前記サーバは、マーカーと位置情報の組にコンテンツを関連付けて保持する蓄積部と、マーカー情報と位置情報を受信する受信部と、前記マーカー情報の示すマーカーと位置情報の組を前記蓄積部から検索し、当該マーカーと位置情報の組に関連付けられたコンテンツを取得する取得部と、前記マーカーと位置情報の組に関連付けられたコンテンツを送信する送信部を有し、前記受信部は、前記コンテンツに対するコメントを受信し、前記蓄積部は、前記コンテンツに対して投稿されたコメントを前記マーカーと位置情報の組ごとに保持し、前記送信部は、前記マーカーと位置情報の組に関連付けられたコメントを送信し、前記端末は、画像を撮影する撮影部と、当該端末の位置情報を取得する位置検出部と、前記画像から得られるマーカー情報と前記位置情報を送信する端末送信部と、前記マーカー情報の示すマーカーと前記位置情報の組に関連付けられたコンテンツを受信する端末受信部と、前記コンテンツを表示する表示部を有し、前記端末送信部は、前記コンテンツに対するコメントを送信し、前記端末受信部は、前記マーカーと位置情報の組に関連付けられたコメントを受信し、前記表示部は、受信した前記コメントを表示し、前記マーカーは、複数の場所に設置された同じ図形、ポスター、または看板の人物のいずれかである。 The distribution system of one aspect of the present invention is
A distribution system for distributing content, which includes a server for distributing the content and a terminal for viewing the content, and the server has a storage unit for holding the content in association with a set of a marker and a position information, and marker information. The receiving unit that receives the position information, the acquisition unit that searches the storage unit for the marker and the position information set indicated by the marker information, and acquires the content associated with the marker and the position information set, and the marker. The receiving unit receives a comment for the content, and the storage unit uses the comment posted for the content as the marker. It is held for each set of position information, the transmitting unit transmits a comment associated with the set of the marker and the position information, and the terminal acquires the photographing unit for capturing an image and the position information of the terminal. The position detection unit, the terminal transmission unit that transmits the marker information obtained from the image and the position information, the terminal reception unit that receives the content associated with the marker indicated by the marker information and the position information set, and the terminal receiver unit. It has a display unit for displaying content, the terminal transmission unit transmits a comment for the content, the terminal reception unit receives a comment associated with the marker and a set of position information, and the display unit receives the comment. , The received comment is displayed, and the marker is either a person of the same figure, poster, or signboard installed in a plurality of places.

本発明によれば、位置情報に基づくコンテンツを提供することができる。 According to the present invention, it is possible to provide content based on location information.

本実施形態のコンテンツ配信システムの構成の一例を示す図である。It is a figure which shows an example of the structure of the content distribution system of this embodiment. マーカーの写っている画像の一例を示す図である。It is a figure which shows an example of the image which a marker appears. マーカーにコンテンツを重畳した表示画面の一例を示す図である。It is a figure which shows an example of the display screen which superposed the content on the marker. マーカーが登録されている位置を示すマップの一例を示す図である。It is a figure which shows an example of the map which shows the position where a marker is registered. サーバの構成の一例を示す機能ブロック図である。It is a functional block diagram which shows an example of a server configuration. ユーザ端末の構成の一例を示す機能ブロック図である。It is a functional block diagram which shows an example of the structure of a user terminal. サーバの処理の流れを示すフローチャートである。It is a flowchart which shows the process flow of a server. ユーザ端末の処理の流れを示すフローチャートである。It is a flowchart which shows the processing flow of a user terminal. マーカーとしてランドマークを用いた例を示す図である。It is a figure which shows the example which used the landmark as a marker. ユーザがマーカーと位置情報の組を登録する処理の流れを示すフローチャートである。It is a flowchart which shows the flow of the process which a user registers a set of a marker and a position information.

［コンテンツ配信システム］
以下、本発明の実施の形態について図面を用いて説明する。 [Content distribution system]
Hereinafter, embodiments of the present invention will be described with reference to the drawings.

図１に示すように、本実施形態のコンテンツ配信システムは、サーバ１とユーザ端末３を備える。サーバ１とユーザ端末３とはネットワークを介して接続される。図１ではサーバ１を１台のみ図示しているが、機能ごとに複数台のサーバを備えてもよいし、クラウド上でサーバ１の機能を実現してもよい。ユーザ端末３の数は２台に限るものではなく、多数のユーザ端末３がサーバ１に接続する。 As shown in FIG. 1, the content distribution system of the present embodiment includes a server 1 and a user terminal 3. The server 1 and the user terminal 3 are connected via a network. Although only one server 1 is shown in FIG. 1, a plurality of servers may be provided for each function, or the functions of the server 1 may be realized on the cloud. The number of user terminals 3 is not limited to two, and a large number of user terminals 3 connect to the server 1.

ユーザ端末３は、ユーザ端末３の備えるカメラで撮影して得られたマーカーの情報とユーザ端末３の位置情報をサーバ１へ送信する。図２に、ユーザ端末３で撮影したマーカー２１０の写っている画像２００の一例を示す。同図に示す画像２００内には扉に貼り付けられたマーカー２１０が写っている。ユーザ端末３は、撮影した画像２００と撮影位置の位置情報をサーバ１へ送信する。なお、図２のマーカー２１０は一例であり、画像認識で特定可能な被写体をマーカーとして利用できる。例えば、マーカーとして、図形、ポスター、人物、モニュメント、あるいはランドマークを利用できる。 The user terminal 3 transmits the marker information obtained by taking a picture with the camera included in the user terminal 3 and the position information of the user terminal 3 to the server 1. FIG. 2 shows an example of an image 200 showing the marker 210 taken by the user terminal 3. The marker 210 attached to the door is shown in the image 200 shown in the figure. The user terminal 3 transmits the captured image 200 and the position information of the capture position to the server 1. The marker 210 in FIG. 2 is an example, and a subject that can be identified by image recognition can be used as a marker. For example, a figure, poster, person, monument, or landmark can be used as a marker.

サーバ１は、マーカーと位置情報の組に関連付けられたコンテンツをユーザ端末３に返信する。例えば、サーバ１は、画像認識により、受信した画像２００からマーカー２１０を認識し、認識したマーカー２１０と受信した位置情報の組が登録されていれば、サーバ１は、その組に関連付けられたコンテンツをユーザ端末３に返信する。コンテンツにコメントが付与されている場合、サーバ１は、コンテンツとともにコメントをユーザ端末３へ返信する。 The server 1 returns the content associated with the set of the marker and the position information to the user terminal 3. For example, if the server 1 recognizes the marker 210 from the received image 200 by image recognition and a set of the recognized marker 210 and the received position information is registered, the server 1 has the content associated with the set. Is returned to the user terminal 3. When a comment is added to the content, the server 1 returns the comment together with the content to the user terminal 3.

ユーザ端末３は、サーバ１から受信したコンテンツを表示する。図３に、ユーザ端末３においてコンテンツである動画３１０を表示した表示画面３００の一例を示す。同図に示す表示画面３００では、ＡＲ技術を用いて、ユーザ端末３で撮影した映像のマーカー内にサーバ１から受信した動画３１０を重畳させて表示している。動画３１０を表示する態様はこれに限るものではない。撮影したマーカーの手前において、マーカーよりも大きいサイズで動画３１０を重畳させて表示してもよい。マーカーを貼り付けた構造物の形状に応じて動画３１０の表示態様を変えてもよい。撮影した映像に動画３１０を重畳させずに、ユーザ端末３の表示画面３００の全面で動画３１０を表示してもよい。 The user terminal 3 displays the content received from the server 1. FIG. 3 shows an example of a display screen 300 displaying a moving image 310 which is a content in the user terminal 3. In the display screen 300 shown in the figure, the moving image 310 received from the server 1 is superimposed and displayed in the marker of the image taken by the user terminal 3 by using the AR technology. The mode for displaying the moving image 310 is not limited to this. In front of the photographed marker, the moving image 310 may be superimposed and displayed in a size larger than that of the marker. The display mode of the moving image 310 may be changed according to the shape of the structure to which the marker is attached. The moving image 310 may be displayed on the entire surface of the display screen 300 of the user terminal 3 without superimposing the moving image 310 on the captured image.

本実施形態では、コンテンツの一例として動画を用いて説明するが、これに限るものではない。例えば、コンテンツは、静止画またはテキストであってもよいし、音楽、音声であってもよい。コンテンツは、コンピュータグラフィックスによる３次元オブジェクトであってもよい。また、コンテンツは、これらを複合したものでもよい。マーカーと位置情報の組に複数種類のコンテンツが関連付けられてもよい。また、マーカーと位置情報の組に複数個または複数種類のコンテンツが関連付けられてもよい。マーカーと位置情報の組に複数のコンテンツが関連付けられている場合、複数のコンテンツはパラレルに配信されてもよいし、所定の順番で配信されてもよい。複数のコンテンツの中から選択された所定数のコンテンツが配信されてもよい。 In the present embodiment, a moving image will be used as an example of the content, but the present embodiment is not limited to this. For example, the content may be a still image or text, or may be music or audio. The content may be a three-dimensional object by computer graphics. Further, the content may be a composite of these. Multiple types of content may be associated with a set of markers and location information. Further, a plurality of or a plurality of types of contents may be associated with the set of the marker and the position information. When a plurality of contents are associated with a set of a marker and a position information, the plurality of contents may be delivered in parallel or may be delivered in a predetermined order. A predetermined number of contents selected from a plurality of contents may be delivered.

ユーザ端末３は、コンテンツに付与されたコメントを受信した場合、コメントも表示する。コメントは、その位置で過去に投稿されたメッセージである。つまり、ユーザ端末３は、過去に同一のマーカー２１０を撮影して動画３１０を見たユーザが投稿したコメントを表示する。コメントは、例えば、ユーザ端末３で表示した動画３１０内において、動画の一端から出現して他端に向けて移動し、他端で消失するように表示する。ユーザ端末３は、ＡＲ技術を用いて、マーカーを基準とした映像内の任意の位置にコメントを表示してもよい。例えば、電柱に貼られているマーカーを撮影した場合、コメントが電柱の周りを回るように表示する。 When the user terminal 3 receives the comment given to the content, the user terminal 3 also displays the comment. A comment is a message posted in the past at that location. That is, the user terminal 3 displays a comment posted by a user who has taken the same marker 210 in the past and watched the moving image 310. The comment is displayed so as to appear from one end of the moving image, move toward the other end, and disappear at the other end in the moving image 310 displayed on the user terminal 3, for example. The user terminal 3 may display a comment at an arbitrary position in the image with respect to the marker by using AR technology. For example, when a marker attached to a utility pole is photographed, the comment is displayed so as to rotate around the utility pole.

ユーザは、サーバ１から受信したコンテンツにコメントを投稿することができる。ユーザがコメントを入力すると、ユーザ端末３は、入力されたコメントをサーバ１へ送信する。サーバ１は、マーカーと位置情報の組に紐付けてコンテンツに対するコメントを記憶する。 The user can post a comment to the content received from the server 1. When the user inputs a comment, the user terminal 3 transmits the input comment to the server 1. The server 1 stores a comment for the content in association with the set of the marker and the position information.

ユーザ端末３は、図４のようなマーカーの存在する位置を示すマップを表示してもよい。図４の例では、地点Ａ，Ｂにマーカーが存在することを示している。ユーザは、地点Ａでマーカーを撮影すると、マーカーと地点Ａの組に紐付けられた動画を視聴でき、地点Ｂでマーカーを撮影すると、マーカーと地点Ｂの組に紐付けられた別の動画を視聴できる。地点Ａ，Ｂのマーカーは同一の図形でよい。 The user terminal 3 may display a map showing the position where the marker is present as shown in FIG. In the example of FIG. 4, it is shown that the markers are present at the points A and B. When the user shoots the marker at point A, he / she can watch the video associated with the pair of marker and point A, and when he / she shoots the marker at point B, he / she can watch another video associated with the pair of marker and point B. You can watch it. The markers at points A and B may be the same figure.

マーカーと地点Ａの組とマーカーと地点Ｂの組のそれぞれに対して同一の動画を関連付けてもよい。地点Ａ，Ｂのそれぞれで視聴できる動画が同一の場合であっても、サーバ１は、地点Ａと地点Ｂのそれぞれで入力されたコメントを別々に管理する。ユーザは、地点Ａでマーカーを撮影して動画を見る場合は地点Ａで入力されたコメントを見ることができ、地点Ｂでマーカーを撮影して動画を見る場合は地点Ｂで入力されたコメントを見ることができる。 The same moving image may be associated with each of the set of the marker and the point A and the set of the marker and the point B. Even if the moving images that can be viewed at each of the points A and B are the same, the server 1 manages the comments input at each of the points A and B separately. The user can see the comment entered at point A when shooting the marker at point A and watching the video, and the comment entered at point B when shooting the marker at point B and watching the video. You can see it.

ユーザの投稿した投稿コメントそのものをコンテンツとしてもよい。サーバ１は、ユーザ端末３からマーカーと位置情報を受信すると、マーカーと位置情報の組に関連付けて記憶されたコメントをユーザ端末３へ返信する。ユーザは、撮影したマーカーの映像に重畳して表示されるコメントを閲覧できる。ユーザがコメントを投稿すると、サーバ１は受信したコメントをマーカーと位置情報の組に関連付けて記憶する。 The posted comment itself posted by the user may be used as the content. When the server 1 receives the marker and the position information from the user terminal 3, the server 1 returns the comment stored in association with the set of the marker and the position information to the user terminal 3. The user can view the comment displayed superimposed on the image of the captured marker. When the user posts a comment, the server 1 associates the received comment with a marker and a set of location information and stores it.

［サーバとユーザ端末の構成］
次に、本実施形態のサーバ１とユーザ端末３の構成について説明する。 [Server and user terminal configuration]
Next, the configuration of the server 1 and the user terminal 3 of the present embodiment will be described.

図５に示すサーバ１は、受信部１１、画像認識部１２、動画取得部１３、送信部１４、および蓄積部１５を備える。 The server 1 shown in FIG. 5 includes a receiving unit 11, an image recognition unit 12, a moving image acquisition unit 13, a transmitting unit 14, and a storage unit 15.

受信部１１は、ユーザ端末３からマーカー情報と位置情報、並びにコメントを受信する。マーカー情報は、例えば、マーカーを撮影した画像である。位置情報は、ユーザ端末３の位置を示す情報であり、例えば、ユーザ端末３の備えるＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）機能で得られた位置情報である。位置情報は、利用するアプリケーションに応じて任意の精度のものを利用できる。例えば、ユーザ端末３が接続する基地局に基づく位置情報を用いてもよい。受信部１１は、受信したマーカー情報と位置情報を画像認識部１２に渡す。 The receiving unit 11 receives marker information, position information, and comments from the user terminal 3. The marker information is, for example, an image obtained by taking a marker. The position information is information indicating the position of the user terminal 3, and is, for example, the position information obtained by the GPS (Global Positioning System) function provided in the user terminal 3. The location information can be of arbitrary accuracy depending on the application to be used. For example, location information based on the base station to which the user terminal 3 is connected may be used. The receiving unit 11 passes the received marker information and position information to the image recognition unit 12.

受信部１１は、受信したコメントをユーザが視聴中の動画またはマーカーと位置情報の組に関連付けて蓄積部１５に記録する。 The receiving unit 11 records the received comment in the storage unit 15 in association with the moving image or the marker and the set of the position information being viewed by the user.

画像認識部１２は、マーカー情報（ユーザ端末から受信した画像）内の被写体を認識する。認識できた被写体がマーカーとして登録されたものであれば、画像認識部１２は、認識できたマーカーと受信部１１の受信した位置情報の組を動画取得部１３に渡す。事業者は、図形、ポスター、人物、モニュメント、あるいはランドマークなどをマーカーとして事前にサーバ１に登録しておく。サーバ１には、複数種類のマーカーが登録されてもよい。例えば、マーカーごとにＩＤを付与し、画像認識部１２は認識できたマーカーのＩＤを出力する。 The image recognition unit 12 recognizes the subject in the marker information (image received from the user terminal). If the recognized subject is registered as a marker, the image recognition unit 12 passes the set of the recognized marker and the position information received by the reception unit 11 to the moving image acquisition unit 13. The business operator registers a figure, a poster, a person, a monument, a landmark, or the like as a marker in the server 1 in advance. A plurality of types of markers may be registered in the server 1. For example, an ID is assigned to each marker, and the image recognition unit 12 outputs the ID of the recognized marker.

動画取得部１３は、マーカーと位置情報の組が登録されているか否か判定する。マーカーと位置情報の組が登録されていれば、動画取得部１３は、マーカーと位置情報の組に関連付けられた動画を蓄積部１５から取得し、送信部１４へ渡す。事業者は、例えば、マーカーと位置情報の組を蓄積部１５に登録しておき、その組に関連付けて動画を蓄積部１５に格納する。 The moving image acquisition unit 13 determines whether or not a set of the marker and the position information is registered. If the set of the marker and the position information is registered, the moving image acquisition unit 13 acquires the moving image associated with the set of the marker and the position information from the storage unit 15 and passes it to the transmission unit 14. For example, the business operator registers a set of a marker and a position information in the storage unit 15, and stores a moving image in the storage unit 15 in association with the set.

送信部１４は、蓄積部１５から取得した動画をユーザ端末３へ配信する。また、送信部１４は、動画またはマーカーと位置情報の組に関連付けて記録されたコメントを蓄積部１５から取得し、ユーザ端末３へ配信する。 The transmission unit 14 distributes the moving image acquired from the storage unit 15 to the user terminal 3. Further, the transmission unit 14 acquires the comment recorded in association with the moving image or the set of the marker and the position information from the storage unit 15 and distributes it to the user terminal 3.

蓄積部１５は、サーバ１の処理に必要な情報を格納する。例えば、蓄積部１５は、画像認識部１２が画像認識によりマーカーを検出するための情報を保持する。また、蓄積部１５は、マーカーと位置情報の組を保持し、その組に関連付けられた動画を保持する。動画本体ではなく動画へのリンクを保持してもよい。蓄積部１５は、投稿されたコメントを動画またはマーカーと位置情報の組に関連付けて管理する。 The storage unit 15 stores information necessary for processing of the server 1. For example, the storage unit 15 holds information for the image recognition unit 12 to detect a marker by image recognition. Further, the storage unit 15 holds a set of the marker and the position information, and holds a moving image associated with the set. You may keep the link to the video instead of the video itself. The storage unit 15 manages the posted comments in association with a moving image or a set of markers and location information.

図６に示すユーザ端末３は、撮影部３１、位置検出部３２、送信部３３、入力部３４、受信部３５、および表示部３６を備える。ユーザ端末３として、スマートフォンなどの携帯端末を用いることができる。 The user terminal 3 shown in FIG. 6 includes a photographing unit 31, a position detecting unit 32, a transmitting unit 33, an input unit 34, a receiving unit 35, and a display unit 36. As the user terminal 3, a mobile terminal such as a smartphone can be used.

撮影部３１は、マーカーを撮影する。撮影部３１は、例えば、携帯端末のカメラを利用できる。 The photographing unit 31 photographs the marker. The shooting unit 31 can use, for example, a camera of a mobile terminal.

位置検出部３２は、ユーザ端末３の位置を検出する。位置検出部３２は、例えば、携帯端末のＧＰＳ機能を利用できる。 The position detection unit 32 detects the position of the user terminal 3. The position detection unit 32 can use, for example, the GPS function of the mobile terminal.

送信部３３は、撮影部３１の撮影した画像と位置検出部３２の検出した位置情報をサーバ１へ送信する。また、送信部３３は、ユーザの入力したコメントをサーバ１へ送信する。 The transmission unit 33 transmits the image captured by the imaging unit 31 and the position information detected by the position detection unit 32 to the server 1. Further, the transmission unit 33 transmits the comment input by the user to the server 1.

入力部３４は、ユーザからコメントを入力する。 The input unit 34 inputs a comment from the user.

受信部３５は、サーバ１から動画とコメントを受信する。 The receiving unit 35 receives a moving image and a comment from the server 1.

表示部３６は、サーバ１から受信した動画とコメントを表示する。 The display unit 36 displays the moving image and the comment received from the server 1.

サーバ１およびユーザ端末３が備える各部は、演算処理装置、記憶装置等を備えたコンピュータにより構成して、各部の処理がプログラムによって実行されるものとしてもよい。このプログラムはサーバ１およびユーザ端末３が備える記憶装置に記憶されており、磁気ディスク、光ディスク、半導体メモリ等の記録媒体に記録することも、ネットワークを通して提供することも可能である。 Each part included in the server 1 and the user terminal 3 may be configured by a computer provided with an arithmetic processing unit, a storage device, and the like, and the processing of each part may be executed by a program. This program is stored in a storage device included in the server 1 and the user terminal 3, and can be recorded on a recording medium such as a magnetic disk, an optical disk, or a semiconductor memory, or can be provided through a network.

なお、上記では、サーバ１が画像認識処理を行って画像からマーカーを検出したが、ユーザ端末３が画像認識処理を行ってマーカーを検出してもよい。この場合、ユーザ端末３は、検出したマーカーのＩＤを位置情報とともに送信する。また、ユーザ端末３は、撮影した画像を加工したものをマーカー情報として送信してもよい。例えば、ユーザ端末３は、画像からマーカーの存在する部分を切り取ったもの、あるいは画像の情報量を削減したものをマーカー情報として送信してもよい。 In the above, the server 1 performs the image recognition process to detect the marker from the image, but the user terminal 3 may perform the image recognition process to detect the marker. In this case, the user terminal 3 transmits the ID of the detected marker together with the position information. Further, the user terminal 3 may transmit a processed image as marker information. For example, the user terminal 3 may transmit a marker information obtained by cutting out a portion of the image in which the marker is present or reducing the amount of information in the image.

なお、一つの位置情報が示す場所に複数のマーカーが付与されていたり、近接する複数の位置情報のそれぞれにマーカーが付与されていたりしてもよい。例えば、ユーザ端末３の撮影した画像内から複数のマーカーを検出できた場合、ユーザ端末３はユーザからコンテンツを表示するマーカーの選択を受け付け、選択されたマーカーに関連付けられたコンテンツの配信を受けて表示してもよいし、複数のマーカーのそれぞれに関連付けられた全てのコンテンツの配信を受けて表示してもよい。あるいは、サーバ１またはユーザ端末３が、ユーザが過去に閲覧したことのあるマーカーを選択してもよいし、ユーザの属性や履歴情報に基づいてマーカーを選択してもよい。 In addition, a plurality of markers may be attached to the place indicated by one position information, or a marker may be attached to each of a plurality of adjacent position information. For example, if a plurality of markers can be detected in the image taken by the user terminal 3, the user terminal 3 accepts the user to select a marker for displaying the content, and receives the distribution of the content associated with the selected marker. It may be displayed, or it may be displayed after receiving the delivery of all the contents associated with each of the plurality of markers. Alternatively, the server 1 or the user terminal 3 may select a marker that the user has browsed in the past, or may select a marker based on the user's attribute or history information.

［サーバとユーザ端末の動作］
次に、本実施形態のサーバ１とユーザ端末３の動作について説明する。 [Operation of server and user terminal]
Next, the operations of the server 1 and the user terminal 3 of the present embodiment will be described.

図７のフローチャートを参照し、サーバ１の動作について説明する。 The operation of the server 1 will be described with reference to the flowchart of FIG.

ステップＳ１１にて、サーバ１は、画像と位置情報を受信する。 In step S11, the server 1 receives the image and the position information.

ステップＳ１２にて、サーバ１は、受信した画像の認識処理を行う。 In step S12, the server 1 performs the recognition processing of the received image.

ステップＳ１３にて、サーバ１は、画像認識により得られたマーカーと位置情報の組が登録されているか否か判定する。マーカーと位置情報の組が登録されていない場合は処理を終了する。また、画像認識によりマーカーが得られなかった場合も処理を終了する。処理を終了する際、サーバ１は、マーカーや位置情報の登録がないことを返信してもよい。 In step S13, the server 1 determines whether or not the set of the marker and the position information obtained by the image recognition is registered. If the set of marker and position information is not registered, the process ends. Also, if the marker cannot be obtained by image recognition, the process is terminated. At the end of the process, the server 1 may reply that there is no marker or location information registered.

ステップＳ１４にて、サーバ１は、マーカーと位置情報の組に関連付けられた動画およびコメントを送信する。 In step S14, the server 1 transmits a moving image and a comment associated with the marker and the set of location information.

ステップＳ１５にて、サーバ１は、送信した動画に対するコメントを受信した場合、ステップＳ１６にて、サーバ１は、受信したコメントを動画に関連付けて記憶する。 When the server 1 receives a comment for the transmitted moving image in step S15, the server 1 stores the received comment in association with the moving image in step S16.

図８のフローチャートを参照し、ユーザ端末３の動作について説明する。 The operation of the user terminal 3 will be described with reference to the flowchart of FIG.

ステップＳ２１にて、ユーザ端末３は、画像と位置情報を送信する。 In step S21, the user terminal 3 transmits an image and position information.

ステップＳ２２にて、ユーザ端末３は、動画とコメントを受信する。ステップＳ２１で送信した画像にマーカーが含まれていない場合、または画像から検出されたマーカーと位置情報が登録されていない場合は、ユーザ端末３は、その旨の通知を受信し、処理を終了する。 In step S22, the user terminal 3 receives the moving image and the comment. If the image transmitted in step S21 does not contain a marker, or if the marker and position information detected from the image are not registered, the user terminal 3 receives a notification to that effect and ends the process. ..

ステップＳ２３にて、ユーザ端末３は、動画を表示する。 In step S23, the user terminal 3 displays a moving image.

ステップＳ２４にて、ユーザ端末３は、ユーザからコメントを入力した場合、ステップＳ２５にて、ユーザ端末３は、入力したコメントを送信する。 When the user terminal 3 inputs a comment from the user in step S24, the user terminal 3 transmits the input comment in step S25.

［利用例］
次に、本実施形態のコンテンツ配信システムの利用例について説明する。 [Usage example]
Next, an example of using the content distribution system of the present embodiment will be described.

コンテンツ配信システムをストリートライブ配信に利用する例について説明する。例えば、コンテンツとして生放送番組（ライブ配信）を準備しておき、マーカーと位置情報の組に生放送番組を関連付けておく。街中のいくつかの場所（１箇所でもよい）にマーカーを配置する。マーカーとして生放送番組を告知するポスターを利用できる。既存の被写体をマーカーとして登録してもよい。生放送番組の配信中に、ユーザ端末３でマーカーを撮影してサーバ１へ送信すると、ユーザ端末３に生放送番組が配信されて、ユーザは、ストリートライブ風に生放送番組を閲覧できる。ライブ配信前は、コンテンツとして予告動画を配信してもよいし、ライブ配信後は、コンテンツとしてライブ配信を録画したタイムシフト動画を配信してもよい。 An example of using the content distribution system for street live distribution will be described. For example, a live broadcast program (live distribution) is prepared as content, and the live broadcast program is associated with a set of a marker and location information. Place markers in several places (or even one) in the city. A poster announcing a live program can be used as a marker. An existing subject may be registered as a marker. When the marker is photographed by the user terminal 3 and transmitted to the server 1 during the distribution of the live broadcast program, the live broadcast program is distributed to the user terminal 3 and the user can browse the live broadcast program in a street live style. Before the live distribution, the preview video may be distributed as the content, and after the live distribution, the time-shifted video recorded with the live distribution may be distributed as the content.

ユーザは、生放送番組を閲覧しながらコメントを投稿できる。サーバ１は、マーカーと位置情報の組ごと、つまり場所ごとにコメントを管理する。マーカーを撮影して現地で生放送番組を閲覧する方法に加えて、場所を問わずに生放送番組を閲覧できるようにした場合、つまり、自宅でもインターネット経由で生放送番組を閲覧できるようにした場合、サーバ１は、投稿場所を問わないコメントと現地で投稿されたコメントとを区別できるように管理する。サーバ１は、現地で投稿されたコメントは、現地で閲覧しているユーザ端末３のみに配信してもよいし、現地で投稿されたコメントとして区別できる態様で全ユーザに配信してもよい。生放送番組が複数のマーカーと位置情報の組に関連付けられている場合、つまり、複数の場所にマーカーが設置されている場合、場所ごとにコメントを管理し、同じ場所内のユーザ端末３のみにコメントを配信してもよいし、場所ごとのコメントが区別できる態様で全てのユーザ端末３に配信してもよい。 Users can post comments while viewing live programs. The server 1 manages comments for each set of marker and location information, that is, for each location. In addition to the method of shooting a marker and viewing a live program locally, if you make it possible to view a live program anywhere, that is, if you make it possible to view a live program at home via the Internet, the server 1 manages comments regardless of the posting location so that comments posted locally can be distinguished. The server 1 may distribute the comment posted locally to only the user terminal 3 browsing locally, or may distribute the comment posted locally to all users in a manner that can be distinguished as a comment posted locally. When a live broadcast program is associated with a plurality of markers and a set of location information, that is, when markers are installed in a plurality of places, comments are managed for each place and comments are made only to the user terminal 3 in the same place. May be delivered, or may be delivered to all user terminals 3 in a manner in which comments for each location can be distinguished.

コンテンツ配信システムを道案内に利用する例について説明する。例えば、イベントの開催を告知するポスターをマーカーとする。サーバ１は、ポスターと位置情報の組にその位置からイベント会場までの道順の情報を関連付けて登録しておく。ユーザが街に貼られたポスターを撮影すると、ポスターの画像と位置情報がサーバ１へ送信され、ポスターを撮影した位置からイベント会場までの道順がサーバ１から返信されて、ユーザ端末３に表示される。例えば、ユーザ端末３は、撮影した映像に矢印のオブジェクトを重畳させてイベント会場の方向を示す。貼る場所ごとにポスターを変えなくても、ポスターと位置情報の組でユーザの現在位置がわかる。同様に、電柱広告の病院のマークをマーカーとし、広告と位置情報の組のそれぞれにその位置からの道順を示す情報をコンテンツとして関連付けてもよい。ユーザは、病院のマークを撮影するだけで、道順を知ることができる。また、コメントを投稿できるようにしておくと、病院の評判を知ったり、投稿できたりする。 An example of using the content distribution system for directions will be described. For example, a poster announcing the holding of an event is used as a marker. The server 1 registers the information of the route from the position to the event venue in association with the set of the poster and the position information. When the user shoots a poster affixed to the city, the image of the poster and the location information are sent to the server 1, and the route from the position where the poster was shot to the event venue is returned from the server 1 and displayed on the user terminal 3. To. For example, the user terminal 3 superimposes an arrow object on the captured image to indicate the direction of the event venue. Even if you do not change the poster for each place to put it, you can know the current position of the user from the set of poster and location information. Similarly, the hospital mark of the telephone pole advertisement may be used as a marker, and information indicating directions from the position may be associated with each of the advertisement and the location information set as the content. The user can know the directions just by taking a picture of the hospital mark. Also, if you can post comments, you can know the reputation of the hospital and post it.

コンテンツ配信システムをお店の紹介および評判に利用する例について説明する。お店の入り口にマーカーとなるステッカーを貼っておき、マーカーと位置情報の組にお店の情報を登録しておく。ステッカーは全てのお店で共通のものでよい。ユーザ端末３でマーカーを撮影すると、サーバ１からマーカーと位置情報に対応したお店の紹介が返信されて表示される。ユーザ端末３は、ユーザの投稿したコメントを表示してもよい。投稿されたコメントは、少なくとも現地に来たユーザのコメントであるので、より信頼できるコメントである。 An example of using the content distribution system for store introduction and reputation will be explained. Put a sticker that will be a marker at the entrance of the store, and register the store information in the set of marker and location information. The sticker may be the same for all shops. When the marker is photographed by the user terminal 3, the server 1 returns and displays the introduction of the shop corresponding to the marker and the location information. The user terminal 3 may display a comment posted by the user. The posted comments are at least the comments of the users who came to the site, so they are more reliable comments.

コンテンツ配信システムを電子的なスタンプラリーに利用する例について説明する。例えば、鉄道会社のマークをマーカーとして登録しておく。スタンプラリーのポスターをマーカーとして登録してもよい。マーカーと各駅の位置情報の組に各駅のスタンプを関連付けておく。ユーザは、各駅で鉄道会社のマークもしくはポスターを撮影するとその駅のスタンプを取得できる。例えば、サーバ１から駅のスタンプの情報からユーザ端末３へ送信されて、ユーザ端末３では、アプリ内のスタンプ手帳にその駅のスタンプが記録される。 An example of using the content distribution system for an electronic stamp rally will be described. For example, the railway company mark is registered as a marker. A stamp rally poster may be registered as a marker. Associate the stamp of each station with the set of the marker and the location information of each station. The user can obtain the stamp of the station by taking a picture of the railway company's mark or poster at each station. For example, the information of the stamp of the station is transmitted from the server 1 to the user terminal 3, and the stamp of the station is recorded in the stamp notebook in the application on the user terminal 3.

図９に示すように、ランドマークをマーカーとした場合、位置情報は、ランドマークを基準とした方角で指定してもよいし、ランドマークからの距離で指定してもよい。サーバ１は、方角または距離ごとに区切られた位置のそれぞれでコメントを管理する。 As shown in FIG. 9, when the landmark is used as a marker, the position information may be specified in the direction with respect to the landmark or may be specified by the distance from the landmark. The server 1 manages comments at each of the positions separated by direction or distance.

［ユーザがマーカーを登録］
上記では、事業者がマーカーおよびマーカーと位置情報を登録した例で説明した。以下では、図１０のフローチャートを参照し、ユーザがマーカーと位置情報を登録する例について説明する。 [User registers marker]
In the above, the example described in which the operator registered the marker and the marker and the position information. Hereinafter, an example in which the user registers the marker and the position information will be described with reference to the flowchart of FIG.

ユーザは、登録したい位置においてマーカーを撮影する。ユーザ端末３は、マーカーを撮影した画像と位置情報の組の登録要求をサーバ１へ送信する。ユーザ端末３は、マーカーと位置情報の組に関連付けるコンテンツを送信してもよい。 The user shoots the marker at the position to be registered. The user terminal 3 transmits a registration request for a set of a photographed image of a marker and position information to the server 1. The user terminal 3 may transmit the content associated with the set of the marker and the position information.

ステップＳ３１にて、サーバ１は、登録要求を受信する。 In step S31, the server 1 receives the registration request.

ステップＳ３２にて、サーバ１は、画像認識処理によって画像からマーカーを検出し、マーカーと位置情報の組を登録する。サーバ１は、画像からマーカーが検出できないときは、画像内の被写体を新たなマーカーとして登録してもよいし、マーカーが検出できないエラーをユーザ端末３へ返却してもよい。 In step S32, the server 1 detects the marker from the image by the image recognition process and registers the set of the marker and the position information. When the marker cannot be detected from the image, the server 1 may register the subject in the image as a new marker, or may return an error in which the marker cannot be detected to the user terminal 3.

ステップＳ３３にて、サーバ１は、ステップＳ３２で登録したマーカーと位置情報の組にコンテンツを紐付けて管理する。 In step S33, the server 1 manages the content by associating it with the set of the marker and the position information registered in step S32.

例えば、人物がマーカーとして登録されていた場合、ユーザは、街に設置された看板を撮影し、マーカーとして登録された人物が写る看板であれば、その位置と人物の組を登録し、その組に対してコメントを投稿できる。新たに登録されたマーカーと位置情報の組は、図４で示したマップに表示してもよい。その後、他のユーザがその看板を撮影すると投稿されたコメントを閲覧でき、新たなコメントを投稿できる。 For example, when a person is registered as a marker, the user takes a picture of a signboard installed in the city, and if the signboard shows the person registered as a marker, the user registers the position and the set of people, and the set. You can post a comment to. The newly registered marker and position information set may be displayed on the map shown in FIG. After that, when another user shoots the signboard, the posted comment can be viewed and a new comment can be posted.

以上説明したように、本実施形態のコンテンツ配信システムは、コンテンツを配信するサーバ１とコンテンツを視聴するためのユーザ端末３を備える。サーバ１は、マーカーと位置情報の組にコンテンツを関連付けて保持する蓄積部１５と、マーカー情報と位置情報を受信する受信部１１と、マーカー情報の示すマーカーと位置情報の組を蓄積部１５から検索し、当該マーカーと位置情報の組に関連付けられたコンテンツを取得する動画取得部１３と、マーカーと位置情報の組に関連付けられたコンテンツを送信する送信部１４を有する。ユーザ端末３は、画像を撮影する撮影部３１と、当該ユーザ端末３の位置情報を取得する位置検出部３２と、画像から得られるマーカー情報と位置情報を送信する送信部３３と、マーカー情報の示すマーカーと位置情報の組に関連付けられたコンテンツを受信する受信部３５と、コンテンツを表示する表示部３６を有する。これにより、所定の位置で所定のマーカーを撮影したときに、コンテンツを利用することができ、位置情報に基づく様々なコンテンツを提供できる。 As described above, the content distribution system of the present embodiment includes a server 1 for distributing the content and a user terminal 3 for viewing the content. The server 1 stores the storage unit 15 that holds the content associated with the marker and the position information set, the reception unit 11 that receives the marker information and the position information, and the marker and the position information set indicated by the marker information from the storage unit 15. It has a moving image acquisition unit 13 that searches and acquires the content associated with the marker and the position information set, and a transmission unit 14 that transmits the content associated with the marker and the position information set. The user terminal 3 includes a shooting unit 31 that captures an image, a position detection unit 32 that acquires the position information of the user terminal 3, a transmission unit 33 that transmits marker information and position information obtained from the image, and marker information. It has a receiving unit 35 for receiving the content associated with the set of the marker and the position information, and a display unit 36 for displaying the content. As a result, when a predetermined marker is photographed at a predetermined position, the content can be used and various contents based on the position information can be provided.

１…サーバ
１１…受信部
１２…画像認識部
１３…動画取得部
１４…送信部
１５…蓄積部
３…ユーザ端末
３１…撮影部
３２…位置検出部
３３…送信部
３４…入力部
３５…受信部
３６…表示部 1 ... Server 11 ... Reception unit 12 ... Image recognition unit 13 ... Video acquisition unit 14 ... Transmission unit 15 ... Storage unit 3 ... User terminal 31 ... Imaging unit 32 ... Position detection unit 33 ... Transmission unit 34 ... Input unit 35 ... Reception unit 36 ... Display unit

Claims (8)

コンテンツを配信するサーバであって、
マーカーと位置情報の組にコンテンツを関連付けて保持する蓄積部と、
マーカー情報と位置情報を受信する受信部と、
前記マーカー情報の示すマーカーと位置情報の組を前記蓄積部から検索し、当該マーカーと位置情報の組に関連付けられたコンテンツを取得する取得部と、
前記マーカーと位置情報の組に関連付けられたコンテンツを送信する送信部を有し、
前記受信部は、前記コンテンツに対するコメントを受信し、
前記蓄積部は、前記コンテンツに対して投稿されたコメントを前記マーカーと位置情報の組ごとに保持し、
前記送信部は、前記マーカーと位置情報の組に関連付けられたコメントを送信し、
前記マーカーは、複数の場所に設置された同じ図形、ポスター、または看板の人物のいずれかである
サーバ。 A server that delivers content
A storage unit that associates and holds content with a set of markers and location information,
A receiver that receives marker information and location information,
An acquisition unit that searches the storage unit for a set of a marker and a position information indicated by the marker information and acquires content associated with the set of the marker and the position information.
It has a transmitter that transmits content associated with the marker and location pair.
The receiving unit receives a comment on the content and receives a comment.
The storage unit holds comments posted for the content for each set of the marker and location information.
The transmitter transmits a comment associated with the marker and location pair.
The marker is a server that is either the same figure, poster, or signboard person installed in multiple locations. 請求項１に記載のサーバであって、
前記マーカー情報はマーカーとして登録された図形、ポスター、または人物を含む画像であって、当該画像を画像認識処理して前記マーカーを検出する画像認識部を備える
サーバ。 The server according to claim 1.
The marker information is an image including a figure, a poster, or a person registered as a marker, and is a server including an image recognition unit that performs image recognition processing on the image and detects the marker. コンテンツを視聴するための端末であって、
画像を撮影する撮影部と、
当該端末の位置情報を取得する位置検出部と、
前記画像から得られるマーカー情報と前記位置情報を送信する送信部と、
前記マーカー情報の示すマーカーと前記位置情報の組に関連付けられたコンテンツを受信する受信部と、
前記コンテンツを表示する表示部を有し、
前記送信部は、前記コンテンツに対するコメントを送信し、
前記受信部は、前記マーカーと位置情報の組に関連付けられたコメントを受信し、
前記表示部は、受信した前記コメントを表示し、
前記マーカーは、複数の場所に設置された同じ図形、ポスター、または看板の人物のいずれかである
端末。 A terminal for viewing content,
The shooting department that shoots images and
The position detection unit that acquires the position information of the terminal and
A transmission unit that transmits the marker information obtained from the image and the position information,
A receiver that receives content associated with the marker indicated by the marker information and the set of position information, and a receiver.
It has a display unit that displays the content, and has a display unit.
The transmitter sends a comment on the content and
The receiver receives the comment associated with the marker and location pair and receives the comment.
The display unit displays the received comment and displays the comment.
The marker is a terminal that is either a person on the same figure, poster, or signboard installed in multiple locations. 請求項３に記載の端末であって、
前記表示部は、前記画像から得られるマーカー情報を基準として、前記コンテンツを前記撮影部の撮影した画像に重畳させて表示する
端末。 The terminal according to claim 3.
The display unit is a terminal that superimposes and displays the content on the image captured by the imaging unit based on the marker information obtained from the image. 請求項３または４に記載の端末であって、
前記コンテンツは動画であり、
前記受信部は、前記動画に対して投稿されたコメントを受信し、
前記表示部は、前記動画の一端から他端へ向けて移動し、他端で消失するように前記コメントを表示する
端末。 The terminal according to claim 3 or 4.
The content is a video
The receiver receives the comment posted for the video and receives the comment.
The display unit is a terminal that moves from one end to the other end of the moving image and displays the comment so as to disappear at the other end. コンテンツを配信する配信システムであって、
コンテンツを配信するサーバと前記コンテンツを視聴するための端末を備え、
前記サーバは、
マーカーと位置情報の組にコンテンツを関連付けて保持する蓄積部と、
マーカー情報と位置情報を受信する受信部と、
前記マーカー情報の示すマーカーと位置情報の組を前記蓄積部から検索し、当該マーカーと位置情報の組に関連付けられたコンテンツを取得する取得部と、
前記マーカーと位置情報の組に関連付けられたコンテンツを送信する送信部を有し、
前記受信部は、前記コンテンツに対するコメントを受信し、
前記蓄積部は、前記コンテンツに対して投稿されたコメントを前記マーカーと位置情報の組ごとに保持し、
前記送信部は、前記マーカーと位置情報の組に関連付けられたコメントを送信し、
前記端末は、
画像を撮影する撮影部と、
当該端末の位置情報を取得する位置検出部と、
前記画像から得られるマーカー情報と前記位置情報を送信する端末送信部と、
前記マーカー情報の示すマーカーと前記位置情報の組に関連付けられたコンテンツを受信する端末受信部と、
前記コンテンツを表示する表示部を有し、
前記端末送信部は、前記コンテンツに対するコメントを送信し、
前記端末受信部は、前記マーカーと位置情報の組に関連付けられたコメントを受信し、
前記表示部は、受信した前記コメントを表示し、
前記マーカーは、複数の場所に設置された同じ図形、ポスター、または看板の人物のいずれかである
配信システム。 It is a distribution system that distributes content.
It is equipped with a server that distributes content and a terminal for viewing the content.
The server
A storage unit that associates and holds content with a set of markers and location information,
A receiver that receives marker information and location information,
An acquisition unit that searches the storage unit for a set of a marker and a position information indicated by the marker information and acquires content associated with the set of the marker and the position information.
It has a transmitter that transmits content associated with the marker and location pair.
The receiving unit receives a comment on the content and receives a comment.
The storage unit holds comments posted for the content for each set of the marker and location information.
The transmitter transmits a comment associated with the marker and location pair.
The terminal is
The shooting department that shoots images and
The position detection unit that acquires the position information of the terminal and
A terminal transmitter that transmits the marker information obtained from the image and the position information,
A terminal receiving unit that receives content associated with the marker indicated by the marker information and the set of position information, and a terminal receiving unit.
It has a display unit that displays the content, and has a display unit.
The terminal transmission unit transmits a comment for the content, and the terminal transmission unit transmits the comment.
The terminal receiving unit receives the comment associated with the marker and the set of location information, and receives the comment.
The display unit displays the received comment and displays the comment.
The marker is either a person on the same figure, poster, or signboard placed in multiple locations. コンテンツを配信するサーバが実行する配信方法であって、
マーカー情報と位置情報を受信するステップと、
前記マーカー情報の示すマーカーと位置情報の組をマーカーと位置情報の組にコンテンツを関連付けて保持する蓄積部から検索し、当該マーカーと位置情報の組に関連付けられたコンテンツを取得するステップと、
前記マーカーと位置情報の組に関連付けられたコンテンツを送信するステップと、
前記コンテンツに対するコメントを受信するステップと、
前記コンテンツに対して投稿されたコメントを前記マーカーと位置情報の組ごとに前記蓄積部に格納するステップと、
前記マーカーと位置情報の組に関連付けられた前記コンテンツとコメントを送信するステップを有し、
前記マーカーは、複数の場所に設置された同じ図形、ポスター、または看板の人物のいずれかである
配信方法。 It is a delivery method executed by the server that delivers the content.
Steps to receive marker information and location information,
A step of searching the storage unit that retains the marker and position information set indicated by the marker information by associating the content with the marker and position information set, and acquiring the content associated with the marker and position information set.
The step of transmitting the content associated with the marker and the set of location information, and
The step of receiving a comment on the content and
A step of storing the comment posted for the content in the storage unit for each set of the marker and the position information, and
It has a step of transmitting the content and a comment associated with the marker and location pair.
The marker is either a person on the same figure, poster, or signboard placed in multiple locations. Delivery method. コンテンツを視聴するための端末が実行する情報処理方法であって、
画像を撮影するステップと、
当該端末の位置情報を取得するステップと、
前記画像と前記位置情報を送信するステップと、
前記画像から検出されるマーカーと前記位置情報の組に関連付けられたコンテンツを受信するステップと、
前記コンテンツを表示するステップと、
前記コンテンツに対するコメントを送信するステップと、
前記マーカーと位置情報の組に関連付けられたコメントを受信するステップと、
受信した前記コメントを表示するステップを有し、
前記マーカーは、複数の場所に設置された同じ図形、ポスター、または看板の人物のいずれかである
情報処理方法。 It is an information processing method executed by the terminal for viewing content.
The steps to take an image and
Steps to acquire the location information of the terminal and
The step of transmitting the image and the position information, and
A step of receiving content associated with a marker detected from the image and the location information set, and
And displaying the content,
The step of sending a comment on the content and
The step of receiving the comment associated with the marker and location pair, and
It has a step to display the received comment.
The marker is an information processing method that is either a person of the same figure, poster, or signboard installed in a plurality of places.
JP2020110498A 2020-06-26 2020-06-26 Servers, terminals, distribution systems, distribution methods, and information processing methods Active JP6982659B1 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2020110498A JP6982659B1 (en) 2020-06-26 2020-06-26 Servers, terminals, distribution systems, distribution methods, and information processing methods
JP2021164629A JP7465856B2 (en) 2020-06-26 2021-10-06 Server, terminal, distribution system, distribution method, information processing method, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2020110498A JP6982659B1 (en) 2020-06-26 2020-06-26 Servers, terminals, distribution systems, distribution methods, and information processing methods

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2021164629A Division JP7465856B2 (en) 2020-06-26 2021-10-06 Server, terminal, distribution system, distribution method, information processing method, and program

Publications (2)

Publication Number Publication Date
JP6982659B1 true JP6982659B1 (en) 2021-12-17
JP2022020079A JP2022020079A (en) 2022-02-01

Family

ID=79169999

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2020110498A Active JP6982659B1 (en) 2020-06-26 2020-06-26 Servers, terminals, distribution systems, distribution methods, and information processing methods
JP2021164629A Active JP7465856B2 (en) 2020-06-26 2021-10-06 Server, terminal, distribution system, distribution method, information processing method, and program

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2021164629A Active JP7465856B2 (en) 2020-06-26 2021-10-06 Server, terminal, distribution system, distribution method, information processing method, and program

Country Status (1)

Country Link
JP (2) JP6982659B1 (en)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7189407B1 (en) 2022-05-30 2022-12-14 Kddi株式会社 Information processing device, information processing method and program
JP7174968B1 (en) 2022-07-04 2022-11-18 検Ｎｅｔ株式会社 Image management system and image management method
JP7364808B1 (en) 2023-01-27 2023-10-18 Kddi株式会社 Information processing device, information processing method and program

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006048672A (en) * 1995-12-22 2006-02-16 Sony Corp Terminal, information retrieval system and information retrieval method
JP2015114996A (en) * 2013-12-13 2015-06-22 富士通株式会社 Information providing device, method and system
JP2015207219A (en) * 2014-04-22 2015-11-19 富士通株式会社 Display device, position specification program, and position specification method
JP2015211363A (en) * 2014-04-28 2015-11-24 富士通株式会社 Display control device, display control method and display control program
JP2016039599A (en) * 2014-08-11 2016-03-22 セイコーエプソン株式会社 Head mounted display, information system, control method for head mounted display, and computer program
JP2016162079A (en) * 2015-02-27 2016-09-05 富士通株式会社 Display control method, display control program, and information processing apparatus
JP2019163998A (en) * 2018-03-19 2019-09-26 株式会社Ｌｉｆｕｌｌ Information provision system, server device, and information provision method
JP2019527437A (en) * 2016-09-29 2019-09-26 ベイジン バイドゥ ネットコム サイエンス テクノロジー カンパニー リミテッド Location sharing method, location sharing apparatus, and location sharing system
JP2020034350A (en) * 2018-08-28 2020-03-05 トヨタ自動車株式会社 Image processing device
JP2020087429A (en) * 2019-07-17 2020-06-04 株式会社ドワンゴ Video synthesizer, method for synthesizing video, and video synthesizing program
JP2020098568A (en) * 2018-10-03 2020-06-25 株式会社エム・ソフト Information management device, information management system, information management method, and information management program

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009043006A (en) 2007-08-08 2009-02-26 Ntt Docomo Inc Peripheral information providing system, server and peripheral information providing method
EP2471281B1 (en) 2009-08-24 2020-10-28 Samsung Electronics Co., Ltd. Mobile image capture device
JP5651372B2 (en) 2010-05-18 2015-01-14 株式会社Ｎｔｔドコモ Post information control apparatus, post information control system, and post information control method

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006048672A (en) * 1995-12-22 2006-02-16 Sony Corp Terminal, information retrieval system and information retrieval method
JP2015114996A (en) * 2013-12-13 2015-06-22 富士通株式会社 Information providing device, method and system
JP2015207219A (en) * 2014-04-22 2015-11-19 富士通株式会社 Display device, position specification program, and position specification method
JP2015211363A (en) * 2014-04-28 2015-11-24 富士通株式会社 Display control device, display control method and display control program
JP2016039599A (en) * 2014-08-11 2016-03-22 セイコーエプソン株式会社 Head mounted display, information system, control method for head mounted display, and computer program
JP2016162079A (en) * 2015-02-27 2016-09-05 富士通株式会社 Display control method, display control program, and information processing apparatus
JP2019527437A (en) * 2016-09-29 2019-09-26 ベイジン バイドゥ ネットコム サイエンス テクノロジー カンパニー リミテッド Location sharing method, location sharing apparatus, and location sharing system
JP2019163998A (en) * 2018-03-19 2019-09-26 株式会社Ｌｉｆｕｌｌ Information provision system, server device, and information provision method
JP2020034350A (en) * 2018-08-28 2020-03-05 トヨタ自動車株式会社 Image processing device
JP2020098568A (en) * 2018-10-03 2020-06-25 株式会社エム・ソフト Information management device, information management system, information management method, and information management program
JP2020087429A (en) * 2019-07-17 2020-06-04 株式会社ドワンゴ Video synthesizer, method for synthesizing video, and video synthesizing program

Also Published As

Publication number Publication date
JP2022020079A (en) 2022-02-01
JP7465856B2 (en) 2024-04-11
JP2022008888A (en) 2022-01-14

Similar Documents

Publication Publication Date Title
JP6982659B1 (en) Servers, terminals, distribution systems, distribution methods, and information processing methods
JP4236372B2 (en) Spatial information utilization system and server system
US20180234614A1 (en) Timing system and method with integrated participant event image capture management services
US8416309B2 (en) Camera-fitted information retrieval device
JP4861105B2 (en) Spatial bulletin board system
US8880718B2 (en) Geo-location video archive system and method
US9928298B2 (en) Geo-location video archive system and method
KR20140143777A (en) Method of communication and of information in augmented reality
CN103377268B (en) System for carrying out target identification and event reproduction by using post-set data
JP4680937B2 (en) Sharing meta information media files
JP5651372B2 (en) Post information control apparatus, post information control system, and post information control method
KR20160009686A (en) Argument reality content screening method, apparatus, and system
US20110055769A1 (en) System and method for providing three-dimensional location image
KR20120126529A (en) ANALYSIS METHOD AND SYSTEM OF CORRELATION BETWEEN USERS USING Exchangeable Image File Format
JP2013219666A (en) Information sharing system, collation device, terminal, information sharing method and program
JP2015018421A (en) Terminal device, contribution information transmission method, contribution information transmission program, and contribution information sharing system
WO2018103544A1 (en) Method and device for presenting service object data in image
KR20110094970A (en) Method and apparatus for managing tag of multimedia content
KR102168110B1 (en) Camera system
JP4669168B2 (en) How to create map image data
JP2014160963A (en) Image processing device and program
KR101461590B1 (en) Method for Providing Multimedia Contents based on Location
KR100596381B1 (en) Apparatus for providing information using user-located position image and Method thereof
KR20150125776A (en) Apparatus and method for providing message based object
KR20100073830A (en) Method for moving picture geo-tagging using electronic map and system thereof

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200626

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20200626

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20200901

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20201013

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20201201

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210224

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210419

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20210713

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211006

C60 Trial request (containing other claim documents, opposition documents)

Free format text: JAPANESE INTERMEDIATE CODE: C60

Effective date: 20211006

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20211015

C21 Notice of transfer of a case for reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C21

Effective date: 20211019

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20211116

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20211119

R150 Certificate of patent or registration of utility model

Ref document number: 6982659

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250