JP5592919B2 - Signage terminal and signage system - Google Patents

Signage terminal and signage system Download PDF

Info

Publication number
JP5592919B2
JP5592919B2 JP2012195970A JP2012195970A JP5592919B2 JP 5592919 B2 JP5592919 B2 JP 5592919B2 JP 2012195970 A JP2012195970 A JP 2012195970A JP 2012195970 A JP2012195970 A JP 2012195970A JP 5592919 B2 JP5592919 B2 JP 5592919B2
Authority
JP
Japan
Prior art keywords
support effect
viewer
information
signage terminal
signage
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2012195970A
Other languages
Japanese (ja)
Other versions
JP2014052770A (en
Inventor
克人 望月
雅法 三部
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba TEC Corp
Original Assignee
Toshiba TEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba TEC Corp filed Critical Toshiba TEC Corp
Priority to JP2012195970A priority Critical patent/JP5592919B2/en
Publication of JP2014052770A publication Critical patent/JP2014052770A/en
Application granted granted Critical
Publication of JP5592919B2 publication Critical patent/JP5592919B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明の実施形態は、サイネージ端末およびサイネージシステムに関する。   Embodiments described herein relate generally to a signage terminal and a signage system.

広告、イベント、お知らせ等のコンテンツを不特定者に提示する仕組みとして、表示装置等のサイネージ端末にデジタル化されたコンテンツを表示再生させる情報表示システム、いわゆるデジタルサイネージシステムが知られている。   As a mechanism for presenting content such as advertisements, events, and notifications to unspecified persons, an information display system that displays and reproduces digitized content on a signage terminal such as a display device, a so-called digital signage system is known.

このようなデジタルサイネージシステムにおいては、サイネージ端末の前で立ち止まった閲覧者の属性の判断を行い、判断結果に応じてコンテンツを選択するようにしているものがある。   In such a digital signage system, there is a system in which an attribute of a viewer who stops in front of a signage terminal is determined and content is selected according to the determination result.

しかしながら、従来のデジタルサイネージシステムでは、サイネージ端末の前で立ち止まった閲覧者に対して効果的なコンテンツ表示による広告等を提供することはできるが、再生コンテンツの表示態様によっては閲覧者にとって閲覧(視聴)しにくい表示態様となっている場合があり、サイネージ効果が軽減されてしまう状況が生まれていた。   However, the conventional digital signage system can provide advertisements and the like by effective content display to the viewer who stops in front of the signage terminal. However, depending on the display mode of the playback content, the viewer can view (view or watch). ) The display mode may be difficult to display, and the signage effect has been reduced.

実施形態のサイネージ端末は、再生コンテンツ取得手段と、情報入力手段と、閲覧者属性判定手段と、支援効果の付与の実行の指示を受け付ける手段と、支援効果付与手段と、を備える。前記再生コンテンツ取得手段は、再生するコンテンツデータを取得する。前記情報入力手段は、所定の範囲内にいる閲覧者の情報を入力する。前記閲覧者属性判定手段は、前記情報入力手段により入力された前記閲覧者の情報に基づき当該閲覧者の属性を判定する。前記支援効果の付与の実行の指示を受け付ける手段は、前記閲覧者属性判定手段で判定した閲覧者属性に基づき支援効果データベースに蓄積される支援効果データから支援効果を決定して、当該支援効果の付与の実行の指示を受け付ける。前記支援効果付与手段は、前記コンテンツデータに対して付与する前記支援効果の決定後、当該支援効果の付与の実行の指示があった場合に、前記コンテンツデータに対して支援効果を付与する。 The signage terminal according to the embodiment includes a reproduction content acquisition unit, an information input unit, a viewer attribute determination unit, a unit that receives an instruction to execute support effect provision , and a support effect provision unit. The reproduction content acquisition means acquires content data to be reproduced. The information input means inputs information of a viewer who is within a predetermined range. The browser attribute determination unit determines the attribute of the viewer based on the information of the viewer input by the information input unit. The means for receiving an instruction to execute the provision of the support effect determines the support effect from the support effect data stored in the support effect database based on the viewer attribute determined by the viewer attribute determination unit, and determines the support effect An instruction to execute the grant is accepted. The support effect imparting unit imparts a support effect to the content data when an instruction to execute the support effect is given after determining the support effect to be imparted to the content data.

実施形態のサイネージシステムは、コンテンツデータを再生して表示するサイネージ端末と、通信ネットワークを介して接続された前記サイネージ端末に対して前記コンテンツデータを配信する情報配信装置と、を備えるサイネージシステムにおいて、情報入力手段と、閲覧者属性判定手段と、支援効果データベースと、支援効果の付与の実行の指示を受け付ける手段と、支援効果付与手段と、を備える。前記情報入力手段は、前記サイネージ端末の所定の範囲内にいる閲覧者の情報を入力する。前記閲覧者属性判定手段は、前記情報入力手段により入力された前記閲覧者の情報に基づき当該閲覧者の属性を判定する。前記支援効果データベースは、前記閲覧者の属性に応じて前記コンテンツデータに対してどのような支援効果を与えるかを設定した支援効果データを蓄積する。前記支援効果付与手段は、前記閲覧者属性判定手段で判定した閲覧者属性に基づき前記支援効果データから支援効果を決定して、当該支援効果の付与の実行の指示を受け付ける。前記支援効果付与手段は、前記コンテンツデータに対して付与する前記支援効果の決定後、当該支援効果の付与の実行の指示があった場合に、前記コンテンツデータに対して支援効果を付与する。 A signage system according to an embodiment includes a signage terminal that reproduces and displays content data, and an information distribution device that distributes the content data to the signage terminal connected via a communication network. An information input unit, a browser attribute determination unit, a support effect database, a unit that receives an instruction to execute support effect provision , and a support effect provision unit. The information input means inputs information of a viewer who is within a predetermined range of the signage terminal. The browser attribute determination unit determines the attribute of the viewer based on the information of the viewer input by the information input unit. The support effect database stores support effect data in which what kind of support effect is given to the content data according to the attributes of the viewer. The support effect providing means determines a support effect from the support effect data based on the viewer attribute determined by the browser attribute determination means, and accepts an instruction to execute the support effect. The support effect imparting unit imparts a support effect to the content data when an instruction to execute the support effect is given after determining the support effect to be imparted to the content data.

図1は、実施形態にかかるサイネージシステムの概略構成を示すブロック図である。FIG. 1 is a block diagram illustrating a schematic configuration of a signage system according to an embodiment. 図2は、サイネージ端末の外観正面図である。FIG. 2 is an external front view of the signage terminal. 図3は、サイネージ端末の概略構成を示すブロック図である。FIG. 3 is a block diagram showing a schematic configuration of the signage terminal. 図4は、情報配信サーバの概略構成を示すブロック図である。FIG. 4 is a block diagram showing a schematic configuration of the information distribution server. 図5は、コンテンツデータベースに蓄積されるデータの構成を示す図である。FIG. 5 is a diagram showing the structure of data stored in the content database. 図6は、支援効果データベースのデータ構成を示す図である。FIG. 6 is a diagram illustrating a data configuration of the support effect database. 図7は、サイネージ端末の機能構成を示すブロック図である。FIG. 7 is a block diagram showing a functional configuration of the signage terminal. 図8は、サイネージ端末におけるコンテンツの表示処理の流れを示すフローチャートである。FIG. 8 is a flowchart showing a flow of content display processing in the signage terminal. 図9は、支援効果を適用したコンテンツ画像例を示す図である。FIG. 9 is a diagram illustrating an example of a content image to which the support effect is applied. 図10は、支援効果の付与の実行を指示する支援開始ボタンの表示例を示す図である。FIG. 10 is a diagram illustrating a display example of a support start button for instructing execution of support effect assignment.

図1は、実施形態にかかるサイネージシステム10の概略構成を示すブロック図である。以下の説明では、実施形態にかかるサイネージシステム10がショッピングモールに設けられた場合について説明する。   FIG. 1 is a block diagram illustrating a schematic configuration of a signage system 10 according to the embodiment. The following description demonstrates the case where the signage system 10 concerning embodiment is provided in the shopping mall.

本実施形態にかかるサイネージシステム10は、情報配信装置である情報配信サーバ11と、複数のサイネージ端末14とを主体に構成されている。   The signage system 10 according to the present embodiment is mainly configured by an information distribution server 11 that is an information distribution apparatus and a plurality of signage terminals 14.

情報配信サーバ11は、構内LAN(Local Area Network)等の通信ネットワーク12を介してサイネージ端末14に接続されており、商品の広告情報やイベントの情報などの情報のコンテンツをサイネージ端末14に対して配信、またはコンテンツをサイネージ端末14からのアクセスによって取得させる。   The information distribution server 11 is connected to a signage terminal 14 via a communication network 12 such as a local area network (LAN), and information content such as product advertisement information and event information is sent to the signage terminal 14. Distribution or content is acquired by access from the signage terminal 14.

サイネージ端末14は、通信ネットワーク12を介して情報配信サーバ11から配信または取得したコンテンツデータを再生して表示する。   The signage terminal 14 reproduces and displays content data distributed or acquired from the information distribution server 11 via the communication network 12.

図2は、サイネージ端末14の外観正面図である。図2に示すように、サイネージ端末14は、液晶ディスプレイあるいはプラズマディスプレイとして構成されたディスプレイユニット21と、各種チケット,クーポン等を印刷して発行するプリンタユニット22と、ディスプレイユニット21およびプリンタユニット22を保持する筐体部24と、を備えている。   FIG. 2 is an external front view of the signage terminal 14. As shown in FIG. 2, the signage terminal 14 includes a display unit 21 configured as a liquid crystal display or a plasma display, a printer unit 22 that prints and issues various tickets, coupons, and the like, and the display unit 21 and the printer unit 22. And a housing portion 24 to be held.

筐体部24の上部には、人物を撮影して画像認識を行い、人物の性別や年齢層を特定し、配信する情報の種類を制御する等の用途に用いられるカメラユニット25と、人物の属性を取得するために音声を入力するマイク27とが内蔵されている。また、筐体部24の下部には、BGMや広告音声等の各種音響出力を行うスピーカユニット26が内蔵されている。なお、画像認識等の処理は、サイネージ端末14で行うことなく、情報配信サーバ11等の上流側サーバで行っても良い。   On the upper part of the housing unit 24, a person is photographed and image recognition is performed, the sex and age group of the person is specified, and the type of information to be distributed is controlled. A microphone 27 for inputting sound for acquiring attributes is incorporated. In addition, a speaker unit 26 that performs various sound outputs such as BGM and advertisement sound is built in the lower portion of the casing 24. Note that processing such as image recognition may be performed by an upstream server such as the information distribution server 11 without being performed by the signage terminal 14.

図3は、サイネージ端末14の概略構成を示すブロック図である。図3に示すように、サイネージ端末14は、上述したディスプレイユニット21、プリンタユニット22、カメラユニット25、スピーカユニット26およびマイク27の他、当該サイネージ端末14全体を制御するコントローラ31と、ユーザが各種操作を行うための操作部32と、通信ネットワーク12を介して情報配信サーバ11との間で通信を行うためのネットワーク通信インタフェース(IF)33と、コンテンツデータなどの各種データを記憶する外部記憶装置35と、を備えている。外部記憶装置35は、ハードディスク装置(HDD:Hard Disk Drive)やSSD(Solid State Drive)装置などで実現される。   FIG. 3 is a block diagram showing a schematic configuration of the signage terminal 14. As shown in FIG. 3, the signage terminal 14 includes a display unit 21, a printer unit 22, a camera unit 25, a speaker unit 26, a microphone 27, a controller 31 that controls the entire signage terminal 14, and various types of users. An operation unit 32 for performing operations, a network communication interface (IF) 33 for communicating with the information distribution server 11 via the communication network 12, and an external storage device for storing various data such as content data 35. The external storage device 35 is realized by a hard disk device (HDD) or a solid state drive (SSD) device.

ここで、コントローラ31は、当該コントローラ31全体を制御するMPU(Micro Processing Unit)36と、MPU36が動作するための制御プログラム等を格納したROM(Read Only Memory)37と、各種データを一時的に記憶するRAM(Random Access Memory)38と、を備えている。そして、コントローラ31は、MPU36がROM37に格納された制御プログラムを実行することにより、通信ネットワーク12を介して情報配信サーバ11から配信されたコンテンツデータを再生して、再生したコンテンツデータをディスプレイユニット21に表示する。また、操作部32は、各種スイッチ、ボタン等で構成したり、タッチパネルとしてディスプレイユニット21と一体に構成したりしても良い。   Here, the controller 31 temporarily stores an MPU (Micro Processing Unit) 36 that controls the entire controller 31, a ROM (Read Only Memory) 37 that stores a control program for operating the MPU 36, and various data. And a RAM (Random Access Memory) 38 for storage. Then, the controller 31 causes the MPU 36 to execute the control program stored in the ROM 37 to reproduce the content data distributed from the information distribution server 11 via the communication network 12, and display the reproduced content data on the display unit 21. To display. The operation unit 32 may be configured with various switches, buttons, or the like, or may be configured integrally with the display unit 21 as a touch panel.

このような構成により、サイネージ端末14は、基本的には、情報配信サーバ11で再生スケジュールとして予め設定された複数のコンテンツデータを受信または取得する。そして、サイネージ端末14は、ディスプレイユニット21を用いて、コンテンツデータとして広告する商品(以下、「広告商品」という場合がある。)に関する広告情報(広告商品を撮影した動画像や、広告商品を紹介または説明する文章など)を表示したり、スピーカユニット26を用いて、広告商品を紹介または説明する音声を出力したりする。   With such a configuration, the signage terminal 14 basically receives or obtains a plurality of content data set in advance as a reproduction schedule by the information distribution server 11. The signage terminal 14 uses the display unit 21 to introduce advertisement information (a moving image obtained by photographing the advertisement product or an advertisement product) related to a product advertised as content data (hereinafter also referred to as “advertisement product”). Or a sentence for explaining), or the speaker unit 26 is used to output a sound for introducing or explaining the advertisement product.

次に、情報配信サーバ11について説明する。図4は、情報配信サーバ11の概略構成を示すブロック図である。図4に示すように、情報配信サーバ11は、当該情報配信サーバ11全体を制御するコントローラ41と、ユーザが各種操作を行うためのキーボードやマウス等を有する操作部42と、通信ネットワーク12を介してサイネージ端末14との間で通信を行うためのネットワーク通信インタフェース(IF)43と、各種データや制御プログラムを記憶する外部記憶装置44と、液晶ディスプレイとして構成されたディスプレイユニット45と、を備えている。外部記憶装置44は、ハードディスク装置(HDD:Hard Disk Drive)やSSD(Solid State Drive)装置などで実現される。   Next, the information distribution server 11 will be described. FIG. 4 is a block diagram illustrating a schematic configuration of the information distribution server 11. As illustrated in FIG. 4, the information distribution server 11 includes a controller 41 that controls the entire information distribution server 11, an operation unit 42 that includes a keyboard and a mouse for a user to perform various operations, and a communication network 12. A network communication interface (IF) 43 for communicating with the signage terminal 14, an external storage device 44 for storing various data and control programs, and a display unit 45 configured as a liquid crystal display. Yes. The external storage device 44 is realized by a hard disk device (HDD) or a solid state drive (SSD) device.

ここで、コントローラ41は、当該コントローラ41全体を制御するMPU46と、MPU46が動作するための制御プログラム等を格納したROM47と、各種データを一時的に記憶するRAM48と、を備えている。   Here, the controller 41 includes an MPU 46 that controls the entire controller 41, a ROM 47 that stores a control program for operating the MPU 46, and a RAM 48 that temporarily stores various data.

即ち、コントローラ41は、MPU46がROM47や外部記憶装置44などに格納される制御プログラムをRAM48に展開して実行することにより、各種構成要素の動作を制御するとともに、ネットワーク通信IF43および通信ネットワーク12を介して接続されるサイネージ端末14との間で各サイネージ端末14に配信するコンテンツデータなどの各種データを送受信する動作を制御するものである。   That is, the controller 41 controls the operation of various components by the MPU 46 expanding and executing the control program stored in the ROM 47, the external storage device 44, and the like on the RAM 48, and controls the network communication IF 43 and the communication network 12. It controls the operation of transmitting and receiving various data such as content data distributed to each signage terminal 14 with the signage terminal 14 connected via the network.

また、外部記憶装置44は、コンテンツデータを蓄積するコンテンツデータベースDB1を格納している。なお、本実施形態では、情報配信サーバ11が有する外部記憶装置44にコンテンツデータベースDB1が格納されているが、これに限定するものではなく、例えば、情報配信サーバ11と通信ネットワーク12を介して接続された記憶装置(図示せず)にコンテンツデータベースDB1が記憶されていても良い。   The external storage device 44 stores a content database DB1 for accumulating content data. In the present embodiment, the content database DB1 is stored in the external storage device 44 of the information distribution server 11. However, the present invention is not limited to this. For example, the content database DB1 is connected to the information distribution server 11 via the communication network 12. The content database DB1 may be stored in the storage device (not shown).

図5は、コンテンツデータベースDB1に蓄積されるデータの構成を示す図である。図5に示すように、コンテンツデータベースDB1には、コンテンツを識別する識別情報としてコンテンツIDと、当該コンテンツIDにより識別されるコンテンツのコンテンツ名と、当該コンテンツIDにより識別されるコンテンツデータと、が蓄積されている。   FIG. 5 is a diagram showing a configuration of data stored in the content database DB1. As shown in FIG. 5, the content database DB1 stores a content ID as identification information for identifying content, a content name of the content identified by the content ID, and content data identified by the content ID. Has been.

コンテンツデータは、例えば、商品の販売促進に係わるイベントである優待企画の内容などに特化した画面を表すテンプレートデータに対して、商品を客に広告するための画像(例えば、商品を撮影した動画像、静止画像、テロップなど)を素材データとして当て嵌めたデータである。   The content data is, for example, an image for advertising a product to a customer (for example, a video image of the product) for template data representing a screen specializing in the content of a special offer plan that is an event related to product sales promotion. Image, still image, telop, etc.) as material data.

さらに、外部記憶装置44は、コンテンツデータに対して閲覧者属性に応じてどのような閲覧支援効果を与えるかを設定する支援効果データを蓄積する支援効果データベースDB2を格納している。なお、本実施形態では、情報配信サーバ11が有する外部記憶装置44に支援効果データベースDB2が格納されているが、これに限定するものではなく、例えば、情報配信サーバ11と通信ネットワーク12を介して接続された記憶装置(図示せず)に支援効果データベースDB2が記憶されていても良い。   Further, the external storage device 44 stores a support effect database DB2 for accumulating support effect data for setting what kind of browsing support effect is given to content data according to the viewer attribute. In the present embodiment, the support effect database DB2 is stored in the external storage device 44 of the information distribution server 11. However, the present invention is not limited to this, and for example, via the information distribution server 11 and the communication network 12. The support effect database DB2 may be stored in a connected storage device (not shown).

図6は、支援効果データベースDB2のデータ構成を示す図である。図6に示すように、支援効果データベースDB2は、サイネージ端末14の前で立ち止まる人物である閲覧者(以下、閲覧者という)の属性aに応じて、コンテンツIDbに対してどのような閲覧支援効果を与えるかを設定した支援効果データを蓄積したものである。   FIG. 6 is a diagram illustrating a data configuration of the support effect database DB2. As shown in FIG. 6, the support effect database DB <b> 2 indicates what browsing support effect for the content IDb according to the attribute “a” of the viewer (hereinafter referred to as the viewer) who stops in front of the signage terminal 14. It is the accumulation of the support effect data that set whether to give.

ここで、閲覧支援効果とは、閲覧者の属性(性別、年齢、国籍、眼鏡など)に応じて、コンテンツデータを閲覧者にとってわかりやすい形に変更することである。そのために、支援効果データベースDB2に蓄積される支援効果データにおいては、コンテンツデータに対する支援効果cと、当該支援効果を実施するための具体的な効果情報dとを、閲覧者の属性(性別、年齢、国籍、眼鏡など)に応じて設定している。   Here, the browsing support effect is to change the content data into a form that is easy for the viewer to understand according to the attributes (gender, age, nationality, glasses, etc.) of the viewer. Therefore, in the support effect data stored in the support effect database DB2, the support effect c for the content data and the specific effect information d for implementing the support effect are represented by the attributes of the viewer (gender, age). , Nationality, glasses, etc.).

支援効果cは、例えば、閲覧者が幼少(5歳まで)であれば「テロップの漢字を平仮名へ変換」したり、小学生(10歳まで)であれば「テロップの漢字にルビ」を振ったり、高齢(60歳以上)あるいは眼鏡をかけている閲覧者であれば「文字サイズを拡大する」、「動画領域を大きくする」といった効果である。   For example, if the viewer is young (up to 5 years old), the support effect c may be “convert telop kanji to hiragana” or, if it is an elementary school student (up to 10 years old), waving “ruby to telop kanji”. For a reader who is elderly (over 60 years old) or wearing glasses, the effect is “enlarge the character size” or “enlarge the video area”.

支援効果を実施するための具体的な効果情報dは、例えば、「本日○○がお買い得」というテロップがコンテンツデータに含まれている場合、「平仮名変換」の支援効果が対応付けられた閲覧者の属性(5歳まで)であれば、「ほんじつ○○がおかいどく」である。   The specific effect information d for implementing the support effect is, for example, a viewer associated with the support effect of “Hiragana conversion” when the content data includes a telop “Today is a bargain”. If it is an attribute (up to 5 years old), it is “Honjitsu XX is funny”.

また、支援効果を実施するための具体的な効果情報dは、「英語に翻訳」の支援効果が対応付けられた閲覧者の属性(アメリカ人)であれば、コンテンツデータを英語に翻訳した情報である。   Further, if the specific effect information d for implementing the support effect is the attribute (American) of the viewer associated with the support effect of “translate into English”, information obtained by translating the content data into English It is.

また、図6に示すように、同一のコンテンツIDを有しているコンテンツデータに対して複数の支援効果が設定されているような場合には、各支援効果に対して優先度eを付するようにしても良い。このように優先度eを付すことにより、例えば小学生(10歳まで)と高齢者(60歳以上)が同時に閲覧しているような場合に、一方の閲覧者属性に応じた支援効果を実施することができるようになる。   Also, as shown in FIG. 6, when a plurality of support effects are set for content data having the same content ID, a priority e is assigned to each support effect. You may do it. By assigning priority e in this way, for example, when an elementary school student (up to 10 years old) and an elderly person (over 60 years old) are browsing at the same time, the support effect according to one viewer attribute is implemented. Will be able to.

このような構成により、情報配信サーバ11のコントローラ41は、ROM47に記憶された制御プログラムに従ってMPU46を動作させることで、予め作成されたタイムスケジュールに従ってコンテンツデータをサイネージ端末14に配信する。   With such a configuration, the controller 41 of the information distribution server 11 operates the MPU 46 according to the control program stored in the ROM 47 to distribute the content data to the signage terminal 14 according to a time schedule created in advance.

次に、サイネージ端末14が有する特徴的な機能について説明する。概略的には、サイネージ端末14においては、サイネージ端末14の前で立ち止まる人物である閲覧者の属性に応じて閲覧者にとってよりわかりやすい表示内容にコンテンツ表示を変更するようにしたものである。   Next, characteristic functions of the signage terminal 14 will be described. Schematically, in the signage terminal 14, the content display is changed to display contents that are easier to understand for the viewer in accordance with the attribute of the viewer who is a person who stops in front of the signage terminal 14.

図7は、サイネージ端末14の機能構成を示すブロック図である。コントローラ31は、ROM37に記憶された制御プログラムに従ってMPU36を動作させることで、図7に示すように、情報入力手段361、閲覧者属性判定手段362、支援効果付与手段363、再生するコンテンツを取得する再生コンテンツ取得手段364として機能する。   FIG. 7 is a block diagram showing a functional configuration of the signage terminal 14. The controller 31 operates the MPU 36 according to the control program stored in the ROM 37, thereby obtaining information input means 361, viewer attribute determination means 362, support effect provision means 363, and content to be reproduced as shown in FIG. It functions as reproduction content acquisition means 364.

情報入力手段361は、所定の範囲内にいる人物の情報を入力する。本実施形態においては、情報入力手段361は、サイネージ端末14の前で立ち止まる閲覧者の情報をサイネージ端末14に設けられたカメラユニット25により撮像した撮像画像データから得るとともに、サイネージ端末14の前で立ち止まる閲覧者の情報をサイネージ端末14に設けられたマイク27により集音した音声データから得る。   The information input unit 361 inputs information on a person within a predetermined range. In the present embodiment, the information input unit 361 obtains information of a viewer who stops in front of the signage terminal 14 from captured image data captured by the camera unit 25 provided in the signage terminal 14 and in front of the signage terminal 14. Information on the viewer who stops is obtained from the voice data collected by the microphone 27 provided in the signage terminal 14.

閲覧者属性判定手段362は、情報入力手段361により入力された閲覧者の情報に基づき閲覧者の属性を判定する。閲覧者属性判定手段362は、図7に示すように、年齢性別判定手段3621と、言語判定手段3622と、を備える。   The browser attribute determination unit 362 determines the viewer attribute based on the viewer information input by the information input unit 361. As shown in FIG. 7, the viewer attribute determination unit 362 includes an age / sex determination unit 3621 and a language determination unit 3622.

年齢性別判定手段3621は、情報入力手段361により入力された閲覧者の情報に基づき閲覧者の年齢および性別の判定を行う。言語判定手段3622は、情報入力手段361により入力された閲覧者の情報に基づき閲覧者が使用する言語を判定する。   Age sex determination means 3621 determines the age and sex of the viewer based on the information of the viewer input by the information input means 361. The language determination unit 3622 determines the language used by the viewer based on the viewer information input by the information input unit 361.

支援効果付与手段363は、閲覧者属性判定手段362で判定した閲覧者属性に基づき支援効果データベースDB2に蓄積される支援効果データから支援効果を決定して、コンテンツデータに支援効果を付与する。   The support effect providing unit 363 determines the support effect from the support effect data stored in the support effect database DB2 based on the viewer attribute determined by the browser attribute determining unit 362, and provides the support effect to the content data.

次に、上述した本実施形態に係るサイネージシステム10におけるコンテンツの表示処理について説明する。図8は、サイネージ端末14におけるコンテンツの表示処理の流れを示すフローチャートである。図8に示すように、まず、情報配信サーバ11のMPU46は、予め作成されたタイムスケジュールに従ってコンテンツデータをサイネージ端末14に対して配信し、サイネージ端末14にコンテンツデータの再生を実行させる。   Next, content display processing in the signage system 10 according to the present embodiment described above will be described. FIG. 8 is a flowchart showing the flow of content display processing in the signage terminal 14. As shown in FIG. 8, first, the MPU 46 of the information distribution server 11 distributes content data to the signage terminal 14 according to a time schedule created in advance, and causes the signage terminal 14 to reproduce the content data.

サイネージ端末14の再生コンテンツ取得手段364は、情報配信サーバ11から配信されたコンテンツデータを受信すると(ステップS1のYes)、サイネージ端末14の情報入力手段361は、カメラユニット25により撮像した閲覧者の撮像画像データやマイク27により集音した閲覧者の音声データなどの閲覧者の情報を入力する(ステップS2)。なお、撮像画像データおよび音声データは、所定のタイミング(例えば、1分間隔)で予め取得しておくようにしても良い。   When the reproduction content acquisition unit 364 of the signage terminal 14 receives the content data distributed from the information distribution server 11 (Yes in step S1), the information input unit 361 of the signage terminal 14 captures the viewer imaged by the camera unit 25. Information of the viewer such as captured image data and voice data of the viewer collected by the microphone 27 is input (step S2). Note that the captured image data and audio data may be acquired in advance at a predetermined timing (for example, at intervals of 1 minute).

サイネージ端末14の閲覧者属性判定手段362(年齢性別判定手段3621)は、閲覧者について、年齢および性別の判定を行う(ステップS3)。年齢性別判定手段3621による閲覧者についての年齢および性別の判定手法としては、カメラユニット25による撮像画像データの各閲覧者の顔画像から特徴量を抽出し、当該特徴量に基づいてその人物の年齢・性別を判別する周知の手法を用いることができる。   The browser attribute determination means 362 (age and gender determination means 3621) of the signage terminal 14 determines the age and sex of the viewer (step S3). As a method for determining the age and gender of the viewer by the age and gender determination means 3621, a feature amount is extracted from each viewer's face image of the captured image data by the camera unit 25, and the age of the person based on the feature amount is extracted. A well-known method for determining gender can be used.

また、サイネージ端末14の閲覧者属性判定手段362(言語判定手段3622)は、閲覧者について、使用言語の判定を行う(ステップS4)。言語判定手段3622による閲覧者についての使用言語の判定手法としては、マイク27により集音した閲覧者の音声データに対して音声認識処理を実行し、当該音声認識結果に基づいてその人物の使用言語を判別する周知の手法を用いることができる。   Also, the browser attribute determination unit 362 (language determination unit 3622) of the signage terminal 14 determines the language used for the browser (step S4). As a method of determining the language used for the viewer by the language determination means 3622, voice recognition processing is executed on the voice data of the viewer collected by the microphone 27, and the language used by the person based on the voice recognition result is obtained. It is possible to use a well-known method for discriminating the above.

以上のようにして閲覧者属性を取得すると、サイネージ端末14の支援効果付与手段363は、情報配信サーバ11の支援効果データベースDB2にアクセスし、閲覧者属性に基づき支援効果データベースDB2に蓄積される支援効果データに情報配信サーバ11から配信されたコンテンツデータに対応した閲覧支援効果がある場合には(ステップS5のYes)、支援効果データベースDB2に蓄積される支援効果データから閲覧支援効果を決定して(ステップS6)、閲覧支援効果を適用したコンテンツデータを再生する(ステップS7)。   When the viewer attribute is acquired as described above, the support effect granting unit 363 of the signage terminal 14 accesses the support effect database DB2 of the information distribution server 11, and the support accumulated in the support effect database DB2 based on the viewer attribute. If the effect data has a browsing support effect corresponding to the content data distributed from the information distribution server 11 (Yes in step S5), the browsing support effect is determined from the support effect data stored in the support effect database DB2. (Step S6), the content data to which the browsing support effect is applied is reproduced (Step S7).

図9は、支援効果を適用したコンテンツ画像例を示す図である。図9に示すように、サイネージ端末14のディスプレイユニット21には、コンテンツデータのオリジナル画像に対して閲覧者属性に基づく支援効果(平仮名変換、ルビ追加、文字サイズ拡大など)が適用された画像が表示される。   FIG. 9 is a diagram illustrating an example of a content image to which the support effect is applied. As shown in FIG. 9, the display unit 21 of the signage terminal 14 has an image to which the support effect (hiragana conversion, addition of ruby, enlargement of character size, etc.) based on the viewer attribute is applied to the original image of the content data. Is displayed.

一方、サイネージ端末14の支援効果付与手段363は、閲覧者属性に基づき支援効果データベースDB2に蓄積される支援効果データに情報配信サーバ11から配信されたコンテンツデータに対応した閲覧支援効果がない場合には(ステップ5のNo)、情報配信サーバ11から配信されたコンテンツデータをそのまま再生する(ステップS8)。   On the other hand, the support effect granting unit 363 of the signage terminal 14 has no viewing support effect corresponding to the content data distributed from the information distribution server 11 in the support effect data stored in the support effect database DB2 based on the viewer attribute. (No in step 5), the content data distributed from the information distribution server 11 is reproduced as it is (step S8).

なお、支援効果は必ずしもその閲覧者にとって必要ではない場合もあるため、支援効果決定後にそのまま再生中のコンテンツに付与せず、閲覧者の決定を待って付与することも可能である。この場合、支援効果決定後に、図10に示すように、サイネージ端末14のディスプレイユニット21に表示された画面上に、支援効果の付与の実行を指示する支援開始ボタンBを表示する。そして、閲覧者はその支援効果を必要とする場合に支援開始ボタンBを押下し、サイネージ端末14の支援効果付与手段363は、支援開始ボタンBの押下を認識すると、その支援効果をコンテンツデータに付与するようにしても良い。   Since the support effect may not necessarily be necessary for the viewer, it is possible to wait for the determination of the viewer without adding it to the content being reproduced as it is after determining the support effect. In this case, after the support effect is determined, a support start button B for instructing execution of the support effect is displayed on the screen displayed on the display unit 21 of the signage terminal 14 as shown in FIG. Then, the viewer presses the support start button B when the support effect is required, and when the support effect providing unit 363 of the signage terminal 14 recognizes the press of the support start button B, the support effect is converted into the content data. You may make it provide.

また、サイネージ端末14の支援効果付与手段363は、対象の閲覧者が閲覧エリアからいなくなったと判断した場合、その支援効果を削除し、通常のコンテンツを再生する。   Further, when the support effect providing unit 363 of the signage terminal 14 determines that the target viewer is no longer in the viewing area, the support effect is deleted and the normal content is reproduced.

以上説明した実施形態によれば、閲覧者属性に基づき支援効果データベースDB2に蓄積される支援効果データから支援効果を決定してコンテンツデータに対して支援効果を付与する。これにより、閲覧者属性に応じて閲覧者にとってより分かりやすい表示内容にコンテンツ表示を変更することができ、よりサイネージ効果を高めることができる。   According to the embodiment described above, the support effect is determined from the support effect data stored in the support effect database DB2 based on the viewer attribute, and the support effect is given to the content data. Thereby, according to a viewer attribute, a content display can be changed into the display content which is easier to understand for the viewer, and the signage effect can be further enhanced.

なお、上述した実施形態においては閲覧者の情報を入力する情報入力手段361として、撮像範囲内にいる視聴者を撮影するカメラユニット25が用いられていたが、これに限るものではなく、RFIDリーダなどを用いるようにしてもよい。RFIDリーダを用いる場合には、視聴者が所持している会員カードや携帯電話等の記憶媒体に、顧客IDとともに顧客の性別や年齢等の情報を記憶しておく。そして、RFIDリーダが無線通信の通信範囲内にいる閲覧者の記憶媒体から閲覧者の性別や年齢層等の情報を読み出す。   In the above-described embodiment, the camera unit 25 that captures the viewer within the imaging range is used as the information input unit 361 for inputting the information of the viewer. However, the present invention is not limited to this. Etc. may be used. When the RFID reader is used, information such as the customer's sex and age is stored together with the customer ID in a storage medium such as a membership card or a mobile phone possessed by the viewer. Then, the RFID reader reads information such as the gender and age group of the viewer from the storage medium of the viewer who is within the communication range of the wireless communication.

なお、本実施形態においては、サイネージシステムとして情報配信サーバ11と、複数のサイネージ端末14とを主体に構成されているサイネージシステム10を適用するようにしたが、これに限るものではない。例えば、サイネージシステムとしてサイネージ端末14を適用して、情報配信サーバ11における処理動作をサイネージ端末14に実行させるようにしても良い。   In the present embodiment, the signage system 10 mainly configured by the information distribution server 11 and the plurality of signage terminals 14 is applied as the signage system, but the present invention is not limited to this. For example, the signage terminal 14 may be applied as a signage system to cause the signage terminal 14 to execute processing operations in the information distribution server 11.

また、本実施形態においては、サイネージ端末14に閲覧者属性判定手段362を設けて、情報入力手段361により入力された閲覧者の情報に基づき閲覧者の属性を判定するようにしたが、これに限るものではなく、閲覧者属性判定手段362を情報配信サーバ11において実行させるようにしても良い。   In the present embodiment, the signer terminal 14 is provided with the viewer attribute determination means 362, and the viewer attribute is determined based on the information of the viewer input by the information input means 361. The browser attribute determination unit 362 may be executed in the information distribution server 11 without being limited thereto.

さらに、本実施形態においては、サイネージ端末14に支援効果付与手段363を設けて、閲覧者属性判定手段362で判定した閲覧者属性に基づき支援効果を決定して、コンテンツデータに支援効果を付与するようにしたが、これに限るものではなく、閲覧者属性判定手段362を情報配信サーバ11において実行させるようにして、支援効果を付与したコンテンツデータをサイネージ端末14に対して配信するようにしても良い。   Further, in the present embodiment, the signage terminal 14 is provided with a support effect providing unit 363, and the support effect is determined based on the viewer attribute determined by the viewer attribute determining unit 362, and the support effect is provided to the content data. However, the present invention is not limited to this, and the viewer attribute determination unit 362 is executed in the information distribution server 11 so that the content data with the support effect is distributed to the signage terminal 14. good.

本実施形態の情報配信サーバ11またはサイネージ端末14で実行されるプログラムは、インストール可能な形式又は実行可能な形式のファイルでCD−ROM、フレキシブルディスク(FD)、CD−R、DVD(Digital Versatile Disk)等のコンピュータで読み取り可能な記録媒体に記録されて提供される。   The program executed in the information distribution server 11 or the signage terminal 14 of the present embodiment is a file in an installable format or an executable format, and is a CD-ROM, flexible disk (FD), CD-R, DVD (Digital Versatile Disk). And the like recorded on a computer-readable recording medium.

また、本実施形態の情報配信サーバ11またはサイネージ端末14で実行されるプログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成しても良い。また、本実施形態の情報配信サーバ11またはサイネージ端末14で実行されるプログラムをインターネット等のネットワーク経由で提供または配布するように構成しても良い。   Further, the program executed by the information distribution server 11 or the signage terminal 14 of the present embodiment may be stored on a computer connected to a network such as the Internet and provided by being downloaded via the network. good. Moreover, you may comprise so that the program run with the information delivery server 11 or the signage terminal 14 of this embodiment may be provided or distributed via networks, such as the internet.

本発明の実施形態を説明したが、この実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。この新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。   Although the embodiment of the present invention has been described, this embodiment is presented as an example and is not intended to limit the scope of the invention. The novel embodiment can be implemented in various other forms, and various omissions, replacements, and changes can be made without departing from the scope of the invention. The embodiments and modifications thereof are included in the scope and gist of the invention, and are included in the invention described in the claims and the equivalents thereof.

10 サイネージシステム
11 情報配信装置
14 サイネージ端末
361 情報入力手段
362 閲覧者属性判定手段
363 支援効果付与手段
364 再生コンテンツ取得手段
DB2 支援効果データベース
DESCRIPTION OF SYMBOLS 10 Signage system 11 Information delivery apparatus 14 Signage terminal 361 Information input means 362 Viewer attribute determination means 363 Support effect provision means 364 Playback content acquisition means DB2 Support effect database

特開2008−249784号公報JP 2008-249784 A 特開2010−224329号公報JP 2010-224329 A

Claims (6)

再生するコンテンツデータを取得する再生コンテンツ取得手段と、
所定の範囲内にいる閲覧者の情報を入力する情報入力手段と、
前記情報入力手段により入力された前記閲覧者の情報に基づき当該閲覧者の属性を判定する閲覧者属性判定手段と、
前記閲覧者属性判定手段で判定した閲覧者属性に基づき支援効果データベースに蓄積される支援効果データから支援効果を決定して、当該支援効果の付与の実行の指示を受け付ける手段と、
前記コンテンツデータに対して付与する前記支援効果の決定後、当該支援効果の付与の実行の指示があった場合に、前記コンテンツデータに対して支援効果を付与する支援効果付与手段と、
を備えることを特徴とするサイネージ端末。
Reproduction content acquisition means for acquiring content data to be reproduced;
Information input means for inputting information of a viewer within a predetermined range;
Browser attribute determination means for determining the attribute of the viewer based on the information of the viewer input by the information input means;
Means for determining a support effect from the support effect data stored in the support effect database based on the viewer attribute determined by the viewer attribute determination unit, and receiving an instruction to execute the support effect;
After determining the support effect to be applied to the content data , when there is an instruction to execute the support effect, support effect providing means for providing a support effect to the content data;
A signage terminal comprising:
前記支援効果の付与の実行の指示を受け付ける手段は、ディスプレイユニットの画面上に、前記支援効果の付与の実行を指示するボタンを表示し、当該ボタンの押下を認識すると、当該支援効果の付与の実行の指示があったものとする、
ことを特徴とする請求項1記載のサイネージ端末。
The means for receiving an instruction to execute the support effect displays a button for instructing execution of the support effect on the screen of the display unit. When the button is recognized to be pressed, Suppose that there was an instruction to execute,
The signage terminal according to claim 1.
前記情報入力手段は、撮像画像データと音声データとの少なくともいずれか一方を、前記閲覧者の情報として得る、
ことを特徴とする請求項1または2記載のサイネージ端末。
The information input means obtains at least one of captured image data and audio data as information of the viewer;
The signage terminal according to claim 1 or 2, characterized in that
前記閲覧者属性判定手段は、前記情報入力手段により入力された前記閲覧者の情報に基づき当該閲覧者の年齢および性別の判定を行う、
ことを特徴とする請求項1ないし3のいずれか一記載のサイネージ端末。
The viewer attribute determining means determines the age and sex of the viewer based on the information of the viewer input by the information input means.
The signage terminal according to any one of claims 1 to 3, wherein
前記閲覧者属性判定手段は、前記情報入力手段により入力された前記閲覧者の情報に基づき当該閲覧者が使用する言語を判定する、
ことを特徴とする請求項1ないし4のいずれか一記載のサイネージ端末。
The viewer attribute determining means determines a language used by the viewer based on the information of the viewer input by the information input means.
The signage terminal according to claim 1, wherein the signage terminal is a signage terminal.
コンテンツデータを再生して表示するサイネージ端末と、通信ネットワークを介して接続された前記サイネージ端末に対して前記コンテンツデータを配信する情報配信装置と、を備えるサイネージシステムにおいて、
前記サイネージ端末の所定の範囲内にいる閲覧者の情報を入力する情報入力手段と、
前記情報入力手段により入力された前記閲覧者の情報に基づき当該閲覧者の属性を判定する閲覧者属性判定手段と、
前記閲覧者の属性に応じて前記コンテンツデータに対してどのような支援効果を与えるかを設定した支援効果データを蓄積した支援効果データベースと、
前記閲覧者属性判定手段で判定した閲覧者属性に基づき前記支援効果データから支援効果を決定して、当該支援効果の付与の実行の指示を受け付ける手段と、
前記コンテンツデータに対して付与する前記支援効果の決定後、当該支援効果の付与の実行の指示があった場合に、前記コンテンツデータに対して支援効果を付与する支援効果付与手段と、
を備えることを特徴とするサイネージシステム。
In a signage system comprising: a signage terminal that reproduces and displays content data; and an information distribution device that distributes the content data to the signage terminal connected via a communication network.
Information input means for inputting information of a viewer within a predetermined range of the signage terminal;
Browser attribute determination means for determining the attribute of the viewer based on the information of the viewer input by the information input means;
A support effect database that stores support effect data that sets what support effect is given to the content data according to the attributes of the viewer;
Means for determining a support effect from the support effect data based on the viewer attribute determined by the viewer attribute determination unit, and receiving an instruction to execute the support effect;
After determining the support effect to be applied to the content data , when there is an instruction to execute the support effect, support effect providing means for providing a support effect to the content data;
A signage system comprising:
JP2012195970A 2012-09-06 2012-09-06 Signage terminal and signage system Expired - Fee Related JP5592919B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2012195970A JP5592919B2 (en) 2012-09-06 2012-09-06 Signage terminal and signage system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2012195970A JP5592919B2 (en) 2012-09-06 2012-09-06 Signage terminal and signage system

Publications (2)

Publication Number Publication Date
JP2014052770A JP2014052770A (en) 2014-03-20
JP5592919B2 true JP5592919B2 (en) 2014-09-17

Family

ID=50611230

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012195970A Expired - Fee Related JP5592919B2 (en) 2012-09-06 2012-09-06 Signage terminal and signage system

Country Status (1)

Country Link
JP (1) JP5592919B2 (en)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6515465B2 (en) * 2014-08-25 2019-05-22 凸版印刷株式会社 Information providing system and information providing method
JP6401018B2 (en) * 2014-11-10 2018-10-03 シャープ株式会社 Information providing system, information providing server, control program, control method, display device, and content providing server
JP6063091B1 (en) * 2015-03-19 2017-01-18 楽天株式会社 Display control system, display control method, and display control program
WO2017164103A1 (en) * 2016-03-24 2017-09-28 東レ株式会社 Mask resist composition for etching, method for producing substrate using same, and method for manufacturing light emitting element
JP6876483B2 (en) * 2017-03-29 2021-05-26 パナソニック株式会社 Management system, behavior recognition device, and management method
JP7434952B2 (en) 2020-01-31 2024-02-21 株式会社リコー Information processing device, information processing system and program
JP2022163309A (en) * 2021-04-14 2022-10-26 ボスアーキテクト株式会社 digital signage system

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006195773A (en) * 2005-01-14 2006-07-27 Dainippon Printing Co Ltd Information delivery device and information delivery system
JP2006209285A (en) * 2005-01-26 2006-08-10 Fuji Xerox Co Ltd Information processor, information processing method, and computer program
JP5461893B2 (en) * 2009-06-08 2014-04-02 Jr東日本メカトロニクス株式会社 Information processing apparatus, information processing method, and program
JP2013125047A (en) * 2011-12-13 2013-06-24 Zenrin Datacom Co Ltd Information providing system, language classification providing terminal device, information providing device, information providing method, language classification providing program, and information providing program

Also Published As

Publication number Publication date
JP2014052770A (en) 2014-03-20

Similar Documents

Publication Publication Date Title
JP5592919B2 (en) Signage terminal and signage system
JP5449633B1 (en) Advertisement translation device, advertisement display device, and advertisement translation method
US10991012B2 (en) Creative brief-based content creation
US10853766B2 (en) Creative brief schema
CN112449253B (en) Interactive video generation
KR101912237B1 (en) Method for Attaching Hash-Tag Using Image Recognition Process and Software Distributing Server Storing Software for the same Method
JP2014014014A (en) Information distribution device, signage system and program
CN109859298B (en) Image processing method and device, equipment and storage medium thereof
CN108182432A (en) Information processing method and device
JP5707346B2 (en) Information providing apparatus, program thereof, and information providing system
US20230222722A1 (en) Video preview method and apparatus, and non-transitory computer-readable storage medium
JP2014146242A (en) Information distribution device, information display system and program
JP2016082355A (en) Input information support device, input information support method, and input information support program
WO2019026395A1 (en) Information processing device, information processing method, and program
CN113438532B (en) Video processing method, video playing method, video processing device, video playing device, electronic equipment and storage medium
CN112749363B (en) Network advertisement publishing and acquiring method and device, storage medium and computer equipment
JP5498520B2 (en) Content creation apparatus and program
JP6296193B2 (en) INPUT INFORMATION SUPPORT DEVICE, INPUT INFORMATION SUPPORT METHOD, AND INPUT INFORMATION SUPPORT PROGRAM
JP2017130170A (en) Conversation interlocking system, conversation interlocking device, conversation interlocking method, and conversation interlocking program
KR101994803B1 (en) System for text editor support applicable affective contents
JP6112239B2 (en) INPUT INFORMATION SUPPORT DEVICE, INPUT INFORMATION SUPPORT METHOD, AND INPUT INFORMATION SUPPORT PROGRAM
US20140101530A1 (en) Web browsing system for content browsing
JP6172303B2 (en) INPUT INFORMATION SUPPORT DEVICE, INPUT INFORMATION SUPPORT METHOD, AND INPUT INFORMATION SUPPORT PROGRAM
JP2015179399A (en) Text creation device, text creation program and text creation method
KR101538593B1 (en) Advertisement insertion apparatus using an image editing in a mobile terminal

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20131217

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140217

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140715

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140801

R150 Certificate of patent or registration of utility model

Ref document number: 5592919

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees