JP6624528B2 - Display control device, display control system, method and program - Google Patents

Display control device, display control system, method and program Download PDF

Info

Publication number
JP6624528B2
JP6624528B2 JP2018065086A JP2018065086A JP6624528B2 JP 6624528 B2 JP6624528 B2 JP 6624528B2 JP 2018065086 A JP2018065086 A JP 2018065086A JP 2018065086 A JP2018065086 A JP 2018065086A JP 6624528 B2 JP6624528 B2 JP 6624528B2
Authority
JP
Japan
Prior art keywords
display
display control
character
image file
telop
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018065086A
Other languages
Japanese (ja)
Other versions
JP2019174734A (en
Inventor
正 高田
正 高田
正雄 遠藤
正雄 遠藤
貴之 大久保
貴之 大久保
孝夫 諸井
孝夫 諸井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Thinkpod
Original Assignee
Thinkpod
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Thinkpod filed Critical Thinkpod
Priority to JP2018065086A priority Critical patent/JP6624528B2/en
Publication of JP2019174734A publication Critical patent/JP2019174734A/en
Application granted granted Critical
Publication of JP6624528B2 publication Critical patent/JP6624528B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Transforming Electric Information Into Light Information (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Controls And Circuits For Display Device (AREA)
  • User Interface Of Digital Computer (AREA)

Description

本発明は、表示制御装置、表示制御システム、方法およびプログラムに関する。   The present invention relates to a display control device, a display control system, a method, and a program.

近年では情報通信の高度化に伴って、1つのディスプレイに複数の情報を表示する技術が実用化されている。また、これに伴って、ディスプレイに表示する情報の種類も多様化している。   In recent years, with the advancement of information communication, a technique for displaying a plurality of pieces of information on one display has been put to practical use. Along with this, the types of information displayed on the display have been diversified.

例えば、特許第4827992号公報(特許文献1)では、映像をディスプレイ内に縮小して表示し、縮小によって生じた余白スペースに情報をスクロールさせながら表示する技術が開示されている。特許文献1によれば、情報をスクロールさせながら表示させることで、表示する情報の量を大きくでき、かつ情報の視認性が向上できる。   For example, Japanese Patent No. 4827992 (Patent Document 1) discloses a technique in which an image is reduced and displayed in a display, and information is scrolled and displayed in a blank space generated by the reduction. According to Patent Literature 1, by displaying information while scrolling it, the amount of information to be displayed can be increased and the visibility of the information can be improved.

しかしながら特許文献1では、システムの構成が複雑であり、また、表示する情報のテキストをそのまま表示するものであるため、スムーズに表示することが難しく、表示の効率化の観点で充分なものではなかった。そこで、情報をさらに効率的に表示する技術が求められていた。   However, in Patent Literature 1, the system configuration is complicated and the text of the information to be displayed is displayed as it is. Was. Therefore, a technology for displaying information more efficiently has been required.

本発明は、上記従来技術における課題に鑑みてなされたものであり、情報を効率的に表示する表示制御装置、表示制御システム、方法およびプログラムを提供することを目的とする。   The present invention has been made in view of the above-mentioned problems in the related art, and has as its object to provide a display control device, a display control system, a method, and a program for efficiently displaying information.

すなわち、本発明によれば、表示手段でテロップの表示を制御する表示制御装置であって、前記テロップとして表示すべきテキストデータを一文字ずつラスタ形式のイメージデータに変換した後、前記変換したイメージデータを並び替えて1つのイメージファイルに変換する手段と、前記変換されたイメージファイルを、前記表示手段に表示させる範囲として前記一文字の高さ分読み出し、読み出し範囲を拡大しながら表示制御信号として出力する手段と、を備え、前記テキストデータを1つのイメージファイルに変換する手段は、前記テキストデータが一文字ずつ変換されたイメージデータを、前記テキストデータの文字数に応じてフレームバッファの行列サイズに合わせて並べ替えて配置し、前記変換されたイメージファイルは、前記一文字の前記イメージデータの行列サイズが前記フレームバッファの行列サイズの整数分の1となるサイズとして生成される、表示制御装置
が提供される。
That is, according to the present invention, there is provided a display control device for controlling the display of a telop by a display means, wherein the text data to be displayed as the telop is converted into raster format image data one character at a time , Means for rearranging the image files into one image file, and reading the converted image file as a range to be displayed on the display unit by the height of the one character, and outputting the read image signal as a display control signal while expanding the read range. Means for converting the text data into one image file, arranging the image data obtained by converting the text data character by character in accordance with the matrix size of a frame buffer according to the number of characters of the text data. And place the converted image file in the folder Shape of the matrix size of the image data is generated as the size of the integral submultiple of the matrix size of the frame buffer, the display controller is provided.

上述したように、本発明によれば、情報を効率的に表示する表示制御装置、表示制御システム、方法およびプログラムが提供される。   As described above, according to the present invention, a display control device, a display control system, a method, and a program for efficiently displaying information are provided.

本発明の実施形態における表示制御システム全体のハードウェアの概略構成を示す図。FIG. 1 is a diagram illustrating a schematic configuration of hardware of an entire display control system according to an embodiment of the present invention. 本実施形態の表示制御装置に含まれるハードウェア構成を示す図。FIG. 2 is a diagram illustrating a hardware configuration included in the display control device according to the embodiment. ディスプレイに表示される種々の情報の例を示す図。The figure which shows the example of various information displayed on a display. 本実施形態の表示制御装置を構成する機能ブロック図。FIG. 2 is a functional block diagram illustrating a display control device according to the embodiment. テロップのテキストをイメージ化する例を示す図。The figure which shows the example which makes the text of a telop into an image. テロップをディスプレイに表示する例を示す図。The figure which shows the example which displays a telop on a display. 本実施形態における表示制御装置が実行する処理を示すフローチャート。5 is a flowchart illustrating processing executed by the display control device according to the embodiment.

以下、本発明を、実施形態をもって説明するが、本発明は後述する実施形態に限定されるものではない。なお、以下に参照する各図においては、共通する要素について同じ符号を用い、適宜その説明を省略するものとする。   Hereinafter, the present invention will be described with reference to embodiments, but the present invention is not limited to the embodiments described below. In each of the drawings referred to below, the same reference numerals are used for common elements, and the description thereof will be omitted as appropriate.

図1は、本発明の実施形態における表示制御システム1全体のハードウェアの概略構成を示す図である。本実施形態の表示制御システム1は、表示制御装置10と、ディスプレイ20とを含む。表示制御装置10と、ディスプレイ20とは、有線通信または無線通信にて接続され、一例として、ケーブルを介して各装置の端子間が接続される。また、表示制御システム1は、アンテナを備えるテレビチューナ30や、パソコン端末40、スマートホン端末50、サーバ装置60などと接続されるネットワーク70などを含んで構成されてもよい。   FIG. 1 is a diagram illustrating a schematic configuration of hardware of the entire display control system 1 according to the embodiment of the present invention. The display control system 1 of the present embodiment includes a display control device 10 and a display 20. The display control device 10 and the display 20 are connected by wire communication or wireless communication. As an example, terminals of each device are connected via a cable. The display control system 1 may be configured to include a television tuner 30 having an antenna, a personal computer terminal 40, a smartphone terminal 50, a network 70 connected to the server device 60, and the like.

テレビチューナ30は、既存のボックスタイプのチューナとして実装することもできるし、USBといったインタフェースを介して表示制御装置10に接続される所謂、USBドングルとして構成することができる。これによって、システム構成を簡略化できる。サーバ装置60は、パソコン端末40やスマートホン端末50などから、テロップとして表示するための文字列を受信し、表示するべきタイミングに応じて表示制御装置10にテロップとして表示させるべきデータを送付する。   The television tuner 30 can be implemented as an existing box-type tuner, or can be configured as a so-called USB dongle connected to the display control device 10 via an interface such as a USB. Thereby, the system configuration can be simplified. The server device 60 receives a character string to be displayed as a telop from the personal computer terminal 40, the smart phone terminal 50, or the like, and sends data to be displayed as a telop to the display control device 10 in accordance with the display timing.

表示制御装置10は、表示制御システム1に含まれるテレビチューナ30、パソコン端末40、スマートホン端末50などの各種装置と、ディスプレイ20との通信を中継する装置である。表示制御装置10は、各種装置が出力する映像、静止画、サーバ装置60から送付されるテロップとして表示させるべきテキストなどの各種情報を表示制御信号として出力することでディスプレイ20の表示を制御する。   The display control device 10 is a device that relays communication between the display 20 and various devices such as the TV tuner 30, the personal computer terminal 40, and the smart phone terminal 50 included in the display control system 1. The display control device 10 controls the display on the display 20 by outputting as a display control signal various information such as a video, a still image output from various devices, and text to be displayed as a telop sent from the server device 60.

ディスプレイ20は、表示制御装置10からの出力信号に基づき、画面表示を行う装置である。なお、図1では、例として、表示制御システム1に1台のディスプレイ20が含まれている場合を図示しているが、ディスプレイ20の台数に制限はなく、複数のディスプレイ20を含んで構成されてもよい。   The display 20 is a device that performs screen display based on an output signal from the display control device 10. In FIG. 1, as an example, a case where one display 20 is included in the display control system 1 is illustrated. However, the number of displays 20 is not limited, and the display control system 1 includes a plurality of displays 20. You may.

ここまで、本実施形態のシステム構成について説明した。上記構成によれば、表示制御装置10と、表示する情報を提供する各種装置とを同時に制御できることから、システム構成を簡略化できる。また、表示制御装置10は、サーバ装置60にアクセスして、テロップテキストを取得することもでき、これをディスプレイ20に表示することもできる。   So far, the system configuration of the present embodiment has been described. According to the above configuration, the display control device 10 and various devices that provide information to be displayed can be simultaneously controlled, so that the system configuration can be simplified. In addition, the display control device 10 can access the server device 60 to obtain a telop text, and can also display the telop text on the display 20.

次に、表示制御装置10のハードウェア構成について説明する。図2は、本実施形態の表示制御装置10に含まれるハードウェア構成を示す図である。表示制御装置10は、CPU201、メモリ202、GPU203、入出力I/F204、操作部205を含んで構成され、各ハードウェアはバスを介して接続されている。   Next, the hardware configuration of the display control device 10 will be described. FIG. 2 is a diagram illustrating a hardware configuration included in the display control device 10 of the present embodiment. The display control device 10 includes a CPU 201, a memory 202, a GPU 203, an input / output I / F 204, and an operation unit 205, and each piece of hardware is connected via a bus.

CPU201は、表示制御装置10の動作を制御するプログラムを実行し、所定の処理を行う装置である。メモリ202は、種々の情報を一時的または永続的に記憶するための記憶装置である。メモリ202は、例えば、RAMのような、CPU201が実行するプログラムの実行空間を提供するための揮発性の記憶装置であってもよく、この場合、プログラムやデータの格納用、展開用として使用される。また、メモリ202は、ROMのような、CPU201が実行するプログラムやファームウェアなどを記憶するための不揮発性の書き換え可能な記憶装置であってもよい。さらに、メモリ202は、表示制御装置10の外部に接続される記憶装置によって構成されてもよい。   The CPU 201 is a device that executes a program for controlling the operation of the display control device 10 and performs a predetermined process. The memory 202 is a storage device for temporarily or permanently storing various information. The memory 202 may be a volatile storage device, such as a RAM, for providing an execution space for a program executed by the CPU 201. In this case, the memory 202 is used for storing and expanding programs and data. You. The memory 202 may be a non-volatile rewritable storage device such as a ROM for storing programs executed by the CPU 201, firmware, and the like. Further, the memory 202 may be configured by a storage device connected to the outside of the display control device 10.

GPU(Graphics Processing Unit)203は、グラフィック演算を実行する処理装置である。GPU203は、典型的には、OpenGLなどのAPI(Application Programming Interface)に対応した演算機能を有し、高速な画像処理演算を実現可能としている。表示制御装置10が実行するオペレーティング・システム(OS)には制限はないが、UNIX(登録商標)、LINUX(登録商標)、OPENBSD、Raspbian、WINDOWS(登録商標)などを使用することができ、特に限定されるものではない。なお、所望する機能を限定してOSを起動することができるという点では、Raspbianが利用しやすく、また、グラフィック処理に要するハードウェア資源やソフトウェア資源の削減が可能となり、その結果、テロップ表示制御の際のOS割込みによる動きのギクシャク化を効率的に改善することができる。   A GPU (Graphics Processing Unit) 203 is a processing device that executes a graphic operation. The GPU 203 typically has an arithmetic function corresponding to an API (Application Programming Interface) such as OpenGL, and can realize a high-speed image processing operation. There is no limitation on the operating system (OS) executed by the display control device 10, but UNIX (registered trademark), LINUX (registered trademark), OPENBSD, Raspbian, WINDOWS (registered trademark), and the like can be used. It is not limited. In addition, in that the OS can be started with a limited number of desired functions, Raspbian is easy to use, and hardware resources and software resources required for graphic processing can be reduced. As a result, telop display control In this case, it is possible to efficiently improve the jerky movement caused by the OS interrupt.

入出力I/F204は、表示制御装置10と、他の各種装置とを接続し、映像、静止画、テキストなどの情報をやり取りするための装置である。入出力I/F204は、一例として、NIC(Network Interface Card)を挙げることができ、ネットワーク70を介して、他の装置との通信を可能にする。なお、ネットワーク70を介した通信は、有線通信または無線通信のいずれであってもよく、TCP/IPなどの所定の通信プロトコルを使用し、各種データを送受信できる。また、入出力I/F204は、USBなどのインタフェースであってもよく、例えば、USBドングルとして構成されるテレビチューナ30が出力する映像情報の入力を受け付けることもできる。さらに、入出力I/F204は、ディスプレイ20に対応した形式に変換された信号を出力するインタフェースであってもよく、一例としてHDMI(High-Definition Multimedia Interface、登録商標)が挙げられる。   The input / output I / F 204 is a device for connecting the display control device 10 to various other devices and exchanging information such as video, still images, and text. The input / output I / F 204 can be, for example, a NIC (Network Interface Card), and enables communication with other devices via the network 70. Communication via the network 70 may be either wired communication or wireless communication, and various data can be transmitted and received using a predetermined communication protocol such as TCP / IP. Further, the input / output I / F 204 may be an interface such as a USB, for example, and can also receive input of video information output by the TV tuner 30 configured as a USB dongle. Further, the input / output I / F 204 may be an interface that outputs a signal converted into a format corresponding to the display 20, and an example is HDMI (High-Definition Multimedia Interface, registered trademark).

操作部205は、表示制御装置10を操作するための装置であり、例えば、各種ボタンやスイッチ、タッチパネルディスプレイなどが挙げられる。また、表示制御装置10の操作は、操作部205によるものに限られず、ネットワーク70を介して各種端末から遠隔的に操作されてもよいし、リモコンなどの装置による赤外線通信によって操作されてもよい。また、さらに他の実施形態では、スマートホン端末50にアプリといったプログラムをインストールし、アプリ上から表示制御装置10、ディスプレイ20などの制御を行うこともできる。さらに他の実施形態では、サーバ装置60に対してスマートホン端末50からテロップ文字を入力し、表示させることもできる。   The operation unit 205 is a device for operating the display control device 10, and includes, for example, various buttons, switches, and a touch panel display. The operation of the display control device 10 is not limited to the operation by the operation unit 205, and may be remotely operated from various terminals via the network 70, or may be operated by infrared communication using a device such as a remote controller. . In still another embodiment, a program such as an application can be installed in the smartphone terminal 50, and the display control device 10, the display 20, and the like can be controlled from the application. In still another embodiment, a telop character can be input to the server device 60 from the smart phone terminal 50 and displayed.

以上、本実施形態の表示制御装置10に含まれるハードウェア構成について説明した。ここで、本実施形態のディスプレイ20の表示について、図3を以て説明する。図3は、ディスプレイ20に表示される種々の情報の例を示す図である。   The hardware configuration included in the display control device 10 according to the present embodiment has been described above. Here, the display on the display 20 of the present embodiment will be described with reference to FIG. FIG. 3 is a diagram illustrating an example of various information displayed on the display 20.

図3(a)は、ディスプレイ20に映像が表示されている例を示しており、例えば、テレビで放送されている映像を表示することができる。ところで、ディスプレイ20は、個人的に設置して利用されるだけでなく、例えば、病院や銀行などの待合スペースに設置される場合がある。このような場合、ディスプレイ20に待ち時間や呼出番号などの情報を表示することで、利用者は、映像を視聴しながら自分が呼び出される時間や順番などを把握することができるので、利便性を向上できる。   FIG. 3A illustrates an example in which an image is displayed on the display 20. For example, an image broadcast on a television can be displayed. By the way, the display 20 is not only installed and used personally, but may be installed in a waiting space such as a hospital or a bank, for example. In such a case, displaying the information such as the waiting time and the call number on the display 20 allows the user to grasp the time and order in which the user is called while watching the video. Can be improved.

このような情報を表示する場合には、情報の視認性を向上するために、ディスプレイ20内の映像とは別の領域で情報を表示することが好ましい。一方で、映像と異なる領域を設けると、映像はディスプレイ20の全表示領域から縮小して表示することとなり、図3(b)に示すように、情報を表示する領域以外にもスペースが生じることとなる。そこで、生じたスペースを有効に活用することが好ましい。この活用方法の一例としては、広告を表示することなどが挙げられる。   When such information is displayed, it is preferable to display the information in an area different from the image in the display 20 in order to improve the visibility of the information. On the other hand, when an area different from the image is provided, the image is reduced from the entire display area of the display 20 and displayed. As shown in FIG. It becomes. Therefore, it is preferable to effectively utilize the generated space. An example of this utilization method is to display an advertisement.

以下では、ディスプレイ20の全表示領域を図3(b)のように分割する場合を例に説明する。図3(b)の各領域は、それぞれ映像表示領域、情報表示領域、テロップ表示領域として参照するが、実施形態を限定するものではない。なお、ディスプレイ20を分割する態様は、図3(b)に示すものに限らず、任意の領域に分割することができる。   Hereinafter, a case where the entire display area of the display 20 is divided as illustrated in FIG. 3B will be described as an example. Each region in FIG. 3B is referred to as a video display region, an information display region, and a telop display region, respectively, but is not limited to the embodiment. The manner in which the display 20 is divided is not limited to that shown in FIG. 3B, and the display 20 can be divided into arbitrary areas.

映像表示領域は、テレビチューナ30が出力した映像の画像を表示する領域である。なお、映像表示領域に表示する画像は、テレビチューナ30が出力するものに限らず、パソコン端末40、スマートホン端末50、サーバ装置60から提供される画像を表示してもよい。   The video display area is an area for displaying a video image output by the TV tuner 30. The image displayed in the video display area is not limited to the image output by the TV tuner 30, and may be an image provided from the personal computer terminal 40, the smart phone terminal 50, or the server device 60.

情報表示領域は、上述した例のように、待ち時間や呼出番号などの種々の情報の画像を表示する領域である。情報表示領域に表示する情報は、例えば動的な情報であって、パソコン端末40、スマートホン端末50、サーバ装置60などから、ネットワーク70を介して提供されてもよい。   The information display area is an area for displaying various information images such as a waiting time and a call number, as in the example described above. The information displayed in the information display area is, for example, dynamic information, and may be provided from the personal computer terminal 40, the smart phone terminal 50, the server device 60, or the like via the network 70.

テロップ表示領域は、例えばテキスト広告のような静的な情報を表示する領域であって、パソコン端末40、スマートホン端末50、サーバ装置60などから、ネットワーク70を介して提供される情報を表示する。本実施形態では、後述するように、ラスタ形式に変換した画像を表示することで、GPU203による処理が容易にできるため、テロップがギクシャクすることなくスムーズに表示できる。   The telop display area is an area for displaying static information such as a text advertisement, and displays information provided from the personal computer terminal 40, the smart phone terminal 50, the server device 60, and the like via the network 70. . In the present embodiment, as will be described later, by displaying the image converted to the raster format, the processing by the GPU 203 can be easily performed, and thus the telop can be smoothly displayed without jerking.

以下の説明では、図3(b)に示すように、映像表示領域にはテレビ放送の映像を表示し、情報表示領域には呼出番号情報を表示し、テロップ表示領域には広告情報の画像を表示する場合を例に説明する。このような各種情報を表示したディスプレイ20の例を図3(c)に示す。図3(c)に示す例では、各領域に種々の情報が表示されている。また、テロップ表示領域に表示される広告情報は、内容や文字数などに応じて、スクロール表示されてもよい。   In the following description, as shown in FIG. 3 (b), an image of a television broadcast is displayed in an image display area, call number information is displayed in an information display area, and an image of advertisement information is displayed in a telop display area. The case of displaying will be described as an example. FIG. 3C shows an example of the display 20 displaying such various kinds of information. In the example shown in FIG. 3C, various information is displayed in each area. Further, the advertisement information displayed in the telop display area may be scroll-displayed according to the content, the number of characters, and the like.

次に、本実施形態における各ハードウェアによって実行される機能手段について、図4を以て説明する。図4は、本実施形態の表示制御装置10を構成する機能ブロック図である。   Next, functional units executed by each hardware in the present embodiment will be described with reference to FIG. FIG. 4 is a functional block diagram of the display control device 10 according to the present embodiment.

表示制御装置10は、チューナ接続ポート11から、テレビチューナ30が出力した映像信号の入力を受け付け、デコーダ12で映像信号を処理する。また、チューナ接続ポート11は、コントローラ16によって制御可能に構成されてもよい。デコーダ12は、映像信号を、音声信号、テキスト信号、画像信号などに変換し手出力する。また、CHANNELブロックでは、映像信号のチャンネルを選択できる。この場合、入出力I/F204は、表示制御装置10が使用するOSに適合するように、受信した映像情報を変換する。   The display control device 10 receives an input of a video signal output by the television tuner 30 from the tuner connection port 11, and processes the video signal with the decoder 12. Further, the tuner connection port 11 may be configured to be controllable by the controller 16. The decoder 12 converts the video signal into an audio signal, a text signal, an image signal, and the like, and outputs it manually. In the CHANNEL block, a channel of a video signal can be selected. In this case, the input / output I / F 204 converts the received video information so as to be compatible with the OS used by the display control device 10.

表示制御装置10は、NIC15を介してネットワーク70に接続される。ネットワーク70には、パソコン端末40、スマートホン端末50、サーバ装置60などが接続されており、各種装置は、ディスプレイ20に表示する種々の情報を管理し、表示制御装置10に提供する。また、テロップとして表示させるべきテキストデータは、サーバ装置60からネットワーク70を経てNIC15、コントローラ16に入力され、映像情報の領域確保、テロップ領域の領域確保の他、テロップを表示させるべきタイミングを制御する。   The display control device 10 is connected to the network 70 via the NIC 15. A personal computer terminal 40, a smart phone terminal 50, a server device 60, and the like are connected to the network 70. The various devices manage various information displayed on the display 20 and provide the information to the display control device 10. Also, text data to be displayed as a telop is input from the server device 60 to the NIC 15 and the controller 16 via the network 70, and controls the timing at which the telop is to be displayed, in addition to securing the video information area and the telop area. .

テロップイメージ化ブロック17は、表示制御装置10に入力された信号のうち、テロップ表示領域に表示する情報をイメージ化する機能を備えた変換手段である。ここで、テロップのイメージ化は、単にテキストデータをラスタ形式に変換するのみならず、生成したイメージデータをフレームバッファに適応したサイズやフォーマットに変換する。これによって、テロップを表示する処理をGPU203が実行しやすくでき、表示制御処理が効率化できる。イメージデータは、フレームバッファとしての記憶領域18に一時的に格納され、表示を行うタイミングで読み出される。   The telop imaging block 17 is a conversion unit having a function of imaging information to be displayed in the telop display area among signals input to the display control device 10. Here, image conversion of a telop not only converts text data into a raster format, but also converts generated image data into a size or format suitable for a frame buffer. This makes it easy for the GPU 203 to execute the processing for displaying the telop, and the display control processing can be made more efficient. The image data is temporarily stored in the storage area 18 as a frame buffer, and is read at the timing of displaying.

イメージデータは、出力処理部19において、映像情報と合成された出力信号として、ディスプレイ接続ポート14からディスプレイ20に出力される。このとき、信号には、情報表示領域に表示する情報、例えば、ネットワーク70を介してパソコン端末40から提供される呼出番号情報などを含んでもよい。出力処理部19では、ディスプレイ20の各表示領域に対応した位置に各種情報を表示するように、出力信号を合成し、出力する。   The image data is output from the display connection port 14 to the display 20 as an output signal synthesized with the video information in the output processing unit 19. At this time, the signal may include information to be displayed in the information display area, for example, call number information provided from the personal computer terminal 40 via the network 70. The output processing unit 19 synthesizes and outputs output signals so that various types of information are displayed at positions corresponding to the respective display areas of the display 20.

なお、上述した各機能ブロックは、CPU201やGPU203などが本実施形態のプログラムを実行することで、各ハードウェアを機能させることにより、実現される機能手段に相当する。また、各実施形態に示した機能手段は、全部がソフトウェア的に実現されても良いし、その一部または全部を同等の機能を提供するハードウェアとして実装することもできる。   Each of the functional blocks described above corresponds to a functional unit realized by causing the CPU 201, the GPU 203, and the like to execute the hardware of the present embodiment by executing the program of the present embodiment. Further, all of the functional units described in the embodiments may be realized by software, or some or all of them may be implemented as hardware that provides equivalent functions.

次に、テロップイメージ化ブロック17で行う処理について説明する。図5は、テロップのテキストをイメージ化する例を示す図である。ここでは、一例として、テロップ表示領域に「今なら半額キャンペーン実施中!」というテキストを表示させる場合について考える。   Next, the processing performed in the telop imaging block 17 will be described. FIG. 5 is a diagram illustrating an example in which the text of a telop is imaged. Here, as an example, a case in which a text “Now a half price campaign is being implemented!” Is displayed in the telop display area is considered.

まず、テロップイメージ化ブロック17は、図5(a)のように、テキストデータを一文字ずつラスタ形式のイメージデータに変換する。その後、テロップイメージ化ブロック17は、イメージ化した各文字を、テキストの文字数やフレームバッファのサイズに合わせて並べ替えて、1つのイメージファイルに変換する。変換されたイメージファイルの例としては、図5(b)〜(d)に示す形式が挙げられる。なお、図5(b)〜(d)に示す破線は、文字の区切りを明確にするためのものであり、実際のイメージファイルには含まれない。   First, as shown in FIG. 5A, the telop imaging block 17 converts text data into raster image data one character at a time. Thereafter, the telop imaging block 17 converts the imaged characters into one image file by rearranging the characters according to the number of characters of the text and the size of the frame buffer. Examples of the converted image file include the formats shown in FIGS. 5B to 5D. Note that the broken lines shown in FIGS. 5B to 5D are for clarifying character delimiters, and are not included in an actual image file.

例えば、正方形のイメージファイルを生成するような場合には、図5(d)のようにして正方形内に文字を配置して記憶する。図5(d)の正方形のサイズが1024×1024ピクセルである場合には、文字数が15文字であることから、1文字のサイズを256×256ピクセルにして、4文字ごとに改行して配置する。 For example, in the case so as to produce a square image file, and stores the arranged characters within square as in FIG. 5 (d). If the size of the square shown in FIG. 5 (d) is a 1024 × 1024 pixels, since the number of characters is 15 characters, and a character size to 256 × 256 pixels, arranged in line for each four characters .

また、イメージファイルのサイズは、上記のものに限らず、図5(c)、(d)に示すような形状の中に文字を配置してもよい。さらに、文字の配置は、テロップ表示領域のサイズ、解像度、方向などに応じて適宜選択することができる。文字を配置したイメージファイルは、記憶領域18に一時的に格納され、映像などの出力と併せてテロップを表示する際に読み出される。   Further, the size of the image file is not limited to the above, and characters may be arranged in a shape as shown in FIGS. 5 (c) and 5 (d). Furthermore, the arrangement of the characters can be appropriately selected according to the size, resolution, direction, and the like of the telop display area. The image file in which the characters are arranged is temporarily stored in the storage area 18, and is read when displaying the telop together with the output of the video or the like.

そこで次に、イメージファイルを読み出してテロップ表示領域に表示する処理について説明する。図6は、テロップをディスプレイ20に表示する例を示す図である。ここでは、図5(b)に示すイメージファイルを読み出して表示する場合を例に説明する。なお、図6に示す破線は、図5(b)〜(d)のものと同様に、文字の区切りを明確にするためのものであり、実際のイメージファイルに含まれるものではない。   Therefore, next, a process of reading an image file and displaying the image file in the telop display area will be described. FIG. 6 is a diagram illustrating an example in which a telop is displayed on the display 20. Here, a case where the image file shown in FIG. 5B is read and displayed will be described as an example. Note that the broken lines shown in FIG. 6 are for clarifying character delimiters, as in FIGS. 5B to 5D, and are not included in an actual image file.

出力処理部19は、記憶領域18からイメージファイルを読み出し、テロップ表示領域に表示させる。ここでは、テロップ表示領域には、イメージ化された文字の10文字分を1列に表示できるものとし、さらに、テロップの内容をスクロールさせながら表示するものとする。   The output processing unit 19 reads the image file from the storage area 18 and displays the image file in the telop display area. Here, it is assumed that ten characters of imaged characters can be displayed in one line in the telop display area, and that the contents of the telop are displayed while being scrolled.

図6(a)〜(e)は、ディスプレイ20のテロップ表示領域に表示されるイメージの時間経過を示している。また、図6(a)〜(e)の左側の図は、イメージファイルのうち読み出される範囲を示しており、図6(a)〜(e)の右側の図は、読み出されたイメージファイルの範囲をテロップ表示領域に表示した例を示している。なお、図6の濃い色で示される範囲は、イメージファイル内の読み出された範囲を示すものであり、当該範囲のイメージをテロップ表示領域に表示する例を示す。   FIGS. 6A to 6E show the lapse of time of the image displayed in the telop display area of the display 20. 6 (a) to 6 (e) show the read range of the image file, and the right figures of FIGS. 6 (a) to 6 (e) show the read image file. Is shown in the telop display area. The range indicated by the dark color in FIG. 6 indicates the read range in the image file, and shows an example in which the image of the range is displayed in the telop display area.

まず、テロップの表示開始当初は、図6(a)に示すように、イメージファイルの左上から1文字の高さ分だけ読み出し、順次、読み出し範囲を右方向へ拡大する。なお、読み出し開始位置や読み出し範囲の高さなどは、イメージファイルを生成する際に定義し、当該イメージファイルと対応付けて記憶しておくことが好ましい。   First, at the beginning of the display of a telop, as shown in FIG. 6 (a), the image file is read by the height of one character from the upper left, and the read range is sequentially expanded rightward. It is preferable that the read start position, the height of the read range, and the like are defined when the image file is generated, and are stored in association with the image file.

イメージファイルの読み出し範囲は、時間の経過とともに拡大していき、これに併せてテロップはスクロールして表示される。図6(b)の時点は、イメージファイルのうち、上から1文字分の高さの領域が読み出され、さらに上から2文字分の高さの領域が読み出される様子を示している。このように、複数の行をまたがって読み出す場合には、テロップ表示領域に対応するように、読み出したイメージを1列に並べて表示する。   The reading range of the image file expands with the passage of time, and the telop is scrolled and displayed accordingly. FIG. 6B shows a state in which an area having a height of one character from the top and an area having a height of two characters from the top are read from the image file. As described above, when reading is performed over a plurality of rows, the read images are arranged and displayed in one column so as to correspond to the telop display area.

その後、図6(c)の時点では、テロップ表示領域に表示できる上限である10文字相当の範囲が読み出され、スクロールしたテロップがテロップ表示領域のスクロール終了端まで達する。そして、以降は、図6(d)に示すように、イメージファイルの読み出し範囲のうち、先に読み出した範囲を順次読み出さなくするように処理する。   Thereafter, at the point of FIG. 6C, a range corresponding to 10 characters, which is the upper limit that can be displayed in the telop display area, is read, and the scrolled telop reaches the scroll end point of the telop display area. Thereafter, as shown in FIG. 6D, processing is performed so that the previously read range of the read range of the image file is not sequentially read.

さらにその後、イメージファイルの読み出しを行い、図6(e)に示すように、読み出し範囲がイメージファイルの読み出し終了位置に到達すると、再度読み出し開始位置を読み出し範囲に含めてもよい。このように、読み出し範囲を循環させることで、イメージファイルの内容を繰り返しながらスクロール表示することができる。   After that, the image file is read, and when the read range reaches the read end position of the image file as shown in FIG. 6E, the read start position may be included in the read range again. In this way, by circulating the reading range, the contents of the image file can be scrolled and displayed while being repeated.

なお、好ましい実施形態では、読み出し終了位置から読み出し開始位置に移行する際に、テロップの見やすさを向上させるために、一定時間ブランク(空白)を表示させてもよい。また、必ずしも同じイメージファイルを循環させてテロップ表示させなくてもよく、1つのイメージファイルの読み出し終了位置に到達した後、他のイメージファイルの読み出しを開始してもよい。このように異なるイメージファイルを読み出すことで、複数のテロップを連続して表示することができる。   In the preferred embodiment, a blank may be displayed for a certain period of time when moving from the read end position to the read start position in order to improve legibility of the telop. Also, the same image file does not necessarily have to be circulated and displayed as a telop, and reading of another image file may be started after reaching the reading end position of one image file. By reading different image files in this manner, a plurality of subtitles can be displayed continuously.

次に、表示制御装置10が実行する処理について説明する。図7は、本実施形態における表示制御装置10が実行する処理を示すフローチャートである。   Next, processing executed by the display control device 10 will be described. FIG. 7 is a flowchart illustrating a process executed by the display control device 10 according to the present embodiment.

表示制御装置10は、ステップS1000から処理を開始し、ステップS1001で、映像やテロップなど、ディスプレイ20に表示させる各種データの入力を入出力I/F204によって受け付ける。   The display control device 10 starts the process from step S1000, and in step S1001, the input / output I / F 204 accepts input of various data to be displayed on the display 20, such as a video and a telop.

その後、ステップS1002では、テロップイメージ化ブロック17は、入力されたテロップのテキストデータをイメージ化し、イメージファイルとして記憶領域18に格納する。続くステップS1003では、イメージファイルのうち、テロップ表示領域に表示する範囲を読み出して、出力処理部19に出力する。   Thereafter, in step S1002, the telop imaging block 17 converts the text data of the input telop into an image and stores the image data in the storage area 18 as an image file. In a succeeding step S1003, a range to be displayed in the telop display area of the image file is read and output to the output processing unit 19.

ステップS1004で、出力処理部19は、映像のサイズを縮小する。なお、ステップS1004の処理は、これ以外のタイミングで実行されてもよく、例えば、ステップS1003などの処理と並行して実行されてもよい。   In step S1004, the output processing unit 19 reduces the size of the video. Note that the processing in step S1004 may be executed at a timing other than this, and for example, may be executed in parallel with the processing in step S1003 and the like.

その後、ステップS1005で、出力処理部19は、映像やテロップを合成し、合成した表示制御信号をディスプレイ接続ポート14から出力する。以降は、ステップS1003の処理に戻り、イメージファイルの読み出し、映像などとの合成、出力の各処理を繰り返す。   Then, in step S1005, the output processing unit 19 combines the video and the telop, and outputs the combined display control signal from the display connection port 14. Thereafter, the process returns to step S1003, and the processes of reading the image file, synthesizing with the video and the like, and outputting are repeated.

上述した処理によって、イメージ化したテロップをディスプレイ20に表示することができる。特に、テロップのテキストをイメージ化することによって、GPU203での表示制御処理が容易となることから、テロップの文字がギクシャクすることなく、滑らかに、かつシステム構成を簡略化して、最小限のコンピュータ資源の利用で効率的に情報を表示することが可能となる。   Through the above-described processing, the imaged telop can be displayed on the display 20. In particular, since the display control processing in the GPU 203 is facilitated by converting the text of the telop into an image, the characters of the telop can be smoothly and smoothly simplified and the system configuration can be simplified to minimize the computer resources. It is possible to efficiently display information by using the information.

以上、説明した本発明の実施形態によれば、情報を効率的に表示する表示制御装置、表示制御システム、方法およびプログラムを提供することができる。   According to the embodiments of the present invention described above, it is possible to provide a display control device, a display control system, a method, and a program for efficiently displaying information.

上述した本発明の実施形態の各機能は、C、C++、C#、Java(登録商標)等で記述された装置実行可能なプログラムにより実現でき、本実施形態のプログラムは、ハードディスク装置、CD−ROM、MO、DVD、フレキシブルディスク、EEPROM、EPROM等の装置可読な記録媒体に格納して頒布することができ、また他装置が可能な形式でネットワークを介して伝送することができる。   Each function of the above-described embodiment of the present invention can be realized by a device-executable program described in C, C ++, C #, Java (registered trademark), or the like. It can be stored and distributed on a device-readable recording medium such as a ROM, an MO, a DVD, a flexible disk, an EEPROM, and an EPROM, and can be transmitted via a network in a format that can be used by other devices.

以上、本発明について実施形態をもって説明してきたが、本発明は上述した実施形態に限定されるものではなく、当業者が推考しうる実施態様の範囲内において、本発明の作用・効果を奏する限り、本発明の範囲に含まれるものである。   As described above, the present invention has been described with the embodiment. However, the present invention is not limited to the above-described embodiment, and as long as the functions and effects of the present invention are achieved within the range of an embodiment that can be estimated by those skilled in the art. Are included in the scope of the present invention.

1…表示制御システム、
10…表示制御装置、
11…チューナ接続ポート、
12…デコーダ、
13…CHANNEL、
14…ディスプレイ接続ポート、
15…NIC、
16…コントローラ、
17…テロップイメージ化ブロック
18…記憶領域、
19…出力処理部、
20…ディスプレイ、
30…テレビチューナ、
40…パソコン端末、
50…スマートホン端末、
60…サーバ装置、
70…ネットワーク、
201…CPU、
202…メモリ、
203…GPU、
204…入出力I/F、
205…操作部
1. Display control system,
10 display control device,
11 ... Tuner connection port
12 ... decoder,
13 ... CHANNEL,
14. Display connection port,
15… NIC,
16 Controller
17: telop imaging block 18: storage area,
19 output processing unit,
20 ... Display,
30 ... TV tuner,
40 ... PC terminal,
50 ... Smartphone terminal,
60 ... server device,
70 ... Network,
201 ... CPU,
202 ... memory,
203 ... GPU,
204: input / output I / F,
205 ... Operation unit

特許第4827992号公報Japanese Patent No. 4827992

Claims (6)

表示手段でテロップの表示を制御する表示制御装置であって、
前記テロップとして表示すべきテキストデータを一文字ずつラスタ形式のイメージデータに変換した後、前記変換したイメージデータを並び替えて1つのイメージファイルに変換する手段と、
前記変換されたイメージファイルを、前記表示手段に表示させる範囲として前記一文字の高さ分読み出し、読み出し範囲を拡大しながら表示制御信号として出力する手段と、を備え、
前記テキストデータを1つのイメージファイルに変換する手段は、
前記テキストデータが一文字ずつ変換されたイメージデータを、前記テキストデータの文字数に応じてフレームバッファの行列サイズに合わせて並べ替えて配置し、
前記変換されたイメージファイルは、前記一文字の前記イメージデータの行列サイズが前記フレームバッファの行列サイズの整数分の1となるサイズとして生成される、表示制御装置。
A display control device for controlling display of a telop by a display means,
Means for converting the text data to be displayed as the telop into raster-format image data one character at a time , and rearranging the converted image data to convert the text data into one image file ;
Means for outputting the converted image file as a display control signal while reading the one character height as a range to be displayed on the display means, and expanding the read range.
Means for converting the text data into one image file,
Image data in which the text data is converted character by character, rearranged and arranged according to the matrix size of the frame buffer according to the number of characters of the text data,
The display control device , wherein the converted image file is generated as a size in which a matrix size of the image data of the one character is an integer fraction of a matrix size of the frame buffer .
前記範囲は、前記表示手段の表示領域に対応する範囲であることを特徴とする、請求項1に記載の表示制御装置。   The display control device according to claim 1, wherein the range is a range corresponding to a display area of the display unit. 前記表示制御装置は、パソコン端末、スマートホン端末、サーバ装置を含む端末からネットワークを介して表示画像の入力を受け付ける手段をさらに含み、
前記表示制御信号は、前記表示画像を含んで出力される、請求項1または2に記載の表示制御装置。
The display control device further includes means for receiving input of a display image from a terminal including a personal computer terminal, a smartphone terminal, and a server device via a network,
The display control device according to claim 1, wherein the display control signal is output including the display image.
表示制御信号に基づいてテロップを表示する表示手段と、
前記テロップとして表示すべきテキストデータを一文字ずつラスタ形式のイメージデータに変換した後、前記変換したイメージデータを並び替えて1つのイメージファイルに変換する手段と、
前記変換されたイメージファイルを、前記表示手段に表示させる範囲として前記一文字の高さ分読み出し、読み出し範囲を拡大しながら表示制御信号として出力する手段と、を備え、
前記テキストデータを1つのイメージファイルに変換する手段は、
前記テキストデータが一文字ずつ変換されたイメージデータを、前記テキストデータの文字数に応じてフレームバッファの行列サイズに合わせて並べ替えて配置し、
前記変換されたイメージファイルは、前記一文字の前記イメージデータの行列サイズが前記フレームバッファの行列サイズの整数分の1となるサイズとして生成される、表示制御システム。
Display means for displaying a telop based on a display control signal;
Means for converting the text data to be displayed as the telop into raster-format image data one character at a time , and rearranging the converted image data to convert the text data into one image file ;
Means for outputting the converted image file as a display control signal while reading the one character height as a range to be displayed on the display means, and expanding the read range.
Means for converting the text data into one image file,
Image data in which the text data is converted character by character, rearranged and arranged according to the matrix size of the frame buffer according to the number of characters of the text data,
The display control system , wherein the converted image file is generated as a size in which a matrix size of the image data of one character is an integer fraction of a matrix size of the frame buffer .
表示手段のテロップ表示を制御する表示制御装置が実行する方法であって、
ロップとして表示すべきテキストデータを一文字ずつラスタ形式のイメージデータに変換した後、前記変換したイメージデータを並び替えて1つのイメージファイルに変換すること、
前記変換されたイメージファイルを、前記表示手段に表示させる範囲として前記一文字の高さ分読み出し、読み出し範囲を拡大しながら表示制御信号として出力すること、
を含み、
前記テキストデータを1つのイメージファイルに変換することは、
前記テキストデータが一文字ずつ変換されたイメージデータを、前記テキストデータの文字数に応じてフレームバッファの行列サイズに合わせて並べ替えて配置することおよび
前記変換されたイメージファイルは、前記一文字の前記イメージデータの行列サイズが前記フレームバッファの行列サイズの整数分の1となるサイズとして生成すること、を含む方法。
A method executed by a display control device that controls a telop display of a display means,
After converting the text data to be displayed as a telop character by character to the image data of a raster format, to convert into a single image file rearranges image data described above transformation,
The converted image file is read by the height of the one character as a range to be displayed on the display means, and output as a display control signal while enlarging the read range,
Including
Converting the text data into one image file
Image data in which the text data is converted one character at a time, rearranging and arranging the image data according to the number of characters of the text data in accordance with the matrix size of a frame buffer;
Generating the converted image file as a size such that a matrix size of the image data of the one character is an integer fraction of a matrix size of the frame buffer .
表示手段のテロップ表示を制御する表示制御装置が実行するプログラムであって、前記表示制御装置に、
ロップとして表示すべきテキストデータを一文字ずつラスタ形式のイメージデータに変換した後、前記変換したイメージデータを並び替えて1つのイメージファイルに変換すること、
前記変換されたイメージファイルを、前記表示手段に表示させる範囲として前記一文字の高さ分読み出し、読み出し範囲を拡大しながら表示制御信号として出力すること、
を実行させ、
前記テキストデータを1つのイメージファイルに変換することが、
前記テキストデータが一文字ずつ変換されたイメージデータを、前記テキストデータの文字数に応じてフレームバッファの行列サイズに合わせて並べ替えて配置することおよび
前記変換されたイメージファイルは、前記一文字の前記イメージデータの行列サイズが前記フレームバッファの行列サイズの整数分の1となるサイズとして生成することを含む、装置実行可能なプログラム。
A program executed by a display control device that controls a telop display of a display unit, wherein the display control device includes:
After converting the text data to be displayed as a telop character by character to the image data of a raster format, to convert into a single image file rearranges image data described above transformation,
The converted image file is read by the height of the one character as a range to be displayed on the display means, and output as a display control signal while enlarging the read range,
And execute
Converting the text data into one image file;
Image data in which the text data is converted one character at a time, rearranging and arranging the image data according to the number of characters of the text data in accordance with the matrix size of a frame buffer;
An apparatus-executable program including generating the converted image file as a size in which a matrix size of the image data of one character is an integer fraction of a matrix size of the frame buffer.
JP2018065086A 2018-03-29 2018-03-29 Display control device, display control system, method and program Active JP6624528B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2018065086A JP6624528B2 (en) 2018-03-29 2018-03-29 Display control device, display control system, method and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018065086A JP6624528B2 (en) 2018-03-29 2018-03-29 Display control device, display control system, method and program

Publications (2)

Publication Number Publication Date
JP2019174734A JP2019174734A (en) 2019-10-10
JP6624528B2 true JP6624528B2 (en) 2019-12-25

Family

ID=68166922

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018065086A Active JP6624528B2 (en) 2018-03-29 2018-03-29 Display control device, display control system, method and program

Country Status (1)

Country Link
JP (1) JP6624528B2 (en)

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0822385A (en) * 1994-02-22 1996-01-23 Nippon Hoso Kyokai <Nhk> Method and device for displaying line of sight correspondence
JPH08154217A (en) * 1994-11-25 1996-06-11 Sony Corp Television receiver
JPH09149330A (en) * 1995-11-22 1997-06-06 Sony Corp Device for controlling display and its method
JPH09266450A (en) * 1996-03-27 1997-10-07 Sony Corp Video display device
JPH09319383A (en) * 1996-05-29 1997-12-12 Ekushingu:Kk Karaoke device
JP2003174630A (en) * 2001-12-06 2003-06-20 Sanyo Electric Co Ltd Data broadcast receiver
JP5712032B2 (en) * 2011-04-06 2015-05-07 シャープ株式会社 Display device and display method
JP6054333B2 (en) * 2014-05-09 2016-12-27 株式会社東芝 Image display system, display device, and information processing method

Also Published As

Publication number Publication date
JP2019174734A (en) 2019-10-10

Similar Documents

Publication Publication Date Title
KR100412763B1 (en) Image processing apparatus
US7119849B2 (en) Multi-screen synthesis apparatus, method of controlling the apparatus, and program for controlling the apparatus
US8723891B2 (en) System and method for efficiently processing digital video
US9092879B2 (en) Image display apparatus and image display method
JP2002171457A (en) Multi-screen display device, data broadcast receiver, multi-screen display method, storage medium and program
JPH10504113A (en) Variable pixel depth and format for video windows
US10389908B2 (en) Image processing device, image processing method, and program with reduction and enlargement scaling of image data
US8358363B2 (en) Video-processing apparatus, method and system
JP3959263B2 (en) Presentation system, image display apparatus, program, and recording medium
EP2463762B1 (en) Information processing device, information processing method, and data structure for content files
CN114710633A (en) Display apparatus and video signal display method
US20100033505A1 (en) Method for partially zooming a screen of a display, and electronic device applying the method
CN110825334A (en) Display control apparatus, control method thereof, and computer readable medium
CN113849143A (en) Display method, display device, and storage medium
JP6624528B2 (en) Display control device, display control system, method and program
JP4484775B2 (en) Playback apparatus and playback method
WO2020051495A1 (en) Multi-panel display
US8972877B2 (en) Information processing device for displaying control panel image and information image on a display
JP3872295B2 (en) Data display method, recording medium, and processor-based system
JP2008098741A (en) Telop generation apparatus and telop composition method
CN112770169B (en) List circulating page turning method and display device
JPH06124189A (en) Image display device and image display control method
JP3024622B2 (en) Image processing device
JP3881630B2 (en) Computer system
JP2002209155A (en) Program list display system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180330

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180618

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180717

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20181106

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20181227

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190528

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190612

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20191029

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20191114

R150 Certificate of patent or registration of utility model

Ref document number: 6624528

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150