JPWO2019130492A1

JPWO2019130492A1 - 漫画データ表示システム、方法及びプログラム

Info

Publication number: JPWO2019130492A1
Application number: JP2019561483A
Authority: JP
Inventors: 俊二菅谷
Original assignee: Optim Corp
Current assignee: Optim Corp
Priority date: 2017-12-27
Filing date: 2017-12-27
Publication date: 2020-11-19
Anticipated expiration: 2037-12-27
Also published as: CN111492408A; WO2019130492A1; JP6924544B2; US20210073458A1

Abstract

【課題】任意の漫画に対して、端末でスクロールして表示できるようにコマを順番に表示するためのシステムを提供する。【解決手段】本発明の漫画データ表示システム１において、制御部１０は、漫画データ取得モジュール１１を実行し、漫画撮影データを取得する。そして、制御部１０は、コマ表示モジュール１２を実行し、漫画データのコマの遷移に関する学習結果が記憶されたコマ順データベース３１に基づいて、取得した漫画撮影データに含まれるコマを順番に並べて表示する。【選択図】図１

Description

本発明は、漫画データ表示システム、方法及びプログラムに関する。

漫画は、世界各国において多くのユーザに親しまれる娯楽である。

従来は、単行本や雑誌等、紙面に印刷されたコンテンツを読むことが、漫画の楽しみ方の主流であったが、携帯電話端末、スマートフォンやタブレット端末等、通信機能を有し、デジタルコンテンツを鮮明に表示することができる電子機器の発達により、これらの電子機器を使用して漫画を読むことが主流になりつつある（特許文献１）。

特開２０１６−１３４１７９号公報

スマートフォンやタブレット端末で漫画データを表示する際、画面を縦又は横にスクロールして順番に内容を表示することになる。特に、スマートフォンのように、表示画面の大きさが４インチから６インチ程度と比較的小さな電子機器に表示する際、コマの視認性を高めるため、表示画面に一つのコマを表示させ、コマが遷移する毎に、表示画面に一つのコマずつ表示させることが好ましい。その際、表示画面の大きさに応じて、コマの大きさを拡大して表示することが好ましい。

ところが、漫画は、一枚のページに複数のコマが描かれていることが通常であり、しかも、それぞれのコマの大きさや並び方は一定ではない。一つのコマを拡大して順に画面に表示する場合、どのような順番で画面に表示するかが課題となる。

本発明は、このような要望に鑑みてなされたものであり、任意の漫画に対して、端末でスクロールして表示できるようにコマを順番に表示するためのシステムを提供することを目的とする。

本発明では、以下のような解決手段を提供する。

第１の特徴に係る発明は、端末に漫画データを表示する漫画データ表示システムであって、漫画データのコマの遷移に関する学習結果が記憶されたコマ順データベースと、漫画を撮影した漫画撮影データを取得する漫画データ取得手段と、前記コマ順データベースに基づいて、取得した前記漫画撮影データに含まれるコマを順番に並べて表示するコマ表示手段と、を備える漫画データ表示システムを提供する。

第１の特徴に係る発明によれば、漫画から抽出したコマを、学習されたコマの遷移が記憶されているコマ順データベースを使用して順番に並べるため、画面の大きさに関わらず、端末でスクロールして表示することができるようコマを順番に表示可能なシステムを提供できる。

第２の特徴に係る発明は、第１の特徴に係る発明であって、前記コマ表示手段は、抽出したコマを縦に並べ、前記端末に対する上下のスライドで順番に表示する、漫画データ表示システムを提供する。

第２の特徴に係る発明によれば、抽出したコマを縦に並べ、端末に対する上下のスライドで順番に表示するため、ブラウザでウェブサイトを閲覧するような操作でコマを表示可能な、ユーザーインターフェースに富んだシステムを提供できる。

第３の特徴に係る発明は、第１又は第２の特徴に係る発明であって、前記コマ表示手段は、漫画データのコマの遷移をユーザ毎に学習して記憶した、漫画データ表示システムを提供する。

第３の特徴に係る発明によれば、コマの遷移をユーザ毎に学習して記憶したデータベースを使用してコマを表示するため、ユーザごとの読む際の癖や好みを反映することができ、精度の高いシステムを提供できる。

第４の特徴に係る発明は、第１の特徴に係る発明であって、前記コマ表示手段は、抽出したコマを横に並べ、前記端末に対する左右のスライドで順番に表示する、漫画データ表示システムを提供する。

第４の特徴に係る発明によれば、通常の漫画を読む方向にコマを並べて表示するため、ページをめくるような感覚で読むことが可能なシステムを提供できる。

第５の特徴に係る発明は、第１の特徴に係る発明であって、前記漫画データに含まれる内容と当該内容に対応する効果音との関係が記憶される効果音データベースをさらに備え、前記コマ表示手段は、コマを表示した際に、前記効果音データベースに基づいて、表示したコマに対応する音を出力する、漫画データ表示システムを提供する。

第５の特徴に係る発明によれば、漫画に描かれたイラストだけでなく、音声を併せて使用するため、より叙情的で臨場感のあるシステムを提供できる。

本発明によれば、任意の漫画に対して、コマを順番に並べて表示するためのシステムを提供できる。

図１は、本実施形態における漫画データ表示システム１のハードウェア構成とソフトウェア機能を示すブロック図である。図２は、本実施形態におけるコマ順データベース３１の一例を示す図である。図３は、本実施形態における効果音データベース３２の一例を示す図である。図４は、本実施形態における漫画データ表示方法を示すフローチャートである。図５は、上記漫画データ表示方法を実施する際の制御部１０での動作を説明するための図である。図６は、図５に続く図である。図７は、本実施形態における小さいコマを拡大して表示することを示す模式図である。図８は、コマを縦方向に並べる場合における、表示の方式を説明する模式図である。

以下、本発明を実施するための形態について図を参照しながら説明する。なお、これはあくまでも一例であって、本発明の技術的範囲はこれに限られるものではない。

［漫画データ表示システム１の構成］
図１は、本実施形態における漫画データ表示システム１のハードウェア構成とソフトウェア機能を説明するためのブロック図である。

漫画データ表示システム１は、データを制御する制御部１０と、他の機器と通信を行う通信部２０と、データを記憶する記憶部３０と、ユーザの操作を受け付ける入力部４０と、制御部１０で制御したデータや画像を出力表示する画像表示部５０と、画像を取得するためのカメラ６０と、音声を出力する音声出力部７０とを備える。

制御部１０は、ＣＰＵ（ＣｅｎｔｒａｌＰｒｏｃｅｓｓｉｎｇＵｎｉｔ）、ＲＡＭ（ＲａｎｄｏｍＡｃｃｅｓｓＭｅｍｏｒｙ）、ＲＯＭ（ＲｅａｄＯｎｌｙＭｅｍｏｒｙ）等を備える。

通信部２０は、他の機器と通信可能にするためのデバイス、例えば、ＩＥＥＥ８０２．１１に準拠したＷｉ−Ｆｉ（ＷｉｒｅｌｅｓｓＦｉｄｅｌｉｔｙ）対応デバイスを備える。

制御部１０は、所定のプログラムを読み込み、必要に応じて通信部２０と協働することで、漫画データ取得モジュール１１と、コマ表示モジュール１２とを実現する。

記憶部３０は、データやファイルを記憶する装置であって、ハードディスクや半導体メモリ、記録媒体、メモリカード等による、データのストレージ部を備える。記憶部３０には、コマ順データベース３１と、効果音データベース３２と、画像情報データベース３３とが記憶される。また、記憶部３０には、後に説明するカメラ６０で撮影した撮影画像データを記憶可能である。

図２は、コマ順データベース３１の一例を示す図である。コマ順データベース３１には、漫画のコマ割りのイメージを示すイメージテンプレートと、当該イメージテンプレートにおけるコマの遷移の順番を示すコマ順テンプレートとが対応づけて記憶されている。

初期設定として、漫画データ表示システム１の提供者側において、多数のイメージテンプレートの各々について、コマの遷移の正しい順番をコマ順テンプレートとして記憶させる。そして、漫画データ表示システム１の提供者は、制御部１０に対し、いわゆるＡＩ（ＡｒｔｉｆｉｃｉａｌＩｎｔｅｌｌｉｇｅｎｃｅ）の機能を発揮して、コマの遷移の正しい順番を学習させる。

例えば、コマ順識別子「１」に関し、コマ順データベース３１には、漫画のコマ割りのイメージを示すイメージテンプレートが記憶されている。イメージテンプレートのファイル形式は、画像ファイルのファイル形式であれば特に限定されない。例えば、ＪＰＥＧデータであってもよいし、ＢＭＰデータであってもよいし、他のファイル形式であってもよい。

そして、コマ順テンプレートを記憶する記憶領域には、コマの遷移の正しい順番が記憶されている。この場合、コマは、「１」、「２」、「３」、「４」、「５」の順番で遷移することを示している。

図３は、効果音データベース３２の一例を示す図である。効果音データベース３２には、漫画を撮影したときの撮影画像に含まれる文字や絵柄のイメージを示すイメージテンプレートと、当該イメージテンプレートに応じたテキストテンプレートと、上記イメージテンプレートに応じた効果音とが対応づけて記憶されている。

初期設定として、漫画データ表示システム１の提供者側において、多数のイメージテンプレートの各々について、文字や絵柄に応じた文字及び効果音を、それぞれテキストテンプレート及び効果音テンプレートとして記憶させる。そして、漫画データ表示システム１の提供者は、制御部１０に対し、いわゆるＡＩ（ＡｒｔｉｆｉｃｉａｌＩｎｔｅｌｌｉｇｅｎｃｅ）の機能を発揮して、正しい効果音等を学習させる。

例えば、効果音識別子「１」に関し、効果音データベース３２には、「ドーン」との文字のイメージを示すイメージテンプレートが記憶されている。イメージテンプレートのファイル形式は、画像ファイルのファイル形式であれば特に限定されない。例えば、ＪＰＥＧデータであってもよいし、ＢＭＰデータであってもよいし、他のファイル形式であってもよい。

そして、テキストテンプレートを記憶する記憶領域には、イメージテンプレートに記憶される文字画像あるいは図柄画像に応じた文字がテキストデータとして記憶される。例えば、イメージテンプレートとして「ドーン」との文字のイメージデータが記憶されていれば、テキストテンプレートとして「ドーン」とのテキストデータが記憶される。

そして、効果音テンプレートを記憶する記憶領域には、イメージテンプレートに記憶される文字画像あるいは図柄画像に応じた効果音が音データとして記憶される。効果音テンプレートのファイル形式は、音声ファイルのファイル形式であれば特に限定されない。例えば、ＷＡＶＥ形式、ＡＩＦＦ形式、ＭＰ３形式、ＡＡＣ形式、ＦＬＡＣ形式のいずれであってもよいし、他のファイル形式であってもよい。

効果音識別子「１」であれば、効果音テンプレートとして「ドーン」との爆発音の音声ファイルが記憶されている。

画像情報データベース３３には、後に説明する画像表示部６０の大きさに関する情報が記憶される。例えば、ある機種では、画像表示部６０の大きさが４インチであり、縦のピクセル数が１１３６ピクセルであり、横のピクセル数が６４０ピクセルであるとの情報が記憶される。

また、別の機種では、画像表示部６０の大きさが５．５インチであり、縦のピクセル数が１９２０ピクセルであり、横のピクセル数が１０８０ピクセルであるとの情報が記憶される。

図１に戻る。入力部４０の種類は、特に限定されない。入力部４０として、例えば、キーボード、マウス、タッチパネル等が挙げられる。

画像表示部５０の種類は、特に限定されない。画像表示部５０として、例えば、モニタ、タッチパネル等が挙げられる。

［漫画データ表示システム１を用いた漫画データ表示方法を示すフローチャート］
図４は、漫画データ表示システム１を用いた漫画データ表示方法を示すフローチャートである。

〔ステップＳ１０：画像の取得〕
最初に、漫画データ表示システム１の制御部１０は、漫画データ取得モジュール１１を実行し、カメラ６０によって撮影された漫画撮影データを取得する（ステップＳ１０）。

図５の（Ａ）は、カメラ６０によって撮影された漫画撮影データの一例を示す。撮影された漫画は、一枚のページに複数のコマが描かれており、それぞれのコマの大きさや並び方が一定ではない。

〔ステップＳ２０：コマの表示〕
続いて、制御部１０は、コマ表示モジュール１２を実行する。このとき、制御部１０は、記憶部３０に記憶されたコマ順データベース３１を読み出し、過去に学習されたコマ順に基づいて、漫画撮影データに含まれる複数のコマの正しい順番を予測し、予測した順番にしたがって、画面表示部５０に順番に表示させる（ステップＳ３０）。

この処理において、制御部１０は、記憶部３０に記憶されたコマ順データベース３１を読み出し、ステップＳ１０で取得した漫画撮影データを画像認識し、コマ順データベース３１に記憶されたイメージテンプレートの中から、最も近いイメージテンプレートを検索する。画像認識の手法は特に限定されず、これまで知られた手法でよい。

例えば、ステップＳ１０で取得した漫画撮影データが図５の（Ａ）に示すデータである場合、制御部１０は、コマ順識別子「１」に相当するイメージテンプレートが最も近いイメージテンプレートであると判別する。

続いて、制御部１０は、最も近いと判別したイメージテンプレートに応じたコマ順テンプレートを読み出し、読み出したコマ順テープレートに応じたコマ順を、ステップＳ１０で取得した漫画撮影データに割り当てる。図５の（Ｂ）は、コマ順を割り当てた後の漫画撮影データの一例を示す。

続いて、制御部１０は、割り当てたコマ順にしたがって、漫画撮影データからコマを一つ一つ抽出し、画像表示部５０に表示する。

図６の（Ａ）は、そのときの画像表示部５０での一の表示例を示す。画像表示部５０には、コマ順テープレートに応じた順番で漫画が表示される。図６の（Ａ）において、コマとコマの間に入っている線は、ページの切れ目を示す。

ところで、画像表示部５０で表示されるコマの順番が正しくないこともあり得る。そこで、ユーザが画面表示部５０に表示されたコマの順番を確認し、必要があれば順番を手動で入れ替える修正を行い、制御部１０が修正の指示操作に応じてコマの順番の入れ替えを実行可能にしてもよい。修正があれば、修正後の順番がコマの順番として確定し、修正がなければ、そのままの順番がコマの順番として確定する。

図６の（Ｂ）は、修正したときの画像表示部５０での表示例を示す。図６の（Ａ）と対比すると、３番目とされていたコマと、４番目とされていたコマの順序が入れ替えられている。

制御部１０が、このようにして確定したコマ順を記憶部３０のコマ順データベース３１が記憶することで、制御部１０は、今後予測を行うための新たなデータとして学習することができる。また、学習内容のデータを、漫画データ表示システム１の提供者が管理するサーバ（図示せず）に送信可能にしてもよい。当該サーバでユーザの情報を複数受信し、受信した情報を、所定のタイミングでユーザの端末（漫画データ表示システム１）に配信することで、漫画データ表示システム１の制御部１０が機能するＡＩとしての性能を高めることができる。

また、コマの大きさを、画面の大きさに応じて倍率を変えて表示させるようにしてもよい。例えば、制御部１０は、漫画撮影データに含まれるそれぞれのコマの大きさを計算し、記憶部３０の所定領域にセットする。そして、制御部１０は、画像情報データベース３３を読み出し、それぞれのコマについて、画像表示部５０で表示可能であり、かつ、できるだけ大きく表示可能な倍率を計算する。そして、制御部１０は、漫画撮影データに含まれるそれぞれのコマについて、計算した倍率で拡大して表示する。

例えば、図７の（Ａ）に示すように、例えばコマが小さくて見にくい場合、図７の（Ｂ）に示すように、画面に収まるようにコマの大きさを変え、表示するよう構成することも可能である。このような構成とすることで、画面の小さなスマートフォンのような端末であっても、ユーザが容易に内容を視認することができる漫画データ表示システム１を構築することができる。

本実施形態においては、コマは一画面につき一列に表示されているが、端末の画面の大きさに応じて、二列やそれ以上表示される構成としても構わない。例えば、スマートフォンであれば一列表示とし、１０インチ以上の画面を備えたタブレット端末であれば二列表示に切り替えるよう設定することができる。このようにすることで、端末の画面表示の性能を十分に発揮しつつ使い勝手の良い漫画データ表示システムを実現することが可能となる。

図８に、コマを縦方向に並べる場合における、表示の方式を説明する模式図を示す。コマを画面に表示する方法としては、図８（Ａ）に示されるような、連続して表示される複数のコマをスクロールして表示させる方法、及び、図８（Ｂ）に示されるように、一度の表示で一つのコマのみ表示させ、画面をクリック又はタップすることで次のコマを表示させる方法がある。図８（Ａ）に示されるような、複数のコマが連続して表示される方式の場合、ユーザの好みのスピードでスクロールすることができるため、ユーザの好みに合った速度で読み進めることができる。一方、図８（Ｂ）に示されるような、一度に一つのコマのみ表示される方式の場合、表示されるまで先のコマの内容が分からないため、より没入感及び臨場感を味わることができる表示システムを構築することができる。

また、本実施形態においては、コマを縦方向に並べることを前提に説明しているが、コマを並べる方向としては、縦方向であっても横方向であっても構わない。縦方向にコマを並べる場合、上下に画面をスクロールすることにより、整列したコマを表示することとなるが、横方向に並べた場合、左右に画面をスクロールさせてコマを表示させることとなる。

ところで、本実施形態においては、コマ割りの学習方法は、ユーザ毎にデータベースを構築し、それに基づいてコマの遷移を決めるよう構成されている。このようなシステムの場合、ユーザの読む際の癖や好みを反映させたデータベースを構築することが可能となるため、学習するほど、修正の必要性が低くユーザの好みに合った漫画データ表示システムの実現が可能となる。

あるいは、ユーザごとのデータベースに替えて、様々なユーザによるコマ割りのデータが格納されているデータベースをネットワーク経由で使用することも可能である。この場合、ステップＳ２０におけるデータベースの読み出しは、通信部２０と協働して実行される。このように、多数のユーザによるデータが格納されているデータベースを使用する場合、現在解析しようとしている漫画と同一の漫画に関するコマ順データが既に存在している可能性が高いため、解析の時間や撮影の時間を省略することができ、使い勝手の良い漫画データ表示システムを構築することが可能となる。

また、漫画データ表示システム１は、単に、抽出したマンガ撮影データを画面に表示させるだけでなく、同時に音声を出力するように構成することも可能である。すなわち、漫画によっては、「ドーン」「ガガガ・・・」等の効果音がコマに記載されていることがある。このような場合において、制御部１０は、効果音データベース３２を読み出し、漫画撮影データに含まれる文字列や特定の絵柄を読み出す。文字列を読み出す手法は、従来公知の文字認識方法でよく、特に限定されない。特定の絵柄を読み出す手法は、従来公知の画像認識方法でよく、特に限定されない。

そして、制御部１０は、認識した文字列あるいは絵柄に応じた効果音を読み出し、認識した文字列あるいは絵柄が画像表示部５０に表示されたタイミングで、効果音を音声出力部７０から出力する。そうすることにより、より臨場感のある漫画データ表示システムを構築することが可能となる。

あるいは、実際に文字として記載されている効果音だけでなく、例えば、桜の木のイラストが描かれているコマを表示させる際に春を連想させる曲を出力する、あるいは、「卒業」という文字を認識したら卒業に関連した曲を出力する、というように、実際に記載された擬音語以外の音声を出力するよう構成することも可能である。このようなシステム構成とすることにより、より叙情的で臨場感のある漫画データ表示システムを構築することが可能となる。

以上、本発明の実施形態について説明したが、本発明は上述したこれらの実施形態に限るものではない。また、本発明の実施形態に記載された効果は、本発明から生じる最も好

１漫画データ表示システム
１０制御部
１１漫画データ取得モジュール
１２コマ抽出モジュール
２０通信部
３０記憶部
３１コマ順データベース
３２効果音データバース
３３画面情報データベース
４０入力部
５０画像表示部
６０カメラ
７０音声出力部

Claims

端末に漫画データを表示する漫画データ表示システムであって、
漫画データのコマの遷移に関する学習結果が記憶されたコマ順データベースと、
漫画を撮影した漫画撮影データを取得する漫画データ取得手段と、
前記コマ順データベースに基づいて、取得した前記漫画撮影データに含まれるコマを順番に並べて表示するコマ表示手段と、を備える漫画データ表示システム。
前記コマ表示手段は、抽出したコマを縦に並べ、前記端末に対する上下のスライドで順番に表示する、請求項１に記載の漫画データ表示システム。
前記コマ順データベースは、前記漫画データのコマの遷移をユーザ毎に学習したデータベースである、請求項１又は２に記載の漫画データ表示システム。
前記コマ表示手段は、抽出したコマを横に並べ、前記端末に対する左右のスライドで順番に表示する、請求項１に記載の漫画データ表示システム。
前記漫画データに含まれる内容と当該内容に対応する効果音との関係が記憶される効果音データベースをさらに備え、
前記コマ表示手段は、コマを表示した際に、前記効果音データベースに基づいて、表示したコマに対応する音を出力する、請求項１から４のいずれかに記載の漫画データ表示システム。
漫画を撮影した漫画撮影データを取得するステップと、
漫画データのコマの遷移に関する学習結果が記憶されたコマ順データベースに応じて、取得した前記漫画撮影データに含まれるコマを順番に並べて表示するステップと、
を有する漫画データ表示方法。
電子機器に、
漫画を撮影した漫画撮影データを取得するステップと、
を実行させるプログラム。