JP7327153B2 - Information recording device and program - Google Patents

Information recording device and program Download PDF

Info

Publication number
JP7327153B2
JP7327153B2 JP2019234672A JP2019234672A JP7327153B2 JP 7327153 B2 JP7327153 B2 JP 7327153B2 JP 2019234672 A JP2019234672 A JP 2019234672A JP 2019234672 A JP2019234672 A JP 2019234672A JP 7327153 B2 JP7327153 B2 JP 7327153B2
Authority
JP
Japan
Prior art keywords
page
information
unit
picture
switching
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019234672A
Other languages
Japanese (ja)
Other versions
JP2021103452A (en
Inventor
幸代 坂本
依里子 西
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Dai Nippon Printing Co Ltd
Original Assignee
Dai Nippon Printing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Dai Nippon Printing Co Ltd filed Critical Dai Nippon Printing Co Ltd
Priority to JP2019234672A priority Critical patent/JP7327153B2/en
Publication of JP2021103452A publication Critical patent/JP2021103452A/en
Application granted granted Critical
Publication of JP7327153B2 publication Critical patent/JP7327153B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Controls And Circuits For Display Device (AREA)
  • User Interface Of Digital Computer (AREA)

Description

本発明は、デジタル紙芝居システムに関する。 The present invention relates to a digital picture-story show system.

従来の紙を用いた紙芝居に代わり、電子画像を用いたいわゆるデジタル紙芝居が提案されている。例えば、特許文献1、2は、電子画像を表示する電子式の紙芝居装置を記載している。 A so-called digital picture-story show using electronic images has been proposed instead of the conventional picture-story show using paper. For example, Patent Documents 1 and 2 describe electronic picture-story shows that display electronic images.

特開平4-338480号公報JP-A-4-338480 実用新案登録3175900号公報Utility Model Registration No. 3175900

特許文献2の電子式紙芝居装置では、電子化されたコンテンツ画像を視聴者に表示しつつ、語り手がテキスト情報を読み聞かせることにより、紙芝居などの芝居的パフォーマンスを行うことができる。しかし、語り手側は、実際に自分のパフォーマンスがどのように行われているかを見ることができない。このため、子供などが見やすいように紙芝居を行えているかを確認したり、上手に紙芝居を行うように練習したりすることはできない。 In the electronic picture-story show apparatus of Patent Document 2, a storyteller reads text information while displaying an electronic content image to a viewer, thereby making it possible to perform a play-like performance such as a picture-story show. However, the narrator cannot see how his performance is actually performed. For this reason, it is not possible to check whether a child can perform the picture-story show in a way that is easy to see, or to practice to perform the picture-story show skillfully.

本発明は、画像コンテンツを提示する操作の履歴を記録しておくことが可能な情報記録装置を提供することを主な目的とする。 A main object of the present invention is to provide an information recording device capable of recording a history of operations for presenting image content.

本発明の1つの観点では、情報記録装置は、複数のページを有する画像コンテンツを表示する画像表示部と、前記画像表示部に表示されているページの切替操作を受け取る操作入力部と、音声の入力を受け取る音声入力部と、前記画像表示部に表示されている前記画像コンテンツのページ情報と、音声入力部に入力された音声情報とを含む操作履歴情報を記録する記録部と、を備え、前記ページ情報は、前記画像表示部に表示されている前記画像コンテンツのページ番号、及び、前記ページの切替方法を示すページ切替情報を含み、前記ページ切替情報は、ページの切替方向及び切替速度を含む
According to one aspect of the present invention, an information recording device includes an image display unit that displays image content having a plurality of pages, an operation input unit that receives an operation to switch pages displayed on the image display unit, and an audio output unit. a voice input unit for receiving input; a recording unit for recording operation history information including page information of the image content displayed on the image display unit and voice information input to the voice input unit ; The page information includes a page number of the image content displayed on the image display unit and page switching information indicating a switching method of the page, and the page switching information indicates a page switching direction and switching speed. Including .

上記の情報記録装置において、画像表示部は複数のページを有する画像コンテンツを表示する。操作入力部は、画像表示部に表示されているページの切替操作を受け取り、音声入力部は、音声の入力を受け取る。そして、記録部は、画像表示部に表示されている画像コンテンツのページ情報と、音声入力部に入力された音声情報とを含む操作履歴情報を記録する。これにより、操作者が行った画像コンテンツを提示する操作の履歴を記録しておくことができる。前記ページ情報は、前記画像表示部に表示されている前記画像コンテンツのページ番号、及び、前記ページの切替方法を示すページ切替情報を含む。これにより、ページ切替情報に基づいて、操作者が行ったページ切替を再現することが可能となる。好適な例では、前記ページ切替情報は、ページの切替方向及び切替速度を含む。
In the above information recording device, the image display section displays image content having a plurality of pages. The operation input section receives a page switching operation displayed on the image display section, and the voice input section receives voice input. The recording unit records operation history information including page information of image content displayed on the image display unit and audio information input to the audio input unit. Thereby, it is possible to record the history of the operation of presenting the image content performed by the operator. The page information includes a page number of the image content displayed on the image display section and page switching information indicating a switching method of the page. This makes it possible to reproduce the page switching performed by the operator based on the page switching information. In a preferred example, the page switching information includes a page switching direction and a page switching speed.

上記の情報記録装置の一態様では、前記操作履歴情報は、前記ページ情報及び前記音声情報を時間に対応付けた情報である。この態様では、操作履歴情報に基づいて、画像コンテンツ及び音声を再生することが可能となる。 In one aspect of the information recording device, the operation history information is information in which the page information and the audio information are associated with time. In this aspect, image content and audio can be reproduced based on the operation history information.

上記の情報記録装置の他の一態様では、前記画像表示部及び前記操作入力部は、タッチパネルにより構成され、前記ページの切替操作は、前記画像コンテンツが表示されているタッチパネルに対する操作により行われる。この態様では、タッチパネルを利用して画オズの表示及び操作入力が可能となる。 In another aspect of the information recording device, the image display unit and the operation input unit are configured by a touch panel, and the page switching operation is performed by operating the touch panel on which the image content is displayed. In this aspect, it is possible to use the touch panel to display the image size and perform operation input.

上記の情報記録装置の他の一態様は、前記画像コンテンツ及び前記操作履歴情報を取得し、前記操作履歴情報に基づいて、前記画像コンテンツ及び前記音声を再生する再生部を備える。この態様では、操作履歴情報を用いて、操作者が行った画像コンテンツ及び音声の提示を再現することができる。 Another aspect of the above information recording apparatus includes a reproducing unit that acquires the image content and the operation history information and reproduces the image content and the sound based on the operation history information. In this aspect, the operation history information can be used to reproduce the presentation of image content and sound performed by the operator.

本発明の他の観点では、プログラムは、複数のページを有する画像コンテンツを表示する画像表示部、前記画像表示部に表示されているページの切替操作を受け取る操作入力部、音声の入力を受け取る音声入力部、前記画像表示部に表示されている前記画像コンテンツのページ情報と、音声入力部に入力された音声情報とを含む操作履歴情報を記録する記録部、としてコンピュータを機能させ、前記ページ情報は、前記画像表示部に表示されている前記画像コンテンツのページ番号、及び、前記ページの切替方法を示すページ切替情報を含み、前記ページ切替情報は、ページの切替方向及び切替速度を含む。このプログラムをコンピュータで実行することにより、上記の情報記録装置を実現することができる。 In another aspect of the present invention, a program comprises: an image display unit for displaying image content having a plurality of pages; an operation input unit for receiving an operation to switch pages displayed on the image display unit; causing a computer to function as an input unit and a recording unit for recording operation history information including page information of the image content displayed on the image display unit and audio information input to the audio input unit; includes a page number of the image content displayed on the image display unit and page switching information indicating a method of switching the page, and the page switching information includes a page switching direction and switching speed. By executing this program on a computer, the above information recording apparatus can be realized.

本実施形態によるデジタル紙芝居システムの全体構成を示す。1 shows the overall configuration of a digital picture-story show system according to this embodiment. タブレット端末のハードウェア構成を示すブロック図である。It is a block diagram which shows the hardware constitutions of a tablet terminal. タブレット端末の機能構成を示すブロック図である。It is a block diagram which shows the function structure of a tablet terminal. タブレット端末のメニュー画面の表示例を示す。2 shows an example of display of a menu screen of a tablet terminal. 紙芝居実施画面の例を示す。An example of a picture-story show implementation screen is shown. ページ切替操作の例を示す。An example of page switching operation is shown. 操作履歴情報の例を示す。An example of operation history information is shown. 操作履歴記録処理のフローチャートである。8 is a flowchart of operation history recording processing;

以下、図面を参照しながら、本発明の実施の形態について説明する。
[構成]
(全体構成)
図1は、本実施形態によるデジタル紙芝居システムの構成を示す。図示のように、デジタル紙芝居システムは、表示装置5と、タブレット端末10と、を備える。表示装置5とタブレット端末10はケーブル6で接続され、通信可能となっている。タブレット端末10は、紙芝居の操作を行う親や先生など(以下、「操作者」と呼ぶ。)により操作される。表示装置5は、子供などに紙芝居を見せるための大画面の表示装置であり、紙芝居の画像を表示し、操作者による紙芝居の音声を再生する。具体的には、タブレット端末10の一部に表示されている紙芝居の画像が表示装置5に送信されて表示される。また、操作者による音声がマイクにより集音され、表示装置5に送信されて出力される。なお、表示装置5とタブレット端末10との通信は、無線LAN(Local Area Network)や、Bluetooth(登録商標)などの無線通信を用いてもよい。
BEST MODE FOR CARRYING OUT THE INVENTION Hereinafter, embodiments of the present invention will be described with reference to the drawings.
[composition]
(overall structure)
FIG. 1 shows the configuration of a digital picture-story show system according to this embodiment. As illustrated, the digital picture-story show system includes a display device 5 and a tablet terminal 10 . The display device 5 and the tablet terminal 10 are connected by a cable 6 and are communicable. The tablet terminal 10 is operated by a parent, teacher, or the like (hereinafter referred to as "operator") who operates the picture-story show. The display device 5 is a large-screen display device for showing the picture-story show to children and the like, and displays the image of the picture-story show and reproduces the sound of the picture-story show by the operator. Specifically, the picture-story show image displayed on a part of the tablet terminal 10 is transmitted to the display device 5 and displayed. Also, the voice of the operator is collected by the microphone, transmitted to the display device 5, and output. The communication between the display device 5 and the tablet terminal 10 may use wireless communication such as a wireless LAN (Local Area Network) or Bluetooth (registered trademark).

(ハードウェア構成)
図2は、タブレット端末10のハードウェア構成を示すブロック図である。タブレット端末10は、通信部11と、CPU(Central Processing Unit)と、メモリ13と、タッチパネル14と、マイク15と、コンテンツDB(DataBase)16と、を備える。これらの要素は、バス19により接続されている。通信部11は、表示装置5との間で通信を行うためのユニットであり、ケーブル6を使用する場合はそのインタフェースであり、無線通信を使用する場合は無線通信ユニットとなる。
(Hardware configuration)
FIG. 2 is a block diagram showing the hardware configuration of the tablet terminal 10. As shown in FIG. The tablet terminal 10 includes a communication unit 11 , a CPU (Central Processing Unit), a memory 13 , a touch panel 14 , a microphone 15 and a content DB (DataBase) 16 . These elements are connected by a bus 19 . The communication unit 11 is a unit for communicating with the display device 5, and is an interface when the cable 6 is used, and a wireless communication unit when wireless communication is used.

CPU12は、予め用意されたプログラムを実行することにより、タブレット端末10の全体を制御する。本実施形態では、CPU12は、後述する操作履歴記録処理などを実行する。メモリ13は、ROM(Read Only Memory)、RAM(Random Access Memory)などにより構成され、CPU12が実行するプログラムを記憶するとともに、各種の処理の実行中に作業メモリとして機能する。 The CPU 12 controls the entire tablet terminal 10 by executing a program prepared in advance. In this embodiment, the CPU 12 executes operation history recording processing and the like, which will be described later. The memory 13 is composed of a ROM (Read Only Memory), a RAM (Random Access Memory), etc., stores programs executed by the CPU 12, and functions as a working memory during execution of various processes.

タッチパネル14は、表示装置であるとともに、タッチ入力を受け付ける入力装置である。操作者は、タッチパネル14に表示された画像やボタンなどに対して操作入力を行うことにより、紙芝居の実行や操作履歴記録処理を行う。マイク15は、紙芝居の実施時に、操作者の音声を集音する。 The touch panel 14 is a display device and an input device that receives touch input. The operator executes a picture-story show and performs operation history recording processing by performing operation input on images, buttons, and the like displayed on the touch panel 14 . The microphone 15 collects the operator's voice when the picture-story show is performed.

コンテンツDB16は、タブレット端末10の内部のハードディスクや外付けのフラッシュメモリなどとすることができ、紙芝居に関するコンテンツを記憶する。なお、詳細は後述するが、紙芝居に関するコンテンツは、操作者が紙芝居を行うためのコンテンツ(以下、「紙芝居コンテンツ」と呼ぶ。)と、後述の操作履歴記録処理により、操作者により行われた紙芝居の操作履歴が記録されている紙芝居コンテンツ(以下、「記録済コンテンツ」と呼ぶ。)と、を含む。 The content DB 16 can be a hard disk inside the tablet terminal 10, an external flash memory, or the like, and stores content related to the picture-story show. Although the details will be described later, the content related to the picture-story show includes the content for the operator to perform the picture-story show (hereinafter referred to as “picture-story show content”) and the picture-story show performed by the operator by the operation history recording process described later. Picture-story show content (hereinafter referred to as “recorded content”) in which the operation history of is recorded.

上記の構成において、タッチパネル14は本発明の画像表示部及び操作入力部の一例であり、マイク15は本発明の音声入力部の一例であり、CPU12は本発明の記録部及び再生部の一例である。 In the above configuration, the touch panel 14 is an example of the image display unit and the operation input unit of the present invention, the microphone 15 is an example of the voice input unit of the present invention, and the CPU 12 is an example of the recording unit and the reproducing unit of the present invention. be.

(機能構成)
図3は、タブレット端末10の機能構成を示すブロック図である。タブレット端末10は、機能的には、操作検出部21と、音声取得部22と、表示制御部23と、操作履歴記録部24と、記録済コンテンツ再生部25と、を備える。
(Functional configuration)
FIG. 3 is a block diagram showing the functional configuration of the tablet terminal 10. As shown in FIG. The tablet terminal 10 functionally includes an operation detection unit 21 , a voice acquisition unit 22 , a display control unit 23 , an operation history recording unit 24 , and a recorded content playback unit 25 .

操作検出部21は、主としてタッチパネル14より構成され、操作者による操作を検出する。音声取得部22は、主としてマイク15により構成され、操作者が読み上げた紙芝居のナレーションや登場人物のセリフの音声を集音する。表示制御部23は、主としてCPU12により構成され、操作検出部21が検出した操作者による操作に基づいて、タッチパネル14上の表示を制御する。また、表示制御部23は、紙芝居の実施時や記録コンテンツの再生時に、表示装置5の表示を制御する。 The operation detection unit 21 is mainly composed of the touch panel 14 and detects operations by the operator. The voice acquisition unit 22 is mainly composed of the microphone 15 and collects voices of the narration of the picture-story show read out by the operator and the lines of the characters. The display control unit 23 is mainly composed of the CPU 12 and controls the display on the touch panel 14 based on the operator's operation detected by the operation detection unit 21 . In addition, the display control unit 23 controls the display of the display device 5 when the picture-story show is performed or when the recorded content is reproduced.

操作履歴記録部24は、操作者が紙芝居を行った際の操作履歴情報、具体的には、ページ情報及び操作者が発声した音声を記録する。記録済コンテンツ再生部25は、操作履歴記録部24が記録した操作履歴情報に基づいて、紙芝居コンテンツを自動再生する。 The operation history recording unit 24 records operation history information when the operator performed the picture-story show, specifically, page information and voice uttered by the operator. The recorded content reproduction unit 25 automatically reproduces the picture-story show content based on the operation history information recorded by the operation history recording unit 24 .

[デジタル紙芝居システムの動作]
(タブレット端末の表示例)
次に、デジタル紙芝居システムの動作について説明する。図4は、タブレット端末10のメニュー画面の表示例を示す。メニュー画面は、利用可能なコンテンツのリストを表示する。具体的に、メニュー画面は、紙芝居コンテンツ表示部31と、記録済コンテンツ表示部33と、終了ボタン35とを含む。紙芝居コンテンツ表示部31は、利用可能な紙芝居コンテンツのリストを表示する。具体的に、紙芝居コンテンツ表示部31には、紙芝居の物語毎に用意されたアイコン32が表示される。一方、記録済コンテンツ表示部33は、操作者が紙芝居を行った際の操作履歴に基づいて再生される記録済コンテンツのリストを表示する。具体的に、記録済コンテンツ表示部33には、操作者が記録した操作履歴情報毎に複数のアイコン34が表示される。終了ボタン35は、デジタル紙芝居のアプリケーションを終了するためのボタンである。
[Operation of digital picture-story show system]
(Display example of tablet terminal)
Next, the operation of the digital picture-story show system will be described. FIG. 4 shows a display example of the menu screen of the tablet terminal 10. As shown in FIG. A menu screen displays a list of available content. Specifically, the menu screen includes a picture-story show content display section 31 , a recorded content display section 33 , and an end button 35 . The picture-story show content display section 31 displays a list of available picture-story show content. Specifically, in the picture-story show content display section 31, an icon 32 prepared for each picture-story show story is displayed. On the other hand, the recorded content display section 33 displays a list of recorded content reproduced based on the operation history when the operator performed the picture-story show. Specifically, the recorded content display section 33 displays a plurality of icons 34 for each piece of operation history information recorded by the operator. The end button 35 is a button for ending the digital picture-story show application.

図5は、紙芝居実施画面の例を示す。図4に示すメニュー画面において、操作者が1つの紙芝居コンテンツ(本例では「もも太郎」)を選択すると、図5に示す紙芝居実施画面が表示される。紙芝居実施画面は、文章表示部41と、画像表示部42と、戻るボタン43と、一時停止ボタン44と、進むボタン45と、記録ボタン46と、終了ボタン47と、メニューボタン48と、を含む。 FIG. 5 shows an example of a picture-story show execution screen. When the operator selects one picture-story show content (“Taro Momo” in this example) on the menu screen shown in FIG. 4, a picture-story show execution screen shown in FIG. 5 is displayed. The picture-story show execution screen includes a text display section 41, an image display section 42, a return button 43, a pause button 44, a forward button 45, a record button 46, an end button 47, and a menu button 48. .

文章表示部41には、その物語におけるナレーションや登場人物のセリフなどが表示される。また、文章表示部41には、操作者が紙芝居を実施するための補助的情報として、操作者が行うべき操作ガイド41xが表示される。操作者は、文章表示部41に表示されたナレーションやセリフを読み上げる。 The text display section 41 displays the narration and lines of the characters in the story. Further, on the text display section 41, an operation guide 41x to be performed by the operator is displayed as auxiliary information for the operator to perform the picture-story show. The operator reads aloud the narration and lines displayed on the text display section 41 .

画像表示部42には、紙芝居の画像が表示される。画像表示部42には、基本的に紙芝居を構成する複数の画像(静止画)の1ページが表示される。戻るボタン43は、画像表示部42に表示された画像を1ページ戻すためのボタンである。一時停止ボタン44は、画像表示部42に表示された画像を一時停止するためのボタンである。進むボタン45は、画像表示部42に表示された画像を1ページ進めるためのボタンである。操作者は、戻るボタン43及び進むボタン45を操作することにより、画像表示部42に表示されているページを前後のページに切り替えることができる。 An image of the picture-story show is displayed on the image display section 42 . The image display section 42 basically displays one page of a plurality of images (still images) that form a picture-story show. The return button 43 is a button for returning the image displayed on the image display unit 42 by one page. The pause button 44 is a button for pausing the image displayed on the image display section 42 . The forward button 45 is a button for advancing the image displayed on the image display unit 42 by one page. By operating the back button 43 and the forward button 45, the operator can switch the page displayed on the image display unit 42 to the previous or next page.

ページの切替中には、前後のページが同時に表示されることになる。戻るボタン43及び進むボタン45を使用した場合、ページの切替速度、即ち、表示中のページ上にその前又は後のページが表示されていく速度は、予め決められたデフォルトの速度となる。 During page switching, the previous and next pages are displayed at the same time. When the back button 43 and the forward button 45 are used, the page switching speed, that is, the speed at which the previous or next page is displayed on the currently displayed page is a predetermined default speed.

また、操作者は、戻るボタン43や進むボタン45を使用する代わりに、画像表示部42内で指やタッチペンでタッチ操作することにより、ページの切替を行うことができる。具体的に、図6(A)に示すように、操作者が画像表示部42で指のタッチ位置を左方向へ移動すると、表示制御部23は、画像表示部42内の表示画像を1ページ先に進める。即ち、次のページ(p2)が画面の右端から現れ、画面の右側から左側へと次のページが上書きされる。一方、図6(B)に示すように、操作者が画像表示部42内で指のタッチ位置を右方向へ移動すると、表示制御部23は、画像表示部42内の表示画像を1ページ前に戻す。即ち、前のページ(p1)が画面の左端から現れ、画面の左側から右側へと前のページが上書きされる。なお、タッチ操作によりページの切替を行う場合、ページの切替速度は、指の移動速度に基づいて変わる。例えば、一般的に「スワイプ」と呼ばれる比較的ゆっくりとしたスライド移動の場合には、指の移動速度に応じた速度でページが切り替わる。一方、一般的に「フリック」などと呼ばれる、瞬間的な操作の場合、瞬時にページが切り替わる。よって、操作者は、指などの操作を意図的に早くしたり遅くしたりすることにより、ページの切替速度を変えることができる。 In addition, instead of using the return button 43 and the forward button 45, the operator can switch pages by touching the image display section 42 with a finger or a touch pen. Specifically, as shown in FIG. 6A, when the operator moves the touch position of the finger on the image display unit 42 to the left, the display control unit 23 changes the display image in the image display unit 42 to one page. move forward. That is, the next page (p2) appears from the right edge of the screen, and the next page is overwritten from the right to the left of the screen. On the other hand, as shown in FIG. 6B, when the operator moves the touch position of the finger in the image display section 42 in the right direction, the display control section 23 moves the display image in the image display section 42 to the previous page. back to That is, the previous page (p1) appears from the left edge of the screen and overwrites the previous page from left to right of the screen. Note that when pages are switched by a touch operation, the page switching speed changes based on the moving speed of the finger. For example, in the case of relatively slow slide movement, which is generally called "swipe", pages are switched at a speed corresponding to the finger movement speed. On the other hand, in the case of a momentary operation, generally called a "flick", the page switches instantly. Therefore, the operator can change the page switching speed by intentionally speeding up or slowing down the operation of the finger or the like.

記録ボタン46は、後述する操作履歴記録処理により、操作者が紙芝居を実施した際の操作履歴情報を記録するためのボタンである。終了ボタン47は、紙芝居の実施を終了するためのボタンである。メニューボタン48は、図4に示すメニュー画面に戻るためのボタンである。 The record button 46 is a button for recording operation history information when the operator performed the picture-story show by operation history recording processing described later. The end button 47 is a button for ending the performance of the picture-story show. The menu button 48 is a button for returning to the menu screen shown in FIG.

(操作履歴の記録)
次に、操作者が紙芝居を実施した際の操作履歴を記録する方法について説明する。操作者が図5に示す記録ボタン46を押してから紙芝居を実施すると、紙芝居を実施した際の操作が操作履歴情報として記録される。図7は、操作履歴情報の例を示す。操作履歴情報は、時系列の情報として、即ち、時間情報と対応付けて記録される。操作履歴情報は、ページ情報と、音声情報とを含む。ページ情報は、タブレット端末10の画像表示部42及び表示装置5に表示されるページを示す。具体的に、ページ情報は、紙芝居の画像コンテンツのページを示すページ番号と、ページの切替方法を示すページ切替情報と、を含む。ページ番号は、その時刻において表示されているページの番号を示す。
(Recording of operation history)
Next, a method for recording an operation history when an operator performs a picture-story show will be described. When the operator presses the recording button 46 shown in FIG. 5 and then performs the picture-story show, the operations during the picture-story show are recorded as operation history information. FIG. 7 shows an example of operation history information. The operation history information is recorded as chronological information, that is, in association with time information. The operation history information includes page information and voice information. The page information indicates pages displayed on the image display unit 42 and the display device 5 of the tablet terminal 10 . Specifically, the page information includes a page number indicating the page of the image content of the picture-story show, and page switching information indicating a page switching method. The page number indicates the page number displayed at that time.

ページ切替情報は、切替方向と、切替速度とを含む。切替方向は、ページ切替によるページ番号の変化を示し、例えば、「p1→p2」などで示される。その代わりに、切替方向は、「1ページ進む」又は「1ページ戻る」で表現してもよい。切替速度は、ページを切り替える速度を示し、例えば、1つのページを別のページに切り替えるために要する時間などを用いることができる。なお、操作者が図5に示す戻るボタン43又は進むボタン45を操作した場合、切替速度は予め決められたデフォルトの速度となる。一方、操作者がタッチパネル14に対するタッチ操作(スワイプ、フリックなど)によりページの切替を指示した場合、切替速度は、そのタッチ操作の速度に応じて決められる。基本的に、タッチ操作の速度が速いほど切替速度は速くなり、タッチ操作の速度が遅いほど切替速度は遅くなる。 The page switching information includes switching direction and switching speed. The switching direction indicates a change in page number due to page switching, and is indicated by, for example, "p1→p2". Alternatively, the switching direction may be expressed as "one page forward" or "one page back." The switching speed indicates the speed at which pages are switched, and can use, for example, the time required to switch one page to another page. When the operator operates the return button 43 or the forward button 45 shown in FIG. 5, the switching speed becomes a predetermined default speed. On the other hand, when the operator instructs page switching by a touch operation (swipe, flick, etc.) on the touch panel 14, the switching speed is determined according to the speed of the touch operation. Basically, the faster the touch operation, the faster the switching speed, and the slower the touch operation, the slower the switching speed.

図7に示す例では、時刻tで紙芝居の画像コンテンツの第1ページが表示されると、操作履歴記録部24は、ページ番号「p1」を時刻tからのページ情報として記録する。また、操作者がそのページに対応するナレーションやセリフを読み上げると、音声取得部22は操作者が発した音声1を取得し、操作履歴記録部24は、音声1を時刻tからの音声情報として記録する。 In the example shown in FIG. 7, when the first page of the picture-story show image content is displayed at time t0 , the operation history recording unit 24 records the page number "p1" as the page information from time t0 . When the operator reads out the narration or lines corresponding to the page, the voice acquisition unit 22 acquires the voice 1 uttered by the operator, and the operation history recording unit 24 stores the voice 1 as voice information from time t0. Record as

次に、操作者が時刻tにおいてタッチパネル14に対するタッチ操作により1ページ進む旨を指示すると、操作履歴記録部24は、操作者のタッチ操作に基づいて、切替方向及び切替速度を決定してページ切替情報を生成し、時刻tからのページ情報として記録する。 Next, when the operator touches the touch panel 14 at time t1 to instruct to advance by one page, the operation history recording unit 24 determines the switching direction and the switching speed based on the operator's touch operation, and selects the page. Switching information is generated and recorded as page information from time t1 .

次に、ページ切替が完了し、時刻tにおいて第2ページが表示されると、操作履歴記録部24は、ページ番号「p2」を時刻tからのページ情報として記録する。また、操作者がそのページに対応するナレーションやセリフを読み上げると、音声取得部22は操作者が発した音声2を取得し、操作履歴記録部24は、音声2を時刻tからの音声情報として記録する。 Next, when page switching is completed and the second page is displayed at time t2 , the operation history recording unit 24 records the page number "p2" as page information from time t2 . Also, when the operator reads out the narration or lines corresponding to the page, the voice acquisition unit 22 acquires the voice 2 uttered by the operator, and the operation history recording unit 24 records the voice 2 as voice information from time t2. Record as

こうして、操作者によりページ切替操作が行われるとページ切替情報が記録され、ページ切替後に次のページが表示されると、そのページ番号及びそれに対する操作者の音声が記録される。こうして、操作者が紙芝居を実施した履歴が操作履歴情報として記録される。 Thus, when the operator performs a page switching operation, the page switching information is recorded, and when the next page is displayed after the page switching, the page number and the operator's voice corresponding thereto are recorded. In this way, the history of the operator performing the picture-story show is recorded as the operation history information.

図8は、操作履歴記録処理のフローチャートである。この処理は、図2に示すCPU12が、予め用意されたプログラムを実行し、図3に示す各要素として動作することにより実現される。まず、操作者が図5に示す記録ボタン46を押して操作履歴の記録モードに設定し、紙芝居コンテンツを用いて紙芝居を開始すると、操作履歴記録部24は、そのときに表示されているページのページ番号を取得し、ページ情報として記録する(ステップS10)。次に、音声取得部22は操作者が読み上げたナレーションやセリフの音声を取得し、操作履歴記録部24はその音声を音声情報として記録する(ステップS11)。 FIG. 8 is a flowchart of operation history recording processing. This processing is realized by the CPU 12 shown in FIG. 2 executing a program prepared in advance and operating as each element shown in FIG. First, when the operator presses the record button 46 shown in FIG. 5 to set the operation history recording mode and starts the picture-story show using the picture-story show content, the operation history recording unit 24 records the page of the page displayed at that time. A number is acquired and recorded as page information (step S10). Next, the voice acquisition unit 22 acquires the voice of the narration or lines read by the operator, and the operation history recording unit 24 records the voice as voice information (step S11).

次に、操作検出部21は、操作者によるタッチパネル14へのページ切替操作を検出し(ステップS12)、操作履歴記録部24は、その操作に基づいてページの切替方向及び切替速度を決定してページ切替情報を生成し、ページ情報として記録する(ステップS13)。次に、操作履歴記録部24は、操作者による紙芝居の実施が終了したか否かを判定する(ステップS14)。紙芝居の実施が終了していない場合(ステップS14:No)、処理はステップS10へ戻る。一方、紙芝居の実施が終了した場合(ステップS14:Yes)、操作履歴記録処理は終了する。 Next, the operation detection unit 21 detects a page switching operation on the touch panel 14 by the operator (step S12), and the operation history recording unit 24 determines the page switching direction and switching speed based on the operation. Page switching information is generated and recorded as page information (step S13). Next, the operation history recording unit 24 determines whether or not the operator has finished performing the picture-story show (step S14). If the picture-story show has not ended (step S14: No), the process returns to step S10. On the other hand, if the picture-story show has ended (step S14: Yes), the operation history recording process ends.

(記録済コンテンツの再生)
図4に例示するメニュー画面において、ユーザが記録済コンテンツのアイコン34を選択すると、その物語について記録された操作履歴情報に基づいて、紙芝居が自動再生される。具体的に、ある物語のアイコン34が選択されると、記録済コンテンツ再生部25は、その物語に対応する操作履歴情報を取得するとともに、その物語に対応する紙芝居コンテンツ中の画像コンテンツを取得する。そして、記録済コンテンツ再生部25は、操作記録情報中のページ情報に従って、その物語の画像コンテンツのページを順に表示するとともに、対応する音声情報を再生する。これにより、操作履歴記録処理により記録されたのと同じ方法で紙芝居を再現することができる。即ち、操作履歴記録処理において記録された音声が出力され、操作履歴記録処理において操作者が行ったのと同じ方法(切替方向及び切替速度)でページ切替が行われる。
(Playback of recorded content)
When the user selects the recorded content icon 34 on the menu screen illustrated in FIG. 4, the picture-story show is automatically played back based on the operation history information recorded for the story. Specifically, when the icon 34 of a certain story is selected, the recorded content reproducing unit 25 acquires the operation history information corresponding to the story, and also acquires the image content in the picture-story show content corresponding to the story. . Then, the recorded content reproducing unit 25 sequentially displays the pages of the image content of the story according to the page information in the operation record information, and reproduces the corresponding audio information. As a result, the picture-story show can be reproduced in the same manner as recorded by the operation history recording process. That is, the voice recorded in the operation history recording process is output, and page switching is performed in the same manner (switching direction and switching speed) as that performed by the operator in the operation history recording process.

このように、操作者が紙芝居を実施した際の操作履歴情報を記録しておき、それに基づいて紙芝居を再現することにより、操作者は自分が行った紙芝居の様子を客観的に見ることができる。また、例えば紙芝居の上級者やプロなどが行った操作履歴情報を記録しておけば、そのような上級者による紙芝居を再現することができる。 In this way, by recording the operation history information when the operator performed the picture-story show and reproducing the picture-story show based on the record, the operator can objectively see the state of the picture-story show performed by himself/herself. . Further, for example, if operation history information performed by an advanced player or a professional is recorded, it is possible to reproduce a picture-story show performed by such an advanced player.

[変形例]
上記の実施形態においては、タブレット端末10によりサーバに接続し、紙芝居コンテンツをサーバからダウンロードできるようにすることが好ましい。これにより、新作の紙芝居コンテンツなどを容易に入手できるようになる。
[Modification]
In the above embodiment, it is preferable that the tablet terminal 10 is connected to the server and the picture-story show content can be downloaded from the server. This makes it possible to easily obtain new picture-story show contents and the like.

5 表示装置
10 タブレット端末
12 CPU
14 タッチパネル
21 操作検出部
22 音声取得部
23 表示制御部
24 操作履歴記録部
25 記録済コンテンツ再生部
5 display device 10 tablet terminal 12 CPU
14 touch panel 21 operation detection unit 22 voice acquisition unit 23 display control unit 24 operation history recording unit 25 recorded content playback unit

Claims (5)

複数のページを有する画像コンテンツを表示する画像表示部と、
前記画像表示部に表示されているページの切替操作を受け取る操作入力部と、
音声の入力を受け取る音声入力部と、
前記画像表示部に表示されている前記画像コンテンツのページ情報と、音声入力部に入力された音声情報とを含む操作履歴情報を記録する記録部と、
を備え
前記ページ情報は、前記画像表示部に表示されている前記画像コンテンツのページ番号、及び、前記ページの切替方法を示すページ切替情報を含み、
前記ページ切替情報は、ページの切替方向及び切替速度を含む情報記録装置。
an image display unit that displays image content having a plurality of pages;
an operation input unit that receives an operation to switch pages displayed on the image display unit;
an audio input unit that receives audio input;
a recording unit for recording operation history information including page information of the image content displayed on the image display unit and audio information input to the audio input unit;
with
The page information includes a page number of the image content displayed on the image display unit and page switching information indicating a switching method of the page,
The information recording apparatus , wherein the page switching information includes a page switching direction and a page switching speed .
前記操作履歴情報は、前記ページ情報及び前記音声情報を時間に対応付けた情報である請求項1に記載の情報記録装置。 2. The information recording apparatus according to claim 1, wherein said operation history information is information in which said page information and said voice information are associated with time. 前記画像表示部及び前記操作入力部は、タッチパネルにより構成され、
前記ページの切替操作は、前記画像コンテンツが表示されているタッチパネルに対する操作により行われる請求項1又は2に記載の情報記録装置。
The image display unit and the operation input unit are configured by a touch panel,
3. The information recording apparatus according to claim 1 , wherein the page switching operation is performed by operating a touch panel on which the image content is displayed.
前記画像コンテンツ及び前記操作履歴情報を取得し、前記操作履歴情報に基づいて、前記画像コンテンツ及び前記音声を再生する再生部を備える請求項1乃至のいずれか一項に記載の情報記録装置。 4. The information recording apparatus according to any one of claims 1 to 3 , further comprising a reproduction unit that acquires the image content and the operation history information and reproduces the image content and the sound based on the operation history information. 複数のページを有する画像コンテンツを表示する画像表示部、
前記画像表示部に表示されているページの切替操作を受け取る操作入力部、
音声の入力を受け取る音声入力部、
前記画像表示部に表示されている前記画像コンテンツのページ情報と、音声入力部に入力された音声情報とを含む操作履歴情報を記録する記録部、
としてコンピュータを機能させ
前記ページ情報は、前記画像表示部に表示されている前記画像コンテンツのページ番号、及び、前記ページの切替方法を示すページ切替情報を含み、
前記ページ切替情報は、ページの切替方向及び切替速度を含むプログラム。
an image display unit that displays image content having multiple pages;
an operation input unit that receives an operation to switch pages displayed on the image display unit;
an audio input unit that receives audio input;
a recording unit for recording operation history information including page information of the image content displayed on the image display unit and audio information input to the audio input unit;
make the computer function as
The page information includes a page number of the image content displayed on the image display unit and page switching information indicating a switching method of the page,
The page switching information includes a page switching direction and switching speed .
JP2019234672A 2019-12-25 2019-12-25 Information recording device and program Active JP7327153B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019234672A JP7327153B2 (en) 2019-12-25 2019-12-25 Information recording device and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019234672A JP7327153B2 (en) 2019-12-25 2019-12-25 Information recording device and program

Publications (2)

Publication Number Publication Date
JP2021103452A JP2021103452A (en) 2021-07-15
JP7327153B2 true JP7327153B2 (en) 2023-08-16

Family

ID=76755302

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019234672A Active JP7327153B2 (en) 2019-12-25 2019-12-25 Information recording device and program

Country Status (1)

Country Link
JP (1) JP7327153B2 (en)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014219807A (en) 2013-05-07 2014-11-20 株式会社リコー Information processing program and information processor, and display control program
JP2017054192A (en) 2015-09-07 2017-03-16 株式会社ドワンゴ Content display system, terminal device, server device, content display method and program

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014219807A (en) 2013-05-07 2014-11-20 株式会社リコー Information processing program and information processor, and display control program
JP2017054192A (en) 2015-09-07 2017-03-16 株式会社ドワンゴ Content display system, terminal device, server device, content display method and program

Also Published As

Publication number Publication date
JP2021103452A (en) 2021-07-15

Similar Documents

Publication Publication Date Title
US11567656B2 (en) Information processing device, operation input method and operation input program
JP5959771B2 (en) Electronic device, method and program
US20150355809A1 (en) Information processing apparatus, information processing method and information processing program
US20120030635A1 (en) Information processing apparatus, information processing method and information processing program
JP2013156923A (en) Electronic apparatus, control method thereof, program, and recording medium
CN108111903A (en) Record screen document play-back method, device and terminal
JP2016071029A (en) Electronic apparatus, method and program
JP5748279B2 (en) Viewing target output device and operation method of viewing target output device
JP7327153B2 (en) Information recording device and program
KR101299778B1 (en) Method for providing e-Learning contents of e-Learning apparatus capable of book marking
WO2023206907A1 (en) Information display method and apparatus, computer readable storage medium, and electronic device
KR101339383B1 (en) Method for providing e-Learning contents of e-Learning apparatus using control of repeating play
JP4780128B2 (en) Slide playback device, slide playback system, and slide playback program
JP2021047837A (en) Information processing apparatus, information processing method, and information processing program
JP4087101B2 (en) Information processing apparatus, control method for information processing apparatus, control program for information processing apparatus, recording medium recording control program for information processing apparatus, and data recording method for information recording apparatus
JP7473916B2 (en) Teaching material authoring system
JP7473917B2 (en) Teaching material authoring system
KR101299830B1 (en) Method for controlling speed and direction of e-Learning contents display in e-Learning apparatus using touch
JP7397165B2 (en) Audio equipment, programs, and playback control methods
JP2006252208A (en) Annotation application device, annotation application method and program
JP7212529B2 (en) Image processing device, image processing method
JP2007164585A (en) Manual preparation tool
JP2007219219A (en) Electronic device for language learning and creation method of sentence list for learning
JP3956802B2 (en) Music score display method
JP2012083824A (en) Document image generating device and operation control method and operation control program thereof

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20221027

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230524

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230530

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230620

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230704

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230717

R150 Certificate of patent or registration of utility model

Ref document number: 7327153

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150