JP2009119112A - Moving image display system, moving image display method, and computer program - Google Patents
Moving image display system, moving image display method, and computer program Download PDFInfo
- Publication number
- JP2009119112A JP2009119112A JP2007297890A JP2007297890A JP2009119112A JP 2009119112 A JP2009119112 A JP 2009119112A JP 2007297890 A JP2007297890 A JP 2007297890A JP 2007297890 A JP2007297890 A JP 2007297890A JP 2009119112 A JP2009119112 A JP 2009119112A
- Authority
- JP
- Japan
- Prior art keywords
- moving image
- data
- exercise
- sub
- motion
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Medical Treatment And Welfare Office Work (AREA)
Abstract
Description
本発明は、各種エクササイズを行うバーチャルインストラクターに係る各モーションデータに基づいた運動指導用の動画を表示する際、ユーザが現在行っているエクササイズの負荷レベルと、その負荷レベルより上のレベルまたは下のレベルに応じたエクササイズ内容をエクササイズ中に一目で把握できるようにした動画表示システム、動画表示方法、およびコンピュータプログラムに関する。 The present invention, when displaying a motion instruction video based on each motion data related to a virtual instructor performing various exercises, the load level of the exercise that the user is currently performing, and a level above or below that load level The present invention relates to a moving image display system, a moving image display method, and a computer program that can grasp at a glance during exercise the content of exercise according to the level.
従来、いわゆるモーションキャプチャ技術により得られた被写体の複数のモーションデータを用いて動画コンテンツを作成することが行われている(下記の特許文献1参照)。また、昨今は、各種エクササイズおよびスポーツ等に関する見本動作を行うバーチャルインストラクターの動画コンテンツを、モーションキャプチャ技術を利用して作成されることが多くなっている。各種運動の動作を表すモーションキャプチャ技術による動画コンテンツは、インストラクターが実際に居なくても、ユーザの都合に合わせてレッスンを受けられると云うメリットがあることに加えて、視点変更(バーチャルインストラクターを表示する方向の変更)が容易に行えるので、各種動作を様々な方向から見ることできると云うメリットがある。
Conventionally, moving image content is created using a plurality of motion data of a subject obtained by so-called motion capture technology (see
なお、下記の特許文献2では、エクササイズ用の動画コンテンツを作成する際に、動画コンテンツ中のバーチャルインストラクターの形態を、エクササイズを行うユーザの性別、年齢および身長体重に応じてカスタマイズする内容が開示されている。また、下記の特許文献3〜特許文献5では、モーションキャプチャ技術を用いたものではないが、ユーザが行っている運動に対する負荷状況に応じてエクササイズ用の動画内容を変更することが開示されている。
従来のモーションキャプチャ技術による動画コンテンツでは、バーチャルインストラクターの形態については、ユーザに応じたカスタマイズが可能であったが、肝心のエクササイズメニューの中身をユーザ個人の運動目的、年齢などに応じた運動負荷レベルにカスタマイズできなかった。上述した特許文献2では、例えば運動目的が減量目的である場合に、身長、体重並びに目的の体重との差等の各情報から、運動により消費するカロリー等を指標として利用者向けのエクササイズメニューが構築され、そのエクササイズメニューにおける動作が人物モデルに実施されるための運動制御データが生成されると云う記述に留まるため、ユーザが行うエクササイズメニューは、運動により消費するカロリー等に基づいて構築されるにすぎない。
In the video content using conventional motion capture technology, the virtual instructor's form could be customized according to the user, but the content of the exercise menu is the exercise load level according to the user's individual exercise purpose, age, etc. Could not be customized. In the above-mentioned
また、エクササイズメニューの中身をユーザの運動負荷レベルに合わせてカスタマイズした場合を想定すると、ユーザの体力レベルの変動により、ユーザに合った運動負荷レベルが上昇する場合、または下降する場合が予想される。たとえば、日々熱心にエクササイズを行うユーザであれば、体力レベルが最初に設定した運動負荷レベルより向上して、一つ上のレベルにまで近づくことが考えられる。このような状況で、現在の運動負荷レベルに合った動画コンテンツを表示しながら、補足的に上のレベルの動画コンテンツを表示できれば、上のレベルのエクササイズ内容が、どの程度であるかをユーザは一目で確認できるので、エクササイズに対するユーザのやる気および向上心を刺激できることが予想される。 Also, assuming that the contents of the exercise menu are customized according to the user's exercise load level, the exercise load level suitable for the user may increase or decrease due to fluctuations in the user's physical fitness level. . For example, if the user is exercising eagerly every day, the physical fitness level may be improved from the initially set exercise load level and approach a level one higher. In such a situation, if the upper level video content can be displayed supplementarily while displaying the video content that matches the current exercise load level, the user can determine how much the upper level exercise content is. Since it can be confirmed at a glance, it is expected that the user's motivation and ambition to exercise can be stimulated.
一方、風邪から回復して体力レベルが戻っていない状態のとき、軽めのレベルのエクササイズを望むようになった場合、現在の運動負荷レベルに合った動画コンテンツを表示しながら、補足的に下のレベルの動画コンテンツを表示すれば、下のレベルのエクササイズ内容が、どの程度まで運動負荷が低くなっているかをユーザは一目で確認できるので、エクササイズの運動負荷レベルを下げるための判断をユーザが行いやすくなる。 On the other hand, if you want to exercise at a lighter level when you have recovered from a cold and your physical fitness level has not returned, you can supplementarily lower the video content while displaying video content that matches the current exercise load level. If you display the video content at the lower level, the user can see at a glance how much the exercise load of the lower level exercise content is low, so the user can make a decision to lower the exercise load level of the exercise It becomes easier to do.
本発明は、斯かる事情に鑑みてなされたものであり、一旦設定した運動負荷レベルからユーザの体力レベルが変動しても、設定した運動負荷レベルと異なるレベルの動画コンテンツを同時に表示することで、現在の運動負荷レベルと異なるレベルの運動の程度を比較して把握できるようにした動画表示システム、動画表示方法、およびコンピュータプログラム提供することを目的とする。 The present invention has been made in view of such circumstances, and even if the user's physical fitness level fluctuates from the set exercise load level, video content having a level different from the set exercise load level is displayed at the same time. Another object of the present invention is to provide a moving image display system, a moving image display method, and a computer program that can comprehend and grasp the degree of exercise at a level different from the current exercise load level.
上記課題を解決するために本発明に係る動画表示システムは、動体の運動動作を規定した複数種類の動作データが格納してある動作データベースと、情報の入力を受け付ける入力受付手段と、前記入力受付手段で入力が受け付けられた情報に応じた種類の複数の動作データを前記動作データベースから読み出す手段と、読み出した各動作データに基づき動体の動画を生成する手段とを備え、生成した動画の表示処理を行う動画表示システムにおいて、生成する動画における時系列の順序に応じた各時間帯に対応付ける動作データを規定した規定データが複数種類格納してある規定データベースを備え、前記規定データベースは、前記入力受付手段で入力が受け付け可能な情報に含まれる事項に対応付けて各規定データを格納しており、前記規定データは、生成する動画における各時間帯の少なくとも一つの時間帯で、運動負荷レベルが異なる複数の動作データを対応付けており、前記入力受付手段で入力が受け付けられた情報に含まれる事項に対応付けられる規定データを前記規定データベースから特定する特定手段と、前記特定手段で特定された規定データが複数の動作データを対応付ける時間帯で、前記複数の動作データの中の一の動作データに基づき主動画を生成する主動画生成手段と、前記特定手段で特定された規定データが複数の動作データを対応付ける時間帯で、前記複数の動作データの中の他の動作データに基づき副動画を生成する副動画生成手段と、前記主動画生成手段が生成した主動画および前記副動画生成手段が生成した副動画の表示処理を行う表示処理手段とを備えることを特徴とする。 In order to solve the above-described problems, a moving image display system according to the present invention includes an operation database storing a plurality of types of operation data that defines the motion of a moving object, input receiving means for receiving input of information, and the input receiving Display processing of the generated moving image, comprising: means for reading a plurality of types of motion data according to the information received by the means from the motion database; and means for generating a moving image of the moving body based on the read motion data In the moving image display system that performs the above, a definition database that stores a plurality of types of definition data that defines operation data associated with each time zone according to the time-series order in the generated movie is provided, and the definition database includes the input reception Each regulation data is stored in association with items included in the information that can be input by the means. The data is associated with a plurality of motion data having different exercise load levels in at least one of the time zones in the generated video, and corresponds to the items included in the information received by the input receiving means A specifying means for specifying specified data to be attached from the specified database, and a time zone in which the specified data specified by the specifying means associates a plurality of operation data, based on one operation data among the plurality of operation data. A main moving image generating unit that generates a moving image, and a sub moving image that generates a sub moving image based on other operation data in the plurality of operation data in a time zone in which the specified data specified by the specifying unit associates the plurality of operation data. A moving image generating means, and a display processing means for performing display processing of the main moving image generated by the main moving image generating means and the sub moving image generated by the sub moving image generating means Characterized in that it comprises a.
本発明にあっては、ユーザから入力を受け付けた情報に基づいて特定される内容の動画コンテンツを主動画として表示処理を行うと共に、主動画と異なる運動負荷レベルの動画コンテンツを副動画として表示処理を行うので、異なる運動負荷レベルのエクササイズ内容を同時に確認できるようになり、運動負荷レベルの違いによってエクササイズ内容がどの程度異なるのかを、一目で確認できるようになる。 In the present invention, the moving image content specified based on the information received from the user is displayed as the main moving image, and the moving image content having an exercise load level different from that of the main moving image is displayed as the sub moving image. Thus, the exercise contents of different exercise load levels can be confirmed at the same time, and the extent to which the exercise contents differ depending on the exercise load level can be confirmed at a glance.
本発明に係る動画表示システムは、前記入力受付手段で入力が受け付けられた情報に含まれる事項に基づき運動に係るレベルを判定するレベル判定手段と、前記特定手段で特定された規定データが複数の動作データを対応付ける時間帯で、前記複数の動作データの中から前記レベル判定手段で判定されたレベルに応じた運動負荷レベルの動作データを一の動作データとして特定する動作データ特定手段とを備えることを特徴とする。 The moving image display system according to the present invention includes a level determination unit that determines a level related to exercise based on items included in information received by the input reception unit, and a plurality of specified data specified by the specification unit. Motion data specifying means for specifying, as one action data, action data of an exercise load level corresponding to the level determined by the level determination means from among the plurality of action data in a time zone for associating the action data. It is characterized by.
本発明にあっては、ユーザが最初に入力した情報に基づきユーザの運動に係るレベル(体力レベル)を判定し、運動負荷レベルが異なる複数の動作データが規定される時間帯では、判定されたユーザの体力レベルに合った動画コンテンツを主動画として表示処理を行うので、現在の体力レベルに応じた主動画と、副動画とを対比して表示する処理等を行いやすくなる。 In the present invention, the level related to the user's exercise (physical fitness level) is determined based on the information input first by the user, and is determined in a time zone in which a plurality of motion data having different exercise load levels are defined. Since the moving image content suitable for the user's physical strength level is displayed as the main moving image, it becomes easy to perform processing for displaying the main moving image according to the current physical strength level and the sub moving image in comparison.
本発明に係る動画表示システムは、前記動作データ特定手段で特定された一の動作データに係る運動負荷レベルと、前記他の動作データに係る運動負荷レベルとを比較するレベル比較手段を備え、前記レベル比較手段による比較の結果、前記他の動作データに係る運動負荷レベルが前記一の動作データに係る運動負荷レベルに比べて高い場合に、前記副動画生成手段は副動画を生成することを特徴とする。 The moving image display system according to the present invention includes level comparison means for comparing an exercise load level related to one action data specified by the action data specifying means and an exercise load level related to the other action data, As a result of the comparison by the level comparing means, the sub moving image generating means generates a sub moving image when the exercise load level related to the other motion data is higher than the exercise load level related to the one motion data. And
本発明にあっては、現在のユーザの体力レベルより高い運動負荷レベルの動作データが存在する場合にだけ、主動画に加えて副動画を生成して表示するので、向上心をもってエクササイズを行うユーザ等に好適な表示形態を提供できるようになる。すなわち、向上心をもってエクササイズを行うユーザ等は、現在のエクササイズより上のレベルが、どの程度の運動負荷が上昇しているかを気にするので、ユーザが気にする内容のみを副動画として表示することで、ユーザのニーズに合ったコンテンツをユーザに提供できる。また、そのようなユーザにとって、不要となる現在のレベルより下のレベルに応じたコンテンツは表示されないので、不要なコンテンツの表示より画面内容が煩雑になることを防げる。 In the present invention, the sub-moving image is generated and displayed in addition to the main moving image only when there is motion data with an exercise load level higher than the physical fitness level of the current user. It is possible to provide a suitable display form. In other words, users who are exercising with an aspiration are concerned with how much exercise load is rising above the current exercise level, so only the content that the user cares about is displayed as a sub-video. Thus, it is possible to provide the user with content that meets the user's needs. In addition, since content corresponding to a level lower than the current level that is unnecessary for such a user is not displayed, it is possible to prevent the screen content from being complicated compared to display of unnecessary content.
本発明に係る動画表示システムは、前記動作データ特定手段で特定された一の動作データに係る運動負荷レベルと、前記他の動作データに係る運動負荷レベルとを比較するレベル比較手段を備え、前記レベル比較手段による比較の結果、前記他の動作データに係る運動負荷レベルが前記一の動作データに係る運動負荷レベルに比べて低い場合に、前記副動画生成手段は副動画を生成することを特徴とする。 The moving image display system according to the present invention includes level comparison means for comparing an exercise load level related to one action data specified by the action data specifying means and an exercise load level related to the other action data, As a result of the comparison by the level comparing means, the sub moving image generating means generates a sub moving image when the exercise load level related to the other operation data is lower than the exercise load level related to the one operation data. And
本発明にあっては、現在のユーザの体力レベルより低い運動負荷レベルの動作データが存在する場合にだけ、主動画に加えて副動画を生成して表示するので、体力レベルが低下しているユーザ等に好適な表示形態を提供できるようになる。すなわち、体力レベルが低下したようなユーザ等は、現在のエクササイズより下のレベルが、どの程度の運動負荷レベルが軽くなっているかに注目するので、ユーザが注目する内容のみを副動画として表示して、ユーザの状況に合ったコンテンツをユーザに提供できる。また、そのようなユーザにとって、不要となる現在のレベルより上のレベルに応じたコンテンツは表示されないので、不要なコンテンツの表示より画面内容が煩雑になることを防止できる。 In the present invention, the sub-moving image is generated and displayed in addition to the main moving image only when there is motion data having an exercise load level lower than the physical strength level of the current user. A display form suitable for the user or the like can be provided. In other words, users whose physical fitness level has fallen will focus on how much exercise load level is lighter below the current exercise level, so only the content that the user is interested in will be displayed as a sub-video. Thus, content suitable for the user's situation can be provided to the user. In addition, since content corresponding to a level above the current level that is unnecessary for such a user is not displayed, it is possible to prevent the screen content from becoming more complicated than displaying unnecessary content.
本発明に係る動画表示システムは、前記副動画生成手段は、主動画より小さいサイズで副動画を生成するようにしてあり、前記表示処理手段は、主動画の中に副動画を配置した状態で表示処理を行うことを特徴とする。 In the moving image display system according to the present invention, the sub moving image generating means generates a sub moving image with a size smaller than the main moving image, and the display processing means is in a state where the sub moving image is arranged in the main moving image. Display processing is performed.
本発明にあっては、主動画の中に、小さいサイズの副動画を配置して表示処理を行うので、現在のエクササイズ内容を表す主動画がメインに表示され、主動画を見ながら支障なくエクササイズを行える。また、副動画は、異なる運動負荷レベルがどのようなレベルであるかを確認できれば充分なので、ユーザが確認できる程度で副動画を表示して、主動画と副動画の対比もユーザは容易に行える。なお、主動画を妨げないように副動画を表示するためには、矩形の主動画の隅に小さなサイズの副動画を配置した表示形態を採用することが好適である。 In the present invention, since a small-sized sub-video is arranged in the main video and the display processing is performed, the main video representing the current exercise content is displayed in the main, and exercise without trouble while watching the main video Can be done. In addition, since it is sufficient to be able to confirm the level of different exercise load levels for the sub moving image, the sub moving image is displayed to the extent that the user can confirm, and the user can easily compare the main moving image and the sub moving image. . In order to display the sub moving image so as not to disturb the main moving image, it is preferable to employ a display form in which a small size sub moving image is arranged at the corner of the rectangular main moving image.
本発明に係る動画表示システムは、前記表示処理手段は、主動画と副動画とを並べて配置すると共に、主動画を副動画と区別した形態で表示処理を行うことを特徴とする。
本発明にあっては、主動画と副動画とが重複しないように並べて配置すると共に、主動画を副動画と区別した形態で表示処理を行うので、ユーザは区別された主動画を見ながら支障なくエクササイズを行えると共に、副動画により、異なるレベルのエクササイズ内容を主動画と対比して確認できるようになる。なお、主動画を副動画と区別した形態で表示する例としては、表示画面を、主動画を表示する第1区域と、副動画を表示する第2区域に分けて、第1区域を第2区域より大きくする形態、第1区域の輪郭を太枠または色枠で表示する形態等が考えられる。
The moving image display system according to the present invention is characterized in that the display processing means arranges the main moving image and the sub moving image side by side and performs display processing in a form in which the main moving image is distinguished from the sub moving image.
In the present invention, the main video and the sub video are arranged side by side so as not to overlap, and the display processing is performed in a form in which the main video is distinguished from the sub video, so that the user has a problem while watching the distinguished main video. You can perform exercises at the same time, and the sub-video allows you to check different levels of exercise content against the main video. As an example of displaying the main video in a form distinguished from the sub video, the display screen is divided into a first zone for displaying the main video and a second zone for displaying the sub video, and the first zone is the second zone. The form which makes it larger than an area, the form which displays the outline of a 1st area by a thick frame or a color frame etc. can be considered.
本発明に係る動画表示システムは、前記表示処理手段は、主出力先に対して主動画の表示処理を行うと共に、副出力先に対して副動画の表示処理を行うことを特徴とする。
本発明にあっては、主動画を主出力先に対して表示処理を行うと共に、副動画を副出力先に対して表示処理を行うので、各出力先にそれぞれ表示装置を接続する場合、すなわち、2台の表示装置を適用する場合に好適な表示処理を実現できるようになる。なお、この場合、エクササイズを行う内容の主動画を表示する表示装置は、副動画を表示する表示装置に比べて大きくした方が、行うべきエクササイズ内容をユーザが確認しやすくなる。
The moving image display system according to the present invention is characterized in that the display processing means performs a main moving image display process for a main output destination and a sub moving image display process for a sub output destination.
In the present invention, since the main moving image is displayed on the main output destination and the sub moving image is displayed on the sub output destination, when a display device is connected to each output destination, that is, A display process suitable for the case of applying two display devices can be realized. In this case, it is easier for the user to confirm the exercise content to be performed if the display device that displays the main moving image of the content to be exercised is larger than the display device that displays the sub moving image.
本発明に係る動画表示方法は、動体の運動動作を規定した複数種類の動作データが格納してある動作データベースと、生成する動画における時系列の順序に応じた各時間帯に対応付ける動作データを規定した規定データが複数種類格納してある規定データベースと、情報の入力を受け付ける入力受付手段とを備える動画表示システムが、前記入力受付手段で入力が受け付けられた情報に応じた種類の複数の動作データを前記動作データベースから読み出し、読み出した各動作データに基づき動体の動画を生成し、生成した動画の表示処理を行う動画表示方法であって、前記規定データベースには、前記入力受付手段で入力が受け付け可能な情報に含まれる事項に対応付けて各規定データが格納してあり、前記規定データは、生成する動画における各時間帯の少なくとも一つの時間帯で、運動負荷レベルが異なる複数の動作データを対応付けており、前記動画表示システムは、前記入力受付手段で入力が受け付けられた情報に含まれる事項に対応付けられる規定データを前記規定データベースから特定し、特定した規定データが複数の動作データを対応付ける時間帯で、前記複数の動作データの中の一の動作データに基づき主動画を生成し、特定した規定データが複数の動作データを対応付ける時間帯で、前記複数の動作データの中の他の動作データに基づき副動画を生成し、生成した主動画および副動画の表示処理を行うことを特徴とする。 The moving image display method according to the present invention defines a motion database storing a plurality of types of motion data defining the motion motion of a moving object, and motion data associated with each time zone according to a time-series order in the generated motion image. A moving image display system comprising a prescribed database in which a plurality of types of prescribed data are stored and an input receiving means for receiving input of information includes a plurality of types of operation data according to information received by the input receiving means. Is a moving image display method for generating a moving image of a moving object based on each read operation data, and performing display processing of the generated moving image, wherein the input is received by the input receiving unit in the specified database Each regulation data is stored in association with matters included in the possible information, and the regulation data is included in the generated video. A plurality of motion data having different exercise load levels are associated with at least one time zone of each time zone, and the moving image display system corresponds to a matter included in the information received by the input receiving means. Specified data to be attached is identified from the stipulated database, a main video is generated based on one motion data among the plurality of motion data in a time zone in which the identified stipulated data associates a plurality of motion data, and the identified rule A sub moving image is generated based on other operation data in the plurality of operation data in a time zone in which the data associates a plurality of operation data, and display processing of the generated main moving image and sub moving image is performed.
本発明にあっては、動画表示方法としても、異なる運動負荷レベルのエクササイズ内容をユーザが同時に確認できるようになり、運動負荷レベルの違いによってエクササイズ内容がどの程度異なるのかを、一目で把握できる。 In the present invention, even as a moving image display method, the user can simultaneously confirm the exercise contents of different exercise load levels, and can grasp at a glance how much the exercise contents differ depending on the exercise load level.
本発明に係るコンピュータプログラムは、動体の運動動作を規定した複数種類の動作データが格納してある動作データベースと、生成する動画における時系列の順序に応じた各時間帯に対応付ける動作データを規定した規定データが複数種類格納してある規定データベースと、情報の入力を受け付ける入力受付手段とを備えるコンピュータに、前記入力受付手段で入力が受け付けられた情報に応じた種類の複数の動作データを前記動作データベースから読み出させると共に、読み出させた各動作データに基づき動体の動画を生成させて、生成した動画の表示処理を行わせるためのコンピュータプログラムであって、前記規定データベースには、前記入力受付手段で入力が受け付け可能な情報に含まれる事項に対応付けて各規定データが格納してあり、前記規定データは、生成する動画における各時間帯の少なくとも一つの時間帯で、運動負荷レベルが異なる複数の動作データを対応付けており、コンピュータを、前記入力受付手段で入力が受け付けられた情報に含まれる事項に対応付けられる規定データを前記規定データベースから特定する手段と、特定した規定データが複数の動作データを対応付ける時間帯で、前記複数の動作データの中の一の動作データに基づき主動画を生成する手段と、特定した規定データが複数の動作データを対応付ける時間帯で、前記複数の動作データの中の他の動作データに基づき副動画を生成する手段と、生成した主動画および生成した副動画の表示処理を行う手段として機能させることを特徴とする。 The computer program according to the present invention defines a motion database storing a plurality of types of motion data that defines the motion of a moving object, and motion data associated with each time zone according to a time-series order in a generated moving image. A computer including a regulation database in which a plurality of types of regulation data are stored and an input receiving unit that receives an input of information, and a plurality of types of operation data according to the information received by the input receiving unit A computer program for reading from a database, generating a moving image of a moving object based on each read operation data, and performing display processing of the generated moving image, wherein the input database receives the input reception Each regulation data is stored in association with the items included in the information that can be accepted by the means. Yes, the specified data is associated with a plurality of motion data having different exercise load levels in at least one of the time zones in the moving image to be generated, and the computer has received an input by the input receiving means Based on one operation data among the plurality of operation data in the time zone in which the specified data associated with the matter included in the information is specified from the definition database, and the specified specification data associates the plurality of operation data. Means for generating a main moving image, means for generating a sub moving image based on other operation data in the plurality of operation data in a time zone in which the specified specified data associates the plurality of operation data, and the generated main movie and It is made to function as a means to perform the display process of the produced | generated sub moving image.
本発明にあっては、コンピュータプログラムとしても、異なる運動負荷レベルのエクササイズ内容をユーザが同時に確認できるようになり、運動負荷レベルの違いによってエクササイズ内容がどの程度異なるのかを、一目で把握できる。 According to the present invention, even as a computer program, the user can simultaneously check the exercise contents at different exercise load levels, and it is possible to grasp at a glance how much the exercise contents differ depending on the difference in exercise load level.
本発明にあっては、ユーザから入力を受け付けた情報に基づいて特定される内容の動画コンテンツを主動画として表示処理を行うと共に、主動画と異なる運動負荷レベルの動画コンテンツを副動画として表示処理を行うので、2種類の運動負荷レベルのエクササイズ内容を同時にユーザへ提供でき、ユーザは運動負荷レベルの違いによってエクササイズ内容がどの程度異なるのかを一目で把握できる。 In the present invention, the moving image content specified based on the information received from the user is displayed as the main moving image, and the moving image content having an exercise load level different from that of the main moving image is displayed as the sub moving image. Thus, the exercise contents of two types of exercise load levels can be provided to the user at the same time, and the user can grasp at a glance how much the exercise contents differ depending on the difference of the exercise load level.
本発明にあっては、ユーザが最初に入力した情報に基づきユーザの体力レベルを判定し、判定されたユーザの体力レベルに合った動画コンテンツを主動画として表示処理を行うので、現在の体力レベルに応じた主動画と、副動画とを対比して表示する等の各種処理を容易に行うことができる。 In the present invention, since the user's physical fitness level is determined based on the information input first by the user, and the moving image content that matches the determined physical strength level of the user is displayed as the main video, the current physical fitness level It is possible to easily perform various processes such as displaying the main moving image and the sub moving image in accordance with the above.
本発明にあっては、ユーザの体力レベルより高い運動負荷レベルの動作データが存在する場合にだけ、主動画に加えて副動画を生成して表示するので、向上心をもってエクササイズを行うユーザ等に好適な表示形態を提供できる。
一方、本発明にあっては、ユーザの体力レベルより低い運動負荷レベルの動作データが存在する場合にだけ、主動画に加えて副動画を生成して表示するので、体力レベルが低下しているユーザ等に好適な表示形態を提供できる。
In the present invention, the sub-video is generated and displayed in addition to the main video only when there is motion data with an exercise load level higher than the user's physical fitness level. Various display forms can be provided.
On the other hand, in the present invention, the sub-moving image is generated and displayed in addition to the main moving image only when motion data having an exercise load level lower than the physical strength level of the user exists, so that the physical strength level is lowered. A display form suitable for a user or the like can be provided.
本発明にあっては、主動画の中に、小さいサイズの副動画を配置して表示処理を行うので、現在のエクササイズ内容を表す主動画をメインに大きく表示して、副動画を補足的に表示し、表示される主動画を見ながらユーザは確実にエクササイズを行えると同時に、異なるレベルのエクササイズ内容も確認できる。
また、本発明にあっては、主動画と副動画とが重複しないように並べて配置すると共に、主動画を副動画と区別した形態で表示処理を行うので、ユーザは区別された主動画を見ながら支障なくエクササイズを行えると共に、副動画により、異なるレベルのエクササイズ内容を主動画と対比して確認できる。
In the present invention, a small-sized sub moving image is arranged in the main moving image and the display processing is performed. Therefore, the main moving image representing the current exercise content is displayed mainly on the main moving image to supplement the sub moving image. The user can surely exercise while viewing the displayed main video, and at the same time, the user can also check different levels of exercise content.
In the present invention, the main video and the sub video are arranged side by side so as not to overlap with each other, and the display processing is performed in a form in which the main video is distinguished from the sub video, so that the user views the distinguished main video. However, you can exercise without any problems, and you can check different levels of exercise content against the main video using the sub-video.
さらに、本発明にあっては、主動画を主出力先に対して表示処理を行うと共に、副動画を副出力先に対して表示処理を行うので、各出力先にそれぞれ表示装置を接続すれば、2台の表示装置で異なる運動負荷レベルの動画コンテンツを同時に表示でき、ユーザは2台の表示装置を見て、主動画と副動画とのレベル内容の相異を容易に比較確認できる。 Furthermore, in the present invention, since the main moving image is displayed on the main output destination and the sub moving image is displayed on the sub output destination, if a display device is connected to each output destination, respectively. The two display devices can simultaneously display moving image contents having different exercise load levels, and the user can easily compare and confirm the difference in level contents between the main moving image and the sub moving image by looking at the two display devices.
図1は、本発明の実施形態に係る動画表示システム1の全体的な構成を示している。本実施形態の動画表示システム1は、バーチャルインストラクターによるエアロビクスレッスンを行うスポーツクラブ等の施設に設置されており、各種データベースを記憶するサーバ装置10に端末ユニット30および受付端末装置2がネットワークケーブルL1、L2で接続された構成になっている。端末ユニット30は、端末装置31、大型モニタ装置32、入力操作器33、およびスピーカ34を含み、ユーザUがレッスンを受けるブースBに設置されている。本実施形態の動画表示システム1は、ユーザUの体力レベルに応じたエアロビクスレッスンの内容を示す主動画S1を大型モニタ装置32に表示すると共に、ユーザUの体力レベルと異なるレベルのレッスン内容を示す副動画S2を大型モニタ装置32の画面右上に小さいサイズで表示することが特徴になっている。
FIG. 1 shows an overall configuration of a moving
なお、図1の動画表示システム1では、1箇所のブースBに設置された端末ユニット30のみを示しているが、実際のシステムでは、複数のブースを設けて、ブース毎に端末ユニット30を配置してサーバ装置10に接続した仕様になっており、配置する端末ユニット数は施設の規模等に応じて適宜増減することが可能である。
1 shows only the
動画表示システム1に含まれる受付端末装置2は、一般的なパーソナルコンピュータが適用されており、端末本体2aにディスプレイ装置3および各種情報の入力用の入力デバイス4(キーボード)が接続されている。受付端末装置2は、サーバ装置10から送られてくる各種データに基づいてメニュー等をディスプレイ装置3の画面3aに表示すると共に、表示したメニューに対して入力デバイス4を通じて入力された情報をサーバ装置10へ送る処理などを行う。なお、受付端末装置2は、スポーツクラブ等の施設の入り口における受付に設置されるものである。
A general personal computer is applied to the
図2は、サーバ装置10の主要な内部構成等を表したブロック図を示している。本実施形態のサーバ装置10は、汎用のサーバーコンピュータを適用しており、サーバ本体10aに、ディスプレイ装置16、ならびにシステム管理者からの各種入力操作を受け付けるキーボード17およびマウス18を接続している。サーバ装置10は、受付端末装置2で表示させるメニュー等のデータ、受付端末装置2で入力を受け付けたユーザの情報に基づいてユーザ個人に合ったパーソナルメニューを作成するための元になるデータ等をサーバ本体10aに記憶している。以下、サーバ装置10について詳説する。
FIG. 2 is a block diagram showing the main internal configuration of the
サーバ装置10は、各種制御処理を行うMPU11(プロセッサ)に、RAM12、ROM13、通信インタフェース14およびハードディスク装置15を内部バス10bで接続した構成になっている。なお、内部バス10bには、ディスプレイ装置16、キーボード17およびマウス18も繋がれており、MPU11の処理に伴う各種内容をディスプレイ装置16へ表示できると共に、キーボード17またはマウス18で入力を受け付けた操作内容をMPU11へ伝えるようにしている。
The
サーバ装置10のRAM12は、MPU11の処理に従うデータ及びフォルダ等を一時的に記憶するものであり、ROM13はMPU11が行う基本的な処理内容を規定したプログラム等を予め記憶している。
The
通信インタフェース14は、ネットワークケーブルL1、L2の接続部であり、サーバ装置10からネットワークケーブルL1、L2の接続先である端末ユニット30および受付端末装置2へデータ等の送信処理をMPU11の制御に基づき行うと共に、接続先から送られたデータ等の受信処理を行う。
The
ハードディスク装置15は、サーバ装置10が行う各種処理を規定したプログラムおよび各種データを格納したデータベース等を記憶するものである。具体的に、本実施形態のハードディスク装置15は、システムプログラム19、サーバプログラム20、メニューデータベース21、体力レベルテーブル22、ユーザデータベース23、動作データベース24、運動目的テーブル25、パターンデータベース26およびリズムデータベース27等を記憶している。
The
システムプログラム19は、MPU11がサーバとして行う各種基本的な処理内容を規定したプログラムである。また、サーバプログラム20は、本発明においてサーバ装置10のMPU11が行う必要のある各種処理内容を規定したものである。具体的な処理内容としては、図3(a)〜(c)に示すような各種メニュー21a〜21cを受付端末装置2に表示させてユーザから入力される情報を受け付ける処理、受け付けたユーザの情報に基づいてユーザの体力レベル(運動に係るレベルに相当)を判定する処理、受け付けたユーザの情報に基づきユーザデータベース23を構築する処理、ユーザデータベース23に登録された情報に基づいてユーザに合ったパーソナルメニューを作成する処理、そのパーソナルメニューに含まれる内容に応じた動作データ等をユーザが利用するブースに設置された端末ユニット30へ送る処理等が規定されている。
The
メニューデータベース21は、各種メニューに応じたデータを格納したものであり、これらのデータが受付端末装置2へ送られると、ユーザから情報の入力をアンケート形式で受け付ける各種メニュー(入力受付手段に相当)が受付端末装置2のディスプレイ装置3に表示される。このような各種メニューでユーザから入力を受け付ける情報の事項としては、ユーザの氏名、性別、年齢、身長、体重、運動目的、運動習慣などがある。
The
図3(a)〜(c)のメニュー21a〜21cは、メニューデータベース21の各種メニュー用のデータに基づき表示されたメニュー内容を示す一例である。図3(a)のメニュー21aは、ユーザの年齢の入力を受け付けるものであり、入力欄21a−1に年齢の数値が入力された状態で決定ボタン21a−2が選択されると、入力欄21a−1に入力された数値が受付端末装置2からサーバ装置10へ送られるようになっている。
The
また、図3(b)のメニュー21bは、ユーザの運動習慣の入力を受け付けるものであり、受付可能な運動習慣の項目としては「一:していない(やめて1ヶ月以上)」「二:月に2〜3日」「三:週に1日」「四:週に2日」「五:週に3日以上」と云う計5種類の運動頻度を挙げている。メニュー21bは、これらの運動習慣の項目ごとに選択用のチェックボックス21b−1〜21b−5を設けて、ユーザが自身の運動習慣を選択できるようにしている。なお、メニュー21bにおいて、チェックボックス21b−1〜21b−5のいずれか1つが選択(チェック)された状態で、決定ボタン21b−6が選択されると、チェックされた運動習慣を示す情報が受付端末装置2からサーバ装置10へ送られる。
Further, the
さらに、図3(c)のメニュー21cは、ユーザの運動目的の入力を受け付けるものであり、受付可能な運動目的として「M1:全身ダイエット」「M2:上半身ダイエット」「M3:腹部ダイエット」「M4:下半身ダイエット」「M5:ストレス解消」「M6:老化防止」の計6種類を挙げている。メニュー21cは、これらの運動目的ごとにチェックボックス21c−1〜21c−6を設け、ユーザが自身の運動目的を選択できるようにしている。なお、チェックボックス21c−1〜21c−6のいずれか1つがチェックされた状態で、決定ボタン21c−7が選択されると、チェックされた運動目的を示す情報が受付端末装置2からサーバ装置10へ送られるようになっているのは、メニュー21bなどと同じである。
Further, the
このようなメニュー21a〜21c等での情報入力は、ユーザが初めて施設を利用する際に受付端末装置2で行われるものである。これらの情報の入力が各種メニューで受け付けられて、サーバ装置10がユーザの情報を通信インタフェース14で取得すると、サーバプログラム20の規定内容に従って、サーバ装置10は、取得した情報に対応付ける会員番号(識別番号)をMPU11が発行し、その発行した会員番号と共に、取得した情報をユーザデータベース23に登録する。
Such information input on the
また、2回目以降の利用の際は、既に入力した情報内容を変更する場合(例えば、運動目的を変更する場合など)にのみ情報の入力を行うことになる。また、2回目以降に施設を利用する場合は、受付端末装置2で会員番号を入力すれば、利用するブース番号が受付端末装置2で示されて、ユーザは、そのブース番号のブースでレッスンを受けることになる。さらに、ユーザは、自動的に選択される運動負荷レベルに応じたパーソナルメニューのレベルを、運動負荷を高める指示または低める指示等も受付端末装置2から入力でき、このような指示の入力によりエクササイズの負荷レベルを、マニュアルで変更できる。
Further, in the second and subsequent uses, information is input only when the information content that has already been input is changed (for example, when the exercise purpose is changed). When the facility is used for the second time or later, if the member number is input at the
図4は、ハードディスク装置15に記憶される体力レベルテーブル22の中身を示している。体力レベルテーブル22は、入力を受け付けた情報に基づいて、情報の入力を行ったユーザの体力レベル(運動に係るレベルに相当)の判定をMPU11が行う際に参照されるものである。体力レベルテーブル22は、年齢を18〜29歳、30〜45歳、46歳以上の三段階に分けると共に、段階ごとに図3(b)のメニュー21bで示す計5種類の運動習慣の項目を対応付けることで、ユーザからの情報に基づきユーザの体力レベルを3種類に分けられるようにしている。
FIG. 4 shows the contents of the physical strength level table 22 stored in the
例えば、年齢が18〜29歳の範囲に含まれて、運動習慣が「四:週に2日」のユーザは、体力レベルとして「L3:体力有り」と判定される。また、年齢が30〜45歳の範囲に含まれて、運動習慣が「三:週に1日」のユーザは、体力レベルとして「L2:体力普通」と判定される。さらに、年齢が46歳以上であり、運動習慣が「二:月に2〜3日」のユーザは、体力レベルとして「L1:体力無し」と判定される。このような判定は、サーバプログラム20の規定内容に従って、図3(b)のメニュー21bで運動習慣の入力選択を受け付けるごとにMPU11が行っており、MPU11は判定した結果を、そのユーザの会員番号に対応付けてユーザデータベース23に登録する処理も行う。
For example, a user whose age is in the range of 18 to 29 years old and whose exercise habit is “4: 2 days a week” is determined as “L3: physical strength” as the physical strength level. In addition, a user whose age is included in the range of 30 to 45 years old and whose exercise habit is “three: one day a week” is determined as “L2: normal strength” as the physical strength level. Furthermore, a user whose age is 46 years or older and whose exercise habit is “2: 2-3 days a month” is determined as “L1: No physical strength” as the physical strength level. Such a determination is performed by the
図5は、ユーザデータベース23の中身を示している。ユーザデータベース23は、会員登録を行ったユーザの情報が登録格納されたものであり、MPU11が発行した会員番号に対応付けて、ユーザから入力を受け付けた情報が登録されると共に、図4の体力レベルテーブル22に基づき判定された結果も登録されている。また、施設利用中のユーザは、利用中のブース番号(B−1、B−3)も会員番号に対応付けて格納されるので、ブースの使用状況もユーザデータベース23を参照すれば分かるようになっている。
FIG. 5 shows the contents of the
図6は、動作データベース24の中身を示している。動作データベース24は、バーチャルインストラクターが表すエアロビクス用の各種動作に応じたモーションデータ(動作データに該当)を複数種類格納したものであり、動作の内容ごとにID番号を対応付けている。このようなモーションデータを組み合わせることで、バーチャルインストラクターの一連の動きを含むレッスン内容が作り上げられる。
FIG. 6 shows the contents of the
動作データベース24が含むモーションデータの種類の例として、ID番号が「A」のモーションデータは、動作の種類が「マーチ」であり、モーションデータのファイル名が「data−A」になっている。また、ID番号が「B1」のモーションデータは、動作の種類が「ゆっくりサイドステップ」であり、モーションデータのファイル名が「data−B1」になっている。
As an example of the type of motion data included in the
なお、動作データベース24に格納されるモーションデータは、マーカを付して各種エアロビクス用の運動動作を行う実際のインストラクターを撮像して得られた映像データに対してモーションキャプチャ技術で取得された三次元空間におけるマーカの座標等に応じた内容、すなわちバーチャルインストラクタ(動体)の運動動作を規定した内容になっている。1つのモーションデータは、8カウント(約4秒)の時間帯における各マーカの座標の変動内容を規定している。
Note that the motion data stored in the
図7(a)は、具体的なモーションデータに応じたイメージを示したものである。バーチャルインストラクターを表す人体画像5が、モーションデータに基づいて三次元コンピュータグラフィクス技術によりX軸、Y軸、Z軸で構成されるXYZ座標系に位置するように作成されることになる。なお、このXYZ座標系とは相違するカメラ6の撮像方向(動画表示時の視点方向に相当)および位置を定めるためのUVW座標系を設け、XYZ座標系とUVW座標系との相対関係を規定することで、ユーザが所望する方向及び位置からの動画表示が可能になる。
FIG. 7A shows an image corresponding to specific motion data. The
三次元コンピュータグラフィックス技術により生成される人体画像5は、図7(b)に示すように、人体の骨に相当するボーンBと云う棒状のリンク部材を連結したものに、人体の皮膚に相当するスキンを被せて作成されている。図7(b)に示すボーンBの各所に付された点P1〜P17が、実際のインストラクターに付されたマーカ位置に相当し、インストラクターの各種動作を行った所定時間(8カウント分)の各点P1〜P17の座標位置が各モーションデータの内容になっている。なお、図7(b)に示す各点P1〜P17の位置及び個数は一例であり、生成する人体画像5の仕様、要求精度およびハード的なスペック等に応じてマーカの位置及び個数は適宜変更できる。
As shown in FIG. 7B, the
また、図6に示す動作データベース24に格納される複数種類のモーションデータの中には、運動目的に応じたモーションデータも含まれている。すなわち、本発明の発明者は、実際のインストラクターの動作に基づく複数種類のモーションデータの中身を研究し、エアロビクスの一連の動きの中で、各モーションデータが果たす役割および機能がそれぞれ相異することに気付いた。さらに、研究を進めた結果、図3(c)のメニュー21cで挙がっている計6種類の運動目的を達成することに関連が大きいモーションデータがあることも本発明の発明者は突き止めた。本発明では、このような研究結果に基づき、ある種の運動目的とモーションデータとの関係を運動目的テーブル25に整理し、ユーザにマッチしたパーソナルメニューを作成する際にサーバ装置10が参照できるように、ハードディスク装置15に記憶している。
In addition, motion data corresponding to the purpose of exercise is also included in the plurality of types of motion data stored in the
図8は、運動目的テーブル25の中身を示しており、発明者が突き止めた内容に従って運動目的ごとに関連する動作の種類と、その動作の種類に応じたモーションデータのID番号を、運動目的に係る番号ごとに対応付けた内容になっている。具体的な運動目的テーブル25の中身としては、全身ダイエット(運動目的番号はM1)には、ID番号が「F3」のモーションデータの動作となる「サイドステップと手を後ろに早くプッシュする動作の組み合わせ」と、ID番号が「G1」のモーションデータの動作となる「ヒップシェイクと手を徐々に下ろす動作の組み合わせ」を対応付けている。 FIG. 8 shows the contents of the exercise purpose table 25. The type of motion related to each exercise purpose according to the contents found by the inventor and the ID number of the motion data corresponding to the type of motion are shown for the purpose of exercise. The contents are associated with each number. As a specific content of the exercise purpose table 25, the whole body diet (exercise purpose number is M1) includes the motion of the motion data whose ID number is “F3”. The “combination” is associated with the “combination of hip shake and the action of gradually lowering the hand” which is the operation of the motion data whose ID number is “G1”.
上半身ダイエット(運動目的番号はM2)には、ID番号が「F2」のモーションデータの動作となる「サイドステップと手を広げてひねる動作の組み合わせ」と、ID番号が「F3」のモーションデータの動作となる「サイドステップと手を後ろに早くプッシュする動作の組み合わせ」を対応付けている。また、腹部ダイエット(運動目的番号はM3)には、ID番号が「E2」のモーションデータの動作となる「ひねりニーアップと手の動作の組み合わせ」と、ID番号が「G1」のモーションデータの動作となる「ヒップシェイクおよび手を徐々に下ろす動作の組み合わせ」を対応付けている。さらに、下半身ダイエット(運動目的番号はM4)には、ID番号が「E1」のモーションデータの動作となる「バックキック」と、ID番号が「D1」のモーションデータの動作となる「フロントランジ右から右」を対応付けている。 On the upper body diet (exercise purpose number is M2), the combination of the motion data with ID number “F2”, “combination of side step and twisting motion” and the motion data with ID number “F3” The action “the combination of the side step and the action of quickly pushing the hand back” is associated. In addition, the abdominal diet (exercise purpose number is M3) includes a “combination of twist knee-up and hand movement” which is an operation of motion data with an ID number “E2” and a motion data with an ID number “G1”. “Hipshake and a combination of gradually lowering hands” are associated with each other. Furthermore, the lower body diet (exercise purpose number is M4) includes “back kick” which is the motion data operation with the ID number “E1” and “front lunge right” which is the motion data operation with the ID number “D1”. To right ”.
また、ストレス解消(運動目的番号はM5)には、ID番号が「F1」のモーションデータの動作となる「サイドステップと手の動作の組み合わせ」と、ID番号が「G2」のモーションデータの動作となる「Vステップと早いVステップの組み合わせ」を対応付けている。さらに、老化防止(運動目的番号はM6)には、ID番号が「F4」のモーションデータの動作となる「Vステップ」と、ID番号が「J1」のモーションデータの動作となる「ニーアップをキープする動作」を対応付けている Also, for stress relief (exercise purpose number is M5), the “combination of side step and hand motion” which is the motion data operation with ID number “F1” and the motion data motion with ID number “G2”. “V step and early V step combination” are associated with each other. Furthermore, in order to prevent aging (exercise purpose number is M6), “V step”, which is the motion data operation with ID number “F4”, and “needle up”, which is the motion data operation with ID number “J1”. `` Keeping action '' is associated
なお、上述したような各種運動目的に関連するモーションデータは、図6の運動目的テーブル25の中で、関連する内容の運動目的を表す番号(運動目的番号)が対応付けられている。例えば、ID番号が「F1」のモーションデータ(サイドステップ+手)には、ストレス解消の運動目的番号である「M5」が対応付けられている。 Note that the motion data related to various exercise objectives as described above is associated with a number (exercise objective number) representing the exercise objective of the relevant content in the exercise objective table 25 of FIG. For example, the motion data (side step + hand) with the ID number “F1” is associated with “M5”, which is an exercise purpose number for stress relief.
図9は、ハードディスク装置15に記憶されるパターンデータベース26(規定データベースに相当)の中身を示している。パターンデータベース26は、エアロビクスのレッスン内容の中でユーザの特性にあったメインコンテンツに応じたパーソナルメニューの中身を規定した複数種類のパターン(パターン1、2・・・)を含んだものである。各パターン(規定データに相当)は、図3(c)のメニュー21cで挙がっている計6種類の運動目的の達成に対応した中身になっている。パターンデータベース26では、各運動目的の種類を表す運動目的番号(図3(c)のメニュー21cで入力を受け付ける情報の内容に相当)、および各運動目的(ユーザから入力を受け付ける情報に含まれる事項に相当)に関連するモーションデータのID番号が、パターンの種類ごとに対応付けられている。
FIG. 9 shows the contents of the pattern database 26 (corresponding to the regulation database) stored in the
パターンデータベース26に含まれる各パターン1〜8は、生成するレッスン内容(レッスンコンテンツの動画)における時系列の順序に応じた各時間帯に対応付けるモーションデータを規定すると共に、規定するモーションデータの中に達成すべき運動目的に関連するモーションデータを含ませた内容になっている。さらに、各パターン1〜8は、達成すべき運動目的に関連するモーションデータと同じ部位を動かすモーションデータを、運動目的に関連するモーションデータより時系列の順序で前方となる時間帯に含ませることを規定している。
Each
本発明の発明者は、エアロビクスのレッスンに含まれる一連の動作と運動目的との因果関係などの研究を進めた結果、運動目的の達成のため、運動目的に関連するモーションデータの動作を行うまでに最低限必要となる動作があることを突き止めた。具体的には、運動目的に関連するモーションデータで動作対象となる人体の部位を予め動かしておくと、スムーズに運動目的に関連する動作を行えることから、運動目的に関連する動作対象となる部位と同じ部位を緩やかに動かす動作が好適となることを本発明者は解明した。 The inventor of the present invention has conducted research on the causal relationship between a series of actions included in an aerobics lesson and exercise objectives, and as a result, until the movement objectives are achieved, the motion data related to the exercise objectives are operated. Found that there is a minimum required action. Specifically, if the part of the human body that is the operation target is moved in advance with the motion data related to the exercise purpose, the operation related to the exercise purpose can be performed smoothly. The present inventor has clarified that an operation of gently moving the same part as is suitable.
また、本発明者は、ユーザの体力レベルに応じて、運動目的を達成するための動作を運動負荷に応じて相異させることが好ましいことにも気付いた。そのため、各パターン1〜8は、生成するレッスン内容における複数の時間帯のいずれかの時間帯に運動負荷レベルが異なる複数のモーションデータを含ませ、各運動負荷レベルが異なるモーションデータごとに、図4の体力レベルテーブル22が示す各体力レベルとの対応付けを規定する。
In addition, the present inventor has also realized that it is preferable to vary the operation for achieving the exercise purpose according to the exercise load according to the physical strength level of the user. Therefore, each of the
図10は、パターンデータベース26に含まれる複数のパターン1〜8の一例として、パターン1が規定する具体的な内容を示したものである。パターン1は、図9のパターンデータベース26でも示すように、ストレス解消(M5)を運動目的とするものであり、エアロビクスのレッスン中のメインコンテンツの総時間を最初の時間1から最後の時間40までの計40時間単位(計40個の時間帯)に分けて、時間単位ごとに対応付けるモーションデータを規定したものになっている。なお、1時間単位は、モーションデータの8カウント(約4秒)に対応した時間長さになっており、時間1〜40までの時系列の順序でモーションデータが並んでいる。
FIG. 10 shows specific contents defined by the
さらに、パターン1は、最初の時間1〜時間4の範囲に対応する第1クールの時間帯では、体力レベルとして「体力有り」に応じたモーションデータと、「体力普通」に応じたモーションデータとをそれぞれ対応付けており、次の第2クールの時間帯(時間5〜時間8)では、「体力普通」に応じたモーションデータと、「体力無し」に応じたモーションデータとをそれぞれ対応付けている。以下、第4クールの時間帯(時間13〜時間16)から第7クールの時間帯(時間25〜時間28)では、「体力有り」に応じたモーションデータと、「体力普通」に応じたモーションデータとをパターン1は対応付けると共に、第8クールの時間帯(時間29〜時間32)では、「体力普通」に応じたモーションデータと、「体力無し」に応じたモーションデータとをパターン1は対応付けている。
Furthermore, in the first cool time period corresponding to the
なお、パターン1の規定内容を第1クールで説明すると、パターン1は、「体力有り」の場合に対して、第1クールの時間1から時間4まで、連続的に「サイドステップ(図6のID番号がC1のモーションデータの内容を参照)」を行うことを規定する。一方、「体力普通」の場合、パターン1は、第1クールの時間1から時間2まで、運動負荷が「サイドステップ」より低いレベルの「ゆっくりサイドステップ(図6のID番号がB1の内容を参照)」を規定し、それから時間3から時間4で「サイドステップ(図6のID番号がC1の内容を参照)」を規定する。
In the first course, the specified contents of the
また、パターン1は、運動目的であるストレス解消に関連する「サイドステップ+手」のモーションデータ(ID番号はF1)を、「体力有り」に対応するところでは第7クールの時間25、26に含ませており、「体力普通」に対応するところでは第8クールの時間29、30、第9クールの時間33、34、および第10クールの時間37、38にそれぞれ含ませている。
Also, in
さらにまた、パターン1は、ストレス解消に関連する動作である「サイドステップ+手」の中で「サイドステップ」を行う足を動作対象とするID番号がB1のモーションデータ(ゆっくりサイドステップ)を、「体力普通」に対応するところでは第1クールに含まると共に、ID番号がC1のモーションデータ(サイドステップ)を体力レベルに関係なく第1クール等に含ませている。また、パターン1は、「サイドステップ+手」の中で「手の動作」を動作対象とするID番号がD1のモーションデータ(マーチ+手ゆっくり)を体力レベルに関係なく第4クールに含ませている。そのため、パターン1では、ストレス解消に関連する動作(サイドステップ+手)を行う前の時間帯に同様な動作を含ませているので、スムーズにストレス解消に関連する動作を行えるようになっている。
Furthermore, in the
なお、ハードディスク装置15に記憶されるリズムデータベース27は、エアロビクスのレッスン用の各種音楽データを格納したものであり、これらの音楽データは、端末ユニットで生成表示される動画と共に、所定のリズム(BPM:Beat Per Minute)で再生出力される。
The
図11に示すフローチャートは、ハードディスク装置15に記憶されるサーバプログラム20が規定する内容に従ってサーバ装置10が行う一連の処理(動画表示方法の一部の処理)を示したものである。このフローチャートはサーバ装置10が既にメニュー表示用のデータを受付端末装置2へ送って、各種メニューが受付端末装置2で表示された状態からの処理を示したものになっており、基本的にユーザが初めて施設を利用する場合に対応した内容を示している。以下、このフローチャートに従ってサーバ装置10(MPU11)が行う処理を説明する。
The flowchart shown in FIG. 11 shows a series of processing (part of processing of the moving image display method) performed by the
先ず、サーバ装置10は、受付端末装置2で表示するメニューでユーザから必要な情報の入力を受け付けたか否かを判断する(S1)。必要な情報(氏名、性別、年齢、身長、体重、運動目的、運動習慣等)の入力を全て受け付けていない場合(S1:NO)、サーバ装置10は、情報入力の受付待ちの状態となる。また、必要な情報の入力を全て受け付けると(S1:YES)、サーバ装置10のMPU11はレベル判定手段として、図4の体力レベルテーブル22を参照して、情報の入力を行ったユーザの体力レベルを判定する(S2)。なお、判定した結果は、受け付けた情報と共に図5のユーザデータベース23に、発行された会員番号と対応付けて登録される。
First, the
それから、MPU11は特定手段として、受け付けた情報の中で運動目的に対応付けられたパターンを、図8の運動目的テーブル25を参照して図9のパターンデータベース26から特定する(S3)。なお、運動目的テーブル25では、運動目的ごとに2種類の動作種類を対応付けているが、エアロビクスのレッスンを受講回数が10回未満であれば上段の動作種類をMPU11は特定し、受講回数が10回を越えると、その内容に慣れたと判断して、下段の動作種類を特定するようになる。また、パターンの具体的な特定の仕方としては、入力を受け付けた運動目的は「全身ダイエット」であれば、運動目的テーブル25を参照して、「全身ダイエット」の運動目的番号「M1」を確認し、その「M1」に対応付けられたパターン(図9ではパターン3)をパターンデータベース26から特定することになる。
Then, the
そして、MPU11は、特定したパターンが各時間帯に対応付けるモーションデータを特定する処理を行う(S4)。例えば、特定したパターンが図10のパターン1であれば、MPU11は、「体力有り」で用いるID番号がA、B1、C1、D1、E1、F1の計6種類のモーションデータを特定することになる。なお、S3の段階で特定したパターンの中身が、ユーザの運動目的に応じたパーソナルメニューとなる。
And MPU11 performs the process which specifies the motion data with which the specified pattern matches with each time slot | zone (S4). For example, if the identified pattern is
最後に、サーバ装置10(MPU11)は、特定したモーションデータを動作データベース24から読み出して、特定したパターンおよびS2の段階で判定したユーザの体力レベル(体力レベルを表すデータ)等と共に、ユーザが利用するブースに応じた端末ユニットへ送信する(S5)。なお、本実施形態では、エアロビクスのレッスン内容は、前から順に、ウォーミングアップ、第1インターバル、メインコンテンツ、第2インターバル、アクティブレスト、第3インターバル、およびクールダウンと云う計7種類の内容を組み合わせて1つのレッスンにしており、これらの中のメインコンテンツの中身が上記フローチャートにより特定されたパターン(パーソナルメニュー)の中身に応じたものになる。その他のウォーミングアップ等の中身は固定にしており、これらの固定の内容に応じたモーションデータ、メニュー内容、および所要の音楽データも、上記のパーソナルメニューの内容と一緒に、サーバ装置10は端末ユニットへ送信している。
Finally, the server device 10 (MPU 11) reads the identified motion data from the
また、図11のフローチャートは、初めて施設をユーザが利用する場合に対応した内容を示しているが、2回目以降の利用の場合、ユーザは受付端末装置2で自身の会員番号さえ入力すれば、既に必要な情報はユーザデータベース23に登録されているので、登録されている情報に基づき、フローチャート中の所定のステップ以降の処理が行われることになる。さらに、2回目以降の利用時に、ユーザデータベース23の登録情報が更新された場合(例えば、運動目的が変更になった場合)、新たに入力を受け付けた情報がユーザデータベース23に上書きされると共に、新たに入力を受け付けた情報に基づき、所定のステップ以降の処理が行われることになる。
Further, the flowchart of FIG. 11 shows the contents corresponding to the case where the user uses the facility for the first time, but in the case of the second and subsequent use, the user only has to input his / her member number at the
図12は、図1のブースBに設置される端末ユニット30の主要な構成を示したブロック図である。端末ユニット30に含まれる端末装置31は、汎用のパーソナルコンピュータを用いており、CPU31aに通信インタフェース31b、RAM31c、ROM31d、操作インタフェース31e、表示処理部31f、音出力処理部31g、およびハードディスク装置31hを内部バス31iで接続した構成になっている。
FIG. 12 is a block diagram showing a main configuration of the
通信インタフェース31bは、ネットワークケーブルL1でサーバ装置10と接続されており、サーバ装置10から送られてくるモーションデータ、パターン、音楽データおよびユーザの体力レベルを表すデータ等を受信する。また、RAM31cは、CPU31aの処理に伴うデータおよびファイル等を一次的に記憶し、ROM31dは、CPU31aが行う基本的な処理を規定したプログラムを予め記憶している。
The
操作インタフェース31eは、ユーザからの操作を受け付ける入力操作器33と接続されている。入力操作器33は、スタートボタン、一時停止ボタン、中止ボタン、上下左右キー、決定キー等を備えており、操作インタフェース31eは、入力操作器33で入力された操作内容を受け付けて、CPU31aへ送る処理を行う。また、表示処理部31fは、大型モニタ装置32と接続されており、CPU31aの制御処理に従って、サーバ装置10から受信したモーションデータをパターンが規定する時系列の順序で用いてバーチャルインストラクターが各種動作を行う動画を生成して、大型モニタ装置32へ出力するための表示処理を行う。さらに、音出力処理部31gは、スピーカ34と接続されており、CPU31aの制御処理に従って、サーバ装置10から受信した音楽データを、表示処理部31fでの表示処理に合わせて再生出力する処理を行う。
The
ハードディスク装置31hは、OSプログラム35、動画表示プログラム36および複数のメニュー画面に応じた画面データを格納するメニュー画面テーブル37等を記憶すると共に、通信インタフェース31bで受信したサーバ装置10からのモーションデータおよびパターン等の各種データを記憶することも行う。OSプログラム35は、オペーレーティングシステムに係る処理内容を規定したプログラムであり、また、動画表示プログラム36は、サーバ装置10から送られたモーションデータに基づく動画生成および表示に関するCPU31aの制御処理内容を規定したものである。
The
動画表示プログラム36は、入力操作器33でユーザからスタートボタンの押し下げ操作を受け付けると、図13(a)に示す表示パターン選択メニュー40をハードディスク装置31に記憶されるメニュー画面テーブル37から読み出して、表示処理部31fより出力することで、大型モニタ装置32の画面32aに表示させることを規定している。
When the moving
表示パターン選択メニュー40は、表示内容としてユーザの体力レベルに対応するレッスン内容を示す主動画に加えて、ユーザの体力レベルと異なるレベルに対応するレッスン内容を示す副動画を表示するかを選択するためのメニューであり、選択可能な第1ボタン41〜第3ボタン43を有する。これらの各ボタン41〜43は、入力操作器33の上下キーの操作により移動するカーソル44で選択対象となるボタンが選ばれた状態となり、その状態で決定キーが操作されることで、カーソル44が位置するボタンが選択され、選択された内容がCPU31aへ伝えられるようになっている。
The display
第1ボタン41は、主動画のみを表示する場合に選択されるものであり、この場合は、ユーザの体力レベルに対応するレッスン内容(コンテンツ動画)のみが大型モニタ装置32の画面32aに表示される。
The
第2ボタン42は、主動画に加えて、ユーザの体力レベルより高い体力レベルに応じたレッスン内容(副動画)の表示をユーザが希望する場合に選択されるものである。例えば、判定されたユーザの体力レベルが「体力普通(図4、図10参照)」であれば、第2選択ボタン42を選択することで、上のレベルである「体力有り」に応じたレッスン内容を副動画として表示できるようになる。そのため、第2選択ボタン42は、現在の体力レベルより上の体力レベルの内容に興味を持っているユーザ(たとえば、体力が向上して、さらに高い運動負荷のエクササイズを希望するユーザ等)に選択されることを想定したボタンになっている。
The
また、第3ボタン43は、主動画に加えて、ユーザの体力レベルより低い体力レベルに応じたレッスン内容(副動画)の表示をユーザが希望する場合に選択されるものである。例えば、判定されたユーザの体力レベルが「体力普通」であれば、第3選択ボタン43を選択することで、下のレベルである「体力無し」に応じたレッスン内容を副動画として表示できるようになる。そのため、第3選択ボタン43は、現在の体力レベルより下の体力レベルの内容に興味を持っているユーザ(たとえば、病気またはエクササイズ不実行等により、体力が低下して、一段低い運動負荷のエクササイズを希望するユーザ等)に選択されることを想定したボタンになっている。
The
動画表示プログラム36は、上述した表示パターン選択メニュー40で選択されたボタンの内容が伝えられると、伝えられた内容に応じた動画の生成処理および表示処理に関する制御をCPU31aが行うことを規定している。
The moving
まず、第1ボタン41が選択されたことが伝えられると、CPU31aは、サーバ装置10から送信されたパターンが規定する時系列の順序に応じた各モーションデータを用いて動画を生成し、生成した内容を順次大型モニタ装置32へ出力することになる。
First, when it is notified that the
具体的には、サーバ装置10から送信されたパーソナルメニューの内容が、図10に示すパターン1であり、ユーザの体力レベルを表すデータが「体力普通」である場合、CPU31aは、第1クールの時間1の時間1、2に、ID番号が「B1」のモーションデータに基づき動画(主動画)を生成するように表示処理部31fの制御を行う。また、CPU31aは、第1クールの時間3〜第2クールの時間6まで、ID番号が「C1」のモーションデータで主動画を生成する制御を行い、以下同様に、パターン1の「体力普通」の欄に時系列の順序で並ぶモーションデータを順次用いて主動画を生成するように表示処理部31fの制御を行う。
Specifically, when the content of the personal menu transmitted from the
また、ユーザの体力レベルを表すデータが「体力有り」である場合、CPU31aは、第1クールの時間1から第2クールの時間4まで、ID番号が「C1」のモーションデータに基づき動画を生成するように表示処理部31fの制御を行う。なお、「体力有り」に応じたモーションデータが規定されていない時間帯では、「体力普通」の欄に規定されたモーションデータを用いてCPU31aは主動画を生成するように、表示処理部31fを制御することになる。
Further, when the data representing the physical strength level of the user is “physical strength exists”, the
さらに、ユーザの体力レベルを表すデータが「体力無し」である場合、CPU31aは、第1クールについては、「体力普通」の場合と同様の制御を行い、第2クールの時間5から時間8まで、ID番号が「C1」のモーションデータに基づき動画を生成するように表示処理部31fの制御を行い、以下、「体力無し」に応じたモーションデータが規定されていない時間帯では、「体力普通」の欄に規定されたモーションデータを用いてCPU31aは主動画を生成するように、表示処理部31fを制御する。
Further, when the data representing the physical strength level of the user is “no physical strength”, the
なお、CPU31aは、上述したような処理で主動画を生成すると、生成した主動画が大型モニタ装置32で動画として表示されるように表示処理部31fで生成した主動画に応じたフレーム画像が順次大型モニタ装置32へ出力されるように表示処理部31fを制御する。
Note that when the
その結果、図14に示すように、大型モニタ装置32の画面32aの全体に、バーチャルインストラクターの人体画像が各種動作を行う内容の動画のフレーム画像f1〜f6が順次表示されるようになり、ユーザは、このバーチャルインストラクターの動きに合わせてエアロビクスを行えば、自己の体力レベルおよび運動目的に応じたエクササイズを行えることになる。
As a result, as shown in FIG. 14, frame images f1 to f6 of moving images in which the human body image of the virtual instructor performs various operations are sequentially displayed on the
また、表示パターン選択メニュー40で第2ボタン42が選択されたことがCPU31aへ伝えられると、CPU31aは、上述した主動画の生成表示処理に加えて、ユーザの体力レベルより高いレベルに応じた内容の副動画を生成して表示する制御処理を行う。
In addition, when the
具体的にCPU31aは、サーバ装置10から送信されてきたパターンの中で、ユーザの体力レベルに応じた運動負荷レベルのモーションデータを主モーションデータ(一の動作データに相当)として特定し、その特定した主モーションデータに基づき上述した主動画に係る処理を行って、主動画の生成表示に関する制御処理を行う。それに加えてCPU31aは、パターンが複数のモーションデータを対応付ける時間帯で、特定した主モーションデータに係る運動負荷レベルと異なる運動負荷レベルのモーションデータが規定されているか否かを検出する。異なる運動負荷レベルのモーションデータが規定されていることを検出した場合、CPU31aは、検出したモーションデータを副モーションデータとして特定し、主モーションデータに係る運動負荷レベルと、副モーションデータに係る運動負荷レベルとをレベル比較手段として比較する処理を行う。
Specifically, the
比較の結果、副モーションデータに係る運動負荷レベルが、主モーションデータに係る運動負荷レベルに比べて高い場合に、CPU31aは副モーションデータに基づき副動画を生成するように表示処理部31fを制御する。この際、表示処理部31fは、主動画より小さいサイズで副動画を生成するようになっており、副モーションデータに含まれる画素データを適宜間引いて副動画を生成し、副動画生成に係る処理負担を低減して、主動画の生成処理と時分割で副動画の生成処理を行えるようにしている。
As a result of the comparison, when the exercise load level related to the sub motion data is higher than the exercise load level related to the main motion data, the
また、CPU31aは、図13(b)に示すように、表示処理部31fが、主動画S1の中の右上隅S1aとなる箇所に副動画S2を配置した状態の画面フレームを作成して大型モニタ装置32へ表示出力するように制御処理を行う。このような配置にすれば、主動画S1において、エクササイズを行うバーチャルインストラクターが、上側の隅に位置する場合は稀なので、主動画S1のバーチャルインストラクターが副動画S2で見えなくなる状態を、できるだけ回避できる。
Further, as shown in FIG. 13B, the
表示パターン選択メニュー40の第2ボタン42が選択された場合は、CPU31aが上述した処理を行うので、例えば、図10のパターン1が端末ユニット30へ送信されると共に、判定されたユーザの体力レベルが「体力普通」であれば、第1クールおよび第4クール〜第7クールでは、図13(b)に示す表示パターンで、「体力普通」に応じた各モーションデータに応じた内容が主動画S1として表示され、「体力有り」に応じた各モーションデータに応じた内容が副動画S2として表示され、現在の体力レベルより上のレベルの内容を小さいサイズの副動画S2で確認できるようになる。なお、この例において、第1クール、第4クール〜第7クール以外では、「体力有り」に応じたモーションデータが規定されていないので、主動画S1のみが表示される。
When the
また、図10のパターン1が端末ユニット30へ送信されると共に、判定されたユーザの体力レベルが「体力無し」であれば、第2クールおよび第8クールでは、図13(b)に示す表示パターンで、「体力無し」に応じた各モーションデータに応じた内容が主動画S1として表示され、「体力普通」に応じた各モーションデータに応じた内容が副動画S2として表示される。この例においても、第2クールおよび第8クール以外では、「体力無し」に応じたモーションデータが規定されていないので、主動画S1のみが表示されることになる。なお、上述した例で、ユーザの体力レベルが「体力有り」と判定されたときは、パターン1において、「体力有り」より高い運動負荷レベルのモーションデータは規定されていないため、第2ボタン42が選択されたとしても、「体力有り」に応じた内容のモーションデータに基づき主動画S1のみが大型モニタ装置32に表示されることになる。
If the
図15に示す第2フローチャートは、上述した表示パターン選択メニュー40で第2ボタン42が選択された場合に端末装置31(CPU31a)が行う表示処理に係る一連の処理内容(動画表示方法の内容)を整理したものである。この第2フローチャートは、端末装置31(端末ユニット30)がサーバ装置10から、動画生成に必要なデータ等を受信して、すでに第2ボタン42が選択されて動画を生成表示する段階が始まった状態からの処理内容を示している。
The second flowchart shown in FIG. 15 is a series of processing contents (contents of a moving image display method) related to display processing performed by the terminal device 31 (
この第2フローチャートで、まず、端末装置31は、サーバ装置10から送信されたパターンにおいて処理対象となる時間帯で、主モーションデータ以外に副モーションデータが規定されているかを検出する(S10)。副モーションデータが規定されていないことを検出した場合(S10:NO)、端末装置31は、主モーションデータに基づき主動画S1のみを生成する(S14)。
In the second flowchart, first, the
また、副モーションデータが規定されていることを検出した場合(S10:YES)、次に端末装置31は、副モーションデータに係る運動負荷レベルが主モーションデータの運動負荷レベルより高いか否かを比較する(S11)。副モーションデータに係る運動負荷レベルが主モーションデータの運動負荷レベルより高くない場合(S11:NO)、端末装置31は、主モーションデータに基づき主動画S1のみを生成する(S14)。
If it is detected that the secondary motion data is defined (S10: YES), the
一方、副モーションデータに係る運動負荷レベルが主モーションデータの運動負荷レベルより高い場合(S11:YES)、端末装置31は時分割的に主モーションデータに基づき主動画S1および副モーションデータに基づき副動画S2を処理対象となる時間帯に対してそれぞれ生成し(S12)、生成した副動画S2を図13(b)に示すように主動画S1の中に配置した組合動画を生成する(S13)。それから、端末装置31は、S13の段階またはS14の段階で生成した動画の表示処理を行い(S15)、パターンが規定する最後の時間帯まで処理が終了したか否かを判断する(S16)。最後の時間帯まで処理が終了すれば(S16:YES)、端末装置31は一連の処理を終了し、また、最後の時間帯まで処理が終了していなければ(S16:NO)、最初の処理段階(S10)に戻り、次の処理対象となる時間帯で、主モーションデータ以外に副モーションデータが規定されているかを検出することになる。
On the other hand, when the exercise load level related to the sub-motion data is higher than the exercise load level of the main motion data (S11: YES), the
以上のような処理を、端末装置31が行うので、図13(a)に示す表示パターン選択メニュー40の第2ボタン42が選択されると、エクササイズを行いながらも、適宜、副動画S2で現在の運動負荷レベルよりレベルが高いエクササイズ内容を確認でき、ユーザのエクササイズに対する向上心を刺激でき、レベルアップを図るユーザ等に好適な表示形態を提供できる。
Since the
また、表示パターン選択メニュー40で第3ボタン43が選択されたことがCPU31aへ伝えられると、CPU31aは、上述した副動画の生成表示処理とは反対に、ユーザの体力レベルより低いレベルに応じた内容の副動画を生成して表示する制御処理を行う。この場合、CPU31aは、主動画の生成表示および処理対象となる時間帯に運動負荷レベルが異なる複数のモーションデータが規定されているか否かの検出に係る処理等を、上記内容と同等に行ってから、主モーションデータに係る運動負荷レベルと、副モーションデータに係る運動負荷レベルとをレベル比較手段として比較する処理を行う。
Further, when the
さらに、第3ボタン43が選択されたときは、比較の結果、副モーションデータに係る運動負荷レベルが、主モーションデータに係る運動負荷レベルに比べて低い場合に、CPU31aは副モーションデータに基づき副動画を生成するように表示処理部31fを制御し、図13(b)に示す表示形態で主動画S1および副動画S2を表示する制御処理を行う。
Further, when the
よって、表示パターン選択メニュー40の第3ボタン43が選択された場合に対して、例えば、図10のパターン1が端末ユニット30へ送信されると共に、判定されたユーザの体力レベルが「体力普通」であれば、第2クールおよび第8クールでは、図13(b)に示す表示パターンで、「体力普通」に応じた各モーションデータに応じた内容が主動画S1として表示され、「体力無し」に応じた各モーションデータに応じた内容が副動画S2として表示され、現在の体力レベルより下のレベルの内容を小さいサイズの副動画S2で確認できる。なお、この例において、第2クールおよび第8クール以外では、「体力無し」に応じたモーションデータが規定されていないので、主動画S1のみが表示される。
Therefore, when the
また、図10のパターン1が端末ユニット30へ送信されると共に、判定されたユーザの体力レベルが「体力有り」であれば、第1クール、第4クール〜第7クールでは、「体力有り」に応じた各モーションデータに応じた内容が主動画S1として表示され、「体力普通」に応じた各モーションデータに応じた内容が副動画S2として表示される。この例においても、第1クール、第4クール〜第7クール以外では、「体力有り」に応じたモーションデータが規定されていないので、主動画S1のみが表示されることになる。なお、この例で、ユーザの体力レベルが「体力無し」と判定されたときは、パターン1において、「体力無し」より低い運動負荷レベルのモーションデータは規定されていないため、第3選択ボタン43が選択されたとしても、「体力無し」等に応じた内容のモーションデータに基づき主動画S1のみが大型モニタ装置32に表示される。
10 is transmitted to the
第3ボタン43が選択された場合の一連の端末装置31の処理内容も、図15に示す第2フローチャートとほぼ同等になり、S11の内容が、副モーションデータに係る運動負荷レベルが主モーションデータの運動負荷レベルより低いか否かを比較する点が相異することになる。第3ボタン43が選択されたときは、端末装置31が以上のような処理を行うので、エクササイズを行いながらも、適宜、副動画S2で現在の運動負荷レベルよりレベルが低いエクササイズ内容を確認でき、体力レベルが低下しているため下のレベルのエクササイズ内容に変更することを考えているユーザ等に好適な表示形態を提供できる。
The processing contents of the series of
なお、上述した説明ではメインコンテンツに係る表示処理を説明したが、表示するエクササイズの内容が固定であるウォーミングアップ等については、規定された内容に従ってCPU31aは動画の生成および表示処理を行うことになる。
In the above description, the display process related to the main content has been described. However, for warm-up or the like in which the exercise content to be displayed is fixed, the
また、本発明は、上述した説明内容に限定されるものではなく種々の変形例の適用が考えられる。例えば、エクササイズの種類はエアロビクスに限定されるものではなく、ストレッチ、ヨガ、ストリートダンスなどにも適用することが可能である。 Further, the present invention is not limited to the above description, and various modifications can be applied. For example, the type of exercise is not limited to aerobics, but can be applied to stretching, yoga, street dance, and the like.
また、図1に示すように、サーバ装置10は、有線のネットワークケーブルで受付端末装置2と接続されているが、各種メニューを表示する装置とは無線のネットワークまたはインターネットのような広域のネットワークを用いてサーバ装置10と接続するようにしてもよい。このようにすれば、自宅のパーソナルコンピュータまたは携帯電話機を用いて必要な情報の入力、施設利用の予約等をサーバ装置10に対して行えるようになり、ユーザの利便性を高められる。
Further, as shown in FIG. 1, the
一方、システム仕様の簡易化を図る場合は、メニュー表示を行う受付端末装置2、サーバ装置10および端末ユニット30が行う処理を、単一の装置(コンピュータ)で行うようにしてもよい。この場合、単一の装置に接続されたモニタに図3(a)〜(c)に示すような各種メニューが表示されてユーザから情報の入力を受け付けると共に、動作データベース(図6参照)およびパターンデータベース(図9参照)を単一の装置が備えることになる。さらに、単一の装置に記憶されたコンピュータプログラムが、単一の装置に、各種メニューで入力を受け付けた情報の内容に対応付けられたパターンをパターンデータベースから特定させる処理、特定されたパターンから各時間帯のモーションデータを読み出す処理、複数のモーションデータが対応付けられた時間帯で、主モーションデータに基づき主動画を生成する処理、副モーションデータに基づき副動画を生成する処理、生成した主動画および副動画の表示処理等を行わせることになる。
On the other hand, when simplifying the system specifications, the processing performed by the
また、図9に示すパターンデータベース26が格納している各パターンは一例であり、他の運動目的のパターンなどを格納することも勿論可能である。さらに、格納されるパターンの中身としては、一例である図10のパターン1に示す内容以外にも、各時間帯に対応付けて様々なモーションデータを規定するようにしてもよく、「体力有り」、「体力普通」および「体力無し」の欄に対する全ての時間帯にモーションデータを対応付けることも可能である。
Further, each pattern stored in the
さらにまた、ユーザの体力レベルの判定は、図4に示す体力レベルテーブル22に従って三段階(体力有り・体力普通・体力無し)で判定する以外に、より詳細なレベル分けを規定した体力レベルテーブルを用いて、四段階、五段階等で判定してもよい。例えば、五段階で体力レベルを規定する体力レベルテーブルの中身としては、「体力有り」、「体力少し有り」、「体力普通」、「体力少し無し」および「体力無し」と云うレベル分けにすることが可能である。このように、より詳細なレベル分けの体力レベルテーブルを用いるときは、図9に示すパターンデータベース26が格納する各パターンの中身も、より詳細なレベル分けに応じて時間帯ごとに対応付けるモーションデータを規定することになる。それにより、図13(a)の表示パターン選択メニュー40で、ユーザが副動画を含む表示パターンを選択した際に、副動画を有効に表示できる機会を増やすことができる。
Furthermore, the determination of the physical strength level of the user is performed by using a physical strength level table that defines more detailed level divisions in addition to the determination based on the physical strength level table 22 shown in FIG. 4 in three stages (with physical strength, normal physical strength, without physical strength). It may be determined in four steps, five steps, etc. For example, the contents of the physical strength level table that defines the physical fitness level in five levels are classified into “physical strength present”, “physical strength slightly present”, “normal physical strength”, “little physical strength”, and “no physical strength”. It is possible. In this way, when using a more detailed level division physical strength level table, the contents of each pattern stored in the
また、副動画S2の表示形態は、図13(b)に示す内容に限定されるものではなく、配置箇所を主動画S1の右上隅S1a以外に、左上隅、左下隅、右下隅などにすることも可能である。さらに、副動画S2の配置箇所は、ユーザが選択できるようにしてもよく、この場合、図13(a)の表示パターン選択メニュー40で、第2ボタン42または第3ボタン43が選択された後に、副動画S2の配置箇所を選択する配置箇所選択メニューを大型モニタ装置32に表示する。この配置箇所選択メニューでは、副動画S2の配置箇所として、主動画S1の右上隅、上中央、左上隅、左中央、左下隅、下中央、右下隅、右中央などの中からいずれか一つを入力操作器33の操作で選択できるようになっており、選択された箇所がCPU31aに伝えられると、CPU31aは選択された箇所に副動画S2を配置するように表示処理部31fを制御する。それにより、ユーザが所望する箇所に副動画S2を配置でき、ユーザの使い勝手に応じた表示形態を提供できる。
Further, the display form of the sub moving image S2 is not limited to the content shown in FIG. 13B, and the arrangement location is set to the upper left corner, the lower left corner, the lower right corner, etc. in addition to the upper right corner S1a of the main moving image S1. It is also possible. Further, the arrangement location of the sub moving image S2 may be selectable by the user. In this case, after the
さらに、図16は、生成した主動画S1および副動画S2の配置する別の変形例を示している。この変形例では、大型モニタ装置32の画面32aを計3つのエリア61、62、63に区切ると共に、第1エリア61のみを他のエリア62、63より大きくして区別して第1エリア61に主動画S1を配置し、第2エリア62には副動画S2を配置し、第3エリア63にはユーザ情報(ユーザデータベース23に格納されている情報)を配置するようにしている。この変形例では、主動画S1が副動画S2と並べて配置されるので両者は一切重ならないため、主動画S1を常に全て見ることができる。なお、ユーザのエクササイズ対象となる主動画S1を、さらに目立たせて区別する場合は、第1エリア61の周囲を太枠または色付き枠で囲む事などが想定でき、また、主動画S1、副動画S2、ユーザ情報のそれぞれの配置箇所を選択できるメニューまたは操作ウインドウ等を設けて、ユーザによる入力操作器33の操作により、主動画S1、副動画S2、ユーザ情報の配置箇所を適宜入れ替え可能にしてもよい。
Further, FIG. 16 shows another modification example in which the generated main moving image S1 and sub moving image S2 are arranged. In this modification, the
図17(a)(b)は、2台のモニタ装置70、71を、生成した動画の表示出力先として使用する場合の変形例を示している。この変形例の場合、端末装置31′は、表示処理部31f′に接続される主出力部38′および副出力部39′を新たに設けると共に、主出力部38′に主出力先となる主モニタ装置70を接続し、副出力部39′に副出力先となる副モニタ装置71を接続した仕様にする。そして、端末装置31′は、生成した主動画S1を主出力部38′から出力して主モニタ装置70に表示させる処理を行うと共に、生成した副動画S2を副出力部39′から出力して副モニタ装置71に表示させる処理を行う。この変形例では、ハード的に別のモニタ装置70、71に分けて主動画S1と副動画S2が表示されるので、ユーザが各動画を容易に区別して確認することができる。なお、副動画S2は補助的に表示されるものなので、副モニタ装置71の画面サイズは、主モニタ装置70より小さくしてもよい。
FIGS. 17A and 17B show a modification example in which two monitor
また、ユーザからの操作の受付を入力操作器33で行う以外に、遠隔操作が可能なリモコン装置で行えるようにすること、または大型モニタ装置32の画面32aにタッチパネル方式のものを採用して、画面32aのタッチ動作で行えるようにしてもよい。このようにすることで、運動動作中もユーザは操作入力を行いやすくなるので、図13(b)に示す副動画S2の位置を、リモコン操作または画面32aに対するタッチ動作で指定可能にして、運動中に副動画S2の配置を変更できるようにしてもよく、同様に図16に示す場合でも、運動中に主動画S1、副動画S2、ユーザ情報のそれぞれの配置箇所を入れ替えられるようにしてもよい。
In addition to accepting operation from the user with the
1 動画表示システム
2 受付端末装置
10 サーバ装置
11 MPU
14 通信インタフェース
15 ハードディスク装置
20 サーバプログラム
21 メニューデータベース
21a、21b、21c メニュー
22 体力レベルテーブル
23 ユーザデータベース
24 動作データベース
25 運動目的テーブル
26 パターンデータベース
30 端末ユニット
31 端末装置
31a CPU
32 大型モニタ装置
33 入力操作器
S1 主動画
S2 副動画
DESCRIPTION OF
14
32
Claims (9)
生成する動画における時系列の順序に応じた各時間帯に対応付ける動作データを規定した規定データが複数種類格納してある規定データベースを備え、
前記規定データベースは、前記入力受付手段で入力が受け付け可能な情報に含まれる事項に対応付けて各規定データを格納しており、
前記規定データは、生成する動画における各時間帯の少なくとも一つの時間帯で、運動負荷レベルが異なる複数の動作データを対応付けており、
前記入力受付手段で入力が受け付けられた情報に含まれる事項に対応付けられる規定データを前記規定データベースから特定する特定手段と、
前記特定手段で特定された規定データが複数の動作データを対応付ける時間帯で、前記複数の動作データの中の一の動作データに基づき主動画を生成する主動画生成手段と、
前記特定手段で特定された規定データが複数の動作データを対応付ける時間帯で、前記複数の動作データの中の他の動作データに基づき副動画を生成する副動画生成手段と、
前記主動画生成手段が生成した主動画および前記副動画生成手段が生成した副動画の表示処理を行う表示処理手段と
を備えることを特徴とする動画表示システム。 A motion database storing a plurality of types of motion data that defines the motion motion of a moving body, an input receiving means for receiving input of information, and a plurality of types of motion according to information received by the input receiving means In a moving image display system comprising means for reading data from the operation database and means for generating a moving image of a moving object based on each read operation data, and performing display processing of the generated moving image,
Provided with a regulation database that stores a plurality of types of regulation data that defines action data to be associated with each time slot according to the time-series order in the generated video,
The regulation database stores each regulation data in association with items included in information that can be accepted by the input accepting unit,
The prescribed data is associated with a plurality of motion data having different exercise load levels in at least one time zone of each time zone in the generated video,
A specifying unit that specifies prescription data associated with items included in the information received by the input receiving unit from the prescription database;
A main moving image generating means for generating a main moving image based on one operation data among the plurality of operation data in a time zone in which the specified data specified by the specifying means associates a plurality of operation data;
Sub-moving image generating means for generating a sub-moving image based on other operation data in the plurality of operation data in a time zone in which the specified data specified by the specifying means associates a plurality of operation data;
And a display processing unit configured to display a main moving image generated by the main moving image generating unit and a sub moving image generated by the sub moving image generating unit.
前記特定手段で特定された規定データが複数の動作データを対応付ける時間帯で、前記複数の動作データの中から前記レベル判定手段で判定されたレベルに応じた運動負荷レベルの動作データを一の動作データとして特定する動作データ特定手段と
を備える請求項1に記載の動画表示システム。 Level determination means for determining a level related to exercise based on items included in the information received by the input reception means;
The operation data of the exercise load level corresponding to the level determined by the level determination unit from the plurality of operation data in a time zone in which the specified data specified by the specifying unit associates a plurality of operation data. The moving image display system according to claim 1, further comprising: operation data specifying means for specifying as data.
前記レベル比較手段による比較の結果、前記他の動作データに係る運動負荷レベルが前記一の動作データに係る運動負荷レベルに比べて高い場合に、前記副動画生成手段は副動画を生成する請求項2に記載の動画表示システム。 Level comparison means for comparing an exercise load level related to one action data specified by the action data specifying means and an exercise load level related to the other action data;
The sub moving image generating unit generates a sub moving image when the exercise load level related to the other operation data is higher than the exercise load level related to the one operation data as a result of the comparison by the level comparison unit. 2. The moving image display system according to 2.
前記レベル比較手段による比較の結果、前記他の動作データに係る運動負荷レベルが前記一の動作データに係る運動負荷レベルに比べて低い場合に、前記副動画生成手段は副動画を生成する請求項2に記載の動画表示システム。 Level comparison means for comparing an exercise load level related to one action data specified by the action data specifying means and an exercise load level related to the other action data;
The sub moving image generation unit generates a sub moving image when the exercise load level related to the other operation data is lower than the exercise load level related to the one operation data as a result of the comparison by the level comparison unit. 2. The moving image display system according to 2.
前記表示処理手段は、主動画の中に副動画を配置した状態で表示処理を行う請求項1乃至請求項4のいずれか1項に記載の動画表示システム。 The sub moving image generating means generates a sub moving image with a size smaller than the main moving image,
The moving image display system according to any one of claims 1 to 4, wherein the display processing means performs display processing in a state in which a sub moving image is arranged in a main moving image.
前記規定データベースには、前記入力受付手段で入力が受け付け可能な情報に含まれる事項に対応付けて各規定データが格納してあり、
前記規定データは、生成する動画における各時間帯の少なくとも一つの時間帯で、運動負荷レベルが異なる複数の動作データを対応付けており、
前記動画表示システムは、
前記入力受付手段で入力が受け付けられた情報に含まれる事項に対応付けられる規定データを前記規定データベースから特定し、
特定した規定データが複数の動作データを対応付ける時間帯で、前記複数の動作データの中の一の動作データに基づき主動画を生成し、
特定した規定データが複数の動作データを対応付ける時間帯で、前記複数の動作データの中の他の動作データに基づき副動画を生成し、
生成した主動画および副動画の表示処理を行うことを特徴とする動画表示方法。 A motion database that stores multiple types of motion data that prescribes the motion of moving objects, and a plurality of types of prescription data that prescribes motion data that is associated with each time zone according to the time-series order in the generated video A moving image display system comprising a prescribed database and an input receiving unit that receives input of information reads out and reads out a plurality of types of operation data according to the information received by the input receiving unit from the operation database A moving image display method for generating a moving image based on each motion data and performing display processing of the generated video,
Each regulation data is stored in the regulation database in association with items included in information that can be accepted by the input accepting unit,
The specified data is associated with a plurality of motion data having different exercise load levels in at least one time zone of each time zone in the generated video,
The video display system includes:
Specifying the regulation data associated with the items included in the information accepted by the input accepting means from the regulation database,
A main video is generated based on one of the plurality of operation data in a time zone in which the specified data is associated with a plurality of operation data,
In the time zone in which the specified data is associated with a plurality of operation data, a sub moving image is generated based on the other operation data in the plurality of operation data,
A moving image display method characterized by performing display processing of a generated main moving image and sub moving image.
前記規定データベースには、前記入力受付手段で入力が受け付け可能な情報に含まれる事項に対応付けて各規定データが格納してあり、
前記規定データは、生成する動画における各時間帯の少なくとも一つの時間帯で、運動負荷レベルが異なる複数の動作データを対応付けており、
コンピュータを、
前記入力受付手段で入力が受け付けられた情報に含まれる事項に対応付けられる規定データを前記規定データベースから特定する手段と、
特定した規定データが複数の動作データを対応付ける時間帯で、前記複数の動作データの中の一の動作データに基づき主動画を生成する手段と、
特定した規定データが複数の動作データを対応付ける時間帯で、前記複数の動作データの中の他の動作データに基づき副動画を生成する手段と、
生成した主動画および生成した副動画の表示処理を行う手段として機能させることを特徴とするコンピュータプログラム。 A motion database that stores multiple types of motion data that prescribes the motion of moving objects, and a plurality of types of prescription data that prescribes motion data that is associated with each time zone according to the time-series order in the generated video A computer including a prescribed database and an input receiving unit that receives an input of information is caused to read a plurality of types of operation data according to the information received by the input receiving unit from the operation database. A computer program for generating a moving image of a moving object based on each motion data that has been output, and performing display processing of the generated moving image,
Each regulation data is stored in the regulation database in association with items included in information that can be accepted by the input accepting unit,
The specified data is associated with a plurality of motion data having different exercise load levels in at least one time zone of each time zone in the generated video,
Computer
Means for specifying, from the regulation database, regulation data associated with items included in the information accepted by the input acceptance means;
Means for generating a main moving image based on one operation data among the plurality of operation data in a time zone in which the specified data is associated with a plurality of operation data;
Means for generating a sub moving image based on other operation data in the plurality of operation data in a time zone in which the specified data specified associates a plurality of operation data;
A computer program that functions as means for performing display processing of a generated main moving image and a generated sub moving image.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007297890A JP4972527B2 (en) | 2007-11-16 | 2007-11-16 | Movie display system, movie display method, and computer program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007297890A JP4972527B2 (en) | 2007-11-16 | 2007-11-16 | Movie display system, movie display method, and computer program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2009119112A true JP2009119112A (en) | 2009-06-04 |
JP4972527B2 JP4972527B2 (en) | 2012-07-11 |
Family
ID=40811932
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007297890A Active JP4972527B2 (en) | 2007-11-16 | 2007-11-16 | Movie display system, movie display method, and computer program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4972527B2 (en) |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011194026A (en) * | 2010-03-19 | 2011-10-06 | Brother Industries Ltd | Device and method for supporting exercise and program |
JP2011194025A (en) * | 2010-03-19 | 2011-10-06 | Brother Industries Ltd | Device and method for supporting exercise and program |
JP2012065942A (en) * | 2010-09-27 | 2012-04-05 | Brother Industries Ltd | Exercise support system, exercise support method, and program |
JP2013027629A (en) * | 2011-07-29 | 2013-02-07 | Seiko Epson Corp | Exercise guidance device, exercise guidance program, and recording medium |
JP2013248162A (en) * | 2012-05-31 | 2013-12-12 | Brother Industries Ltd | Exercise support device, exercise support method, and program |
JP2014046019A (en) * | 2012-08-31 | 2014-03-17 | Brother Ind Ltd | Information processor, information processing method, and program |
JP2015186531A (en) * | 2014-03-26 | 2015-10-29 | 国立大学法人 東京大学 | Action information processing device and program |
JP5914738B1 (en) * | 2015-08-19 | 2016-05-11 | 智一 丸山 | Exercise support device and exercise support program |
CN106139564A (en) * | 2016-08-01 | 2016-11-23 | 纳恩博(北京)科技有限公司 | Image processing method and device |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0955898A (en) * | 1995-08-17 | 1997-02-25 | Toshiba Corp | Multi-screen television receiver |
JPH11137719A (en) * | 1997-11-07 | 1999-05-25 | Matsushita Electric Works Ltd | Training system |
JP2004105220A (en) * | 2002-09-13 | 2004-04-08 | Konami Sports Life Corp | Training equipment |
-
2007
- 2007-11-16 JP JP2007297890A patent/JP4972527B2/en active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0955898A (en) * | 1995-08-17 | 1997-02-25 | Toshiba Corp | Multi-screen television receiver |
JPH11137719A (en) * | 1997-11-07 | 1999-05-25 | Matsushita Electric Works Ltd | Training system |
JP2004105220A (en) * | 2002-09-13 | 2004-04-08 | Konami Sports Life Corp | Training equipment |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011194026A (en) * | 2010-03-19 | 2011-10-06 | Brother Industries Ltd | Device and method for supporting exercise and program |
JP2011194025A (en) * | 2010-03-19 | 2011-10-06 | Brother Industries Ltd | Device and method for supporting exercise and program |
JP2012065942A (en) * | 2010-09-27 | 2012-04-05 | Brother Industries Ltd | Exercise support system, exercise support method, and program |
JP2013027629A (en) * | 2011-07-29 | 2013-02-07 | Seiko Epson Corp | Exercise guidance device, exercise guidance program, and recording medium |
JP2013248162A (en) * | 2012-05-31 | 2013-12-12 | Brother Industries Ltd | Exercise support device, exercise support method, and program |
JP2014046019A (en) * | 2012-08-31 | 2014-03-17 | Brother Ind Ltd | Information processor, information processing method, and program |
JP2015186531A (en) * | 2014-03-26 | 2015-10-29 | 国立大学法人 東京大学 | Action information processing device and program |
JP5914738B1 (en) * | 2015-08-19 | 2016-05-11 | 智一 丸山 | Exercise support device and exercise support program |
JP2017038756A (en) * | 2015-08-19 | 2017-02-23 | 智一 丸山 | Exercise support device and exercise support program |
CN106139564A (en) * | 2016-08-01 | 2016-11-23 | 纳恩博(北京)科技有限公司 | Image processing method and device |
Also Published As
Publication number | Publication date |
---|---|
JP4972527B2 (en) | 2012-07-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4972527B2 (en) | Movie display system, movie display method, and computer program | |
US20210316185A1 (en) | Methods and apparatus for managing sequential tasks via task specific user interface elements | |
US8496563B2 (en) | Exercise support apparatus, computer readable storage medium recording a computer program, and exercise support method | |
US10902741B2 (en) | Exercise feedback system for musculoskeletal exercises | |
US20220398937A1 (en) | Information processing device, information processing method, and program | |
JP5160830B2 (en) | Movie generation system, movie generation method, and computer program | |
JP2006255028A (en) | Exercise supporting system and method | |
WO2013176933A1 (en) | Dynamic exercise content | |
US20190295438A1 (en) | Augmented reality guided musculoskeletal exercises | |
CN106256129B (en) | Method for operating image display device | |
JP7036327B2 (en) | Rehabilitation system and image processing equipment for higher brain dysfunction | |
KR20220037556A (en) | Method and system for providing customized exercise video | |
KR20160072708A (en) | Web-based Home Fitness Method | |
JP2009145805A (en) | Moving image display system, moving image display method, and computer program | |
JP2009095404A (en) | Moving image display system, moving image display method, and computer program | |
US20080175472A1 (en) | Method of providing contents using color marker and system for performing the same | |
KR101234455B1 (en) | Exercise prescription information provision system using disease classification code and exercise prescription information provision method thereof | |
JP2022032362A (en) | System, method, and information processing device | |
JP5504799B2 (en) | Exercise support device, exercise support method and program | |
JP7069997B2 (en) | Health information management server and health information management system | |
JP5726827B2 (en) | Exercise menu creation system, exercise menu creation method, and computer program | |
KR102434122B1 (en) | Method and system for generating customized exercise video | |
JP6811349B1 (en) | Information processing equipment, methods, programs | |
JP2009050456A (en) | Moving image display system, moving image display method, and computer program | |
JP5830132B2 (en) | Exercise menu creation system, exercise menu creation method, and computer program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20100520 |
|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20100527 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20120319 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20120326 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20120409 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150413 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150413 Year of fee payment: 3 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: R3D02 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313117 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R360 | Written notification for declining of transfer of rights |
Free format text: JAPANESE INTERMEDIATE CODE: R360 |
|
R370 | Written measure of declining of transfer procedure |
Free format text: JAPANESE INTERMEDIATE CODE: R370 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313117 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |