JP6831492B2 - Information processing systems, information processing devices, information processing methods, and programs - Google Patents
Information processing systems, information processing devices, information processing methods, and programs Download PDFInfo
- Publication number
- JP6831492B2 JP6831492B2 JP2020504635A JP2020504635A JP6831492B2 JP 6831492 B2 JP6831492 B2 JP 6831492B2 JP 2020504635 A JP2020504635 A JP 2020504635A JP 2020504635 A JP2020504635 A JP 2020504635A JP 6831492 B2 JP6831492 B2 JP 6831492B2
- Authority
- JP
- Japan
- Prior art keywords
- height
- information
- user
- processing
- information processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
Description
本発明は、情報処理システム、情報処理装置、情報処理方法、及びプログラムに関する。 The present invention relates to information processing systems, information processing devices, information processing methods, and programs.
近年、ヘッドマウントディスプレイ等、ユーザの頭部に装着され、情報を表示するデバイスが普及している。このようなデバイスを用い、例えばゲーム等のアプリケーションの処理によって生成される仮想的な空間の画像の情報を表示する場合、当該仮想的な空間における視点の位置は、ユーザの実際の身長等と関係なく、ゲームにおいて任意に設定可能となっているのが現状である。 In recent years, devices such as head-mounted displays that are attached to the user's head and display information have become widespread. When using such a device and displaying information on an image of a virtual space generated by processing an application such as a game, the position of the viewpoint in the virtual space is related to the actual height of the user and the like. The current situation is that it can be set arbitrarily in the game.
上述の現状のため、ユーザは、少なくともゲームの開始時等の初期の時点では、実際の身長からの視点とは異なる視点で仮想的な空間の画像を見ることとなり、違和感を生じる原因となっている。 Due to the above-mentioned current situation, the user sees the image of the virtual space from a viewpoint different from the viewpoint from the actual height, at least at the beginning of the game, which causes a sense of discomfort. There is.
本発明は上記実情に鑑みて為されたもので、ユーザの身長の情報を用いた情報処理を実行できる情報処理システム、情報処理装置、情報処理方法、及びプログラムを提供することを、その目的の一つとする。 The present invention has been made in view of the above circumstances, and an object of the present invention is to provide an information processing system, an information processing device, an information processing method, and a program capable of executing information processing using information on the height of a user. Make one.
上記従来例の問題点を解決するための本発明は、ユーザに装着され、当該ユーザの身長に関わる情報を出力するデバイスに接続される情報処理装置であって、当該デバイスから取得した情報に基づいて、当該デバイスを装着するユーザの身体の長さに関する身長特徴情報を推定する推定手段と、前記推定された身長特徴情報を用いて、実行の対象となるアプリケーションの所定の処理を実行する処理手段と、を含み、前記処理手段は少なくとも、前記身長特徴情報を用いて、前記アプリケーションの初期化時の処理を実行することとしたものである。 The present invention for solving the problems of the above conventional example is an information processing device attached to a user and connected to a device that outputs information related to the height of the user, and is based on the information acquired from the device. An estimation means for estimating height characteristic information regarding the body length of the user who wears the device, and a processing means for executing a predetermined process of the application to be executed by using the estimated height characteristic information. The processing means is to execute the processing at the time of initialization of the application by using at least the height feature information.
本発明によると、ユーザの身長の情報を用いた情報処理を実行できる。 According to the present invention, information processing using information on the height of the user can be executed.
本発明の実施の形態について図面を参照しながら説明する。本発明の実施の形態に係る情報処理システム１は図１に例示するように、ユーザに装着される装置とコントローラＣＴＬとを含むデバイス１０と、このデバイス１０と通信可能に接続された情報処理装置２０とを含んで構成される。
Embodiments of the present invention will be described with reference to the drawings. As illustrated in FIG. 1, the
なお、図１の例では、デバイス１０は、ユーザの頭部に装着される装置であるヘッドマウントディスプレイ（ＨＭＤ）とコントローラＣＴＬとを含む。また後に説明するように、このデバイス１０は、当該ユーザの身長に関わる情報を出力する。
In the example of FIG. 1, the
また情報処理装置２０は、図１に例示したように、制御部２１と、記憶部２２と、操作部２３と、表示制御部２４とを含んで構成される。本実施の形態の一例では、この情報処理装置２０にはさらに、表示デバイス３０と、コントローラデバイス４０とが通信可能に接続されている。
Further, as illustrated in FIG. 1, the
ここで情報処理装置２０の制御部２１は、ＣＰＵ等のプログラム制御デバイスであり、記憶部２２に格納されたプログラムに従って動作する。本実施の形態の制御部２１は、このプログラムを実行することで、デバイス１０から取得した、ユーザの身長に関わる情報に基づいて、当該デバイス１０に係る装置であるＨＭＤを装着するユーザの身長に関する身長特徴情報を推定する。そして制御部２１は、ここで推定された身長特徴情報を用いて、実行の対象となるアプリケーションの所定の処理を実行する。このとき制御部２１は、少なくとも、身長特徴情報を用いて、当該実行の対象となるアプリケーションの初期化時の処理を実行する。この制御部２１の具体的な処理の例については後に述べる。
Here, the
記憶部２２は、メモリデバイスやディスクデバイスを含んで構成され、制御部２１によって実行されるプログラムを格納している。このプログラムは、ＤＶＤ−ＲＯＭ等のコンピュータ可読、かつ非一時的な記憶媒体に格納されて提供され、この記憶部２２に複写されて格納されたものであってもよい。またこの記憶部２２は、制御部２１のワークメモリとしても動作する。
The
操作部２３は、ゲームコントローラやキーボード、マウス等のコントローラデバイス４０から入力されるユーザの指示操作の内容を表す情報を、制御部２１に出力する。表示制御部２４は、制御部２１から入力される指示に従って、ディスプレイやＨＭＤ等の表示デバイス３０、または本実施の形態のここでの例では、デバイス１０に含まれるＨＭＤの少なくとも一方を制御して、情報を表示出力させる。
The
［ＨＭＤを含むデバイスによるユーザの身長情報の取得］
またここで、ＨＭＤを含むデバイス１０を用いてユーザの身長に係る情報を取得する処理の例について説明する。[Acquisition of user height information by device including HMD]
Further, here, an example of a process of acquiring information related to the height of the user by using the
本実施の形態の一例では、このデバイス１０のＨＭＤは、その筐体に複数のカメラ等の撮像部Ｃを備えている。そしてデバイス１０（マイクロコンピュータ等のプロセッサを有するものとする）は、このＨＭＤの複数の撮像部Ｃにてそれぞれ撮像されて得た画像データを取得する。この複数の撮像部Ｃのうち少なくとも一対は、ＨＭＤをユーザが装着しているときには、ユーザの頭部の位置からユーザの前方（ユーザの目の方向）を撮像しているものとする。
In an example of this embodiment, the HMD of the
そこで、この一対の撮像部Ｃが撮像する画像データは、ユーザの前方（ユーザの目の方向）にある対象物（床面や、室内であれば壁その他、室内に配置された机等）が撮像されたものとなる。デバイス１０は、この一対の撮像部Ｃが撮像する画像データに基づいて、床面を認識し（画像データから床面を認識する処理は、広く知られた種々の処理を採用できるので、ここでの詳しい説明を省略する）、また当該床面までの距離を求める。この撮像された対象物までの距離を一対の撮像部Ｃにより得られた一対の画像データに基づいて求める方法も、各画像データに撮像された同一の対象物の特徴点の位置の差（視差）を利用するなどの広く知られた方法を採用できるので、ここでの詳しい説明を省略する。
Therefore, the image data captured by the pair of imaging units C includes an object (floor surface, a wall in the case of a room, a desk arranged in the room, etc.) in front of the user (in the direction of the user's eyes). It will be the one that was imaged. The
こうしてデバイス１０は、ユーザの頭部の位置から床面までの距離を求め、当該距離を、ユーザの身長に係る情報として情報処理装置２０に対して出力する。
In this way, the
また、別のデバイス１０では、ＨＭＤと、このＨＭＤとは別体の複数のカメラＲとを含んで構成される。この例では、ＨＭＤ表面には予めＬＥＤ（発光体）やマーカー等を付しておき、カメラＲで撮像した画像から、当該発光体やマーカーの位置を検出する。
Further, another
さらにこの例のデバイス１０においても、一対のカメラＲが撮像する画像データから、床面を認識し、カメラＲとＨＭＤとの距離（一対のカメラＲで撮像された画像データの視差の情報に基づいて求める）と、ＨＭＤと床面との角度の差（画角内の距離で求めることができる）とから、ＨＭＤから床面までの距離を求め、当該距離の情報を、ユーザの身長に係る情報（ユーザの頭部の位置から床面までの距離の情報）として情報処理装置２０に対して出力する。
Further, also in the
なお、ここで例示した処理は一例であり、例えばＨＭＤにジャイロセンサや加速度センサ等が搭載されている場合は、当該ジャイロセンサや加速度センサによる、床面からの移動距離等の情報を用いてもよい（ユーザに対し、床面にＨＭＤを置き、その後に頭部に装着するように案内し、その間のＨＭＤの垂直（重力加速度）方向の移動距離を測定すればよい）。また気圧のセンサを用いてもよい。また、ここでの身長の情報の精度は、数ｃｍ程度の誤差があっても構わない。 The process illustrated here is an example. For example, when the HMD is equipped with a gyro sensor, an acceleration sensor, or the like, information such as the distance traveled from the floor surface by the gyro sensor or the acceleration sensor may be used. It is good (the user may be guided to place the HMD on the floor surface and then wear it on the head, and the moving distance of the HMD in the vertical (gravitational acceleration) direction during that time may be measured). Further, a barometric pressure sensor may be used. Further, the accuracy of the height information here may have an error of about several centimeters.
さらに本実施の形態のある例では、このＨＭＤに角度センサを取り付けるか、またはデバイス１０がＨＭＤの外部に配した撮像部Ｃにて撮像したＨＭＤの画像により、ＨＭＤの傾きを検出することで、デバイス１０がユーザの頭部の仰角（ないし俯角）方向の角度の情報を取得して、ユーザの姿勢に係る情報として、ユーザの身長に係る情報とともに出力してもよい。
Further, in an example of the present embodiment, an angle sensor is attached to the HMD, or the tilt of the HMD is detected by the image of the HMD captured by the imaging unit C arranged outside the HMD by the
［制御部の動作］
次に、情報処理装置２０の制御部２１の動作について説明する。本実施の形態では、この制御部２１は、記憶部２２に格納されたプログラムを実行することで、図２に例示するように、機能的に、受入部３１と、推定部３２と、アプリケーション実行部３３とを含む構成を実現する。[Operation of control unit]
Next, the operation of the
ここで受入部３１は、デバイス１０が出力する、ユーザの身長に係る情報等の情報を受け入れる。推定部３２は、受入部３１が受け入れた情報に基づいて、デバイス１０に係る装置（ここではＨＭＤ）を装着するユーザの身長に関する身長特徴情報を推定する。
Here, the receiving
具体的に、この推定部３２は、身長特徴情報として、デバイス１０が出力する、ユーザの頭部と床面との距離の情報そのものを出力してもよい。また、この推定部３２は、デバイス１０が出力する情報が表すユーザの頭部と床面との距離の値に、所定の値を加算するなどして、身長特徴情報としてもよい。これは、デバイス１０が出力する情報が表すユーザの頭部と床面との距離が、実際にはＨＭＤと床面との距離であり、ユーザの頭頂がＨＭＤの取り付け位置よりも上方にある場合を考慮したものである。
Specifically, the
さらに推定部３２は、受入部３１がデバイス１０からユーザの身長に係る情報とともに、ユーザの姿勢に関する情報を受け入れている場合には、次のようにユーザの身長特徴情報を推定してもよい。
Further, when the receiving
すなわち、推定部３２は、ユーザの姿勢に関する情報により、ユーザの頭部の仰角が所定の角度（例えば６０度）を超えているか、俯角が所定の角度（例えば６０度）を超えていると判断される場合であって、ユーザの身長に係る情報で表されるユーザの頭部と床面との距離が予め定めたしきい値（例えば６０ｃｍ）を下回る場合に、ユーザが臥位（寝転んだ姿勢）にあると判断する。
That is, the
この場合（ユーザが臥位にあると判断した場合）、推定部３２は、ユーザの身長が不明であるので、予め設定された値（例えばユーザがデフォルトとして設定した身長の値、あるいは、一般的な成人の平均身長として公表されている値）を、ユーザの身長特徴情報として出力する。
In this case (when the user determines that the user is in the recumbent position), the
また推定部３２は、ユーザの姿勢に関する情報により、ユーザの頭部の仰角（及び俯角）が所定の角度（例えば６０度）を下回ると判断され、かつ、ユーザの身長に係る情報が、予め定めたしきい値（例えば１２０ｃｍなど、一般的な成人の平均身長として公表されている値より有意に低いと判断される値とする）を下回る場合、ユーザが座位（座っている姿勢）にあると判断する。
Further, the
この場合（ユーザが座位にあると判断した場合）、推定部３２は、デバイス１０が出力する、ユーザの身長に係る情報が表す値が、実質的にはユーザの座高に相当する値であるとして、予め定めた値（比例値）を、ユーザの身長に係る情報が表す値に乗じて、その結果を、推定された身長特徴情報として出力してもよい。ここで比例値は、一般的な成人の座高に対する身長の比（の平均値）であるものとする。
In this case (when it is determined that the user is in the sitting position), the
さらに推定部３２は、ユーザの姿勢に関する情報により、ユーザの頭部の仰角（及び俯角）が所定の角度（例えば６０度）を下回ると判断され、かつ、ユーザの身長に係る情報が、予め定めたしきい値（例えば１２０ｃｍなど、一般的な成人の平均身長として公表されている値より有意に低いと判断される値とする）を上回る場合、ユーザが立位（立っている姿勢）にあると判断する。
Further, the
この場合（ユーザが立位にあると判断した場合）、推定部３２は、デバイス１０が出力する、ユーザの身長に係る情報が表す値をそのまま、推定された身長特徴情報として出力する。
In this case (when it is determined that the user is in the standing position), the
このように推定部３２は、ユーザが立位、座位、臥位のいずれの姿勢となっているかを推定し、当該推定の結果に応じて、デバイス１０が出力するユーザの身長に係る情報が表す値に基づく身長特徴情報の推定方法を異ならせてもよい。
In this way, the
また推定部３２は、過去の身長特徴情報の推定結果を記録しておいてもよい。この場合、過去に推定された身長特徴情報が表す値のうち、最大の値をユーザの（立位における）身長の情報としてもよい。この場合、推定部３２がユーザが座位にあるか立位にあるかを判断するしきい値は、この記録された身長の情報に応じて定められてもよい。例えばデバイス１０が出力するユーザの身長に係る情報が表す値が、上記記録された最大の身長の情報から１５ｃｍ以上低い場合に、推定部３２は、ユーザが座位にあるものと判断してもよい。
Further, the
アプリケーション実行部３３は、ユーザの指示に応じて、記憶部２２に格納されているアプリケーションプログラムを実行する。このアプリケーションプログラムは、例えば情報処理装置２０が家庭用ゲーム機等である場合は、ゲームプログラム等である。また、この情報処理装置２０が一般的なパーソナルコンピュータ等である場合は、建物の内部の状況をシミュレートする仮想現実アプリケーション等であってもよい。
The
このアプリケーション実行部３３は、推定部３２により推定された身長特徴情報を用いて、実行の対象となるアプリケーションの処理を実行する。
The
具体的に、このアプリケーション実行部３３は、三次元の仮想空間内の画像を表示するアプリケーションを実行する場合、実行開始時（初期化処理時）に、推定部３２が推定した身長特徴情報を用いて、仮想空間におけるユーザの仮想的な視点の初期位置（画像のレンダリングを行う際の、仮想的なカメラの初期位置）を設定する。
Specifically, when executing an application that displays an image in a three-dimensional virtual space, the
例えば、実空間での長さＬに対して仮想的な空間内での長さＬ′を、比率αを用いて、Ｌ′＝α・Ｌとする場合、アプリケーション実行部３３は、推定部３２により推定された身長特徴情報が表すユーザの身長Ｈにこの比率αを乗じた値に相当する高さＨ′＝α・Ｈの位置に仮想的なカメラを設定する。
For example, when the length L'in the virtual space is set to L'= α · L by using the ratio α with respect to the length L in the real space, the
またアプリケーション実行部３３は、その処理中は、ユーザの装着するＨＭＤの位置の移動量や角度の変化量に基づいて、視点の位置（仮想的なカメラの位置）や視野（仮想的なカメラの撮像方向、撮像範囲）を変更する。またユーザが所定の操作（視点をリセットする操作）を行ったときには、少なくとも視点の高さ（仮想的なカメラの、仮想的な床面からの高さ）を推定部３２により推定された身長特徴情報を用いて（上述と同様に高さＨ′に）設定し、またその視野を予め定められた方向、画角に設定する。
Further, during the processing, the
［動作］
本実施の形態の情報処理システムは以上の構成を備えており、次のように動作する。[motion]
The information processing system of the present embodiment has the above configuration and operates as follows.
ユーザが、デバイス１０に含まれるヘッドマウントディスプレイ（ＨＭＤ）を頭部に装着し、アプリケーションプログラムを起動すると、デバイス１０が、ユーザの足下の床面と、床面からユーザの頭部までの距離を推定して、ユーザの身長に係る情報として出力する。
When the user wears the head-mounted display (HMD) included in the
情報処理装置２０は、図３に示す処理を行い、デバイス１０が出力するユーザの身長に係る情報を受け入れて（Ｓ１）、ＨＭＤを装着するユーザの身長に関する身長特徴情報を推定する（Ｓ２）。一例として情報処理装置２０は、過去の身長特徴情報の推定結果を記録しており、過去に推定された身長特徴情報が表す値のうち、最大の値をユーザの（立位における）身長の情報とする。
The
そして情報処理装置２０は、記録している身長の値のうち最大のものよりも、デバイス１０が出力するユーザの身長に係る情報が表す値が１５ｃｍ以上低い場合は、ユーザが座位にあると判断し、そうでない場合は立位であると判断する。
Then, the
情報処理装置２０は、ユーザが立位にあると判断したときには、デバイス１０が出力するユーザの身長に係る情報が表す値をそのまま、身長特徴情報として出力する。また、情報処理装置２０は、ユーザが座位にあると判断したときには、予め定めた比の値βを用いて、デバイス１０が出力するユーザの身長に係る情報が表す値にβを乗じ、当該乗じた結果を、身長特徴情報として出力する。
When the
また情報処理装置２０は、ユーザの指示に応じて、記憶部２２に格納されているアプリケーションプログラムを実行する（Ｓ３）。以下の例では、このアプリケーションプログラムは、キャラクタを操作して仮想的な空間中を移動するゲームプログラムであるものとする。
Further, the
情報処理装置２０は、このゲームプログラムの実行開始時（初期化処理時）に、推定された身長特徴情報を用いて、仮想空間におけるユーザの仮想的な視点の初期位置（画像のレンダリングを行う際の、仮想的なカメラの初期位置）を設定する（Ｓ４）。
The
その後情報処理装置２０は、ユーザの装着するＨＭＤの位置の移動量や角度の変化量を検出し（この検出の処理は広く知られた方法を用いることができるので、ここでの詳しい説明は省略する）、当該検出した情報に基づいて、視点の位置（仮想的なカメラの位置）や視野（仮想的なカメラの撮像方向、撮像範囲）を変更する（Ｓ５）。
After that, the
これによりユーザは、自己の実際の身長からの視点に相当する視点から仮想的な空間の画像を見ることとなり、違和感が軽減される。 As a result, the user sees the image of the virtual space from a viewpoint corresponding to the viewpoint from the actual height of the user, and the discomfort is reduced.
［その他の例］
また、ここでは仮想空間での視点の初期位置が、推定された身長特徴情報に基づいて決定されるものとしたが、本実施の形態はこれだけに限られない。[Other examples]
Further, here, the initial position of the viewpoint in the virtual space is determined based on the estimated height characteristic information, but the present embodiment is not limited to this.
例えば、情報処理装置２０は、推定された身長特徴情報を用いたアプリケーションプログラムの処理の例として、次のような処理を行ってもよい。すなわち、情報処理装置２０は、アプリケーションプログラムが用いる処理のパラメータを身長特徴情報に応じて異ならせてもよい。また、複数の種類の処理が選択できる場合に、ユーザに提示する選択肢（選択の候補）を、身長特徴情報に応じて予め絞り込んでからユーザに提示してもよい。
For example, the
例えばアプリケーションプログラムがゲームプログラムである場合、ゲームの難易度（当たり判定の確率の高さや、敵からの攻撃の対象として選択される確率の高さ）が、推定された身長特徴情報に基づいて定められてもよい。例えば、実際の身長が高いユーザほど、難易度が高い状態に設定されてもよい。 For example, when the application program is a game program, the difficulty level of the game (high probability of hit judgment and high probability of being selected as a target of attack from an enemy) is determined based on estimated height characteristic information. May be done. For example, the higher the actual height of the user, the higher the difficulty level may be set.
また、ゲームプログラムが、予め定められた複数のシナリオのうち、いずれかのシナリオを選択して用いてゲームを進行させるものである場合、推定された身長特徴情報に基づいて選択するシナリオを決定してもよい。 In addition, when the game program advances the game by selecting and using one of a plurality of predetermined scenarios, the scenario to be selected is determined based on the estimated height characteristic information. You may.
また別の例では、複数のシナリオからユーザが任意にシナリオを選択する場合に、当該選択の対象として提示するシナリオの種類を、推定された身長特徴情報に基づいて決定してもよい。例えば身長が１５０ｃｍであるユーザＡに対しては、用意されたシナリオａ，ｂ，ｃ，ｄ，ｅのうち、シナリオａ，ｂ，ｃを提示して、いずれかを選択するように求め、また身長が１７０ｃｍであるユーザＢに対しては、用意されたシナリオａ，ｂ，ｃ，ｄ，ｅのうち、シナリオｂ，ｃ，ｄ，ｅを提示して、いずれかを選択するように求めるようにしてもよい。この処理は、例えばシナリオごとに、選択の候補として提示する条件として、身長特徴情報が表す値の範囲に関する情報を関連付けておけばよい。例えば、
シナリオａ：身長が１６０ｃｍ未満
シナリオｂ：身長が１７０ｃｍ以下
シナリオｃ：身長が１４０ｃｍから１８０ｃｍの間
シナリオｄ：身長が１６０ｃｍから１８０ｃｍの間
シナリオｅ：身長が１６０ｃｍ以上
と設定されていれば、上記の例のような提示が行われることとなる。In another example, when the user arbitrarily selects a scenario from a plurality of scenarios, the type of scenario presented as the target of the selection may be determined based on the estimated height characteristic information. For example, user A, who is 150 cm tall, is asked to present scenarios a, b, and c among the prepared scenarios a, b, c, d, and e, and to select one of them. User B, who is 170 cm tall, is asked to present scenarios b, c, d, and e among the prepared scenarios a, b, c, d, and e, and to select one of them. It may be. In this process, for example, for each scenario, information regarding the range of values represented by the height feature information may be associated as a condition to be presented as a selection candidate. For example
Scenario a: Height less than 160 cm Scenario b: Height 170 cm or less Scenario c: Height between 140 cm and 180 cm Scenario d: Height between 160 cm and 180 cm Scenario e: If the height is set to 160 cm or more, the above A presentation like the example will be made.
このようにすると、ＨＭＤを装着して身長に係る情報を測定した時点での、測定の結果に応じて、ゲームのストーリーや、選択可能なストーリーが変更されることとなり、ゲームの内容が、ユーザの身長によって変更されることとなる。 In this way, the story of the game and the selectable story will be changed according to the measurement result when the information related to the height is measured by wearing the HMD, and the content of the game will be changed by the user. It will be changed depending on the height of.
またユーザに対応する仮想的なキャラクタを仮想的な空間に表示するアプリケーションプログラムを実行する場合、当該仮想的なキャラクタの身長などの体形を、推定された身長特徴情報を用いて決定してもよい。またユーザが仮想的なキャラクタを選択する場合、当該選択の候補を推定された身長特徴情報を用いて絞り込んでからユーザに提示してもよい。 Further, when executing an application program that displays a virtual character corresponding to a user in a virtual space, the body shape such as the height of the virtual character may be determined using the estimated height characteristic information. .. When the user selects a virtual character, the selection candidates may be narrowed down using the estimated height characteristic information and then presented to the user.
一例として、販売する住宅の内部を仮想的な空間で再現し、ユーザにその内部を仮想的に移動できるようにするアプリケーションでは、ユーザの身長に対応した身長の仮想的なキャラクタを表示することで、当該住宅におけるユーザ自身の利便性を検討できる。 As an example, in an application that reproduces the interior of a house for sale in a virtual space and allows the user to virtually move inside, by displaying a virtual character of height corresponding to the user's height. , The convenience of the user himself / herself in the house can be examined.
また別の例として、アプリケーションプログラムの処理において、何らかのリコメンデーション（推奨・推薦）が行われる場合、当該リコメンデーションの処理において情報処理装置２０は、推定された身長特徴情報を用いて推奨ないし推薦する対象の選択肢等を設定してもよい。
As another example, when some kind of recommendation (recommendation / recommendation) is made in the processing of the application program, the
例えば、複数のゲームアプリケーションのいずれかを選択させるアプリケーションプログラム（ゲームアプリケーションの販売サイトを表示するアプリケーションプログラム等）では、情報処理装置２０は、推定された身長特徴情報を用いて、推薦するゲームアプリケーションを選択してもよい。
For example, in an application program for selecting one of a plurality of game applications (such as an application program for displaying a game application sales site), the
また、ゲームアプリケーションで仮想的なキャラクタの衣装や武器等アイテムを変更する場合や、衣料品・服飾品等を販売するサイトにアクセスするアプリケーションプログラムにおいては、推定された身長特徴情報を用いて、推薦する衣装等のアイテムや、推薦する衣料品等を選択してユーザに提示してもよい。 In addition, when changing items such as virtual character costumes and weapons in a game application, or in an application program that accesses a site that sells clothing, clothing, etc., it is recommended using estimated height characteristic information. Items such as costumes to be worn, recommended clothing, and the like may be selected and presented to the user.
さらに、例えばゲームのストーリーのように、断続的に処理を行う場合、処理の経過の情報をセーブするにあたり、当該ストーリーに係る処理を開始した時点で推定されていた身長特徴情報を、当該セーブする情報に含めておく。 Further, in the case of intermittent processing such as a story of a game, when saving the information on the progress of the processing, the height characteristic information estimated at the time when the processing related to the story is started is saved. Include it in the information.
この場合、セーブされた情報（セーブ情報）を読み込んで処理を継続するときには、情報処理装置２０は、当該処理の継続の時点で推定された身長特徴情報に代えて、読み込んだセーブ情報に含まれている、身長特徴情報を用いて、処理を継続する。これにより、断続的に行われる処理において、一貫した処理が可能となる。
In this case, when the saved information (save information) is read and the process is continued, the
例えば、仮想空間を冒険するキャラクタを操作するユーザが、シナリオを選択してストーリーを始めた場合、情報処理装置２０は、その時点で推定されたユーザの身長特徴情報を用いて、仮想的なキャラクタの身長等を決定し、その後の処理において例えば比較的高所に配されたアイテムを発見する確率を上昇させ、比較的地面に近い位置に配されたアイテムの発見確率を低下させるなどの処理を行う。
For example, when a user who operates a character adventuring in a virtual space selects a scenario and starts a story, the
その後、ユーザが一時的にゲームを中断するため、情報のセーブの操作を行うと、情報処理装置２０は、それまでのゲームの過程に応じて、ストーリーの続きから処理を実行するために必要となるパラメータ情報とともに、ストーリーの開始時に推定されたユーザの身長特徴情報を、セーブ情報として記憶部２２に格納する。
After that, since the user temporarily interrupts the game, when the information saving operation is performed, the
ユーザが処理の継続を指示すると、情報処理装置２０は、記憶部２２に格納したセーブ情報を読み出して、当該読み出したセーブ情報に記録されていた、ストーリーの開始時に推定されたユーザの身長特徴情報を用いて、ストーリーの続きからの処理を実行する。
When the user instructs to continue the process, the
このようにすることで、ユーザは、例えばストーリーの開始時には立位でストーリーを開始したが、次のタイミングでは座位でストーリーを再開した、というときでも、仮想的なキャラクタの身長などが変化してしまうことがなく、違和感が軽減される。 By doing this, the user starts the story in the standing position at the beginning of the story, but resumes the story in the sitting position at the next timing, but the height of the virtual character changes. There is no discomfort and the feeling of strangeness is reduced.
さらに別の例では、情報処理装置２０は、アプリケーションプログラムの処理として乱数の発生が必要な場合に、当該乱数の種（シード）の情報として、当該処理の直近に推定されたユーザの身長特徴情報を用いてもよい。
In yet another example, when the
［単位］
また、ここまでの例では、ユーザの身長特徴情報は、推定された値をそのまま用いることとしていたが本実施の形態はこの例に限られない。例えば情報処理装置２０は、ユーザの身長特徴情報を１０ｃｍごとの範囲情報として出力してもよい。この例では、情報処理装置２０は、ユーザの身長特徴情報を、１０ｃｍごとに予め定められた範囲情報のいずれに当たるかを表す情報として出力する。[unit]
Further, in the examples so far, the estimated value is used as it is for the height characteristic information of the user, but the present embodiment is not limited to this example. For example, the
具体的に、推定した値が１６２ｃｍである場合、情報処理装置２０は、予め定めた範囲である「１６０ｃｍ以上１７０ｃｍ未満」の範囲であることを特定する範囲情報を、ユーザの身長特徴情報として出力することとしてもよい。
Specifically, when the estimated value is 162 cm, the
さらに、この単位は、アプリケーションプログラムの種類に応じて異ならせてもよい。例えばゲームアプリケーションでは１０ｃｍ単位とし、フィットネス用のアプリケーションプログラム等では５ｃｍ単位とするなど、個別に設定するようにしてもよい。 Further, this unit may be different depending on the type of application program. For example, it may be set individually in units of 10 cm for game applications and in units of 5 cm for fitness application programs and the like.
またアプリケーションプログラムの処理の段階に応じて異ならせてもよい。例えばアプリケーションプログラムの初期化の処理では、１０ｃｍ単位とし、その後の処理では５ｃｍ単位とするように設定してもよい。 Further, it may be different depending on the processing stage of the application program. For example, in the initialization process of the application program, the unit may be set to 10 cm, and in the subsequent process, the unit may be set to 5 cm.
［表現設定］
さらに情報処理装置２０は、アプリケーションプログラムにおいて、表示する情報の表現の内容が設定できる場合は、推定されたユーザの身長特徴情報に応じて、表現の内容の設定を変更してもよい。[Expression settings]
Further, if the
具体的に、暴力的な表現や、グロテスクな表現（流血表現等）が含まれるゲームについては、暴力的な表現を抑制したり、グロテスクな表現を行わないモード（第１のモード）と、暴力的な表現を抑制せず、グロテスクな表現を行うモード（第２のモード）とを設定できる場合がある。 Specifically, for games that include violent expressions or grotesque expressions (bloody expressions, etc.), there are modes that suppress violent expressions and do not perform grotesque expressions (first mode), and violence. In some cases, it is possible to set a mode (second mode) in which grotesque expression is performed without suppressing the expression.
この場合に情報処理装置２０は、例えばユーザの身長特徴情報が表す値に応じて、当該値が予め定めたしきい値を超える場合にはデフォルトの表示設定を、第２のモードとし、ユーザの身長特徴情報が表す値が当該予め定めたしきい値を下回る場合にはデフォルトの表示設定を、第１のモードとする。
In this case, the
［認証に用いる例］
さらに本実施の形態のある例では、情報処理装置２０は、ユーザ名とパスワード等でユーザを認証することとしてもよい。この場合、情報処理装置２０は、認証したユーザごとに、当該ユーザについて推定された身長特徴情報を記録してもよい。[Example used for authentication]
Further, in an example of the present embodiment, the
例えば情報処理装置２０は、認証したユーザについて身長特徴情報を推定したときに、当該推定した身長特徴情報の最大値を、認証したユーザを特定する情報（ユーザ名等）に関連付けて記憶しておく。
For example, when the height characteristic information of the authenticated user is estimated, the
そして、その後、ユーザを認証した後に、「ＨＭＤを装着後、起立してください」などの案内を表示し、ユーザが当該案内に従ってＨＭＤを装着して起立したときに、その時点でＨＭＤを含むデバイス１０が出力する、ユーザの身長に係る情報に基づいて身長特徴情報を推定し、当該推定の結果と、認証したユーザを特定する情報に関連付けて記録されている、過去の推定の結果の情報とを比較し、これらの情報がそれぞれ表す値の差や比が予め定めた範囲にある場合に、認証が成功したものとして処理を継続し、当該範囲にない場合には、認証に疑義があるものとして、その旨の情報を提示して認証前の処理に戻る、あるいは一定のアプリケーションプログラムの起動を許可しない、等の処理を行うこととしてもよい。 Then, after authenticating the user, a guide such as "Please stand up after wearing the HMD" is displayed, and when the user wears the HMD and stands up according to the guide, the device including the HMD at that time. The height characteristic information is estimated based on the information related to the height of the user output by 10, and the result of the estimation and the information of the past estimation result recorded in association with the information for identifying the authenticated user are used. If the difference or ratio of the values represented by each of these information is within a predetermined range, the processing is continued as if the authentication was successful, and if it is not within that range, the authentication is doubtful. As a result, it is possible to present information to that effect and return to the pre-authentication process, or perform a process such as not allowing the start of a certain application program.
［頭部の周長など］
またＨＭＤを頭部に装着する際に、頭部にベルト等を締めて固定する場合、当該締結されたベルトが固定された範囲（頭部に巻き付いている範囲）の長さを測定することで、ユーザの頭部の周の長さが推定できる。そこで、デバイス１０は、ユーザの身長に係る情報に代えて、あるいは当該情報とともに、この、ユーザの頭部の周の長さに係る情報を出力してもよい。[Head circumference, etc.]
In addition, when the HMD is attached to the head, when the belt or the like is fastened to the head to fix it, the length of the fixed range (the range wrapped around the head) of the fastened belt is measured. , The circumference of the user's head can be estimated. Therefore, the
この場合、情報処理装置２０は、身長に係る情報に代えて、あるいは身長に係る情報とともに頭部の周長の情報を取得し、ユーザの身長特徴情報に代えて、あるいは身長特徴情報とともに、頭部の周長の特徴情報を推定して、上述と同様のアプリケーションプログラムの処理に利用してもよい。
In this case, the
同様に、デバイス１０においてＨＭＤを装着したユーザの左目と右目との間隔が測定できる場合は、当該間隔の情報に基づく身体的特徴量を情報処理装置２０が生成して、上述と同様のアプリケーションプログラムの処理に用いてもよい。
Similarly, when the distance between the left eye and the right eye of the user wearing the HMD can be measured by the
［一部情報の利用制限］
また、デバイス１０の設定により、ユーザの身長の情報やユーザの頭部の角度の情報の出力をするか否かを定めてもよい。例えばユーザの身長に係る情報を測定ないし出力しないと設定したときには、情報処理装置２０は、当該情報を受け入れることがない。そこで、この場合の情報処理装置２０は、予めデフォルトの値として定められた身長特徴情報等を利用することとする。[Restrictions on the use of some information]
Further, the setting of the
１０ デバイス、２０ 情報処理装置、２１ 制御部、２２ 記憶部、２３ 操作部、２４ 表示制御部、３０ 表示デバイス、３１ 受入部、３２ 推定部、３３ アプリケーション実行部、４０ コントローラデバイス。
10 devices, 20 information processing devices, 21 control units, 22 storage units, 23 operation units, 24 display control units, 30 display devices, 31 receiving units, 32 estimation units, 33 application execution units, 40 controller devices.
Claims (7)
情報処理装置とを含む情報処理システムであって、
前記情報処理装置は、
前記デバイスから取得した情報に基づいて、当該デバイスに係る装置を装着するユーザの身長に関する身長特徴情報を推定する推定手段と、
前記推定された身長特徴情報を用いて、実行の対象となるアプリケーションの所定の処理を実行する処理手段と、
を含み、
前記推定手段は、前記デバイスから取得した情報に基づいて、当該デバイスに係る装置を装着するユーザが立位、座位、臥位のいずれの姿勢となっているかを推定し、当該推定の結果に応じて定められた方法により、当該デバイスに係る装置を装着するユーザの身長に関する身長特徴情報を推定し、
前記処理手段は少なくとも、前記身長特徴情報を用いて、前記アプリケーションの初期化時の処理を実行する情報処理システム。 Devices that output information related to the height of the user, including devices worn by the user,
An information processing system that includes an information processing device
The information processing device
Based on the information acquired from the device, an estimation means for estimating height characteristic information regarding the height of a user who wears the device related to the device, and an estimation means.
A processing means for executing a predetermined process of the application to be executed by using the estimated height characteristic information, and
Including
Based on the information acquired from the device, the estimation means estimates whether the user wearing the device related to the device is in a standing position, a sitting position, or a lying position, and responds to the estimation result. The height characteristic information regarding the height of the user who wears the device related to the device is estimated by the method specified in the above.
The processing means is an information processing system that executes processing at the time of initialization of the application by using at least the height feature information.
前記推定された身長特徴情報を用いて、実行の対象となるアプリケーションの所定の処理を実行する処理手段と、
を含み、
前記推定手段は、前記デバイスから取得した情報に基づいて、当該デバイスに係る装置を装着するユーザが立位、座位、臥位のいずれの姿勢となっているかを推定し、当該推定の結果に応じて定められた方法により、当該デバイスに係る装置を装着するユーザの身長に関する身長特徴情報を推定し、
前記処理手段は少なくとも、前記身長特徴情報を用いて、前記アプリケーションの初期化時の処理を実行する情報処理装置。 It is connected to a device that outputs information related to the height of the user, including a device worn by the user, and based on the information acquired from the device, height characteristic information regarding the height of the user wearing the device related to the device is provided. Estimating means to estimate and
A processing means for executing a predetermined process of the application to be executed by using the estimated height characteristic information, and
Including
Based on the information acquired from the device, the estimation means estimates whether the user wearing the device related to the device is in a standing position, a sitting position, or a lying position, and responds to the estimation result. The height characteristic information regarding the height of the user who wears the device related to the device is estimated by the method specified in the above.
The processing means is an information processing apparatus that executes processing at the time of initialization of the application by using at least the height feature information.
さらに、過去に推定した身長特徴情報を記憶する手段をさらに含み、 In addition, it further includes means for storing previously estimated height feature information.
前記推定手段は、過去に推定された身長特徴情報のうち最大の値を、ユーザの立位における身長の情報として、身長特徴情報の推定を行う情報処理装置。 The estimation means is an information processing device that estimates the height characteristic information by using the maximum value of the height characteristic information estimated in the past as the height information in the standing position of the user.
前記処理手段は、複数の処理の候補をユーザに提示して選択させる場合に、ユーザに提示する処理の候補を、前記身長特徴情報を用いて絞り込んでから提示する情報処理装置。 In the information processing apparatus according to claim 2 or 3 ,
The processing means is an information processing device that, when a user presents and selects a plurality of processing candidates, narrows down the processing candidates to be presented to the user using the height feature information and then presents the processing candidates.
前記処理手段は、表示する情報の表現の内容を、前記身長特徴情報に応じて異ならせる情報処理装置。 In the information processing device according to any one of claims 2 to 4 .
The processing means is an information processing device that makes the content of the expression of the information to be displayed different according to the height characteristic information.
推定手段が、当該デバイスから取得した情報に基づいて、当該デバイスに係る装置を装着するユーザの身長に関する身長特徴情報を推定する工程と、
処理手段が、前記推定された身長特徴情報を用いて、実行の対象となるアプリケーションの所定の処理を実行する工程と、
を含み、
前記推定手段は、前記デバイスから取得した情報に基づいて、当該デバイスに係る装置を装着するユーザが立位、座位、臥位のいずれの姿勢となっているかを推定し、当該推定の結果に応じて定められた方法により、当該デバイスに係る装置を装着するユーザの身長に関する身長特徴情報を推定し、
前記処理手段は少なくとも、前記身長特徴情報を用いて、前記アプリケーションの初期化時の処理を実行する情報処理方法。 Using an information processing device connected to a device that outputs information related to the height of the user, including a device worn by the user.
A process in which the estimation means estimates height characteristic information regarding the height of the user who wears the device related to the device based on the information acquired from the device.
A step in which the processing means executes a predetermined process of the application to be executed by using the estimated height characteristic information.
Including
Based on the information acquired from the device, the estimation means estimates whether the user wearing the device related to the device is in a standing position, a sitting position, or a lying position, and responds to the estimation result. The height characteristic information regarding the height of the user who wears the device related to the device is estimated by the method specified in the above.
The processing means is an information processing method that executes processing at the time of initialization of the application by using at least the height feature information.
当該デバイスから取得した情報に基づいて、当該デバイスに係る装置を装着するユーザの身長に関する身長特徴情報を推定する工程と、
前記推定された身長特徴情報を用いて、実行の対象となるアプリケーションの所定の処理を実行する工程と、を実行させ、
前記身長特徴情報を推定する工程では、前記デバイスから取得した情報に基づいて、当該デバイスに係る装置を装着するユーザが立位、座位、臥位のいずれの姿勢となっているかを推定し、当該推定の結果に応じて定められた方法により、当該デバイスに係る装置を装着するユーザの身長に関する身長特徴情報を推定し、
前記アプリケーションの所定の処理を実行する工程では少なくとも、前記身長特徴情報を用いて、前記アプリケーションの初期化時の処理を実行させるためのプログラム。 For information processing devices connected to devices that output information related to the user's height, including devices worn by the user.
Based on the information acquired from the device, the process of estimating the height characteristic information regarding the height of the user who wears the device related to the device, and
Using the estimated height characteristic information, a step of executing a predetermined process of the application to be executed is executed.
In the step of estimating the height characteristic information, based on the information acquired from the device, it is estimated whether the user wearing the device related to the device is in a standing position, a sitting position, or a lying position. The height characteristic information regarding the height of the user who wears the device related to the device is estimated by a method determined according to the estimation result.
A program for executing a process at the time of initialization of the application by using at least the height feature information in the step of executing a predetermined process of the application.
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| PCT/JP2018/009291 WO2019171592A1 (en) | 2018-03-09 | 2018-03-09 | Information processing system, information processing device, information processing method, and program |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPWO2019171592A1 JPWO2019171592A1 (en) | 2020-12-03 |
| JP6831492B2 true JP6831492B2 (en) | 2021-02-17 |
Family
ID=67847010
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2020504635A Active JP6831492B2 (en) | 2018-03-09 | 2018-03-09 | Information processing systems, information processing devices, information processing methods, and programs |
Country Status (2)
| Country | Link |
|---|---|
| JP (1) | JP6831492B2 (en) |
| WO (1) | WO2019171592A1 (en) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US11315287B2 (en) * | 2019-06-27 | 2022-04-26 | Apple Inc. | Generating pose information for a person in a physical environment |
| JP2024050230A (en) * | 2022-09-29 | 2024-04-10 | 株式会社日立システムズ | Content correction device and content correction method |
Family Cites Families (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP3374484B2 (en) * | 1993-12-13 | 2003-02-04 | 株式会社セガ | Video game equipment |
| JP2002355441A (en) * | 2002-03-06 | 2002-12-10 | Konami Co Ltd | Game device and game program |
| JP2005115595A (en) * | 2003-10-07 | 2005-04-28 | Canon Inc | Mixed reality presentation apparatus |
| JP6045338B2 (en) * | 2012-12-27 | 2016-12-14 | 川崎重工業株式会社 | Posture sensation system and posture evaluation system |
| JP2016005007A (en) * | 2014-06-13 | 2016-01-12 | パナソニックＩｐマネジメント株式会社 | Head mounted display and image processing device |
-
2018
- 2018-03-09 WO PCT/JP2018/009291 patent/WO2019171592A1/en active Application Filing
- 2018-03-09 JP JP2020504635A patent/JP6831492B2/en active Active
Also Published As
| Publication number | Publication date |
|---|---|
| JPWO2019171592A1 (en) | 2020-12-03 |
| WO2019171592A1 (en) | 2019-09-12 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US9289680B2 (en) | Game controller, storage medium storing game program, and game apparatus | |
| US7894638B2 (en) | Training mimetic muscles by evaluating a captured user's expression against a given expression | |
| US20110230266A1 (en) | Game device, control method for a game device, and non-transitory information storage medium | |
| US10307656B2 (en) | Swing diagnosis apparatus, swing diagnosis system, swing diagnosis method, and recording medium | |
| TWI638280B (en) | Method, electronic apparatus and recording medium for automatically configuring sensors | |
| US10247626B2 (en) | Motion recognition method and apparatus | |
| US9061212B2 (en) | Game device, game control method and game control program for controlling a golf game | |
| KR101694772B1 (en) | system and method for analysis of golf swing | |
| JP6831492B2 (en) | Information processing systems, information processing devices, information processing methods, and programs | |
| US20100248824A1 (en) | Computer readable storage medium having game program stored thereon and game apparatus | |
| CN110841275A (en) | Image display system, image display method, and computer-readable medium | |
| US11173388B2 (en) | Information processing system, storage medium storing information processing program, information processing apparatus, and information processing method | |
| US11654352B2 (en) | Information processing system, storage medium storing information processing program, information processing apparatus, and information processing method | |
| WO2018190044A1 (en) | Swing analysis device, swing analysis method, and swing analysis system | |
| US20210373652A1 (en) | System and method for a virtual reality motion controller | |
| US8979653B2 (en) | Computer readable storage medium having information processing program stored thereon and information processing apparatus | |
| US10559064B2 (en) | Storage medium, information-processing device, information-processing system, and information-processing method | |
| JP6651091B2 (en) | Game system and computer program used therefor | |
| US10282770B2 (en) | Calculating a degree of fit of a golf product based on captured swing data | |
| US20240115949A1 (en) | Computer-readable non-transitory storage medium having information processing program stored therein, information processing system, and information processing method | |
| KR102580092B1 (en) | System, device, method and program for coaching basketball | |
| KR102461485B1 (en) | System for providind mataverse-based 4d immersive service | |
| KR102432931B1 (en) | Method for providing vr contents for health and apparatus using the same | |
| US20230310988A1 (en) | Computer-readable non-transitory storage medium having game program stored therein, game system, game apparatus, and game processing method | |
| JP2020096767A (en) | Golf ball recommendation apparatus, golf ball recommendation method, and golf ball recommendation system |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200508 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20201013 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201208 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210119 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210128 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6831492 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |