JP7053931B1 - 不具合原因を推定するための方法、プログラム、システム、及び装置 - Google Patents
不具合原因を推定するための方法、プログラム、システム、及び装置 Download PDFInfo
- Publication number
- JP7053931B1 JP7053931B1 JP2021132934A JP2021132934A JP7053931B1 JP 7053931 B1 JP7053931 B1 JP 7053931B1 JP 2021132934 A JP2021132934 A JP 2021132934A JP 2021132934 A JP2021132934 A JP 2021132934A JP 7053931 B1 JP7053931 B1 JP 7053931B1
- Authority
- JP
- Japan
- Prior art keywords
- log data
- game
- game state
- combination
- action
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 51
- 230000009471 action Effects 0.000 claims abstract description 114
- 230000007547 defect Effects 0.000 claims abstract description 60
- 230000002159 abnormal effect Effects 0.000 claims abstract description 39
- 230000005856 abnormality Effects 0.000 claims abstract description 31
- 238000003491 array Methods 0.000 claims abstract description 29
- 238000002372 labelling Methods 0.000 claims description 12
- 238000010586 diagram Methods 0.000 abstract description 6
- 230000006870 function Effects 0.000 description 43
- 239000013598 vector Substances 0.000 description 23
- 238000013075 data extraction Methods 0.000 description 14
- 239000000284 extract Substances 0.000 description 13
- 230000008569 process Effects 0.000 description 10
- 238000004891 communication Methods 0.000 description 8
- 230000000694 effects Effects 0.000 description 7
- 239000011159 matrix material Substances 0.000 description 7
- 238000012986 modification Methods 0.000 description 7
- 230000004048 modification Effects 0.000 description 7
- 230000006399 behavior Effects 0.000 description 5
- 238000000275 quality assurance Methods 0.000 description 5
- 230000008859 change Effects 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 230000010365 information processing Effects 0.000 description 4
- 238000004364 calculation method Methods 0.000 description 3
- 238000007418 data mining Methods 0.000 description 3
- 230000002547 anomalous effect Effects 0.000 description 2
- 238000013459 approach Methods 0.000 description 2
- 230000001364 causal effect Effects 0.000 description 2
- 230000002860 competitive effect Effects 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000018109 developmental process Effects 0.000 description 2
- 230000008034 disappearance Effects 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 230000001788 irregular Effects 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000005728 strengthening Methods 0.000 description 1
- 230000033772 system development Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/0703—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
- G06F11/079—Root cause analysis, i.e. error or fault diagnosis
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/40—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/45—Controlling the progress of the video game
- A63F13/49—Saving the game status; Pausing or ending the game
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/70—Game security or game management aspects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
- G06F11/3466—Performance evaluation by tracing or monitoring
- G06F11/3476—Data logging
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Quality & Reliability (AREA)
- Computer Hardware Design (AREA)
- Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- Business, Economics & Management (AREA)
- Computer Security & Cryptography (AREA)
- General Business, Economics & Management (AREA)
- Debugging And Monitoring (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
Description
ユーザにより選択されたアクションに応じて進行し、ゲーム状態が更新されるゲームにおいて、ゲームログデータから不具合原因を推定するための、コンピュータにより実行される方法であって、該ゲーム状態は複数のゲーム状態要素を含んで構成され、該ゲームログデータは複数のログデータ配列を含み、ログデータ配列の各々は正常又は異常を示すラベルが付与されるものであり、該方法は、
異常を示すラベルが付与されたログデータ配列である異常ログデータ配列のうちの一の異常ログデータ配列が含む不具合発生前のアクションと該アクションに関連するゲーム状態が含む所定のゲーム状態要素との組み合わせがゲームログデータに含まれる異常ログデータ配列において存在する度合と、該組み合わせがゲームログデータに含まれる正常を示すラベルが付与されたログデータ配列である正常ログデータ配列において存在する度合とに基づいて、該組み合わせが不具合を発生させる原因か否かを決定するステップ、を含む方法である。
前記決定するステップは、一の異常ログデータ配列が含む不具合発生前のアクションと該アクションに関連するゲーム状態が含む所定のゲーム状態要素との組み合わせがゲームログデータに含まれる異常ログデータにおいて存在する度合に基づく値の、該組み合わせがゲームログデータに含まれる正常ログデータ配列において存在する度合に基づく値に対する比率が所定値以上であるときに、該組み合わせが不具合を発生させる原因であると決定することを含む、〔1〕に記載の方法である。
ログデータ配列の各々に対して正常又は異常を示すラベルを付与するステップを含む、〔1〕又は〔2〕に記載の方法である。
前記方法は、
一の異常ログデータ配列が含む不具合発生前のアクションに関連するゲーム状態が含むゲーム状態要素から所定のゲーム状態要素を抽出するステップを含み、
前記決定するステップは、一の異常ログデータ配列が含む不具合発生前のアクションと前記抽出された所定のゲーム状態要素との組み合わせがゲームログデータに含まれる異常ログデータ配列において存在する度合と、該組み合わせがゲームログデータに含まれる正常ログデータ配列において存在する度合とに基づいて、該組み合わせが不具合を発生させる原因か否かを決定することを含む、〔1〕から〔3〕のいずれか1つに記載の方法である。
前記決定するステップは、一の異常ログデータ配列が含む不具合発生直前の1つのアクションと該アクションの直前のゲーム状態が含む所定のゲーム状態要素との組み合わせがゲームログデータに含まれる異常ログデータ配列において存在する度合と、該組み合わせがゲームログデータに含まれる正常ログデータ配列において存在する度合とに基づいて、該組み合わせが不具合を発生させる原因か否かを決定することを含む、〔1〕から〔4〕のいずれか1つに記載の方法である。
前記決定するステップは、一の異常ログデータ配列が含む不具合発生直前の2以上のアクションと該2以上のアクションの各々の直前のゲーム状態の各々が含む所定のゲーム状態要素との組み合わせがゲームログデータに含まれる異常ログデータ配列において存在する度合と、該組み合わせがゲームログデータに含まれる正常ログデータ配列において存在する度合とに基づいて、該組み合わせが不具合を発生させる原因か否かを決定することを含む、〔1〕から〔4〕のいずれか1つに記載の方法である。
ユーザにより選択されたアクションに応じて進行し、ゲーム状態が更新されるゲームにおいて、ゲームログデータから不具合原因を推定するための推定システムであって、該ゲーム状態は複数のゲーム状態要素を含んで構成され、該ゲームログデータは複数のログデータ配列を含むものであり、該推定システムは、
ログデータ配列の各々に対して正常又は異常を示すラベルを付与し、
異常を示すラベルが付与されたログデータ配列である異常ログデータ配列のうちの一の異常ログデータ配列が含む不具合発生前のアクションと該アクションに関連するゲーム状態が含む所定のゲーム状態要素との組み合わせがゲームログデータに含まれる異常ログデータ配列において存在する度合と、該組み合わせがゲームログデータに含まれる正常を示すラベルが付与されたログデータ配列である正常ログデータ配列において存在する度合とに基づいて、該組み合わせが不具合を発生させる原因か否かを決定する、推定システムである。
ユーザにより選択されたアクションに応じて進行し、ゲーム状態が更新されるゲームにおいて、ゲームログデータから不具合原因を推定するための推定装置であって、該ゲーム状態は複数のゲーム状態要素を含んで構成され、該ゲームログデータは複数のログデータ配列を含み、ログデータ配列の各々は正常又は異常を示すラベルが付与されており、
異常を示すラベルが付与されたログデータ配列である異常ログデータ配列のうちの一の異常ログデータ配列が含む不具合発生前のアクションと該アクションに関連するゲーム状態が含む所定のゲーム状態要素との組み合わせがゲームログデータに含まれる異常ログデータ配列において存在する度合と、該組み合わせがゲームログデータに含まれる正常を示すラベルが付与されたログデータ配列である正常ログデータ配列において存在する度合とに基づいて、該組み合わせが不具合を発生させる原因か否かを決定する、推定装置である。
・1つの対戦(カードバトル)が複数のターンを含む対戦ゲームである。
・カードデッキは、40枚のカード41から構成され、対戦開始時における各ユーザの手札42と山札44のカード41の合計は、各々40枚である。
・自ユーザ又は他ユーザは、各ターンにおいて、自身のカード41を選択するなどの操作を行うことにより、相手のカード41若しくはキャラクタ45を攻撃することができ、又は、所定の効果若しくはイベントを発生させることができる。
・カード41は、ユーザ1の手札42a、ユーザ2の手札42b、ユーザ1の山札44a、ユーザ2の山札44b、場43、墓場、消滅、拡張的な場所A、拡張的な場所B、又は無のいずれかの場所に存在する。
・一のカード41が一のユーザの手札42から場43に出された場合、一のユーザの手札42から1枚カードが減り、場43のカードが一枚増える。
・場43に出されたカード41は、他のカード41が場に出されることにより、消滅するか、墓場に置かれるか、又は他の拡張的な場所に置かれる。
・カード41は、手札42から場43に出したときに効果を発動して新たなカードを生成するカードを含み、生成されたカード(トークンカード)は、対戦開始時の各ユーザの手札42と山札44のカード41に含まれないカードである。
・トークンカードの枚数は、カードデッキを構成するカード41により異なるが、20枚程度であることが多い。
・手札42又は山札44にあるカード41は、強化効果などの状態変化をすることがある。
・手札42にあるカード41は、他のカード41と融合することがある。
・墓場に置かれたカード41は、場43に戻ることがあり、又は無に置かれることがある。
・場43に出されたカード41は、進化や状態変化などの付加的な状態を持つ。
リプレイログは、上述するような情報の履歴を網羅的に含むものとすることができる。上述の本実施形態のゲームは、1つの例示であって、これに限定されるものではないが、本実施形態の推定装置10が対象とするゲームは、所定の枚数のカードが、状態変化を伴いながら所定の場所を移動し、勝敗が決するようなゲームである。
(1)
ここで、Replaylognはn番目のリプレイログ要素配列を示し、Stateiは、i番目のゲーム状態を示し、Actioniは、i番目に実行されたアクションを示し、Stateeは、勝敗、引き分け、又は無効試合などの最終のゲーム状態を示す。なお、n番目のリプレイログ要素配列ReplaylognのStateiとActioniであることを明示するため、式(1)は、以下の式で表すこともできる。
以下の説明において、
のnのような上付き添字は、特に言及が無い限り、Replaylogを識別するための識別番号又は識別子に対応する文字として示される。
(2)
ここで、card1~cardkは、各カードを示すカード要素であり、カードの状態をcard.stateとしてカードのID内にエンコードしたものであり、Sviは、式(2)に示すように、k次元のベクトルとして表される。対戦開始時の2人のユーザの手札42と山札44のカード41の合計が80枚であり、ゲームの進行中に生成されるトークンカードが約20枚であることから、kは、大凡100である。本実施形態では、説明の便宜上、以下ではk=100として説明するが、この値に限定されない。また本実施形態では、card1~cardkは、k種類のカードを示すものである。
(3)
(4)
label関数は、i番目のReplaylogiに対応するクライアント側又はサーバ側ログデータであるcslog_iを参照する。cslog_iは、Replaylogiに関連付けて、ゲームサーバと、ゲームが実行されるクライアントとに記憶されるログである。label関数は、Replaylogiが正常終了した場合はRegularラベルを返却し、Replaylogiが異常終了した場合、すなわち不具合が発生した場合はIrregularラベルを返却する。
(5)
encode_state関数は、リプレイログ要素配列Replaylognが含むすべてのゲーム状態を式(2)で示すStateベクトルに変換し、式(3)で示すReplaylogMatrixnに変換する。ReplaylogMatrixnは、Stateベクトルの配列であり、i番目のStateベクトル
は、当該リプレイログ要素配列において初期のゲーム状態からi回変化したゲーム状態に対応するベクトルである。Stateベクトルの各々は、ゲーム中に扱われる100枚のカードの状態を網羅的に記録したものである。
(6)
encode_action関数は、リプレイログ要素配列を受け取り、リプレイログ要素配列が含むアクションのデータを抽出したRaction又はIactionのアクション配列データを生成する。
は、Replaylognの最初のアクションを示し、
は、Replaylognの最後のアクションを示す。集合Rが含むα番目のReplaylogαから生成されるアクション配列データRactionと、集合Iが含むβ番目のReplaylogβから生成されるアクション配列データIactionは、式(7)、式(8)のようにモデル化される。
(7)
(8)
(9)
combination関数は、1つのゲーム状態を示すStateベクトルから、カード要素w個(card0、card2…cardq)の組み合わせを抽出(出力)する。データ抽出部24は、combination関数を用いて、一の異常ログデータ配列が含む不具合発生直前のアクションの直前の1つのゲーム状態(Stateベクトル)が含むカード要素から、カード要素w個の組み合わせを抽出する。このカード要素w個が、所定のカード要素であり、Sと呼ぶ。カード要素Sは、予め決められたw個(1≦w≦k)のカード要素であってもよいし、設定された規則に従ってゲーム状態に応じて抽出されたw個のカード要素であってもよい。なお、式(9)において、card0、card2…cardqの表記は1つの例示であって、これに限定されない。1つの例では、データ抽出部24は、アクション配列データIactionにより不具合発生直前のアクションを認識し、該アクションの直前の1つのゲーム状態Stateベクトルを取得し、該ゲーム状態が含むカード要素Sを抽出し、出力する。
(10)
ここで、Apは、不具合原因を推定する対象の不具合の発生直前のアクションを示し、SpはApの直前のゲーム状態が含むカード要素Sを示し、freq(Ap,Sp|Sp∈I)は、リプレイログに含まれる異常ログデータ配列においてSpを含むゲーム状態とApがこの順番(時間順)で存在(出現)する頻度を示す。換言すると、freq(Ap,Sp|Sp∈I)は、リプレイログに含まれる異常ログデータ配列におけるAとSの共起頻度を示す。S’pは、正常ログデータ配列に含まれるSpと同一のカード要素Sを示し、freq(Ap,S’p|S’p∈I)は、リプレイログに含まれる正常ログデータ配列においてS’pを含むゲーム状態とApがこの順番(時間順)で存在(出現)する頻度を示す。相関ルール学習関数は、不具合発生直前のアクションApと、その直前のゲーム状態が含むカード要素Spとの、不具合発生に関する相関関係の強さを示すものである。決定部25は、相関ルール学習関数の出力値が閾値tを超えるApとSpとのペアを、「不具合を引き起こす原因要素」として特定する。決定部25は、相関ルール学習関数を実装する場合、最初にfreq(Ap,Sp|Sp∈I)を計算し、計算値が閾値itを超えるApとSp(S’p)のペアをfreq(Ap,S’p|S’p∈I)の計算対象として、当該関数を用いる。なお、式(10)は、ゼロによる除算を防止するために1などの所定値を分母に加えてもよい。或いは、分子や分母に所定の値を加算又は減算することにより、相関関係の出力値を調整してもよい。
(11)
combination関数は、ゲーム状態配列データにおいて隣接する2つのStateベクトルの各々から、カード要素w個(card0、card2…cardq)の組み合わせを各々抽出(出力)する。データ抽出部24は、combination関数を用いて、一の異常ログデータ配列が含む不具合発生直前の2個のアクションの各々の直前のゲーム状態の各々が含むカード要素から、カード要素w個の組み合わせを各々抽出する。この2個のカード要素w個の組み合わせの各々が、所定のカード要素であり、Sと呼ぶ。w個のカード要素は、予め決められたw個(1≦w≦k)のカード要素であってもよいし、設定された規則に従ってゲーム状態に応じて抽出されたw個のカード要素であってもよい。なお、式(11)において、card0、card2…cardqの表記は1つの例示であって、これに限定されない。例えば、データ抽出部24は、アクション配列データIactionにより不具合発生直前の2個のアクションを認識し、該アクションの各々の直前のゲーム状態Stateベクトルを各々取得し、該ゲーム状態の各々が含むカード要素Sを各々抽出し、出力する。
(12)
Ap-1とApは、不具合原因を推定する対象の不具合の発生直前の2個のアクションを示し、Sp-1とSpは、各々Ap-1とApの直前のゲーム状態が含むカード要素w個(カード要素S)を示す。freq(Ap-1,Ap,Sp-1,Sp|Sp∈I)は、リプレイログに含まれる異常ログデータ配列において、Sp-1を含むゲーム状態とAp-1とSpを含むゲーム状態とApがこの順番(時間順)で存在(出現)する頻度を示す。S’pとS’p-1のそれぞれは、正常ログデータ配列に含まれるSp-1とSpと同一のカード要素Sを示し、freq(Ap-1,Ap,S’p-1,S’p|S’p∈I)は、リプレイログに含まれる正常ログデータ配列において、S’p-1を含むゲーム状態とAp-1とS’pを含むゲーム状態とApがこの順番(時間順)で存在(出現)する頻度を示す。決定部25は、相関ルール学習関数の出力値が閾値tを超えるAp-1、Ap、Sp-1、Spの組み合わせを、「不具合を引き起こす原因要素」として特定する。決定部25は、相関ルール学習関数を実装する場合、最初にfreq(Ap-1,Ap,Sp-1,Sp|Sp∈I)を計算し、計算値が閾値itを超えるAp-1、Ap、Sp-1、Spの組み合わせをfreq(Ap-1,Ap,S’p-1,S’p|S’p∈I)の計算対象として、当該関数を用いる。
11 プロセッサ
12 入力装置
13 表示装置
14 記憶装置
15 通信装置
16 バス
21 ラベリング部
22 ゲーム状態配列データ生成部
23 アクション配列データ生成部
24 データ抽出部
25 決定部
40 ゲーム画面
41 カード
42 手札
43 場
44 山札
45 キャラクタ
Claims (9)
- ユーザにより選択されたアクションに応じて進行し、ゲーム状態が更新されるゲームにおいて、ゲームログデータから不具合原因を推定するための、コンピュータにより実行される方法であって、該ゲーム状態は複数のゲーム状態要素を含んで構成され、該ゲームログデータは複数のログデータ配列を含み、ログデータ配列の各々は正常又は異常を示すラベルが付与されるものであり、該方法は、
異常を示すラベルが付与されたログデータ配列である異常ログデータ配列のうちの一の異常ログデータ配列が含む不具合発生前のアクションと該アクションに関連するゲーム状態が含む所定のゲーム状態要素との組み合わせがゲームログデータに含まれる異常ログデータ配列において存在する度合と、該組み合わせがゲームログデータに含まれる正常を示すラベルが付与されたログデータ配列である正常ログデータ配列において存在する度合とに基づいて、該組み合わせが不具合を発生させる原因か否かを決定するステップ、を含む
方法。 - 前記決定するステップは、一の異常ログデータ配列が含む不具合発生前のアクションと該アクションに関連するゲーム状態が含む所定のゲーム状態要素との組み合わせがゲームログデータに含まれる異常ログデータにおいて存在する度合に基づく値の、該組み合わせがゲームログデータに含まれる正常ログデータ配列において存在する度合に基づく値に対する比率が所定値以上であるときに、該組み合わせが不具合を発生させる原因であると決定することを含む、請求項1に記載の方法。
- ログデータ配列の各々に対して正常又は異常を示すラベルを付与するステップを含む、請求項1又は2に記載の方法。
- 前記方法は、
一の異常ログデータ配列が含む不具合発生前のアクションに関連するゲーム状態が含むゲーム状態要素から所定のゲーム状態要素を抽出するステップを含み、
前記決定するステップは、一の異常ログデータ配列が含む不具合発生前のアクションと前記抽出された所定のゲーム状態要素との組み合わせがゲームログデータに含まれる異常ログデータ配列において存在する度合と、該組み合わせがゲームログデータに含まれる正常ログデータ配列において存在する度合とに基づいて、該組み合わせが不具合を発生させる原因か否かを決定することを含む、
請求項1から3のいずれか1項に記載の方法。 - 前記決定するステップは、一の異常ログデータ配列が含む不具合発生直前の1つのアクションと該アクションの直前のゲーム状態が含む所定のゲーム状態要素との組み合わせがゲームログデータに含まれる異常ログデータ配列において存在する度合と、該組み合わせがゲームログデータに含まれる正常ログデータ配列において存在する度合とに基づいて、該組み合わせが不具合を発生させる原因か否かを決定することを含む、請求項1から4のいずれか1項に記載の方法。
- 前記決定するステップは、一の異常ログデータ配列が含む不具合発生直前の2以上のアクションと該2以上のアクションの各々の直前のゲーム状態の各々が含む所定のゲーム状態要素との組み合わせがゲームログデータに含まれる異常ログデータ配列において存在する度合と、該組み合わせがゲームログデータに含まれる正常ログデータ配列において存在する度合とに基づいて、該組み合わせが不具合を発生させる原因か否かを決定することを含む、請求項1から4のいずれか1項に記載の方法。
- 請求項1から6のいずれか1項に記載の方法の各ステップをコンピュータに実行させるプログラム。
- ユーザにより選択されたアクションに応じて進行し、ゲーム状態が更新されるゲームにおいて、ゲームログデータから不具合原因を推定するための推定システムであって、該ゲーム状態は複数のゲーム状態要素を含んで構成され、該ゲームログデータは複数のログデータ配列を含むものであり、該推定システムは、
ログデータ配列の各々に対して正常又は異常を示すラベルを付与し、
異常を示すラベルが付与されたログデータ配列である異常ログデータ配列のうちの一の異常ログデータ配列が含む不具合発生前のアクションと該アクションに関連するゲーム状態が含む所定のゲーム状態要素との組み合わせがゲームログデータに含まれる異常ログデータ配列において存在する度合と、該組み合わせがゲームログデータに含まれる正常を示すラベルが付与されたログデータ配列である正常ログデータ配列において存在する度合とに基づいて、該組み合わせが不具合を発生させる原因か否かを決定する、
推定システム。 - ユーザにより選択されたアクションに応じて進行し、ゲーム状態が更新されるゲームにおいて、ゲームログデータから不具合原因を推定するための推定装置であって、該ゲーム状態は複数のゲーム状態要素を含んで構成され、該ゲームログデータは複数のログデータ配列を含み、ログデータ配列の各々は正常又は異常を示すラベルが付与されており、
異常を示すラベルが付与されたログデータ配列である異常ログデータ配列のうちの一の異常ログデータ配列が含む不具合発生前のアクションと該アクションに関連するゲーム状態が含む所定のゲーム状態要素との組み合わせがゲームログデータに含まれる異常ログデータ配列において存在する度合と、該組み合わせがゲームログデータに含まれる正常を示すラベルが付与されたログデータ配列である正常ログデータ配列において存在する度合とに基づいて、該組み合わせが不具合を発生させる原因か否かを決定する、
推定装置。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021132934A JP7053931B1 (ja) | 2021-08-17 | 2021-08-17 | 不具合原因を推定するための方法、プログラム、システム、及び装置 |
CN202280068971.2A CN118103821A (zh) | 2021-08-17 | 2022-08-16 | 用于估计问题原因的方法、程序、系统以及装置 |
PCT/JP2022/030951 WO2023022149A1 (ja) | 2021-08-17 | 2022-08-16 | 不具合原因を推定するための方法、プログラム、システム、及び装置 |
US18/444,056 US20240184660A1 (en) | 2021-08-17 | 2024-02-16 | Method, program, system, and device for estimating cause of problem |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021132934A JP7053931B1 (ja) | 2021-08-17 | 2021-08-17 | 不具合原因を推定するための方法、プログラム、システム、及び装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP7053931B1 true JP7053931B1 (ja) | 2022-04-12 |
JP2023027673A JP2023027673A (ja) | 2023-03-02 |
Family
ID=81260053
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021132934A Active JP7053931B1 (ja) | 2021-08-17 | 2021-08-17 | 不具合原因を推定するための方法、プログラム、システム、及び装置 |
Country Status (4)
Country | Link |
---|---|
US (1) | US20240184660A1 (ja) |
JP (1) | JP7053931B1 (ja) |
CN (1) | CN118103821A (ja) |
WO (1) | WO2023022149A1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7366223B1 (ja) | 2022-10-28 | 2023-10-20 | 株式会社Cygames | ゲームを検査するためのシステム、方法、及びプログラム |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003126551A (ja) * | 2001-10-25 | 2003-05-07 | Chun Soft:Kk | ゲームシステムにおけるバグ検出方法、バグ発生回避方法、バグ検出プログラム、バグ発生回避プログラム及び記録媒体 |
JP2007267876A (ja) * | 2006-03-30 | 2007-10-18 | Namco Bandai Games Inc | プログラム、情報記憶媒体、ゲーム装置およびゲーム装置管理装置 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6438612B1 (ja) * | 2018-03-20 | 2018-12-19 | 株式会社Cygames | ゲームプログラムを検査するためのシステム、方法、プログラム、機械学習支援装置、及びデータ構造 |
US10783057B2 (en) * | 2018-11-21 | 2020-09-22 | Sony Interactive Entertainment LLC | Testing as a service for cloud gaming |
-
2021
- 2021-08-17 JP JP2021132934A patent/JP7053931B1/ja active Active
-
2022
- 2022-08-16 CN CN202280068971.2A patent/CN118103821A/zh active Pending
- 2022-08-16 WO PCT/JP2022/030951 patent/WO2023022149A1/ja unknown
-
2024
- 2024-02-16 US US18/444,056 patent/US20240184660A1/en active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003126551A (ja) * | 2001-10-25 | 2003-05-07 | Chun Soft:Kk | ゲームシステムにおけるバグ検出方法、バグ発生回避方法、バグ検出プログラム、バグ発生回避プログラム及び記録媒体 |
JP2007267876A (ja) * | 2006-03-30 | 2007-10-18 | Namco Bandai Games Inc | プログラム、情報記憶媒体、ゲーム装置およびゲーム装置管理装置 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7366223B1 (ja) | 2022-10-28 | 2023-10-20 | 株式会社Cygames | ゲームを検査するためのシステム、方法、及びプログラム |
WO2024090476A1 (ja) * | 2022-10-28 | 2024-05-02 | 株式会社Cygames | ゲームを検査するためのシステム、方法、及びプログラム |
Also Published As
Publication number | Publication date |
---|---|
US20240184660A1 (en) | 2024-06-06 |
JP2023027673A (ja) | 2023-03-02 |
WO2023022149A1 (ja) | 2023-02-23 |
CN118103821A (zh) | 2024-05-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6438612B1 (ja) | ゲームプログラムを検査するためのシステム、方法、プログラム、機械学習支援装置、及びデータ構造 | |
US10282280B1 (en) | Automated scalable video game testing system | |
US10384133B1 (en) | Systems and methods for automatically measuring a video game difficulty | |
Andersen et al. | The impact of tutorials on games of varying complexity | |
KR101892739B1 (ko) | 게임 운영 시나리오 생성 장치 및 그 방법 | |
US20240184660A1 (en) | Method, program, system, and device for estimating cause of problem | |
JP6612306B2 (ja) | 情報処理装置及び情報処理プログラム | |
Kim et al. | Detection of auto programs for MMORPGs | |
JP7474832B2 (ja) | ゲームプログラムを検査するためのシステム、方法、プログラム、機械学習支援装置、及びデータ構造 | |
US20210394071A1 (en) | System and method for extracting combinations of arbitrary numbers of media, included in possessed medium group and having high frequencies of occurrence | |
KR20120080400A (ko) | 클러스터링 기법을 이용한 온라인 게임 내 비정상 캐릭터 검출 시스템 및 그 방법 | |
US20220387897A1 (en) | Systems and methods for video streaming analysis | |
WO2021015073A1 (ja) | 媒体推薦システム、テーブル作成システム、媒体推薦装置、及びテーブル作成方法 | |
KR101725067B1 (ko) | 온라인 게임의 비정상 유저 검출 방법 및 시스템 | |
CA3196793A1 (en) | Game moment implementation system and method of use thereof | |
JP7454726B1 (ja) | ゲーム媒体セットを生成するためのシステム、方法、及びプログラム | |
JP2019107549A (ja) | データ分析装置及びデータ分析プログラム | |
KR101689595B1 (ko) | 온라인 게임과 연동되는 웹 사이트에서 게임내 캐릭터들간 연관성 표시장치 및 그 방법 | |
Estupiñán et al. | Looking into engagement trajectories in interactive digital narrative using process mining | |
Rodrigues et al. | Procedural Level Generation to Improve a Digital Math Game's Development: Does it Impact Player Experience? | |
Guglielmo et al. | Predicting Tetris Performance Using Early Keystrokes | |
KR20200040182A (ko) | 작업장 계정 검출 장치 및 방법 | |
Haron et al. | Performance Evaluation of an Online Text-Based Strategy Game | |
Estupinan Vesga et al. | When Did I Lose Them? Using Process Mining to Study User Engagement in Interactive Digital Narratives | |
Thunputtarakul et al. | Data Analysis for Ghost AI Creation in Commercial Fighting Games. |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20211224 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20211224 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220202 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20220304 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220331 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7053931 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |