JP6216892B2 - Capture device, capture method, program, and information storage medium - Google Patents

Capture device, capture method, program, and information storage medium Download PDF

Info

Publication number
JP6216892B2
JP6216892B2 JP2016555124A JP2016555124A JP6216892B2 JP 6216892 B2 JP6216892 B2 JP 6216892B2 JP 2016555124 A JP2016555124 A JP 2016555124A JP 2016555124 A JP2016555124 A JP 2016555124A JP 6216892 B2 JP6216892 B2 JP 6216892B2
Authority
JP
Japan
Prior art keywords
capture
image
voice input
displayed
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2016555124A
Other languages
Japanese (ja)
Other versions
JPWO2016063622A1 (en
Inventor
幸太郎 今村
幸太郎 今村
小林 郁夫
郁夫 小林
俊雅 青木
俊雅 青木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Interactive Entertainment Inc
Original Assignee
Sony Interactive Entertainment Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Interactive Entertainment Inc filed Critical Sony Interactive Entertainment Inc
Publication of JPWO2016063622A1 publication Critical patent/JPWO2016063622A1/en
Application granted granted Critical
Publication of JP6216892B2 publication Critical patent/JP6216892B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20Input arrangements for video game devices
    • A63F13/21Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/215Input arrangements for video game devices characterised by their sensors, purposes or types comprising means for detecting acoustic signals, e.g. using a microphone
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/40Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
    • A63F13/42Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
    • A63F13/424Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle involving acoustic input signals, e.g. by using the results of pitch or rhythm extraction or voice recognition
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50Controlling the output signals based on the game progress
    • A63F13/52Controlling the output signals based on the game progress involving aspects of the displayed game scene
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50Controlling the output signals based on the game progress
    • A63F13/53Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game
    • A63F13/533Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game for prompting the player, e.g. by displaying a game menu

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Acoustics & Sound (AREA)
  • User Interface Of Digital Computer (AREA)

Description

本発明は、キャプチャ装置、キャプチャ方法、プログラム及び情報記憶媒体に関する。   The present invention relates to a capture device, a capture method, a program, and an information storage medium.

コントローラに対する所定の操作入力や所定の語句を表す音声の入力に応じて、表示されている画像をキャプチャする技術が存在する。   There is a technique for capturing a displayed image in response to a predetermined operation input to a controller or an audio input representing a predetermined phrase.

例えば所定の語句を表す音声の入力によって表示されている画像のキャプチャが可能な場合のように音声によるコマンドの入力が可能である場合に、そのことをユーザに案内する音声入力案内情報が表示されることがある。   For example, when a voice command can be input, such as when a displayed image can be captured by inputting a voice representing a predetermined phrase, voice input guidance information is displayed to guide the user to that effect. Sometimes.

しかし例えばゲームのプレイ内容を表す画像をキャプチャする場合などではこのような音声入力案内情報は一般的にはじゃまであり、音声入力案内情報が配置された画像がキャプチャされることはユーザにとって望ましいことではない。また音声入力案内情報が表示されている際にコントローラに対する操作によって表示されている画像をキャプチャする場合もありうる。この場合においてもやはり、音声入力案内情報が配置された画像がキャプチャされることはユーザにとって望ましいことではない。   However, for example, when capturing an image representing the game play content, such voice input guidance information is generally inconsistent, and it is desirable for the user to capture an image in which the voice input guidance information is arranged. is not. Further, when the voice input guidance information is displayed, an image displayed by an operation on the controller may be captured. Even in this case, it is not desirable for the user to capture an image in which the voice input guidance information is arranged.

ところが従来は、音声入力案内情報が表示されている際に表示されている画像のキャプチャを行うと、音声入力案内情報が配置された画像がキャプチャされていた。   However, conventionally, when an image displayed while voice input guidance information is displayed is captured, an image in which the voice input guidance information is arranged is captured.

本発明は上記課題に鑑みてなされたものであって、その目的の1つは、音声によるコマンドの入力が可能であることを案内する音声入力案内情報が表示されている際に表示されている画像のキャプチャを行っても、音声入力案内情報が配置されていない画像がキャプチャされるキャプチャ装置、キャプチャ方法、プログラム及び情報記憶媒体を提供することにある。   The present invention has been made in view of the above problems, and one of its purposes is displayed when voice input guidance information for guiding that a voice command can be input is displayed. An object of the present invention is to provide a capture device, a capture method, a program, and an information storage medium in which an image without voice input guide information is captured even when an image is captured.

上記課題を解決するために、本発明に係るキャプチャ装置は、表示されている画像のキャプチャ要求を受け付ける受付部と、表示されている画像に音声によるコマンドの入力が可能であることを案内する音声入力案内情報が配置されている場合は、前記キャプチャ要求の受付に応じて、当該音声入力案内情報が配置されていない画像をキャプチャするキャプチャ部と、を含む。   In order to solve the above-described problems, a capture device according to the present invention includes a reception unit that receives a capture request for a displayed image, and a voice that guides that a voice command can be input to the displayed image. In the case where the input guidance information is arranged, a capture unit that captures an image in which the voice input guidance information is not arranged in response to reception of the capture request is included.

また、本発明に係るキャプチャ方法は、表示されている画像のキャプチャ要求を受け付けるステップと、表示されている画像に音声によるコマンドの入力が可能であることを案内する音声入力案内情報が配置されている場合は、前記キャプチャ要求の受付に応じて、当該音声入力案内情報が配置されていない画像をキャプチャするステップと、を含む。   The capture method according to the present invention includes a step of accepting a capture request for a displayed image, and voice input guidance information for guiding that a voice command can be input to the displayed image. If there is, a step of capturing an image in which the voice input guidance information is not arranged in response to the reception of the capture request is included.

また、本発明に係るプログラムは、表示されている画像のキャプチャ要求を受け付ける手順、表示されている画像に音声によるコマンドの入力が可能であることを案内する音声入力案内情報が配置されている場合は、前記キャプチャ要求の受付に応じて、当該音声入力案内情報が配置されていない画像をキャプチャする手順、をコンピュータに実行させる。   The program according to the present invention includes a procedure for receiving a capture request for a displayed image, and voice input guidance information for guiding that a command can be input by voice in the displayed image. Causes the computer to execute a procedure for capturing an image in which the voice input guidance information is not arranged in response to reception of the capture request.

また、本発明に係る情報記憶媒体は、表示されている画像のキャプチャ要求を受け付ける手順、表示されている画像に音声によるコマンドの入力が可能であることを案内する音声入力案内情報が配置されている場合は、前記キャプチャ要求の受付に応じて、当該音声入力案内情報が配置されていない画像をキャプチャする手順、をコンピュータに実行させるプログラムを記憶したコンピュータ読み取り可能な情報記憶媒体である。   In addition, the information storage medium according to the present invention includes a procedure for accepting a capture request for a displayed image, and voice input guidance information for guiding that a voice command can be input to the displayed image. A computer-readable information storage medium storing a program for causing a computer to execute a procedure for capturing an image in which the voice input guidance information is not arranged in response to reception of the capture request.

本発明の一態様では、表示されている画像に前記音声入力案内情報が配置されている場合に、前記キャプチャ要求の受付に応じて、当該音声入力案内情報が配置されていない画像を表示させる表示制御部、をさらに含み、前記キャプチャ部は、前記表示制御部が表示させる画像をキャプチャする。   In one aspect of the present invention, when the voice input guidance information is arranged in a displayed image, a display that displays an image in which the voice input guidance information is not arranged in response to reception of the capture request A control unit, and the capture unit captures an image displayed by the display control unit.

この態様では、前記表示制御部は、前記音声入力案内情報が配置されていない画像がキャプチャされた後に、当該音声入力案内情報を再度表示させてもよい。   In this aspect, the display control unit may display the voice input guidance information again after an image in which the voice input guidance information is not arranged is captured.

また、本発明の一態様では、前記キャプチャ部は、表示されている画像にシステムに関連するシステム関連情報が配置されている場合は、前記キャプチャ要求の受付に応じて、当該システム関連情報の少なくとも一部が配置されていない画像をキャプチャする。   In one aspect of the present invention, when the system-related information related to the system is arranged in the displayed image, the capture unit receives at least the system-related information according to reception of the capture request. Capture an image that is not partially placed.

この態様では、前記キャプチャ部は、表示されている画像に前記システム関連情報が配置されている場合は、前記キャプチャ要求の受付に応じて、当該システム関連情報のうち前記音声入力案内情報以外の情報が配置された画像をキャプチャしてもよい。   In this aspect, when the system related information is arranged in the displayed image, the capture unit receives information other than the voice input guide information in the system related information in response to reception of the capture request. You may capture the image where is arranged.

また、本発明の一態様では、前記キャプチャ部は、表示されている画像にゲームに関連するゲーム関連情報が配置されている場合は、前記キャプチャ要求の受付に応じて、当該ゲーム関連情報が配置された前記画像をキャプチャする。   In one aspect of the present invention, when the game-related information related to the game is arranged in the displayed image, the capture unit arranges the game-related information according to reception of the capture request. The captured image is captured.

また、本発明の一態様では、前記受付部は、コントローラに対する所定の操作入力を前記キャプチャ要求として受け付け、前記キャプチャ部は、表示されている画像に前記音声入力案内情報が配置されている場合は、前記操作入力の受付に応じて、前記音声入力案内情報が配置されていない画像をキャプチャする。   In one aspect of the present invention, the accepting unit accepts a predetermined operation input to the controller as the capture request, and the capture unit has the voice input guide information arranged in the displayed image. In response to receiving the operation input, an image in which the voice input guidance information is not arranged is captured.

あるいは、前記受付部は、所定の音声を前記キャプチャ要求として受け付け、前記キャプチャ部は、表示されている画像に前記音声入力案内情報が配置されている場合は、前記音声の受付に応じて、前記音声入力案内情報が配置されていない画像をキャプチャする。   Alternatively, the reception unit receives a predetermined sound as the capture request, and the capture unit, when the sound input guidance information is arranged in a displayed image, according to the reception of the sound, Capture an image without voice input guidance information.

この態様では、前記音声入力案内情報には、表示されている画像のキャプチャを要求することを表す音声を表す語句が含まれていてもよい。   In this aspect, the voice input guidance information may include a word representing voice indicating that a capture of the displayed image is requested.

本発明の一実施形態に係る情報処理システムの全体構成の一例を示す図である。It is a figure showing an example of the whole information processing system composition concerning one embodiment of the present invention. 本発明の一実施形態に係る情報処理装置のハードウェア構成の一例を示す図である。It is a figure which shows an example of the hardware constitutions of the information processing apparatus which concerns on one Embodiment of this invention. プレイ画面の一例を示す図である。It is a figure which shows an example of a play screen. プレイ画面の一例を示す図である。It is a figure which shows an example of a play screen. 本発明の一実施形態に係る情報処理装置の動作の一例を示す図である。It is a figure which shows an example of operation | movement of the information processing apparatus which concerns on one Embodiment of this invention. プレイ画面の一例を示す図である。It is a figure which shows an example of a play screen. プレイ画面の一例を示す図である。It is a figure which shows an example of a play screen. プレイ画面の一例を示す図である。It is a figure which shows an example of a play screen. 本発明の一実施形態に係る情報処理装置で実現される機能の一例を示す機能ブロック図である。It is a functional block diagram which shows an example of the function implement | achieved by the information processing apparatus which concerns on one Embodiment of this invention. 本発明の一実施形態に係る情報処理装置で行われる処理の流れの一例を示すフロー図である。It is a flowchart which shows an example of the flow of the process performed with the information processing apparatus which concerns on one Embodiment of this invention.

以下、本発明の一実施形態について図面に基づき詳細に説明する。   Hereinafter, an embodiment of the present invention will be described in detail with reference to the drawings.

図1は、本発明の一実施形態に係る情報処理システム10の全体構成の一例を示す図である。図1に示すように、本実施形態に係る情報処理システム10は、情報処理装置12とディスプレイ14とカメラマイクユニット16とコントローラ18とを含んでいる。   FIG. 1 is a diagram showing an example of the overall configuration of an information processing system 10 according to an embodiment of the present invention. As shown in FIG. 1, the information processing system 10 according to the present embodiment includes an information processing device 12, a display 14, a camera microphone unit 16, and a controller 18.

本実施形態に係る情報処理装置12は、例えばゲームコンソールなどといったエンタテインメント装置等のコンピュータであり、例えば図2に示すように、制御部20、記憶部22、通信部24、入出力部26を含んでいる。制御部20は、例えば情報処理装置12にインストールされるプログラムに従って動作するCPU等のプログラム制御デバイスである。本実施形態に係る制御部20には、CPUから供給されるグラフィックスコマンドやデータに基づいてフレームバッファに画像を描画するGPU(Graphics Processing Unit)も含まれている。記憶部22は、例えばROMやRAM等の記憶素子やハードディスクドライブなどである。記憶部22には、制御部20によって実行されるプログラムなどが記憶される。また、本実施形態に係る記憶部22には、GPUにより画像が描画されるフレームバッファの領域が確保されている。通信部24は、例えばイーサネット(登録商標)モジュールや無線LANモジュールなどの通信インタフェースなどである。入出力部26は、HDMI(登録商標)(High-Definition Multimedia Interface)ポートやUSBポートなどの入出力ポートである。   The information processing apparatus 12 according to the present embodiment is a computer such as an entertainment apparatus such as a game console, and includes a control unit 20, a storage unit 22, a communication unit 24, and an input / output unit 26 as shown in FIG. It is out. The control unit 20 is a program control device such as a CPU that operates according to a program installed in the information processing apparatus 12, for example. The control unit 20 according to the present embodiment also includes a GPU (Graphics Processing Unit) that draws an image in a frame buffer based on graphics commands and data supplied from the CPU. The storage unit 22 is, for example, a storage element such as a ROM or a RAM, a hard disk drive, or the like. The storage unit 22 stores a program executed by the control unit 20. In the storage unit 22 according to the present embodiment, a frame buffer area in which an image is rendered by the GPU is secured. The communication unit 24 is a communication interface such as an Ethernet (registered trademark) module or a wireless LAN module. The input / output unit 26 is an input / output port such as an HDMI (registered trademark) (High-Definition Multimedia Interface) port or a USB port.

本実施形態に係るディスプレイ14は、液晶ディスプレイ等であり、情報処理装置12が生成する画面などを表示させる。また、本実施形態に係るディスプレイ14は、情報処理装置12が生成する音声データが表す音声を出力するスピーカも備えている。本実施形態に係るカメラマイクユニット16は、例えば被写体を撮像した画像を情報処理装置12に出力するカメラ16a及び周囲の音声を取得して当該音声を音声データに変換して情報処理装置12に出力するマイク16bを含んでいる。   The display 14 according to the present embodiment is a liquid crystal display or the like, and displays a screen or the like generated by the information processing apparatus 12. The display 14 according to the present embodiment also includes a speaker that outputs sound represented by the sound data generated by the information processing apparatus 12. The camera microphone unit 16 according to the present embodiment acquires, for example, a camera 16a that outputs an image obtained by capturing a subject to the information processing apparatus 12 and surrounding sound, converts the sound into sound data, and outputs the sound data to the information processing apparatus 12. Including a microphone 16b.

情報処理装置12とディスプレイ14とは、例えば、AVケーブルや、HDMIケーブル等を介して接続されている。情報処理装置12とカメラマイクユニット16とは、例えば、USBケーブルや、AVケーブルや、HDMIケーブル等を介して接続されている。   The information processing apparatus 12 and the display 14 are connected via, for example, an AV cable or an HDMI cable. The information processing apparatus 12 and the camera microphone unit 16 are connected via, for example, a USB cable, an AV cable, an HDMI cable, or the like.

本実施形態に係るコントローラ18は、情報処理装置12に対する操作入力を行うための操作入力装置である。本実施形態に係るコントローラ18には、例えばボタン、タッチパネル、操作スティックなどの操作子が設けられている。また、本実施形態に係るコントローラ18は、角速度を検出するジャイロセンサ、加速度を検出する加速度センサ等のセンサを備えている。また、本実施形態に係るコントローラ18はジャックを備えており、当該ジャックにマイクが備えるプラグを差し込むことにより、当該マイクによる音声入力も行うことができるようになっている。コントローラ18に差し込まれたマイクに入力された音声はコントローラ18で音声データに変換されて情報処理装置12に出力される。   The controller 18 according to the present embodiment is an operation input device for performing operation input to the information processing device 12. The controller 18 according to the present embodiment is provided with operation elements such as buttons, a touch panel, and operation sticks. In addition, the controller 18 according to the present embodiment includes sensors such as a gyro sensor that detects angular velocity and an acceleration sensor that detects acceleration. In addition, the controller 18 according to the present embodiment includes a jack, and by inserting a plug included in the microphone into the jack, voice input by the microphone can also be performed. The sound input to the microphone inserted into the controller 18 is converted into sound data by the controller 18 and output to the information processing apparatus 12.

本実施形態では、カメラマイクユニット16が備えるマイク16b又はコントローラ18に接続されたマイクにユーザが音声を入力することにより、情報処理装置12は当該音声を認識する。そして本実施形態に係る情報処理装置12では、認識が成功した場合に、当該情報処理装置12に入力される音声(当該情報処理装置12が受け付ける音声)の認識結果に応じたコマンドの特定が可能となっている。そして本実施形態に係る情報処理装置12は、特定されたコマンドに応じた処理を実行する。このようにして本実施形態では、ユーザは音声によって情報処理装置12に対する操作を行えるようになっている。なお本実施形態では、コントローラ18のジャックにマイクのプラグが差し込まれている際には、当該マイクに入力された音声の認識結果をカメラマイクユニット16が備えるマイク16bに入力された音声の認識結果よりも優先して取り扱うようになっている。   In the present embodiment, the information processing apparatus 12 recognizes the sound when the user inputs the sound to the microphone 16 b included in the camera microphone unit 16 or the microphone connected to the controller 18. In the information processing apparatus 12 according to the present embodiment, when the recognition is successful, it is possible to specify a command according to the recognition result of the voice input to the information processing apparatus 12 (voice received by the information processing apparatus 12). It has become. Then, the information processing apparatus 12 according to the present embodiment executes processing according to the specified command. Thus, in this embodiment, the user can operate the information processing apparatus 12 by voice. In this embodiment, when a microphone plug is inserted into the jack of the controller 18, the recognition result of the voice input to the microphone 16b is the recognition result of the voice input to the microphone 16 of the camera microphone unit 16. It has been given priority over handling.

またユーザは、ボタンを押下したり、操作スティックを傾けたりすることで、コントローラ18を用いて各種の操作入力を行うことができる。そして本実施形態では、コントローラ18は、操作入力に対応付けられる入力データを情報処理装置12に出力する。   The user can perform various operation inputs using the controller 18 by pressing a button or tilting an operation stick. In this embodiment, the controller 18 outputs input data associated with the operation input to the information processing apparatus 12.

また、本実施形態に係るコントローラ18は、USBポートを備えている。コントローラ18は、USBケーブルで情報処理装置12と接続することで、入出力部26を介して有線で入力データを情報処理装置12に出力することができる。また、本実施形態に係るコントローラ18は、無線通信モジュール等を備えており、通信部24を介して無線で入力データを情報処理装置12に出力することができるようにもなっている。   Further, the controller 18 according to the present embodiment includes a USB port. The controller 18 can output input data to the information processing device 12 by wire via the input / output unit 26 by connecting to the information processing device 12 with a USB cable. The controller 18 according to the present embodiment includes a wireless communication module and the like, and can output input data to the information processing apparatus 12 wirelessly via the communication unit 24.

本実施形態に係る情報処理装置12には、ゲームプログラムと、オペレーティングシステム等のシステムプログラムと、がインストールされている。本実施形態ではシステムプログラムとゲームプログラムとは独立しており、ゲームプログラムはシステムプログラム上で動作する。   A game program and a system program such as an operating system are installed in the information processing apparatus 12 according to the present embodiment. In this embodiment, the system program and the game program are independent, and the game program operates on the system program.

図3は、情報処理装置12にインストールされているゲームプログラムが実行されている際にディスプレイ14に表示されるプレイ画面30の一例を示す図である。本実施形態では、情報処理装置12のフレームバッファに描画された画像がディスプレイ14に表示される。そして本実施形態では、ゲームプログラムが実行されている間は、フレームバッファへの描画は所定のフレームレートで行われるので、ディスプレイ14に表示されるプレイ画面30は所定のフレームレートで更新される。図3に示されているプレイ画面30には、当該ゲームプログラムによって実装されているゲームのプレイ内容を示す画像が配置されている。以下、当該ゲームのプレイ内容を示す画像をプレイ画像32と呼ぶこととする。   FIG. 3 is a diagram illustrating an example of the play screen 30 displayed on the display 14 when the game program installed in the information processing apparatus 12 is being executed. In the present embodiment, an image drawn in the frame buffer of the information processing apparatus 12 is displayed on the display 14. In the present embodiment, while the game program is being executed, drawing in the frame buffer is performed at a predetermined frame rate, so that the play screen 30 displayed on the display 14 is updated at the predetermined frame rate. On the play screen 30 shown in FIG. 3, an image showing the play contents of the game implemented by the game program is arranged. Hereinafter, an image indicating the play content of the game is referred to as a play image 32.

ここで例えば情報処理装置12が、例えば「音声認識開始」などといった、システムプログラムにおける音声認識を開始するための所与の語句を表す音声を受け付けたとする。以下、システムプログラムにおける音声認識を開始するための音声を表す所与の語句をマジックワードと呼ぶこととする。すると本実施形態では、ディスプレイ14に表示されているプレイ画面30が、図4に示す状態に切り替わる。図4に示すプレイ画面30には、音声によるコマンドの入力が可能であることをユーザに案内する音声入力案内情報の一例である音声入力案内画像34がプレイ画像32の一部に重畳して配置されている。音声入力案内画像34には、システムに関するコマンドを表す語句が配置されている。ここでのシステムに関するコマンドとは、例えば音声の入力に応じてシステムプログラムで対応する処理が実行されるコマンドを指すこととする。   Here, for example, it is assumed that the information processing apparatus 12 receives a voice representing a given phrase for starting voice recognition in the system program, such as “start voice recognition”. Hereinafter, a given phrase representing a voice for starting voice recognition in the system program is referred to as a magic word. Then, in this embodiment, the play screen 30 displayed on the display 14 is switched to the state shown in FIG. On the play screen 30 shown in FIG. 4, a voice input guidance image 34, which is an example of voice input guidance information for guiding the user that a voice command can be input, is superimposed on a part of the play image 32. Has been. In the voice input guidance image 34, words representing commands related to the system are arranged. Here, the system-related command refers to a command for executing a corresponding process by the system program in response to, for example, voice input.

本実施形態ではプレイ画像32はゲームプログラムによって生成される一方、音声入力案内画像34はシステムプログラムによって生成される。   In the present embodiment, the play image 32 is generated by a game program, while the voice input guide image 34 is generated by a system program.

ここで音声入力案内画像34が配置されたプレイ画面30が表示されている際に、ユーザが音声入力案内画像34に配置されている語句を表す音声を入力したとする。すると、情報処理装置12にインストールされているシステムプログラムは、当該音声の認識結果に基づいて当該音声が表すコマンドを特定する。そして当該システムプログラムは、当該コマンドに応じた処理を実行する。   Here, it is assumed that when the play screen 30 on which the voice input guidance image 34 is arranged is displayed, the user inputs a voice representing a word or phrase arranged on the voice input guidance image 34. Then, the system program installed in the information processing apparatus 12 specifies a command represented by the voice based on the recognition result of the voice. Then, the system program executes processing according to the command.

例えば図4に示すプレイ画面30が表示されている際に情報処理装置12が「ホーム画面」との語句を表す音声を受け付けたとする。この場合には、プレイ画面30の左側から「ホーム画面」との語句が音声認識されたことを示す情報がスクロールインする。そして、ディスプレイ14に表示されているプレイ画面30は、情報処理装置12で実行されるプログラムを選択するメニューが配置されたホーム画面に切り替わる。なお画面にスクロールインした情報は、表示されてから所定時間が経過したら画面から消去される。本実施形態では例えば、「ホーム画面」との語句が音声認識されたことを示す情報のスクロールインが開始されてから当該情報が消去されるまでの時間は所定時間(例えば1.9秒)である。また本実施形態では、「ホーム画面」との語句が音声認識されたことを示す情報や、ホーム画面に配置される画像は、システムプログラムによって生成される。   For example, it is assumed that the information processing apparatus 12 receives a voice representing the phrase “home screen” while the play screen 30 shown in FIG. 4 is displayed. In this case, information indicating that the phrase “home screen” is recognized from the left side of the play screen 30 is scrolled in. Then, the play screen 30 displayed on the display 14 is switched to a home screen on which a menu for selecting a program to be executed by the information processing apparatus 12 is arranged. Note that the information scrolled into the screen is deleted from the screen when a predetermined time has elapsed since it was displayed. In the present embodiment, for example, the time from the start of the scroll-in of information indicating that the phrase “home screen” has been recognized by voice to the deletion of the information is a predetermined time (for example, 1.9 seconds). is there. In the present embodiment, information indicating that the phrase “home screen” is recognized by voice and an image arranged on the home screen are generated by the system program.

また本実施形態に係る情報処理装置12では、音声入力案内画像34に語句が配置されていないシステムに関するコマンドについても、当該コマンドを表す音声が入力された場合には、当該コマンドに応じた処理が実行される。例えば音声入力案内画像34が表示されている際に、情報処理装置12が「スクリーンショットを撮る」との語句を表す音声などといった、を受け付けたとする。この場合には、プレイ画面30の表示内容を静止画像としてキャプチャしたキャプチャ画像が情報処理装置12の記憶部22に保存される。   Further, in the information processing apparatus 12 according to the present embodiment, even when a command related to a system in which no phrase is arranged in the voice input guidance image 34, when a voice representing the command is input, processing according to the command is performed. Executed. For example, when the voice input guidance image 34 is displayed, it is assumed that the information processing apparatus 12 receives a voice representing the phrase “take a screen shot”. In this case, a captured image obtained by capturing the display content of the play screen 30 as a still image is stored in the storage unit 22 of the information processing apparatus 12.

なお、音声入力案内情報に、「スクリーンショットを撮る」との語句などといった、表示されている画像のキャプチャを要求することを表す音声を表す語句が含まれていてもよい。   It should be noted that the voice input guidance information may include a phrase representing a voice indicating that a capture of a displayed image is requested, such as the phrase “take a screen shot”.

ここで図5を参照しながら、「スクリーンショットを撮る」との語句を表す音声を受け付けた際の本実施形態に係る情報処理装置12の動作の一例について説明する。   Here, an example of the operation of the information processing apparatus 12 according to the present embodiment when a voice representing the phrase “take a screen shot” is received will be described with reference to FIG.

図6は、音声入力案内画像34が配置されたプレイ画面30の別の一例を示す図である。当該プレイ画面30においても、音声入力案内画像34がプレイ画像32の一部に重畳して配置されている。   FIG. 6 is a diagram illustrating another example of the play screen 30 on which the voice input guidance image 34 is arranged. Also on the play screen 30, the voice input guide image 34 is arranged so as to overlap with a part of the play image 32.

例えば図6に示すプレイ画面がディスプレイ14に表示されている際に情報処理装置12が「スクリーンショットを撮る」との語句を表す音声を受け付けたとする(図5における時刻t1)。すると本実施形態では、表示されているプレイ画面30から音声入力案内画像34が消去される(図5における時刻t2)。   For example, when the play screen shown in FIG. 6 is displayed on the display 14, it is assumed that the information processing apparatus 12 receives a voice representing the phrase “take a screen shot” (time t <b> 1 in FIG. 5). Then, in this embodiment, the voice input guidance image 34 is deleted from the displayed play screen 30 (time t2 in FIG. 5).

ここでボスキャラを倒すなどといったゲームにおける所定の条件が達成されたとする。この場合には本実施形態では図7に示すように、当該条件が達成されたことを示す達成案内情報の一例である達成案内画像36がプレイ画像32の一部に重畳して配置されたプレイ画面30が表示される(図5における時刻t3)。本実施形態では、どのゲームにおいてどのような条件が達成されたかを示すデータ(トロフィーデータ)はシステムプログラムによって管理される。そして本実施形態では、図7に示す達成案内画像36はシステムプログラムによって生成される。   Here, it is assumed that a predetermined condition in the game such as defeating the boss character is achieved. In this case, in the present embodiment, as shown in FIG. 7, a play in which an achievement guide image 36, which is an example of achievement guide information indicating that the condition is achieved, is superimposed on a part of the play image 32. The screen 30 is displayed (time t3 in FIG. 5). In this embodiment, data (trophy data) indicating what condition is achieved in which game is managed by the system program. In the present embodiment, the achievement guide image 36 shown in FIG. 7 is generated by the system program.

そして本実施形態では、図7に例示するプレイ画面30として表示されている内容が静止画像としてキャプチャされて、当該静止画像が情報処理装置12の記憶部22に保存される(図5における時刻t4)。以下、このようにして保存される画像をキャプチャ画像と呼ぶこととする。   In this embodiment, the content displayed as the play screen 30 illustrated in FIG. 7 is captured as a still image, and the still image is stored in the storage unit 22 of the information processing apparatus 12 (time t4 in FIG. 5). ). Hereinafter, an image stored in this manner is referred to as a captured image.

そして表示されているプレイ画面30から達成案内画像36が消去される(図5における時刻t5)。そして図8に示すように、表示されている内容を表す画像がキャプチャされたことを示すキャプチャ終了案内情報の一例であるキャプチャ終了案内画像38がプレイ画像32の一部に重畳して配置されたプレイ画面30が表示される(図5における時刻t6)。   Then, the achievement guidance image 36 is erased from the displayed play screen 30 (time t5 in FIG. 5). Then, as shown in FIG. 8, a capture end guide image 38 which is an example of capture end guide information indicating that the image representing the displayed content has been captured is arranged so as to be superimposed on a part of the play image 32. The play screen 30 is displayed (time t6 in FIG. 5).

そして表示されているプレイ画面30からキャプチャ終了案内画像38が消去され(図5における時刻t7)、図6に示す、音声入力案内画像34がプレイ画像32の一部に重畳して配置されたプレイ画面30が再度表示されることとなる(図5における時刻t8)。なお、キャプチャ終了案内画像38の消去が音声入力案内画像34の配置よりも後に行われてもよい。   Then, the capture end guide image 38 is erased from the displayed play screen 30 (time t7 in FIG. 5), and the voice input guide image 34 shown in FIG. The screen 30 is displayed again (time t8 in FIG. 5). Note that the capture end guide image 38 may be deleted after the voice input guide image 34 is arranged.

上述したように本実施形態では「ホーム画面」との語句が音声認識されたことを示す情報のスクロールインが開始されてから当該情報が消去されるまでの時間は所定時間(例えば1.9秒)である。そして本実施形態では、音声入力案内画像が消去されてから再度表示されるまでの時間(図5における時刻t2から時刻t8までの時間)は、当該所定時間(例えば1.9秒)と同じになっている。   As described above, in the present embodiment, the time from the start of the scrolling-in of the information indicating that the word “home screen” has been recognized as voice to the deletion of the information is a predetermined time (for example, 1.9 seconds). ). In this embodiment, the time from when the voice input guidance image is deleted until it is displayed again (the time from time t2 to time t8 in FIG. 5) is the same as the predetermined time (for example, 1.9 seconds). It has become.

以上のようにして本実施形態によれば、音声入力案内画像34などといった音声入力案内情報が表示されている際に表示されている画像のキャプチャを行っても、音声入力案内画像が配置されていない画像がキャプチャ画像としてキャプチャされることとなる。   As described above, according to the present embodiment, the voice input guidance image is arranged even when the displayed image is captured when the voice input guidance information such as the voice input guidance image 34 is displayed. No image will be captured as a captured image.

また本実施形態によれば、表示されている画像のキャプチャを要求することを表す音声を受け付けても、当該音声が認識されたことを示す情報はスクロールインされない。そのため本実施形態によれば、当該情報がスクロールインしている途中の画像がキャプチャされることを防ぐことができる。   Further, according to the present embodiment, even when a sound indicating that a capture of a displayed image is requested is received, information indicating that the sound is recognized is not scrolled in. Therefore, according to the present embodiment, it is possible to prevent an image being captured while the information is scrolling in from being captured.

以下、表示されている画像のキャプチャに関して、情報処理装置12で実装される機能についてさらに説明する。   Hereinafter, functions implemented by the information processing apparatus 12 regarding the capture of the displayed image will be further described.

図9は、表示されている画像のキャプチャに関して、本実施形態に係る情報処理装置12で実装される機能の一例を示す機能ブロック図である。なお、本実施形態に係る情報処理装置12で、図9に示す機能のすべてが実装される必要はなく、また、図9に示す機能以外の機能が実装されていても構わない。   FIG. 9 is a functional block diagram illustrating an example of functions implemented by the information processing apparatus 12 according to the present embodiment regarding capture of a displayed image. Note that the information processing apparatus 12 according to the present embodiment does not have to include all the functions illustrated in FIG. 9, and functions other than the functions illustrated in FIG. 9 may be mounted.

本実施形態に係る情報処理装置12は、図9に示すように、機能的には例えば、キャプチャ要求受付部40、ゲーム関連情報生成部42、システム関連情報生成部44、表示制御部46、キャプチャ部48、キャプチャ画像記憶部50、を含んでいる。ゲーム関連情報生成部42、システム関連情報生成部44は、制御部20を主として実装される。表示制御部46は、入出力部26を主として実装される。キャプチャ要求受付部40は、通信部24と入出力部26を主として実装される。キャプチャ部48は、制御部20と記憶部22を主として実装される。キャプチャ画像記憶部50は、記憶部22を主として実装される。   As shown in FIG. 9, the information processing apparatus 12 according to the present embodiment functionally includes, for example, a capture request reception unit 40, a game related information generation unit 42, a system related information generation unit 44, a display control unit 46, a capture Section 48 and a captured image storage section 50. The game related information generation unit 42 and the system related information generation unit 44 are mainly implemented by the control unit 20. The display control unit 46 is mainly mounted with the input / output unit 26. The capture request receiving unit 40 is mainly mounted with the communication unit 24 and the input / output unit 26. The capture unit 48 is mainly implemented by the control unit 20 and the storage unit 22. The captured image storage unit 50 is mainly implemented by the storage unit 22.

そして、以上の機能は、コンピュータである情報処理装置12にインストールされた、以上の機能に対応する指令を含むプログラムを制御部20で実行することにより実装されている。このプログラムは、例えば、光ディスク、磁気ディスク、磁気テープ、光磁気ディスク、フラッシュメモリ等のコンピュータ読み取り可能な情報記憶媒体を介して、あるいは、インターネットなどの通信手段を介して情報処理装置12に供給される。本実施形態では例えば、ゲーム関連情報生成部42の機能はゲームプログラムによって実装され、それ以外の機能はシステムプログラムによって実装される。   The above functions are implemented by causing the control unit 20 to execute a program that is installed in the information processing apparatus 12 that is a computer and that includes instructions corresponding to the above functions. This program is supplied to the information processing apparatus 12 via a computer-readable information storage medium such as an optical disk, a magnetic disk, a magnetic tape, a magneto-optical disk, or a flash memory, or via communication means such as the Internet. The In the present embodiment, for example, the function of the game related information generation unit 42 is implemented by a game program, and other functions are implemented by a system program.

キャプチャ要求受付部40は、本実施形態では、表示されている画像のキャプチャ要求を受け付ける。本実施形態では例えば、キャプチャ要求受付部40は、音声入力案内情報が表示されている際に、「スクリーンショットを撮る」との語句を表す音声などといった所定の音声を、表示されている画像のキャプチャ要求として受け付ける。この場合は例えば、当該音声を受け付けた際に、公知の音声認識エンジンによって当該音声がキャプチャ要求を表すコマンドであると特定される。   In this embodiment, the capture request reception unit 40 receives a capture request for a displayed image. In the present embodiment, for example, the capture request receiving unit 40 displays a predetermined sound such as a sound representing the phrase “take a screen shot” when the sound input guidance information is displayed. Accept as a capture request. In this case, for example, when the voice is received, the known voice recognition engine identifies the voice as a command indicating a capture request.

また本実施形態では、キャプチャ要求受付部40は、所定のボタンの押下などといった、コントローラ18に対する所定の操作入力についても、表示されている画像のキャプチャ要求として受け付ける。このように本実施形態ではユーザは、音声入力によるキャプチャ要求だけではなく、所定のボタンの押下などといったコントローラ18に対する操作入力によるキャプチャ要求も行えるようになっている。   In the present embodiment, the capture request receiving unit 40 also receives a predetermined operation input to the controller 18 such as pressing a predetermined button as a capture request for the displayed image. As described above, in this embodiment, the user can make a capture request not only by a voice input request but also by an operation input to the controller 18 such as pressing a predetermined button.

ゲーム関連情報生成部42は、本実施形態では、例えばプレイ画像32などといった、表示の対象となる情報でありゲームに関連する情報であるゲーム関連情報を生成する。本実施形態では、ゲーム関連情報は、情報処理装置12にインストールされているゲームプログラムが生成する。   In the present embodiment, the game related information generation unit 42 generates game related information that is information to be displayed and is information related to the game, such as the play image 32. In the present embodiment, the game related information is generated by a game program installed in the information processing apparatus 12.

システム関連情報生成部44は、本実施形態では、表示の対象となる情報でありシステムに関連する情報であるシステム関連情報を生成する。本実施形態では、システム関連情報は、情報処理装置12にインストールされているシステムプログラムが生成する。   In this embodiment, the system related information generation unit 44 generates system related information that is information to be displayed and is information related to the system. In the present embodiment, the system related information is generated by a system program installed in the information processing apparatus 12.

システム関連情報の一例としては、例えば音声入力案内画像34などといった、音声によるコマンドの入力が可能であることを案内する音声入力案内情報が挙げられる。また例えば上述の達成案内画像36やキャプチャ終了案内画像38もシステム関連情報に該当する。   As an example of the system related information, there is voice input guidance information for guiding that a voice command can be input, such as a voice input guidance image 34, for example. For example, the achievement guidance image 36 and the capture end guidance image 38 described above also correspond to the system related information.

なおシステム関連情報は上述のものには限定されない。例えば、ユーザが行ったアクティビティーを他のユーザが賛同したことを表す情報もシステム関連情報に該当する。ここでのアクティビティーとは、例えばゲームのプレイ、ゲームのプレイ内容を表す動画像の配信の開始、キャプチャ画像の公開などが挙げられる。また発生したエラーを示す情報、他のユーザからの友達申請があったことを示す情報、システムソフトウェアの新しいバージョンがインストールされたことを示す情報、などもシステム関連情報に該当する。   The system related information is not limited to the above-mentioned information. For example, information indicating that another user approves an activity performed by the user also corresponds to the system related information. The activity here includes, for example, playing a game, starting the distribution of a moving image representing the content of the game, and releasing the captured image. Information indicating an error that has occurred, information indicating that a friend application has been received from another user, information indicating that a new version of system software has been installed, and the like also correspond to the system-related information.

表示制御部46は、本実施形態では、ゲーム関連情報生成部42が生成するゲーム関連情報とシステム関連情報生成部44が生成するシステム関連情報とに基づいて画面を生成してディスプレイ14に表示させる。表示制御部46は、例えば、図3に示すように、システム関連情報が配置されていない画面を生成して表示させてもよい。また表示制御部46は、図4、図6〜図8に示すように、ゲーム関連情報であるプレイ画像32の一部にシステム関連情報を重畳した画像を生成して表示させてもよい。   In this embodiment, the display control unit 46 generates a screen on the display 14 based on the game related information generated by the game related information generation unit 42 and the system related information generated by the system related information generation unit 44. . For example, as shown in FIG. 3, the display control unit 46 may generate and display a screen on which no system related information is arranged. Moreover, as shown in FIGS. 4 and 6 to 8, the display control unit 46 may generate and display an image in which system related information is superimposed on a part of the play image 32 that is game related information.

また本実施形態では表示制御部46は、上述したように、表示されている画像に音声入力案内情報が配置されている場合は、キャプチャ要求の受付に応じて、当該音声入力案内情報が配置されていない画像を表示させる。   In the present embodiment, as described above, when the voice input guidance information is arranged in the displayed image, the display control unit 46 arranges the voice input guidance information in response to reception of the capture request. Display images that are not displayed.

また表示制御部46は、音声入力案内情報が配置されていない画像がキャプチャされた後に当該音声入力案内情報を再度表示させる(図5における時刻t8参照)。そのため本実施形態では、画像のキャプチャが終了すると、ユーザは音声入力案内情報によって音声によるコマンドの入力が可能であることを認識できることとなる。   In addition, the display control unit 46 displays the voice input guidance information again after the image without the voice input guidance information is captured (see time t8 in FIG. 5). Therefore, in the present embodiment, when the image capture is completed, the user can recognize that the voice command can be input by the voice input guidance information.

キャプチャ部48は、本実施形態では、キャプチャ要求受付部40によるキャプチャ要求の受付に応じて、フレームバッファに描画されている画像をキャプチャして、そのコピーをキャプチャ画像記憶部50に記憶させる。本実施形態では上述したように音声入力案内情報が表示されている画像に配置されている場合がある。この場合は、キャプチャ部48は、上述したように、キャプチャ要求の受付に応じて、音声入力案内情報が配置されていない画像をキャプチャして、そのコピーをキャプチャ画像記憶部50に記憶させる。   In this embodiment, the capture unit 48 captures an image drawn in the frame buffer in response to the capture request received by the capture request reception unit 40 and stores the copy in the captured image storage unit 50. In the present embodiment, as described above, the voice input guidance information may be arranged on the displayed image. In this case, as described above, the capture unit 48 captures an image in which the voice input guidance information is not arranged and stores the copy in the captured image storage unit 50 in response to reception of the capture request.

本実施形態では、キャプチャ部48は、上述したように、所定の音声、又は、コントローラ18に対する所定の操作入力に応じて、音声入力案内情報が配置されていない画像をキャプチャする。   In the present embodiment, as described above, the capture unit 48 captures an image on which voice input guidance information is not arranged in response to a predetermined voice or a predetermined operation input to the controller 18.

また本実施形態では、キャプチャ部48は、上述したように、表示されている画像にシステム関連情報が配置されている場合は、キャプチャ要求の受付に応じて、当該システム関連情報のうち音声入力案内情報以外の情報が配置された画像をキャプチャする。例えば図7に示すように、音声入力案内画像34は配置されていないが達成案内画像36は配置されている画像がキャプチャされる。このようにして本実施形態によればシステム関連情報の一部についてはキャプチャ画像に配置されるようにすることができる。   In the present embodiment, as described above, when the system-related information is arranged in the displayed image, the capture unit 48 provides voice input guidance in the system-related information in response to reception of the capture request. Capture an image with information other than information. For example, as illustrated in FIG. 7, an image in which the voice input guidance image 34 is not arranged but the achievement guidance image 36 is arranged is captured. Thus, according to the present embodiment, a part of the system related information can be arranged in the captured image.

また本実施形態ではキャプチャ部48は、上述したように、表示制御部46が表示させる画像をキャプチャする。   In the present embodiment, the capture unit 48 captures an image displayed by the display control unit 46 as described above.

また本実施形態ではキャプチャ部48は、表示されている画像にゲーム関連情報が配置されている場合は、キャプチャ要求の受付に応じて、当該ゲーム関連情報が配置された画像をキャプチャする。なお、表示されている画像にゲーム関連情報が配置されている場合に、キャプチャ要求の受付に応じて、当該ゲーム関連情報のみが配置された画像がキャプチャされても構わない。   In the present embodiment, when game-related information is arranged in the displayed image, the capture unit 48 captures an image in which the game-related information is arranged in response to reception of a capture request. Note that when game-related information is arranged in the displayed image, an image in which only the game-related information is arranged may be captured in response to reception of a capture request.

また本実施形態ではキャプチャ部48は、システムプログラムにおいて画像のキャプチャが許可されるか禁止されるかを示すキャプチャ可否フラグを保持する。本実施形態では例えばシステムプログラムにおいて画像のキャプチャが許可される場合はキャプチャ可否フラグの値としては「1」が設定される。また、システムプログラムにおいて画像のキャプチャが禁止される場合は、キャプチャ可否フラグの値としては「0」が設定される。本実施形態では、システムプログラムは、システムプログラムの実行状況に応じてキャプチャ可否フラグの値を自由に変更できるようになっている。   In the present embodiment, the capture unit 48 holds a capture enable / disable flag indicating whether image capture is permitted or prohibited in the system program. In this embodiment, for example, when image capture is permitted in the system program, “1” is set as the value of the capture availability flag. When image capture is prohibited in the system program, “0” is set as the value of the capture enable / disable flag. In the present embodiment, the system program can freely change the value of the capture enable / disable flag according to the execution status of the system program.

キャプチャ画像記憶部50は、本実施形態では、キャプチャ部48がキャプチャした画像を記憶する。   In the present embodiment, the captured image storage unit 50 stores the image captured by the capture unit 48.

なお、表示されている画像に音声入力案内情報以外のシステム関連情報が配置されている場合に、表示制御部46が、キャプチャ要求の受付に応じて、当該システム関連情報の少なくとも一部が配置されていない画像を表示させてもよい。そして、キャプチャ部48が、当該画像をキャプチャしてもよい。例えば図5に示されている時刻t3において、達成案内画像36が配置されたプレイ画面30の表示が行われなくてもよい。そして、音声入力案内画像34も達成案内画像36も配置されていない画像がキャプチャされてもよい。また、達成案内画像36は配置されていないが音声入力案内画像34は配置されている画像がキャプチャされてもよい。   When system related information other than the voice input guidance information is arranged in the displayed image, the display control unit 46 arranges at least a part of the system related information in response to reception of the capture request. An image that is not displayed may be displayed. Then, the capture unit 48 may capture the image. For example, the display of the play screen 30 on which the achievement guidance image 36 is arranged does not have to be performed at time t3 shown in FIG. Then, an image in which neither the voice input guidance image 34 nor the achievement guidance image 36 is arranged may be captured. Further, the achievement guidance image 36 is not arranged, but the voice input guidance image 34 may be captured.

また表示されている画像に音声入力案内情報以外のシステム関連情報が配置されている場合に、表示制御部46が、キャプチャ要求の受付に応じて、表示されている画像から当該システム関連情報のすべてが配置されていない画像を表示させてもよい。そして、キャプチャ部48が、当該画像をキャプチャしてもよい。   Further, when system related information other than the voice input guidance information is arranged in the displayed image, the display control unit 46 receives all of the system related information from the displayed image in response to reception of the capture request. An image in which is not arranged may be displayed. Then, the capture unit 48 may capture the image.

また表示制御部46が、上述のホーム画面などのように、ゲーム関連情報が配置されておらずシステム関連情報のみが配置された画面を生成して表示させてもよい。そしてこの場合にキャプチャ部48が、キャプチャ要求の受付に応じて、表示されている当該画像から音声入力案内情報が配置されていない画像をキャプチャしてもよい。   Further, the display control unit 46 may generate and display a screen on which only system related information is arranged without game related information, such as the above-described home screen. In this case, the capture unit 48 may capture an image on which the voice input guidance information is not arranged from the displayed image in response to reception of the capture request.

ここで、音声入力案内情報が表示されている場合にキャプチャ要求を受け付けた際に、本実施形態に係る情報処理装置12で行われる処理の流れの一例を、図10に例示するフロー図を参照しながら説明する。   Here, referring to the flowchart illustrated in FIG. 10 as an example of the flow of processing performed by the information processing apparatus 12 according to the present embodiment when a capture request is received when the voice input guidance information is displayed. While explaining.

キャプチャ要求受付部40がキャプチャ要求を受け付けると(S101)、表示制御部46は、音声入力案内情報が表示されている画像から消去されるよう制御する(S102)。ここでは例えば、表示制御部46は、ゲーム関連情報とシステム関連情報とを合成してプレイ画面30を生成するに際して、音声入力案内情報が合成されないように制御する。   When the capture request receiving unit 40 receives a capture request (S101), the display control unit 46 controls the voice input guidance information to be deleted from the displayed image (S102). Here, for example, the display control unit 46 controls the voice input guide information not to be synthesized when the game related information and the system related information are combined to generate the play screen 30.

そして、キャプチャ部48は、キャプチャ部48が保持するキャプチャ可否フラグの値を確認する(S103)。ここでキャプチャ可否フラグの値が「1」であることが確認された場合は、キャプチャ部48は、表示されている画像をキャプチャして、そのコピーをキャプチャ画像記憶部50に記憶させる(S104)。   Then, the capture unit 48 checks the value of the capture enable / disable flag held by the capture unit 48 (S103). If it is confirmed that the value of the capture possibility flag is “1”, the capture unit 48 captures the displayed image and stores the copy in the captured image storage unit 50 (S104). .

本実施形態では、ゲームプログラムが、表示されている画像のキャプチャが許可されるか禁止されるかを制御できるようになっている。例えば表示されているプレイの内容がゲームプログラムによって禁止区間に設定されている内容である場合は、表示されている画像のキャプチャは禁止される。このようにゲームプログラムにおいて表示されている画像のキャプチャが禁止されるよう制御されている場合は、S104に示す処理において表示されている画像のキャプチャは失敗する。そのため、S104に示す処理が終了しても表示されている画像のコピーがキャプチャ画像記憶部50に記憶されない場合がある。   In the present embodiment, the game program can control whether capture of a displayed image is permitted or prohibited. For example, when the content of the displayed play is the content set in the prohibited section by the game program, capture of the displayed image is prohibited. As described above, when the control is performed so that the capture of the image displayed in the game program is prohibited, the capture of the image displayed in the process shown in S104 fails. Therefore, a copy of the displayed image may not be stored in the captured image storage unit 50 even after the process shown in S <b> 104 is completed.

そこで、キャプチャ部48は、S104に示す処理の終了後に、キャプチャが成功したか否かを確認する(S105)。そして、キャプチャが成功したことが確認された場合は(S105:Y)、表示制御部46が、キャプチャ終了案内画像38が配置されたプレイ画面30が表示されるよう制御して(S106)、本処理例に示す処理は終了される。   Therefore, the capture unit 48 checks whether or not the capture is successful after the process shown in S104 is completed (S105). If it is confirmed that the capture is successful (S105: Y), the display control unit 46 controls the display of the play screen 30 on which the capture end guide image 38 is arranged (S106). The processing shown in the processing example is terminated.

S105に示す処理でキャプチャが失敗したことが確認された場合は(S105:N)、表示制御部46は、キャプチャできないことを案内する情報が配置されたプレイ画面30が表示されるよう制御する(S107)。S103に示す処理でキャプチャ可否フラグの値が「0」であることが確認された場合についてもS107に示す処理が実行される。そして本処理例に示す処理は終了される。   When it is confirmed that the capture has failed in the process shown in S105 (S105: N), the display control unit 46 controls to display the play screen 30 on which information for guiding that the capture cannot be performed is displayed ( S107). Even when it is confirmed in the process shown in S103 that the value of the capture possibility flag is “0”, the process shown in S107 is executed. Then, the processing shown in this processing example is finished.

なお、本発明は上述の実施形態に限定されるものではない。   In addition, this invention is not limited to the above-mentioned embodiment.

例えば、情報処理装置12が、カメラ16aやマイク16bを備えた携帯型ゲーム装置であってもよい。また、情報処理装置12は、パーソナルコンピュータ、タブレット端末、スマートフォン、ヘッドマウントディスプレイなどであっても構わない。   For example, the information processing device 12 may be a portable game device including a camera 16a and a microphone 16b. Further, the information processing apparatus 12 may be a personal computer, a tablet terminal, a smartphone, a head mounted display, or the like.

また、情報処理装置12、ディスプレイ14、カメラマイクユニット16、の役割分担は上述のものに限定されない。また、情報処理装置12が複数の筐体から構成されていてもよい。   Further, the division of roles of the information processing apparatus 12, the display 14, and the camera microphone unit 16 is not limited to the above. Further, the information processing apparatus 12 may be composed of a plurality of cases.

また、上記の具体的な文字列や数値、図面中の具体的な文字列や数値は例示であり、これらの文字列や数値には限定されない。   The specific character strings and numerical values described above and the specific character strings and numerical values in the drawings are examples, and are not limited to these character strings and numerical values.

Claims (11)

表示されている画像のキャプチャ要求を受け付ける受付部と、
表示されている画像に音声によるコマンドの入力が可能であることを案内する音声入力案内情報が配置されている場合に、前記キャプチャ要求の受付に応じて、当該音声入力案内情報が配置されていない画像を表示させる表示制御部と、
記キャプチャ要求の受付に応じて、前記表示制御部が表示させる画像をキャプチャするキャプチャ部と、
を含むことを特徴とするキャプチャ装置。
A reception unit for receiving a capture request of the displayed image;
When voice input guidance information for guiding that voice commands can be input is arranged in the displayed image, the voice input guidance information is not arranged in response to the reception of the capture request. A display control unit for displaying an image;
Depending on the reception of the previous SL capture request, a capture unit for the display control unit to capture an image to be displayed,
A capture device comprising:
前記表示制御部は、前記音声入力案内情報が配置されていない画像がキャプチャされた後に、当該音声入力案内情報を再度表示させる、
ことを特徴とする請求項に記載のキャプチャ装置。
The display control unit displays the voice input guidance information again after an image in which the voice input guidance information is not arranged is captured.
The capture device according to claim 1 .
前記キャプチャ部は、表示されている画像にシステムに関連するシステム関連情報が配置されている場合は、前記キャプチャ要求の受付に応じて、当該システム関連情報の少なくとも一部が配置されていない画像をキャプチャする、
ことを特徴とする請求項1又は2に記載のキャプチャ装置。
When the system-related information related to the system is arranged in the displayed image, the capture unit displays an image in which at least a part of the system-related information is not arranged in response to reception of the capture request. To capture,
The capture apparatus according to claim 1 or 2 , wherein
前記キャプチャ部は、表示されている画像に前記システム関連情報が配置されている場合は、前記キャプチャ要求の受付に応じて、当該システム関連情報のうち前記音声入力案内情報以外の情報が配置された画像をキャプチャする、
ことを特徴とする請求項に記載のキャプチャ装置。
When the system-related information is arranged in the displayed image, the capture unit has arranged information other than the voice input guidance information in the system-related information in response to receiving the capture request. Capture images,
The capture device according to claim 3 .
前記キャプチャ部は、表示されている画像にゲームに関連するゲーム関連情報が配置されている場合は、前記キャプチャ要求の受付に応じて、当該ゲーム関連情報が配置された前記画像をキャプチャする、
ことを特徴とする請求項1からのいずれか一項に記載のキャプチャ装置。
When the game-related information related to the game is arranged in the displayed image, the capture unit captures the image in which the game-related information is arranged in response to reception of the capture request.
Capture device according to claim 1, any one of 4, characterized in that.
前記受付部は、コントローラに対する所定の操作入力を前記キャプチャ要求として受け付け、
前記キャプチャ部は、表示されている画像に前記音声入力案内情報が配置されている場合は、前記操作入力の受付に応じて、前記音声入力案内情報が配置されていない画像をキャプチャする、
ことを特徴とする請求項1からのいずれか一項に記載のキャプチャ装置。
The accepting unit accepts a predetermined operation input to the controller as the capture request,
When the voice input guidance information is arranged in the displayed image, the capture unit captures an image in which the voice input guidance information is not arranged in response to reception of the operation input.
Capture device according to claim 1, any one of 5, characterized in that.
前記受付部は、所定の音声を前記キャプチャ要求として受け付け、
前記キャプチャ部は、表示されている画像に前記音声入力案内情報が配置されている場合は、前記音声の受付に応じて、前記音声入力案内情報が配置されていない画像をキャプチャする、
ことを特徴とする請求項1からのいずれか一項に記載のキャプチャ装置。
The reception unit receives a predetermined sound as the capture request,
When the voice input guidance information is arranged in the displayed image, the capture unit captures an image in which the voice input guidance information is not arranged according to reception of the voice.
Capture device according to claim 1, any one of 5, characterized in that.
前記音声入力案内情報には、表示されている画像のキャプチャを要求することを表す音声を表す語句が含まれる、
ことを特徴とする請求項に記載のキャプチャ装置。
The voice input guidance information includes a phrase representing a voice representing requesting capture of a displayed image.
The capture device according to claim 7 , wherein:
表示されている画像のキャプチャ要求を受け付けるステップと、
表示されている画像に音声によるコマンドの入力が可能であることを案内する音声入力案内情報が配置されている場合に、前記キャプチャ要求の受付に応じて、当該音声入力案内情報が配置されていない画像を表示させるステップと、
記キャプチャ要求の受付に応じて、前記表示させるステップで表示させる画像をキャプチャするステップと、
を含むことを特徴とするキャプチャ方法。
Receiving a capture request for the displayed image;
When voice input guidance information for guiding that voice commands can be input is arranged in the displayed image, the voice input guidance information is not arranged in response to the reception of the capture request. Displaying an image;
Depending on the reception of the previous SL capture request, the steps of capturing an image to be displayed in step of the display,
The capture method characterized by including.
表示されている画像のキャプチャ要求を受け付ける手順、
表示されている画像に音声によるコマンドの入力が可能であることを案内する音声入力案内情報が配置されている場合に、前記キャプチャ要求の受付に応じて、当該音声入力案内情報が配置されていない画像を表示させる手順、
記キャプチャ要求の受付に応じて、前記表示させる手順で表示させる画像をキャプチャする手順、
をコンピュータに実行させることを特徴とするプログラム。
A procedure to accept a capture request for the displayed image,
When voice input guidance information for guiding that voice commands can be input is arranged in the displayed image, the voice input guidance information is not arranged in response to the reception of the capture request. The procedure to display the image,
Depending on the reception of the previous SL capture request, the procedure to capture an image to be displayed in step to said display,
A program that causes a computer to execute.
表示されている画像のキャプチャ要求を受け付ける手順、
表示されている画像に音声によるコマンドの入力が可能であることを案内する音声入力案内情報が配置されている場合に、前記キャプチャ要求の受付に応じて、当該音声入力案内情報が配置されていない画像を表示させる手順、
記キャプチャ要求の受付に応じて、前記表示させる手順で表示させる画像をキャプチャする手順、
をコンピュータに実行させることを特徴とするプログラムを記憶したコンピュータ読み取り可能な情報記憶媒体。
A procedure to accept a capture request for the displayed image,
When voice input guidance information for guiding that voice commands can be input is arranged in the displayed image, the voice input guidance information is not arranged in response to the reception of the capture request. The procedure to display the image,
Depending on the reception of the previous SL capture request, the procedure to capture an image to be displayed in step to said display,
A computer-readable information storage medium storing a program characterized by causing a computer to execute.
JP2016555124A 2014-10-24 2015-08-27 Capture device, capture method, program, and information storage medium Active JP6216892B2 (en)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2014217763 2014-10-24
JP2014217763 2014-10-24
PCT/JP2015/074189 WO2016063622A1 (en) 2014-10-24 2015-08-27 Capturing device, capturing method, program, and information storage medium

Publications (2)

Publication Number Publication Date
JPWO2016063622A1 JPWO2016063622A1 (en) 2017-04-27
JP6216892B2 true JP6216892B2 (en) 2017-10-18

Family

ID=55760670

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016555124A Active JP6216892B2 (en) 2014-10-24 2015-08-27 Capture device, capture method, program, and information storage medium

Country Status (2)

Country Link
JP (1) JP6216892B2 (en)
WO (1) WO2016063622A1 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6298558B1 (en) * 2017-05-11 2018-03-20 株式会社コロプラ Method for providing virtual space, program for causing computer to execute the method, and information processing apparatus for executing the program
JP6298563B1 (en) * 2017-06-30 2018-03-20 株式会社コロプラ Program and method for providing virtual space by head mounted device, and information processing apparatus for executing the program

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1021254A (en) * 1996-06-28 1998-01-23 Toshiba Corp Information retrieval device with speech recognizing function
JP2010026686A (en) * 2008-07-17 2010-02-04 Life Interface:Kk Interactive communication terminal with integrative interface, and communication system using the same
US20110099476A1 (en) * 2009-10-23 2011-04-28 Microsoft Corporation Decorating a display environment
JP5589502B2 (en) * 2010-03-30 2014-09-17 カシオ計算機株式会社 Electronic computer and program
JP2014085954A (en) * 2012-10-25 2014-05-12 Kyocera Corp Portable terminal device, program and input operation accepting method
KR101621524B1 (en) * 2012-11-02 2016-05-31 삼성전자 주식회사 Display apparatus and control method thereof

Also Published As

Publication number Publication date
WO2016063622A1 (en) 2016-04-28
JPWO2016063622A1 (en) 2017-04-27

Similar Documents

Publication Publication Date Title
JP6259530B2 (en) Control device, control method, program, and information storage medium
JP6405316B2 (en) Entertainment device, display control method, program, and information storage medium
WO2017113856A1 (en) Barrage display method and device
JP6383409B2 (en) GUIDANCE DEVICE, GUIDANCE METHOD, PROGRAM, AND INFORMATION STORAGE MEDIUM
JP2015095002A (en) Display control device, display control method, program, and information storage medium
KR20140088820A (en) Display apparatus and control method thereof
JP6229071B2 (en) Control device, control method, program, and information storage medium
KR20140028616A (en) Screen recording method of terminal, apparauts thereof, and medium storing program source thereof
JP6216892B2 (en) Capture device, capture method, program, and information storage medium
US20220134226A1 (en) Information processing apparatus, information processing method, and program
WO2018045882A1 (en) Method and system for controlling soft operational key of application of intelligent terminal
US20170354866A1 (en) Non-transitory storage medium having game program stored therein, information processing apparatus, information processing system, game processing method
JP2016026513A (en) Game device
JP2013250738A (en) Program, information processing method, information processing device and display system
US9075880B2 (en) Method of associating multiple applications
TW202017627A (en) Interactive gamimg system
US9839839B2 (en) Information processing system including a portable terminal and a wireless controller each wirelessly connected to an information processing device
CN111167115A (en) Interactive game system
JP2015116240A (en) Terminal device, game system, and method for controlling game system
US20140085187A1 (en) Display apparatus and control method thereof
JP2006235542A (en) Image display controller and image display device

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170613

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170728

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20170905

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170925

R150 Certificate of patent or registration of utility model

Ref document number: 6216892

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250