WO2023145642A1 - 情報処理装置、情報処理方法、及びプログラム - Google Patents

情報処理装置、情報処理方法、及びプログラム Download PDF

Info

Publication number
WO2023145642A1
WO2023145642A1 PCT/JP2023/001692 JP2023001692W WO2023145642A1 WO 2023145642 A1 WO2023145642 A1 WO 2023145642A1 JP 2023001692 W JP2023001692 W JP 2023001692W WO 2023145642 A1 WO2023145642 A1 WO 2023145642A1
Authority
WO
WIPO (PCT)
Prior art keywords
frame image
display
operation mode
information processing
frame rate
Prior art date
Application number
PCT/JP2023/001692
Other languages
English (en)
French (fr)
Inventor
弘一 吉田
幸代 青木
泰成 畠澤
隆広 会沢
Original Assignee
株式会社ソニー・インタラクティブエンタテインメント
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社ソニー・インタラクティブエンタテインメント filed Critical 株式会社ソニー・インタラクティブエンタテインメント
Publication of WO2023145642A1 publication Critical patent/WO2023145642A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display

Definitions

  • the present invention relates to an information processing device, an information processing method, and a program for generating an image to be displayed on the screen of a display device.
  • a display device such as a home television receiver displays video by continuously updating a still image (frame image) displayed on the screen at a predetermined cycle (refresh rate). Therefore, an information processing device that generates a video to be displayed on a display device needs to draw each frame image that constitutes the video at a fixed frame rate that matches the refresh rate.
  • the frame rate is fixed, the rendering performance of the information processing device cannot be fully utilized, and conversely, if the rendering performance of the information processing device is insufficient, display disturbances such as stuttering and tearing occur.
  • variable refresh rate VRR
  • the display device can update the displayed image at an arbitrary refresh rate.
  • Frame images can be drawn at a rate.
  • the information processing device updates the frame image at a frame rate that changes according to its own drawing speed.
  • the present invention has been made in view of the above circumstances, and one of its objects is to provide an information processing apparatus and an information processing method capable of updating frame images that constitute a video by an appropriate method according to the situation. , and to provide a program.
  • An information processing apparatus is an information processing apparatus that draws a display frame image to be displayed on a display device and transmits the display frame image to the display device in an operation mode of either a fixed frame rate or a variable frame rate.
  • a frame image rendering unit that renders the display frame image and transmits the rendered display frame image to the display device in an operation mode with a variable frame rate; and an operation mode switching unit for switching an operation mode of the frame image drawing unit to an operation mode of a fixed frame rate when displaying a moving image including content already drawn on the display device.
  • An information processing method is an information processing method in which a display frame image to be displayed on a display device is drawn and transmitted to the display device in an operation mode of either a fixed frame rate or a variable frame rate.
  • a program draws a display frame image to be displayed on a display device, and transmits the display frame image to the display device in an operation mode of either a fixed frame rate or a variable frame rate.
  • This program may be stored in a computer-readable, non-temporary information storage medium and provided.
  • FIG. 1 is a configuration block diagram showing a schematic configuration of an information processing apparatus according to an embodiment of the present invention
  • FIG. 1 is a functional block diagram showing functions realized by an information processing device according to an embodiment of the present invention
  • FIG. FIG. 4 is a diagram showing an example of a display frame image displayed on a display device
  • 4 is a sequence diagram showing an example of the flow of processing executed by the information processing device according to the embodiment of the present invention
  • FIG. FIG. 4 is a functional block diagram showing another example of functions realized by the information processing apparatus according to the embodiment of the present invention
  • An information processing apparatus 10 is a home-use game machine, a personal computer, or the like, and includes a control unit 11, a storage unit 12, and an interface unit 13, as shown in FIG. consists of The information processing device 10 is also connected to the display device 14 and the operation device 15 so as to be capable of data communication.
  • the control unit 11 includes at least one processor such as a CPU, and executes programs stored in the storage unit 12 to perform various types of information processing.
  • the control unit 11 may include an arithmetic device such as a GPU specialized for image processing. A specific example of the processing executed by the control unit 11 in this embodiment will be described later.
  • the storage unit 12 includes at least one memory device such as RAM, and stores programs executed by the control unit 11 and data processed by the programs.
  • the storage unit 12 also includes a buffer memory that temporarily stores frame images, which will be described later.
  • the interface unit 13 is an interface for data communication between the display device 14 and the operation device 15.
  • the information processing apparatus 10 is connected to the display device 14 and the operation device 15 either by wire or wirelessly via the interface unit 13 .
  • the interface unit 13 includes a multimedia interface for transmitting video signals supplied by the information processing device 10 to the display device 14 .
  • the interface unit 13 is provided with an interface capable of transmitting a video signal in accordance with a standard compatible with a variable refresh rate such as HDMI.
  • the interface unit 13 also includes a data communication interface for receiving an operation signal indicating the content of an operation input by the user from the operation device 15 .
  • the interface unit 13 may include a communication interface for transmitting and receiving data to and from other computers via a communication network such as the Internet.
  • the display device 14 is a home television receiver, a monitor device for a personal computer, or the like, and displays video based on the video signal received from the information processing device 10 .
  • the display device 14 is compatible with the variable refresh rate technology, and frame images are displayed on the screen at an arbitrary timing determined according to the synchronization signal included in the video signal supplied by the information processing device 10. to update. That is, the display device 14 can update the displayed frame image at a dynamically changing refresh rate instead of a predetermined fixed refresh rate.
  • the operation device 15 is a device for receiving operation input by the user of the information processing apparatus 10, and may be, for example, a controller, keyboard, mouse, etc. for a home-use game machine.
  • the operation device 15 includes operation members such as buttons and a touch pad for receiving user's operation input, and transmits to the information processing apparatus 10 an operation signal indicating the content of the user's operation input to the operation member.
  • the information processing apparatus 10 functionally includes a drawing command issuing section 21, a frame image drawing section 22, and an operation mode switching section . These functions are implemented by the control unit 11 executing one or more programs stored in the storage unit 12 . These programs may be provided to the information processing apparatus 10 via a communication network such as the Internet, or may be stored in an information storage medium such as an optical disk and provided to the information processing apparatus 10 .
  • the drawing command issuing unit 21 determines the content of the frame image to be displayed on the screen of the display device 14 (hereinafter referred to as a display frame image) and issues the drawing command to the frame image drawing unit 22 .
  • the drawing command issuing unit 21 is implemented by an application program such as a game program. As an example, when executing a type of game processing in which a character is manipulated in a virtual space, the drawing command issuing unit 21 determines the positions and states of various objects placed in the virtual space, the position of the viewpoint, and the like. Issue a drawing command to draw the state of the virtual space.
  • the drawing command issuing unit 21 repeatedly issues drawing commands for such display frame images by continuously executing loop processing. As a result, the frame images displayed on the screen of the display device 14 are sequentially updated and presented to the user as video. As described above, since the display device 14 supports a variable refresh rate, the drawing command issuing unit 21 does not need to issue drawing commands at regular intervals, and the frame image drawing unit 22 draws the display frame image. is completed, a command to draw a display frame image to be displayed next can be appropriately issued.
  • the frame image drawing unit 22 draws a display frame image to be displayed on the screen of the display device 14 in accordance with the drawing command received from the drawing command issuing unit 21, and generates a video including the data of the drawn display frame image. A signal is sent to the display device 14 .
  • the frame image drawing unit 22 may be implemented by a program independent of the program that implements the drawing command issuing unit 21, such as a graphic library or game engine.
  • the frame image drawing unit 22 updates the display frame image in either the variable frame rate or fixed frame rate operation mode.
  • the update of the display frame image means that the frame image drawing unit 22 starts transmitting the drawn display frame image to the display device 14 and makes the next display frame image ready for drawing. pointing.
  • the frame image drawing unit 22 updates the display frame images at a fixed frame rate.
  • the frame image drawing unit 22 transmits the display frame image drawn in accordance with the drawing command to the display device 14 at a predetermined frame rate at regular time intervals.
  • the frame image drawing unit 22 updates the display frame image at a variable frame rate.
  • the frame image drawing unit 22 transmits the sequentially drawn display frame images to the display device 14 each time the drawing of the display frame images is completed without waiting for the elapse of the predetermined time.
  • the drawing command issuing unit 21 executes processing for issuing a drawing command for the next display frame image at the timing when the frame image drawing unit 22 updates the display frame image.
  • the drawing command issuing unit 21 can continue to issue drawing commands in a cycle matching the timing of updating the frame image for display regardless of which operation mode the frame image drawing unit 22 operates in.
  • the drawing command issuing unit 21 may cause the display device 14 to display a moving image including a part that has already been drawn.
  • the frame image to be included in the display frame image has already been drawn at the timing when the frame image drawing unit 22 draws the display frame image.
  • the moving image is hereinafter referred to as a drawn moving image.
  • the drawn moving image includes a moving image (saved moving image) that has been encoded in advance and saved in advance in a storage device such as a hard disk drive or solid state drive connected to the information processing apparatus 10.
  • a storage device such as a hard disk drive or solid state drive connected to the information processing apparatus 10.
  • the drawing command issuing unit 21 may display moving images of movie scenes stored in the storage device when a predetermined event occurs during execution of the game.
  • the drawing command issuing unit 21 simultaneously displays a moving image representing game hints and the like in a partial area of the display screen together with the game screen being played by the user.
  • FIG. 3 shows an example of a display frame image when the content of the saved moving image is included in part of the screen.
  • the content of the stored moving image is included in the area A that occupies part of the entire display frame image displayed on the display device 14 .
  • the frame image drawing unit 22 draws the content to be displayed in real time on the entire screen based on the drawing command from the drawing command issuing unit 21, and arranges the frame images that constitute the saved moving image in the position of the area A.
  • a display frame image is generated.
  • the stored video is a video that has been created in advance at a fixed frame rate. Therefore, if a display frame image including the contents of a stored moving image is drawn at a variable frame rate, there is a risk that the timing at which each frame image that constitutes the stored moving image will be displayed will deviate from the time of creation.
  • the drawn moving image may include a moving image (distributed moving image) distributed to the information processing apparatus 10 from a computer other than the information processing apparatus 10 via a communication network.
  • the information processing device 10 receives, via a communication network, a moving image representing a game screen being played by another player connected online in addition to the game screen being played by the user of the information processing device 10, and It may be displayed on the screen of the display device 14 .
  • drawing and distribution by the distribution source computer and reception and display in the information processing apparatus 10 are executed in parallel.
  • the information processing apparatus 10 sequentially receives the frame images of the distributed moving image drawn by the distribution source computer and includes them in the display frame images. That is, when displaying the content of the distribution moving image on the screen of the display device 14, the display frame images drawn by the frame image drawing unit 22 include the frame images of the distribution moving image that have already been drawn by the distribution source computer. becomes. In this case, each frame image that constitutes the distribution moving image is not necessarily drawn at a timing synchronized with the timing at which the frame image drawing unit 22 draws the display frame image.
  • the moving image to be distributed is a moving image drawn at a fixed frame rate or a variable frame rate by the distribution source computer. It will happen. Therefore, even if the distributed moving image is a moving image drawn at a variable frame rate in the distribution source computer, it is difficult for the information processing apparatus 10 to update the display frame image at a frame rate synchronized with the original frame rate. .
  • the content of the rendered moving image is appropriate in the variable frame rate operation mode in which drawing commands for a new display image are issued upon completion of rendering processing. may not be displayed in This is because the drawn moving image is a moving image generated in advance at a fixed frame rate, or a moving image generated at a frame rate different from the time required for drawing the display frame image in the information processing apparatus 10 .
  • the operation mode switching unit 23 issues a switching command for switching the operation mode of the frame image drawing unit 22 as necessary.
  • the drawing command issuing unit 21 and the operation mode switching unit 23 may be realized by the same program.
  • the operation mode switching unit 23 sends an operation mode switching command requesting operation at a fixed frame rate to the frame image drawing unit 22 .
  • This switching instruction may be implemented by calling an API provided by a program that implements the frame image drawing section 22, or the like.
  • the drawing command issuing unit 21 periodically issues a drawing command for the screen containing the drawn moving image.
  • the frame image drawing unit 22 updates the frame image for display including the content of the drawn moving image at a fixed frame rate, and displays it on the screen of the display device 14 .
  • the drawing command issuing unit 21 issues the next drawing command according to the update timing of the frame image for display by the frame image drawing unit 22, so that the drawing command issuing unit 21 causes the frame image drawing unit 22 to It is possible to continuously execute the loop processing of drawing command issuance without knowing in which operation mode it is operating.
  • This command to switch to the fixed frame rate may include information specifying the value of the frame rate after switching.
  • the frame image drawing unit 22 thereafter updates the display frame image at time intervals according to the designated frame rate value.
  • the operation mode switching unit 23 issues a switching command for switching the operation mode from the fixed frame rate to the variable frame rate to the frame image drawing unit 22. You may By doing so, the frame image drawing unit 22 can resume updating the display frame image at the variable frame rate.
  • the frame image drawing unit 22 may change the frame rate step by step instead of changing the frame rate completely by immediately switching when receiving an operation mode switching command. For example, when an instruction to switch to a fixed frame rate including specification of a frame rate value is received, if the fixed frame rate after change differs from the latest frame rate by a given threshold or more, the frame image drawing unit 22 may change the frame rate step by step by a predetermined change amount so as to gradually change to a specified frame rate value.
  • the frame image drawing unit 22 receives a drawing command from the drawing command issuing unit 21 and executes frame image drawing processing (S2). At this time, the frame image drawing unit 22 updates the display frame image in an operation mode determined according to the type of program, predetermined setting contents, and the like. Here, the frame image drawing unit 22 updates the display frame image at a variable frame rate. Therefore, when the drawing of the display frame image is completed, the frame image drawing unit 22 immediately starts transmitting the drawn display frame image to the display device 14, and notifies the drawing command issuing unit 21 of the update completion of the display frame image. (S3).
  • the drawing command issuing unit 21 receives this notification and executes processing for issuing a drawing command for the next display frame image.
  • the frame rate dynamically changes according to the time required for the frame image drawing section 22 to draw the display frame image. While the drawn moving image is not being displayed, the updating process of the display frame image at the variable frame rate is repeatedly executed by the cycle from S1 to S3 as described above.
  • the drawing command issuing unit 21 determines to display the drawn moving image on the screen of the display device 14 in accordance with the progress of processing of the application program (S4).
  • the operation mode switching unit 23 issues a command to switch to the fixed frame rate to the frame image drawing unit 22 (S5).
  • the frame image drawing unit 22 that receives this switching instruction switches its own operation mode to the fixed frame rate operation mode.
  • the drawing command issuing unit 21 issues a drawing command including the content of the drawn moving image (S6), and in response to this drawing command, the frame image drawing unit 22 executes drawing processing of the display frame image (S7).
  • the frame images for display include the frame images that constitute the rendered moving image.
  • the frame image drawing unit 22 does not start transmitting the display frame image immediately after finishing drawing the display frame image, but waits for the elapse of the time determined by the fixed frame rate before transmitting the display frame image. Then, the drawn display frame image is transmitted to the display device 14, and the completion of updating of the display frame image is notified to the drawing command issuing unit 21 (S8).
  • the drawing command issuing unit 21 decides to end the display of the drawn moving image (S9).
  • the operation mode switching unit 23 issues a command to switch to the variable frame rate to the frame image drawing unit 22 (S10).
  • the frame image drawing unit 22 that receives this switching command switches its own operation mode to the variable frame rate operation mode. After that, similar to the cycle from S1 to S3 described above, the display frame image is updated at a variable frame rate.
  • the information processing apparatus 10 may execute a plurality of application programs at the same time, and the results of processing by each of them may be displayed on the screen of the display device 14 .
  • the information processing device 10 executes a game program and displays the result on the entire screen of the display device 14, while displaying the processing result of another application program in a part of the subwindow superimposed on the result.
  • a plurality of programs issue drawing commands, respectively, and the frame image drawing section 22 receives a plurality of drawing commands and draws one frame image for display including the contents thereof.
  • FIG. 5 is a functional block diagram showing an example of functions realized by the information processing device 10 when executing two application programs in parallel.
  • the information processing apparatus 10 executes the program P1 and the program P2 at the same time, and both of these two programs realize the functions of the drawing instruction issuing section 21 and the operation mode switching section 23.
  • the program P1 implements the functions of the drawing command issuing unit 21-1 and the operation mode switching unit 23-1
  • the program P2 implements the functions of the drawing command issuing unit 21-2 and the operation mode switching unit 23-2.
  • the drawing command issuing units 21-1 and 21-2 issue to the frame image drawing unit 22 a command to draw an image showing the processing result of each program.
  • the frame image drawing unit 22 draws one frame image for display including the contents according to both drawing commands, and transmits it to the display device 14 .
  • the operation mode switching unit 23-1 sets the fixed frame rate to the frame image drawing unit 22. Issue a switch command to Similarly, when the drawing command issuing unit 21-2 determines to include the content of the drawn moving image in the display content, the operation mode switching unit 23-2 instructs the frame image drawing unit 22 to change the frame rate to the fixed frame rate. Issue a switch command.
  • the frame image drawing unit 22 When receiving a command to switch to the fixed frame rate from any program, the frame image drawing unit 22 switches to the operation mode in which the display frame image is updated at the fixed frame rate. At this time, the program on the side that does not request switching to the fixed frame rate also issues the next drawing command according to the timing at which the frame image drawing section 22 updates the frame image for display, so that the frame image drawing section Regardless of which operating mode 22 is operating in, drawing commands can continue to be issued at appropriate timings.
  • the frame image drawing unit 22 switches to the variable frame rate operation mode when the program that issued the command to switch to the fixed frame rate later issues the command to switch to the variable frame rate. Note that if both of the two programs issue commands to switch to the fixed frame rate, the frame image drawing unit 22 continues to operate at the fixed frame rate until both programs issue commands to switch to the variable frame rate. Operation shall be continued. That is, the frame image drawing unit 22 updates the frame image for display at the fixed frame rate if any one of the programs that are executed in parallel has a program that requests operation at the fixed frame rate. , the display frame image is updated at the variable frame rate only when all programs do not require operation at the fixed frame rate. As a result, when displaying a drawn moving image, the display frame image including the content of the drawn moving image is updated at a fixed frame rate regardless of which program requests display of the drawn moving image. be able to.
  • display frames are displayed at a fixed frame rate. Images can be updated, and display disturbances associated with updating at a variable frame rate can be reduced.
  • the embodiments of the present invention are not limited to those described above.
  • the frame image drawing unit 22 By operating the frame image drawing unit 22 in response to the switching command, the frame image for display can be updated in an operation mode appropriate for the situation, either the fixed frame rate or the variable frame rate.
  • the drawn moving images are not limited to those illustrated above, and the operation mode switching unit 23 switches the operation mode when displaying various moving images that are preferably displayed at a fixed frame rate rather than a variable frame rate. may be performed.
  • the drawn moving image is a moving image drawn in the past by the frame image drawing unit 22 itself and may include a moving image saved in a storage device for later reproduction.
  • 10 information processing device 11 control unit, 12 storage unit, 13 interface unit, 14 display device, 15 operation device, 21 drawing instruction issuing unit, 22 frame image drawing unit, 23 operation mode switching unit.

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

表示装置(14)に表示させる表示用フレーム画像を描画し、固定フレームレート、及び可変フレームレートのいずれかの動作モードで表示装置(14)に送信する情報処理装置であって、表示用フレーム画像を描画し、描画した表示用フレーム画像を可変フレームレートの動作モードで表示装置(14)に対して送信し、表示用フレーム画像を描画する際に既に描画済みの内容を含む動画像を表示装置(14)に表示させる場合に、動作モードを固定フレームレートの動作モードに切り替える情報処理装置である。

Description

情報処理装置、情報処理方法、及びプログラム
 本発明は、表示装置の画面に表示する映像を生成する情報処理装置、情報処理方法、及びプログラムに関する。
 一般的に、家庭用テレビ受像機などの表示装置は、画面に表示する静止画像(フレーム画像)を予め定められた周期(リフレッシュレート)で更新し続けることによって、映像を表示する。そのため、表示装置に表示させる映像を生成する情報処理装置は、このリフレッシュレートに合わせた固定のフレームレートで、映像を構成する各フレーム画像を描画する必要がある。しかしながら、フレームレートが固定されていると、情報処理装置の描画性能を十分に生かせなかったり、逆に情報処理装置の描画性能が不足している場合にスタッタリングやティアリングなどの表示の乱れが発生したりするなどの問題があった。
 そこで、HDMI(登録商標)などの映像規格においては、表示装置のリフレッシュレートを可変とする可変リフレッシュレート(VRR)と呼ばれる技術が提案されている。この技術によれば、表示装置が任意のリフレッシュレートで表示画像を更新することができるので、情報処理装置は自身の描画速度などに応じてフレームレートを動的に変化させることにより、より望ましいフレームレートでフレーム画像を描画することができる。
 上述した技術においては、情報処理装置は自身の描画速度などに応じて変化するフレームレートでフレーム画像を更新することになる。しかしながら、場合によっては、このように可変フレームレートでフレーム画像を更新することが適切でない場合がある。
 本発明は上記実情を考慮してなされたものであって、その目的の一つは、状況に応じて適切な手法で映像を構成するフレーム画像を更新することのできる情報処理装置、情報処理方法、及びプログラムを提供することにある。
 本発明の一態様に係る情報処理装置は、表示装置に表示させる表示用フレーム画像を描画し、固定フレームレート、及び可変フレームレートのいずれかの動作モードで前記表示装置に送信する情報処理装置であって、前記表示用フレーム画像を描画し、描画した前記表示用フレーム画像を可変フレームレートの動作モードで前記表示装置に対して送信するフレーム画像描画部と、前記表示用フレーム画像を描画する際に既に描画済みの内容を含む動画像を前記表示装置に表示させる場合に、前記フレーム画像描画部の動作モードを固定フレームレートの動作モードに切り替える動作モード切り替え部と、を含むことを特徴とする。
 本発明の一態様に係る情報処理方法は、表示装置に表示させる表示用フレーム画像を描画し、固定フレームレート、及び可変フレームレートのいずれかの動作モードで前記表示装置に送信する情報処理方法であって、前記表示用フレーム画像を描画し、描画した前記表示用フレーム画像を可変フレームレートの動作モードで前記表示装置に対して送信するフレーム画像描画ステップと、前記表示用フレーム画像を描画する際に既に描画済みの内容を含む動画像を前記表示装置に表示させる場合に、前記フレーム画像描画ステップにおいて固定フレームレートで前記表示用フレーム画像を前記表示装置に対して送信するよう動作モードを切り替える動作モード切り替えステップと、を含むことを特徴とする。
 本発明の一態様に係るプログラムは、表示装置に表示させる表示用フレーム画像を描画し、固定フレームレート、及び可変フレームレートのいずれかの動作モードで前記表示装置に送信するコンピュータに、前記表示用フレーム画像を描画し、描画した前記表示用フレーム画像を可変フレームレートの動作モードで前記表示装置に対して送信するフレーム画像描画ステップと、前記表示用フレーム画像を描画する際に既に描画済みの内容を含む動画像を前記表示装置に表示させる場合に、前記フレーム画像描画ステップにおいて固定フレームレートで前記表示用フレーム画像を前記表示装置に対して送信するよう動作モードを切り替える動作モード切り替えステップと、を実行させるためのプログラムである。このプログラムは、コンピュータ読み取り可能で非一時的な情報記憶媒体に格納されて提供されてよい。
本発明の実施の形態に係る情報処理装置の概略構成を示す構成ブロック図である。 本発明の実施の形態に係る情報処理装置が実現する機能を示す機能ブロック図である。 表示装置に表示される表示用フレーム画像の一例を示す図である。 本発明の実施の形態に係る情報処理装置が実行する処理の流れの一例を示すシーケンス図である。 本発明の実施の形態に係る情報処理装置が実現する機能の別の例を示す機能ブロック図である。
 以下、本発明の実施の形態について、図面に基づき詳細に説明する。
 本発明の一実施形態に係る情報処理装置10は、家庭用ゲーム機やパーソナルコンピュータ等であって、図1に示すように、制御部11と、記憶部12と、インタフェース部13と、を含んで構成されている。また、情報処理装置10は、表示装置14、及び操作デバイス15とデータ通信可能に接続されている。
 制御部11は、CPU等のプロセッサを少なくとも一つ含み、記憶部12に記憶されているプログラムを実行して各種の情報処理を実行する。制御部11は、画像処理に特化したGPUなどの演算装置を含んでもよい。なお、本実施形態において制御部11が実行する処理の具体例については、後述する。記憶部12は、RAM等のメモリデバイスを少なくとも一つ含み、制御部11が実行するプログラム、及び当該プログラムによって処理されるデータを格納する。また、記憶部12は、後述するフレーム画像を一時的に格納するバッファメモリを含む。
 インタフェース部13は、表示装置14、及び操作デバイス15との間のデータ通信のためのインタフェースである。情報処理装置10は、インタフェース部13を介して有線又は無線のいずれかで表示装置14、及び操作デバイス15のそれぞれと接続される。具体的にインタフェース部13は、情報処理装置10が供給する映像信号を表示装置14に送信するためのマルチメディアインタフェースを含むこととする。特に本実施形態においてインタフェース部13は、HDMIなどの可変リフレッシュレートに対応した規格で映像信号を送信可能なインタフェースを備えることとする。また、インタフェース部13は、ユーザーによる操作入力の内容を示す操作信号を操作デバイス15から受信するためのデータ通信インタフェースを含んでいる。さらにインタフェース部13は、インターネット等の通信ネットワークを介して他のコンピュータとデータを送受信するための通信インタフェースを含んでもよい。
 表示装置14は、家庭用テレビ受像機やパーソナルコンピュータ用のモニタ装置などであって、情報処理装置10から受信した映像信号に基づく映像を表示する。特に本実施形態では、表示装置14は可変リフレッシュレート技術に対応しており、情報処理装置10が供給する映像信号に含まれる同期信号に応じて決まる任意のタイミングで、画面に表示されるフレーム画像を更新する。すなわち、表示装置14は、予め定められた固定のリフレッシュレートではなく、動的に変化するリフレッシュレートで表示するフレーム画像を更新することができる。
 操作デバイス15は、情報処理装置10のユーザーによる操作入力を受け付けるためのデバイスであって、例えば家庭用ゲーム機用のコントローラやキーボード、マウス等であってよい。操作デバイス15は、ユーザーの操作入力を受け付けるためにボタンやタッチパッド等の操作部材を備え、その操作部材に対するユーザーの操作入力の内容を示す操作信号を情報処理装置10に対して送信する。
 以下、本実施形態において情報処理装置10が実現する機能について、図2の機能ブロック図を用いて説明する。同図に示されるように、情報処理装置10は、機能的に、描画命令発行部21と、フレーム画像描画部22と、動作モード切り替え部23と、を含んで構成されている。これらの機能は、記憶部12に格納されている1又は複数のプログラムを制御部11が実行することにより、実現される。これらのプログラムは、インターネット等の通信ネットワークを経由して情報処理装置10に提供されてもよいし、光ディスク等の情報記憶媒体に格納されて情報処理装置10に提供されてもよい。
 描画命令発行部21は、表示装置14の画面に表示すべきフレーム画像(以下、表示用フレーム画像という)の内容を決定し、その描画命令をフレーム画像描画部22に対して発行する。描画命令発行部21は、ゲームプログラムなどのアプリケーションプログラムによって実現される。一例として、仮想空間内でキャラクターを操作するタイプのゲームの処理を実行する場合、描画命令発行部21は仮想空間内に配置される各種オブジェクトの位置や状態、また視点位置などを決定し、その仮想空間の様子を描画する描画命令を発行する。
 描画命令発行部21は、ループ処理を継続して実行することにより、このような表示用フレーム画像の描画命令を繰り返し発行する。これにより、表示装置14の画面に表示されるフレーム画像が順次更新され、映像としてユーザーに提示される。前述したように、表示装置14は可変リフレッシュレートに対応しているため、描画命令発行部21は描画命令を一定時間おきに発行する必要はなく、フレーム画像描画部22が表示用フレーム画像の描画を終了したタイミングで適宜次に表示すべき表示用フレーム画像の描画命令を発行することができる。
 フレーム画像描画部22は、描画命令発行部21から受け付けた描画命令に応じて、表示装置14の画面に表示するための表示用フレーム画像を描画し、描画した表示用フレーム画像のデータを含む映像信号を表示装置14に対して送信する。フレーム画像描画部22は、例えばグラフィックライブラリやゲームエンジンなど、描画命令発行部21を実現するプログラムとは独立したプログラムによって実現されてよい。
 フレーム画像描画部22は、可変フレームレート、及び固定フレームレートのいずれかの動作モードで表示用フレーム画像を更新する。ここで表示用フレーム画像の更新とは、フレーム画像描画部22が描画済みの表示用フレーム画像の表示装置14への送信を開始し、次の表示用フレーム画像を描画可能な状態にすることを指している。
 具体的に、描画命令発行部21を実現するプログラムや接続されている表示装置が可変リフレッシュレートに対応していない場合、フレーム画像描画部22は固定フレームレートで表示用フレーム画像の更新を行う。この場合、フレーム画像描画部22は描画命令に応じて描画した表示用フレーム画像を、予め定められたフレームレートで一定時間おきに表示装置14に対して送信する。
 これに対して、可変リフレッシュレートに対応する表示装置14が接続されており、描画命令発行部21を実現するプログラムが可変フレームレートでの描画に対応するプログラムである場合には、フレーム画像描画部22は可変フレームレートで表示用フレーム画像を更新する。この場合、フレーム画像描画部22は、所定時間の経過を待たずに、表示用フレーム画像の描画が終了するごとに、順次描画した表示用フレーム画像を表示装置14に送信する。
 どちらの動作モードにおいても、描画命令発行部21は、フレーム画像描画部22が表示用フレーム画像を更新するタイミングで、次の表示用フレーム画像の描画命令を発行するための処理を実行する。これにより、フレーム画像描画部22がどちらの動作モードで動作していても、描画命令発行部21は表示用フレーム画像が更新されるタイミングに合わせたサイクルで描画命令を発行し続けることができる。
 ここで、描画命令発行部21は、予め用意された動画像や情報処理装置10の外部から提供される動画像など、フレーム画像描画部22自身がリアルタイムで表示用フレーム画像の描画を行う際には既に描画済みの部分を含む動画像を、表示装置14に表示させる場合がある。このように、表示装置14に表示される対象となる動画像であるが、フレーム画像描画部22が表示用フレーム画像を描画するタイミングにおいてその表示用フレーム画像に含めるべきフレーム画像が既に描画済みの動画像を、以下では描画済み動画像という。
 具体的に、描画済み動画像には、事前にエンコーディングされ、情報処理装置10に接続されたハードディスクドライブやソリッドステートドライブなどの記憶デバイスに予め保存されている動画像(保存動画像)が含まれてよい。例えば描画命令発行部21は、ゲームの実行中に所定のイベントが発生した場合などに、記憶デバイスに保存されているムービーシーンの動画像を表示することがある。また、描画命令発行部21は、ユーザーがプレイ中のゲーム画面とともに、表示画面内の一部の領域にゲームのヒントなどを表す動画像を同時に表示することがある。
 図3は、このように保存動画像の内容が画面の一部に含まれる場合の表示用フレーム画像の一例を示している。この図の例では、表示装置14に表示される表示用フレーム画像全体のうち、一部を占める領域A内に保存動画像の内容が含まれている。この場合フレーム画像描画部22は、画面全体について描画命令発行部21の描画命令に基づいてリアルタイムで表示すべき内容を描画するとともに、領域Aの位置に保存動画像を構成するフレーム画像を配置することによって、表示用フレーム画像を生成する。
 一般的に、保存動画像は固定フレームレートで予め作成された動画像である。そのため、保存動画像の内容を含む表示用フレーム画像を可変フレームレートで描画すると、保存動画像を構成する各フレーム画像が表示されるタイミングが作成時とずれてしまうおそれがある。
 また、描画済み動画像には、情報処理装置10とは別のコンピュータから通信ネットワークを経由して情報処理装置10に対して配信される動画像(配信動画像)が含まれてよい。例えば情報処理装置10は、情報処理装置10のユーザー自身がプレイ中のゲーム画面とは別に、オンラインで接続された他のプレイヤーがプレイ中のゲーム画面を表す動画像を通信ネットワーク経由で受信し、表示装置14の画面に表示する場合がある。この場合、配信元のコンピュータによる描画及び配信と、情報処理装置10における受信及び表示が、並行して実行されることとなる。
 このようにリアルタイムで配信が行われる場合も、情報処理装置10は、配信元コンピュータで描画された配信動画像のフレーム画像を順次受信し、表示用フレーム画像に含めることとなる。すなわち、配信動画像の内容を表示装置14の画面に表示する場合、フレーム画像描画部22が描画する表示用フレーム画像には、配信元コンピュータで描画済みの配信動画像のフレーム画像が含まれることとなる。この場合に配信動画像を構成する各フレーム画像は、フレーム画像描画部22が表示用フレーム画像を描画するタイミングと同期するタイミングで描画されたものとは限らない。具体的に、配信動画像は配信元コンピュータによって固定フレームレート又は可変フレームレートで描画された動画像であるが、どちらの場合にも所与のフォーマットでエンコーディングされて情報処理装置10に配信されることとなる。そのため、配信動画像が配信元コンピュータにおいて可変フレームレートで描画された動画像であったとしても、元のフレームレートと同期したフレームレートで情報処理装置10が表示用フレーム画像を更新することは難しい。
 以上説明したように、描画済み動画像を表示対象に含める場合、描画処理の終了を契機に新たな表示画像の描画命令を発行する可変フレームレートの動作モードでは、描画済み動画像の内容が適切に表示されないおそれがある。描画済み動画像は、固定フレームレートで予め生成された動画像や、情報処理装置10において表示用フレーム画像の描画に要する時間とは異なるフレームレートで生成された動画像であるためである。
 そこで本実施形態に係る情報処理装置10においては、動作モード切り替え部23が、必要に応じてフレーム画像描画部22の動作モードを切り替える切り替え命令を発行する。描画命令発行部21と動作モード切り替え部23は、同じプログラムによって実現されてよい。
 具体的に、動作モード切り替え部23は、描画済み動画像の内容を表示すると描画命令発行部21が決定した場合、固定フレームレートで動作するよう要求する動作モード切り替え命令をフレーム画像描画部22に対して発行する。この切り替え命令は、フレーム画像描画部22を実現するプログラムが提供するAPIの呼び出しなどによって実現されてよい。
 その後、描画命令発行部21は、描画済み動画像を含む画面の描画命令を定期的に発行する。これに応じてフレーム画像描画部22は、描画済み動画像の内容を含む表示用フレーム画像を固定フレームレートで更新し、表示装置14の画面に表示させる。なお、前述したようにフレーム画像描画部22による表示用フレーム画像の更新タイミングに応じて描画命令発行部21が次の描画命令を発行することによって、描画命令発行部21はフレーム画像描画部22がどちらの動作モードで動作しているか関知することなく、描画命令発行のループ処理を継続して実行することができる。
 この固定フレームレートへの切り替え命令には、切り替え後のフレームレートの値を指定する情報が含まれてもよい。そのような切り替え命令を受け付けた場合、フレーム画像描画部22は、それ以降、指定されたフレームレートの値に応じた時間間隔で表示用フレーム画像を更新する。
 さらに、描画命令発行部21が描画済み動画像の表示を終了するタイミングで、動作モード切り替え部23は固定フレームレートから可変フレームレートに動作モードを切り替える切り替え命令をフレーム画像描画部22に対して発行してもよい。こうすれば、フレーム画像描画部22は可変フレームレートによる表示用フレーム画像の更新を再開できる。
 なお、フレーム画像描画部22は、動作モードの切り替え命令を受け付けた場合に、直ちに切り替えを行ってフレームレートを完全に変更するのではなく、フレームレートを段階的に変更してもよい。例えばフレームレートの値の指定を含む固定フレームレートへの切り替え命令を受け付けた際に、変更後の固定フレームレートが直近のフレームレートに対して所与の閾値以上に異なる場合、フレーム画像描画部22は、徐々に指定されたフレームレートの値まで変化するように、所定の変化量ずつ段階的にフレームレートを変化させてもよい。
 以下、本実施形態に係る情報処理装置10が実行する処理の流れの一例について、図4のシーケンス図を用いて説明する。
 まず、ユーザーの操作デバイス15に対する操作入力などによって描画命令発行部21を実現するアプリケーションプログラムの実行が開始される。その後、描画命令発行部21は、アプリケーションプログラムの処理を実行しつつ、その処理結果を表示装置14の画面に表示するために、毎フレームの描画命令を発行する(S1)。
 フレーム画像描画部22は、描画命令発行部21からの描画命令を受け付けて、フレーム画像の描画処理を実行する(S2)。このとき、フレーム画像描画部22は、プログラムの種類や予め定められている設定内容などに応じて決定される動作モードで表示用フレーム画像を更新する。ここではフレーム画像描画部22は、可変フレームレートで表示用フレーム画像を更新することとする。そのためフレーム画像描画部22は、表示用フレーム画像の描画が終了すると、直ちに描画された表示用フレーム画像の表示装置14に対する送信を開始するとともに、表示用フレーム画像の更新完了を描画命令発行部21に通知する(S3)。描画命令発行部21は、この通知を受けて、次の表示用フレーム画像の描画命令を発行するための処理を実行する。これにより、フレームレートはフレーム画像描画部22が表示用フレーム画像の描画に要する時間に応じて動的に変化することとなる。描画済み動画像の表示が行われない間は、以上説明したようなS1からS3のサイクルによって、可変フレームレートによる表示用フレーム画像の更新処理が繰り返し実行される。
 その後、ここでは描画命令発行部21は、アプリケーションプログラムの処理の進行に応じて、描画済み動画像を表示装置14の画面に表示することを決定したとする(S4)。この決定を受けて、動作モード切り替え部23は、フレーム画像描画部22に対して固定フレームレートへの切り替え命令を発行する(S5)。この切り替え命令を受け付けたフレーム画像描画部22は、自身の動作モードを固定フレームレートの動作モードに切り替える。
 固定フレームレートの動作モードに切り替えられた後は、前述したS1からS3までのサイクルと類似する表示用フレーム画像の更新処理が繰り返し実行される。すなわち、描画命令発行部21は描画済み動画像の内容を含む描画命令を発行し(S6)、この描画命令に応じてフレーム画像描画部22は表示用フレーム画像の描画処理を実行する(S7)。このとき、表示用フレーム画像には、描画済み動画像を構成するフレーム画像が含まれることになる。そして、ここではフレーム画像描画部22は、表示用フレーム画像の描画を終了した後、直ちに表示用フレーム画像の送信を開始するのではなく、固定フレームレートによって決定される時間の経過を待ってから、描画した表示用フレーム画像を表示装置14に送信するとともに、表示用フレーム画像の更新完了を描画命令発行部21に通知する(S8)。
 さらにその後、描画命令発行部21が、描画済み動画像の表示の終了を決定したとする(S9)。この決定を受けて、動作モード切り替え部23は、フレーム画像描画部22に対して可変フレームレートへの切り替え命令を発行する(S10)。この切り替え命令を受け付けたフレーム画像描画部22は、自身の動作モードを可変フレームレートの動作モードに切り替える。その後は、前述したS1からS3のサイクルと同様に、可変フレームレートによる表示用フレーム画像の更新処理が行われる。
 なお、以上の説明においては、一つのアプリケーションプログラムによって表示用フレーム画像に含まれる表示内容が全て決定されるものとしている。しかしながら、情報処理装置10は複数のアプリケーションプログラムを同時期に実行し、そのそれぞれによる処理の結果が表示装置14の画面に表示されることがある。例えば情報処理装置10は、ゲームプログラムを実行してその結果を表示装置14の画面全体に表示しつつ、その結果に重ねて一部のサブウィンドウ内に他のアプリケーションプログラムの処理結果を表示したりする場合がある。その場合、複数のプログラムがそれぞれ描画命令を発行し、フレーム画像描画部22は複数の描画命令を受け付けてそれらの内容を含む一枚の表示用フレーム画像を描画することになる。
 図5は、二つのアプリケーションプログラムを並列実行する場合に情報処理装置10が実現する機能の一例を示す機能ブロック図である。この図の例では、情報処理装置10がプログラムP1及びプログラムP2を同時期に実行し、これら二つのプログラムがどちらも描画命令発行部21及び動作モード切り替え部23の機能を実現することとしている。すなわち、プログラムP1は描画命令発行部21-1及び動作モード切り替え部23-1の機能を実現し、プログラムP2は描画命令発行部21-2及び動作モード切り替え部23-2の機能を実現している。
 描画命令発行部21-1及び21-2は、それぞれのプログラムの処理結果を示す画像の描画命令をフレーム画像描画部22に対して発行する。これらの描画命令を受けて、フレーム画像描画部22は双方の描画命令に応じた内容を含む1枚の表示用フレーム画像を描画し、表示装置14に対して送信する。
 そして、この例において動作モード切り替え部23-1は、描画命令発行部21-1が描画済み動画像の内容を表示内容に含めると決定した場合に、フレーム画像描画部22に対して固定フレームレートへの切り替え命令を発行する。同様に、動作モード切り替え部23-2は、描画命令発行部21-2が描画済み動画像の内容を表示内容に含めると決定した場合に、フレーム画像描画部22に対して固定フレームレートへの切り替え命令を発行する。
 フレーム画像描画部22は、いずれかのプログラムから固定フレームレートへの切り替え命令を受け付けた場合、固定フレームレートで表示用フレーム画像を更新する動作モードへと切り替える。このとき、固定フレームレートへの切り替えを要求していない側のプログラムも、フレーム画像描画部22が表示用フレーム画像を更新するタイミングに応じて次の描画命令を発行することにより、フレーム画像描画部22がどちらの動作モードで動作しているかにかかわらず、適切なタイミングで描画命令の発行を継続することができる。
 さらにフレーム画像描画部22は、固定フレームレートへの切り替え命令を発行したプログラムが後に可変フレームレートへの切り替え命令を発行した場合、可変フレームレートの動作モードへの切り替えを行う。なお、仮に二つのプログラムがどちらも固定フレームレートへの切り替え命令を発行していた場合、双方のプログラムが可変フレームレートへの切り替え命令を発行するまで、フレーム画像描画部22は固定フレームレートでの動作を継続することとする。すなわち、フレーム画像描画部22は、並列実行される複数のプログラムのうち、いずれか一つでも固定フレームレートでの動作を要求するプログラムがあれば固定フレームレートで表示用フレーム画像を更新することとし、全てのプログラムが固定フレームレートでの動作を要求していない場合に限って可変フレームレートで表示用フレーム画像を更新することとする。これにより、描画済み動画像を表示する場合、その描画済み動画像の表示を要求するのがどのプログラムであっても、描画済み動画像の内容を含む表示用フレーム画像を固定フレームレートで更新することができる。
 以上説明したように、本実施形態に係る情報処理装置10によれば、可変フレームレートで表示することが適切でない描画済み動画像の内容を含む表示を行う場合に、固定フレームレートで表示用フレーム画像の更新を行うことができ、可変フレームレートでの更新に伴う表示の乱れを軽減することができる。
 なお、本発明の実施の形態は以上説明したものに限られない。例えば以上の説明では、1又は2のプログラムが描画命令を発行する場合の例について説明したが、これに限らず3以上のプログラムが並列に動作する場合にも、それぞれのプログラムからの描画命令及び切り替え命令に応じてフレーム画像描画部22が動作することにより、固定フレームレート及び可変フレームレートのうち状況に応じて適切な動作モードで表示用フレーム画像を更新することができる。
 また、描画済み動画像は以上例示したものに限られず、動作モード切り替え部23は、可変フレームレートよりも固定フレームレートで表示することが望ましい各種の動画像を表示する場合に、動作モードの切り替えを行うこととしてよい。例えば描画済み動画像は、フレーム画像描画部22自身が過去に描画した動画像であって、後に再生するために記憶デバイスに保存された動画像などを含んでもよい。
 10 情報処理装置、11 制御部、12 記憶部、13 インタフェース部、14 表示装置、15 操作デバイス、21 描画命令発行部、22 フレーム画像描画部、23 動作モード切り替え部。

Claims (8)

  1.  表示装置に表示させる表示用フレーム画像を描画し、固定フレームレート、及び可変フレームレートのいずれかの動作モードで前記表示装置に送信する情報処理装置であって、
     前記表示用フレーム画像を描画し、描画した前記表示用フレーム画像を可変フレームレートの動作モードで前記表示装置に対して送信するフレーム画像描画部と、
     前記表示用フレーム画像を描画する際に既に描画済みの内容を含む動画像を前記表示装置に表示させる場合に、前記フレーム画像描画部の動作モードを固定フレームレートの動作モードに切り替える動作モード切り替え部と、
     を含むことを特徴とする情報処理装置。
  2.  請求項1に記載の情報処理装置において、
     前記動作モード切り替え部は、前記動画像の表示を終了する場合に、前記フレーム画像描画部の動作モードを可変フレームレートの動作モードに切り替える
     ことを特徴とする情報処理装置。
  3.  請求項1又は2に記載の情報処理装置において、
     前記動作モード切り替え部は、前記フレーム画像描画部の動作モードを固定フレームレートの動作モードに切り替える際に、フレームレートの値を併せて指定し、
     前記フレーム画像描画部は、前記指定されたフレームレートの値に応じた時間間隔で前記表示用フレーム画像を前記表示装置に対して送信する
     ことを特徴とする情報処理装置。
  4.  請求項1に記載の情報処理装置において、
     前記情報処理装置は複数のプログラムを同時期に実行し、
     前記複数のプログラムのそれぞれは、自身が前記動画像を前記表示装置に表示させる場合に、前記フレーム画像描画部の動作モードを固定フレームレートの動作モードに切り替える前記動作モード切り替え部として機能し、
     前記フレーム画像描画部は、前記複数のプログラムのいずれか少なくとも一つが固定フレームレートへの切り替えを要求する場合に、固定フレームレートの動作モードで前記表示用フレーム画像を前記表示装置に対して送信する
     ことを特徴とする情報処理装置。
  5.  請求項1に記載の情報処理装置において、
     前記動画像は、事前に描画され、前記情報処理装置に接続された記憶デバイスに保存されている動画像を含む
     ことを特徴とする情報処理装置。
  6.  請求項1に記載の情報処理装置において、
     前記動画像は、前記情報処理装置とは別のコンピュータから配信される動画像を含む
     ことを特徴とする情報処理装置。
  7.  表示装置に表示させる表示用フレーム画像を描画し、固定フレームレート、及び可変フレームレートのいずれかの動作モードで前記表示装置に送信する情報処理方法であって、
     前記表示用フレーム画像を描画し、描画した前記表示用フレーム画像を可変フレームレートの動作モードで前記表示装置に対して送信するフレーム画像描画ステップと、
     前記表示用フレーム画像を描画する際に既に描画済みの内容を含む動画像を前記表示装置に表示させる場合に、前記フレーム画像描画ステップにおいて固定フレームレートで前記表示用フレーム画像を前記表示装置に対して送信するよう動作モードを切り替える動作モード切り替えステップと、
     を含むことを特徴とする情報処理方法。
  8.  表示装置に表示させる表示用フレーム画像を描画し、固定フレームレート、及び可変フレームレートのいずれかの動作モードで前記表示装置に送信するコンピュータに、
     前記表示用フレーム画像を描画し、描画した前記表示用フレーム画像を可変フレームレートの動作モードで前記表示装置に対して送信するフレーム画像描画ステップと、
     前記表示用フレーム画像を描画する際に既に描画済みの内容を含む動画像を前記表示装置に表示させる場合に、前記フレーム画像描画ステップにおいて固定フレームレートで前記表示用フレーム画像を前記表示装置に対して送信するよう動作モードを切り替える動作モード切り替えステップと、
     を実行させるためのプログラム。
PCT/JP2023/001692 2022-01-31 2023-01-20 情報処理装置、情報処理方法、及びプログラム WO2023145642A1 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2022013445 2022-01-31
JP2022-013445 2022-01-31

Publications (1)

Publication Number Publication Date
WO2023145642A1 true WO2023145642A1 (ja) 2023-08-03

Family

ID=87471779

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2023/001692 WO2023145642A1 (ja) 2022-01-31 2023-01-20 情報処理装置、情報処理方法、及びプログラム

Country Status (1)

Country Link
WO (1) WO2023145642A1 (ja)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8542221B1 (en) * 2009-06-25 2013-09-24 Nvidia Corporation Method and system for optimizing display power reduction through a continuously variable refresh rate adjustment
JP2018061674A (ja) * 2016-10-12 2018-04-19 株式会社コーエーテクモゲームス ゲームプログラム及び記録媒体

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8542221B1 (en) * 2009-06-25 2013-09-24 Nvidia Corporation Method and system for optimizing display power reduction through a continuously variable refresh rate adjustment
JP2018061674A (ja) * 2016-10-12 2018-04-19 株式会社コーエーテクモゲームス ゲームプログラム及び記録媒体

Similar Documents

Publication Publication Date Title
WO2020207250A1 (zh) 垂直同步方法、装置、终端及存储介质
US6331854B1 (en) Method and apparatus for accelerating animation in a video graphics system
EP2731077B1 (en) Image display system, information processing device, server, and image processing method
JP5411386B1 (ja) ゲームを提供するサーバ及び方法
WO2022184041A1 (zh) 画面显示方法、装置、终端设备及存储介质
JPWO2013128709A1 (ja) 情報処理システム、情報処理方法、情報処理プログラム、情報処理プログラムを記録したコンピュータ読み取り可能な記録媒体、情報処理装置
US20230405478A1 (en) Combined system for game live-streaming and gameplay
JP5174120B2 (ja) ゲーム装置及びゲームプログラム
CN112188264A (zh) 基于Android实现多窗口播放视频的方法及终端
WO2023145642A1 (ja) 情報処理装置、情報処理方法、及びプログラム
US6439999B1 (en) Method for controlling execution of processing in video game, storage medium storing processing execution control program, and game apparatus
US20220040571A1 (en) Systems and methods of transferring state data for applications
WO2023145643A1 (ja) 情報処理装置、情報処理方法、及びプログラム
JP7422784B2 (ja) 情報処理装置、情報処理方法、及びプログラム
WO2023145641A1 (ja) 情報処理装置、その制御方法、及びプログラム
US9075880B2 (en) Method of associating multiple applications
JP2013250738A (ja) プログラム、情報処理方法、情報処理装置及び表示システム
US8972479B2 (en) Methods and apparatus for online program application execution between servers
WO2024009919A1 (ja) 情報処理装置、情報処理装置の制御方法、及びプログラム
JP6475923B2 (ja) ゲームシステム及びこれに用いられるゲームサーバ
JP7101889B2 (ja) 振動デバイス、情報処理装置、及び振動制御システム
US12001655B2 (en) Synchronizing user actions to account for data delay
WO2023145615A1 (ja) 情報処理装置、情報処理装置の制御方法、プログラム、及び記録媒体
JP6824446B2 (ja) エミュレーションの選択的加速
CN117677429A (zh) 用于云游戏的直通装置及用于处理的方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 23746855

Country of ref document: EP

Kind code of ref document: A1