JP5669698B2 - GUI placement simulator and GUI placement setting support method - Google Patents

GUI placement simulator and GUI placement setting support method Download PDF

Info

Publication number
JP5669698B2
JP5669698B2 JP2011199885A JP2011199885A JP5669698B2 JP 5669698 B2 JP5669698 B2 JP 5669698B2 JP 2011199885 A JP2011199885 A JP 2011199885A JP 2011199885 A JP2011199885 A JP 2011199885A JP 5669698 B2 JP5669698 B2 JP 5669698B2
Authority
JP
Japan
Prior art keywords
gui
size
display
screen
setting
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2011199885A
Other languages
Japanese (ja)
Other versions
JP2013061804A (en
Inventor
徹 小木曽
徹 小木曽
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Interactive Entertainment Inc
Original Assignee
Sony Interactive Entertainment Inc
Sony Computer Entertainment Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Interactive Entertainment Inc, Sony Computer Entertainment Inc filed Critical Sony Interactive Entertainment Inc
Priority to JP2011199885A priority Critical patent/JP5669698B2/en
Priority to US14/239,922 priority patent/US9952755B2/en
Priority to CN201280042985.3A priority patent/CN103782263B/en
Priority to EP12832539.6A priority patent/EP2722742A4/en
Priority to PCT/JP2012/005391 priority patent/WO2013038605A1/en
Publication of JP2013061804A publication Critical patent/JP2013061804A/en
Application granted granted Critical
Publication of JP5669698B2 publication Critical patent/JP5669698B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Position Input By Displaying (AREA)
  • User Interface Of Digital Computer (AREA)

Description

本発明は、タッチパネルを用いてユーザの手操作入力を受け付ける情報処理技術に関する。   The present invention relates to an information processing technology that accepts a user's manual operation input using a touch panel.

近年、携帯ゲーム機、携帯電話、PDA(Personal Data Asistance)、タブレットなど、携帯を想定した小型の情報機器が普及している。このような小型の機器はそのサイズ上の制約から入力手段も限定される。結果として、小型機器に特化した入力手段や機能が独自の発達を遂げてきた。例えばディスプレイ表面をタッチパネルで覆い、指やタッチペンでの入力を可能とすることにより、ディスプレイに表示されたオブジェクトなどを直接操作しているような感覚を与えることができる。   In recent years, small information devices such as portable game machines, mobile phones, PDAs (Personal Data Asistance), and tablets are assumed to be portable. Such small devices are also limited in input means due to size restrictions. As a result, input means and functions specialized for small devices have been developed independently. For example, by covering the display surface with a touch panel and enabling input with a finger or a touch pen, it is possible to give a feeling of directly operating an object or the like displayed on the display.

一方、そのような小型機器を利用して、設置型のゲーム機やパーソナルコンピュータと同等の情報処理を行う環境も整いつつある。例えば小型機器をユーザが操作し、ネットワークを介して接続した設置型の機器が実際の情報処理を行うことにより、高度なゲームを、場所を問わず楽しめるようになってきた。また、設置型の機器のためのゲームをエミュレートすることにより小型の機器で実行することも可能となってきている。   On the other hand, using such a small device, an environment for performing information processing equivalent to a stationary game machine or a personal computer is being prepared. For example, a user operates a small device, and an installed device connected via a network performs actual information processing, so that advanced games can be enjoyed regardless of location. It has also become possible to run on small devices by emulating games for stationary devices.

このように近年では、ゲームなどの情報処理を、機器の大きさや使用環境に関わらず行えるようにする技術的方向性がみられる。しかしながら、小型の機器を利用してそのような高度化した情報処理を実施しようとすると、上述のとおり入力手段の制約に起因して操作性が劣ってしまう、という問題があった。また小型の機器にあっては特に、画面サイズを確保するために、GUI(Graphical User Interface)を入力手段として画面内に表示することが有効であるが、表示する内容ごと、装置の画面サイズごとに細かい設定を行うのは困難であった。   Thus, in recent years, there is a technical direction that enables information processing such as games to be performed regardless of the size of the device and the usage environment. However, when trying to carry out such advanced information processing using a small device, there is a problem that the operability is inferior due to the limitation of the input means as described above. In particular, for small devices, it is effective to display a GUI (Graphical User Interface) on the screen as an input means in order to ensure the screen size. However, for each content to be displayed and each screen size of the device. It was difficult to make detailed settings.

本発明はこのような課題に鑑みてなされたものであり、その目的は、表示する内容や画面のサイズに適した形態の入力手段を容易に実現できる技術を提供することにある。   The present invention has been made in view of such problems, and an object of the present invention is to provide a technique that can easily realize an input unit having a form suitable for the content to be displayed and the size of the screen.

本発明の態様はGUI配置シミュレータに関する。このGUI配置シミュレータは、タッチパネルで覆われたディスプレイを備えた情報処理装置において情報処理の結果として表示すべきコンテンツ画像にオンスクリーン表示するGUI(Graphical User Interface)の配置に係る情報の設定を支援するGUI配置シミュレータであって、GUIの位置およびサイズの基本設定値を受け付ける配置設定受付部と、想定する情報処理装置のディスプレイのサイズ指定を受け付ける画面サイズ指定受付部と、基本設定値から求められるディスプレイのサイズに対する条件と指定されたディスプレイのサイズとの比較結果に対応する調整を行うことによりGUIの位置およびサイズを決定し、指定されたサイズを有する仮想的な画面を表す矩形領域に、決定に従う配置でGUIを表示するGUI画像表示部と、確定された前記基本設定値をGUI配置情報ファイルとして格納する記憶部と、を備えることを特徴とする。   An aspect of the present invention relates to a GUI placement simulator. This GUI placement simulator supports setting of information related to the placement of a GUI (Graphical User Interface) that is displayed on-screen on a content image to be displayed as a result of information processing in an information processing apparatus including a display covered with a touch panel. A GUI placement simulator, a placement setting receiving unit that receives basic setting values of the position and size of a GUI, a screen size designation receiving unit that receives a size specification of a display of an assumed information processing device, and a display obtained from the basic setting values The position and size of the GUI is determined by performing an adjustment corresponding to the comparison result between the condition for the size of the display and the size of the specified display, and the rectangular area representing the virtual screen having the specified size is obeyed. A GUI image display unit for displaying a GUI by arrangement; A storage unit for storing the determined the basic setting value as the GUI layout information file, characterized in that it comprises a.

本発明の別の態様はGUI配置設定支援方法に関する。このGUI配置設定支援方法は、タッチパネルで覆われたディスプレイを備えた情報処理装置において情報処理の結果として表示すべきコンテンツ画像にオンスクリーン表示するGUI(Graphical User Interface)の配置に係る情報の設定を支援するGUI配置シミュレータが行うGUI配置設定支援方法であって、GUIの位置およびサイズの基本設定値を受け付けるステップと、仮想的な情報処理装置のディスプレイのサイズ指定を受け付けるステップと、基本設定値から求められるディスプレイのサイズに対する条件と指定されたディスプレイのサイズとの比較結果に対応する調整を行うことによりGUIの位置およびサイズを決定するステップと、指定されたサイズを有する仮想的な画面を表す矩形領域に、決定に従う配置でGUIを配置した画像をディスプレイに表示するステップと、確定された前記基本設定値をGUI配置情報ファイルとして記憶装置に格納するステップと、を含むことを特徴とする。   Another aspect of the present invention relates to a GUI arrangement setting support method. This GUI layout setting support method sets information related to the layout of a GUI (Graphical User Interface) that is displayed on-screen on a content image to be displayed as a result of information processing in an information processing apparatus having a display covered with a touch panel. A GUI placement setting support method performed by a supporting GUI placement simulator, the step of receiving a basic setting value of a GUI position and size, the step of receiving a size specification of a display of a virtual information processing apparatus, and a basic setting value A step of determining the position and size of the GUI by making an adjustment corresponding to the comparison result between the condition for the required display size and the specified display size, and a rectangle representing a virtual screen having the specified size Place GUI in the area according to the decision And displaying the image on the display has, characterized in that it comprises the steps of storing in a storage device the determined the basic setting value as the GUI layout information file, a.

なお、以上の構成要素の任意の組合せ、本発明の表現を方法、装置、システム、コンピュータプログラムなどの間で変換したものもまた、本発明の態様として有効である。   It should be noted that any combination of the above-described constituent elements and a representation of the present invention converted between a method, an apparatus, a system, a computer program, etc. are also effective as an aspect of the present invention.

本発明によると、表示する内容や画面サイズに適した入力手段を容易に実現できる。   According to the present invention, it is possible to easily realize input means suitable for the content to be displayed and the screen size.

本実施の形態の情報処理装置の外観例を示す図である。It is a figure which shows the example of an external appearance of the information processing apparatus of this Embodiment. 本実施の形態においてジョイスティックGUIとして表示するグラフィックスと、その操作手法を説明するための図である。It is a figure for demonstrating the graphics displayed as joystick GUI in this Embodiment, and its operation method. 本実施の形態における情報処理装置の構成を詳細に示す図である。It is a figure which shows the structure of the information processing apparatus in this Embodiment in detail. 本実施の形態におけるGUI配置情報ファイルに記録されるデータの構造例を示す図である。It is a figure which shows the structural example of the data recorded on the GUI arrangement | positioning information file in this Embodiment. 図4で示したGUI配置情報テーブルで設定される、各GUIの位置およびサイズの設定例を説明するための図である。FIG. 5 is a diagram for explaining an example of setting the position and size of each GUI set in the GUI arrangement information table shown in FIG. 4. 本実施の形態におけるGUI配置部がGUIの位置およびサイズを決定する原理を説明するための図である。It is a figure for demonstrating the principle in which the GUI arrangement | positioning part in this Embodiment determines the position and size of GUI. 本実施の形態における画面サイズの変化に対するGUI画像の変化例を示す図である。It is a figure which shows the example of a change of the GUI image with respect to the change of the screen size in this Embodiment. 本実施の形態においてユーザがGUIの位置とサイズを調整するための受付画面の例を示す図である。It is a figure which shows the example of the acceptance screen for a user to adjust the position and size of GUI in this Embodiment. 本実施の形態のGUIの位置とサイズを調整するための受付画面において調整対象のGUIが移動中の画面例を示す図である。It is a figure which shows the example of a screen in which the GUI of adjustment object is moving in the reception screen for adjusting the position and size of GUI of this Embodiment. 本実施の形態における情報処理装置がGUI画像表示に係る処理を行う手順を示すフローチャートである。It is a flowchart which shows the procedure in which the information processing apparatus in this Embodiment performs the process which concerns on a GUI image display. 本実施の形態においてGUI配置情報ファイルの作成を支援するGUI配置シミュレータの構成を示す図である。It is a figure which shows the structure of the GUI arrangement | positioning simulator which supports preparation of a GUI arrangement | positioning information file in this Embodiment. 本実施の形態におけるGUI配置シミュレータによって表示される画面例を示す図である。It is a figure which shows the example of a screen displayed by the GUI arrangement | positioning simulator in this Embodiment. 本実施の形態におけるGUI配置シミュレータがGUI配置情報ファイルの作成を支援する処理手順を示すフローチャートである。It is a flowchart which shows the process sequence which the GUI arrangement | positioning simulator in this Embodiment supports creation of a GUI arrangement | positioning information file. 本実施の形態において1つのコンテンツ実行ファイルに複数のGUI配置情報ファイルを対応づける態様を説明するための図である。It is a figure for demonstrating the aspect which matches several GUI arrangement | positioning information file with one content execution file in this Embodiment.

図1は本実施の形態の情報処理装置の外観例を示している。情報処理装置10はユーザが持ち運びできる小型の装置であり、携帯電話、PDA、携帯ゲーム機、タブレットなどのいずれでもよい。またそれらを組み合わせた機能を有していてもよい。そのため情報処理装置10は、機能に応じた様々な処理機構を備えてよいが、それらは一般的な技術を利用できるため、以後、適宜説明を省略する。   FIG. 1 shows an example of the appearance of the information processing apparatus according to the present embodiment. The information processing apparatus 10 is a small apparatus that can be carried by the user, and may be any of a mobile phone, a PDA, a portable game machine, a tablet, and the like. Moreover, you may have the function which combined them. Therefore, the information processing apparatus 10 may include various processing mechanisms according to functions, but since these can use general techniques, description thereof will be omitted as appropriate.

情報処理装置10は、ディスプレイ14が本体前面に配置され、起動スイッチ40が側面に配置された構成を有する。ディスプレイ14の背面にはCPU、グラフィックプロセッサユニット、サウンドプロセッサ、メモリなど各種情報処理に必要な機構が内蔵されている(図示せず)。ディスプレイ14は液晶ディスプレイ、EL(Electronic Luminescence)ディスプレイ、プラズマディスプレイなど一般的なディスプレイのいずれかでよい。ディスプレイ14の上面はタッチパネル12で覆われている。タッチパネル12は抵抗膜方式、光学式、静電容量結合式など実用化されている方式のいずれかで実現する。   The information processing apparatus 10 has a configuration in which the display 14 is disposed on the front surface of the main body and the start switch 40 is disposed on the side surface. On the back surface of the display 14, mechanisms necessary for various information processing such as a CPU, a graphic processor unit, a sound processor, and a memory are incorporated (not shown). The display 14 may be a general display such as a liquid crystal display, an EL (Electronic Luminescence) display, or a plasma display. The upper surface of the display 14 is covered with the touch panel 12. The touch panel 12 is realized by any one of the practically used systems such as a resistive film system, an optical system, and a capacitive coupling system.

情報処理装置10はそのほか、音声を出力するスピーカ、イヤホン接続端子、他の装置との通信を行う赤外線ポートや無線LANの機構、電池ボックスなどを備えてよいが、ここでは図示を省略している。   In addition, the information processing apparatus 10 may include a speaker that outputs sound, an earphone connection terminal, an infrared port that communicates with other apparatuses, a wireless LAN mechanism, a battery box, and the like, but the illustration is omitted here. .

ディスプレイ14には、メニュー画面、アイコンなどユーザの操作入力に必要な画面、情報処理の結果であるゲーム画面、動画再生画面、テキスト表示画面、写真表示画面などを機能に応じて表示する。さらに、それを見ながらユーザが操作入力を行うためのGUIをオンスクリーン表示する。   The display 14 displays a menu screen, a screen necessary for user operation input such as an icon, a game screen as a result of information processing, a moving image playback screen, a text display screen, a photo display screen, and the like according to functions. Further, a GUI for allowing the user to input an operation while viewing it is displayed on the screen.

ユーザは当該GUIを操作するように、タッチパネル12上を手指で触れたり手指を滑らせたりすることにより、情報処理装置10への操作入力を行う。図1においては、方向キーのグラフィックスを表示した方向キーGUI42、○ボタン、×ボタン、□ボタン、△ボタンの4種の操作ボタン群のグラフィックスを表示した4種ボタンGUI44、全方向対応の方向指示を行うためのグラフィックスを表示したジョイスティックGUI46a、46b、「L」ボタンのグラフィックスを表示したLボタンGUI48、「R」ボタンのグラフィックスを表示したRボタンGUI50、「SELECT」ボタンと「START」ボタンのグラフィックスを表示したSELECT/STARTボタンGUI52がGUIとして装備されている。   The user performs operation input to the information processing apparatus 10 by touching the touch panel 12 with a finger or sliding the finger so as to operate the GUI. In FIG. 1, a direction key GUI 42 displaying graphics of direction keys, a four-button GUI 44 displaying graphics of four types of operation buttons such as a circle button, a x button, a square button, and a triangle button, all-direction compatible. Joystick GUIs 46a and 46b displaying graphics for instructing the direction, L button GUI 48 displaying the graphics of the “L” button, R button GUI 50 displaying the graphics of the “R” button, “SELECT” button, and “ A SELECT / START button GUI 52 displaying graphics of the “START” button is equipped as a GUI.

以後、同図で示すGUIを例に説明するが、これらはあくまで例示であり、そのデザインや役割を限定する主旨ではない。これらのGUIは例えば、据え置き型のゲーム機のコントローラなどと同等の操作性を有する入力手段を実現するために導入される。方向キーGUI42は、上下左右の4方向、またはその中間の方向を含む8方向にキーイン可能に構成されており、例えば画面上でのカーソルの移動や、画面のスクロールなどに用いられる。またゲーム画面においてゲームに登場しているキャラクターの移動方向を変化させるのに用いるなどでもよい。   Hereinafter, the GUI shown in the figure will be described as an example, but these are merely examples, and are not intended to limit the design and role. These GUIs are introduced, for example, to realize input means having operability equivalent to a controller of a stationary game machine. The direction key GUI 42 is configured to be able to be keyed in four directions including up, down, left, and right directions, or eight directions including an intermediate direction thereof, and is used for moving a cursor on the screen, scrolling the screen, and the like. Further, it may be used to change the moving direction of characters appearing in the game on the game screen.

4種ボタンGUI44には、実行する処理内容によりそれぞれ異なる機能が割り付けられる。例えばメニュー画面において所望の項目を選択するときは、一覧表示された項目名やアイコンのうち強調表示の対象を方向キーGUI42のいずれかの方向のキーに触れることにより移動させ、4種ボタンGUI44の○ボタンに触れることにより確定させる。また会話型のゲームにおいて、4種ボタンGUI44の○ボタンや×ボタンに触れることにより肯定、否定の意思表示を行うなどでもよい。   Different functions are assigned to the four types of buttons GUI 44 depending on the processing contents to be executed. For example, when selecting a desired item on the menu screen, the highlight target of the item names and icons displayed in the list is moved by touching a key in any direction of the direction key GUI 42 and the four-type button GUI 44 is selected. ○ Confirm by touching the button. Also, in an interactive game, an affirmative or negative intention may be displayed by touching the ○ button or the x button of the four-type button GUI 44.

LボタンGUI48、RボタンGUI50は、例えばゲームにおける視線の方向を変えたり、他のボタンと同時に操作することによって、異なる動きを加えたりするのに用いられる。SELECT/STARTボタンGUI52のうち「SELECT」ボタンは、例えばメニューとして表示された項目から選択するのに用いられ、「START」ボタンは動画、音楽再生などを開始させるのに用いられる。   The L button GUI 48 and the R button GUI 50 are used, for example, to add different movements by changing the direction of the line of sight in the game or operating simultaneously with other buttons. The “SELECT” button of the SELECT / START button GUI 52 is used to select, for example, an item displayed as a menu, and the “START” button is used to start playing a moving image, music, or the like.

「SELECT」ボタンと「START」ボタンの間には図示するように、SELECT/STARTボタンGUI52の表示/非表示を切り替えるためのボタンを表す図形をさらに表示してもよい。この状態で当該図形に触れるとSELECT/STARTボタンGUI52が非表示ととなり当該図形のみが残される。その状態で当該図形を操作すると、SELECT/STARTボタンGUI52が表れる。また当該図形に触れることにより、図形以外のすべてのGUIを非表示とし、一時的にコンテンツの視認性をよくしたり、コンテンツへのタッチをしやすくするなどの目的で用いることもできる。この場合も、再度当該図形に触れることにより、一旦非表示とされたGUIが再表示される。なおLボタンGUI48、RボタンGUI50、SELECT/STARTボタンGUI52も実行する処理内容により様々な機能が割り付けられてよい。   Between the “SELECT” button and the “START” button, as shown in the figure, a graphic representing a button for switching display / non-display of the SELECT / START button GUI 52 may be further displayed. When the figure is touched in this state, the SELECT / START button GUI 52 is not displayed and only the figure remains. When the figure is operated in this state, a SELECT / START button GUI 52 appears. In addition, by touching the graphic, all GUIs other than the graphic can be hidden, and it can be used for the purpose of temporarily improving the visibility of the content or easily touching the content. In this case as well, the GUI once hidden is displayed again by touching the graphic again. Various functions may be assigned to the L button GUI 48, the R button GUI 50, and the SELECT / START button GUI 52 depending on the processing content to be executed.

左右のジョイスティックGUI46a、46bは、ゲームのコントローラなどに用いられる任意方向に傾倒可能なジョイスティックを画像として擬似的に再現したGUIである。ジョイスティックGUI46a、46bは少なくとも一つの円によって構成され、円の中心からユーザによる接触点までの方向および距離に基づき方向および大きさを入力するように構成される。   The left and right joystick GUIs 46a and 46b are GUIs that simulate a joystick that can be tilted in an arbitrary direction used for a game controller or the like as an image. The joystick GUIs 46a and 46b are configured by at least one circle, and are configured to input the direction and size based on the direction and distance from the center of the circle to the contact point by the user.

このGUIにより任意方向、任意量の入力が可能となるため、ゲームに登場するキャラクタやオブジェクトの移動方向や移動速度、視野の転回などのコントロールに用いることができる。図2はジョイスティックGUI46aとして表示するグラフィックスと、その操作手法を説明するための図である。ジョイスティックGUI46bも同様である。   Since this GUI allows an arbitrary direction and an arbitrary amount to be input, it can be used for controlling the moving direction and moving speed of characters and objects appearing in the game, turning the field of view, and the like. FIG. 2 is a diagram for explaining graphics displayed as the joystick GUI 46a and an operation method thereof. The same applies to the joystick GUI 46b.

ジョイスティックGUI46aへの操作は、ユーザがジョイスティックGUI46aのグラフィックスとして表示されている円72内の領域に触れた後、そのまま離すことなくタッチパネル上で指を滑らせている期間において有効とする。そして同図左側に示すように、円72の中心74からユーザの指76aの接触点までの方向ベクトル71aの方向および大きさを連続的に取得し、実際のジョイスティックを操作したときの傾倒方向および傾倒角度に対応する入力方向および入力値とする。   The operation on the joystick GUI 46a is valid during a period in which the user touches the area in the circle 72 displayed as graphics of the joystick GUI 46a and then slides his / her finger on the touch panel without releasing it. Then, as shown on the left side of the figure, the direction and magnitude of the direction vector 71a from the center 74 of the circle 72 to the contact point of the user's finger 76a are continuously acquired, and the tilt direction when the actual joystick is operated and The input direction and input value correspond to the tilt angle.

このとき指76aが触れている箇所に円などの標識70を表示し、接触点の移動に合わせて移動させる。標識70は、好適には指によって隠れない大きさ、形状を有する。さらに、輝いているような画像上の加工をその周囲に施したり、接触点の移動を追尾するように僅かに位置をずらしたり、移動跡をかすかに表示したりすることでさらに視認されやすくなる。   At this time, a sign 70 such as a circle is displayed at a position touched by the finger 76a, and is moved in accordance with the movement of the contact point. The sign 70 preferably has a size and shape that is not hidden by the finger. Furthermore, it is easier to visually recognize the image by processing it around the image that is shining, shifting the position slightly so as to track the movement of the contact point, and displaying the movement trace faintly. .

ジョイスティックGUI46aへの操作が有効な期間、すなわち円72内の領域を始点とする接触が継続している期間は、同図右側に示すように、円72の外側の領域も当該操作の検知領域とする。例えばタッチパネル12の全領域を検知領域としてもよい。このとき、ディスプレイ14に表示された他のGUIを無効とすることにより、ジョイスティックGUI46aへの操作を、広い面積を用いてより自由に行える。   During the period when the operation to the joystick GUI 46a is effective, that is, the period when the contact starting from the area in the circle 72 is continued, as shown on the right side of FIG. To do. For example, the entire area of the touch panel 12 may be the detection area. At this time, by disabling the other GUI displayed on the display 14, the joystick GUI 46a can be operated more freely using a large area.

指76bの接触点が円72の外側にあるときは、円の中心74からの方向のみを入力方向として取得し、入力値は中心74から接触点までの距離によらず円72または所定半径を有する同心円(同図においては同心円77)の半径の値で飽和させる。このとき標識70は円72の円周に内接させた状態で、接触点の方向に対応して移動するように表示する。   When the contact point of the finger 76b is outside the circle 72, only the direction from the center 74 of the circle is acquired as the input direction, and the input value is the circle 72 or a predetermined radius regardless of the distance from the center 74 to the contact point. It is saturated with the value of the radius of the concentric circle (concentric circle 77 in the figure). At this time, the marker 70 is displayed so as to move in accordance with the direction of the contact point while being inscribed in the circumference of the circle 72.

このようなGUIを設けることによって実現できる操作の内容は、情報処理装置が実現する機能に応じたボタン割り付けによって様々に変化させることができる。本実施の形態ではこのように、据え置き型のゲーム機やパーソナルコンピュータにおける入力手段をタッチパネルの形式で再現することにより、小型の情報機器における操作入力のバリエーションを据え置き型のゲーム機などと同等にできる。また据え置き型のゲーム機で慣れたゲームを、小型の機器でも違和感なく同様の操作性で行える。   The content of the operation that can be realized by providing such a GUI can be variously changed by button assignment according to the function realized by the information processing apparatus. In this embodiment, as described above, by reproducing the input means in a stationary game machine or personal computer in the form of a touch panel, the variation of operation input in a small information device can be made equivalent to that of a stationary game machine. . In addition, games that are familiar with stationary game machines can be played with the same operability without any discomfort even with small devices.

一方、このように画面内に入力手段を設ける環境は、入力手段の種類を増やしたりサイズを大きくしたりして操作性を追求することと、コンテンツ画像など処理結果としての本来の画像を見やすくすることとの間にトレードオフの関係を生じさせる。両者の最適なバランスは、情報処理の内容、表示させたい画像、入力手段の種類や使用頻度、画面サイズ、など様々な要因で変化する。本実施の形態ではそのような要因の変化に対応できるGUIの表示機構を実現する。   On the other hand, the environment in which the input means is provided in the screen as described above is to improve operability by increasing the types of input means and increasing the size, and to make it easy to see the original image as a processing result such as a content image. This creates a trade-off relationship. The optimal balance between the two changes depending on various factors such as the contents of information processing, the image to be displayed, the type and frequency of use of the input means, and the screen size. In the present embodiment, a GUI display mechanism that can cope with such a change in factors is realized.

図3は情報処理装置10の構成を詳細に示している。情報処理装置10は上述したタッチパネル12、ディスプレイ14のほか、コンテンツを表示させるためのプログラムや各種データを記憶したコンテンツ記憶部16、GUIとして用意された素材画像のデータを記憶したGUI画像記憶部18、タッチパネル12からの入力信号受信やディスプレイ14への画像データの出力を制御する入出力制御部20、各GUIのサイズや配置のユーザによる調整を受け付けるGUI配置調整受付部21、タッチパネルからの入力信号を操作内容の情報に変換する操作情報変換部22、各GUIの画像を画面の座標系に配置するGUI配置部26、配置後のGUI画像を一時記憶するGUI画像バッファ28を含む。   FIG. 3 shows the configuration of the information processing apparatus 10 in detail. In addition to the touch panel 12 and the display 14 described above, the information processing apparatus 10 includes a content storage unit 16 that stores a program for displaying content and various data, and a GUI image storage unit 18 that stores data of material images prepared as a GUI. , Input / output control unit 20 that controls input signal reception from touch panel 12 and output of image data to display 14, GUI arrangement adjustment acceptance unit 21 that accepts adjustments by the user of the size and arrangement of each GUI, and input signals from the touch panel Includes an operation information conversion unit 22 that converts information into operation content information, a GUI arrangement unit 26 that arranges images of each GUI in the coordinate system of the screen, and a GUI image buffer 28 that temporarily stores the GUI image after arrangement.

情報処理装置10はさらに、GUIへの操作内容に応じてコンテンツ表示に係る情報処理を実行するコンテンツ処理部24、コンテンツの画像を生成するコンテンツ画像生成部30、生成したコンテンツの画像を一時記憶するコンテンツ画像バッファ32、コンテンツの画像上にGUI画像をオンスクリーン表示した画像を生成する画像合成部34を含む。   The information processing apparatus 10 further temporarily stores the content processing unit 24 that performs information processing related to content display according to the operation content on the GUI, the content image generation unit 30 that generates the content image, and the generated content image. The content image buffer 32 includes an image composition unit 34 that generates an image obtained by on-screen displaying a GUI image on the content image.

ここで「コンテンツ」は、コンピュータゲーム、動画、文章、写真、絵など電子的に処理しディスプレイ表示が可能な対象であればその種類は限定されない。また本実施の形態は、一般的な「コンテンツ」以外に、ウェブページの閲覧、スケジュール管理、住所録表示、文書作成、表計算など一般的な情報処理に対しても適用できる。以下の説明では、そのような画像表示を伴う情報処理を行うことを「コンテンツの実行」と総称する。   Here, the type of “content” is not limited as long as it is a target that can be electronically processed and displayed on a computer game, a movie, a sentence, a photograph, a picture, or the like. In addition to general “content”, this embodiment can also be applied to general information processing such as web page browsing, schedule management, address book display, document creation, and spreadsheet. In the following description, performing information processing with such image display is collectively referred to as “execution of content”.

またGUI配置部26が画面の座標系に配置した各GUIで構成される画像を以後、「GUI画像」と呼ぶ。すなわち情報処理の結果である「コンテンツ画像」上に「GUI画像」をオンスクリーン表示した画像が最終的な画像としてディスプレイ14に表示される。   An image composed of GUIs arranged by the GUI arrangement unit 26 in the coordinate system of the screen is hereinafter referred to as “GUI image”. That is, an image obtained by on-screen displaying a “GUI image” on a “content image” that is a result of information processing is displayed on the display 14 as a final image.

図3および後述する図11において、様々な処理を行う機能ブロックとして記載される各要素は、ハードウェア的には、CPU、メモリ、その他のLSIで構成することができ、ソフトウェア的には、コンテンツを処理したり画像処理を行うプログラムなどによって実現される。したがって、これらの機能ブロックがハードウェアのみ、ソフトウェアのみ、またはそれらの組合せによっていろいろな形で実現できることは当業者には理解されるところであり、いずれかに限定されるものではない。   In FIG. 3 and FIG. 11 described later, each element described as a functional block for performing various processes can be configured with a CPU, a memory, and other LSIs in terms of hardware, and content in terms of software. This is realized by a program or the like for processing the image or image processing. Therefore, it is understood by those skilled in the art that these functional blocks can be realized in various forms by hardware only, software only, or a combination thereof, and is not limited to any one.

入出力制御部20は既存の方法でタッチパネル12、ディスプレイ14と接続し、データの入出力を制御する。タッチパネル12から受信する入力信号は、タッチパネル12上でユーザが触れた接触点の座標、接触点が連続的に移動したときの座標の移動経路などである。タッチパネル12における接触点の検知手法はその方式によって異なるためここでは言及しない。入出力制御部20はまた、ディスプレイ14に表示画像のビデオ信号を出力する。   The input / output control unit 20 is connected to the touch panel 12 and the display 14 by an existing method, and controls data input / output. The input signal received from the touch panel 12 includes the coordinates of the contact point touched by the user on the touch panel 12, the movement path of the coordinates when the contact point continuously moves, and the like. The touch point detection method on the touch panel 12 is not described here because it differs depending on the method. The input / output control unit 20 also outputs a video signal of a display image to the display 14.

コンテンツ記憶部16は、コンテンツの処理に必要なプログラムや画像データなど各種データを記録したコンテンツ実行ファイル38のほか、当該コンテンツに対応づけて設定され、各GUIの位置およびサイズに係る基本的な情報を記録したGUI配置情報ファイル36、ユーザがGUIの位置およびサイズを調整した結果を記録したユーザ設定情報ファイル37を記憶する。GUI配置情報ファイル36はコンテンツ作成者などにより作成され、コンテンツ実行ファイル38と対応づけられて提供される。GUI配置調整受付部21は、このように提供されたGUI配置情報ファイル36に記録された情報、すなわち各GUIの位置やサイズを、ユーザが自分の好みに合わせて調整しユーザ設定情報ファイル37を作成するためのインターフェースである。   In addition to the content execution file 38 in which various data such as programs and image data necessary for content processing are recorded, the content storage unit 16 is set in association with the content, and includes basic information regarding the position and size of each GUI. Are stored, and a user setting information file 37 that records the result of the user adjusting the position and size of the GUI is stored. The GUI arrangement information file 36 is created by a content creator or the like, and is provided in association with the content execution file 38. The GUI arrangement adjustment receiving unit 21 adjusts the information recorded in the GUI arrangement information file 36 thus provided, that is, the position and size of each GUI according to the user's preference, and sets the user setting information file 37. It is an interface for creating.

コンテンツ実行ファイル38は例えば、コンテンツがゲームであれば、そのプログラム、プレイヤーの情報、前回のプレイ時の到達レベルなどの情報を記録する。コンテンツが映画や音楽であれば、圧縮符号化されたビデオデータ、オーディオデータと、それを復号再生するためのプログラムなどを記録する。コンテンツ記憶部16は、ハードディスクドライブでもよいし、メモリカード、ROMディスク、光ディスク、光磁気ディスクなどのリムーバブル記録媒体とそれに対応した読み取り装置との組み合わせで実現してもよい。   For example, if the content is a game, the content execution file 38 records the program, information about the player, information such as the level reached at the previous play. If the content is a movie or music, video data and audio data that have been compression-encoded and a program for decoding and reproducing the data are recorded. The content storage unit 16 may be a hard disk drive, or may be realized by a combination of a removable recording medium such as a memory card, a ROM disk, an optical disk, a magneto-optical disk, and a reading device corresponding thereto.

GUI画像記憶部18は、方向キーや4種ボタンなど、GUI画像の素材となる画像データを記憶するハードディスクドライブなどの記憶装置である。操作情報変換部22は、タッチパネル12からの入力信号を入出力制御部20から取得し、当該信号に含まれる接触点の座標などを操作内容の情報へ変換する。具体的には図1で示したGUIへの操作の解釈のほか、初期画面などで表示されるアイコン配列やメニュー画面からの選択入力についても、接触点に基づき選択された項目を特定する。   The GUI image storage unit 18 is a storage device such as a hard disk drive that stores image data serving as a GUI image material, such as direction keys and four types of buttons. The operation information conversion unit 22 acquires an input signal from the touch panel 12 from the input / output control unit 20, and converts the coordinates of the contact point included in the signal into information on the operation content. Specifically, in addition to the interpretation of the operation to the GUI shown in FIG. 1, the item selected based on the contact point is specified for the icon arrangement displayed on the initial screen and the selection input from the menu screen.

そのため、アイコン、メニュー項目、GUIなど操作対象のグラフィックスが表示される領域と、当該領域が触れられたときの操作内容との対応関係を示す情報を、コンテンツ実行ファイル38に記録しておき、操作情報変換部22がそれを読み出す。さらに図1で示したGUIの領域に係る情報は、GUI配置部26がGUI画像を生成した際に、GUI配置部26からの通知により取得する。   Therefore, information indicating a correspondence relationship between the area where the operation target graphics such as an icon, a menu item, and a GUI are displayed and the operation content when the area is touched is recorded in the content execution file 38. The operation information conversion unit 22 reads it. Further, the information related to the GUI area shown in FIG. 1 is acquired by notification from the GUI arrangement unit 26 when the GUI arrangement unit 26 generates a GUI image.

そしてコンテンツ実行ファイル38に設定された、GUIの識別情報と操作内容との対応づけに基づき、領域と操作内容との対応づけを行う。実際の操作時は、入出力制御部20から取得した接触点の座標が現在表示されている各GUIの検知領域内にある場合に、当該GUIに対応づけられた操作内容を特定する。   Then, based on the association between the GUI identification information set in the content execution file 38 and the operation content, the region is associated with the operation content. During actual operation, if the coordinates of the contact point acquired from the input / output control unit 20 are within the detection area of each GUI currently displayed, the operation content associated with the GUI is specified.

操作内容の情報のうちコンテンツ処理に係る情報はコンテンツ処理部24へ、GUIの表示に係る情報はGUI配置部26へ、それぞれ通知される。GUI配置部26は、コンテンツの選択操作がなされたときや、GUIの表示を変化させるべき操作がなされたときに、コンテンツ記憶部16から読み出したユーザ設定情報ファイル37またはGUI配置情報ファイル36に設定された情報に基づき、GUI画像記憶部18から読み出した各GUIの画像を適宜拡縮して画面の座標系に配置する。GUI配置情報ファイル36を読み出した場合、GUI配置部26は、自装置のディスプレイ14の画面サイズと、GUI配置情報ファイル36に設定された情報とを比較し、設定を遵守しながら画面サイズに合うように、GUIの位置とサイズを決定する。   Of the operation content information, information related to content processing is notified to the content processing unit 24, and information related to GUI display is notified to the GUI placement unit 26, respectively. The GUI arrangement unit 26 is set in the user setting information file 37 or the GUI arrangement information file 36 read from the content storage unit 16 when a content selection operation is performed or when an operation to change the GUI display is performed. Based on the obtained information, each GUI image read from the GUI image storage unit 18 is appropriately scaled up and arranged in the coordinate system of the screen. When the GUI arrangement information file 36 is read, the GUI arrangement unit 26 compares the screen size of the display 14 of its own device with the information set in the GUI arrangement information file 36, and fits the screen size while complying with the setting. Thus, the position and size of the GUI are determined.

配置の結果生成したGUI画像はGUI画像バッファ28に格納する。さらに、決定したGUIの位置とサイズの情報は、操作情報変換部22にも与える。GUI配置部26と操作情報変換部22とを、双方向の情報伝送可能に構成することにより、現在表示されているGUIに対する操作に応じて別のGUIを新たに表示したり、配置、大きさ、デザインなどを変化させられるようにできる。例えば図2で示したジョイスティックGUI46aへの操作が有効となっている状態において、無効となる他のGUIの画像を非表示としてもよい。標識70の表示も同様の機構により行える。   The GUI image generated as a result of the arrangement is stored in the GUI image buffer 28. Further, the information on the determined position and size of the GUI is also given to the operation information conversion unit 22. By configuring the GUI arrangement unit 26 and the operation information conversion unit 22 so that bidirectional information transmission is possible, another GUI is newly displayed according to the operation on the currently displayed GUI, and the arrangement and size are displayed. , You can change the design. For example, in the state where the operation on the joystick GUI 46a shown in FIG. 2 is enabled, other GUI images that are disabled may be hidden. The display of the sign 70 can be performed by a similar mechanism.

コンテンツ処理部24は、コンテンツ記憶部16が記憶するコンテンツ実行ファイル38を参照し、ユーザの操作内容に応じたコンテンツの処理を行う。実際の処理手順はコンテンツの内容に応じて一般的に行われている通りである。コンテンツ画像生成部30は、コンテンツ処理部24による処理の結果として出力すべきコンテンツ画像のデータを生成し、コンテンツ画像バッファ32に格納する。   The content processing unit 24 refers to the content execution file 38 stored in the content storage unit 16 and processes the content according to the user's operation details. The actual processing procedure is as generally performed according to the content. The content image generation unit 30 generates content image data to be output as a result of the processing by the content processing unit 24 and stores it in the content image buffer 32.

画像合成部34は、GUI画像バッファ28に格納されたGUI画像のデータと、コンテンツ画像バッファ32に格納されたコンテンツ画像のデータを用いて画像処理を行うことにより、コンテンツ画像上にGUI画像がオンスクリーン表示された画像を生成し内部のフレームバッファに格納する。当該フレームバッファに格納された画像に対応するビデオ信号が、入出力制御部20の制御のもとディスプレイ14に送信されることにより、GUIを含む画像がディスプレイ14に表示される。   The image composition unit 34 performs image processing using the GUI image data stored in the GUI image buffer 28 and the content image data stored in the content image buffer 32, thereby turning on the GUI image on the content image. Generates a screen-displayed image and stores it in the internal frame buffer. A video signal corresponding to the image stored in the frame buffer is transmitted to the display 14 under the control of the input / output control unit 20, whereby an image including a GUI is displayed on the display 14.

図4はGUI配置情報ファイル36に記録されるデータの構造例を示している。本実施の形態では上述のとおり、コンテンツごとに1つのGUI配置情報ファイル36を、標準設定として画面サイズによらず共通に作成しておき、各情報処理装置のGUI配置部26が、当該ファイルを参照しながら自装置の画面サイズに適した位置とサイズで各GUIを配置する。   FIG. 4 shows an example of the structure of data recorded in the GUI arrangement information file 36. In the present embodiment, as described above, one GUI arrangement information file 36 for each content is created in common as a standard setting regardless of the screen size, and the GUI arrangement unit 26 of each information processing apparatus creates the file. Each GUI is arranged at a position and size suitable for the screen size of its own device while referring to it.

GUI配置情報ファイル36に記録されるGUI配置情報テーブル100は、GUI識別情報欄102、表示切り替え欄104、位置欄106、サイズ欄108、左右リンク欄110を含む。GUI識別情報欄102は、表示可能なGUIの識別情報を示す。同図においては、「Lボタン」、「Rボタン」、「左ジョイスティック」、「右ジョイスティック」、「方向キー」、「4種ボタン」「SELECT/STARTボタン(水平)」、「SELECT/STARTボタン(垂直)」の8つのGUIの名称が示されている。   The GUI arrangement information table 100 recorded in the GUI arrangement information file 36 includes a GUI identification information column 102, a display switching column 104, a position column 106, a size column 108, and a left / right link column 110. The GUI identification information column 102 shows GUI identification information that can be displayed. In the same figure, “L button”, “R button”, “left joystick”, “right joystick”, “direction key”, “four buttons”, “SELECT / START button (horizontal)”, “SELECT / START button Eight GUI names “(Vertical)” are shown.

「SELECT/STARTボタン(垂直)」以外の7つのGUIは、図1で示したLボタンGUI48、RボタンGUI50、ジョイスティックGUI46a、46b、方向キーGUI42、4種ボタンGUI44、SELECT/STARTボタンGUI52にそれぞれ対応している。「SELECT/STARTボタン(垂直)」は、「SELECT/STARTボタン(水平)」を変形したGUIである。   The seven GUIs other than the “SELECT / START button (vertical)” are the L button GUI 48, the R button GUI 50, the joystick GUIs 46a and 46b, the direction key GUI 42, the four types of buttons GUI 44, and the SELECT / START button GUI 52 shown in FIG. It corresponds. The “SELECT / START button (vertical)” is a GUI obtained by modifying the “SELECT / START button (horizontal)”.

なお同図ではGUI識別情報欄102に各GUIの名称を示しているが、識別符号、識別番号などでもよい。このようなGUIの識別情報は、GUI画像記憶部18に格納された各GUIの画像データの識別や、操作情報変換部22が接触点の情報を操作内容へ変換する際に参照する、GUIと操作内容とを対応づけた情報にも共通に用いられる。   In the figure, the GUI name is shown in the GUI identification information column 102, but an identification code, an identification number, or the like may be used. Such GUI identification information is the GUI that is used to identify the image data of each GUI stored in the GUI image storage unit 18 and that the operation information conversion unit 22 refers to when converting contact point information into operation content. It is also used in common for information associating operation details.

表示切り替え欄104には、GUI識別情報欄102に示された各GUIを表示するか否かを設定する。同図においては全てのGUIに対し「ON」、すなわち表示する設定がなされている。この設定を「OFF」、すなわち非表示とすることで、当該GUIは表示対象から外される。これにより不必要なGUIを非表示とし、コンテンツ画像の隠蔽面積を減らすことができる。なお方向キーGUI、4種ボタンGUI、SELECT/STARTボタンGUIなど複数のボタンで構成されるGUIは、その一つずつに対し表示/非表示を設定可能としてもよい。   In the display switching field 104, whether or not to display each GUI shown in the GUI identification information field 102 is set. In the figure, all GUIs are set to “ON”, that is, displayed. By setting this setting to “OFF”, that is, non-display, the GUI is excluded from the display target. As a result, unnecessary GUI can be hidden and the concealed area of the content image can be reduced. Note that a GUI composed of a plurality of buttons such as a direction key GUI, a four-type button GUI, and a SELECT / START button GUI may be set to display / non-display for each one.

位置欄106には、GUI識別情報欄102に示された各GUIの、画面における位置を設定する。より詳細には、各GUIの素材画像の左上または中心などの基準点の位置を、画面のX座標(横方向)、Y座標(縦方向)で設定する。このときY座標は、画面の縦方向の長さに対する画面端からの割合で表す。同図においては上端からの割合を100分率で表している。一方、X座標は、画面端からの長さで表す。同図においては、左側のGUIは画面の左端から、右側のGUIは画面の右端からの距離をインチ単位で表している。このように位置を設定する画面の座標系は、原点および単位を全てのGUIで共通としなくてよい。   In the position column 106, the position on the screen of each GUI shown in the GUI identification information column 102 is set. More specifically, the position of the reference point such as the upper left or the center of the material image of each GUI is set by the X coordinate (horizontal direction) and Y coordinate (vertical direction) of the screen. At this time, the Y coordinate is expressed as a ratio from the edge of the screen to the vertical length of the screen. In the figure, the ratio from the upper end is represented by 100 minutes. On the other hand, the X coordinate is represented by the length from the screen end. In the figure, the left GUI represents the distance from the left end of the screen, and the right GUI represents the distance from the right end of the screen in inches. In the coordinate system of the screen for setting the position in this way, the origin and unit need not be common to all the GUIs.

このようにすることで、縦方向に対しては画面サイズが変化しても中央付近など装置を把持する手に近い位置にGUIを配置できる。一方、横方向に対しては、画面サイズの変化によらず、画面の左右の端に接した状態あるいは端近傍の所定距離内にGUIを配置できる。またGUIの縦方向の配列に不自然な凹凸が生じないようにできる。   In this way, even if the screen size changes in the vertical direction, the GUI can be arranged at a position close to the hand holding the apparatus, such as near the center. On the other hand, with respect to the horizontal direction, the GUI can be arranged in a state where it is in contact with the left and right edges of the screen or within a predetermined distance near the edges, regardless of changes in the screen size. Further, unnatural unevenness can be prevented from occurring in the vertical arrangement of the GUI.

サイズ欄108には、GUI識別情報欄102に示された各GUIの画像の幅「W」と高さ「H」を設定する。同図においてはインチ単位で表している。操作に好適なGUIの大きさは主に指の大きさや可動範囲で決まるため、基本的には画面のサイズによらず固定とする。ただし後述するように、画面サイズによってはGUI配置部26がサイズ調整を行う。   In the size column 108, the width “W” and the height “H” of the image of each GUI indicated in the GUI identification information column 102 are set. In the figure, it is expressed in inches. Since the GUI size suitable for operation is mainly determined by the size of the finger and the movable range, it is basically fixed regardless of the screen size. However, as will be described later, the GUI placement unit 26 adjusts the size depending on the screen size.

左右リンク欄110には、画面の左側に配置するGUIと右側に配置するGUIの対を、画面サイズによらず常に同じ高さに表示させるか否かを設定する。同じ高さ、すなわち縦方向で同じ位置に表示させる設定を「リンクさせる」と呼ぶ。同図においては「Lボタン」と「Rボタン」、「左ジョイスティック」と「右ジョイスティック」、「十字ボタン」と「4種ボタン」がそれぞれ対となっており、基本的には左右の同じ高さに表示されることを想定している。   In the left and right link column 110, it is set whether or not to always display the GUI arranged on the left side of the screen and the GUI arranged on the right side at the same height regardless of the screen size. The setting to display at the same height, that is, at the same position in the vertical direction is called “link”. In the figure, “L button” and “R button”, “Left joystick” and “Right joystick”, “Cross button” and “Four kinds of buttons” are respectively paired, basically the same height on the left and right Is assumed to be displayed.

そのため各対は、位置欄106におけるY座標が「5%」、「20%」、「45%」と設定されている。しかし後述するように、表示対象とするGUIや画面サイズによっては、GUI配置部26が当該Y座標の設定以外の配置を決定する場合がある。このとき左右リンク欄110においてリンクさせる設定がなされているときはそれを優先させることにより、左右の対の高さがずれて不自然な配置にならないようにする。同図においては全ての対に対し「ON」、すなわちリンクさせる設定がなされている。リンクの必要がない場合は「OFF」などと設定する。   Therefore, for each pair, the Y coordinate in the position column 106 is set to “5%”, “20%”, and “45%”. However, as will be described later, depending on the GUI to be displayed and the screen size, the GUI placement unit 26 may determine placement other than the setting of the Y coordinate. At this time, if the setting for linking in the left and right link column 110 is made, priority is given to this so that the height of the left and right pairs is not shifted and an unnatural arrangement is not caused. In the figure, all pairs are set to “ON”, that is, linked. If there is no need for a link, “OFF” is set.

図5は図4で示したGUI配置情報テーブル100で設定される、各GUIの位置およびサイズの設定例を説明するための図である。同図に示すように画面120において、LボタンGUI48、左のジョイスティックGUI46a、方向キーGUI42を左側、RボタンGUI50、右のジョイスティックGUI46b、4種ボタンGUI44、SELECT/STARTボタンGUI53を右側に配置する例を想定する。ここでSELECT/STARTボタンGUI53以外は図1で示した各GUIに対応している。   FIG. 5 is a diagram for explaining a setting example of the position and size of each GUI set in the GUI arrangement information table 100 shown in FIG. As shown in the figure, in the screen 120, an L button GUI 48, a left joystick GUI 46a, a direction key GUI 42 are arranged on the left side, an R button GUI 50, a right joystick GUI 46b, a four-type button GUI 44, and a SELECT / START button GUI 53 are arranged on the right side. Is assumed. Here, except for the SELECT / START button GUI 53, it corresponds to each GUI shown in FIG.

SELECT/STARTボタンGUI53は、図1で示したSELECT/STARTボタンGUI52で水平方向に並べたSELECTボタンとSTARTボタンの図形を、垂直方向に並べた状態となっている。このGUIが図4のGUI配置情報テーブル100において最終行に示された「SELECT/STARTボタン(垂直)」のGUIであり、図1のSELECT/STARTボタンGUI52に対応する「SELECT/STARTボタン(水平)」とは別に設定する。「SELECT/STARTボタン(垂直)」と「SELECT/STARTボタン(水平)」の切り替えについては後に述べる。   The SELECT / START button GUI 53 is in a state in which the SELECT button and the START button graphic arranged in the horizontal direction by the SELECT / START button GUI 52 shown in FIG. 1 are arranged in the vertical direction. This GUI is the GUI of the “SELECT / START button (vertical)” shown in the last row in the GUI arrangement information table 100 of FIG. 4, and the “SELECT / START button (horizontal) corresponding to the SELECT / START button GUI 52 of FIG. ) ”. Switching between the “SELECT / START button (vertical)” and the “SELECT / START button (horizontal)” will be described later.

この7種類のGUIのそれぞれに対し、位置欄106およびサイズ欄108に、画面上の位置およびサイズを設定する。同図に示すような配置とする場合、LボタンGUI48、左側のジョイスティックGUI46a、方向キーGUI42の順に、位置欄106には(X1,Y1)、(X3,Y3)、(X5,Y5)を設定し、サイズ欄108には(W1,H1)、(W3,H3)、(W5,H5)を設定する。ただしX1、X3、X5は画面の左端を0として右方向を正とする軸に対する各GUIの重心の座標をインチ単位で表した数値であり、Y1、Y3、Y5は、画面の上端を0、下端を100とする軸に対する各GUIの重心の座標である。   For each of these seven types of GUIs, the position and size on the screen are set in the position column 106 and the size column 108. In the case of the arrangement shown in the figure, (X1, Y1), (X3, Y3), (X5, Y5) are set in the position column 106 in the order of the L button GUI 48, the left joystick GUI 46a, and the direction key GUI 42. In the size column 108, (W1, H1), (W3, H3), and (W5, H5) are set. However, X1, X3, and X5 are numerical values representing the coordinates of the center of gravity of each GUI with respect to an axis in which the left end of the screen is 0 and the right direction is positive, and Y1, Y3, and Y5 are 0, The coordinates of the center of gravity of each GUI with respect to the axis whose lower end is 100.

同様に、RボタンGUI50、右側のジョイスティックGUI46b、4種ボタンGUI44、SELECT/STARTボタンGUI53の順に、位置欄106には(X2,Y2)、(X4,Y4)、(X6,Y6)、(X7,Y7)を設定し、サイズ欄108には(W2,H2)、(W4,H4)、(W6,H6)、(W7,H7)を設定する。このときX2、X4、X6、X7は、画面の右端を0として右方向を正とする軸に対する各GUIの重心の座標をインチ単位で表した数値である。Y2、Y4、Y6、Y7は上述と同様である。   Similarly, in the order of the R button GUI 50, the right joystick GUI 46b, the four types of buttons GUI 44, and the SELECT / START button GUI 53, the position column 106 includes (X2, Y2), (X4, Y4), (X6, Y6), (X7 , Y7) and (W2, H2), (W4, H4), (W6, H6), (W7, H7) are set in the size column 108. At this time, X2, X4, X6, and X7 are numerical values representing the coordinates of the center of gravity of each GUI with respect to an axis in which the right end of the screen is 0 and the right direction is positive. Y2, Y4, Y6, and Y7 are the same as described above.

図6は、GUI配置部26が自装置の画面サイズとGUI配置情報ファイル36における設定に基づき、GUIの位置およびサイズを決定する原理を説明するための図である。同図において点線は縦方向に隣り合う2つのGUIの重心間の距離D、実線は当該重心間で2つのGUIの画像が占める幅の和Wsumの、画面サイズに対する変化を示している。   FIG. 6 is a diagram for explaining the principle by which the GUI placement unit 26 determines the position and size of the GUI based on the screen size of the device itself and the settings in the GUI placement information file 36. In the figure, the dotted line indicates the distance D between the centroids of two GUIs adjacent in the vertical direction, and the solid line indicates the change in the sum Wsum of the widths of the two GUI images between the centroids with respect to the screen size.

例えば図5に示した設定において、左側のジョイスティックGUI46aと方向キーGUI42を例にとると、
D=(Y5−Y3)×V
Wsum=(H3+H5)/2
である。ここで画面の高さをV(インチ)としている。
For example, in the setting shown in FIG. 5, taking the left joystick GUI 46a and the direction key GUI 42 as an example,
D = (Y5−Y3) × V
Wsum = (H3 + H5) / 2
It is. Here, the height of the screen is V (inch).

つまり設定に従えば、重心間の距離Dは画面の高さVに比例する変数であり、GUIの幅の和Wsumは定数である。そのため画面のサイズが小さくなるといずれは両者が等しくなる。同図ではそのときの画面の高さを「Vth1」としている。同図に示すように、高さVがVth以上の画面サイズでは、重心間の距離DがGUIの幅の和Wsumより大きいため、GUI同士が重なり合うことがない。従ってこの条件ではGUI配置部26は、GUI配置情報ファイル36の設定に従い、各GUIの位置およびサイズを決定する。   That is, according to the setting, the distance D between the centroids is a variable proportional to the height V of the screen, and the sum Wsum of GUI widths is a constant. Therefore, as the screen size decreases, both become equal. In this figure, the height of the screen at that time is “Vth1”. As shown in the figure, when the height V is Vth or more, the distance D between the centroids is larger than the sum Wsum of the GUI widths, so that the GUIs do not overlap each other. Therefore, under this condition, the GUI placement unit 26 determines the position and size of each GUI according to the settings of the GUI placement information file 36.

一方、画面の高さVがVth1より小さいときは、設定に従えば重心間の距離DがGUIの幅の和Wsumより小さくなりGUI同士が重なり合う状態となる。このときGUI配置部26は、GUI配置情報ファイル36の設定のうち当該2つのGUIの縦方向の位置の設定を無効とする。そして図6に示すように、重心間の距離DがGUIの幅の和Wsumと等しい状態、すなわちGUI同士が接した状態となるように2つのGUIの位置を決定する。Vthは縦方向に隣り合うする2つのGUIの組ごとに決まるため、当該組ごとに画面の高さVとの比較を行い、設定値の有効/無効を決定する。   On the other hand, when the screen height V is smaller than Vth1, according to the setting, the distance D between the centroids becomes smaller than the sum Wsum of the GUI widths, and the GUIs overlap each other. At this time, the GUI arrangement unit 26 invalidates the setting of the vertical position of the two GUIs in the setting of the GUI arrangement information file 36. Then, as shown in FIG. 6, the positions of the two GUIs are determined so that the distance D between the centroids is equal to the sum Wsum of the GUI widths, that is, the GUIs are in contact with each other. Since Vth is determined for each pair of two GUIs that are adjacent in the vertical direction, a comparison with the screen height V is performed for each pair to determine whether the set value is valid / invalid.

画面サイズがさらに小さくなってくると、縦の配列に含まれる全てのGUIが接した状態となったうえ、設定に従えばそれらのGUIの高さの和が画面の高さVを超えてしまうようになる。同図ではそのときの画面の高さを「Vth2」としている。このときGUI配置部26は、GUI配置情報ファイル36の設定のうちそれらのGUIの縦方向の位置の設定に加え、サイズの設定も無効とする。そして図6に示すように、GUIのサイズを縦横2方向に対しV/Vth2倍に縮小する。このときもGUI同士が接した状態となるように位置を決定する。   When the screen size is further reduced, all the GUIs included in the vertical array are in contact with each other, and the sum of their GUI heights exceeds the screen height V according to the setting. It becomes like this. In the figure, the height of the screen at that time is “Vth2”. At this time, the GUI arrangement unit 26 invalidates the setting of the size in addition to the setting of the vertical position of the GUI among the settings of the GUI arrangement information file 36. Then, as shown in FIG. 6, the size of the GUI is reduced to V / Vth2 times in the two vertical and horizontal directions. At this time, the position is determined so that the GUIs are in contact with each other.

このようにGUI配置部26は、Vth1、Vth2の値をGUI配置情報ファイル36の設定値から算出し、自装置の画面の高さVと大きさを比較することにより、設定に従いGUIを表示する、少なくともいずれかのGUIの位置の設定を無効としてつめて表示する、縦の配列に属する全GUIの位置とサイズの設定を無効とし縮小してつめて表示する、という3つの態様のいずれかに処理を分岐させる。このようにすることで、画面サイズが異なっていても、GUI配置情報ファイル36における設定意図を可能な限り汲んだ状態でGUIを表示できる。   In this way, the GUI arrangement unit 26 calculates the values of Vth1 and Vth2 from the setting values of the GUI arrangement information file 36, and compares the height V and the size of the screen of the own device, thereby displaying the GUI according to the setting. In any of the three modes, the setting of at least one GUI position is invalidated and displayed, and the position and size settings of all GUIs belonging to the vertical array are invalidated and reduced and displayed. Branch processing. In this way, even if the screen sizes are different, the GUI can be displayed in a state where the setting intention in the GUI arrangement information file 36 is drawn as much as possible.

図7は画面サイズの変化に対するGUI画像の変化例を示している。まずV>Vth1なる高さを有する画面サイズAの画面においては、GUI配置情報ファイル36の設定に従った位置およびサイズで各GUIを表示する(画面134)。一方、V<Vth2なる高さを有する画面サイズCの画面の場合、画面サイズに応じて各GUIのサイズを縮小し、縦方向につめた状態でGUIを表示する(画面138)。   FIG. 7 shows a change example of the GUI image with respect to the change of the screen size. First, on a screen of screen size A having a height of V> Vth1, each GUI is displayed at a position and size according to the setting of the GUI arrangement information file 36 (screen 134). On the other hand, in the case of a screen of screen size C having a height of V <Vth2, the size of each GUI is reduced in accordance with the screen size, and the GUI is displayed in a state of being vertically packed (screen 138).

またVth2<V<Vth1なる高さを有する画面サイズBの画面の場合、上述のとおり各GUIのサイズはそのままで、縦方向の位置が調整された状態でGUIを表示する(画面136)。同図の例では、方向キーGUI42と4種ボタンGUI44が、直上に位置するジョイスティック46a、46bと重なり合わないように、画面134の場合よりいくらか下方に位置している。   Also, in the case of a screen having a screen size B having a height of Vth2 <V <Vth1, the GUI is displayed with the position in the vertical direction adjusted as described above (screen 136). In the example shown in the figure, the direction key GUI 42 and the four-type button GUI 44 are located somewhat below the screen 134 so as not to overlap with the joysticks 46a and 46b located immediately above.

また画面136では、SELECT/STARTボタンGUIのデザインおよび配置を切り替えている。つまりサイズAのときの画面134において画面右側に表示していた、垂直方向にボタンの図形を並べたSELECT/STARTボタンGUI53から、水平方向にボタンの図形を並べたSELECT/STARTボタンGUI52の画面下端中央への表示に切り替えている。このような切り替えは、所定の画面サイズを境界として行ってもよいし、元の設定では他のGUIと重なってしまう場合に行ってもよい。   On the screen 136, the design and arrangement of the SELECT / START button GUI are switched. That is, the lower end of the screen of the SELECT / START button GUI 52 in which the button graphic is arranged in the horizontal direction from the SELECT / START button GUI 53 in which the button graphic is arranged in the vertical direction, which is displayed on the right side of the screen 134 at the size A. The display has been switched to the center. Such switching may be performed with a predetermined screen size as a boundary, or may be performed when the original setting overlaps with another GUI.

画面134のSELECT/STARTボタンGUI53と、画面136のSELECT/STARTボタンGUI52は、図4のGUI配置情報テーブル100で示した「SELECT/STARTボタン(垂直)」と「SELECT/STARTボタン(水平)」に対応している。デザイン上の観点から画面サイズに応じて形や位置を切り替えたいGUI、または画面の高さV<Vth2である画面において縮小が好ましくないGUIについては、このように、GUI配置情報ファイル36においてあらかじめ複数のパターンを設定しておく。   The SELECT / START button GUI 53 on the screen 134 and the SELECT / START button GUI 52 on the screen 136 are “SELECT / START button (vertical)” and “SELECT / START button (horizontal)” shown in the GUI arrangement information table 100 of FIG. It corresponds to. In the GUI arrangement information file 36, a plurality of GUIs whose shape and position are to be switched according to the screen size from the viewpoint of design, or GUIs whose screen height V <Vth2 is not preferable for reduction, are described above. Set the pattern.

なおこのような切り替えはSELECT/STARTボタンGUIに限らず、例えば4種ボタンを水平に並べて画面の下端中央に表示してもよいし、単にいずれかのGUIを左側や右側のGUIの配列から離して別の領域に配置するようにしてもよい。いずれの場合も、GUIの使用頻度や操作性に鑑み、サイズを縮小させるより位置を変化させた方が望ましいなどの設定者の意図を反映させることができる。GUI配置部26は、画面の高さVがVth1より小さい場合に、対象となるGUIの別のパターンがGUI配置情報ファイル36に設定されていればそれを採用し、設定されていなければ上述の通り、他のGUIとの関係によって位置とサイズを決定する。   Such switching is not limited to the SELECT / START button GUI. For example, four buttons may be arranged horizontally and displayed at the center of the lower end of the screen, or one of the GUIs is simply separated from the left and right GUI arrays. It may be arranged in another area. In any case, it is possible to reflect the intention of the setter that it is desirable to change the position rather than reducing the size in view of the usage frequency and operability of the GUI. When the screen height V is smaller than Vth1, the GUI placement unit 26 adopts another GUI pattern that is set in the GUI placement information file 36, and if not set, As described above, the position and size are determined according to the relationship with other GUIs.

なお画面138のように、縦方向につめてGUIを表示する状態において、例えば左側のジョイスティック46aが非表示であったとすると、その下の方向キーGUI42がさらに上につめてしまい、本来同じ高さに表示することを想定してデザインされた4種ボタンGUI44とずれてしまうことが考えられる。このような状況を回避するため、図4のGUI配置情報テーブル100においてリンクが設定されている場合は、それを優先するように位置を決定する。これにより上下のGUIとの間隔がどのようであっても、同じ高さに表示すべきGUIの対については常にずれることなく表示される。   As shown in the screen 138, when the GUI is displayed in the vertical direction, if the left joystick 46a is not displayed, for example, the lower direction key GUI 42 is further pulled up, which is essentially the same height. It is conceivable that it will deviate from the four-type button GUI 44 designed for display on the screen. In order to avoid such a situation, when a link is set in the GUI arrangement information table 100 of FIG. 4, the position is determined so that it is given priority. As a result, regardless of the distance between the upper and lower GUIs, GUI pairs that should be displayed at the same height are always displayed without deviation.

図8はGUI配置調整受付部21がディスプレイ14に表示する、ユーザがGUIの位置とサイズを調整するための受付画面の例を示している。この調整画面は、コンテンツ実行処理の開始前、処理の途中を問わず、GUIの所定のボタンに触ることによっていつでも呼び出せるようにする。あるいはメニュー画面を呼び出したうえでそこから選択することにより呼び出すなどでもよい。   FIG. 8 shows an example of a reception screen displayed on the display 14 by the GUI arrangement adjustment receiving unit 21 for the user to adjust the position and size of the GUI. This adjustment screen can be called at any time by touching a predetermined button on the GUI before the start of the content execution process and during the process. Alternatively, the menu screen may be called and then called by selecting from the menu screen.

GUI配置調整画面140aは、調整開始直前のGUI画像上に、調整を促すメッセージ142と、各GUIを囲む矩形144を表示したものである。この例では、矩形144で囲まれたGUIのうち、調整したいGUIに一旦触れることによって、当該GUIを調整対象とする。このとき当該GUIのサイズ調整を受け付けるための図形146をGUI近傍に表示する。ユーザはそれを拡大方向、縮小方向に移動させることによりサイズを調整する。また調整対象のGUIに触れ、接触を継続したまま移動させる(ドラッグする)ことによって位置を調整する。   The GUI arrangement adjustment screen 140a displays a message 142 for prompting adjustment and a rectangle 144 surrounding each GUI on the GUI image immediately before the start of adjustment. In this example, of the GUIs surrounded by the rectangle 144, once the GUI to be adjusted is touched, the GUI is set as an adjustment target. At this time, a graphic 146 for accepting the size adjustment of the GUI is displayed in the vicinity of the GUI. The user adjusts the size by moving it in the enlargement and reduction directions. Further, the position is adjusted by touching the GUI to be adjusted and moving (dragging) while maintaining the contact.

図9はそのようにして調整対象のGUIが移動中の画面例を示している。GUI配置調整画面140bでは、ユーザが4種ボタンGUI44の領域内に触れてドラッグすることによって当該GUIの位置が左上に移動した状態となっている。しかしジョイスティックGUI46bなど他のGUIと重なる位置にある場合は、当該位置には移動できないことを示すため、GUIを囲む矩形148の色や形状を元の矩形144から変化させる。   FIG. 9 shows an example of a screen in which the GUI to be adjusted is moving as described above. In the GUI arrangement adjustment screen 140b, when the user touches and drags in the area of the four-type button GUI 44, the position of the GUI is moved to the upper left. However, when the position is overlapped with another GUI such as the joystick GUI 46b, the color or shape of the rectangle 148 surrounding the GUI is changed from the original rectangle 144 to indicate that the position cannot be moved to that position.

このように調整対象のGUIの位置やサイズが調整画面上で変更された場合は、図8のメッセージ142に代わり、当該変更を決定するための決定ボタンGUI150、および元の設定に戻す初期設定ボタンGUI152を表示させる。決定ボタンGUI150に触れられたら、GUI配置調整受付部21は、その時点における全GUIの位置および配置を絶対値で表したユーザ設定情報ファイル37を作成あるいは更新し、コンテンツ記憶部16に格納する。コンテンツ記憶部16にユーザ設定情報ファイルが格納されている場合、GUI配置部26はGUI配置情報ファイル36よりユーザ設定情報ファイル37の情報を優先して各GUIを配置する。初期設定ボタンGUI152に触れられたら、GUI配置調整受付部21はユーザ設定情報ファイル37を破棄する。   When the position or size of the GUI to be adjusted is changed on the adjustment screen as described above, a determination button GUI 150 for determining the change and an initial setting button for returning to the original setting are used instead of the message 142 in FIG. The GUI 152 is displayed. When the determination button GUI 150 is touched, the GUI arrangement adjustment receiving unit 21 creates or updates the user setting information file 37 that represents the positions and arrangements of all the GUIs at that time in absolute values, and stores them in the content storage unit 16. When the user setting information file is stored in the content storage unit 16, the GUI placement unit 26 places each GUI by giving priority to the information in the user setting information file 37 over the GUI placement information file 36. When the initial setting button GUI 152 is touched, the GUI arrangement adjustment receiving unit 21 discards the user setting information file 37.

次に、これまで述べた構成によって実現できる情報処理装置10の動作について説明する。図10は情報処理装置10が行う、GUI画像表示に係る処理の手順を示すフローチャートである。同フローチャートはユーザが起動スイッチ40をオンすることにより情報処理装置10が起動されたときや、実行すべきコンテンツが選択されたときに開始される。なお同図に示した処理と並行し、情報処理装置10のコンテンツ処理部24やコンテンツ画像生成部30は、コンテンツ実行ファイル38に基づきコンテンツに係る情報処理を適宜行っているものとする。   Next, the operation of the information processing apparatus 10 that can be realized by the configuration described so far will be described. FIG. 10 is a flowchart illustrating a procedure of processing related to GUI image display performed by the information processing apparatus 10. The flowchart is started when the information processing apparatus 10 is activated by turning on the activation switch 40 or when a content to be executed is selected. In parallel with the processing shown in the figure, it is assumed that the content processing unit 24 and the content image generation unit 30 of the information processing apparatus 10 appropriately perform information processing related to content based on the content execution file 38.

まずユーザがGUI配置調整画面を呼び出した場合(S10のY)、GUI配置調整受付部21は、図8で例示したようなGUI配置調整画面を表示する(S12)。ユーザが調整したいGUIをドラッグしたり、拡大縮小用の図形を操作したりして位置やサイズの調整を行うと(S14)、GUI配置調整受付部21は調整後のGUI配置を絶対値で示したユーザ設定情報ファイル37を作成し、コンテンツ記憶部16に格納する(S16)。以前に作成したユーザ設定情報ファイル37が存在する場合はそれを更新する。そしてユーザ設定情報ファイル37に基づきGUI画像を作成し、コンテンツ画像にオンスクリーン表示することにより最終的な画像を表示する(S30)。   First, when the user calls the GUI arrangement adjustment screen (Y in S10), the GUI arrangement adjustment reception unit 21 displays the GUI arrangement adjustment screen illustrated in FIG. 8 (S12). When the user drags the GUI to be adjusted or operates the enlargement / reduction graphic to adjust the position and size (S14), the GUI arrangement adjustment accepting unit 21 indicates the adjusted GUI arrangement as an absolute value. The user setting information file 37 is created and stored in the content storage unit 16 (S16). If the previously created user setting information file 37 exists, it is updated. Then, a GUI image is created based on the user setting information file 37, and the final image is displayed by on-screen display on the content image (S30).

ユーザがGUI配置調整を行わない場合(S10のN)、GUI配置部26は、選択されたコンテンツの識別情報などを操作情報変換部22から取得し、コンテンツ記憶部16を参照して、当該コンテンツに対応づけられたユーザ設定情報ファイル37の有無を確認する(S17)。当該ファイルがある場合は(S17のN)、それに基づきGUI画像を作成し、コンテンツ画像にオンスクリーン表示することにより最終的な画像を表示する(S30)。   When the user does not adjust the GUI arrangement (N in S10), the GUI arrangement unit 26 acquires the identification information of the selected content from the operation information conversion unit 22, and refers to the content storage unit 16 for the content. The presence or absence of the user setting information file 37 associated with is confirmed (S17). If the file exists (N in S17), a GUI image is created based on the file, and the final image is displayed by displaying the content image on-screen (S30).

ユーザ設定情報ファイル37がない場合は(S17のY)、コンテンツに対応づけられたGUI配置情報ファイル36をコンテンツ記憶部16から読み出す(S18)。そして、当該ファイルにおいて表示対象となっているGUIについて、隣り合うGUI同士の重なりが発生する画面の高さVth1と、自装置の画面の高さVを比較する(S20)。上述の通りVth1は隣り合うGUIの対ごとに算出する。   When there is no user setting information file 37 (Y in S17), the GUI arrangement information file 36 associated with the content is read from the content storage unit 16 (S18). Then, for the GUI to be displayed in the file, the screen height Vth1 at which the adjacent GUIs overlap each other is compared with the screen height V of the device itself (S20). As described above, Vth1 is calculated for each pair of adjacent GUIs.

全てのGUIの対についてVth1≦Vであったら(S20のY)、GUI配置部26は、GUI配置情報ファイル36に設定されているGUIの位置およびサイズで、GUI画像記憶部18に格納されたGUI画像を配置することによりGUI画像を生成する(S24)。一方、V<Vth1となるGUIの対がある場合は(S20のN)、さらに、位置のみを調整してもGUIの縦の配列が画面に収まらなくなる高さVth2と、自装置の画面の高さVを比較する(S22)。   If Vth1 ≦ V for all the GUI pairs (Y in S20), the GUI placement unit 26 stores the GUI position and size set in the GUI placement information file 36 in the GUI image storage unit 18. A GUI image is generated by arranging the GUI image (S24). On the other hand, when there is a GUI pair satisfying V <Vth1 (N in S20), a height Vth2 at which the vertical arrangement of GUI does not fit on the screen even if only the position is adjusted, and the screen height of the device itself V are compared (S22).

Vth2≦Vであったら(S22のY)、V<Vth1となるGUIの対のうち少なくともどちらかの縦方向の位置を設定値から調整し、それらが重ならずに接した位置に表示されるようにする(S26)。例えば上のGUIの位置を調整せずに、それに接するように下のGUIの位置を調整する。上述のSELECT/STARTボタンGUIのように、配置やデザインを変更する設定がGUI配置情報ファイル36でなされていた場合は、当該設定を優先させる。   If Vth2 ≦ V (Y in S22), the vertical position of at least one of the GUI pairs satisfying V <Vth1 is adjusted from the set value, and they are displayed at the positions where they touch each other without overlapping. (S26). For example, without adjusting the position of the upper GUI, the position of the lower GUI is adjusted so as to be in contact therewith. When the setting for changing the arrangement or the design is made in the GUI arrangement information file 36 as in the above-described SELECT / START button GUI, the setting is prioritized.

V<Vth2であったら(S22のN)、配列に含まれる全てのGUIをV/Vth2倍に縮小したうえ、それらが接する位置に表示されるようにする(S28)。ただしGUI配置情報ファイル36でリンクが設定されている左右のGUIの対についてはそれを優先させる。そしてS24、S26、またはS28で生成したGUI画像をコンテンツ画像にオンスクリーン表示することにより最終的な画像を表示する(S30)。   If V <Vth2 (N in S22), all GUIs included in the array are reduced to V / Vth2 times and displayed at the positions where they touch (S28). However, priority is given to a pair of left and right GUIs for which a link is set in the GUI arrangement information file 36. The final image is displayed by displaying the GUI image generated in S24, S26, or S28 on the content image on-screen (S30).

なお上述のとおりGUI配置部26は、表示中のGUIに対する操作内容に応じてS18からS30の処理を行うことにより、GUI画像を随時変化させてよい。またユーザがGUI配置調整画面を呼び出したとき、GUI配置調整受付部21はS12からS16の処理を行うことにより、ユーザ設定情報ファイル37を随時更新してよい。   As described above, the GUI placement unit 26 may change the GUI image at any time by performing the processing from S18 to S30 according to the operation content for the GUI being displayed. When the user calls the GUI arrangement adjustment screen, the GUI arrangement adjustment receiving unit 21 may update the user setting information file 37 at any time by performing the processing from S12 to S16.

これまでは、コンテンツを実行する装置において、自装置が有する画面のサイズに応じて好適なGUI画像を生成する態様について説明した。次に、コンテンツ実行ファイルとともに提供するGUI配置情報ファイルの作成を支援するための装置について説明する。この装置は例えば、コンテンツ作成者や制作会社が、コンテンツの作成とともに当該コンテンツで表示される画像や必要な入力手段などに鑑み最適な設定のGUI配置情報ファイルを作成するのに利用される。   So far, the aspect of generating a suitable GUI image according to the size of the screen of the own apparatus has been described in the apparatus that executes the content. Next, an apparatus for supporting creation of a GUI arrangement information file provided together with a content execution file will be described. For example, this apparatus is used by a content creator or a production company to create a GUI arrangement information file having an optimal setting in consideration of creation of content and an image displayed by the content and necessary input means.

本実施の形態では上述のとおり、1つのGUI配置情報ファイルを作成しておくことにより、どのような画面サイズの情報処理装置においても可能な限りその設定意図を踏襲するかたちで、情報処理装置自体が自律的にGUIのサイズや配置を調整する。しかしこのような場合、コンテンツの作成段階においては、GUI配置情報ファイルの設定が実際のGUI画像にどのように反映されるかを確認するには、様々な画面サイズの実機が必要となってしまう。   In the present embodiment, as described above, by creating one GUI arrangement information file, the information processing apparatus itself can follow the setting intention of the information processing apparatus of any screen size as much as possible. Autonomously adjusts the size and placement of the GUI. However, in such a case, in the content creation stage, in order to check how the setting of the GUI arrangement information file is reflected in the actual GUI image, actual machines having various screen sizes are required. .

コンテンツ作成者が実機を保持していないサイズの装置において、予想外のGUIサイズや配置となり、操作しづらくなったり、コンテンツ画像が見にくくなってしまったりするのを防止するため、本実施の形態では仮想的な画面によってGUI画像をシミュレートできるようにする。図11はGUI配置情報ファイルの作成を支援するGUI配置シミュレータの構成を示している。   In the present embodiment, the content creator does not hold the actual machine, so that the GUI size and arrangement are unexpected and it is difficult to operate and the content image is difficult to see. A GUI image can be simulated by a virtual screen. FIG. 11 shows the configuration of a GUI placement simulator that supports the creation of a GUI placement information file.

GUI配置シミュレータ160は、GUI配置情報ファイルへの設定値を受け付ける配置設定受付部162、仮想的な画面のサイズ指定を受け付ける画面サイズ指定受付部164、仮想的な画面にGUI画像を表示するGUI画像表示部166、GUI配置情報ファイルを格納するGUI配置情報ファイル格納部168、GUIとして用意する素材画像のデータを記憶したGUI画像記憶部170を含む。同図に示すようにGUI配置シミュレータ160は、キーボードやマウスなど一般的な入力手段からの信号を受信し、表示すべき画像データをディスプレイに出力するように構成される。   The GUI placement simulator 160 includes a placement setting receiving unit 162 that receives setting values in the GUI placement information file, a screen size designation receiving unit 164 that receives virtual screen size designation, and a GUI image that displays a GUI image on a virtual screen. The display unit 166 includes a GUI arrangement information file storage unit 168 that stores a GUI arrangement information file, and a GUI image storage unit 170 that stores data of material images prepared as a GUI. As shown in the figure, the GUI placement simulator 160 is configured to receive signals from general input means such as a keyboard and a mouse, and output image data to be displayed to the display.

配置設定受付部162は、図4で示したような、GUI配置情報ファイル36で設定可能な項目の一覧を表すGUI配置情報テーブルをディスプレイに表示する。各項目は入力手段によってデータの手操作入力が可能なように構成される。設定者は表示されたGUI配置情報テーブルを見ながら、各GUIの表示/非表示の切り替え、各GUIの位置やサイズの設定、リンク設定を行う。   The arrangement setting reception unit 162 displays a GUI arrangement information table representing a list of items that can be set in the GUI arrangement information file 36 as shown in FIG. Each item is configured to allow manual input of data by an input means. While viewing the displayed GUI arrangement information table, the setter switches display / non-display of each GUI, sets the position and size of each GUI, and sets a link.

画面サイズ指定受付部164は、仮想的な画面のサイズの指定を受け付ける画面をディスプレイに表示する。設定者は表示された受付画面を見ながら、仮想的な画面のサイズとアスペクト比を指定する。GUI画像表示部166は、配置設定受付部162に対するGUI配置に係る設定、および画面サイズ指定受付部164において指定された仮想的な画面のサイズに基づき、情報処理装置10のGUI配置部26と同じスキームにより、GUIのサイズおよび位置を決定する。そして、GUI画像記憶部170から各GUIの画像データを読み出したうえ、仮想的な画面サイズに対応するGUI画像を生成してディスプレイに表示する。   The screen size designation accepting unit 164 displays a screen for accepting designation of a virtual screen size on the display. The setter specifies the virtual screen size and aspect ratio while viewing the displayed reception screen. The GUI image display unit 166 is the same as the GUI arrangement unit 26 of the information processing apparatus 10 based on the setting related to the GUI arrangement for the arrangement setting reception unit 162 and the size of the virtual screen specified by the screen size designation reception unit 164. The scheme determines the size and location of the GUI. Then, after reading the image data of each GUI from the GUI image storage unit 170, a GUI image corresponding to the virtual screen size is generated and displayed on the display.

設定者は、画面サイズ指定受付部164において画面サイズを様々に変化させながら、GUI画像表示部166により表示されたGUI画像を確認し、どの画面サイズでも良好なGUI画像が得られるように配置設定受付部162における設定を修正していく。最終的な設定値が確定できたら、配置設定受付部162は当該設定値で構成されるGUI配置情報ファイルをGUI配置情報ファイル格納部168に格納する。なおGUI配置情報ファイル格納部168には標準的なGUI配置情報ファイルをあらかじめ格納しておき、設定者が修正していくことで、新たなGUI配置情報ファイルを格納するようにしてもよい。   The setting person confirms the GUI image displayed by the GUI image display unit 166 while changing the screen size in the screen size designation receiving unit 164, and arranges and sets so that a good GUI image can be obtained at any screen size. The setting in the receiving unit 162 is corrected. When the final setting value is confirmed, the arrangement setting receiving unit 162 stores the GUI arrangement information file including the setting value in the GUI arrangement information file storage unit 168. Note that a standard GUI arrangement information file may be stored in the GUI arrangement information file storage unit 168 in advance, and a new GUI arrangement information file may be stored as the setting person modifies it.

図12はGUI配置シミュレータ160によって表示される画面例を示している。GUI配置シミュレーション画面180は、仮想的な画面サイズの指定を受け付けるための画面サイズ指定ウィンドウ182と、指定された仮想的な画面サイズに対応するGUI画像を表示するGUI画像表示ウィンドウ184を含む。なお同画面ではGUI配置情報ファイルに対する設定は別途行われているものとしてその設定画面は表示されていないが、同じ画面内に同時に表示してもよい。   FIG. 12 shows an example of a screen displayed by the GUI placement simulator 160. The GUI layout simulation screen 180 includes a screen size designation window 182 for accepting designation of a virtual screen size, and a GUI image display window 184 for displaying a GUI image corresponding to the designated virtual screen size. In the same screen, the setting screen is not displayed on the assumption that the setting for the GUI arrangement information file is performed separately. However, the setting screen may be displayed simultaneously on the same screen.

画面サイズ指定ウィンドウ182は画面サイズ指定受付部164により表示されるものであり、アスペクト比選択ボックス186、および画面サイズ変更バー188からなる。設定者は、アスペクト比選択ボックス186から一つのアスペクト比を選択したうえ、画面サイズ変更バー188においてバーを左右に移動させることにより仮想的な画面のサイズを任意に選択することができる。このように選択されたアスペクト比およびサイズが、GUI画像表示ウィンドウ184のアスペクト比およびサイズに反映される。   The screen size designation window 182 is displayed by the screen size designation receiving unit 164 and includes an aspect ratio selection box 186 and a screen size change bar 188. The setter can select a virtual screen size by selecting one aspect ratio from the aspect ratio selection box 186 and moving the bar left and right in the screen size change bar 188. The aspect ratio and size thus selected are reflected in the aspect ratio and size of the GUI image display window 184.

これらの操作により、標準的なアスペクト比を有するデバイスのエミュレートを比較的容易に行う事ができる。またGUI画像表示ウィンドウ184を、一般的なウィンドウシステムのウィンドウサイズの変更手法、例えばマウス等でウィンドウ境界をドラッグするなどして変更するようにしてもよい。これにより、より自由なアスペクト比の画面構成も簡易にエミュレートする事ができ、特定の画面比率や画面サイズで発生する破綻などの検出が容易になる。   By these operations, a device having a standard aspect ratio can be emulated relatively easily. Further, the GUI image display window 184 may be changed by dragging the window boundary with a general window system changing method, for example, a mouse or the like. This makes it possible to easily emulate a screen configuration with a more free aspect ratio, and to easily detect a failure that occurs at a specific screen ratio or screen size.

GUI画像表示部166は、このような大きさのGUI画像表示ウィンドウ184に、作成中のGUI配置情報ファイルの設定に従った配置で各GUIを表示する。このときの処理は情報処理装置10のGUI配置部26が行う処理と同じであるが、GUI画像表示部166は、画面サイズ指定ウィンドウ182に対する画面サイズの指定操作が行われる都度、それに連動するようにGUI画像表示ウィンドウ184に表示するGUI画像を更新する。   The GUI image display unit 166 displays each GUI in the GUI image display window 184 having such a size in an arrangement according to the setting of the GUI arrangement information file being created. The processing at this time is the same as the processing performed by the GUI placement unit 26 of the information processing apparatus 10, but the GUI image display unit 166 is linked to the screen size designation window 182 whenever it is designated. The GUI image displayed on the GUI image display window 184 is updated.

次に上記構成を有するGUI配置シミュレータの動作を説明する。図13はGUI配置シミュレータ160がGUI配置情報ファイルの作成を支援する処理手順を示すフローチャートである。この処理は、設定者がGUI配置シミュレータ160を起動させたときなどに開始される。まず設定者が配置設定画面を呼び出すと(S40)、配置設定受付部162はGUI配置情報テーブルを、各項目を入力可能な状態で表示することで、配置情報の設定を受け付ける(S42)。   Next, the operation of the GUI placement simulator having the above configuration will be described. FIG. 13 is a flowchart showing a processing procedure in which the GUI placement simulator 160 supports creation of a GUI placement information file. This process is started when the setting person activates the GUI placement simulator 160. First, when the setter calls the arrangement setting screen (S40), the arrangement setting receiving unit 162 receives the setting of arrangement information by displaying the GUI arrangement information table in a state where each item can be input (S42).

次に画面サイズ指定受付部164が画面サイズ指定ウィンドウ182を、GUI画像表示部166がGUI画像表示ウィンドウ184を表示し、画面サイズ指定ウィンドウ182に対する画面サイズの指定を受け付ける都度、GUI画像表示ウィンドウ184におけるGUI画像を更新する(S44、S46)。S46の処理は、図10のS20からS28の処理に相当する。GUI画像表示ウィンドウ184を閉じるなどGUI配置情報ファイルの設定を最終決定する入力がなされるまで(S48のN)、S42、S44、S46の処理を繰り返す。あるいはS44とS46の処理のみを繰り返す。   Next, each time the screen size designation receiving unit 164 displays the screen size designation window 182 and the GUI image display unit 166 displays the GUI image display window 184, the GUI image display window 184 is received every time the screen size designation window 182 is designated. The GUI image at is updated (S44, S46). The process of S46 corresponds to the process of S20 to S28 in FIG. The process of S42, S44, and S46 is repeated until an input for final setting of the GUI arrangement information file is made, such as closing the GUI image display window 184 (N in S48). Or only the process of S44 and S46 is repeated.

GUI配置情報ファイルの最終決定がなされたら(S48のY)、当該GUI配置情報ファイルをGUI配置情報ファイル格納部168に格納する(S50)。このファイルを、別に作成したコンテンツ実行ファイルに対応づけて記録媒体などに記録させたり、コンテンツ提供サーバ等からダウンロード可能とすることにより、情報処理装置10のコンテンツ記憶部16にまとめて格納できるようにする。   When the final determination of the GUI arrangement information file is made (Y in S48), the GUI arrangement information file is stored in the GUI arrangement information file storage unit 168 (S50). This file can be recorded in a recording medium or the like in association with a separately created content execution file, or can be downloaded from a content providing server or the like so that it can be stored together in the content storage unit 16 of the information processing apparatus 10. To do.

これまでの説明では、サイズの異なる画面に対しても共通のGUI配置情報ファイルによって、コンテンツに適したGUIの配置を実現するものであった。一方、把持する位置や画像の表示位置などが大きく異なる情報処理装置では、各GUI、およびそれらの位置やサイズに対する優先順位が異なる場合がある。そのため1つのコンテンツ実行ファイルに複数のGUI配置情報ファイルを対応づけて提供することにより、適用可能な情報処理装置の幅をさらに広げてもよい。   In the description so far, GUI arrangement suitable for content has been realized by using a common GUI arrangement information file even for screens of different sizes. On the other hand, in information processing apparatuses in which gripping positions and image display positions are greatly different, there is a case where priorities for GUIs and their positions and sizes are different. Therefore, the width of applicable information processing apparatuses may be further expanded by providing a plurality of GUI arrangement information files in association with one content execution file.

図14はこのような態様を説明するための図である。同図の例は、これまで述べてきた1画面の情報処理装置10に対する設定を記録した1画面用GUI配置情報ファイル194に加え、折りたたみ式やスライド式の2画面の情報処理装置192に対する設定を記録した2画面用GUI配置情報ファイル196を、1つのコンテンツ実行ファイル198に対応づけている。   FIG. 14 is a diagram for explaining such an aspect. In the example of the figure, in addition to the one-screen GUI arrangement information file 194 in which the settings for the one-screen information processing apparatus 10 described so far are recorded, the settings for the two-screen information processing apparatus 192 of the folding type and the sliding type are set. The recorded two-screen GUI arrangement information file 196 is associated with one content execution file 198.

例えば、1画面用のコンテンツを上下2画面の情報処理装置192で実行する場合、搭載される2つの画面のうち上の画面のみをコンテンツ画像表示用に用いることが考えられる。この場合、下の画面にGUIを大きく表示させてもコンテンツ画像の見やすさに影響しない。また一般的には下の画面側の筐体を把持することが想定されるため、高頻度な操作や素早い操作が必要なGUIは下の画面に表示させるのが望ましい。   For example, when the content for one screen is executed by the information processing device 192 having two screens on the upper and lower sides, only the upper screen of the two installed screens may be used for displaying the content image. In this case, even if the GUI is displayed large on the lower screen, it does not affect the visibility of the content image. Further, since it is generally assumed that the lower screen side casing is gripped, it is desirable to display a GUI that requires frequent operations or quick operations on the lower screen.

このような特徴の差に鑑み、GUI配置情報ファイルを複数生成し、コンテンツ実行ファイルとともに1まとまりのコンテンツのファイルとすることにより、容易かつ低コストに、コンテンツに適した形態でのGUIの表示を、様々な情報処理装置で実現させることができる。なお1画面用GUI配置情報ファイル194と2画面用GUI配置情報ファイル19にはヘッダ情報として1画面用、2画面用を識別する情報を埋め込んでおき、コンテンツを実行する装置のGUI配置部26は自装置の画面数に基づきそのいずれかを読み出してGUIを配置する。   In view of such differences in characteristics, by generating a plurality of GUI arrangement information files and making a single content file together with the content execution file, it is possible to display the GUI in a form suitable for the content easily and at low cost. It can be realized by various information processing apparatuses. In addition, in the GUI arrangement information file 194 for one screen and the GUI arrangement information file 19 for two screens, information for identifying one screen and two screens is embedded as header information, and the GUI arrangement unit 26 of the apparatus that executes the contents Based on the number of screens of the device itself, one of them is read and the GUI is arranged.

なお2画面の場合、情報処理装置10のGUI配置部26およびGUI配置シミュレータ160は、上述したGUIの位置およびサイズを調整する処理やシミュレーションを画面ごとに行う。また2画面用のGUI配置情報ファイルには、各GUIに対応づけて、当該GUIを第1画面、第2画面のどちらに表示するかを設定する欄をさらに設ける。   In the case of two screens, the GUI placement unit 26 and the GUI placement simulator 160 of the information processing apparatus 10 perform the above-described processing and simulation for adjusting the position and size of the GUI for each screen. The GUI arrangement information file for two screens is further provided with a column for setting whether to display the GUI on the first screen or the second screen in association with each GUI.

以上述べた本実施の形態によれば、コンテンツ実行ファイルに対応づけて生成したGUI配置情報ファイルに、各GUIの表示/非表示、表示位置、表示サイズ、左右のGUIの対のリンクを設定しておく。そしてコンテンツを実行する情報処理装置は、GUI配置情報ファイルを参照し、自装置の画面サイズに応じた調整を行ったうえで表示対象のGUIを表示する。   According to the present embodiment described above, display / non-display of each GUI, display position, display size, and a pair of left and right GUI pairs are set in the GUI arrangement information file generated in association with the content execution file. Keep it. Then, the information processing apparatus that executes the content refers to the GUI arrangement information file, performs the adjustment according to the screen size of the own apparatus, and displays the display target GUI.

このようにすることで、情報処理装置の画面がどのような大きさであっても、コンテンツに適した位置とサイズでGUIを表示できる。GUIの配置に係る基本的な情報のみをGUI配置情報ファイルとしてコンテンツ実行ファイルに対応づけておき、情報処理装置が、自らが保持するGUIの素材画像を用いて自律的に調整を行うことにより、容易かつ低コストに、コンテンツおよび画面サイズの双方に適したGUIの表示態様を実現できる。GUI配置情報ファイルをコンテンツ実行ファイルと独立させることで、ユーザが自らの好みでGUIの配置を調整することも容易にできる。   In this way, regardless of the size of the screen of the information processing apparatus, the GUI can be displayed at a position and size suitable for the content. By associating only basic information related to GUI placement with a content execution file as a GUI placement information file, the information processing apparatus autonomously adjusts using a GUI material image held by itself, A GUI display mode suitable for both content and screen size can be realized easily and at low cost. By making the GUI arrangement information file independent of the content execution file, the user can easily adjust the GUI arrangement according to his / her preference.

またGUI配置情報ファイルを作成する段階において、GUI配置シミュレータが、様々なサイズの画面を仮想的に生成し、GUIの位置やサイズがどのように変化するかを表示する。これにより設定者は、様々な画面サイズの情報処理装置を所有していなくても、作成中のGUI配置情報ファイルによって実際にはどのようなGUIが表示されるのかを詳細に確認することができる。これにより、画面サイズによって予想外のGUI配置となるなどの不具合の発生を事前に防止できる。   Further, at the stage of creating the GUI placement information file, the GUI placement simulator virtually generates screens of various sizes and displays how the position and size of the GUI change. Thereby, even if the setter does not have an information processing apparatus with various screen sizes, the setter can confirm in detail what GUI is actually displayed by the GUI arrangement information file being created. . As a result, it is possible to prevent the occurrence of problems such as an unexpected GUI layout depending on the screen size in advance.

また1画面の情報処理装置と2画面の情報処理装置など、表示形態、ひいてはGUIの位置やサイズの優先順位が大きく異なる装置に対して、個別にGUI配置情報ファイルを生成し、コンテンツ実行ファイルに対応づける。コンテンツ実行時には、自装置の画面形態に対応したGUI配置情報ファイルを参照することにより、それぞれの画面形態に適したGUI画像を表示することができる。このように複数のGUI配置情報ファイルを準備することによって、画面の数が異なる情報処理装置ばかりでなく、横長の画面と縦長の画面、サイズが著しく異なる画面などあらゆる情報処理装置に、本実施の形態を容易に適用させることができる。   In addition, a GUI arrangement information file is generated individually for a device having a display mode and a priority of GUI position and size that are greatly different, such as a one-screen information processing device and a two-screen information processing device. Associate. At the time of content execution, a GUI image suitable for each screen form can be displayed by referring to the GUI arrangement information file corresponding to the screen form of the own apparatus. By preparing a plurality of GUI arrangement information files in this way, not only information processing devices with different numbers of screens but also various information processing devices such as horizontally long screens, vertically long screens, and remarkably different screen sizes can be used for this implementation. The form can be easily applied.

以上、本発明を実施の形態をもとに説明した。上記実施の形態は例示であり、それらの各構成要素や各処理プロセスの組合せにいろいろな変形例が可能なこと、またそうした変形例も本発明の範囲にあることは当業者に理解されるところである。   The present invention has been described based on the embodiments. Those skilled in the art will understand that the above-described embodiment is an exemplification, and that various modifications can be made to combinations of the respective constituent elements and processing processes, and such modifications are also within the scope of the present invention. is there.

10 情報処理装置、 12 タッチパネル、 14 ディスプレイ、 16 コンテンツ記憶部、 18 GUI画像記憶部、 20 入出力制御部、 21 GUI配置調整受付部、 22 操作情報変換部、 24 コンテンツ処理部、 26 GUI配置部、 28 GUI画像バッファ、 30 コンテンツ画像生成部、 32 コンテンツ画像バッファ、 34 画像合成部、 36 GUI配置情報ファイル、 38 コンテンツ実行ファイル、 160 GUI配置シミュレータ、 162 配置設定受付部、 164 画面サイズ指定受付部、 166 GUI画像表示部、 168 GUI配置情報ファイル格納部、 170 GUI画像記憶部。 DESCRIPTION OF SYMBOLS 10 Information processing apparatus, 12 Touch panel, 14 Display, 16 Content memory | storage part, 18 GUI image memory | storage part, 20 Input / output control part, 21 GUI arrangement | positioning adjustment reception part, 22 Operation information conversion part, 24 Content processing part, 26 GUI arrangement | positioning part , 28 GUI image buffer, 30 content image generation unit, 32 content image buffer, 34 image composition unit, 36 GUI layout information file, 38 content execution file, 160 GUI layout simulator, 162 layout setting reception unit, 164 screen size designation reception unit 166 GUI image display unit, 168 GUI arrangement information file storage unit, 170 GUI image storage unit.

Claims (6)

タッチパネルで覆われたディスプレイを備えた情報処理装置において情報処理の結果として表示すべきコンテンツ画像にオンスクリーン表示するGUI(Graphical User Interface)の配置に係る情報の設定を支援するGUI配置シミュレータであって、
GUIの位置およびサイズの基本設定値を受け付ける配置設定受付部と、
想定する情報処理装置のディスプレイのサイズ指定を受け付ける画面サイズ指定受付部と、
前記基本設定値から求められるディスプレイのサイズに対する条件と指定されたディスプレイのサイズとの比較結果に対応する調整を行うことによりGUIの位置およびサイズを決定し、指定されたサイズを有する仮想的な画面を表す矩形領域に、決定に従う配置でGUIを表示するGUI画像表示部と、
確定された前記基本設定値をGUI配置情報ファイルとして格納する記憶部と、
を備え、
前記配置設定受付部は、GUIの所定方向の位置の設定をディスプレイの当該方向の幅に対する割合単位で、GUIのサイズの設定を長さの単位でそれぞれ受け付け、
前記GUI画像表示部は、前記基本設定値に従えば前記方向に隣り合う2つのGUI同士に重なりが生じるときのディスプレイのサイズの境界値より指定されたディスプレイのサイズが小さいとき、当該2つのGUIのうち少なくとも1つのGUIの位置の設定を無効とし、GUI同士が接する状態を当該GUIの位置として表示することを特徴とするGUI配置シミュレータ。
A GUI placement simulator that supports setting of information related to placement of a GUI (Graphical User Interface) that is displayed on-screen on a content image to be displayed as a result of information processing in an information processing apparatus including a display covered with a touch panel. ,
An arrangement setting receiving unit that receives basic setting values of the position and size of the GUI;
A screen size designation accepting unit that accepts a display size designation of the assumed information processing apparatus;
A virtual screen having the designated size is determined by determining the position and size of the GUI by performing an adjustment corresponding to the comparison result between the display size condition obtained from the basic setting value and the designated display size. A GUI image display unit that displays a GUI in a rectangular area representing
A storage unit for storing the determined basic setting value as a GUI arrangement information file;
With
The arrangement setting accepting unit accepts the setting of the position of the GUI in a predetermined direction in a unit of ratio to the width of the direction of the display, and the setting of the size of the GUI in a unit of length.
In accordance with the basic setting value, the GUI image display unit displays the two GUIs when the specified display size is smaller than a display size boundary value when two GUIs adjacent to each other in the direction overlap. GUI arrangement simulator and disable the setting position of the at least one GUI, characterized you to view the state where the GUI are in contact with each other as the position of the GUI of the.
前記配置設定受付部は、2画面ディスプレイの情報処理装置を想定した基本設定値を受け付け、
前記GUI画像表示部は、前記2画面ディスプレイを想定した基本設定値に基づき決定したGUIの配置を、前記仮想的な画面を表す矩形領域に1画面ごとに表示することを特徴とする請求項1に記載のGUI配置シミュレータ。
The arrangement setting reception unit receives a basic setting value assuming an information processing device of a two-screen display,
2. The GUI image display unit displays a GUI layout determined based on a basic setting value assuming the two-screen display for each screen in a rectangular area representing the virtual screen. GUI placement simulator described in 1.
前記GUI画像表示部は、GUIの位置の設定を無効としてもGUIの配列長がディスプレイのサイズを超えるときの当該サイズの境界値より指定されたディスプレイのサイズが小さいとき、当該配列に属するGUIのサイズの設定を無効とし、指定されたディスプレイのサイズに応じてGUIを縮小して表示することを特徴とする請求項1または2に記載のGUI配置シミュレータ。 The GUI image display unit, even if the GUI position setting is invalidated, when the size of the specified display is smaller than the boundary value of the size when the GUI array length exceeds the display size, the GUI image display unit 3. The GUI placement simulator according to claim 1, wherein the size setting is invalidated, and the GUI is reduced and displayed according to a designated display size. 4. タッチパネルで覆われたディスプレイを備えた情報処理装置において情報処理の結果として表示すべきコンテンツ画像にオンスクリーン表示するGUI(Graphical User Interface)の配置に係る情報の設定を支援するGUI配置シミュレータが行うGUI配置設定支援方法であって、
GUIの位置およびサイズの基本設定値を受け付けるステップと、
仮想的な情報処理装置のディスプレイのサイズ指定を受け付けるステップと、
前記基本設定値から求められるディスプレイのサイズに対する条件と指定されたディスプレイのサイズとの比較結果に対応する調整を行うことによりGUIの位置およびサイズを決定するステップと、
指定されたサイズを有する仮想的な画面を表す矩形領域に、決定に従う配置でGUIを配置した画像をディスプレイに表示するステップと、
確定された前記基本設定値をGUI配置情報ファイルとして記憶装置に格納するステップと、
を含み、
前記基本設定値を受け付けるステップは、GUIの所定方向の位置の設定をディスプレイの当該方向の幅に対する割合単位で、GUIのサイズの設定を長さの単位でそれぞれ受け付け、
前記位置およびサイズを決定するステップは、前記基本設定値に従えば前記方向に隣り合う2つのGUI同士に重なりが生じるときのディスプレイのサイズの境界値より指定されたディスプレイのサイズが小さいとき、当該2つのGUIのうち少なくとも1つのGUIの位置の設定を無効とし、GUI同士が接する状態を当該GUIの位置とすることを特徴とするGUI配置設定支援方法。
GUI executed by a GUI placement simulator that supports the setting of information related to the placement of a GUI (Graphical User Interface) that is displayed on-screen on a content image to be displayed as a result of information processing in an information processing apparatus including a display covered with a touch panel An arrangement setting support method,
Receiving basic setting values of the position and size of the GUI;
Receiving a display size specification of the virtual information processing apparatus;
Determining the position and size of the GUI by performing an adjustment corresponding to the comparison result between the condition for the display size obtained from the basic setting value and the specified display size;
Displaying, on a display, an image in which a GUI is arranged in an arrangement according to the decision in a rectangular area representing a virtual screen having a specified size;
Storing the determined basic setting value in a storage device as a GUI arrangement information file;
Including
The step of receiving the basic setting value includes receiving a setting of a position in a predetermined direction of the GUI in a unit of a ratio to a width in the direction of the display, and setting of a size of the GUI in a unit of length.
The step of determining the position and size may be performed when the specified display size is smaller than a boundary value of the display size when two GUIs adjacent to each other in the direction overlap according to the basic setting value. A GUI layout setting support method characterized in that setting of a position of at least one GUI of two GUIs is invalidated and a state where the GUIs are in contact with each other is set as the position of the GUI.
コンピュータに、タッチパネルで覆われたディスプレイを備えた情報処理装置において情報処理の結果として表示すべきコンテンツ画像にオンスクリーン表示するGUI(Graphical User Interface)の配置に係る情報の設定を支援する機能を実現させるコンピュータプログラムであって、
GUIの位置およびサイズの基本設定値を受け付ける機能と、
仮想的な情報処理装置のディスプレイのサイズ指定を受け付ける機能と、
前記基本設定値から求められるディスプレイのサイズに対する条件と指定されたディスプレイのサイズとの比較結果に対応する調整を行うことによりGUIの位置およびサイズを決定する機能と、
指定されたサイズを有する仮想的な画面を表す矩形領域に、決定に従う配置でGUIを配置した画像をディスプレイに表示する機能と、
確定された前記基本設定値をGUI配置情報ファイルとして記憶装置に格納する機能と、
前記コンピュータに実現させ
前記基本設定値を受け付ける機能は、GUIの所定方向の位置の設定をディスプレイの当該方向の幅に対する割合単位で、GUIのサイズの設定を長さの単位でそれぞれ受け付け、
前記位置およびサイズを決定する機能は、前記基本設定値に従えば前記方向に隣り合う2つのGUI同士に重なりが生じるときのディスプレイのサイズの境界値より指定されたディスプレイのサイズが小さいとき、当該2つのGUIのうち少なくとも1つのGUIの位置の設定を無効とし、GUI同士が接する状態を当該GUIの位置とすることを特徴とするコンピュータプログラム。
A function that supports setting of information related to the placement of a GUI (Graphical User Interface) that is displayed on-screen on a content image to be displayed as a result of information processing in an information processing apparatus having a display covered with a touch panel on a computer is realized. A computer program,
A function of accepting basic setting values of the position and size of the GUI;
A function for accepting a display size specification of a virtual information processing apparatus;
A function for determining the position and size of the GUI by performing an adjustment corresponding to the comparison result between the condition for the display size obtained from the basic setting value and the specified display size;
A function for displaying an image in which a GUI is arranged in a rectangular area representing a virtual screen having a specified size in an arrangement according to the determination;
A function of storing the determined basic setting value in a storage device as a GUI arrangement information file;
To the computer ,
The function of accepting the basic setting value accepts the setting of the position of the GUI in a predetermined direction in units of a ratio to the width of the direction of the display, and the setting of the size of the GUI in units of length.
The function of determining the position and size is such that, when the display size specified is smaller than the boundary value of the display size when two GUIs adjacent to each other in the direction overlap according to the basic setting value, at least one setting of the position of the GUI of the two GUI is invalid and the state where the GUI are in contact with each other computer program characterized to Rukoto and position of the GUI.
コンピュータに、タッチパネルで覆われたディスプレイを備えた情報処理装置において情報処理の結果として表示すべきコンテンツ画像にオンスクリーン表示するGUI(Graphical User Interface)の配置に係る情報の設定を支援する機能を実現させるコンピュータプログラムを記録した記録媒体であって、
GUIの位置およびサイズの基本設定値を受け付ける機能と、
仮想的な情報処理装置のディスプレイのサイズ指定を受け付ける機能と、
前記基本設定値から求められるディスプレイのサイズに対する条件と指定されたディスプレイのサイズとの比較結果に対応する調整を行うことによりGUIの位置およびサイズを決定する機能と、
指定されたサイズを有する仮想的な画面を表す矩形領域に、決定に従う配置でGUIを配置した画像をディスプレイに表示する機能と、
確定された前記基本設定値をGUI配置情報ファイルとして記憶装置に格納する機能と、
前記コンピュータに実現させ
前記基本設定値を受け付ける機能は、GUIの所定方向の位置の設定をディスプレイの当該方向の幅に対する割合単位で、GUIのサイズの設定を長さの単位でそれぞれ受け付け、
前記位置およびサイズを決定する機能は、前記基本設定値に従えば前記方向に隣り合う2つのGUI同士に重なりが生じるときのディスプレイのサイズの境界値より指定されたディスプレイのサイズが小さいとき、当該2つのGUIのうち少なくとも1つのGUIの位置の設定を無効とし、GUI同士が接する状態を当該GUIの位置とするコンピュータプログラムを記録したことを特徴とするコンピュータにて読み取り可能な記録媒体。
A function that supports setting of information related to the placement of a GUI (Graphical User Interface) that is displayed on-screen on a content image to be displayed as a result of information processing in an information processing apparatus having a display covered with a touch panel on a computer is realized. A recording medium on which a computer program to be recorded is recorded,
A function of accepting basic setting values of the position and size of the GUI;
A function for accepting a display size specification of a virtual information processing apparatus;
A function for determining the position and size of the GUI by performing an adjustment corresponding to the comparison result between the condition for the display size obtained from the basic setting value and the specified display size;
A function for displaying an image in which a GUI is arranged in a rectangular area representing a virtual screen having a specified size in an arrangement according to the determination;
A function of storing the determined basic setting value in a storage device as a GUI arrangement information file;
To the computer ,
The function of accepting the basic setting value accepts the setting of the position of the GUI in a predetermined direction in units of a ratio to the width of the direction of the display, and the setting of the size of the GUI in units of length.
The function of determining the position and size is such that, when the display size specified is smaller than the boundary value of the display size when two GUIs adjacent to each other in the direction overlap according to the basic setting value, at least one and disable the setting position of the GUI, readable recording medium a state in which the GUI are in contact with each other by a computer, characterized by recording a computer program that the position of the GUI of the two GUI.
JP2011199885A 2011-09-13 2011-09-13 GUI placement simulator and GUI placement setting support method Active JP5669698B2 (en)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP2011199885A JP5669698B2 (en) 2011-09-13 2011-09-13 GUI placement simulator and GUI placement setting support method
US14/239,922 US9952755B2 (en) 2011-09-13 2012-08-28 Information processing device, information processing method, data structure of content file, GUI placement simulator, and GUI placement setting assisting method
CN201280042985.3A CN103782263B (en) 2011-09-13 2012-08-28 Information processing device, information processing method, content file data structure, GUI placement simulator, and GUI placement setting assistance method
EP12832539.6A EP2722742A4 (en) 2011-09-13 2012-08-28 Information processing device, information processing method, content file data structure, gui placement simulator, and gui placement setting assistance method
PCT/JP2012/005391 WO2013038605A1 (en) 2011-09-13 2012-08-28 Information processing device, information processing method, content file data structure, gui placement simulator, and gui placement setting assistance method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011199885A JP5669698B2 (en) 2011-09-13 2011-09-13 GUI placement simulator and GUI placement setting support method

Publications (2)

Publication Number Publication Date
JP2013061804A JP2013061804A (en) 2013-04-04
JP5669698B2 true JP5669698B2 (en) 2015-02-12

Family

ID=48186423

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011199885A Active JP5669698B2 (en) 2011-09-13 2011-09-13 GUI placement simulator and GUI placement setting support method

Country Status (1)

Country Link
JP (1) JP5669698B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6681110B2 (en) * 2016-05-09 2020-04-15 株式会社コーエーテクモゲームス User interface processing program and recording medium
JP2018010541A (en) * 2016-07-14 2018-01-18 望月 貴里子 User interface

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH02127720A (en) * 1988-11-08 1990-05-16 Mitsubishi Electric Corp Input device simulation system for information processor
JPH02235140A (en) * 1989-03-08 1990-09-18 Kansai Nippon Denki Software Kk Density conversion system at the time of displaying image data
JPWO2003077097A1 (en) * 2002-03-08 2005-07-07 三菱電機株式会社 Mobile communication device, display control method for mobile communication device, and program thereof
JP4471761B2 (en) * 2004-07-26 2010-06-02 任天堂株式会社 GAME PROGRAM, GAME DEVICE, AND INPUT DEVICE
JP2006331339A (en) * 2005-05-30 2006-12-07 Mitsubishi Electric Corp Layout device, layout method, program, and data structure
JP2009025343A (en) * 2007-07-17 2009-02-05 Victor Co Of Japan Ltd Video output device
JP5169311B2 (en) * 2008-02-28 2013-03-27 株式会社リコー Screen data generation device, screen data generation method, and screen data generation program
JP2010218533A (en) * 2009-02-18 2010-09-30 Panasonic Electric Works Co Ltd Display picture design support device and program
JP5326944B2 (en) * 2009-08-31 2013-10-30 株式会社リコー Image forming apparatus, screen display method, and program

Also Published As

Publication number Publication date
JP2013061804A (en) 2013-04-04

Similar Documents

Publication Publication Date Title
WO2013038605A1 (en) Information processing device, information processing method, content file data structure, gui placement simulator, and gui placement setting assistance method
US11048404B2 (en) Information processing apparatus, information processing method, and program
JP5379250B2 (en) Input device, information processing device, and input value acquisition method
CA2765913C (en) Method and apparatus for area-efficient graphical user interface
EP2701044A1 (en) Information processing device, information processing method, and computer-readable recording medium which records program
JP6155869B2 (en) Display control apparatus, display control method, and program
JP4741983B2 (en) Electronic device and method of operating electronic device
EP2211261A2 (en) Apparatus and method for adjusting a characteristics of a multimedia item
JP4956644B2 (en) Electronic device and input control method
JP2008165735A (en) Mobile terminal and display method thereof
WO2014075408A1 (en) Method and apparatus for setting virtual keyboard
JP5669698B2 (en) GUI placement simulator and GUI placement setting support method
JP5669697B2 (en) Information processing apparatus, information processing method, and data structure of content file
JP5901295B2 (en) Mobile terminal device having enlarged display function, enlarged display control method, and program
JP5230559B2 (en) Display control apparatus, control method thereof, and program
JP7196246B2 (en) USER INTERFACE PROCESSING PROGRAM, RECORDING MEDIUM, USER INTERFACE PROCESSING METHOD
JP6434339B2 (en) Electronic device, control method, and control program
JP2017174459A (en) Display control device, display control method, and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20131004

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140826

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20141024

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20141202

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20141216

R150 Certificate of patent or registration of utility model

Ref document number: 5669698

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250