CN103298530A - 信息处理装置 - Google Patents

信息处理装置 Download PDF

Info

Publication number
CN103298530A
CN103298530A CN2011800647302A CN201180064730A CN103298530A CN 103298530 A CN103298530 A CN 103298530A CN 2011800647302 A CN2011800647302 A CN 2011800647302A CN 201180064730 A CN201180064730 A CN 201180064730A CN 103298530 A CN103298530 A CN 103298530A
Authority
CN
China
Prior art keywords
image
convergent
comment
divergent rate
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2011800647302A
Other languages
English (en)
Other versions
CN103298530B (zh
Inventor
椚田尚亨
朴哉炫
金妍淑
池宙营
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Interactive Entertainment Inc
Original Assignee
Sony Computer Entertainment Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Computer Entertainment Inc filed Critical Sony Computer Entertainment Inc
Publication of CN103298530A publication Critical patent/CN103298530A/zh
Application granted granted Critical
Publication of CN103298530B publication Critical patent/CN103298530B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T9/00Image coding
    • G06T9/40Tree coding, e.g. quadtree, octree
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50Controlling the output signals based on the game progress
    • A63F13/53Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game
    • A63F13/537Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game using indicators, e.g. showing the condition of a game character on screen
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/001Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
    • G09G3/003Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background to produce spatial visual effects
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/37Details of the operation on graphic patterns
    • G09G5/373Details of the operation on graphic patterns for modifying the size of the graphic pattern
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/37Details of the operation on graphic patterns
    • G09G5/377Details of the operation on graphic patterns for mixing or overlaying two or more graphic patterns
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50Controlling the output signals based on the game progress
    • A63F13/52Controlling the output signals based on the game progress involving aspects of the displayed game scene
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/30Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by output arrangements for receiving control signals generated by the game device
    • A63F2300/303Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by output arrangements for receiving control signals generated by the game device for displaying additional data, e.g. simulating a Head Up Display
    • A63F2300/305Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by output arrangements for receiving control signals generated by the game device for displaying additional data, e.g. simulating a Head Up Display for providing a graphical or textual hint to the player
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/30Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by output arrangements for receiving control signals generated by the game device
    • A63F2300/308Details of the user interface
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/50Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by details of game servers
    • A63F2300/57Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by details of game servers details of game services offered to the player
    • A63F2300/572Communication between players during game play of non game information, e.g. e-mail, chat, file transfer, streaming of audio and streaming of video
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60Methods for processing data by generating or executing the game program
    • A63F2300/66Methods for processing data by generating or executing the game program for rendering three dimensional images
    • A63F2300/6615Methods for processing data by generating or executing the game program for rendering three dimensional images using models with different levels of detail [LOD]
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/04Changes in size, position or resolution of an image
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/04Changes in size, position or resolution of an image
    • G09G2340/045Zooming at least part of an image, i.e. enlarging it or shrinking it
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/12Overlay of images, i.e. displayed pixel being the result of switching between the corresponding input pixels

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Optics & Photonics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Processing Or Creating Images (AREA)
  • Image Processing (AREA)

Abstract

评论数据取得部(160)取得用于重叠显示于显示图像的评论数据,重叠处理部(162)基于评论数据生成重叠图像。评论数据中包含有缩放率或与缩放率相关的信息,显示条件判断部(164)判断是否与评论数据所包含的缩放率或与缩放率相关的信息处于预定关系。当处于预定关系时,重叠图像生成部(166)使用评论数据所包含的显示信息来生成评论图像。

Description

信息处理装置
技术领域
本发明涉及将显示器所显示的图像放大/缩小或使之向上、下、左、右移动的处理技术。
背景技术
已提出有不仅执行游戏程序,还能够再现动图像的家庭用娱乐系统。在该家庭用娱乐系统中,GPU生成使用了多面体的三维图像(例如参照专利文献1)。
近年,已提出有使用基于高精细的照片等数字图像而生成的多种分辨率的平铺(tile)图像,来进行显示图像的放大/缩小处理、向上、下、左、右方向的移动处理的技术。在该图像处理技术中,多阶段地缩小原图像尺寸地生成不同分辨率的图像,将各阶层的图像分割为一个或多个平铺图像,以阶层构造表现原图像。通常,分辨率最低的图像由1个平铺图像构成,分辨率最高的原图像由最多数量的平铺图像构成。在显示图像的放大处理或缩小处理时,信息处理装置通过将正使用的平铺图像切换为不同阶层的平铺图像,来使得能够迅速地进行放大显示或缩小显示。
〔在先技术文献〕
〔专利文献〕
〔专利文献1〕美国专利第6563999号公报
发明内容
〔发明所要解决的课题〕
用户通过放大内容(contents)的图像,能确认到内容的细小处,通过缩小内容的图像,能够观看到内容整体的均衡。因此,能够容易地放大、缩小内容图像的工具在评价该内容方面是很重要的。此时,通常还想参考他人的评价,希望开发出既能够参照他人的评价,又能够将自身的评价提供给他人的应用程序。
本发明是鉴于这样的课题而研发的,其目的在于提供一种能够在显示内容图像时,既显示来自其它用户的输入,又反映自身的输入的应用程序。
〔用于解决课题的手段〕
为解决上述课题,本发明一个方案的信息处理装置是一种将整体图像的全部或一部分显示于显示器的信息处理装置,包括:接收部,接收显示图像的变更指示;显示图像生成部,按照变更指示来确定要显示的图像的缩放率或与缩放率相关的信息,生成作为整体图像的全部或一部分的显示图像;取得部,取得用于重叠显示于显示图像的重叠数据;以及重叠处理部,基于重叠数据生成重叠图像。重叠数据中包含有缩放率或与缩放率相关的信息。重叠处理部包括:判断部,判断由显示图像生成部生成的显示图像的缩放率与重叠数据中所包含的缩放率或与缩放率相关的信息是否处于预定关系;重叠图像生成部,基于重叠数据生成要在显示图像上显示的重叠图像。
本发明的另一方案也是一种信息处理装置。该装置是将整体图像的全部或一部分显示于显示器的信息处理装置,包括:第1接收部,接收显示图像的变更指示;显示图像生成部,按照变更指示来确定要显示的图像的缩放率或与缩放率相关的信息,生成作为整体图像的全部或一部分的显示图像;第2接收部,接收来自用户的输入;以及输入处理部,处理在第2接收部中接收到的输入。输入处理部包括:位置信息取得部,取得用于确定第2接收部所接收到的输入在显示图像中的位置的位置信息;以及建立对应部,将由位置信息取得部取得的位置信息与来自用户的输入建立对应,位置信息中包含有第2接收部接收到输入后的显示图像的缩放率或与缩放率相关的信息。
此外,将以上构成要素的任意组合、本发明的表现形式在方法、装置、系统、计算机程序等间变换后的实施方式,作为本发明的方案也是有效的。
〔发明效果〕
根据本发明,能够提供可在显示内容图像时,既显示来自其它用户的输入,又反映自身的输入的应用程序。
附图说明
图1是表示本发明的实施例的信息处理系统的图。
图2是表示输入装置的外观结构的图。
图3是表示在信息处理系统中使用的图像数据的阶层构造的图。
图4是用于说明缩放率的关系的说明图。
图5是用于说明阶层数据的坐标系的说明图。
图6是信息处理装置的功能块图。
图7是表示信息处理装置中的控制部的结构的图。
图8是表示内容阅览应用程序的菜单画面的一个例子的图。
图9是表示在内容图像的显示处理开始时被显示于输出装置的显示图像的一个例子的图。
图10是表示蓄积服务器所蓄积的评论数据的一个例子的图。
图11是重叠图像的显示控制的说明图。
图12是表示alpha混合中的α的图。
图13是表示图标图像的例子的图。
图14是表示将初始图像放大处理后的显示图像的一个例子的图。
图15是表示包含有评论图像的显示图像的一个例子的图。
图16是表示以列表形式显示评论的例子的图。
图17是表示重叠图像的显示控制的流程图的图。
图18是表示显示图像的一个例子的图。
图19是表示在显示图像上生成的评论写入区域的图。
图20是表示用户进行文本输入后的状态的图。
图21是表示在建立对应部中生成的评论数据的一个例子的图。
具体实施方式
图1表示本发明的实施例的信息处理系统1。信息处理系统1包括通过网络18可通信地连接的信息处理装置10、图像数据提供服务器2及蓄积服务器4。网络18例如可以是使用TCP/IP协议的因特网。此外,在图1中表示了1个信息处理装置10,但也可以是多个信息处理装置10连接于网络18。
信息处理装置10具备输出装置12。输出装置12可以是具备输出图像的显示器和输出声音的扬声器的电视,也可以是计算机显示器。输出装置12可以通过有线缆线与信息处理装置10连接,也可以通过无线LAN(Local AreaNetwork:局域网)等无线连接。输入装置20是由用户操作,用于对信息处理装置10输入用户的操作信息的输入接口。
在信息处理系统1中,信息处理装置10具备执行图像处理的功能。信息处理装置10根据从用户输入给输入装置20的操作信息,来进行输出装置12的显示器所显示的显示图像的放大/缩小处理、向上、下、左、右方向的移动处理等变更显示图像的处理。
信息处理装置10可以是执行GUI应用程序或游戏应用程序的游戏装置、通过载入图像处理用的程序来实现图像处理功能。信息处理装置10也可以是可执行各种应用程序的个人计算机、通过载入图像处理用的程序来实现图像处理功能。此外,信息处理装置10、输入装置20及输出装置12可以被一体地形成,例如可以被构成为具备图像处理功能的便携式终端装置。
图像数据提供服务器2保持有以多种分辨率的平铺图像来表现一个内容的整体图像的、被阶层化了的图像数据。图像数据提供服务器2保持有多个内容的图像数据,各图像数据通过用于确定内容的识别信息(以下称作“内容ID”)来区分。图像数据提供服务器2按照来自信息处理装置10的请求,将在信息处理装置10中生成显示图像所需要的平铺图像提供给信息处理装置10。图像数据提供服务器2还可以将被阶层化了的图像数据的整体提供给信息处理装置10。
信息处理装置10连接于网络18,按照被输入输入装置20的操作信息从图像数据提供服务器2适当下载取得生成显示图像所需要的平铺图像。此外,信息处理装置10也可以从图像数据提供服务器2下载取得被阶层化了的压缩图像数据的整体。
蓄积服务器4中蓄积有针对内容图像、从多个用户输入来的评论。蓄积服务器4中保持有针对多个内容的评论数据,评论数据被捆绑于内容ID。蓄积服务器4按照来自信息处理装置10的请求将评论数据提供给信息处理装置10。此外,在图1中,将图像数据提供服务器2与蓄积服务器4表示为了不同的服务器,但它们可以被构成为同一服务器。
在信息处理系统1中,信息处理装置10的用户能够在输出装置12所显示的内容图像上参照到由其它用户输入的评论,还能够自己附加评论。由其它用户输入的评论被蓄积在蓄积服务器4中,信息处理装置10在从图像数据提供服务器2下载某一内容的图像数据时,通过从蓄积服务器4下载被捆绑于同一内容ID的评论数据,能够显示其它用户的评论。
本实施例的信息处理装置10按照来自用户的指示,进行内容图像的放大/缩小处理、向上、下、左、右方向的移动处理,来显示内容图像整体的全部或一部分。在本实施例中,内容的整体图像例如表现出杂志的1个图版页、即在打开杂志时相面对的左右2个页。当用户操作输入装置20在正显示的图像上输入评论时,信息处理装置10将所输入的评论与其在显示图像中的输入位置建立对应。被建立了对应的评论及输入位置信息(评论设定位置信息)被与内容ID一起发送给蓄积服务器4并被蓄积。
在本实施例中,内容图像被进行放大/缩小处理,故评论设定位置信息由虚拟三维空间中的3个参数来确定。作为一个例子,评论设定位置信息被以表现XY平面上的一点的X坐标值、Y坐标值,及放大/缩小的比例(以下称作“缩放率”)来表现。在本实施例中,用于显示评论的条件被设定为:显示图像中包含有评论设定位置信息的X坐标值、Y坐标值,并且显示图像的缩放率处于评论设定位置信息的缩放率附近。
信息处理装置10在下载图像数据时,最先将内容图像的整体显示于输出装置12。用户在观看内容的整体图像而决定想要详细看的区域后,操作输入装置20,使该区域放大显示。此时,当该区域处附加有评论,且显示图像的缩放率到达评论设定位置信息的缩放率附近时,信息处理装置10将评论重叠显示在显示图像上。由此,用户能够参照其它用户所附加的评论。此外,在显示图像的缩放率到达评论设定位置信息的缩放率附近之前的期间,可以显示将存在评论的情况通知给用户的某种指示器(Indicator)。
图2表示输入装置20的外观结构。输入装置20具备十字键21、模拟摇杆27a、27b和4种操作按钮26作为用户可操作的操作手段。4种操作按钮26由○按钮22、×按钮23、□按钮24及△按钮25构成。
在信息处理系统1中,输入装置20的操作手段被分派用于输入显示图像的放大/缩小指示及向上、下、左、右方向的滚动指示的功能。例如,放大/缩小显示图像的指示的输入功能被分派给右侧的模拟摇杆27b。用户通过将模拟摇杆27b向身前拉,能够输入缩小显示图像的指示,通过向前推,能够输入放大显示图像的指示。显示图像的滚动指示的输入功能被分派给模拟摇杆27a。用户通过将模拟摇杆27a向前、后、左、右按倒,能够输入显示图像的滚动指示。在本实施例中,将显示图像的放大指示和缩小指示、滚动指示汇总地称为图像变更指示。
输入装置20具有将所输入的图像变更指示信号传送给信息处理装置10的功能,在本实施例中,被构成为能与信息处理装置10之间无线通信。输入装置20和信息处理装置10可以使用Bluetooth(蓝牙)(注册商标)协议、IEEE802.11协议等来建立无线连接。此外,输入装置20也可以介由缆线与信息处理装置10连接,将图像变更指示信号传送给信息处理装置10。
图3表示在信息处理系统1中使用的图像数据的阶层构造。该图像数据被保持在图像数据提供服务器2中,图像数据提供服务器2向信息处理装置10适当提供生成显示图像所需要的平铺图像。此外,图像数据提供服务器2也可以对信息处理装置10通知表示图像数据的阶层构造的构造数据,信息处理装置10使用该数据,基于输入装置20的操作信息来导出确定帧图像(显示图像)的空间坐标。此外,该阶层构造在所有内容中是被共通化的,因此,信息处理装置10可以基于该共通的构造数据如以下所示那样导出空间坐标。
图像数据具备沿深度(Z轴)方向包含第0阶层30、第1阶层32、第2阶层34及第3阶层36的阶层构造,以下将该具备阶层构造的图像数据称作“阶层数据”。此外,可以有第4阶层以上的高阶层,阶层数也可以在3以下,但至少存在2个阶层。图3所示的阶层数据28具备四叉树阶层构造,各阶层由1个以上平铺图像38构成。所有平铺图像38被形成为具有相同像素数的相同尺寸,例如具有256×256像素。各阶层的图像数据以不同分辨率来表现一个整体图像,将具有最高分辨率的第3阶层36的原图像多阶段地缩小而生成第2阶层34、第1阶层32、第0阶层30的图像数据。例如第N阶层的分辨率(N是0以上的整数)可以在左右(X轴)方向和上下(Y轴)方向上都是第(N+1)阶层的分辨率的1/2。
在图3所示的阶层数据构造中,深度(Z轴)方向上的位置表示分辨率,越是靠近第0阶层30的位置,分辨率越低,越是靠近第3阶层36的位置,分辨率越高。若关注显示器所显示的图像的大小,则深度方向上的位置对应于缩放率,在以第3阶层36的显示图像为基准、将该缩放率定为1时,第2阶层34中的缩放率是1/4、第1阶层32中的缩放率是1/16,第0阶层30中的缩放率是1/64。因此,在深度方向上,显示图像从第0阶层30侧向第3阶层36侧变化时,显示图像逐渐放大,从第3阶层36侧向第0阶层30侧变化时,显示图像逐渐缩小。
在图像数据提供服务器2中,阶层数据28被以按预定的压缩形式压缩后的状态保持在存储装置中。在阶层数据中,压缩处理可以按平铺图像单位进行,也可以在同一阶层内或不同阶层之间按多个平铺图像单位进行。图像数据提供服务器2保持有多个内容的阶层数据28。多个阶层数据28被以内容ID来识别。
如图3所示那样,将阶层数据28的阶层构造的左右方向设定为X轴、上下方向设定为Y轴、深度方向设定为Z轴而构建虚拟三维空间。在该阶层构造中,X轴及Y轴定义使原点相同的共通的坐标系。信息处理装置10基于从输入装置20提供来的图像变更指示而导出显示图像的变更量,并使用所导出的变更量,来导出用于确定阶层的信息和该阶层中的纹理坐标(UV坐标)。将该阶层确定信息和纹理坐标的组合称作空间坐标。虚拟空间中的空间坐标被用于要使用的平铺图像的确定处理及显示图像的生成处理。信息处理装置10也可以使用显示图像的变更量来导出虚拟空间中的帧图像的四角坐标。将该四角帧坐标也称作空间坐标。信息处理装置10还可以导出虚拟空间中的帧图像的中心坐标(X,Y)和缩放率SCALE作为空间坐标。信息处理装置10可以采用任意一种方法,只要能够基于从输入装置20提供来的图像变更指示信号来确定适当阶层的平铺图像38的使用区域即可。
在信息处理装置10从图像数据提供服务器2适当下载取得显示图像的生成所需要的平铺图像的情况下,信息处理装置10将所导出的空间坐标发送给图像数据提供服务器2,图像数据提供服务器2将通过空间坐标来确定的平铺图像提供给信息处理装置10。此外,图像数据提供服务器2例如可以通过预测来确定出将来可能需要的平铺图像,并提前提供给信息处理装置10。此外,当信息处理装置10已从图像数据提供服务器2下载了阶层数据的整体时,信息处理装置10只要基于所导出的空间坐标确定平铺图像38的使用区域即可。
图4是用于说明缩放率的关系的说明图。在该阶层数据构造中,各阶层被表现为L0(第0阶层30)、L1(第1阶层32)、L2(第2阶层34)、L3(第3阶层36)。在图4所示的阶层数据构造中,深度(Z轴)方向上的位置表示分辨率,越是靠近L0的位置,分辨率越低,越是靠近L3的位置,分辨率越高。若关注显示器所显示的图像的大小,则深度方向上的位置对应于缩放率,在将L3的显示图像的缩放率定为1时,L2中的缩放率是1/4、L1中的缩放率是1/16,L0中的缩放率是1/64。
第1边界31、第2边界33、第3边界35的缩放率被以L3为基准来定义、被作为用于规定平铺图像阶层的判断基准来利用,该平铺图像阶层用于生成显示图像。第1边界31的缩放率被设定为1/32,若显示图像的请求缩放率比1/32小,则使用L0平铺图像来生成显示图像。第2边界33的缩放率被设定为1/8,若显示图像的要求缩放率在1/32以上且比1/8小,则使用L1平铺图像来生成显示图像。同样地,第3边界35的缩放率被设定为1/2,若显示图像的请求缩放率在1/8以上且比1/2小,则使用L2平铺图像。此外,若显示图像的要求缩放率在1/2以上,则使用L3平铺图像。因此,只要此后要显示的图像的请求缩放率已定,则信息处理装置10能够从图像数据提供服务器2取得与该缩放率对应的分辨率的平铺图像,生成被调整为该缩放率后的显示图像。此外,可以在图3所示的虚拟三维空间中以深度方向上的Z坐标来表现缩放率,能够将此时的Z坐标在信息处理装置10中作为与缩放率相关联的信息来处理。此外,同样地,也可以在虚拟三维空间中以分辨率来表现缩放率,也能够将此时的分辨率在信息处理装置10中作为与缩放率相关联的信息来处理。
图5是用于说明阶层数据的坐标系的说明图。如已述的那样,各阶层的图像数据被以使X轴及Y轴的原点相同的、共同的坐标系来表现。若关注XY平面上的一点(x,y),则在阶层数据的虚拟三维空间中以(x,y,SCALE)来表现空间坐标。具体来讲,分别以(x,y,1/64)表现第0阶层30上的点A的坐标、以(x,y,1/16)表现第1阶层32上的点B的坐标、以(x,y,1/4)表现第2阶层34上的点C的坐标、以(x,y,1)表现第3阶层36的点D的坐标。
图6表示信息处理装置10的功能块图。信息处理装置10是具备无线接口40、开关42、显示处理部44、硬盘驱动器50、记录介质安装部52、盘驱动器54、主存储器60、缓冲存储器70及控制部100而构成的。显示处理部44使用帧存储器来缓冲要显示于输出装置12的显示器的数据。显示处理部44具有使重叠图像重叠显示于内容图像的功能,此点会在后文叙述。
开关42是以太网开关(以太网是注册商标),是通过有线或无线与外部设备连接并进行数据收发的设备。开关42连接于外部的网络18,从图像数据提供服务器2接收平铺图像数据,从蓄积服务器4接收评论数据。开关42还连接于无线接口40,无线接口40通过预定的无线通信协议与输入装置20连接。在输入装置20中,从用户输入来的图像变更指示信号经由无线接口40、开关42而被提供给控制部100。
硬盘驱动器50作为存储数据的辅助存储装置来发挥作用。介由开关42接收到的压缩图像数据被保存在主存储器60中,但在下载阶层数据的整体时,阶层数据可以被保存在硬盘驱动器50中。记录介质安装部52在被安装了存储卡等可插拔记录介质时,从可插拔记录介质中读出数据。盘驱动器54在被安装了只读的ROM盘时,驱动并识别ROM盘,读出数据。ROM盘可以是光盘或光磁盘等、可以保存有压缩图像数据。此外,硬盘驱动器50中可以预安装有压缩图像数据。压缩图像数据还可以被记录在可插拔记录介质或ROM盘中,并在执行显示处理时被读出到主存储器60。
控制部100具备多核(Multiple core)CPU,1个CPU中具备1个通用处理器核和多个单处理器核。通用处理器核被称作PPU(Power Processing Unit),其它处理器核被称作SPU(Synergistic-Processing Unit)。
控制部100具备连接于主存储器60及缓冲存储器70的存储器控制器。PPU具备寄存器,并具备主处理器作为运算执行主体,将要执行的应用程序中的作为基本处理单位的任务高效地分派给各SPU。此外,PPU也可以自己执行任务。SPU具备寄存器,并具备作为运算执行主体的副处理器和作为本地存储区域的本地存储器。可以将本地存储器作为缓冲存储器70来使用。主存储器60及缓冲存储器70是存储装置、是作为RAM(随机存取存储器)而构成的。SPU具备专用的DMA(Direct Memory Access:直接存储器存取)控制器作为控制单元,能够高速地进行主存储器60与缓冲存储器70之间的数据传送,还能够在帧存储器与缓冲存储器70之间实现高速的数据传送。本实施例的控制部100通过使多个SPU并行地动作,来实现高速的图像处理功能。显示处理部44连接于输出装置12,输出与来自用户的请求相应的图像处理结果。
图7表示信息处理装置10中的控制部100的结构。控制部100具备输入接收部110、发送部130、图像处理部140及评论处理部180。输入接收部110具有从输入装置20接收操作信息的功能,并具备变更指示接收部112、评论制作指示接收部114、字符输入接收部116、缩略图选择指示接收部118及开始指示接收部120。图像处理部140具有执行显示图像和重叠图像的生成处理的功能,具体来讲具有执行显示图像的放大/缩小、滚动等变更处理、评论图像及图标图像的生成处理的功能,并具备图像数据取得部142、解码部144、变更量导出部146、显示图像生成部150、评论数据取得部160、重叠处理部162及菜单图像生成部174。重叠处理部162具有显示条件判断部164及重叠图像生成部166,重叠图像生成部166具有评论图像生成部168及图标生成部170。评论处理部180具有处理从用户输入来的评论的功能,并具备写入区域生成部182、位置信息取得部184及建立对应部186。
在图7中,作为进行各种处理的功能块而叙述的各要素,从硬件上来讲,能够由CPU(Central Processing Unit:中央处理器)、存储器、其它LSI来构成,从软件上来讲,由被载入到存储器中的程序等来实现。如已述的那样,控制部100具备1个PPU和多个SPU,PPU及SPU能够分别单独或共同构成各功能块。因此,本领域技术人员当理解这些功能块能够仅由硬件、仅由软件、或由它们的组合以各种形式来实现,并不限定于某一种。
在信息处理系统1中,信息处理装置10执行能够实现评论的写入及参照的内容阅览应用程序。在该应用程序中,作为菜单画面,可阅览的内容的缩略图图像被首先显示于输出装置12。该缩略图图像可以是静止图像,也可以是动图像。信息处理装置10从图像数据提供服务器2取得可阅览的内容的缩略图图像。可以针对内容的各类别分别生成菜单画面。
图8表示内容阅览应用程序的菜单画面的一个例子。在输出装置12的显示器中,在菜单画面设有用于选择可阅览的内容的类别的类别选择区域200。用户通过操作输入装置20,能够选择类别选择区域200所包含的类别。在图8中,类别“car”正被选中,在内容显示区域204a、204b、204c中,关于类别“car”,显示有可阅览的内容的缩略图图像。用户通过操作输入装置20移动选择框206,能够选择缩略图图像,被配置了选择框206的缩略图图像的放大图像被显示在选择内容显示区域202中。
以上菜单图像由菜单图像生成部174来生成。菜单图像生成部174从图像数据提供服务器2取得生成菜单图像所需要的菜单数据。在类别选择区域200中选中类别后,菜单图像生成部174从菜单数据中抽取出与所选中的类别建立了对应的内容ID。发送部130经由开关42将所抽取的内容ID发送给图像数据提供服务器2,图像数据提供服务器2将与内容ID建立了对应的缩略图图像提供给信息处理装置10。在图像数据取得部142接收到缩略图图像后,菜单图像生成部174将缩略图图像粘贴在内容显示区域204中。
在缩略图选择指示接收部118接收到内容显示区域204所显示的缩略图图像的选择指示、即选择框206的移动指示后,菜单图像生成部174使选择框206在内容显示区域204间移动,在选择内容显示区域202中显示所选中的缩略图图像的放大图像。此外,可以由图像数据提供服务器2提供该放大图像。在用户按下输入装置20的○按钮22时,在图8所示的菜单画面中开始进行选择内容显示区域202所示的内容图像的显示处理。
图9是表示在内容图像的显示处理开始时被示于输出装置12的显示图像的一个例子。在图8所示的菜单画面中、在用户按下○按钮22时,开始指示接收部120接收该操作信息作为开始显示处理的指示,图像数据取得部142从图像数据提供服务器2取得内容图像的初始图像数据。图像数据提供服务器2中预先保持有用于在信息处理装置10中生成初始图像的平铺图像,图像数据取得部142使初始图像的取得请求与内容ID一起从发送部130发送后,图像数据提供服务器2将构成由该内容ID确定的初始图像的平铺图像发送给信息处理装置10。
在开始指示接收部120接收到开始显示处理的指示后,评论数据取得部160从蓄积服务器4中取得评论数据。在评论数据取得部160使评论数据的取得请求与内容ID一起从发送部130发送后,蓄积服务器4向信息处理装置10发送由该内容ID确定的评论数据。
图10表示蓄积服务器4所蓄积的评论数据的一个例子。在图10中,以表的形式表示了评论数据,但也可以以CSV形式等预定的形式蓄积。评论数据是用于重叠显示在输出装置12所显示的图像上的重叠数据,包括识别信息(ID)、用户名、制作日期时间、显示信息、设定位置信息、以及链接信息的项目。
ID是确定评论数据的信息,从制作日期时间较早的评论起,被依次分配从1起的ID。用户名是确定制作评论的用户的信息,显示信息表示由用户输入的字符(评论)。此外,在此,显示信息表示由用户进行了文本输入后的评论的例子,但显示信息例如也可以是照片图像、角色图像等。设定位置信息是确定在由阶层数据构成的虚拟三维空间中被输入评论的位置信息的信息。链接信息是表示在评论彼此之间是否链有链接的信息,当链有链接时,记述所对应的评论数据的ID,若未链有,则记述空值。
返回图7,在开始指示接收部120接收到开始显示处理的指示后,图像数据取得部142从图像数据提供服务器2取得初始图像用的平铺图像,此外,评论数据取得部160从蓄积服务器4取得评论数据。平铺图像数据及评论数据被存储在主存储器60中。此外,评论数据的存储形式可以是表形式,也可以是CSV形式。接着,显示图像生成部150使用所取得的平铺图像来生成内容图像的初始图像,重叠处理部162使用所取得的评论数据来生成要重叠于初始图像的重叠图像。内容图像的初始图像是内容整体的图像,即,在本实施例中是杂志图版页整体的图像。重叠处理部162将所生成的重叠图像提供给显示处理部44。显示处理部44将在重叠处理部162中生成的重叠图像重叠显示于在显示图像生成部150中生成的显示图像,来生成图9所示的帧图像。
在图9中,显示有多个图标图像220、222、224、226和评论图像228。这些图标图像及评论图像是在重叠处理部162中生成的重叠图像,被显示处理部44合成于内容图像。评论图像228被基于评论数据所包含的显示信息而生成,在参照图10时,表现有ID4的评论数据的显示信息。图标图像220、222、224、226是用于通知显示信息(即评论)的存在的标记图像,若逐渐放大显示附加有图标图像的区域,则用户能够观看评论。此外,根据输出装置12所正显示的图像的缩放率与评论数据所包含的缩放率的关系来决定图标图像220、222、224、226各自的显示方式。
以下,在说明重叠处理部162的动作之前,说明显示图像生成部150所进行的显示图像的生成处理。在用户操作输入装置20的模拟摇杆27时,图像变更指示信号被发送给信息处理装置10。变更指示接收部112从输入装置20接收显示器所正显示的显示图像的变更指示信号。
变更量导出部146基于变更指示信号来导出被请求显示的显示图像的变更量。显示图像的变更量是在阶层数据的虚拟三维空间中、显示图像的每1帧的上、下、左、右方向的移动量及深度方向的移动量。显示图像生成部150决定根据所导出的变更量而要从上次帧的空间坐标移动的本次帧的空间坐标(位置信息)。在此,空间坐标是由帧图像的中心坐标(X,Y)和缩放率SCALE来确定的位置信息(X,Y,SCALE)。变更量导出部146基于变更指示信号导出变更量(ΔX,ΔY,ΔSCALE),显示图像生成部150对上次帧的位置信息(Xprev,Yprev,SCALEprev)加上变更量(ΔX,ΔY,ΔSCALE),来决定本次帧的位置信息(X,Y,SCALE)。显示图像生成部150像这样确定所要显示的图像的缩放率SCALE,但也可以如已述的那样,确定分辨率等与缩放率相关的信息。
发送部130将在显示图像生成部150中决定的空间坐标发送给图像数据提供服务器2。图像数据提供服务器2在接收到空间坐标后,判断是否需要为在信息处理装置10中生成显示图像而变更平铺图像,当需要变更平铺图像时,将该平铺图像提供给信息处理装置10。图像数据取得部142在取得平铺图像后,使之保持在主存储器60中。解码部144从主存储器60中读出并解码用于生成显示图像的平铺图像,并使之保持在缓冲存储器70中。显示图像生成部150基于位置信息、使用缓冲存储器70所保持的平铺图像来生成显示图像(帧图像)并提供给帧存储器90。所生成的显示图像表现内容图像的整体的全部或一部分,在此,所谓整体图像的全部,是图9所示的显示图像,所谓整体图像的一部分,是将图9所示的显示图像放大显示后的图像。
通过如以上那样显示图像生成部150生成显示图像,信息处理装置10能够高速地执行显示图像的放大、缩小处理及滚动处理,向用户提供图像的顺畅的变化。
接下来,说明重叠处理部162的动作。重叠处理部162基于评论数据生成用于重叠于显示图像的重叠图像。如图9所示那样,重叠图像中存在显示评论的评论图像和用于通知评论的存在的图标图像。
在图10中,设定位置信息表示评论所被输入的位置信息,并包含有(x,y,scl)的参数。x表示内容图像中的X坐标、y表示内容图像中的Y坐标,scl表示评论输入时点的显示图像的缩放率。此外,也可以取代缩放率而使用分辨率等与缩放率相关的信息。(x,y)是确定在整体图像中的二维坐标的信息。根据本实施例的重叠图像的显示控制,在将初始图像放大显示,显示图像的缩放率接近设定位置信息的scl时,在初始图像中所显示的图标图像被切换为评论图像。在显示图像被进一步放大显示、显示图像的缩放率越过设定位置信息的scl时,进行重叠图像的显示控制,以使得评论显示逐渐变淡,最后从显示图像中消失。
图11是重叠图像的显示控制的说明图。有2个用于显示重叠图像的条件。第1条件是显示图像中包含有设定位置信息内的二维坐标(x,y),第2条件是显示图像的缩放率与设定位置信息内的缩放率scl处于预定的关系。使用图11来说明第2条件。
以由设定位置信息所确定的缩放率scl为基准,以缩放率1/2×scl为下限值、以缩放率2×scl为上限值的范围R1被设定为评论显示区域。即,在
1/2×scl≦显示图像的缩放率≦2×scl··(条件a)
这一条件被满足时,评论图像被重叠显示于显示图像。通过在整个范围R1内都设定评论显示区域,能够使得在放大/缩小显示图像时用户不会漏看评论。
此外,缩放率比下限值小的区域R2被设定为图标显示区域。即,在
显示图像的缩放率<1/2×scl··(条件b)
这一条件被满足时,图标图像被重叠显示于显示图像。由此,在放大显示图像时,用户能够知道正关注的区域中是否已附加有评论,而图标图像能够承担作为有效的指示器的作用。
此外,缩放率比上限值大的区域R3被设定为非显示区域。即,在
2×scl<显示图像的缩放率··(条件c)
这一条件被满足时,评论图像及图标图像都不被重叠显示于显示图像。
在由范围R1确定的评论显示区域中,进行将内容的显示图像作为背景、将评论图像作为前景的alpha混合。若将背景的像素值表达为Value0、将前景的像素值表达为Value1,则通过采用
Value=Value0×(1-α)+Value1×α
这一运算来决定像素值Value。
图12表示alpha混合中的α。当
1/2×scl≦显示图像的缩放率≦scl··(条件d)
这一条件被满足时,设定为α=1,当
scl<显示图像的缩放率≦2×scl··(条件e)
这一条件被满足时,设定为α=1-(显示图像的缩放率-scl)×(1/scl)。
返回图11,在由区域R2确定的图标显示区域中,根据显示图像的缩放率与由设定位置信息确定的缩放率scl的关系,图标图像的显示方式被决定。具体来讲,当
1/10×scl≦显示图像的缩放率<1/2×scl··(条件f)
这一条件被满足时,图标图像被配色为蓝色,当
显示图像的缩放率<1/10×scl··(条件g)
这一条件被满足时,图标图像被配色为红色。像这样,通过根据距评论的距离而使图标图像的颜色变化,用户能够推测出距到达评论的时间等。
此外,显示方式的变化不限定于配色,例如可以对大小加以变更。还可以用不同形状来表现被链有链接的评论数据的图标图像。
图13表示图标图像的例子。图13的(a)表示蓝色的图标图像,图13的(b)表示红色的图标图像。在图9中,图标图像222、224是蓝色的,图标图像222表示存在ID1的评论数据,图标图像224表示存在ID5的评论数据。此外,图标图像220是红色的,表示存在ID7的评论数据。
图13的(c)表示的图标图像表示被关联有多个评论的情况。在图9中,图标图像226表示存在ID2、ID3、ID6的评论数据。
以上控制条件的成立的可否基本上由显示条件判断部164来判断。首先说明第1条件的判断处理。显示条件判断部164判断评论数据所包含的二维坐标(x,y)是否被包含于显示图像中。当显示图像生成部150导出纹理坐标时,显示条件判断部164判断该纹理坐标中是否包含有设定位置信息的二维坐标。无论在哪种情况时,显示图像生成部150都确定了帧图像的四角坐标,故显示条件判断部164会参照所有评论数据所包含的设定位置信息来抽取相应的评论数据。当如图9所示那样显示图像是整体图像时,所有评论数据的二维坐标都被包含于显示图像中,故显示条件判断部164判定所有评论数据都满足第1条件。
接下来,说明第2条件的判断处理。显示条件判断部164判断由显示图像生成部150生成的显示图像的缩放率与满足了第1条件的评论数据所包含的缩放率或与缩放率相关的信息是否处于预定关系。所谓预定关系,针对评论图像的生成而言,是满足上述的(条件a)的关系,即,判断由以设定位置信息的缩放率scl为基准而设定的下限及上限所确定的范围内是否包含有显示图像的缩放率。显示条件判断部164从显示图像生成部150取得显示图像的缩放率SCALE,基于设定位置信息的缩放率scl、通过运算来求取上限及下限,由此确认缩放率SCALE是否已在评论显示区域内。
例如,若假定图9所示的整体图像的缩放率SCALE是1/64(=0.015625),则仅ID4的评论数据满足条件a,其它评论数据不满足条件a。接下来,显示条件判断部164判断满足了第1条件的评论数据是否也满足其它条件b、条件c。在图9所示的整体图像被显示着的情况下,ID1~3、5~7的评论数据满足条件b。显示条件判断部164进一步判断满足了条件b的评论数据是否还满足条件f、条件g的某一者。此时,ID1、ID5的评论数据满足条件f,ID7的评论数据满足条件g。此外,针对被互相链有链接的多个评论数据(ID2、ID3、ID6),可以不进行针对条件f、条件g的判断。显示条件判断部164将该判断结果提供给重叠图像生成部166。
重叠图像生成部166基于评论数据生成要显示于显示图像上的重叠图像。在被显示条件判断部164提供了表示ID4的评论数据满足条件a的判断结果时,评论图像生成部168使用ID4的评论数据所包含的显示信息来生成评论图像。在图9中,评论图像228是基于ID4的评论数据(参照图10)而被生成的。在评论图像228中,包含评论数据所包含的用户名、和显示信息。由此,能够一并阅览用户名和评论的内容。此外,评论图像228中可以包含制作日期时间。
在被显示条件判断部164提供了表示ID1~3、5~7的评论数据满足条件b的判断结果时,图标生成部170生成用于通知显示信息的存在的标记图像(图标图像)。此时,图标生成部170根据显示图像的缩放率SCALE与评论数据所包含的缩放率scl的关系来决定图标图像的显示方式。具体来讲,图标生成部170使满足条件f的ID1、ID5的评论数据的图标图像着色成蓝色,并使满足条件g的ID7的评论数据的图标图像着色成红色。在显示图像的放大处理过程中,蓝色的图标图像表示评论图像即将被显示,红色的图标图像表示还远未到达评论图像。若在红色的图标图像正被显示的情况下逐渐放大显示图像,则图标图像变成蓝色,若再继续进行放大处理,则开始评论图像的显示。
图9所示的整体图像是初始图像,故不存在满足条件c的评论数据,但在评论图像被显示后再继续进行放大处理时,条件c被满足,重叠图像生成部166不再进行重叠图像的生成。
在显示图像的缩放率包含在评论显示范围内而评论图像生成部168生成评论图像后,显示处理部44将在显示图像生成部150中生成的显示图像与评论图像进行alpha混合。此时,显示处理部44按照图12所示的关系求取α,来合成显示图像与评论图像。显示处理部44针对下限(1/2×scl)至预定值之间,将系数α设定为1,针对预定值至上限(2×scl)之间,在1至0之间设定系数α。由此,在显示图像的放大处理过程中,若缩放率超过预定值,则能够表现评论逐渐消失这样的效果。在图12所示的例子中,预定值被设定为了scl,但也可以被设定为比scl大的缩放率。
图14表示将初始图像放大处理后的显示图像的一个例子。图14所示的显示图像是通过将初始图像向下方移动,同时进行放大而生成的。假定此时的显示图像的缩放率SCALE是0.06。此外,假定显示条件判断部164判定ID1~ID3、ID5、ID6的评论数据的二维坐标被包含在显示图像中(第1条件成立)。
接下来,显示条件判断部164针对第2条件的成立进行验证。因ID1、ID2、ID5的设定位置信息的缩放率分别是0.06、0.0625、0.05,缩放率SCALE是0.06,故判定ID1、ID2、ID5的评论数据满足了条件a。此外,ID3、ID6的设定位置信息的缩放率分别是0.25、0.25,故判定ID3、ID6的评论数据满足了条件b。显示条件判断部164将该判断结果提供给重叠图像生成部166。
重叠图像生成部166基于评论数据来生成要显示于显示图像上的重叠图像。在由显示条件判断部164提供来表示ID1、ID2、ID5的评论数据满足条件a的判断结果时,评论图像生成部168使用ID1、ID2、ID5的评论数据所包含的显示信息来生成评论图像。在图14中,评论图像230、232、234分别是基于ID1、ID2、ID5的评论数据而被生成的。评论图像230、232、234中包含有评论数据所包含的用户名、和显示信息。由此,能够一并阅览用户名和评论的内容。
在评论图像生成部168生成评论图像后,显示处理部44将在显示图像生成部150中生成的显示图像与评论图像进行alpha混合。显示处理部44按照图12所示的关系求取出α,合成显示图像与评论图像。在被定为设定位置信息的缩放率scl时,显示处理部44将缩放率SCALE处于下限(1/2×scl)至预定值scl之间的系数α设定为1,并将从预定值scl至上限(2×scl)之内的系数α设定为1至0之间。因此,ID1、ID2的评论图像230、232被以系数α=1来进行alpha混合,而ID5的评论图像234被以系数α=0.8来进行alpha混合。因此,评论图像234被以稍微变淡后的状态来显示。
基于ID2的评论数据而生成的评论图像232中被链有链接,被关联有其它评论数据。参照图10,ID2的评论数据是由用户bbb生成的,但针对该评论数据,关联有由用户bbb生成的ID3的评论数据和由用户aaa生成的ID6的评论数据。因此,图标生成部170生成用于表示存在被建立有对应的评论的指示器236,配置在评论图像232的附近。指示器236具有在被用户选中时使跳转到链有链接的评论图像的功能。此外,朝向右方的指示器236表示存在比正显示的评论新的评论。
在指示器236被选中时,重叠处理部162参照主存储器60所保持的评论数据,抽取出被指定的指示器236的链接信息。当被选择了显示在ID2的评论图像232附近的指示器236时,重叠处理部162抽取出ID2的评论数据的链接信息。该链接信息指定了ID3、ID6的评论数据(参照图10),重叠处理部162选择2个评论数据中的例如制作日期时间较早的ID3的评论数据。重叠处理部162将ID3的评论数据的设定位置信息提供给显示图像生成部150,使显示图像生成部150生成显示图像,并且评论图像生成部168生成ID3的评论图像。由此,ID3的评论图像被显示。
图15表示包含ID3的评论图像的显示图像的一个例子。参照图10、ID3与ID6的评论数据的设定位置信息相同,故在ID3的评论图像被显示时,ID6的评论图像也必定被显示。这是因为用户aaa以应答用户bbb的评论的形式附加了评论,故用户aaa的评论数据(ID6)的设定位置信息与用户bbb的评论数据(ID3)的设定位置信息相同,这会在后文叙述。在这样的情况下,评论图像生成部168生成在1个显示区域内排列有2个评论的评论图像。此外,ID3和ID6的评论数据被对应有ID2的评论数据,故图标生成部170生成指示器242并配置于评论图像240附近。此外,朝向左方的指示器242表示存在比正显示的评论早的评论。
在评论图像240中排列显示了2个评论,但评论图像生成部168也可以生成单独的评论图像。此外,通过使1个显示区域内包含多个评论,能够使用户认识到评论彼此之间有某种关联,故与单独地生成评论图像相比更有效。
图16表示以列表形式显示评论的例子。评论图像生成部168生成按制作日期时间由早到晚的顺序、自上而下地排列评论的评论图像246。在此情况下,优选预先准备好在用户选中评论时能基于其设定位置信息而跳转到被附加评论时的显示图像的方式。跳转的方式如上所述。
图17表示重叠图像的显示控制的流程图。在图17所示的流程图中,将各部的处理步骤用代表步骤的S(Step的首字母)和数字的组合来表示。此外,在用S和数字的组合来表示的处理中执行某种判断处理,其判断结果为肯定时,附加“是”(“是”的首字母),例如表示为“S10的“是””,相反地,其判断结果为否定时,附加“否”(“否”的首字母),表示为“S10的“否””。针对各评论数据、每当显示图像的变更处理被进行时,该流程被执行。
显示条件判断部164判断评论数据的二维坐标是否被包含在显示图像中(S10)。若未被包含在显示图像中(S10的“否”),则该评论数据的显示控制结束。若被包含在显示图像中(S10的“是”),则显示条件判断部164判断显示图像的缩放率是否被包含在由以评论数据的缩放率为基准而设定的下限和上限所确定的范围内(S12)。
当显示图像的缩放率包含于评论显示范围内时(S12的“是”),判断该显示图像的缩放率是否处于下限至预定值之间(S14)。当处于下限至预定值之间时(S14的“是”),显示处理部44将α设定为1(S16),并使评论图像重叠于显示图像(S20)。另一方面,当显示图像的缩放率处于预定值至上限之间时(S14的“否”),显示处理部44将α设定为1至0之间(S18),将评论图像与显示图像进行alpha混合(S20)。
当显示图像的缩放率未包含在评论显示范围内时(S12的“否”),显示条件判断部164判断显示图像的缩放率是否比评论显示范围的下限小(S22)。当比下限小时(S22的“是”),显示条件判断部164判断该显示图像的缩放率是否在预定值以上(S24)。当在预定值以上时(S24的“是”),显示处理部44使蓝色图标图像重叠于显示图像(S26)。而当比预定值小时(S24的“否”),显示处理部44使红色图标图像重叠于显示图像(S28)。此外,当显示图像的缩放率比上限大时(S22的“否”),重叠图像生成部166不生成重叠图像,该评论数据的显示控制结束。此外,基于图17说明了重叠图像的显示控制的流程,但各条件的判断顺序并不限定于图17所示的顺序。
以上是针对从蓄积服务器4取得的评论数据的显示控制的说明,以下说明评论数据的制作。在输出装置12正显示帧图像的状态下,评论制作指示接收部114从用户接收评论的制作指示。图18表示显示图像的一个例子。
在图18所示的显示画面中,用户按下输入装置20的×按钮23时,评论制作指示接收部114接收评论制作指示。评论制作指示被传输给评论处理部180,写入区域生成部182生成评论的写入区域。
图19表示在显示图像上生成的评论写入区域250。写入区域250例如被制作在显示图像的中央处。此外,当用户在显示图像上使光标移动时,通过使光标移动到想写入评论的位置,之后,按下×按钮23,能够将写入区域250配置在光标位置。用户也可以使被配置于显示图像中央处的写入区域250移动到想要的位置。
写入区域生成部182将软键盘生成在显示图像上,来制作用户能够进行文本输入的环境。用户操作输入装置20,点击软键盘的键,来进行文本输入。此外,可以在图2所示的输入装置20之外另行将可输入字符键的设备连接于信息处理装置10。
图20表示用户进行了文本输入的状态。字符输入接收部116接收来自用户的输入并显示于写入区域250。字符输入接收部116还将接收到的输入提供给评论处理部180。评论处理部180处理在字符输入接收部116中所接收到的输入。具体来讲,评论处理部180进行生成要发送给蓄积服务器4的评论数据的处理。
位置信息取得部184取得用于确定字符输入接收部116接收到输入的在显示图像中的位置的位置信息。位置信息是包含(x,y,scl)的参数,x是内容图像中的X坐标,y是内容图像中的Y坐标,scl是评论输入时点的显示图像的缩放率。这些位置信息是从显示图像生成部150取得的。建立对应部186将所取得的位置信息与来自用户的输入建立对应,来生成评论数据。
图21表示在建立对应部186中生成的评论数据的一个例子。图21所示的评论数据是被从信息处理装置10发送给蓄积服务器4的数据,包含有用户名、制作日期时间、输入信息、位置信息的项目。
用户名是用于确定制作评论的用户的信息,制作日期时间是用于确定制作评论的日期时间的信息,输入信息表示由用户输入的字符(评论)。此外,在此表示输入信息是由用户输入的评论的例子,但输入信息例如也可以是照片图像、角色图像等。位置信息是用于确定在由阶层数据构成的虚拟三维空间中评论所被输入的位置信息的信息。发送部130将所生成的评论数据与内容ID一起发送给蓄积服务器4。
若与图10所示的评论数据相比,则图21所示的输入信息相当于图10所示的显示信息,图21所示的位置信息相当于图10所示的设定位置信息。蓄积服务器4在接收到图10所示的评论数据时,按照制作日期时间来分派ID。
此外,在图20所示的例子中,表示了在未显示有来自其它用户的评论的状态下、写入区域250内被输入了文本的例子,但用户也能在图15所示的显示图像上输入评论。
在图15所示的显示图像中,评论图像240被重叠在了显示图像上。在用户操作输入装置20而选择评论图像240并按下×按钮23时,写入区域生成部182将写入区域250生成在评论图像240上。此时,写入区域生成部182判断为将所输入的评论与评论图像240建立关联,并通知给建立对应部186。建立对应部186在接收到此之后附加链接信息而生成评论数据。由此,蓄积服务器4能够认识到接收到的评论数据被关联于其它评论数据,能够生成图10所示的评论数据。
此外,蓄积服务器4可以参照图21所示的位置信息来设定链接信息。图21所示的位置信息与图10所示的ID3、ID6的设定位置信息相同,在这样的情况下,判定图21所示的评论数据被关联于ID3、ID6的评论数据。由此,蓄积服务器4能够认识到接收到的评论数据被关联于其它评论数据。
此外,在图10所示的评论数据中,由同一用户bbb生成的ID2、ID3的评论数据之间链有链接。这是通过在用户bbb写入评论时进行与已经写入的评论明示地建立关联的操作,能够将这些评论数据建立关联。例如,在用户bbb写入评论后按下△按钮25时,建立对应部186进行与以前写入的评论的关联建立。当以前写入的评论有多个时,建立对应部186显示其列表、用户bbb选择其中一者,由此能够建立与所选择的评论的关联。
以上基于实施例对本发明进行了说明。本领域技术人员当理解上述实施例为例示,其各构成要素和各处理过程的组合可以有各种变形例,且该变形例同样包括在本发明的范围内。在实施例中,在显示图像的生成时使用了阶层数据,但例如也可以使用1幅高分辨率的内容图像数据来生成显示图像。
在实施例中,将评论数据与阶层数据作为不同的数据来进行了说明,但例如也可以是评论数据在被制作时被编入阶层数据。由此,有文件的管理变得容易的优点。
〔标号说明〕
1···信息处理系统、2···图像数据提供服务器、4···蓄积服务器、10···信息处理装置、28···阶层数据、30···第0阶层、32···第1阶层、34···第2阶层、36···第3阶层、38···平铺图像、44···显示处理部、100···控制部、110···输入接收部、112···变更指示接收部、114···评论制作指示接收部、116···字符输入接收部、118···缩略图选择指示接收部、120···开始指示接收部、130···发送部、140···图像处理部、142···图像数据取得部、144···解码部、146···变更量导出部、150···显示图像生成部、160···评论数据取得部、162···重叠处理部、164···显示条件判断部、166···重叠图像生成部、168···评论图像生成部、170···图标生成部、174···菜单图像生成部、180···评论处理部、182···写入区域生成部、184···位置信息取得部、186···建立对应部。
〔工业可利用性〕
本发明能够适用于信息处理技术领域。

Claims (14)

1.一种将整体图像的全部或一部分显示于显示器的信息处理装置,其特征在于,包括:
接收部,接收显示图像的变更指示,
显示图像生成部,按照变更指示来确定要显示的图像的缩放率或与缩放率相关的信息,生成作为整体图像的全部或一部分的显示图像,
取得部,取得用于重叠显示于显示图像的重叠数据,以及
重叠处理部,基于重叠数据生成重叠图像;
其中,重叠数据包含有缩放率或与缩放率相关的信息;
上述重叠处理部包括:
判断部,判断由上述显示图像生成部生成的显示图像的缩放率与重叠数据所包含有的缩放率或与缩放率相关的信息是否处于预定关系,以及
重叠图像生成部,基于重叠数据生成要显示于显示图像上的重叠图像。
2.如权利要求1所述的信息处理装置,其特征在于,
重叠数据包含有在整体图像中的二维坐标;
上述判断部判断重叠数据所包含的二维坐标是否被包含在显示图像内。
3.如权利要求1或2所述的信息处理装置,其特征在于,
重叠数据包含有显示信息;
在由上述判断部判定处于预定关系时,上述重叠图像生成部使用重叠数据所包含的显示信息来生成重叠图像。
4.如权利要求1至3的任意一项所述的信息处理装置,其特征在于,
上述判断部判断在由以重叠数据所包含的缩放率或与缩放率相关的信息为基准而设定的下限及上限所确定的范围内,是否包含显示图像的缩放率。
5.如权利要求4所述的信息处理装置,其特征在于,还包括:
显示处理部,当显示图像的缩放率被包含于上述范围内时,将显示图像与重叠图像进行alpha混合。
6.如权利要求5所述的信息处理装置,其特征在于,
上述显示处理部针对下限至预定值之间,将系数α设定为1,针对预定值至上限之间,在1至0间设定系数α。
7.如权利要求4至6的任意一项所述的信息处理装置,其特征在于,
在上述判断部判定显示图像的缩放率比下限小时,上述重叠图像生成部生成用于通知显示信息的存在的标记图像。
8.如权利要求7所述的信息处理装置,其特征在于,
上述重叠图像生成部根据显示图像的缩放率与重叠数据所包含的缩放率或与缩放率相关的信息的关系,来决定标记图像的显示方式。
9.如权利要求4至8的任意一项所述的信息处理装置,其特征在于,
在上述判断部判定显示图像的缩放率比上限大时,上述重叠图像生成部不进行重叠图像的生成。
10.一种将整体图像的全部或一部分显示于显示器的信息处理装置,其特征在于,包括:
第1接收部,接收显示图像的变更指示,
图像生成部,按照变更指示,确定要显示的图像的缩放率或与缩放率相关的信息,生成作为整体图像的全部或一部分的显示图像,
第2接收部,接收来自用户的输入,以及
输入处理部,处理在上述第2接收部中接收到的输入;
其中,上述输入处理部包括:
位置信息取得部,取得用于确定上述第2接收部所接收到的输入在显示图像中的位置的位置信息,以及
建立对应部,将由上述位置信息取得部取得的位置信息与来自用户的输入建立对应;
上述位置信息包括由上述第2接收部接收到输入的显示图像的缩放率或与缩放率相关的信息。
11.如权利要求10所述的信息处理装置,其特征在于,
上述变更指示用于指示显示图像的放大、缩小或移动。
12.如权利要求10或11所述的信息处理装置,其特征在于,
上述第2接收部从用户接收文本输入。
13.一种使计算机实现将图像的至少一部分显示于显示器的功能的计算机程序,其特征在于,使计算机实现如下功能:
接收显示图像的变更指示的功能,
按照变更指示,确定要显示的图像的缩放率或与缩放率相关的信息,生成作为整体图像的全部或一部分的显示图像的功能,
取得用于重叠显示于显示图像的重叠数据的功能,该重叠数据包含有缩放率或与缩放率相关的信息,
判断显示图像的缩放率与重叠数据中所包含的缩放率或与缩放率相关的信息是否处于预定关系的功能,以及
基于重叠数据生成要在显示图像上显示的重叠图像的功能。
14.一种计算机可读取的记录介质,其特征在于,
记录有如权利要求13所述的计算机程序。
CN201180064730.2A 2011-01-14 2011-10-11 信息处理装置 Active CN103298530B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2011006340A JP5686611B2 (ja) 2011-01-14 2011-01-14 情報処理装置
JP2011-006340 2011-01-14
PCT/JP2011/005686 WO2012095906A1 (ja) 2011-01-14 2011-10-11 情報処理装置

Publications (2)

Publication Number Publication Date
CN103298530A true CN103298530A (zh) 2013-09-11
CN103298530B CN103298530B (zh) 2015-04-01

Family

ID=46506838

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201180064730.2A Active CN103298530B (zh) 2011-01-14 2011-10-11 信息处理装置

Country Status (4)

Country Link
US (1) US9457275B2 (zh)
JP (1) JP5686611B2 (zh)
CN (1) CN103298530B (zh)
WO (1) WO2012095906A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104602773A (zh) * 2012-09-05 2015-05-06 科乐美数码娱乐株式会社 游戏系统以及游戏控制方法

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6018480B2 (ja) * 2012-11-05 2016-11-02 任天堂株式会社 情報処理プログラム、情報処理装置、情報処理システムおよび情報処理方法
JP6120541B2 (ja) * 2012-11-30 2017-04-26 キヤノン株式会社 表示制御装置及びその制御方法
EP2993907A4 (en) 2013-04-30 2016-12-21 Sony Corp INFORMATION PROCESSING DEVICE AND INFORMATION PROCESSING METHOD
USD755851S1 (en) * 2013-12-30 2016-05-10 Samsung Electronics Co., Ltd. Display screen or portion thereof with icon
CN107016924B (zh) 2016-12-20 2020-04-07 阿里巴巴集团控股有限公司 虚拟地图中的瓦片地图生成方法、更新方法和装置
JP6188987B1 (ja) * 2017-03-28 2017-08-30 株式会社ドワンゴ ユーザ投稿情報サーバ、ユーザ投稿情報表示システム、ユーザ投稿情報表示方法およびユーザ投稿情報表示プログラム

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3982295B2 (ja) * 2002-03-20 2007-09-26 日本電信電話株式会社 映像コメント入力・表示方法およびシステムと、クライアント装置と、映像コメント入力・表示プログラム及びその記録媒体
CN101042854A (zh) * 2006-03-22 2007-09-26 株式会社东芝 信息再现设备和信息再现方法
US20090296117A1 (en) * 2008-05-28 2009-12-03 Canon Kabushiki Kaisha Image-processing apparatus, method for controlling thereof, and computer program
CN101739210A (zh) * 2009-12-21 2010-06-16 北京中星微电子有限公司 一种图像浏览的提示方法和设备

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0561405A (ja) * 1991-09-02 1993-03-12 Nissin Electric Co Ltd 図中名称表示装置
SG64486A1 (en) 1997-03-27 1999-04-27 Sony Corp Method and apparatus for information processing computer readable medium and authoring system
JP2002372427A (ja) * 2001-06-15 2002-12-26 Alpine Electronics Inc ナビゲーション装置
JP2003004463A (ja) * 2001-06-19 2003-01-08 Kenwood Corp ナビゲーション装置、及びプログラム
US7428338B2 (en) * 2002-01-10 2008-09-23 Ricoh Co., Ltd. Header-based processing of images compressed using multi-scale transforms
JP2005300168A (ja) * 2004-04-06 2005-10-27 Alpine Electronics Inc ナビゲーション装置及び地図表示方法
US8427538B2 (en) * 2004-04-30 2013-04-23 Oncam Grandeye Multiple view and multiple object processing in wide-angle video camera
JP4579737B2 (ja) * 2005-03-28 2010-11-10 クラリオン株式会社 地図表示装置
JP4711928B2 (ja) * 2005-10-27 2011-06-29 日本電信電話株式会社 コミュニケーション支援システムおよびプログラム
US8953909B2 (en) * 2006-01-21 2015-02-10 Elizabeth T. Guckenberger System, method, and computer software code for mimic training
WO2008044605A1 (fr) * 2006-10-04 2008-04-17 Nikon Corporation Appareil électronique et caméra électronique associée
JP2008305104A (ja) * 2007-06-06 2008-12-18 Dowango:Kk コメント配信システム、サーバ、端末装置、コメント配信方法、コメント表示方法、及びプログラム
JP2009049905A (ja) * 2007-08-22 2009-03-05 Nippon Telegr & Teleph Corp <Ntt> ストリーム処理サーバ装置、ストリームフィルタ型グラフ設定装置、ストリームフィルタ型グラフ設定システム、ストリーム処理方法、ストリームフィルタ型グラフ設定方法、およびコンピュータプログラム
JP2009134105A (ja) * 2007-11-30 2009-06-18 Pioneer Electronic Corp 表示装置、表示制御方法、表示制御プログラム、および記録媒体
US7966024B2 (en) * 2008-09-30 2011-06-21 Microsoft Corporation Virtual skywriting
US20100191728A1 (en) * 2009-01-23 2010-07-29 James Francis Reilly Method, System Computer Program, and Apparatus for Augmenting Media Based on Proximity Detection
WO2010091095A2 (en) * 2009-02-03 2010-08-12 Robe Lighting, Inc. Improvements to digital image projection luminaire systems

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3982295B2 (ja) * 2002-03-20 2007-09-26 日本電信電話株式会社 映像コメント入力・表示方法およびシステムと、クライアント装置と、映像コメント入力・表示プログラム及びその記録媒体
CN101042854A (zh) * 2006-03-22 2007-09-26 株式会社东芝 信息再现设备和信息再现方法
US20090296117A1 (en) * 2008-05-28 2009-12-03 Canon Kabushiki Kaisha Image-processing apparatus, method for controlling thereof, and computer program
CN101739210A (zh) * 2009-12-21 2010-06-16 北京中星微电子有限公司 一种图像浏览的提示方法和设备

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104602773A (zh) * 2012-09-05 2015-05-06 科乐美数码娱乐株式会社 游戏系统以及游戏控制方法

Also Published As

Publication number Publication date
US20130293575A1 (en) 2013-11-07
US9457275B2 (en) 2016-10-04
CN103298530B (zh) 2015-04-01
WO2012095906A1 (ja) 2012-07-19
JP5686611B2 (ja) 2015-03-18
JP2012147404A (ja) 2012-08-02

Similar Documents

Publication Publication Date Title
CN103298530A (zh) 信息处理装置
WO2013015330A1 (ja) ゲーム機、それに用いられる制御方法、及びコンピュータプログラム
WO2002031667A1 (fr) Systeme de monde virtuel, serveur, et dispositif de traitement de l&#34;information
CN103988164A (zh) 图像处理设备和图像处理方法
JP2006285535A (ja) 情報表示制御装置及び方法、プログラム、並びに記録媒体
US10086270B2 (en) Computer-readable recording medium that stores game program, method of controlling information processing apparatus, and information processing apparatus
CN104043245A (zh) 游戏控制器
CN103827957B (zh) 图像处理装置、图像处理方法和图像文件的数据结构
CN102567459B (zh) 作为呈现者和观众的上下文的呈现进展
US20120202187A1 (en) Method for distribution and display of sequential graphic art
JP2014086029A (ja) 二次元コードを表示した印刷物
JP2014012195A (ja) ゲーム機、及びそれを利用したカード発行方法
CN103827924A (zh) 信息处理装置、信息处理方法和内容文件的数据结构
CN104657094A (zh) 3d打印方法及3d打印系统
CN104052786A (zh) 信息处理系统、信息处理装置和信息处理方法
JP2012141967A (ja) 電子書籍システム
JP2021153739A (ja) コンピュータプログラムおよびコンピュータシステム
CN103973921B (zh) 图像处理装置及其控制方法
JP2022122810A (ja) プログラム、情報処理方法、情報処理装置、及びシステム
CN104350456A (zh) 信息处理装置和信息处理方法
JP2005065795A (ja) ゲームシステムおよびゲームプログラム
JP5841252B2 (ja) 情報処理システム、情報処理装置、情報端末装置、情報処理方法、情報処理プログラム
JP2023083040A (ja) 非代替性トークンを用いたディジタルオブジェクト配布システム、ディジタルオブジェクト配布方法及びディジタルオブジェクト配布プログラム
US20210358262A1 (en) Medium, server device, and method
CN104395936A (zh) 信息处理系统、信息处理装置、信息终端装置、信息处理方法和信息处理程序

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant