CN112335219B - 移动设备及其控制方法 - Google Patents
移动设备及其控制方法 Download PDFInfo
- Publication number
- CN112335219B CN112335219B CN201880094775.6A CN201880094775A CN112335219B CN 112335219 B CN112335219 B CN 112335219B CN 201880094775 A CN201880094775 A CN 201880094775A CN 112335219 B CN112335219 B CN 112335219B
- Authority
- CN
- China
- Prior art keywords
- texture
- tessellated
- compressed
- controller
- classifying
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims abstract description 60
- 230000003068 static effect Effects 0.000 claims abstract description 71
- 238000007906 compression Methods 0.000 claims abstract description 24
- 230000006835 compression Effects 0.000 claims abstract description 23
- 101100065700 Caenorhabditis elegans etc-1 gene Proteins 0.000 claims description 7
- 101100065701 Arabidopsis thaliana ETC2 gene Proteins 0.000 claims description 5
- 238000004891 communication Methods 0.000 description 38
- 238000010586 diagram Methods 0.000 description 28
- 230000006870 function Effects 0.000 description 24
- 238000012545 processing Methods 0.000 description 14
- 230000008569 process Effects 0.000 description 12
- 238000010295 mobile communication Methods 0.000 description 11
- 230000000694 effects Effects 0.000 description 10
- 230000015556 catabolic process Effects 0.000 description 8
- 238000006731 degradation reaction Methods 0.000 description 8
- 230000003287 optical effect Effects 0.000 description 8
- 238000013507 mapping Methods 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 6
- 101100065699 Arabidopsis thaliana ETC1 gene Proteins 0.000 description 4
- 230000003247 decreasing effect Effects 0.000 description 4
- 230000004044 response Effects 0.000 description 4
- 238000003860 storage Methods 0.000 description 4
- 230000000007 visual effect Effects 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 3
- 239000011521 glass Substances 0.000 description 3
- 230000007774 longterm Effects 0.000 description 3
- 229910052751 metal Inorganic materials 0.000 description 3
- 239000002184 metal Substances 0.000 description 3
- 238000009877 rendering Methods 0.000 description 3
- 238000002604 ultrasonography Methods 0.000 description 3
- 239000003086 colorant Substances 0.000 description 2
- 238000010168 coupling process Methods 0.000 description 2
- 230000006837 decompression Effects 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 230000005672 electromagnetic field Effects 0.000 description 2
- 239000010408 film Substances 0.000 description 2
- 230000006698 induction Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000033001 locomotion Effects 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 239000004984 smart glass Substances 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- 229910001220 stainless steel Inorganic materials 0.000 description 2
- 239000010935 stainless steel Substances 0.000 description 2
- 239000000126 substance Substances 0.000 description 2
- 229920003002 synthetic resin Polymers 0.000 description 2
- 239000000057 synthetic resin Substances 0.000 description 2
- 239000010936 titanium Substances 0.000 description 2
- XUIMIQQOPSSXEZ-UHFFFAOYSA-N Silicon Chemical compound [Si] XUIMIQQOPSSXEZ-UHFFFAOYSA-N 0.000 description 1
- RTAQQCXQSZGOHL-UHFFFAOYSA-N Titanium Chemical compound [Ti] RTAQQCXQSZGOHL-UHFFFAOYSA-N 0.000 description 1
- 230000001133 acceleration Effects 0.000 description 1
- 230000003213 activating effect Effects 0.000 description 1
- 239000008186 active pharmaceutical agent Substances 0.000 description 1
- 229910052782 aluminium Inorganic materials 0.000 description 1
- XAGFODPZIPBFFR-UHFFFAOYSA-N aluminium Chemical compound [Al] XAGFODPZIPBFFR-UHFFFAOYSA-N 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000004040 coloring Methods 0.000 description 1
- 239000004020 conductor Substances 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 230000001939 inductive effect Effects 0.000 description 1
- 238000001746 injection moulding Methods 0.000 description 1
- 239000011229 interlayer Substances 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 239000012528 membrane Substances 0.000 description 1
- 230000003387 muscular Effects 0.000 description 1
- 210000001331 nose Anatomy 0.000 description 1
- 230000010355 oscillation Effects 0.000 description 1
- 238000003909 pattern recognition Methods 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
- 230000008439 repair process Effects 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 229910052710 silicon Inorganic materials 0.000 description 1
- 239000010703 silicon Substances 0.000 description 1
- 239000010454 slate Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000000638 stimulation Effects 0.000 description 1
- 239000010902 straw Substances 0.000 description 1
- 239000000758 substrate Substances 0.000 description 1
- 239000010409 thin film Substances 0.000 description 1
- 229910052719 titanium Inorganic materials 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
- 229910052724 xenon Inorganic materials 0.000 description 1
- FHNFHKCVQCLJFQ-UHFFFAOYSA-N xenon atom Chemical compound [Xe] FHNFHKCVQCLJFQ-UHFFFAOYSA-N 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72469—User interfaces specially adapted for cordless or mobile telephones for operating the device by selecting functions from two or more displayed items, e.g. menus or icons
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/24—Classification techniques
- G06F18/243—Classification techniques relating to the number of classes
- G06F18/2431—Multiple classes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T1/00—General purpose image data processing
- G06T1/60—Memory management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/001—Texturing; Colouring; Generation of texture or colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T9/00—Image coding
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2200/00—Indexing scheme for image data processing or generation, in general
- G06T2200/24—Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2210/00—Indexing scheme for image generation or computer graphics
- G06T2210/36—Level of detail
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
- H04M1/72427—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality for supporting games or graphical animations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M2201/00—Electronic components, circuits, software, systems or apparatus used in telephone systems
- H04M2201/34—Microprocessors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M2201/00—Electronic components, circuits, software, systems or apparatus used in telephone systems
- H04M2201/36—Memories
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M2201/00—Electronic components, circuits, software, systems or apparatus used in telephone systems
- H04M2201/38—Displays
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Data Mining & Analysis (AREA)
- Multimedia (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Artificial Intelligence (AREA)
- Bioinformatics & Computational Biology (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Evolutionary Biology (AREA)
- Evolutionary Computation (AREA)
- General Engineering & Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- Telephone Function (AREA)
- Controls And Circuits For Display Device (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明涉及一种移动设备及其控制方法,本发明的主题包括:基于纹理的属性,将接收到的第一纹理分类为静态纹理或动态纹理;当第一纹理是静态纹理时,基于压缩应用将第一纹理分类为压缩纹理或非压缩纹理;当第一纹理是静态纹理并且是压缩纹理时,基于细化贴图应用将第一纹理分类为细化贴图纹理或非细化贴图纹理;当第一纹理是静态纹理并且是非压缩纹理时,基于细化贴图应用将第一纹理分类为细化贴图纹理或非细化贴图纹理;当第一纹理为动态纹理时,基于屏幕的长宽比将第一纹理分类为阴影贴图或非阴影贴图;基于分类的纹理属性调整第一纹理的大小;以及根据来自控制单元的控制命令显示第一纹理。
Description
技术领域
本公开涉及一种移动设备及其控制方法,并且尤其涉及一种用于对纹理进行分类,基于纹理的属性来调整纹理的大小,并显示纹理的移动设备及其控制方法。
背景技术
近年来,随着信息技术(IT)的发展,移动设备已成为日常生活中的大议题。移动终端已经日益变得多功能化。这样的功能的示例包括数据和语音通信,经由相机捕获图像和视频,记录音频,经由扬声器系统播放音乐文件以及在显示器上显示图像和视频。一些移动设备进一步包括电子游戏播放功能或执行多媒体播放器功能。特别地,当前的移动设备可以接收提供诸如广播、视频或电视节目的视觉内容的多播信号。
随着移动设备已经变得多功能化,移动设备已被实现为具有各种功能的多媒体播放器,例如,捕获静止图像或运动图像、播放音乐或视频文件、玩游戏、接收广播等。特别地,当移动设备执行游戏应用时,实时纹理映射是最重要的功能之一。
在三维图形建模中,纹理指代表示颜色、质感等的图像,并且纹理映射指代在三维虚拟对象的表面上创建细节质感并基于计算机图形为其着色的方案。
在现有技术中,按以下顺序执行处理。首先,每个纹理在离屏帧缓冲区上渲染每个纹理。然后,中央处理器(CPU)存储器通过glReadPixels()函数读取渲染结果。在CPU代码上缩小纹理的大小。将缩小的纹理再次上传到图形处理单元(GPU)存储器。
在现有技术中,大多数未压缩的纹理被一比一地映射到屏幕而不是物体。当调节这种纹理的大小时,纹理变得模糊,即,图像的质量退化。另外,它可能不适用于压缩纹理和动态纹理。此外,因为处理顺序如下GPU、CPU和GPU,所以需要大量的存储器容量并且加载时间增加,从而给用户带来不便。
发明内容
技术问题
本公开的一个目的是提供一种移动设备及其控制方法。移动设备可以将纹理分类为动态纹理和静态纹理。当纹理是静态纹理时,移动设备可以将纹理分类为压缩纹理或非压缩纹理。移动设备可以进一步将纹理分类为细化贴图(mipmap)纹理或非细化贴图纹理。当纹理是动态纹理时,移动设备可以将纹理分类为阴影贴图或非阴影贴图。移动设备可以基于分类的纹理的属性来调整纹理的大小。
本公开的另一个目的是提供一种移动设备及其控制方法。当纹理是静态的、压缩的以及非细化贴图的时,移动设备可以通过将纹理的属性确定为背景图像来调整纹理的大小。
本公开的又一目的是提供一种移动设备及其控制方法。当纹理是动态的并且当纹理的屏幕长宽比是一比一时,移动设备可以通过将纹理的属性确定为阴影贴图来调整纹理的大小。
本领域的技术人员将认识到,本公开可以实现的目的不限于上文已经具体描述的目的,并且从以下详细描述中将会清楚地理解本公开可以实现的以上和其他目的。
技术方案
在本公开的一个方面,提供了一种移动设备。该移动设备可以包括:存储器,其被配置成存储特定应用;控制器,其被配置成:当执行特定应用时,从存储器接收第一纹理;基于纹理属性将接收到的第一纹理分类为静态纹理或动态纹理;当第一纹理是静态纹理时,取决于是否应用压缩将第一纹理分类为压缩纹理或非压缩纹理;当第一纹理是静态纹理并且是压缩纹理时,取决于是否应用细化贴图将第一纹理分类为细化贴图纹理或非细化贴图纹理;当第一纹理是静态纹理并且是非压缩纹理时,取决于是否应用细化贴图将第一纹理分类为细化贴图纹理或非细化贴图纹理;当第一纹理是动态纹理时,基于屏幕的长宽比将第一纹理分类为阴影贴图或非阴影贴图;基于分类后的纹理的属性调整第一纹理的大小;以及显示器,其被配置成根据来自控制器的控制命令显示第一纹理。
在本公开的另一方面,提供了一种控制移动设备的方法。该方法可以包括:当执行存储在存储器中的特定应用时,从存储器接收第一纹理;基于纹理属性将接收到的第一纹理分类为静态纹理或动态纹理;当第一纹理是静态纹理时,取决于是否应用压缩将第一纹理分类为压缩纹理或者非压缩纹理;当第一纹理是静态纹理且压缩纹理时,取决于是否应用细化贴图将第一纹理分类为细化贴图纹理或非细化贴图纹理;当第一纹理是静态纹理且非压缩纹理时,取决于是否应用细化贴图将第一纹理分类为细化贴图纹理或非细化贴图纹理;当第一纹理是动态纹理时,基于屏幕的长宽比将第一纹理分类为阴影贴图或非阴影贴图;基于分类后纹理的属性,调整第一纹理的大小;以及根据来自控制器的控制命令显示第一纹理。
有益效果
根据本公开的实施例,纹理被分类为动态纹理或静态纹理。当纹理为静态纹理时,纹理被分类为压缩纹理或非压缩纹理。纹理进一步被分类为细化贴图纹理或非细化贴图纹理。当纹理是动态纹理时,该纹理被分类为阴影贴图或非阴影贴图。因为基于分类的纹理的属性来调整纹理的大小,所以可以取决于纹理的属性来适当地调整纹理的大小,从而避免图像质量退化并改善功率效率。
根据本公开的另一实施例,当纹理是静态纹理、压缩的且未细化贴图时,通过将纹理的属性确定为背景图像来调整纹理的大小。因此,可以取决于纹理的属性适当地调整纹理的大小,从而避免图像质量退化并减少加载时间。
根据本公开的又一实施例,当纹理是动态纹理并且当纹理的屏幕长宽比为一比一时,通过将纹理的属性确定为阴影贴图来调整纹理的大小。因此,在特定情况下执行缩小时,整体分辨率可能会降低,从而避免图像质量退化并减少加载时间。
本领域的技术人员将认识到,用本公开可以实现的效果不限于以上已经具体描述的效果,并且从以下详细描述中将更清楚地理解本公开的其他优点。
附图说明
图1a是图示根据本公开的移动终端的框图。
图1b和1c是从不同方向观看的根据本公开的移动终端的概念图。
图2是图示根据本公开的实施例的移动设备的框图。
图3是图示根据本公开的实施例的控制移动设备的方法的流程图。
图4是图示根据本公开的实施例的基于纹理属性的纹理分类的示图。
图5是图示根据本公开的实施例的基于OpenGL命令语法的纹理分类方法的图。
图6是图示现有技术中的调整静态纹理的大小的方法的图。
图7是图示根据本公开的调整静态纹理的大小的方法的图。
图8是图示根据本公开的实施例的当第一纹理是静态纹理、压缩纹理并且是非细化贴图纹理时第一纹理的大小的调整的图。
图9是图示根据本公开的实施例的当第一纹理是静态纹理并且是细化贴图纹理时第一纹理的细化贴图级别的调整的图。
图10是图示根据本公开的实施例的当第一纹理是静态纹理、非压缩纹理并且是非细化贴图纹理时第一纹理的大小的调整的图。
图11是图示当第一纹理是动态纹理时在现有技术中第一纹理的大小的调整的图。
图12是图示当第一纹理是动态纹理时根据本公开的第一纹理的大小的调整的图。
图13是图示根据本公开的实施例的当第一纹理是阴影贴图时第一纹理的大小的调整的图。
图14是图示根据现有技术的其中调整纹理的大小的图像的图。
图15是图示根据本公开的其中调整纹理的大小的图像的图。
图16是示出现有技术中的功耗与根据本公开的功耗之间的比较的表。
具体实施方式
参考附图,现在将根据在此公开的示例性实施例详细地给出描述。为了参考附图简要描述,相同的或者等效的组件可以被设有相同或者相似的附图标记,并且其描述将不会被重复。通常,诸如“模块”和“单元”的后缀可以被用于指代元件或者组件。这样的后缀的使用在此仅旨在有助于说明书的描述,并且后缀本身不旨在给出任何特殊的意义或者功能。
在本公开中,为了简要,通常已经省略了在相关领域中对于普通技术人员来说公知的那些。
附图被用于帮助容易地理解各种技术特征并且应理解附图不限制在此提出的实施例。正因如此,本公开应被解释为延伸到除了在附图中特别陈述的之外的任何改变、等同物以及替代。
将要理解的是,尽管在此可以使用术语第一、第二等等以描述各种元件,但是这些元件不应被这些术语限制。这些术语通常仅被用于区分一个元件与另一个元件。
将要理解的是,当元件被称为“相连接或者连接到”另一元件时,则元件能够与另一元件连接或者也可以存在中间元件。相反地,当元件被称为“直接地连接”另一元件时,则不存在中间元件。
单数表示可以包括复数表示,除非根据上下文其表示明确不同的意义。
在此使用诸如“包括”或者“具有”的术语并且应理解它们旨在指示在本说明书中公开的数个组件、功能或者步骤的存在,并且也应理解可以同样地利用更多或者更少的组件、功能或者步骤。
可以使用各种不同类型的终端实现在此提出的移动终端。这样的终端的示例包括蜂窝电话、智能电话、用户设备、膝上型计算机、数字广播终端、个人数字助理(PDA)、便携式多媒体播放器(PMP)、导航仪、板式PC、平板PC、超级本、可佩戴装置(例如,智能手表、智能眼镜、头戴式显示器(HMD))等等。
仅通过非限制性示例,将会参考特定类型的移动终端进行进一步的描述。然而,这样的教导同等地适用于其它类型的终端,诸如在上面注明的那些类型。另外,这样的教导也可以被应用于诸如数字TV、桌上型计算机、数字签名等等的固定终端。
现在参考图1a-1c,其中图1a是根据本公开的移动终端的框图,并且图1b和图1c是从不同的方向看到的移动终端的一个示例的概念视图。
示出移动终端100,其具有诸如无线通信单元110、输入单元120、感测单元140、输出单元150、接口单元160、存储器170、控制器180、以及电源单元190的各种组件。应理解的是,不要求实现所有图示的组件,并且可以替换地实现更多或者更少的组件。现在参考图1a,示出移动终端100,该移动终端100具有被配置有数个被共同实现的组件的无线通信单元110。
无线通信单元110通常包括一个或者多个模块,其允许诸如在移动终端100和无线通信系统之间的无线通信的通信、在移动终端100和另一移动终端之间的通信、在移动终端100与外部服务器之间通信。此外,无线通信单元110通常包括将移动终端100连接到一个或者多个网络的一个或者多个模块。
为了有助于这样的通信,无线通信单元110包括广播接收模块111、移动通信模块112、无线互联网模块113、短程通信模块114、以及定位位置模块115中的一个或者多个。
输入单元120包括:用于获得图像或者视频的相机121;麦克风122,该麦克风122是一种用于输入音频信号的音频输入装置;以及用于允许用户输入信息的用户输入单元123(例如,触摸键、推动键、机械键、软键等等)。数据(例如,音频、视频、图像等等)通过输入单元120被获得并且可以根据装置参数、用户命令、以及其组合由控制器180分析和处理。
通常使用被配置成感测移动终端的内部信息、移动终端的周围环境、用户信息等等的一个或者多个传感器实现感测单元140。例如,在图1a中,示出具有接近传感器141和照度传感器142的感测单元140。必要时,感测单元140可以可替选地或者附加地包括其它类型的传感器或者装置,诸如触摸传感器、加速度传感器、磁传感器、G传感器、陀螺仪传感器、运动传感器、RGB传感器、红外(IR)传感器、手指扫描传感器、超声传感器、光学传感器(例如,相机121)、麦克风122、电池量表、环境传感器(例如,气压计、湿度计、温度计、辐射检测传感器、热传感器、以及气体传感器等)、以及化学传感器(例如,电子鼻、医疗传感器、生物传感器等等),仅举一些示例。移动终端100可以被配置成利用从感测单元140获得的信息,并且特别地,从感测单元140的一个或者多个传感器及其组合获得的信息。
输出单元150通常被配置成输出诸如音频、视频、触觉输出等等的各种类型的信息。示出具有显示单元151、音频输出模块152、触觉模块153、以及光学输出模块154的输出单元150。显示单元151可以具有带有触摸传感器的层间结构或者集成结构以便于促成触摸屏幕。触摸屏幕可以在移动终端100和用户之间提供输出接口,并且用作在移动终端100和用户之间提供输入接口的用户输入单元123。
接口单元160用作接口能够被耦合到移动终端100的各种类型的外部装置。例如,接口单元160可以包括任何有线或者无线端口、外部电源端口、有线或者无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。在一些情况下,响应于被连接到接口单元160的外部装置,移动终端100可以执行与被连接的外部装置相关联的各种控制功能。
存储器170通常被实现为存储数据以支持移动终端100的各种功能或者特征。例如,存储器170可以被配置成存储在移动终端100中执行的应用、用于移动终端100的操作的数据或者指令等等。经由无线通信可以从外部服务器下载这些应用中的一些。其它的应用可以在制造或者装运时被安装在移动终端100内,其通常是用于移动终端100的基本功能(例如,接听电话、拨打电话、接收消息、发送消息等等)的情况。通常,应用被存储在存储器170中、安装在移动终端100中,并且通过控制器180执行以执行用于移动终端100的操作(或者功能)。
除了与应用程序相关联的操作之外,控制器180通常用作控制移动终端100的整体操作。控制器180处理通过上述组件输入或输出的信号、数据、信息等,和/或运行存储在存储器170中的应用程序,从而处理或向用户提供适当的信息和/或功能。
控制器180能够通过处理由在图1a中描述的各种组件输入或者输出的信号、数据、信息等等,或者激活被存储在存储器170中的应用程序来提供或者处理适合于用户的信息或者功能。作为一个示例,控制器180根据已经被存储在存储器170中的应用程序的执行控制在图1a中图示的一些组件或者所有组件。
电源单元190能够被配置成接收外部电力或者提供内部电力以便于供应对于操作被包括在移动终端100中的元件和组件所要求的适当的电力。电源单元190可以包括电池,并且电池可以被配置成被嵌入在终端主体中,或者被配置成从终端主体可拆卸。
在前面的描述中提到的相应组件的至少一部分可以协同操作以体现在以下描述中提到的根据本发明的各种实施例的移动终端的操作、控制或控制方法。此外,通过运行存储器170中保存的至少一个或多个应用程序,可以在移动终端中体现移动终端的操作、控制或控制方法。
仍参考图1a,将会更加详细地描述该图描绘的各种组件。
关于无线通信单元110,广播接收模块111通常被配置成经由广播信道从外部广播管理实体接收广播信号和/或广播相关信息。广播信道可以包括卫星信道、陆地信道、或者两者。在一些实施例中,可以利用两个或者更多个广播接收模块111以有助于同时接收两个或者更多个广播信道,或者支持广播信道当中的切换。
通过生成广播管理服务器,广播信号和/或广播相关信息。它可以指代用于传输线路的服务器或用于接收预先生成的广播信号和/或与广播相关的信息并将其发送到终端的服务器。广播信号不仅可以包括电视广播信号、无线电广播信号和数据广播信号,而且可以包括以电视广播信号或无线电广播信号和数据广播信号组合的形式的广播信号。
广播信号可以根据用于数字广播信号的传输和接收的技术标准(或例如ISO、IEC、DVB、ATSC等的广播方法)中的至少一种进行编码,并且广播修复模块111包括技术标准。可以使用适合于确定的技术标准的方法来接收数字广播信号。
与广播有关的信息可以意指与广播频道、广播节目或广播服务提供商有关的信息。广播相关信息也可以通过移动通信网络来提供。在这种情况下,其可以被移动通信模块112接收。
与广播有关的信息可能以各种形式存在,诸如数字多媒体广播(DMB)的电子节目指南(EPG)或手持数字视频广播(DVB-H)的电子服务指南(ESG)。通过广播接收模块111接收到的广播信号和/或广播相关信息可以存储在存储器160中。
移动通信模块112能够将无线信号发送到一个或者多个网络实体并且/或者从一个或者多个网络实体接收无线信号。网络实体的典型示例包括基站、外部移动终端、服务器等等。这样的网络实体形成移动通信网络的一部分,其根据用于移动通信(例如,全球移动通信系统(GSM)、码分多址(CDMA)、CDMA 2000(码分多址2000)、EV-DO(增强的语音数据优化或者仅增强的语音数据)、宽带CDMA(WCDMA)、高速下行链路分组接入(HSDPA)、高速上行链路分组接入(HSUPA)、长期演进(LTE)、高级长期演进(LTE-A)等等)的技术标准或者通信方法构造。
经由移动通信模块112发送和/或接收的无线信号的示例包括音频呼叫信号、视频(电话)呼叫信号、或者各种格式的数据以支持文本和多媒体消息的通信。
无线互联网模块113被配置成有助于无线互联网接入。此模块可以被内部地或者外部地耦合到移动终端100。无线互联网模块113可以根据无线互联网技术经由通信网络发送和/或接收无线信号。
这样的无线互联网接入的示例包括无线LAN(WLAN)、无线保真(Wi-Fi)、Wi-Fi直连、数字生活网络联盟(DLNA)、无线宽带(Wibro)、全球微波接入互操作性(Wimax)、高速下行链路分组接入(HSDPA)、高速上行链路分组接入(HSUPA)、长期演进(LTE)、高级LTE(LTE-A)等等。无线互联网模块113可以根据一个或者多个这样的无线互联网技术,或者其它的互联网技术发送/接收数据。
在一些实施例中,当根据作为移动通信网络的一部分的例如WiBro、HSDPA、HSUPA、GSM、CDMA、WCDMA、LTE、LTE-A等等实现无线互联网接入时,无线互联网模块113执行这样的无线互联网接入。这样,无线互联网模块113可以与移动通信模块112协作,或者用作移动通信模块112。
短程通信模块114被配置成有助于短程通信。适合于实现这样的短程通信的技术包括:蓝牙(BLUETOOTHTM)、射频识别(RFID)、红外数据协会(IrDA)、超宽带(UWB)、紫蜂(ZigBee)、近场通信(NFC)、无线保真(Wi-Fi)、Wi-Fi直连、无线USB(无线通用串行总线)等等。经由无线局域网,短程通信模块114通常支持在移动终端100和无线通信系统之间的无线通信、在移动终端100和另一移动终端100之间的通信、或者在移动终端和另一移动终端100(或者外部服务器)位于的网络之间的通信。无线局域网的一个示例是无线个人域网。
在一些实施例中,另一移动终端(可以类似于移动终端100被配置)可以是可佩戴设备,例如,智能手表、智能眼镜或者头戴式显示器(HMD),其能够与移动终端100交换数据(或者以其它方式与移动终端100协作)。短程通信模块114可以感测或者识别可佩戴设备,并且允许在可佩戴设备和移动终端100之间的通信。另外,当感测到的可佩戴设备是被授权与移动终端100通信的设备时,例如,控制器180可以使在移动终端100中处理的数据的至少一部分经由短程通信模块114传输到可佩戴设备。因此,可佩戴设备的用户可以在可佩戴设备上使用在移动终端100中处理的数据。例如,当在移动终端100中接收到呼叫时,用户可以使用可佩戴设备应答呼叫。而且,当在移动终端100中接收到消息时,用户能够使用可佩戴设备检查接收到的消息。
定位位置模块115通常被配置成检测、计算、导出或者以其它方式识别移动终端的位置。作为示例,定位位置模块115包括全球定位系统(GPS)模块、Wi-Fi模块、或者两者。如有必要,定位位置模块115可以可替换地或附加地与无线通信单元110的任何其它模块一起工作以获得与移动终端的位置有关的数据。作为一个示例,当移动终端使用GPS模块时,可以使用从GPS卫星发送的信号获取移动终端的位置。作为另一示例,当移动终端使用Wi-Fi模块时,能够基于将无线信号发送到Wi-Fi模块或者从Wi-Fi模块接收无线信号的无线接入点(AP)有关的信息获取移动终端的位置。
输入单元120可以被配置成允许对移动终端100的各种类型的输入。这样的输入的示例包括音频、图像、视频、数据、以及用户输入。经常使用一个或者多个相机121获得图像和视频输入。这样的相机121可以处理在视频或者图像捕获模式下通过图像传感器获得的静止图片或者视频的图像帧。被处理的图像帧能够被显示在显示单元151上或者被存储在存储器170中。同时,相机121可以以矩阵结构排列以允许具有多个角度或者焦点的多个图像被输入到移动终端100。而且,相机121可以位于立体排列以获取用于实现立体图像的左图像和右图像。
麦克风122一般被实现为允许将音频输入到移动终端100。根据在移动终端100中执行的功能能够以各种方式处理音频输入。如有必要,麦克风122可以包括各种噪声去除算法以去除在接收外部音频信号的过程中产生的不想要的噪声。
用户输入单元123是允许用户输入的组件。这样的用户输入可以使控制器180能够控制移动终端100的操作。用户输入单元123可以包括机械输入元件中的一个或者多个(例如,机械键、位于移动终端100的前和/或后表面或者侧表面上的按钮、薄膜开关、滚动轮、滚动开关等等)、或者触摸灵敏的输入元件等等。作为一个示例,触摸灵敏的输入元件可以是通过软件处理被显示在触摸屏上的虚拟键或者软键或者视觉键、或者位于在除了触摸屏之外的位置处的移动终端上的触摸键。另一方面,虚拟键或者视觉键可以以例如,图形、文本、图标、视频、或者其组合的各种形状显示在触摸屏上。
感测单元140通常被配置成感测移动终端的内部信息、移动终端的周围环境信息、用户信息等等中的一个或者多个。控制器180基于这样的感测信号控制移动终端100的操作或执行与被安装在移动终端中的应用相关联的数据处理、功能或者操作。使用任何种类的传感器可以实现感测单元140,现在将会更加详细地描述其中的一些。
接近传感器141可以包括在没有机械接触的情况下通过使用电磁场、红外线等等感测接近表面的物体、或者位于表面附近的物体的存在或者不存在的传感器。接近传感器141可以被布置在通过触摸屏覆盖的移动终端的内部区域处,或者触摸屏附近。
例如,接近传感器141可以包括任何透射型光电传感器、直接反射型光电传感器、镜反射型光电传感器、高频振荡接近传感器、电容型接近传感器、磁型接近传感器、红外线接近传感器等等。当触摸屏被实现为电容型时,接近传感器141能够通过响应于具有导电性的物体的接近的电磁场的变化来感测指示器相对于触摸屏的接近。在这样的情况下,触摸屏(触摸传感器)也可以被归类成接近传感器。
术语“接近触摸”将会在此被经常引用以表示其中指示器被定位为接近触摸屏而没有接触触摸屏的场景。术语“接触触摸”将会在此被经常引用以表示其中指示器物理接触触摸屏的场景。对于与指示器相对于触摸屏的接近触摸相对应的位置,这样的位置将会对应于其中指示器垂直于触摸屏的位置。接近传感器141可以感测接近触摸和接近触摸模式(例如,距离、方向、速度、时间、位置、移动状态等等)。
通常,控制器180处理与通过接近传感器141感测到的接近触摸和接近触摸模式相对应的数据,并且使在触摸屏上能够输出视觉信息。另外,根据是否相对于触摸屏上的点的触摸是接近触摸或者接触触摸,控制器180能够控制移动终端100执行不同的操作或者处理不同的数据。
使用任何各种触摸方法,触摸传感器能够感测被施加到诸如显示单元151的触摸屏的触摸。这样的触摸方法的示例包括电阻型、电容型、红外型、以及磁场型等等。作为一个示例,触摸传感器可以被配置成将被施加到显示单元151的特定部分的压力的变化转换成电输入信号,或者将在显示单元151的特定部分处出现的电容转换成电输入信号。触摸传感器也可以被配置成不仅感测被触摸的位置和被触摸的区域,而且感测触摸压力和/或触摸电容。触摸物体通常被用于将触摸输入施加到触摸传感器。典型的触摸物体的示例包括手指、触摸笔、触笔、指示器等等。
当通过触摸传感器感测触摸输入时,相应的信号可以被传送到触摸控制器。触摸控制器可以处理接收到的信号,并且然后将相应的数据传送到控制器180。因此,控制器180可以感测已经触摸了显示单元151的哪一个区域。在此,触摸控制器可以是与控制器180分离的组件、控制器180、或者其组合。
在一些实施例中,控制器180可以根据触摸了触摸屏或者除了触摸屏之外设置的触摸键的触摸物体的类型而执行相同或者不同的控制。例如,基于移动终端100的当前操作状态或者当前执行的应用程序,可以决定根据提供触摸输入的对象是否执行相同或者不同的控制。
触摸传感器和接近传感器可以被单独地或者组合实现,以感测各种类型的触摸。这样的触摸包括短(或者轻击)触摸、长触摸、多点触摸、拖动触摸、轻打触摸、捏缩触摸、捏放触摸、滑动触摸、悬停触摸等等。
如有必要,超声传感器可以被实现以使用超声波识别与触摸物体有关的位置信息。例如,控制器180可以基于通过照度传感器和多个超声传感器感测到的信息计算波生成源的位置。因为光比超声波快得多,所以光到达光学传感器的时间远远比超声波到达超声传感器的时间短。使用此事实可以计算波生成源的位置。例如,可以基于光作为参考信号使用与超声波到达传感器的时间的时间差计算波生成源的位置。
相机121通常包括至少一个相机传感器(CCD、CMOS等等)、光传感器(或者图像传感器)、以及激光传感器。
实现具有激光传感器的相机121可以允许相对于3D立体图像的物理对象的触摸的检测。光传感器可以被层压在显示设备上,或者与显示设备重叠。光传感器可以被配置成扫描接近触摸屏的物理对象的移动。更加详细地,光传感器可以包括在行和列处的光电二极管和晶体管以使用根据被施加的光的量改变的电信号扫描在光传感器处接收到的内容。即,光传感器可以根据光的变化计算物理对象的坐标从而获得物理对象的位置信息。
显示单元151通常被配置成输出在移动终端100中处理的信息。例如,显示单元151可以显示在移动终端100处执行的应用程序的执行屏幕信息或者响应于执行屏幕信息的用户界面(UI)和图形用户界面(GUI)信息。
在一些实施例中,显示单元151可以被实现为用于显示立体图像的立体显示单元。
典型的立体显示单元可以采用诸如立体方案(眼镜方案)、自动立体方案(裸眼方案)、投影方案(全息方案)等等的立体显示方案。
通常,3D立体图像由左图像(用于左眼的图像)和右图像(用于右眼的图像)组成。根据将左图像和右图像组合成3D frond图像的方法,将左图像和右图像在一帧中上下排列的上下方法、其中将左图像和右图像在一帧中左右排列的L-to-R方法(左-右,并排)、其中多个左图像和右图像以表格形式排列的棋盘格方法、其中左图像和右图像以列为单位或者以行为单位交替排列的交错法,以及其中按时间交替显示左图像和右图像的时间顺序方法。
另外,可以通过从原始图像帧的左图像和右图像分别生成左图像缩略图和右图像缩略图并且将它们组合来将3D缩略图图像生成为单个图像。通常,缩略图指代缩小的图像或缩小的静止图像。以这种方式生成的左图像缩略图和右图像缩略图在屏幕上以与左图像和右图像之间的视差相对应的深度一样大的左右距离之差显示,从而表示三维空间感。
实现3D立体图像所需的左图像和右图像可以由立体处理单元显示在立体显示单元上。3D处理单元接收3D图像(参考视点的图像和扩展视点的图像),并从其设置左图像和右图像,或者接收2D图像并将其转换成左图像和右图像。
音频输出模块152通常被配置成输出音频数据。可以从多个不同的源中的任何一个获得这样的音频数据,使得可以从无线通信单元110接收音频数据或者可以已经将其存储在存储器170中。可以在诸如信号接收模式、呼叫模式、记录模式、语音识别模式、广播接收模式等等的模式期间输出音频数据。音频输出模块152能够提供与由移动终端100执行的特定功能(例如,呼叫信号接收声音、消息接收声音等等)有关的音频输出。音频输出模块152也可以被实现为接收器、扬声器、蜂鸣器等等。
触觉模块153能够被配置成产生用户能够感觉、感知、或者以其它方式体验的各种触觉效果。通过触觉模块153产生的触觉效果的典型示例是振动。能够通过用户选择或者通过控制器进行设置来控制通过触觉模块155产生的振动的强度、模式等等。例如,触觉模块153可以以组合的方式或者顺序的方式输出不同的振动。
除了振动之外,触觉模块153还能够生成各种其它的触觉效果,包括通过诸如垂直移动以接触皮肤的针排列的刺激的效果、通过喷孔或者吸入口的空气的喷射力或者吸力、对皮肤的触摸、电极的接触、静电力、通过使用能够吸收或者产生热的元件再现冷和暖的感觉的效果等等。
触觉模块153也能够被实现为允许用户通过诸如用户的手指或者手臂的肌肉感觉来感觉触觉效果,以及通过直接接触传递触觉效果。根据移动终端100的特定配置也可以设置两个或者更多个触觉模块153。
光学输出模块154能够使用光源的光输出用于指示事件产生的信号。在移动终端100中产生的事件的示例可以包括消息接收、呼叫信号接收、未接来电、报警、日程表通知、电子邮件接收、通过应用的信息接收等等。
通过光学输出模块154输出的信号可以以移动终端发射单色光或者具有多种颜色的光的方式来实现。例如,当移动终端感测用户已经检查了产生的事件时,信号输出可以被终止。
接口单元160用作与移动终端100连接的外部设备的接口。例如,接口单元160能够接收从外部设备发送的数据,接收电力以传送到移动终端100内的元件和组件,或者将移动终端100的内部数据发送到这样的外部设备。接口单元160可以包括有线或者无线头戴式受话器端口、外部电源端口、有线或者无线数据端口、存储卡端口、用于连接具有识别模块的设备的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。
识别模块可以是存储用于认证使用移动终端100的权限的各种信息的芯片并且可以包括用户识别模块(UIM)、订户识别模块(SIM)、通用订户识别模块(USIM)等等。另外,具有识别模块的设备(在此也被称为“识别设备”)可以采用智能卡的形式。因此,识别设备经由接口单元160能够与终端100相连接。
当移动终端100与外部托架相连接时,接口单元160能够用作允许电力从托架供应到移动终端100的通道或者可以用作允许用户从托架输入的各种命令信号传递到移动终端的通道。从托架输入的各种命令信号或者电力可以作为用于识别移动终端被正确地安装在托架上的信号操作。
存储器170能够存储程序以支持控制器180的操作并且存储输入/输出数据(例如,电话簿、消息、静止图像、视频等等)。存储器170可以存储与响应于触摸屏上的触摸输入输出的各种模式的振动和音频有关的数据。
存储器170可以包括一种或者多种类型的存储介质,包括闪存型、硬盘型、固态盘(SSD)型、硅盘型、多媒体卡式、卡型存储器(例如,SD或DX存储器等)、随机存取存储器(RAM)、静态随机存取存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁存储器、磁盘、光盘等等。也可以关于在诸如互联网的网络上执行存储器170的存储功能的网络存储设备操作移动终端100。
控制器180可以典型地控制移动终端100的一般操作。例如,当移动终端的状态满足预设条件时,控制器180可以设置或者释放用于限制用户输入与应用有关的控制命令的锁定状态。
控制器180也能够执行与语音呼叫、数据通信、视频呼叫等等相关联的控制和处理,或者执行模式识别处理以将在触摸屏上执行的手写输入或者绘图输入分别识别为字符或者图像。另外,控制器180能够控制这些组件中的一个或者组合以便于实现在此公开的各种示例性实施例。
电源单元190能够接收外部电力或者提供内部电力并且供应对于操作被包括在移动终端100中的各个元件和组件所需的适当的电力。电源单元190可以包括电池,该电池通常是可充电的或者可拆卸地耦合到终端主体,用于充电。
而且,电源单元190可以包括连接端口。连接端口可以被配置为接口单元160的一个示例,用于供应电力以对电池再充电的外部充电器被电气地连接到该接口单元160。
作为另一示例,电源单元190可以被配置成在不使用连接端口的情况下以无线的方式对电池再充电。在本示例中,使用以磁感应为基础的感应耦合方法或者以电磁谐振为基础的磁共振耦合方法中的至少一个,电源单元190能够接收从外部无线电力发射器传递的电力。
此外,可以使用软件、硬件以及软件和硬件的组合在计算机和类似的记录材料中实现各种实施例。
参考图1b和图1c,参考直板式终端主体,描述移动终端100。然而,移动终端100可以可替选地以各种不同的配置中的任意一种来实现。这样的配置的示例包括手表式、夹式、眼镜式、或者折叠式、翻盖式、滑盖式、摇摆式、旋转式等的各种结构,其中两个或者更多个主体以相对可移动的方式被相互组合。在此的讨论将常常涉及特定型的移动终端(例如,直板式、手表式、眼镜式等等)。然而,关于特定型移动终端的这种教导也将通常应用到其它型移动终端。
移动终端100将通常包括形成终端的外观的壳体(例如,框架、外壳、盖等)。
在本实施例中,壳体可以使用前壳体101和后壳体102来形成。各种电子组件可以被合并在前壳体101和后壳体102之间形成的空间中。至少一个中间壳体可以被附加地布置在前壳体101和后壳体102之间。
显示单元151能够被布置在终端主体的前表面上以输出信息。如所图示的,显示单元151的窗口151a能够被安装到前壳体101使得与前壳体101一起形成终端主体的前表面。
在一些实施例中,电子组件也可以被安装到后壳体102。这样的电子组件的示例可以包括可拆卸的电池、标识模块、存储卡等。示出覆盖电子组件的后盖103,并且这个盖可以被可拆卸地耦合到后壳体102。因此,当从后壳体102拆卸后盖103时,被安装到后壳体102的电子组件可以被外部地暴露。
如所图示的,当后盖103被耦合到后壳体102时,后壳体102的侧表面可以被部分地暴露。在一些情况下,在耦合时,后壳体102也可以被后盖103完全地遮盖。在一些实施例中,后盖103可以包括用于外部地暴露相机121b或者音频输出模块152b的开口。
壳体101、102、103可以通过注入成型合成树脂形成或者可以由例如不锈钢(STS)、铝(Al)、钛(Ti)等的金属形成。
作为多个壳体形成用于容纳组件的内部空间的示例的替选,移动终端100可以被配置使得一个壳体形成内部空间。在本实例中,具有单体的移动终端100以合成树脂或者金属从侧表面延伸到后表面的方式形成。
如有必要,移动终端100可以包括防水单元(未示出),用于防止将水引入到终端主体。例如,防水单元可以包括防水构件,其位于窗口151a和前壳体101之间、前壳体101和后壳体102之间、或者后壳体102和后盖103之间,当这些壳体被耦合时密闭地密封内部空间。
移动终端100可以被提供有显示单元151、第一音频输出单元152a、第二音频输出单元152b、接近传感器141、照度传感器142、光输出单元154、第一相机121a、第二相机121b、第一操纵单元123a、第二操纵单元123b、麦克风122、接口单元160等。
图1b和1c描绘布置在移动终端上的某些组件。显示单元151、第一音频输出单元152a、接近传感器141、照度传感器142、光输出单元154、第一相机121a和第一操作单元(123a)被布置在终端主体的前面,第二操作单元(123b)、麦克风122和接口单元160被布置在终端主体的侧面,并且第二音频输出单元152b被布置在终端主体的背面并且将以第二相机121b为例进行描述。
然而,应理解的是,可替选的布置是可能的,并且在本公开的教导内。一些组件可以省略或者重新布置。例如,第一操纵单元123a可以不被布置在终端主体的前表面上,并且第二音频输出模块152b可以被布置在终端主体的侧表面上而不是布置在终端主体的后表面上。
显示单元151输出在移动终端100中处理的信息。使用一个或多个合适的显示装置来实现显示单元151。
这样合适的显示装置的示例包括液晶显示器(LCD)、薄膜晶体管-液晶显示器(TFT-LCD)、有机发光二极管(OLED)、柔性显示器、3维(3D)显示器、以及电子墨水显示器,以及其组合。
可以使用能够实现相同或者不同显示技术的两个显示装置来实现显示单元151。例如,多个显示单元151可以被布置在一个侧面上以相互分开,或者这些装置可以被集成,或者这些装置可以被布置在不同的表面上。
显示单元151也可以包括触摸传感器,该触摸传感器感测在显示单元处接收到的触摸输入。当触摸被输入到显示单元151时,触摸传感器可以被配置成感测此触摸,并且控制器180(例如)可以生成与触摸相对应的控制命令或者其它信号。以触摸方式输入的内容可以是文本或者数值,或者能够以各种模式指示或者指定的菜单项目。
触摸传感器可以以被布置在窗口151a和窗口151a的后表面上的显示器之间的具有触摸图案的膜的形式,或者以被直接地构图在窗口151a的后表面上的金属线的形式来配置。可替选地,触摸传感器可以与显示器集成地形成。例如,触摸传感器可以被布置在显示器的基板上或者显示器内。
显示单元151也能够与触摸传感器一起形成触摸屏。在此,触摸屏可以用作用户输入单元123(参见图1a)。因此,触摸屏可以替换第一操纵单元123a的功能中的至少一些。
可以以用于输出语音音频、报警声音或者多媒体音频再现等的扬声器的形式实现第一音频输出模块152a。
显示单元151的窗口151a将典型地包括用于允许由第一音频输出模块152a产生的音频穿过的孔径。一个备选是允许音频沿着结构主体之间的组装间隙(例如,在窗口151a和前壳体101之间的间隙)释放。在本实例中,被独立地形成以输出音频声音的孔可以不被看到或者在外观上以其它方式被隐藏,从而进一步简化移动终端100的外观的制造。
光学输出模块154可以被配置为输出用于指示事件产生的光。这样的事件的示例包括消息接收、呼叫信号接收、未接来电、报警、日程表通知、电子邮件接收、通过应用的信息接收等。当用户已经查看产生的事件时,控制器可以控制光学输出单元154以停止光的输出。
第一相机121a可以处理在视频呼叫模式或者捕获模式下通过图像传感器获得的诸如静止或者运动图像的图像帧。然后,处理的图像帧可以被显示在显示单元151上或者被存储在存储器170中。
第一和第二操纵单元123a和123b也可以被称为操纵部分,并且可以采用允许用户执行诸如触摸、推动、滚动等等的操纵的任何触觉方法。第一和第二操纵单元123a和123b也可以采用允许用户执行诸如接近触摸、悬停等等的操纵的任何非触觉的方法。
在附图中,第一操作单元123a是触摸键,本发明不限于此。例如,第一操作单元123a是机械键,或者是触摸键和触摸键的组合。
可以不同地设置由第一和第二操作单元123a和123b输入的内容。例如,第一操作单元123a可以发出诸如菜单、主页键、取消的命令,并且第二操作单元123b接收从要输出的声音的大小的第一声音输出单元152a或第二声音输出单元152b输出的第一声音,并且可以输入到显示单元151的触摸识别模式的切换。
后输入单元能够由用户操纵以将输入提供给移动终端100。可以以各种不同的方式使用输入。例如,用户可以使用后输入单元以提供用于电源开/关、开始、结束、滚动、控制从第一或者第二音频输出模块152a或者152b输出的音量级、切换到显示单元151的触摸识别模式等等的输入。后输入单元可以被配置成允许触摸输入、推动输入或者其组合。
后输入单元可以被设置成在终端主体的厚度方向中重叠前表面的显示单元151。作为一个示例,后输入单元可以被设置在终端主体的后侧的上端部分上,使得当用户使用一只手抓握住终端主体时用户能够使用食指容易地操纵它。可替选地,后输入单元能够被定位在终端主体的后侧的至多任何位置处。
包括后输入单元的实施例可以实现后输入单元中的第一操纵单元123a的功能的一些或者全部。这样,在从前侧省略第一操纵单元123a的情形下,显示单元151能够具有更大的屏幕。
作为又一个替选,移动终端100可以包括手指扫描传感器,该手指扫描传感器扫描用户的指纹。然后,控制器180可以使用通过手指扫描传感器感测的指纹信息作为认证过程的一部分。手指扫描传感器可以被安装在显示单元151或者用户输入单元123中。
麦克风122被示出为位于移动终端100的末端处,但是其他位置是可能的。如有必要,多个麦克风可以被实现,利用这样的布置允许接收立体声音。
接口单元160可以用作允许移动终端100与外部设备接口的路径。例如,接口单元160可以包括用于连接到另一设备(例如,耳机、外部扬声器等)的连接终端、用于近场通信的端口(例如,红外数据协会(IrDA)端口、蓝牙端口、无线LAN端口等)、或者用于将电力供应到移动终端100的电源终端中的一个或多个。接口单元160可以以用于容纳诸如订户标识模块(SIM)、用户标身份模块(UIM)、或者用于信息存储的存储器卡的外部卡的插槽的形式来实现。
第二相机121b被示出为位于终端主体的后侧处,并且包括与第一相机单元121a的图像捕获方向大体上相反的图像捕获方向。如有必要,第二相机121b可以可替选地位于其他位置,或者使其可移动,以便于具有与被示出的图像捕获方向不同的图像捕获方向。
第二相机121b可以包括沿着至少一条线布置的多个透镜。多个透镜也可以以矩阵结构来布置。相机可以被称为“阵列相机”。当第二相机121b被实现为阵列相机时,可以使用多个透镜以各种方式捕获图像并且图像具有更好的质量。
如在图1c中所示,闪光灯124被示出为与第二相机121b相邻。当通过相机121b捕获被摄物的图像时,闪光灯124可以照明被摄物。
如在图1b中所示,第二音频输出模块152b能够位于终端主体上。第二音频输出模块152b可以结合第一音频输出模块152a来实现立体声功能,并且也可以被用于实现用于呼叫通信的扬声器电话模式。
用于无线通信的至少一个天线可以位于终端主体上。天线可以被安装在终端主体中或者通过壳体形成。例如,配置广播接收模块111的一部分的天线可以缩回到终端主体中。可替选地,使用被贴附到后盖103的内表面的膜、或者包括导电材料的壳体,可以形成天线。
用于将电力供应到移动终端100的电源单元190可以包括电池191,该电池191被安装在终端主体中或者可拆卸地耦合到终端主体的外部。电池191可以经由连接到接口单元160的电源线缆来接收电力。此外,使用无线充电器以无线方式能够对电池191充电。通过磁感应或者电磁谐振可以实现无线充电。
后盖103被示出为耦合到用于屏蔽电池191的后壳体102,以防止电池191的分离,并且保护电池191免受外部冲击或者外来物质的影响。当从终端主体可拆卸电池191时,后壳体103可以被可拆卸地耦合到后壳体102。
用于保护外观或者协助或者扩展移动终端100的功能的附件也可以被提供在移动终端100上。作为附件的一个示例,可以提供用于覆盖或者容纳移动终端100的至少一个表面的盖或者袋。盖或者袋可以与显示单元151协作以扩展移动终端100的功能。附件的另一示例是用于协助或者扩展对触摸屏的触摸输入的触摸笔。
同时,在本发明中,可以使用柔性显示器来显示。在下文中,将结合附图对此进行更详细地讨论。
图2是图示根据本公开的实施例的移动设备的框图。
参考图2,移动设备100包括无线通信单元110、输入单元120、显示单元151、存储器170和控制器180。
无线通信单元110通过外部设备发送和接收数据。外部设备包括服务器。
输入单元120从用户接收触摸或语音输入。
显示单元151根据来自控制器180的控制命令显示第一纹理。
存储器170存储特定应用。
当控制器180执行特定应用时,控制器180从存储器170接收第一纹理。然后,控制器180基于纹理属性将接收到的第一纹理分类为静态纹理或动态纹理。当第一纹理是静态纹理时,取决于是否应用压缩控制器180将第一纹理分类为压缩纹理或非压缩纹理。当第一纹理是静态纹理并且是压缩纹理时,取决于是否应用细化贴图控制器180将第一纹理分类为细化贴图纹理或非细化贴图纹理。当第一纹理是静态纹理且是非压缩纹理时,取决于是否应用细化贴图控制器180将第一纹理分类为细化贴图纹理或非细化贴图纹理。当第一纹理是动态纹理时,控制器180基于屏幕的长宽比将第一纹理分类为阴影贴图或非阴影贴图。然后,控制器180基于分类的纹理的属性来调整第一纹理的大小。
图3是图示根据本公开的实施例的控制移动设备的方法的流程图。该控制方法可以由控制器180执行。
参考图3,当控制器180执行存储在存储器170中的特定应用时,控制器180从存储器170接收第一纹理(S310)。
控制器180基于纹理属性将接收到的第一纹理分类为静态纹理或动态纹理(S320)。
当第一纹理是静态纹理时,取决于是否应用压缩控制器180将第一纹理分类为压缩纹理或非压缩纹理(S330)。
当第一纹理是静态纹理且是压缩纹理时,取决于是否应用细化贴图控制器180将第一纹理分类为细化贴图纹理或非细化贴图纹理(S340)。
当第一纹理是静态纹理且是非压缩纹理时,取决于是否应用细化贴图控制器180将第一纹理分类为细化贴图纹理或非细化贴图纹理(S350)。
当第一纹理是动态纹理时,控制器180基于屏幕的长宽比将第一纹理分类为阴影贴图或非阴影贴图(S360)。
控制器180基于分类的纹理的属性来调整第一纹理的大小(S370)。
显示单元151根据来自控制器180的控制命令显示第一纹理(S380)。
图4是图示根据本公开的实施例的基于纹理属性的纹理分类的图。
参考图4,控制器180基于纹理属性将接收到的第一纹理分类为静态或动态(S320)。
将描述用于静态纹理和动态纹理之间的分类的准则。首先,如果第一纹理是预定的并且安装在特定应用中,则控制器180将第一纹理分类为静态纹理。即,静态纹理指代由开发人员生成并安装在应用中的纹理。
当在每个帧中创建第一纹理时,控制器180将第一纹理分类为动态纹理。即,动态纹理指代通过渲染到纹理(render-to-texture)在每个帧中创建的纹理。
当第一纹理是静态纹理时,取决于是否应用压缩控制器180将第一纹理分类为压缩纹理或非压缩纹理(S330)。将描述压缩纹理和非压缩纹理之间的分类的准则。
压缩纹理指代通过ETC、ASTC、PVRTC等压缩的纹理。非压缩纹理指代未应用压缩的纹理。
当第一纹理是静态纹理且是压缩纹理时,取决于是否应用细化贴图控制器180将第一纹理分类为细化贴图纹理或非细化贴图纹理(S340)。将描述在细化贴图纹理和非细化贴图纹理之间进行分类的准则。
细化贴图纹理指代应用细化贴图的纹理。非贴图纹理指代未应用细化贴图的纹理。
当第一纹理是静态纹理且是非压缩纹理时,取决于是否应用细化贴图控制器180将第一纹理分类为细化贴图纹理或非细化贴图纹理(S350)。将描述在细化贴图纹理和非细化贴图纹理之间进行分类的准则。
细化贴图纹理指代应用细化贴图的纹理。非细化贴图纹理指代未应用细化贴图的纹理。
当第一纹理是动态纹理时,控制器180基于屏幕的长宽比将第一纹理分类为阴影贴图或非阴影贴图(S360)。将描述阴影贴图和非阴影贴图之间的分类的准则。
当屏幕长宽比是一比一时,控制器180将第一纹理确定为阴影贴图。当屏幕长宽比不是一比一时,控制器180将第一纹理确定为非阴影贴图。
阴影贴图意指使用阴影贴图基于三维计算机图形来表示物体的阴影。例如,在阴影贴图中,控制器180将相机放置在光源的位置,并在向下看物体的同时绘制对象的物体。阴影贴图指代包括深度的纹理。
图5是图示根据本公开的实施例的基于OpenGL命令语法的纹理分类方法的图。
参考图5,可以通过OpenGL命令语法来执行纹理分类,并且可以通过图形处理单元(GPU)驱动器的命令调度器来处理纹理分类。在这里,OpenGL指代用于三维图形的API。
例如,当控制器将第一纹理分类为静态纹理或动态纹理时,如果texture_data为空,则控制器180将第一纹理确定为动态纹理。
图6是图示现有技术中的调整静态纹理的大小的方法的图。
参考图6,存在情况1、情况2、情况3以及情况4。
情况1意指第一纹理是静态纹理、压缩纹理并且是细化贴图纹理。纹理应用的大多数情况是情况1。在情况1中,控制器180可以缩小第一纹理的大小。
情况2意指第一纹理是静态纹理、压缩纹理且是非细化贴图纹理。在现有技术中,控制器180可能不减小纹理的分辨率。
情况3意指第一纹理是静态纹理、非压缩纹理且是非细化贴图纹理。在现有技术中,控制器180减小第一纹理的分辨率。结果,纹理中可能出现模糊和图像质量退化。
情况4意指第一纹理是静态纹理、非压缩纹理且是细化贴图纹理。在现有技术中,因为控制器180不调整第一纹理的细化贴图级别,所以第一纹理的文件大小增加。结果,第一纹理可能占据大量的存储容量并增加功耗。
图7是图示根据本公开的调整静态纹理的大小的方法的图。
情况1意指第一纹理是静态纹理、压缩纹理且是细化贴图纹理。纹理应用的大多数情况是情况1。在情况1中,控制器180可以缩小第一纹理的大小。
情况2意指第一纹理是静态纹理、压缩纹理且是非细化贴图纹理。
当第一纹理是静态纹理、压缩纹理且是非细化贴图纹理时,控制器180可以将第一纹理的属性确定为背景图像。背景图像可能包括天空、周围环境、建筑物、山脉、太空等。
控制器180用ETC1压缩第一纹理。稍后将参考图8描述其细节。
情况3意指第一纹理是静态纹理、非压缩纹理且是非细化贴图纹理。在现有技术中,控制器180减小第一纹理的分辨率。结果,纹理中可能出现模糊和图像质量退化。根据本公开,控制器180维持第一纹理的分辨率,而不是调整第一纹理的大小。稍后将参考图10描述其细节。
情况4意指第一纹理是静态纹理、非压缩纹理并且是细化贴图纹理。
当第一纹理是静态纹理、非压缩纹理并且是细化贴图纹理时,控制器180将第一纹理的属性确定为具有大于参考值的细节级别的图像。第一纹理包括稻草图像、人脸图像、火焰图像、叶片图像、强调细节的浮凸图像、强调细节的凹蚀图像等。
具有细节级别大于参考值的图像指代具有可缩小的大小但由于没有压缩而分辨率非递减的图像。即,图像可以是重要图像。另一方面,细节级别小于参考值的图像指代具有递减的大小和由于应用压缩而递减的分辨率的图像。即,该图像可以是不重要的图像。
在现有技术中,因为控制器180不调整第一纹理的细化贴图级别,所以第一纹理的文件大小增加。结果,第一纹理会占据大量的存储器容量并增加功耗。然而,根据本公开,因为控制器180调整第一纹理的细化贴图级别,所以第一纹理的文件大小可以减小,从而减少存储器容量和功耗。稍后将参考图9描述其细节。
图8是图示根据本公开的实施例的当第一纹理是静态纹理、压缩纹理且是非细化贴图纹理时,第一纹理的大小的调整的图。
将参考图8简要描述ETC1压缩。参考图8(a),纹理图像的颜色被压缩。参考图8(b),纹理图像的光的亮度被压缩。参考图8(c),生成最终图像。
ETC是Ericsson Texture Compression(爱立信纹理压缩)的首字母缩写,并且指代Ericsson(爱立信)制作的纹理格式。ETC是安卓(android)标准压缩格式。
当第一纹理是压缩纹理并且是非细化贴图纹理时,其对应于图7的情况2。在情况2中,需要重新压缩第一纹理以减小第一纹理的分辨率。因此,加载和重新压缩纹理所需的时间增加。
当解压缩纹理所需的时间大于压缩纹理所需的时间时,这可能是有问题的。即,需要一种减少解压缩所需时间的方法。ETC2的压缩时间大于ETC1的压缩时间。因此,如果仅纹理的ETC2 RGB888内容被ETC1重新压缩,则解压缩时间会减少。
当第一纹理是压缩纹理并且是非细化贴图纹理时,控制器180利用ETC1压缩与ETC2 RGB888内容有关的第一纹理的仅一部分。
开放源代码etcpak 0.5d用于根据本公开的实施例的ETC1压缩算法(https://bitbucket.org/wolfpld/etcpak/wiki/Home)。该算法是最快的ETC1压缩算法。
控制器180通过在MALi驱动器上移植etcpak 0.5(Tandul 2016)代码来实现算法。在这种情况下,将使用单个线程,但不使用单指令多数据(SIMD)。
当由单个线程执行两个进程时,一个进程完成,并且然后另一个进程开始。然而,当使用多个线程时,在短时间内由两个线程交替地执行这些进程,从而用户可能会感觉好像同时执行了两个进程。但是,由于线程之间的场境切换,两个线程所需的时间可能大于单个线程所需的时间。
当如在根据本公开的文本压缩中仅简单地使用中央处理单元(CPU)时,用单线程执行编程比多线程执行效率更高。
根据本公开的实施例,控制器180可以通过应用调度队列来自动确定第一纹理是否是细化贴图。
在现有技术中,因为即使细化贴图纹理也通过一个命令用ETC1重新压缩,其加载时间也增加。然而,根据本公开,因为应用使用多个命令的调度队列,所以可以减少加载时间。
根据本公开,控制器180可以执行重新压缩,而不管第一纹理的压缩格式如何。
在现有技术中,因为将特定格式的重新压缩应用于第一纹理,所以功耗增加。然而,根据本公开,因为无论第一纹理的压缩格式如何都执行重新压缩,所以功耗可以减少。
图9是图示根据本公开的实施例的当第一纹理是静态纹理并且是细化贴图纹理时第一纹理的细化贴图级别的调整的图。
图9示出在调整细化贴图级别之前的状态和在调整细化贴图级别之后的状态。
具体地,图9(a)示出在调整细化贴图级别之前的状态,并且图9(b)示出调整细化贴图级别之后的状态。
根据本公开的实施例,当加载细化贴图纹理时,通过一次降低一个级别将最大纹理大小减少到1/4。当第一纹理是细化贴图纹理时,控制器180丢弃与级别0相对应的纹理,并且从与级别1相对应的纹理一次降低一个级别。
参考图9(a),当如下所示将细化贴图纹理配置为:256x 256级别0、128x 128级别1和64x 64级别2时,控制器180从128x 128级别1纹理降低一个级别并获得128x 128级别0。
参考图9(b),细化贴图纹理被配置如下:256x 256级别0、128x 128级别1和64x 64级别2。
在现有技术中,因为级别0纹理被重新压缩并被丢弃,所以加载时间不必要地增加。根据OpenGL规范,因为glTexparamerteri()和glTexImage2D()之间的调用顺序是可变的,所以当加载级别0纹理时,很难确定纹理是否应用细化贴图。
根据本公开,因为丢弃级别0纹理并且级别从级别1开始逐一减小,即,预先消除具有最大计算量的级别0纹理,计算量和加载时间可以被减少,不论压缩的应用和格式如何。
图10是图示根据本公开的实施例的当第一纹理是静态纹理、非压缩纹理且是非细化贴图纹理时第一纹理的大小的调整的图。
具体地,图10(a)示出菜单,并且图10(b)示出图标。
当第一纹理是非压缩纹理并且是非细化贴图纹理时,控制器180可以将第一纹理的属性确定为图标、菜单和屏幕大小图像中的至少一个。屏幕大小图像包括游戏应用的结束场景。
当第一纹理是非压缩纹理并且是非细化贴图纹理时,第一纹理很可能是一比一映射到屏幕的纹理。在这种情况下,第一纹理可以是菜单、图标和屏幕大小图像中的至少一个,它们直接映射到屏幕。当压缩菜单、图标和屏幕大小的图像时,字母可能会变得模糊并且图像质量可能会退化。为了避免这种问题,不应用压缩。
因此,当第一纹理是非压缩纹理且是非细化贴图纹理时,即,在图7的情况3中,控制器180维持第一纹理的大小。即,控制器180不调整第一纹理的大小。另一方面,在图6的情况3中,即,在现有技术中,因为第一纹理的分辨率减小,所以第一纹理变得模糊并且图像质量下降。
图11是图示当第一纹理是动态纹理时在现有技术中第一纹理的大小的调整的图。
在现有技术中,当第一纹理是动态纹理时,第一纹理没有被分类为阴影贴图或非阴影贴图,并且第一纹理的大小和分辨率没有被减小。在这种情况下,因为纹理的大小较大,所以纹理占用大量存储器空间并增加其加载时间。
图12是图示当第一纹理是动态纹理时根据本公开的第一纹理的大小的调整的图。
具体地,图12(a)示出非阴影贴图,并且图12(b)示出阴影贴图。将描述阴影贴图和非阴影贴图之间的分类的准则。
当第一纹理是动态纹理并且屏幕长宽比是一比一时,控制器180将第一纹理分类为阴影贴图。当第一纹理是动态纹理并且屏幕长宽比不是一比一时,控制器180将第一纹理分类为非阴影贴图。
在下文中,将描述当第一纹理是阴影贴图时如何减小第一纹理的分辨率。
当第一纹理是阴影贴图时,控制器180减小第一纹理的分辨率。当第一纹理是非阴影贴图时,控制器180维持第一纹理的分辨率。将参考图13描述第一纹理是阴影贴图的情况。
当屏幕长宽比不是一比一时,如果主帧缓冲区和G缓冲区的分辨率减小,则整体分辨率减小。因此,主帧缓冲区和G缓冲区的分辨率没有减小。另外,难以仅基于屏幕长宽比来区分反射贴图和速度贴图,因此不减小反射贴图和速度贴图的分辨率。
图13是图示根据本公开的实施例的当第一纹理是阴影贴图时第一纹理的大小的调整的图。
参考图13,当满足以下两个条件中的至少一个时,控制器180将第一纹理确定为阴影贴图。
第一条件如下:当根据glTexImage 2D定义纹理图像时,如果数据指示符为NULL(渲染到纹理),则控制器180将第一纹理确定为阴影贴图。
第二条件如下:当纹理的水平与垂直之比为一比一时,控制器将第一纹理确定为阴影贴图。
根据本公开的实施例,通过修改马里(Mali)驱动器,当满足两个条件中的至少一个时,控制器180将第一纹理确定为阴影贴图。
马里驱动器被修改如下。首先,可以基于渲染缓冲区对象(RBO)附接深度数据。接下来,可以将纹理类型直接指定为深度图像,而无需使用RBO。
根据本公开的实施例,控制器180可以不调整第一纹理的大小,即,在下述情况下维持第一纹理的当前大小。
当使用glTexstorage 2D时,控制器180维持第一纹理的当前大小。其原因是很难区分静态纹理和动态纹理。游戏temple run 2(《神庙逃亡》2)可以作为示例。
当通过glTexImage3D的纹理阵列实现级联阴影贴图时,控制器180维持第一纹理的当前大小。以Adreno SDK为例。
图14是图示原始图像和其中根据现有技术调整纹理的大小的图像的图。
具体地,图14(a)示出原始图像,而图14(b)示出根据现有技术的图像。
移动设备是Galaxy S7,并且使用游戏调谐器应用将纹理调整了大约25%。
参考图14(b),控制器180减小图标图像1410的分辨率,并且结果,图标图像1410变得模糊。即,图标图像1410的质量低于原始图像的质量。
沙滩图像1420对应于图6的情况2。控制器180不会减小沙滩图像1420的分辨率。因此,沙滩图像1420具有与原始图像相同的质量。
叶片图像1430对应于图6的情况1。控制器180压缩叶片图像1430,应用细化贴图,并减小叶片图像1430的分辨率。结果,叶片图像1430的质量低于原始图像的质量。
在下文中,将给出关于游戏调谐器如何调整纹理质量的描述。
首先,将每个纹理渲染到离屏帧缓冲区上。CPU存储器通过glReadPixels()函数读取渲染结果。在CPU代码上减小纹理的大小。例如,当设置值为25%时,高度和长度设置为50%。减小的纹理再次上传到GPU存储器。
在现有技术中,其目的是通过减小非压缩纹理的大小来改善每秒帧数(FPS)。
然而,现有技术具有以下缺点。首先,图像质量被退化。大多数非压缩纹理都是一比一地映射到屏幕而不是物体。如果强制调整此类纹理的大小,则纹理可能会变得模糊。
接下来,应用范围可能会成问题。在现有技术中,它可能不被应用于压缩纹理和动态纹理。此外,由于以下处理顺序:GPU->CPU->GPU,加载时间可能会增加。
图15是图示根据本公开的其中调整纹理的大小的图像的图。
具体地,图15(a)示出原始图像,并且图15(b)示出根据本公开的图像。
参考图15(b),图标1510是非压缩纹理且是非细化贴图纹理。即,图标1510对应于图7的情况3。控制器180不会减小图标1510的分辨率。因此,图标1510不会变得模糊。
沙滩图像1520对应于图7的情况2。在情况2中,即,当第一纹理是静态纹理、压缩纹理并且是非细化贴图纹理时,控制器180将第一纹理的属性确定为背景图像。在将沙滩图像1520的属性确定为背景图像之后,控制器180利用ETC1重新压缩沙滩图像1520。因此,可以看出与原始图像相比,沙滩图像1520的质量稍微被退化。
叶片图像1540对应于图7的情况1。在情况1中,即,当第一纹理是静态纹理、压缩纹理并且是细化贴图纹理时,控制器180将第一纹理的属性确定为正常图像。控制器180压缩叶片图像1530,应用细化贴图,并减小叶片图像1530的分辨率。叶片图像1530的质量低于原始图像的质量。
根据本公开,控制器180可以基于纹理的属性对纹理进行分类,取决于分类的纹理的类别以不同的方式调整纹理的大小,并且使能够在GPU驱动器级别上实现。因此,与现有技术相比,存储器容量和功耗可以减小。
图16是示出现有技术中的功耗与根据本公开的功耗之间的比较的表。
参考图16,使用以下游戏:Beach Buggy racing(海滩赛车竞赛)、Implosion(加速魔法)和Xenowerk(异形工场)。
在游戏Beach Buggy racing(海滩赛车竞赛)中,根据现有技术,GPU需要289mW的功率,而根据本公开,需要237mW的功率。即,功耗降低了大约17.9%。根据现有技术,DDR需要1112mW的功率,并且根据本公开需要1021mW的功率。即,功耗被降低了大约8.1%。
在游戏Implosion(加速魔法)中,根据现有技术,GPU要求功率为467mW,并且根据本公开,GPU要求功率为447mW。也就是说,功耗减少了约4.2%。根据现有技术DDR需要1460mW的功率,并且根据本发明需要1399mW的功率。也就是说,功耗减少了约4.1%。
在游戏Xenowerk(异形工场)中,根据现有技术,GPU需要697mW的功率,并且根据本公开,需要569mW的功率。即,功耗减少了大约18.3%。根据现有技术DDR需要969mW的功率,并且根据本公开需要825mW的功率。也就是说,功耗被减少了约14.8%。
本公开的实验被如下设立。以上三个游戏:Beach Buggy racing(海滩赛车竞赛)、Implosion(加速魔法)和Xenowerk(异形工场)具有各种图形效果。
使用了以下硬件。GH 16PDK16B1.0#5被用作板。此外,还使用A72+A53八核CPU、Mali T880MP6 GPU和LPDDR4 1600。此外,NI USB-6363用作功率测量设备。
使用了以下软件。最大时钟,即,性能调节器用作CPU时钟。对于这三个游戏,GPU时钟固定为384、672和480MHz,游戏可以在这些时钟上运行而不会造成任何损耗。存储器的默认DFS最大值为1600MHz。这样做的原因是最小化CPU/GPU调节器的影响并测量DDR DFS的影响。作为操作系统,使用Android 7.0。GPU驱动器是Mali Midgard r12p0。
根据本公开的实施例,纹理被分类为动态纹理或静态纹理。当纹理为静态纹理时,纹理被分类为压缩纹理或非压缩纹理。纹理进一步分类为细化贴图纹理或非细化贴图纹理。当纹理是动态纹理时,该纹理被分类为阴影贴图或非阴影贴图。因为基于分类的纹理的属性来调整纹理的大小,所以可以取决于纹理的属性来适当地调整纹理的大小,从而避免图像质量退化并改善功率效率。
根据本公开的另一实施例,当纹理是静态纹理、压缩纹理且是非细化贴图纹理时,通过将纹理的属性确定为背景图像来调整纹理的大小。因此,可以取决于纹理的属性适当地调整纹理的大小,从而避免图像质量退化并减小加载时间。
根据本公开的另一实施例,当纹理是动态纹理并且当纹理的屏幕长宽比是一比一时,通过将纹理的属性确定为阴影贴图来调整纹理的大小。因此,在特定情况下执行缩小时,整体分辨率可能会减小,从而避免图像质量退化并减小加载时间。
应理解,本文描述的示例实施例应仅在描述性意义上考虑,而不是出于限制的目的。根据示例实施例的每个设备或方法内的特征或方面的描述通常应被认为可用于根据示例实施例的其他设备或方法中的其他类似特征或方面。尽管已经具体示出和描述一些示例实施例,但是本领域的普通技术人员将理解,可以在不脱离权利要求书的精神和范围的情况下在其中进行形式和细节上的变化。
用于实施本公开的方式
上面已经以用于执行本公开的优选实施方式描述了各种实施例。
工业实用性
本公开适用于用于调整一系列纹理的大小的移动设备。
对于本领域的技术人员而言显而易见的是,在不脱离本公开的精神或范围的情况下,可以对本公开进行各种改变和修改。因此,本公开旨在覆盖本公开的修改和变化,只要它们落入所附权利要求及其等同物的范围内。
Claims (20)
1.一种移动设备,包括:
存储器,所述存储器被配置成存储特定应用;
控制器,所述控制器被配置成:
当所述特定应用被执行时,从所述存储器接收第一纹理;
基于纹理属性将接收到的第一纹理分类为静态纹理或动态纹理;
当所述第一纹理是静态纹理时,取决于是否应用压缩将所述第一纹理分类为压缩纹理或非压缩纹理;
当所述第一纹理是静态纹理并且是压缩纹理时,取决于是否应用细化贴图将所述第一纹理分类为细化贴图纹理或非细化贴图纹理;
当所述第一纹理是静态纹理并且是非压缩纹理时,取决于是否应用所述细化贴图将所述第一纹理分类为细化贴图纹理或非细化贴图纹理;
当所述第一纹理是动态纹理时,基于屏幕的长宽比将所述第一纹理分类为阴影贴图或非阴影贴图;以及
基于分类的纹理的属性调整所述第一纹理的大小;以及
显示器,所述显示器被配置成根据来自所述控制器的控制命令显示所述第一纹理。
2.根据权利要求1所述的移动设备,其中,所述控制器被配置成:
当所述第一纹理被预先确定并安装在所述特定应用中时,将所述第一纹理分类为静态纹理;并且
当在每个帧中创建所述第一纹理时,将所述第一纹理分类为动态纹理。
3.根据权利要求1所述的移动设备,其中,所述控制器被配置成:
当所述第一纹理是动态纹理并且当所述屏幕长宽比是一比一时,将所述第一纹理分类为所述阴影贴图;并且
当所述第一纹理是动态纹理并且所述屏幕长宽比不是一比一时,将所述第一纹理分类为所述非阴影贴图。
4.根据权利要求3所述的移动设备,其中,所述控制器被配置成:
当所述第一纹理是所述阴影贴图时,减小所述第一纹理的分辨率;并且
当所述第一纹理是所述非阴影贴图时,维持所述第一纹理的分辨率。
5.根据权利要求1所述的移动设备,其中,所述控制器被配置成:当所述第一纹理是压缩纹理并且是非细化贴图纹理时,利用ETC1来压缩与ETC2 RGB888内容有关的所述第一纹理的仅一部分。
6.根据权利要求1所述的移动设备,其中,所述控制器被配置成:当所述第一纹理是细化贴图纹理时,丢弃与级别0相对应的纹理,并从与级别1相对应的纹理一次降低一个级别。
7.根据权利要求1所述的移动设备,其中,所述控制器被配置成:当所述第一纹理是非压缩纹理并且是非细化贴图纹理时,将所述第一纹理的属性确定为图标、菜单或屏幕大小图像中的至少一个。
8.根据权利要求1所述的移动设备,其中,所述控制器被配置成:当所述第一纹理是非压缩纹理并且是非细化贴图纹理时,维持所述第一纹理的大小。
9.根据权利要求1所述的移动设备,其中,所述控制器被配置成:当所述第一纹理是压缩纹理并且是非细化贴图纹理时,将所述第一纹理的属性确定为背景图像。
10.根据权利要求1所述的移动设备,其中,所述控制器被配置成:当所述第一纹理是压缩纹理并且是细化贴图纹理时,将所述第一纹理的属性确定为具有比参考值更大的细节级别的图像。
11.一种控制移动设备的方法,所述方法包括:
当执行存储在存储器中的特定应用时,从所述存储器接收第一纹理;
基于纹理属性将接收到的第一纹理分类为静态纹理或动态纹理;
当所述第一纹理是静态纹理时,取决于是否应用压缩将所述第一纹理分类为压缩纹理或者非压缩纹理;
当所述第一纹理是静态纹理并且是压缩纹理时,取决于是否应用细化贴图将所述第一纹理分类为细化贴图纹理或非细化贴图纹理;
当所述第一纹理是静态纹理并且是非压缩纹理时,取决于是否应用所述细化贴图将所述第一纹理分类为细化贴图纹理或非细化贴图纹理;
当所述第一纹理是动态纹理时,基于屏幕的长宽比将所述第一纹理分类为阴影贴图或非阴影贴图;
基于所述分类的纹理的属性调整所述第一纹理的大小;以及
根据来自所述控制器的控制命令显示所述第一纹理。
12.根据权利要求11所述的方法,进一步包括:
当所述第一纹理被预先确定并安装在所述特定应用中时,将所述第一纹理分类为静态纹理;并且
当在每个帧中创建所述第一纹理时,将所述第一纹理分类为动态纹理。
13.根据权利要求11所述的方法,进一步包括:
当所述第一纹理是动态纹理并且当所述屏幕长宽比是一比一时,将所述第一纹理分类为所述阴影贴图;以及
当所述第一纹理是动态纹理并且所述屏幕长宽比不是一比一时,将所述第一纹理分类为所述非阴影贴图。
14.根据权利要求13所述的方法,进一步包括:
当所述第一纹理是所述阴影贴图时,减小所述第一纹理的分辨率;和
当所述第一纹理是所述非阴影贴图时,维持所述第一纹理的分辨率。
15.根据权利要求11所述的方法,进一步包括:
当所述第一纹理是压缩纹理并且是非细化贴图纹理时,利用ETC1来压缩与ETC2RGB888内容有关的所述第一纹理的仅一部分。
16.根据权利要求11所述的方法,进一步包括:
当所述第一纹理是细化贴图纹理时,丢弃与级别0相对应的纹理,并从与级别1相对应的纹理一次降低一个级别。
17.根据权利要求11所述的方法,进一步包括;
当所述第一纹理是非压缩纹理并且是非细化贴图纹理时,将所述第一纹理的属性确定为图标、菜单或屏幕大小图像中的至少一个。
18.根据权利要求11所述的方法,进一步包括:
当所述第一纹理是非压缩纹理并且是非细化贴图纹理时,维持所述第一纹理的大小。
19.根据权利要求11所述的方法,进一步包括:
当所述第一纹理是压缩纹理并且是非细化贴图纹理时,将所述第一纹理的属性确定为背景图像。
20.根据权利要求11所述的方法,进一步包括:
当所述第一纹理是压缩纹理并且是细化贴图纹理时,将所述第一纹理的属性确定为具有比参考值更大的细节级别的图像。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR10-2018-0094598 | 2018-08-13 | ||
KR1020180094598A KR102489266B1 (ko) | 2018-08-13 | 2018-08-13 | 모바일 디바이스 및 그 제어 방법 |
PCT/KR2018/009513 WO2020036244A1 (ko) | 2018-08-13 | 2018-08-20 | 모바일 디바이스 및 그 제어 방법 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112335219A CN112335219A (zh) | 2021-02-05 |
CN112335219B true CN112335219B (zh) | 2021-08-03 |
Family
ID=69524804
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201880094775.6A Expired - Fee Related CN112335219B (zh) | 2018-08-13 | 2018-08-20 | 移动设备及其控制方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US11216989B2 (zh) |
KR (1) | KR102489266B1 (zh) |
CN (1) | CN112335219B (zh) |
DE (1) | DE112018007632T5 (zh) |
WO (1) | WO2020036244A1 (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111729307B (zh) * | 2020-07-30 | 2023-08-22 | 腾讯科技(深圳)有限公司 | 虚拟场景显示方法、装置、设备以及存储介质 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP0653726B1 (en) * | 1993-11-15 | 2001-06-27 | Eastman Kodak Company | A technique for finding the histogram region of interest for improved tone scale reproduction of digital radiographic images |
CN101344961A (zh) * | 2007-06-07 | 2009-01-14 | 辉达公司 | 使用常驻小中见大贴图(mipmap)数据外推非常驻小中见大贴图数据 |
CN101620724A (zh) * | 2008-06-04 | 2010-01-06 | Arm有限公司 | 图形处理系统 |
CN102595023A (zh) * | 2012-01-19 | 2012-07-18 | 西安联客信息技术有限公司 | 移动终端及其图像处理方法 |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5831625A (en) * | 1996-01-02 | 1998-11-03 | Integrated Device Technology, Inc. | Wavelet texturing |
US8633940B2 (en) | 2009-08-04 | 2014-01-21 | Broadcom Corporation | Method and system for texture compression in a system having an AVC decoder and a 3D engine |
JP5660818B2 (ja) | 2010-07-21 | 2015-01-28 | 任天堂株式会社 | 画像処理プログラム、画像処理装置、画像処理システム、および、画像処理方法 |
US8625910B2 (en) | 2011-02-25 | 2014-01-07 | Adobe Systems Incorporated | Compression of image data |
GB2491688B (en) | 2011-05-05 | 2014-08-27 | Advanced Risc Mach Ltd | Method of and apparatus for encoding and decoding data |
KR20160029550A (ko) * | 2014-09-05 | 2016-03-15 | 엘지전자 주식회사 | 이동 단말기 및 그 제어방법 |
JP6365371B2 (ja) | 2015-03-27 | 2018-08-01 | ブラザー工業株式会社 | 画像処理装置、および、コンピュータプログラム |
KR102477264B1 (ko) | 2015-09-22 | 2022-12-13 | 삼성전자주식회사 | 텍스쳐를 처리하는 방법 및 장치 |
KR20180048081A (ko) * | 2016-11-02 | 2018-05-10 | 삼성전자주식회사 | 텍스쳐 처리 방법 및 장치 |
KR20180111242A (ko) * | 2017-03-31 | 2018-10-11 | 삼성전자주식회사 | 채색 가능한 콘텐트를 제공하는 전자 장치 및 그 방법 |
-
2018
- 2018-08-13 KR KR1020180094598A patent/KR102489266B1/ko active IP Right Grant
- 2018-08-20 US US17/057,025 patent/US11216989B2/en active Active
- 2018-08-20 DE DE112018007632.6T patent/DE112018007632T5/de active Pending
- 2018-08-20 WO PCT/KR2018/009513 patent/WO2020036244A1/ko active Application Filing
- 2018-08-20 CN CN201880094775.6A patent/CN112335219B/zh not_active Expired - Fee Related
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP0653726B1 (en) * | 1993-11-15 | 2001-06-27 | Eastman Kodak Company | A technique for finding the histogram region of interest for improved tone scale reproduction of digital radiographic images |
CN101344961A (zh) * | 2007-06-07 | 2009-01-14 | 辉达公司 | 使用常驻小中见大贴图(mipmap)数据外推非常驻小中见大贴图数据 |
CN101620724A (zh) * | 2008-06-04 | 2010-01-06 | Arm有限公司 | 图形处理系统 |
CN102595023A (zh) * | 2012-01-19 | 2012-07-18 | 西安联客信息技术有限公司 | 移动终端及其图像处理方法 |
Also Published As
Publication number | Publication date |
---|---|
US11216989B2 (en) | 2022-01-04 |
DE112018007632T5 (de) | 2021-03-04 |
CN112335219A (zh) | 2021-02-05 |
KR20200019028A (ko) | 2020-02-21 |
WO2020036244A1 (ko) | 2020-02-20 |
KR102489266B1 (ko) | 2023-01-17 |
US20210209814A1 (en) | 2021-07-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108600605B (zh) | 移动终端及其控制方法 | |
CN108632444B (zh) | 移动终端及其控制方法 | |
CN106412221B (zh) | 移动终端及其控制方法 | |
US9942453B2 (en) | Mobile terminal and method for controlling the same | |
CN107948394B (zh) | 移动终端 | |
CN107637058B (zh) | 移动终端及其控制方法 | |
CN105721666B (zh) | 移动终端及其控制方法 | |
CN106155286B (zh) | 移动终端及其控制方法 | |
EP3407575A1 (en) | Mobile terminal | |
US20180275770A1 (en) | Mobile terminal and control method therefor | |
EP3442220A1 (en) | Mobile terminal | |
CN105306625B (zh) | 移动终端及其控制方法 | |
KR20170062121A (ko) | 이동단말기 및 그 제어방법 | |
CN105474159B (zh) | 移动终端 | |
US10564845B2 (en) | Mobile terminal and method for controlling the same | |
KR20180037721A (ko) | 디스플레이 장치 | |
EP3439301A2 (en) | Image processing apparatus and mobile terminal | |
EP3276476B1 (en) | Display apparatus | |
KR20170130952A (ko) | 이동 단말기 및 그 제어방법 | |
CN106201299B (zh) | 移动终端及其控制方法 | |
EP3318970A1 (en) | Display apparatus | |
KR20170064901A (ko) | 모바일 디바이스 및 그 제어 방법 | |
EP3297270A1 (en) | Display apparatus | |
KR101510704B1 (ko) | 이동 단말기 및 그것의 제어 방법 | |
US20180309917A1 (en) | Mobile terminal and method of controlling the same |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20210803 |