CN107209631A - 用于显示图像的用户终端及其图像显示方法 - Google Patents

用于显示图像的用户终端及其图像显示方法 Download PDF

Info

Publication number
CN107209631A
CN107209631A CN201680005363.1A CN201680005363A CN107209631A CN 107209631 A CN107209631 A CN 107209631A CN 201680005363 A CN201680005363 A CN 201680005363A CN 107209631 A CN107209631 A CN 107209631A
Authority
CN
China
Prior art keywords
image
information
user terminal
sketch
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201680005363.1A
Other languages
English (en)
Inventor
朴世喜
李春淅
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN107209631A publication Critical patent/CN107209631A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24—Querying
    • G06F16/248—Presentation of query results
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/51—Indexing; Data structures therefor; Storage structures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/53—Querying
    • G06F16/532—Query formulation, e.g. graphical querying
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/951—Indexing; Web crawling techniques
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/20—Drawing from basic elements, e.g. lines or circles
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Library & Information Science (AREA)
  • Mathematical Physics (AREA)
  • Software Systems (AREA)
  • Computational Linguistics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Processing Or Creating Images (AREA)

Abstract

提供了用户终端以及由用户终端显示图像的方法。该方法包括：响应于接收的与用户绘制的草图有关的第一输入信息，获取并显示与该草图等同或相似的图像作为第一搜索结果；响应于用于编辑作为第一搜索结果获取的图像的第二输入信息，编辑并显示所获取的图像；以及获取并显示与编辑后的图像等同或相似的图像作为第二搜索结果。

Description

用于显示图像的用户终端及其图像显示方法
技术领域
本公开涉及用于显示图像的用户终端及其图像显示方法，并且例如，涉及一种使用用户绘制的草图(sketch)来搜索图像的方法。
背景技术
由于可由用户终端提供的功能是多样化的，所以用户可以通过用户终端执行诸如再现视频文件、拍摄图片或视频和玩游戏的功能。此外，用户可以通过经由用户终端访问网络服务器来接收搜索服务。例如，当用户输入搜索字和搜索条件时，网络服务器可以通过使用搜索引擎向用户提供与搜索字和搜索条件匹配的搜索结果。
搜索引擎对应于容易在因特网上搜索用户期望的信息的软件，并且搜索引擎的类型可以包括，例如，面向字的搜索引擎、面向主题的搜索引擎、元搜索引擎等。
根据用户输入的搜索字和搜索条件通过搜索引擎找到的搜索结果可以以文本或图像的形式提供。
在这种情况下，为了获取用户期望的搜索结果，需要由用户输入的搜索字和搜索条件的准确度。
发明内容
[技术问题]
当用户使用搜索服务时，用户可能不记得用于得到搜索结果的搜索字。具体地，当用户搜索图像作为搜索结果时，用户可能感到难以找到与图像有关的搜索字。
由于每个用户具有不同感觉并且甚至对于相同图像记住不同的搜索字，所以用户不容易找到准确的搜索字。
[问题的解决方案]
本公开的一个方面要提供一种通过下述方式搜索图像的方法：使用用户绘制的草图、并且例如通过将绘制的草图和附加信息一起输入来快速且容易地找到用户期望的搜索结果。
根据本公开的示例，提供了一种由用户终端显示图像的方法。该方法包括：接收基于用户绘制的草图的第一输入信息；响应于第一输入信息，获取并且显示与草图相同或相似的图像作为第一搜索结果；接收用于编辑基于第一搜索结果的找到的图像的第二输入信息；响应于第二输入信息，编辑并且显示找到的图像；以及获取并且显示与编辑后的图像相同或相似的图像作为第二搜索结果。
编辑并且显示找到的图像可以包括：将属性信息应用于找到的图像的至少一部分并且显示图像。
编辑并且显示找到的图像可以包括：改变找到的图像的轮廓的至少一部分并且显示图像。
显示与草图相同或相似的图像可以包括：加亮与草图相同或相似的图像的轮廓并且显示图像。
该方法还可以包括：在接收到第一输入信息之前，显示用作草图的底稿或基础的图像。
该方法还可以包括：当多个图像被显示为第一搜索结果时，接收用于从所述多个图像中选择要编辑的至少一个图像的第三输入信息。
属性信息可以是情绪信息、气味信息、材料信息、颜色信息、触摸信息、声音信息、天气信息、温度信息和大气信息中的至少一个。
获取并且显示与编辑后的图像相同或相似的图像作为第二搜索结果可以包括：从与用户终端连接的外部服务器获取与编辑后的图像相同或相似的图像，并且显示所获取的图像作为第二搜索结果。
根据本公开的另一示例，提供了一种由服务器提供图像的方法。该方法包括：从用户终端获取与草图有关的信息；基于与草图有关的信息，获取与草图相同或相似的图像作为第一搜索结果；向用户终端发送与第一搜索结果对应的图像；从用户终端获取图像的编辑信息；基于编辑信息，获取与编辑后的图像相同或相似的图像作为第二搜索结果；以及向用户终端发送与第二搜索结果对应的图像。
获取图像的编辑信息可以包括获取与图像有关的属性信息。
根据本公开的另一示例，提供了一种用于显示图像的用户终端。用户终端包括：输入电路，被配置为接收输入；显示器，被配置为显示图像；存储器，被配置为存储一个或多个程序；以及处理器，例如通过运行包括在存储器的一个或多个程序中的指令而被配置为：响应于通过输入电路的与用户绘制的草图有关的第一输入信息，获取与草图相同或相似的图像作为第一搜索结果，并且将所获取的图像显示在显示器上，响应于用于编辑找到的图像的第二输入信息，编辑基于第一搜索结果的找到的图像，并且显示编辑后的图像，以及获取并且显示与编辑后的图像相同或相似的图像作为第二搜索结果。
当找到的图像被编辑并且显示在显示器上时，处理器可以例如通过运行指令而被配置为将属性信息应用于找到的图像的至少一部分并且显示图像。
当找到的图像被编辑并且显示在显示器上时，处理器可以例如通过运行指令而被配置为改变找到的图像的轮廓的至少一部分并且显示图像。
当在显示器上显示与草图相同或相似的图像时，处理器可以例如通过运行指令而被配置为加亮与草图相同或相似的图像的轮廓并且显示图像。
处理器可以例如通过运行指令而被配置为显示用作草图的底稿或基础的图像。
属性信息可以是情绪信息、天气信息、温度信息、气味信息、材料信息、颜色信息、触摸信息、声音信息和大气信息中的至少一个。
当与编辑后的图像相同或相似的图像被获取作为第二搜索结果并且显示在显示器上时，处理器可以例如通过运行指令而被配置为：从与用户终端连接的外部服务器获取与编辑后的图像相同或相似的图像，并且显示所获取的图像作为第二搜索结果。
根据本公开的另一示例，提供了一种用于提供图像的服务器。该服务器包括：通信电路，被配置为与用户终端进行通信；存储器，被配置为存储一个或多个程序；以及处理器，例如通过运行存储在存储器的一个或多个程序中的指令而被配置为：基于通过通信电路从用户终端获取的与草图有关的信息来获取与草图相同或相似的图像作为第一搜索结果，并且向用户终端发送所获取的图像，基于从用户终端获取的图像的编辑信息获取与编辑后的图像相同或相似的图像作为第二搜索结果，并且向用户终端发送所获取的图像。
处理器可以例如通过运行指令而被配置为：基于从用户终端获取的与图像有关的属性信息向用户终端发送与编辑后的图像相同或相似的图像。
[发明的有益效果]
根据如上所述本公开的各种示例，用户可以通过草图的绘制及其编辑过程来快速搜索期望的图像。
此外，在用户绘制草图的过程中提供有助于用户草绘的底稿(underdrawing)、基础(foundation)或附加搜索结果，从而增加了用户执行草绘的便利性。
此外，在以下详细描述中将直接或隐含地公开通过本公开的示例获得或预期的其它效果。例如，将在以下详细描述中公开根据本公开的示例预期的各种效果。
附图说明
从以下结合附图的详细描述中，本公开的上述和其它方面、特征和优点将更加明显，其中相同的附图标记指代相同的元件，并且在附图中：
图1是示出了示例系统的示例配置的框图；
图2是示出了示例用户终端的示例配置的框图；
图3是示出了存储在用户终端中的软件的示例结构的图；
图4是示出了示例服务器的示例配置的框图；
图5是示出了服务器构建数据库的示例过程的流程图；
图6是示出了服务器搜索并获取用户期望的图像的示例过程的流程图；
图7A至图7C是示出了用户终端显示找到的图像的示例过程的图；
图8A和图8B是示出了用户终端显示找到的图像的示例过程的图；
图9A至图9C是示出了用户终端显示找到的图像的示例过程的图；
图10A至图10C是示出了用户终端显示找到的图像的示例过程的图；
图11A至图11C是示出了与图像的至少一部分有关的示例属性信息的图；
图12A和图12B是示出了示例绘制的草图的图；
图13是示出了示例找到的图像的图；
图14和图15是示出了用户终端显示图像的示例方法的流程图；以及
图16是示出了用户终端的示例配置的框图。
具体实施方式
将简要描述本公开中使用的术语，并且将在下面更详细地描述本公开。
对于本公开的示例中使用的术语，选择考虑到本公开中的功能而尽可能广泛地使用的一般术语，但是术语可以依据本领域技术人员的意图、先例、新技术的出现等而变化。此外，可以使用申请人任意选择的术语。例如，将在本公开的相应部分描述该术语的含义。因此，本文使用的术语应基于术语的含义和本公开的内容进行限定，而不是仅基于术语所表述的名称进行限定。
本公开可以被不同地修改或改变并且可以具有各种示例，因此将参照附图更详细地描述具体示例实施例。然而，应当理解，并不意图将本公开限制于所公开的特定形式，而是相反，本公开旨在覆盖落入本公开的精神和范围内的所有修改、等同物和替代方案。此外，在本公开的以下描述中，当可能使本公开的主题不清楚时，将省略对并入本文中的公知技术的详细描述。
虽然使用诸如第一、第二等的术语“序数”来描述各种结构元件，但是结构元件不应被这些术语限定。这些术语仅出于将一个元件与其它元件区分开的目的而被使用。
如本文所使用的，除非上下文明确地另有所指，否则单数形式也旨在包括复数形式。在本公开中，应当理解，术语“包括”或“具有”指示特征、数目、步骤、操作、结构元件、部件或其组合的存在，并且不排除一个或多个其它特征、数字、步骤、操作、结构元件、部件或其组合的存在或附加的可能性。
在本公开的示例中，术语“模块”或“单元”可以执行至少一个功能或操作，并且可以由硬件(例如，电路)、软件、或硬件和软件的组合来实现。此外，除了需要由特定硬件实现的“模块”或“单元”之外，多个“模块”或“单元”可以集成到至少一个模块中，并且可被实现为至少一个处理器(未示出)。
在本公开的示例中，当描述元件“连接”到另一元件时，不仅第一元件可以“直接连接”到第二元件，而且在第三元件介于第一与第二元件之间的情况下第一元件也可以“电连接”到第二元件。此外，当描述某个单元“包括”某个元件时，这意味着除非另有指明，否则该单元可以包括任何其它元件而不是排除其它元件。
将参考附图更详细地描述本公开的示例。然而，本公开可以以各种不同的形式实现，并且不限于这里描述的示例。此外，在附图中省略了与本公开无关的部分以使本公开清楚，并且在整个公开内容中对相同的组件指定相同的附图标记。
此外，根据本公开的示例，用户输入可以例如包括触摸输入、弯曲输入、语音输入、按钮输入和多模式输入中的至少一个，但是本公开不限于此。
根据本公开的示例，“触摸输入”指代在显示器和/或盖子上进行的用来控制设备的输入。此外，“触摸输入”可以包括与显示器分开某一预定距离或更多距离而没有任何接触的触摸(例如，浮动或悬停)。触摸输入可以包括触摸和保持手势、触摸并且然后释放该触摸的轻拍(tap)手势、双击手势、平移(panning)手势、轻击(flick)手势、触摸并且然后在一个方向上移动的触摸拖拽手势、捏合(pinch)手势等，但是本公开不限于此。
根据本公开的示例，“按钮输入”指代下述输入：通过该输入，使用附接到设备的物理按钮来控制该设备。
根据本公开的示例，“运动输入”指代可被施加到设备以控制该设备的运动。例如，运动输入可以包括旋转设备、倾斜设备、或者在上、下、左或右方向上移动设备的输入。
根据示例，“多模式输入”指代两种或更多种输入类型的组合。例如，设备可以接收触摸输入和运动输入，或接收用户的触摸输入和语音输入等。
此外，根据本公开的示例，“应用”可以指代设计用来执行特定任务的计算机程序的集合或系列。根据本公开的示例，可以存在各种应用。例如，应用可以包括游戏应用、视频再现应用、地图应用、备忘录应用、日历应用、电话簿应用、广播应用、运动支持应用、支付应用、图片文件夹应用等，但是本公开不限于此。
此外，根据本公开的示例，“应用识别信息”可以例如是用于区分应用与其它应用的唯一信息。例如，作为应用识别信息，可以提供图标、索引项、链接信息等，但是本公开不限于此。
根据本公开的示例，用户界面(UI)元素指代下述元素：其可以执行与用户的交互，并且基于例如用户输入发送视觉、听觉或嗅觉反馈。UI元素可以以图像、文本和动态图像中的至少一个的形式来表示。如果存在其中不显示上述信息但是基于用户输入可能进行反馈的区域，则该区域可被称为UI元素。此外，UI元素可以是上述应用识别信息。
图1是示出了示例系统10的示例配置的框图。
参考图1，系统10可以提供用户终端11和搜索服务器21。用户终端11和搜索服务器21可以通过各种通信方案彼此连接。例如，用户终端11和搜索服务器21可以通过使用诸如各种长距离无线通信模块(第三代(3G)、第三代合作伙伴项目(3GPP)、长期演进(LTE)等)来相互通信。
在图1中，当用户终端11接收与绘制的草图有关的输入信息时，用户终端11可以将与绘制的草图有关的信息传输到搜索服务器21。响应于所接收的信息，搜索服务器21可以基于绘制的草图获取图像并且将所获取的图像发送到用户终端11。
图2是示出了示例用户终端(例如，用户终端11)的示例配置的框图。
图2所示的用户终端11的配置可以应用于各种类型的移动设备(诸如，可穿戴设备)，例如，智能电话、平板电脑、笔记本电脑、PDA、电子相框、桌面型PC、数字电视、照相机、腕表或头戴式显示器(HMD)等。
如图2所示，用户终端11可以包括图像获取单元(例如，包括电路)110、图像处理器120、显示单元(例如，包括显示器)130、通信单元(例如，包括通信电路)140、存储器150、音频处理器160、音频输出单元170、输入单元(例如，包括输入电路)180和处理器190中的至少一个。图2所示的用户终端11的配置仅是示例，而不一定限于上述框图。可以基于用户终端11的类型或用户终端11的目的来修改或添加图2所示的用户终端11的一些配置。
图像获取单元110可以例如通过各种源获取图像数据。例如，图像获取单元110可以从外部服务器或外部设备接收图像数据。
图像获取单元110可以拍摄外部环境以获取图像数据。例如，图像获取单元110可以由拍摄外部环境的照相机来实现。例如，图像获取单元110可以包括允许图像借此通过的透镜(未示出)和检测已通过透镜的图像的图像传感器(未示出)。图像传感器(图像)可以例如由CCD图像传感器或CMOS图像传感器来实现。通过图像获取单元110获取的图像数据可以由图像处理器120处理。
图像处理器120可以指代用于处理由图像获取单元110接收的图像数据的组件。图像处理器120可以执行各种图像处理，诸如，对图像数据进行解码、缩放、噪声滤除、帧率转换、分辨率转换等。
显示单元130可被配置为显示由图像处理器120处理的视频帧、或由图形处理器193生成的各种屏幕中的至少一个。
显示单元130(例如，包括显示器)的实现方法不受限制，并且可以被实现为各种类型的显示器，例如，液晶显示器(LCD)、有机发光二极管(OLED)显示器、有源矩阵有机发光二极管(AM-OLED)、等离子体显示面板(PDP)等。显示单元130还可以包括基于其实现方法的附加配置。例如，当显示单元130是液晶类型时，显示单元130可以包括LCD显示面板(未示出)、向LCD显示面板提供光的背光单元(未示出)、以及驱动面板(未示出)的面板驱动基板(未示出)。显示单元130可以在耦接到用户输入单元180的触摸面板182的同时被提供为触摸屏(未示出)。
显示单元130可以以曲面显示器(bended display)的形式耦接到用户终端11的前区域、侧区域和后区域中的至少一个。曲面显示器可以由柔性显示器或不是柔性的标准显示器来实现。例如，曲面显示器可以通过连接多个平板显示器来实现。
当曲面显示器由柔性显示器实现时，通过例如薄且柔性的基板而无任何损坏地弯曲、扭曲或卷起的能力可以是柔性显示器的特征。柔性显示器可以用塑料基板以及通常使用的玻璃基板来生产。当使用塑料基板时，可以通过低温生产工艺而不是传统的生产工艺来形成基板，以便防止和/或减少基板的损坏。此外，柔性显示器可以通过用塑料膜替换围绕LCD中的液晶、OLED显示器、AM-OLED、PDP等的玻璃基板而具有折叠和展开的柔性。柔性显示器是薄的、轻的、抗震的、可扭曲的和可弯曲的，使得可以以各种形式制造柔性显示器。
通信单元(例如，包括通信电路)140是根据各种类型的通信方案与各种类型的外部设备进行通信的组件。通信单元140可以包括Wi-Fi芯片141、蓝牙芯片142、无线通信芯片143和近场通信(NFC)芯片144中的至少一个。处理器190可以通过使用通信单元140与外部服务器或各种外部设备进行通信。
例如，Wi-Fi芯片141和蓝牙芯片142可以分别通过Wi-Fi方案和蓝牙方案进行通信。当使用Wi-Fi芯片141或蓝牙芯片142时，诸如子系统标识(SSID)、会话密钥等的各种连接信息被最先发送和接收，并且在使用发送和接收的连接信息执行通信连接之后，可以发送和接收各种信息。无线通信芯片143可以指代根据各种通信标准(诸如，电气和电子工程师协会(IEEE)通信标准、Zigbee、第三代(3G)、第三代合作伙伴项目(3GPP)、长期演进(LTE)等)执行通信的芯片。NFC芯片144可以指代由使用在135kHz、13.56MHz、433MHz、860～960MHz、2.45GHz等的各种射频识别(RF-ID)频率带宽中的13.56MHz的带宽的NFC方案操作的芯片。
存储器150可以存储用户终端11的操作所需的各种程序和数据。存储器150可以由非易失性存储器、易失性存储器、快闪存储器、或硬盘驱动器(HDD)或固态硬盘(SSD)实现。存储器150可由处理器190访问，并且由处理器190对数据执行磁带记录/记录/编辑/删除/更新。根据本公开，术语“存储器”可以包括处理器190内的只读存储器(ROM)(未示出)和随机存取存储器(RAM)(未示出)，或安装在用户终端11中的存储卡(未示出)(例如，微型SD卡或存储棒)。例如，存储器150可以存储用于配置要在显示区域中显示的各种屏幕的程序和数据。
将参照图3描述存储在用户终端11中的软件的结构。参考图3，存储器150可以存储包括操作系统(OS)210、核220、中间件230、应用240等的软件。
OS 210执行控制和管理硬件的一般操作的功能。例如，OS 210对应于提供(serve)诸如硬件管理、存储器、安全性等的一般功能的层。
核220充当将由用户输入单元180接收的包括触摸信号等的各种信号传输到中间件230的通道。
中间件230包括控制用户终端11的操作的各种软件模块。参考图3，中间件230可以例如包括X11模块230-1、APP管理器230-2、连接管理器230-3、安全模块230-4、系统管理器230-5、多媒体框架230-6、主UI框架230-7、窗口管理器230-8和子UI框架230-9。
X11模块230-1可以指代从包括在用户终端11中的各种硬件接收各种事件信号的模块。事件可以被不同地配置，诸如检测到用户手势的事件、生成系统警报的事件、运行或终止特定程序的事件等。
APP管理器230-2可以指代管理安装在存储器150中的各种应用240的运行状态的模块。当X11模块230-1检测到应用运行事件时，APP管理器230-2可以调用并运行对应于相应事件的应用。
连接管理器230-3可以指代支持有线或无线网络连接的模块。连接管理器230-3可以包括诸如DNET模块、UPnP模块等的各种子模块。
安全模块230-4可以指代支持硬件的认证、许可、安全存储等的模块。
系统管理器230-5监视用户终端11内的组件的状态，并且向其它模块提供监视结果。当电池的剩余量不足时，发生错误，或通信连接断开，系统管理器230-5可以将监视结果提供给主UI框架230-7或子UI框架230-9以输出通知消息和/或通知声音。
多媒体框架230-6可以指代再现存储在用户终端11中或从外部源提供的多媒体内容的模块。多媒体框架230-6可以包括播放器模块、摄像机模块，声音处理模块等。因此，多媒体框架230-6可以执行再现各种类型的多媒体内容并生成和再现屏幕和声音的操作。
主UI框架230-7可以指代提供要显示在显示单元130的主区域中的各种UI的模块，并且子UI框架230-9可以指代提供要显示在显示单元130的子区域中的各种UI的模块。主UI框架230-7和子UI框架230-9可以包括用于配置各种UI元素的图像合成器模块、用于计算显示UI元素的坐标的坐标合成器模块、用于在所计算的坐标上渲染所配置的UI元素的渲染模块、以及用于提供用来配置2D或3D形式UI的工具的2D/3D UI工具箱。
窗口管理器230-8可以检测使用用户身体或笔的触摸事件或其它输入事件。当检测到事件时，窗口管理器230-8可以将事件信号传输到主UI框架230-7或子UI框架230-9，以执行与该事件对应的操作。
应用模块240包括用于支持各种功能的应用APP#1 240-1、APP#2 240-2、...、APP#n 240-n。例如，应用模块240可以包括用于提供各种服务的程序模块，诸如导航程序模块、游戏模块、电子书模块、日历模块、警报管理模块等。应用可以默认地被安装，或者可以由用户在使用过程期间随机地安装和使用。当选择UI元素时，主CPU 194可以通过使用应用模块240来运行与所选择的UI元素对应的应用。
图3所示的软件的结构仅是示例，并且本公开不必限于此。因此，可以基于用户终端11的类型或用户终端11的目的而省略、改变或添加一些组件。
返回参考图2，音频处理器160可以指代处理图像内容的音频数据的组件。音频处理器160可以执行各种处理，诸如对音频数据进行解码、放大、噪声滤除等。由音频处理器160处理的音频数据可以被输出到音频输出单元170。
音频输出单元170可以指代下述组件：该组件输出各种通知声音和语音消息、以及已通过由音频处理器160进行的各种处理任务(诸如，解码、放大和噪声滤除)的各种音频数据。例如，音频处理器170可以由扬声器实现，但它仅是示例，并且音频处理器170可以由可输出音频数据的输出端子来实现。
用户输入单元180可以从用户接收各种指令。用户输入单元180可以包括按键181、触摸面板182和笔识别面板183中的至少一个。
按键181可以包括形成在用户终端11的主体的外观的各种区域(诸如，前表面、侧表面、后表面等)上的各种类型的按键，诸如机械按钮、轮等。
触摸面板182可以检测触摸输入，并且可以输出与检测到的触摸信号对应的触摸事件值。当触摸屏(未示出)由触摸面板182和显示单元130的组合配置时，触摸屏可以包括各种类型的触摸传感器，诸如电容式类型、电阻式类型、压电式类型等。电容式类型对应于下述方案：通过使用涂覆在触摸屏的表面上的电介质，在用户的身体的部分触摸触摸屏的表面时检测由用户的身体引起的微小电能来确定触摸坐标。电阻式类型对应于下述方案：在包括嵌入触摸屏中的两个电极板的情况下，通过在用户触摸屏幕时检测到在接触点处的上板和下板彼此接触使得电流流动，来确定触摸坐标。在触摸屏上生成的触摸事件可以主要由用户的手指生成，但是也可以由能够改变电容的导电材料的物体(object)生成。
笔识别面板183可以基于触摸笔(例如，触控笔和数字化笔)的操作来检测笔的接近输入或触摸输入，并且可以输出检测到的笔接近事件或笔触摸事件。笔识别面板183可以通过电磁共振(EMR)方案实现，并且可以根据笔的接近度或由触摸引起的电磁场中的强度变化来检测触摸或接近输入。例如，笔识别面板183可以包括具有网格(grid)结构的电磁感应线圈传感器(未示出)和用于向电磁感应线圈传感器的每个环形线圈顺序地提供具有预定频率的交流信号的电磁信号处理单元(未示出)。当其中嵌入了谐振电路的笔位于这样的笔识别面板183的环形线圈附近时，从相应的环形线圈发送的磁场基于笔内的谐振电路的电磁互感生成电流。基于该电流，从构成笔内的谐振电路的线圈生成感应的磁场，并且笔识别面板183可以在信号接收状态下检测来自环形线圈的感应的磁场，以便检测笔的接近位置或触摸位置。笔识别面板183可以具有预定区域，例如在显示单元130的下部上的可以覆盖显示面板130的显示区域的区域。
处理器190可以被配置为控制用户终端11的一般操作，并且可以使用存储在存储器150中的各种程序来执行控制。
处理器190可以包括RAM 191、ROM 192、图形处理器193、主CPU 194、第一至第n接口195-1至195-n、以及总线196。此时，RAM 191、ROM 192、图形处理器193、主CPU 194、以及第一至第n接口195-1至195-n可以通过总线196彼此连接。
RAM 191存储O/S和应用程序。例如，当用户终端11启动时，O/S可以存储在RAM 191中，并且由用户选择的各种应用数据可以存储在RAM 191中。
ROM 192存储用于系统启动的命令集等。当输入打开命令以供电时，主CPU 194基于存储在ROM 192中的命令将存储在存储器150中的O/S复制到RAM 191中，并且运行O/S以启动系统。当启动完成时，主CPU 194通过将存储在存储器150中的各种应用程序复制到RAM191中并运行被复制到RAM 191中的应用程序，来执行各种操作。
图形处理器193通过使用计算单元(未示出)和渲染单元(未示出)生成包括各种对象(诸如项、图像、文本等)的屏幕。计算单元可以是下述组件：该组件通过使用从用户输入单元180接收的控制命令，根据屏幕的布局来计算属性值(诸如坐标值)，以显示对象、形状、尺寸、颜色等。此外，渲染单元可以是基于由计算单元计算的属性值来生成包括对象的各种布局的屏幕的组件。可以在显示单元130的显示区域内显示由渲染单元生成的屏幕。
主CPU 194访问存储器150以通过使用存储在存储器150中的O/S来启动系统。此外，主CPU 194通过使用存储在存储器150中的各种程序、内容、数据等执行各种操作。
第一至第n接口195-1至195-n连接到上述各种组件。第一至第n接口195-1至195-n中的一个可以是通过网络连接到外部设备的网络接口。
例如，响应于绘制草图的输入，处理器190可以被配置为控制显示单元130以显示基于草图找到的图像。此外，响应于编辑找到的草图的输入，处理器190可以被配置为控制显示单元130以显示基于编辑后的图像找到的图像。
图4是示出了服务器21的示例配置的框图。
如图4所示，服务器21可以包括处理器410、通信单元(例如，包括通信电路)420、以及存储器430，通信单元420包括例如用于与用户终端11进行通信的长距离通信模块。存储器430可以包括存储服务器的操作所需的程序和图像的数据库431。
服务器21的处理器410可以被配置为通过运行存储在存储器430中的程序来构建存储图像的数据库431。处理器410可以被配置为通过运行存储在存储器430中的程序而从数据库431获取与从用户终端11接收的草图有关的图像。搜索处理器410期望的图像的功能可以由例如搜索引擎模块执行。
图5是示出了由服务器21构建数据库431的示例过程的流程图。
虽然图4示出了服务器21包括数据库431，但是根据另一示例，如果服务器21被包括在云(未示出)中，则数据库431可以被包括在云的另一服务器中。此外，数据库431的一部分可以被包括在第一服务器中，并且数据库431的另一部分可以被包括在第二服务器中。
参考图5，处理器410可以被配置为在步骤501中获取图像。例如，处理器410可以被配置为使用图像搜索工具在因特网上自动获取图像，并且将所获取的图像存储在数据库431中。处理器410可以被配置为获取人手动注册的图像，并且将所获取的图像存储在数据库431中。
处理器410可以被配置为在步骤503中从所获取的图像中提取轮廓(outline)。例如，处理器410可以被配置为使用所提取的轮廓来生成用作搜索关键字的矢量信息。矢量信息可以例如是要和与用户绘制的草图有关的信息进行比较的比较目标。例如，处理器410可以被配置为将矢量信息和草图信息进行比较以确定它们之间的相似度。
在生成矢量信息的示例方法中，处理器410可以被配置为将与所获取的图像的轮廓对应的像素转换为黑色，并且将未包括在轮廓中的像素转换为白色。例如，由处理器410确定图像的轮廓的方法可以包括人手动进行输入的方法、使用自动化算法的方法、以及同时使用这两种方法的方法。
人手动进行输入的方法可以是人通过直接绘制与图像的特征对应的轮廓来进行输入的方法。例如，该方法可以是参照由服务器21提供的图像由人直接绘制轮廓的方法。
使用自动化算法的方法可以是使用例如坎尼(Canny)边缘检测器来提取图像的轮廓的方法。例如，Canny边缘检测器可以通过对图像应用高斯模糊效果来消除噪声，并且通过应用梯度算子来确定图像强度差异和方向。接下来，Canny边缘检测器可以通过对图像应用边缘细化(edge thinning)而沿着具有最大梯度的部分提取图像的轮廓。
可以在本领域技术人员要实现的范围内使用提取图像轮廓的其它方法，并且在本公开中将省略其详细描述。
当图像的轮廓不完整时，处理器410可以被配置为自动改变轮廓的粗细(thickness)或连接分开的轮廓。
处理器410可以被配置为在步骤505中将至少一条属性信息映射到图像的至少一部分。处理器410可以被配置为将至少一条属性信息映射到所提取的轮廓的至少一部分。
在这种情况下，可以在步骤503之前执行步骤505，或者可以同时执行步骤505和503。
处理器410可以被配置为将至少一条属性信息映射到图像的整体或部分。处理器410可以被配置为将至少一条属性信息映射到所提取的轮廓的整体或部分。属性信息可以是例如情绪信息、气味信息、颜色信息、材料信息、天气信息、温度信息、触摸信息、声音信息和大气信息中的至少一个，但不限于此。
例如，人可以直接将属性信息映射到图像或图像的部分，或者处理器410可以被配置为自动映射属性信息。例如，处理器410可以被配置为通过使用关于图像的标签信息来自动映射属性信息。
例如，标签信息可以对应于在生成图像时或在生成图像之后由人或设备生成的信息。例如，标签信息可以是与图像有关的各种附加信息，诸如图像的标题、生成图像时的日期、生成图像的位置、对图像的评论、对图像的评价、图像的生成者、图像的推荐者、以及关于生成图像的设备的信息等。
处理器410可以被配置为在步骤507中对图像进行分类并且将分类的图像存储在数据库431中。处理器410可以被配置为基于关于图像的标签信息、关于图像的属性信息和图像的相似度来对图像进行分类。
处理器410可以被配置为基于图像的轮廓对具有相似轮廓的图像进行分类，但是也可以被配置为基于关于图像的标签信息和关于图像的属性信息对图像进行分类。此外，处理器410可以被配置为基于获取图像时的图像的相关周围信息(例如，获取图像的位置、获取图像所沿的路径等)来对图像进行分类。
在图像被分类在数据库431中的状态下，服务器21可以从用户终端11获取与草图有关的信息。例如，当获取与鞋形草图有关的信息时，服务器21可以基于与草图有关的信息，从数据库431获取具有与草图相同或相似的轮廓的图像作为搜索结果。
当基于与草图有关的信息确定由用户绘制的草图是鞋子时，即使草图的形状可能不同，服务器21也可以从数据库431获取被分类为鞋子的图像。
处理器410可以被配置为正常使用从图像提取的轮廓作为搜索关键字，但是也可以被配置为使用关于图像的属性信息或关于图像的标签信息作为附加搜索关键字。如上所述，通过使用各种类型的搜索关键字，可以提高搜索的准确性，并且用户可以接收各种搜索结果。
图6是示出了服务器21搜索并获取用户期望的图像的示例过程的流程图。
参考图6，服务器21可以在步骤601中从用户终端11获取与用户绘制的草图有关的信息。与绘制的草图有关的信息可以是例如通过以特定格式压缩绘制的数据而生成的数据。
服务器210可以在步骤603中基于与草图有关的信息来获取与草图相同或相似的图像作为第一搜索结果。
例如，服务器21可以基于获取的与草图有关的信息，从数据库431搜索具有与草图相似的轮廓的至少一个图像。由服务器21测量绘制的草图与存储在数据库431中的图像的轮廓之间的相似度的方法可以使用例如倒角(Chamfer)匹配算法、利用豪斯多夫(Hausdorff)距离的算法、利用希尔伯特(Hilbert)扫描距离的算法等。在本领域技术人员要实现的范围内可以已知测量或确定相似度的其它方法，并且在本公开中将省略其详细描述。
服务器21可以从存储在数据库431中的图像中选择包括与草图具有高相似度的轮廓的图像作为相似度的测量的结果，并且依次获取具有较高相似度的预定数目的图像作为步骤603中的第一搜索结果。
当草图和图像的轮廓之间的相似度值在预定范围内时，服务器21可以将该范围内的图像确定为第一搜索结果。例如，当使用倒角匹配算法时，可以计算草图和图像之间的边缘点方向的倒角得分。此时，随着草图和图像的轮廓之间的相似度更高，倒角得分值可以具有更接近“0”的值。在这种情况下，可以将包括在预定范围内的具有接近“0”的倒角得分的图像确定为第一搜索结果。
与第一搜索结果对应的图像可以是轮廓被加亮(highlight)的图像，例如，仅具有轮廓的图像、或其轮廓的粗细或颜色被改变的图像。对应于第一搜索结果的图像可以是包括具有颜色的表面的图像、或包括加亮的颜色和着色的表面的图像。
服务器21可以在步骤605中从用户终端11获取关于与第一搜索结果对应的图像的编辑的信息。关于与第一搜索结果对应的图像的编辑的信息可以是例如通过以特定格式压缩编辑后的图像而生成的数据。
当关于第一搜索结果的信息保留在服务器21中时，编辑信息对应于关于图像的编辑信息，并且可以是例如下述项中的至少一个：关于图像的至少一部分的编辑颜色信息、关于图像的轮廓的变化的信息(例如，变化的位置、轮廓的粗细、轮廓的颜色等)和关于图像的移动信息(例如，图像的移动距离、移动后的图像的坐标等)。
服务器21可以获取与编辑后的图像的至少一部分有关的属性信息。属性信息可以是例如情绪信息、气味信息、材料信息、天气信息、温度信息、颜色信息、触摸信息、声音信息和大气信息中的至少一个。
在步骤607中，服务器21可以基于与编辑后的图像有关的信息，获取与编辑后的图像相同或相似的图像作为第二搜索结果。
例如，服务器21可以从数据库431获取与编辑后的图像具有高相似度的图像作为第二搜索结果。服务器21可以从数据库431获取包括与编辑后的图像的轮廓具有高相似度的轮廓的图像作为第二搜索结果。服务器21可以从包括与绘制的草图具有高相似度的轮廓的图像中，获取特定属性信息被映射到的图像，作为第二搜索结果。
服务器21可以从作为第一搜索结果获取的图像中获取与第二搜索结果对应的图像，或者在数据库431中再次执行搜索以获取图像。
服务器21的处理器410可以被配置为使用搜索结果来更新数据库431。服务器21可以在用户绘制草图并获取期望的搜索结果的过程期间，基于从用户终端11接收的信息来更新关于与搜索结果有关的图像的信息。
例如，用户可以输入与草图有关的一条或多条属性信息。服务器21可以基于与草图有关的信息将一条或多条属性信息映射到找到的图像，并且将映射的信息存储在数据库431中。
用户可以输入与编辑后的图像有关的一条或多条属性信息。服务器21可以基于与编辑后的图像有关的信息将一条或多条属性信息映射到找到的图像，并且将映射的信息存储在数据库431中。
图7A至图7C是示出了用户终端11显示找到的图像的示例过程的图。
参考图7A的附图标记710，用户输入单元180可以接收使用手指或输入工具(例如，触控笔、鼠标、数字转换器等，参见，例如图2)在显示单元130上绘制草图711的用户输入。例如，草图可以通过应用各种颜色、粗细或效果(例如，铅笔效果、刷子(brush)效果、标记笔(marker)效果等)来执行。
在另一示例中，用户可以在显示单元130上显示的图像的背景上绘制草图。例如，用户可以通过拍摄题材(subject)或使用文本关键字在显示单元130上显示期望的图像作为背景。当显示图像时，用户可以在显示的图像上绘制草图。当草图完成时，用户可以移除显示的图像，并且只留下绘制的草图。
在另一示例中，用户可以绘制显示在显示单元130上的图像的草图作为底稿。例如，处理器190可以被配置为控制显示单元130仅显示所显示的图像的轮廓。在这种情况下，用户输入单元180可以接收在所显示的轮廓的背景上绘制草图的用户输入。例如，使用底稿绘制草图的用户输入可以是下述用户输入：删除底稿的一部分、延伸部分、添加草图、增大或减小底稿的尺寸、改变底稿的至少一部分的位置、增大或减小底稿的至少一部分的粗细、改变底稿的至少一部分的曲率、旋转底稿、或将底稿对称地镜像。
响应于用户输入，用户终端11的处理器190可以被配置为接收与绘制的草图711有关的第一输入信息。所接收的第一输入信息可以是，例如与绘图迹线有关的坐标值、绘图速度、绘图压力、绘图截面(section)、绘图时间、绘制的草图的图像、改变的底稿图像等。
如图7A的附图标记720所表示的，处理器190可以被配置为控制显示单元130以显示基于绘制的草图711找到的一个或多个图像721和722作为第一搜索结果。
例如，处理器190可以被配置为响应于由用户绘制草图711并选择搜索按钮(未示出)的用户输入，控制显示单元130以显示一个或多个找到的图像721和722作为第一搜索结果。当基于预定循环(例如，5秒至10秒)或基于用户绘制草图时的绘图变化(例如，绘图的暂时停止、绘图的停止等)生成事件时，处理器190可以被配置为控制显示单元130以自动显示一个或多个找到的图像721和722作为第一搜索结果。自动显示第一搜索结果的循环可以例如由用户通过单独提供的菜单来配置。
处理器190可以被配置为通过通信单元140将与绘制的草图711有关的信息发送到服务器21以获取第一搜索结果。
与绘制的草图711有关的信息可以是例如通过以特定格式压缩绘制的草图711而生成的数据。
服务器21可以使用与接收到的草图711有关的信息来搜索与接收到的草图711等同或相似的图像。例如，服务器21可以搜索具有与接收到的草图711相同或相似的轮廓的图像。服务器21可以将找到的图像发送到用户终端11。
当通过通信单元140获取由服务器21搜索的图像时，处理器190可以被配置为控制显示单元130显示所获取的图像中的至少一个。处理器190可以被配置为从存储器150获取与绘制的草图711相同或相似的至少一个图像。处理器190可以被配置为从连接到用户终端11的用于进行通信的第三方的用户终端12获取与绘制的草图711相同或相似的至少一个图像。
当作为第一搜索结果的找到的图像的数目是多个时，可以以各种形式(诸如，列表形式、磁贴(tile)形式、幻灯片形式、封面流(cover flow)形式等)显示找到的图像。图像可以被分类为相似的图像并且被布置在分开的区域中，或者可以被显示为以文件夹划分。
关于图像，可以仅显示轮廓，可以加亮图像的轮廓，或者可以分开显示图像和轮廓。
找到的图像可以例如包括具有与草绘的图像的形状不同的形状但为相同类型的图像。例如，当确定在服务器21或用户终端11中绘制的草图具有鞋子形状时，服务器21可以从数据库431获取被分类为鞋子的一个或多个候选图像，并且将所获取的候选图像发送到用户终端11。当通过通信单元140从服务器21获取候选图像时，处理器190可以被配置为控制显示单元130以显示候选图像。
用户输入单元180可以接收在作为第一搜索结果显示的一个或多个图像721和722之间选择一个图像722的用户输入。
根据另一示例，当作为第一搜索结果显示的图像的数目是多个时，用户输入单元180可以接收选择多个图像的用户输入。
响应于用户输入，处理器190可以被配置为控制显示单元130以显示所选择的图像722，如图7B的附图标记730所示。
根据另一示例，当所选择的图像的数目是多个时，处理器190可以被配置为控制显示单元130以将多个选择的图像一起显示。例如，处理器190可以被配置为控制显示单元130以显示通过组合多个选择的图像而生成的一个图像。例如，处理器190可以被配置为控制显示单元130以显示多个选择的图像之间的共同特征。例如，当多个选择的图像中的第一图像和第二图像都包括第一对象(例如，鞋子等)时，处理器190可以被配置为控制显示单元130以显示第一对象。处理器190可以被配置为控制显示单元130以重叠地显示多个选择的图像的轮廓。
用户输入单元190可以接收选择图像722的部分722-1的用户输入。
响应于用户输入，处理器190可以被配置为控制显示单元130以显示用于选择图像722的一些属性的菜单741，如图7B的附图标记740所示。在菜单741中，与材料(例如，皮革材料、泡沫材料、金属材料等)有关的各种类型的属性信息中的至少一个可被显示作为可由用户选择的属性信息。接下来，用户输入单元190可以接收在属性信息中选择一条属性信息741-1的用户输入。
响应于用户输入，处理器190可以被配置为通过将选择的属性信息741-1应用到图像的部分722-1来控制显示单元130以显示编辑后的图像751，如图7C中的附图标记750所示。例如，处理器190可以被配置为控制显示器130以用皮革材料显示图像的该部分。将所选择的属性信息741-1应用到编辑后的图像可以包括例如在包括图像722的层上叠加(overlay)应用所选择的属性信息741-1的层。
可以将用户将属性信息应用于图像的部分722-1的过程重复多次。例如，响应于多次将相同或不同的属性信息顺序地应用于图像的部分的用户输入，处理器190可以被配置为通过将属性信息应用于图像的部分来控制显示单元130以显示编辑后的图像。
如图7C的附图标记760所示，处理器190可以被配置为控制显示单元130以显示基于编辑后的图像751额外找到的图像761作为第二搜索结果。例如，处理器190可以被配置为响应于由用户编辑图像并选择搜索按钮(未示出)的用户输入来控制显示单元130以显示额外找到的图像761作为第二搜索结果。处理器190可以被配置为一旦显示了编辑后的图像751，则控制显示单元130自动显示额外找到的图像761作为第二搜索结果而无需用户的附加输入。
处理器190可以被配置为通过通信单元140将与编辑后的图像751有关的信息发送到服务器21，以获取第二搜索结果。
与编辑后的图像751有关的信息可以是通过以特定格式压缩编辑后的图像751而生成的图像数据。
当与第二搜索结果有关的信息保留在服务器21中时，处理器190可以被配置为通过通信单元140将应用于编辑后的图像751的属性信息发送到服务器21。
服务器21可以通过使用与编辑后的图像751有关的信息和应用于编辑后的图像751的属性信息中的至少一个来在数据库431中搜索与编辑后的图像等同或相似的图像。服务器21可以向用户终端11发送找到的图像。
当通过通信单元140获取由服务器21搜索的图像时，处理器190可以被配置为控制显示单元130以显示所获取的图像中的至少一个。处理器190可以被配置为从存储器150获取与编辑后的图像751相同或相似的至少一个图像。处理器190可以被配置为从连接到用户终端11的用于进行通信的第三方的用户终端12获取与编辑后的图像751相同或相似的至少一个图像。
当作为第二搜索结果找到的图像的数目是多个时，可以例如以各种形式(诸如，列表形式、磁贴形式、幻灯片形式等)显示找到的图像。图像可以分类为相似的图像并且被布置在分开的区域中，或者可以被显示为包括在分开的文件夹中。
关于图像，可以仅显示轮廓，可以加亮图像的轮廓，或者可以分开显示图像和轮廓。
找到的图像可以包括具有与草绘的图像的形状不同的形状但为相同类型的图像。
如上所述，通过绘制的草图搜索图像并通过使用属性信息编辑找到的图像，用户可以快速且准确地找到要搜索的图像。当用户将属性信息应用于图像的至少一部分以编辑图像时，可以将显示基于编辑后的图像找到的图像的过程重复多次。例如，用户可以重复编辑图像直到找到用户期望的图像，并且连续地接收基于编辑后的图像额外找到的图像。
在搜索期望图像的过程期间，用户可以提取找到的图像的轮廓并且基于提取的轮廓执行附加草绘。例如，可以显示用于接收选择找到的图像的轮廓的用户输入的UI元素，并且可以响应于提取UI元素的用户输入来显示找到的图像的轮廓。
图8A和图8B是示出了用户终端11显示找到的图像的示例过程的图。
参考图8A的附图标记810，用户输入单元180可以接收通过使用手指或输入工具在显示单元130上绘制草图811的用户输入。用户可以在作为基础的显示在显示单元130上的图像上绘制草图。
如图8A的附图标记820所示，处理器190可以被配置为控制显示单元130以显示用于确定草图811的属性的属性信息。显示的属性信息可以包括与温度或天气(例如，温暖、热、干燥、凉爽、冷等)有关的图标。
用户输入单元180可以接收在属性信息中选择一条属性信息821的用户输入。
响应于用户输入，处理器190可以被配置为控制显示单元130以显示基于绘制的草图811和所选择的属性信息821找到的图像831，如图8B的附图标记830所示。例如，处理器190可以被配置为响应于选择搜索按钮(未示出)的用户输入来控制显示单元130以显示找到的图像831。处理器190可以被配置为响应于选择属性信息821的用户输入来控制显示单元130以自动显示找到的图像831。
处理器190可以被配置为通过通信单元140将与绘制的草图811和所选择的属性信息821有关的信息发送到服务器21，以获取第二搜索结果。服务器21可以使用与所接收的草图811和所选择的属性信息821有关的信息来搜索与所接收的草图811相同或相似的且所选择的属性信息821被映射到的图像。此外，服务器21可以将找到的图像发送到用户终端11。
当通过通信单元140获取由服务器21找到的图像时，处理器190可以被配置为控制显示单元130以显示所获取的图像。处理器190可以被配置为从存储器150获取与绘制的草图相同或相似的图像。处理器190可以被配置为从连接到用户终端11的用于进行通信的第三方的用户终端12获取与绘制的草图相同或相似的图像。
如上所述，通过绘制的草图和与绘制的草图有关的属性信息搜索图像，用户可以快速且准确地找到要搜索的图像。用户搜索图像的过程可以重复多次。例如，用户可以在作为基于绘制的草图和属性信息找到的图像的基础或底稿上额外绘制草图，或者添加新的属性信息。用户可以通过重复该过程来接收期望的图像。
图9A至图9C是示出了用户终端11显示找到的图像的示例过程的图。
参考图9A的附图标记910，用户输入单元180可以接收通过使用手指或输入工具在显示单元130上绘制三维对象的草图911的用户输入。
响应于用户输入，处理器190可以被配置为控制显示单元130以显示基于绘制的三维对象的草图找到的三维图像921作为第一搜索结果，如图9A的附图标记920所示。三维图像可以是具有基于X、Y和Z轴映射的特征点的图像。
用户输入单元180可以接收提取找到的三维图像921的轮廓的用户输入。用户输入可以是选择轮廓提取UI元素922的用户输入。
响应于用户输入，处理器190可以被配置为控制显示单元130以显示三维图像的轮廓931，如图9B的附图标记930所示。
用户输入单元180可以接收转换三维图像的轮廓931的用户输入。
响应于用户输入，处理器190可以被配置为控制显示单元130以在旋转三维图像的同时显示该三维图像的轮廓931，如图9B的附图标记940所示。
如图9C的附图标记950所示，处理器190可以被配置为控制显示单元130以显示基于转换后的三维图像的轮廓931额外找到的图像951作为第二搜索结果。例如，处理器190可以被配置为：响应于在显示了三维图像的轮廓931的状态下选择搜索按钮(未示出)的用户输入来控制显示单元130以显示额外找到的图像951作为第二搜索结果。一旦三维图像的轮廓被转换，处理器190可被配置为控制显示单元130以自动显示额外找到的图像作为第二搜索结果而无需用户的附加输入。
图10A至图10C是示出了用户终端11显示找到的图像的示例过程的图。
参考图10A的附图标记1010，用户输入单元180可以接收通过使用手指或输入工具在显示单元130上绘制草图1011的用户输入。
响应于用户输入，处理器190可以被配置为控制显示单元130以显示基于绘制的草图1011找到的一个或多个图像1021和1022作为第一搜索结果，如图10A的附图标记1020所示。用户输入单元180可以接收在作为第一搜索结果显示的一个或多个图像1021和1022之间选择一个图像1022的用户输入。
响应于用户输入，处理器190可以被配置为控制显示单元130以显示所选图像的轮廓1031，如图10B的附图标记1030所示。用户输入单元180可以接收改变作为第一搜索结果显示的图像的轮廓1031的用户输入。
响应于用户输入，处理器190可以被配置为控制显示单元130以显示具有改变的轮廓的图像1041，如图10B的附图标记1040所示。
改变图像的轮廓可以包括，例如，删除轮廓的至少一部分、延伸轮廓的至少一部分、添加另一轮廓、增大或减小轮廓的尺寸、或者改变轮廓的至少一部分的位置。改变图像的轮廓可以包括，例如，增大或减小轮廓的粗细、或改变轮廓的曲率。例如，当关于由用户选择的轮廓生成非均匀有理B样条(Non-Uniform Rational B-Spline,NURBS)曲线时，可以通过用NURBS曲线的控制点的运动替换在用户选择的位置处的运动来执行改变轮廓的曲率的方法。
如图10C的附图标记1050所示，处理器190可以被配置为控制显示单元130以显示基于编辑后的图像额外找到的图像1051作为第二搜索结果。例如，处理器190可以被配置为响应于由用户编辑图像并选择搜索按钮(未示出)的用户输入，控制显示单元130以显示额外找到的图像1051作为第二搜索结果。一旦图像被编辑，处理器190可被配置为控制显示单元130以自动显示额外找到的图像1051作为第二搜索结果而无需用户的附加输入。
图11A至图11C是示出了与图像的至少一部分有关的示例属性信息的图。
参考图11A的附图标记1110，属性信息例如可以是与温度有关的信息。与温度有关的信息可以是，例如，对应于热、温暖、舒适、凉爽、冷的属性信息、以及属性信息之间的预定值。例如，用户可以绘制草图并且通过触摸拖拽温度计图标的温度控制UI元素1111直到与一条属性信息对应的范围来选择该条属性信息。
基于选择属性信息的用户输入，处理器190可以被配置为控制显示单元130以显示基于所选择的与温度有关的属性信息而找到的图像。
在另一示例中，参考图11A的附图标记1120，属性信息例如可以是与音量有关的信息。与音量有关的信息可以是例如对应于孤寂(desolate)、沉默、舒服、不悦(offensive)、嘈杂的属性信息、以及属性信息之间的预定值。例如，用户可以绘制草图并且通过触摸拖拽音量控制UI元素1121直到与一条属性信息对应的范围来选择该条属性信息。
基于选择属性信息的用户输入，处理器190可以被配置为控制显示单元130以显示基于所选择的与音量有关的属性信息而找到的图像。
在另一示例中，参考图11B的附图标记1130，属性信息例如可以是与亮度有关的信息。与亮度有关的信息可以是例如对应于极暗、暗、微暗、明亮、耀眼的属性信息、以及属性信息之间的预定值。例如，用户可以绘制草图并且通过触摸拖拽亮度控制UI元素1131直到对应于一条属性信息的范围来选择该条属性信息。
基于选择属性信息的用户输入，处理器190可以控制显示单元130以显示基于所选择的与亮度有关的属性信息而找到的图像。
在另一示例中，参考图11B的附图标记1140，属性信息例如可以是与污染水平有关的信息。与污染水平有关的信息可以是例如对应于污浊(murky)、干净的属性信息、以及属性信息之间的预定值。例如，用户可以绘制草图并且通过触摸拖拽污染水平控制UI元素1141直到与一条属性信息对应的范围来选择该条属性信息。
基于选择属性信息的用户输入，处理器190可以被配置为控制显示单元130以显示基于所选择的与污染水平有关的属性信息而找到的图像。
在另一示例中，参考图11C的附图标记1150，属性信息例如可以是与情绪有关的信息。与情绪有关的属性信息可以是例如与喜悦、愉快、愤怒、失望等有关的属性信息。例如，用户可以绘制草图并且选择与一条属性信息对应的图标1151。
基于选择属性信息的用户输入，处理器190可以被配置为控制显示单元130以显示基于与所选择的图标有关的属性信息而找到的图像。
此外，属性信息还可以包括，例如，气味信息、颜色信息、材料信息、纹理信息、天气信息、温度信息、声音信息和大气信息，但不限于此。
属性信息可以应用于由用户绘制的草图或找到的图像的整体或部分。可以将多条属性信息一起应用于绘制的草图或找到的图像的整体或部分。多个属性信息可以是不同类型的属性信息。例如，可以将情绪信息和材料信息一起应用于绘制的草图的部分。
用户可以通过直接输入基于文本的关键字来确定属性信息。当以调色板(palette)或模板的形式提供多条属性信息时，用户可以选择该多条属性信息中的一条。
如上所述，当与绘制的草图或找到的图像有关的属性信息被一起使用时，用户可以更快速地找到期望的图像。
图12A和图12B是示出了示例绘制的草图的图。
参考图12A，处理器190可以被配置为控制显示单元130以显示用户绘制的草图。例如，响应于选择提供草图历史的UI元素的用户输入，处理器190可以被配置为控制显示单元130以显示用户绘制的草图。可以以各种形式显示绘制的草图，诸如，列表形式、磁贴形式、幻灯片形式、封面流形式等，但不限于此。
例如，可以根据绘制时间顺序、使用绘制的草图找到的图像的名称顺序、书签顺序等来排列绘制的草图。
用户输入单元180可以接收在绘制的草图中选择一个草图1121的用户输入。
参考图12B，响应于用户输入，处理器190可以被配置为控制显示单元130以显示通过搜索与所选择的草图有关的图像而生成的搜索历史。例如，在搜索历史中，可以显示由用户绘制的第一草图1121、基于绘制的草图找到的作为第一搜索结果的第一图像1222、由用户编辑的第一图像1223、以及基于编辑后的图像找到的作为第二搜索结果的第二图像1224。
例如，用户可以选择第一草图1121、第一图像1222、编辑后的第一图像1223和第二图像1224中的一个，并且通过使用所选择的草图或图像作为基础或底稿来绘制草图、或搜索与所选择的草图或图像有关的图像。
图13是示出了示例找到的图像的图。
参考图13，处理器190可以被配置为控制显示单元130以显示绘制的草图1311和基于绘制的草图找到的图像1312中的至少一个。
处理器190可以被配置为控制显示单元130以显示找到的图像的源1313、以及表示该图像的关键字1314中的至少一个。例如，用户可以识别找到的图像是否是用户期望基于图像的源1313或关键字1314搜索的图像，并且额外通过使用图像的源1313或关键字1314来搜索另一图像。
处理器190可以被配置为控制显示单元130以显示指示绘制的草图与找到的图像之间的相似度水平的图形1315。
例如，当使用上述相似度算法确定绘制的草图与找到的图像之间的相似度时，处理器190可以被配置为：在相似度较高时，控制显示单元130以在图形1315中显示较大数目的加亮的星星；以及在相似度较低时，控制显示单元130以在图形1315中显示较小数目的加亮的星星。
处理器190可以被配置为控制显示单元130以显示相似度评估UI元素1316，通过该相似度评估UI元素1316，用户可以直接评估绘制的草图与找到的图像之间的相似度。例如，当用户通过相似度评估UI元素1316选择绘制的草图与找到的图像之间的相似度时，可以将选择结果发送到服务器21，并且稍后在用户或另一用户搜索与绘制的草图等同或相似的图像时使用该选择结果。
图14是示出了在用户终端11中显示图像的示例方法的流程图。
参考图14，在步骤1401中，用户终端11可以接收与用户绘制的草图有关的第一输入信息。
在步骤1403中，响应于接收到的第一输入信息，用户终端11可以获取并显示与草图相同或相似的图像作为第一搜索结果。用户终端11可以加亮并显示与草图等同或相似的图像的轮廓。加亮并显示图像的轮廓可以包括使图像的表面的颜色透明或与背景颜色相同，以仅使得图像的轮廓被显示。
在步骤1405中，用户终端11可以接收用于编辑作为第一搜索结果的找到的图像的第二输入信息。
在步骤1407中，用户终端11可以响应于接收到的第二输入信息来编辑和显示图像。例如，用户终端11可以对找到的图像的至少一部分应用属性信息，并且显示应用了属性信息的图像。例如，属性信息可以是，例如情绪信息、气味信息、天气信息、温度信息、材料信息、颜色信息、触摸信息、声音信息和大气信息中的至少一个。用户终端11可以改变找到的图像的轮廓的至少一部分并且显示具有改变的轮廓的图像。
在步骤1409中，用户终端11可以获取并显示与编辑后的图像等同或相似的图像作为第二搜索结果。
图15是示出了在用户终端11中显示图像的示例方法的流程图。
参考图15，在步骤1501中，用户终端11可以显示用作草图的底稿或基础的图像。
在步骤1503中，用户终端11可以基于显示的底稿或基础接收与绘制的草图有关的第一输入信息。
在步骤1505中，响应于接收到的第一输入信息，用户终端11可以获取并显示与草图相同或相似的多个图像作为第一搜索结果。例如，用户终端11可以向服务器21发送与草图有关的信息，从服务器21获取与草图等同或相似的多个图像作为第一搜索结果，并显示所获取的图像。
在步骤1507中，用户终端11可以接收用于编辑多个图像中的一个的第二输入信息。例如，用户终端11可以选择多个图像中的一个并且接收用户的用于编辑一个所选择的图像的第二输入信息。
在步骤1509中，用户终端11可以响应于接收到的第二输入信息来编辑并显示一个所选择的图像。
在步骤1511中，用户终端11可以获取并显示与编辑后的图像相同或相似的图像作为第二搜索结果。
图16是示出了用户终端11的示例配置的框图。
参考图16，用户终端11可以包括处理器190、显示单元130、用户输入单元180和存储器150。由于上面已经描述了用户终端11的每个组件的示例，所以将省略其重叠的描述。
在图16中，处理器190可以被配置为响应于通过用户输入单元180接收的第一输入信息，从服务器21获取与用户绘制的草图相同或相似的图像作为第一搜索结果。处理器190可以被配置为控制显示单元130以显示与第一搜索结果对应的图像。
处理器190可以被配置为：响应于在显示了与第一搜索结果对应的图像的状态下通过用户输入单元180接收的第二输入信息，控制显示单元130以显示通过编辑与第一搜索结果对应的图像而生成的图像。
处理器190可以被配置为从服务器21获取与编辑后的图像相同或相似的图像作为第二搜索结果。处理器190可以被配置为控制显示单元130以显示与第二搜索结果对应的图像。
根据各种示例的装置(例如，用户终端11或服务器21)或方法(例如，操作)可以由例如至少一个计算机(例如，处理器190或处理器410)执行，该至少一个计算机运行保存在计算机可读存储介质中的至少一个程序中所包括的指令。
当指令由计算机(例如，处理器190或处理器410)运行时，至少一个计算机可以执行与指令对应的功能。计算机可读存储介质可以是例如存储器150或存储器430。
程序可以包括在计算机可读存储介质中，诸如硬盘、软盘、磁介质(例如，磁带)、光介质(例如，致密盘只读存储器(CD-ROM)和数字多功能盘(DVD))、磁光介质(例如，光磁软盘)、硬件设备(例如，只读存储器(ROM)、随机存取存储器(RAM)、快闪存储器)等。例如，存储介质通常可以被包括作为用户终端11或服务器21的配置的一部分、通过用户终端11或服务器21的端口被安装、或者包括在位于用户终端11或服务器21外部的外部设备(例如，云、服务器或另一电子设备)中。此外，程序可以可分割地存储在多个存储介质中，并且此时，多个存储介质中的至少一些可以位于用户终端11或服务器21外部的外部设备中。
此外，程序指令可以包括可通过使用解释器在计算机中运行的高级语言代码以及由编译器产生的机器代码。上述硬件设备可以被配置为作为一个或多个软件模块进行操作以便执行本公开的操作，反之亦然。
虽然已经示出和描述了本公开的示例实施例，但是应当理解本公开不限于此。将显见的是，在不脱离由所附权利要求限定的本公开的范围的情况下本领域技术人员可以做出各种修改和改变，并且这些修改和改变不应与本公开的技术想法或观点分开地理解。

Claims (15)

1.一种由用户终端显示图像的方法，包括：
接收基于用户在所述用户终端上绘制的草图的第一输入信息；
响应于所述第一输入信息，获取并且显示与所述草图相同或相似的图像作为第一搜索结果；
接收用于编辑基于所述第一搜索结果的所获取的图像的第二输入信息；
响应于所述第二输入信息，在所述用户终端上编辑并且显示所获取的图像；以及
获取并显示与编辑后的图像相同或相似的图像作为第二搜索结果。
2.如权利要求1所述的方法，其中，编辑并且显示所获取的图像包括：将属性信息应用于所获取的图像的至少一部分并且在所述用户终端上显示图像。
3.如权利要求1所述的方法，其中，编辑并且显示所获取的图像包括：改变所获取的图像的轮廓的至少一部分并且在所述用户终端上显示改变后的图像。
4.如权利要求1所述的方法，还包括：在接收到所述第一输入信息之前，在所述用户终端上显示能够作为所述草图的底稿或基础的图像。
5.如权利要求1所述的方法，还包括：当所显示的图像包含作为第一搜索结果的多个图像时，接收用于从所述多个图像中选择要编辑的至少一个图像的第三输入信息。
6.如权利要求2所述的方法，其中，所述属性信息对应于情绪信息、气味信息、材料信息、颜色信息、触摸信息、声音信息、天气信息、温度信息和大气信息中的至少一个。
7.如权利要求1所述的方法，其中，获取并且显示与编辑后的图像相同或相似的图像作为第二搜索结果包括：从与所述用户终端进行通信的外部服务器获取与编辑后的图像相同或相似的图像，并且在所述用户终端上显示所获取的图像作为第二搜索结果。
8.一种由服务器提供图像的方法，包括：
从用户终端获取与草图有关的信息；
基于与草图有关的信息，获取与所述草图相同或相似的图像作为第一搜索结果；
向所述用户终端发送与所述第一搜索结果对应的图像；
从所述用户终端获取图像的编辑信息；
基于所述编辑信息，获取与编辑后的图像相同或相似的图像作为第二搜索结果；以及
向所述用户终端发送与所述第二搜索结果对应的图像。
9.一种用于显示图像的用户终端，所述用户终端包括：
输入电路，被配置为接收用户输入；
显示器，被配置为显示图像；
存储器，被配置为存储一个或多个程序；以及
处理器，被配置为运行包括在所述存储器的一个或多个程序中的指令，使得：响应于通过所述输入电路接收的与草图有关的第一输入信息，获取与所述草图相同或相似的图像作为第一搜索结果，并且将所获取的图像显示在所述显示器上，响应于用于编辑所获取的图像的第二输入信息，编辑基于所述第一搜索结果的所获取的图像，并且将编辑后的图像显示在所述显示单元上，以及获取并且显示与编辑后的图像相同或相似的图像作为第二搜索结果。
10.如权利要求9所述的用户终端，其中，当所获取的图像被编辑并且显示在所述显示器上时，所述处理器被配置为运行指令以将属性信息应用于所获取的图像的至少一部分并且显示应用所述属性的图像，
其中所述属性信息对应于情绪信息、气味信息、材料信息、颜色信息、触摸信息、声音信息、天气信息、温度信息和大气信息中的至少一个。
11.如权利要求9所述的用户终端，其中，当所获取的图像被编辑并且显示在所述显示器上时，所述处理器被配置为运行指令以改变所获取的图像的轮廓的至少一部分并且显示改变后的所获取的图像。
12.如权利要求9所述的用户终端，其中，当在所述显示器上显示与草图相同或相似的图像时，所述处理器被配置为运行指令以加亮与草图相同或相似的图像的轮廓并且显示加亮的图像。
13.如权利要求9所述的用户终端，其中，所述处理器被配置为运行指令以显示用作所述草图的底稿或基础的图像。
14.如权利要求9所述的用户终端，其中，当与编辑后的图像相同或相似的图像被获取作为第二搜索结果并且被显示在所述显示器上时，所述处理器被配置为运行指令，使得从与所述用户终端进行通信的外部服务器获取与编辑后的图像相同或相似的图像，并且显示所获取的图像作为第二搜索结果。
15.一种用于提供图像的服务器，所述服务器包括：
通信电路，被配置为与用户终端进行通信；
存储器，被配置为存储一个或多个程序；以及
处理器，被配置为运行存储在所述存储器的所述一个或多个程序中的指令，使得：基于通过所述通信电路从所述用户终端获取的与草图有关的信息来获取与所述草图相同或相似的图像作为第一搜索结果，并且向所述用户终端发送所获取的图像，基于从所述用户终端获取的图像的编辑信息获取与编辑后的图像相同或相似的图像作为第二搜索结果，并且向所述用户终端发送所获取的编辑后的图像。
CN201680005363.1A 2015-01-09 2016-01-08 用于显示图像的用户终端及其图像显示方法 Pending CN107209631A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR1020150003318A KR102285699B1 (ko) 2015-01-09 2015-01-09 이미지를 디스플레이하는 사용자 단말기 및 이의 이미지 디스플레이 방법
KR10-2015-0003318 2015-01-09
PCT/KR2016/000194 WO2016111584A1 (en) 2015-01-09 2016-01-08 User terminal for displaying image and image display method thereof

Publications (1)

Publication Number Publication Date
CN107209631A true CN107209631A (zh) 2017-09-26

Family

ID=56356196

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680005363.1A Pending CN107209631A (zh) 2015-01-09 2016-01-08 用于显示图像的用户终端及其图像显示方法

Country Status (4)

Country Link
US (1) US20160203194A1 (zh)
KR (1) KR102285699B1 (zh)
CN (1) CN107209631A (zh)
WO (1) WO2016111584A1 (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108829844A (zh) * 2018-06-20 2018-11-16 聚好看科技股份有限公司 一种信息搜索方法及系统
CN110110117A (zh) * 2017-12-20 2019-08-09 阿里巴巴集团控股有限公司 一种商品搜索方法、装置以及系统
CN110675468A (zh) * 2018-07-02 2020-01-10 韩国电子通信研究院 自动穿草用信息提供装置及其提供方法
WO2020019683A1 (zh) * 2018-07-25 2020-01-30 北京搜狗科技发展有限公司 一种输入方法、装置和电子设备
CN111949814A (zh) * 2020-06-24 2020-11-17 百度在线网络技术（北京）有限公司 搜索方法、装置、电子设备和存储介质
CN112106042A (zh) * 2018-05-29 2020-12-18 三星电子株式会社 电子设备及其控制方法
CN112269522A (zh) * 2020-10-27 2021-01-26 维沃移动通信（杭州）有限公司 图像处理方法、装置、电子设备和可读存储介质

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9967408B2 (en) * 2015-03-26 2018-05-08 Canon Kabushiki Kaisha Information setting apparatus, information management apparatus, information generation apparatus, and method and program for controlling the same
US10866984B2 (en) * 2015-08-03 2020-12-15 Orand S.A. Sketch-based image searching system using cell-orientation histograms and outline extraction based on medium-level features
CN106095324A (zh) * 2016-08-03 2016-11-09 深圳市金立通信设备有限公司 一种交互界面显示方法及终端
KR102652362B1 (ko) 2017-01-23 2024-03-29 삼성전자주식회사 전자 장치 및 전자 장치 제어 방법
KR102444148B1 (ko) * 2017-04-17 2022-09-19 삼성전자주식회사 전자 장치 및 그 동작 방법
US10380175B2 (en) * 2017-06-06 2019-08-13 International Business Machines Corporation Sketch-based image retrieval using feedback and hierarchies
CN109389660A (zh) * 2018-09-28 2019-02-26 百度在线网络技术（北京）有限公司 图像生成方法和装置
US20200192932A1 (en) * 2018-12-13 2020-06-18 Sap Se On-demand variable feature extraction in database environments
KR102247662B1 (ko) * 2021-01-29 2021-05-03 주식회사 아이코드랩 만화의 스케치 이미지를 자동으로 채색하기 위한 장치 및 방법

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1378159A (zh) * 2001-03-26 2002-11-06 Lg电子株式会社 图像搜索方法和装置
US20050108282A1 (en) * 2003-11-13 2005-05-19 Iq Biometrix System and method of searching for image data in a storage medium
CN101004748A (zh) * 2006-10-27 2007-07-25 北京航空航天大学 基于二维草图的三维模型检索方法
CN101859226A (zh) * 2009-04-08 2010-10-13 Lg电子株式会社 在移动终端中输入命令的方法和使用该方法的移动终端
CN102339306A (zh) * 2010-08-31 2012-02-01 微软公司 基于草图的图像搜索
CN102663794A (zh) * 2012-03-29 2012-09-12 清华大学 图像合成方法及装置

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001266052A (ja) * 2000-03-15 2001-09-28 Ricoh Co Ltd 情報の構造化及びアプリケーション生成の方法及び装置
US8582802B2 (en) * 2009-10-09 2013-11-12 Edgenet, Inc. Automatic method to generate product attributes based solely on product images
US8589410B2 (en) * 2011-10-18 2013-11-19 Microsoft Corporation Visual search using multiple visual input modalities

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1378159A (zh) * 2001-03-26 2002-11-06 Lg电子株式会社 图像搜索方法和装置
US20050108282A1 (en) * 2003-11-13 2005-05-19 Iq Biometrix System and method of searching for image data in a storage medium
CN101004748A (zh) * 2006-10-27 2007-07-25 北京航空航天大学 基于二维草图的三维模型检索方法
CN101859226A (zh) * 2009-04-08 2010-10-13 Lg电子株式会社 在移动终端中输入命令的方法和使用该方法的移动终端
CN102339306A (zh) * 2010-08-31 2012-02-01 微软公司 基于草图的图像搜索
CN102663794A (zh) * 2012-03-29 2012-09-12 清华大学 图像合成方法及装置

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110110117A (zh) * 2017-12-20 2019-08-09 阿里巴巴集团控股有限公司 一种商品搜索方法、装置以及系统
CN112106042A (zh) * 2018-05-29 2020-12-18 三星电子株式会社 电子设备及其控制方法
CN108829844A (zh) * 2018-06-20 2018-11-16 聚好看科技股份有限公司 一种信息搜索方法及系统
CN108829844B (zh) * 2018-06-20 2022-11-11 聚好看科技股份有限公司 一种信息搜索方法及系统
CN110675468A (zh) * 2018-07-02 2020-01-10 韩国电子通信研究院 自动穿草用信息提供装置及其提供方法
WO2020019683A1 (zh) * 2018-07-25 2020-01-30 北京搜狗科技发展有限公司 一种输入方法、装置和电子设备
CN111949814A (zh) * 2020-06-24 2020-11-17 百度在线网络技术（北京）有限公司 搜索方法、装置、电子设备和存储介质
CN112269522A (zh) * 2020-10-27 2021-01-26 维沃移动通信（杭州）有限公司 图像处理方法、装置、电子设备和可读存储介质

Also Published As

Publication number Publication date
KR20160086090A (ko) 2016-07-19
WO2016111584A1 (en) 2016-07-14
US20160203194A1 (en) 2016-07-14
KR102285699B1 (ko) 2021-08-04

Similar Documents

Publication Publication Date Title
CN107209631A (zh) 用于显示图像的用户终端及其图像显示方法
TWI539303B (zh) 用以標記多個數位影像之系統及方法
CN104423803B (zh) 用于基于内容提供信息的方法及其电子设备
CN103729160B (zh) 多显示设备和多显示方法
CN104104768B (zh) 通过使用呼叫方电话号码来提供附加信息的装置和方法
CN104471564B (zh) 在将数据变换成可消费内容时创建变型
EP3183640B1 (en) Device and method of providing handwritten content in the same
CN108139778A (zh) 便携式设备和便携式设备的屏幕显示方法
RU2703956C1 (ru) Способ управления мультимедийными файлами, электронное устройство и графический пользовательский интерфейс
US20110246939A1 (en) Information Processing Method and Graphical User Interface
CN105164714A (zh) 用户终端装置及其控制方法
CN105378728B (zh) 用于表示和操纵元数据的装置和方法
CN110333758A (zh) 用于控制多个对象的显示的方法及其移动终端
US8744178B2 (en) Information processing apparatus, information processing method and program
CN102667701A (zh) 在触摸屏用户接口上修改命令的方法
KR20170039379A (ko) 전자 장치 및 이의 제어 방법
CN107710137A (zh) 用于显示键区的电子设备及其键区显示方法
CN106796485A (zh) 移动终端及其控制方法
US20150067615A1 (en) Method, apparatus, and recording medium for scrapping content
CN107111441A (zh) 多级用户界面
US20120250934A1 (en) Information processing apparatus, playlist creation method, and playlist creation program
CN107766517A (zh) 一种图像数据的获取方法、装置及移动终端
US20150019961A1 (en) Portable terminal and method for controlling data merging
CN107133361A (zh) 手势识别方法、装置和终端设备
CN108141474B (zh) 与外部设备共享内容的电子设备及其用于共享内容的方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20170926