WO2011037409A2 - 단말기에 의하여 실행되는 가상 공간 인터페이스 제어 방법 - Google Patents

단말기에 의하여 실행되는 가상 공간 인터페이스 제어 방법 Download PDF

Info

Publication number
WO2011037409A2
WO2011037409A2 PCT/KR2010/006504 KR2010006504W WO2011037409A2 WO 2011037409 A2 WO2011037409 A2 WO 2011037409A2 KR 2010006504 W KR2010006504 W KR 2010006504W WO 2011037409 A2 WO2011037409 A2 WO 2011037409A2
Authority
WO
WIPO (PCT)
Prior art keywords
content
virtual space
space
layer
terminal
Prior art date
Application number
PCT/KR2010/006504
Other languages
English (en)
French (fr)
Other versions
WO2011037409A3 (ko
Inventor
천혜경
Original Assignee
Chun Hea-Kyung
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chun Hea-Kyung filed Critical Chun Hea-Kyung
Priority claimed from KR1020100092541A external-priority patent/KR20110033078A/ko
Publication of WO2011037409A2 publication Critical patent/WO2011037409A2/ko
Publication of WO2011037409A3 publication Critical patent/WO2011037409A3/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object

Definitions

  • the disclosed technology relates to a virtual space interface control method, and more particularly, to a virtual space interface control method executed in a portable terminal.
  • Cyber space is a virtual space created by a computer, which is not restricted by time and space in a place irrespective of a user's physical location and is interconnected through a computer and / or an information communication network. Include space. For example, all activities on the Internet (eg, conversations, shopping, searching, using content) can take place in cyberspace. Meanwhile, the user may access the cyber space and perform various activities by using the interface between the user and the computer. For example, the interface may provide the user with a virtual space to overcome the physical limitations of the display of the terminal in visually representing the cyber space.
  • the virtual space interface control method executed by the terminal executes a virtual space manager for managing a virtual space including at least one content to display at least a portion of the virtual space and detect movement, wherein the detected As the movement moves, the virtual space manager controls the virtual space.
  • the virtual space may include a discrete space
  • the virtual space manager may check the presence of content on a coordinate corresponding to the detected movement, and on the coordinate If the content exists, the content can be displayed. If there is no content on the corresponding coordinates, the nearest content can be identified. If there is only one content, the at least one content can be displayed based on the content. For example, when two or more of the most adjacent contents are present, at least the corresponding contents may be displayed based on the contents having the highest priority among the contents. As another example, when two or more of the closest contents are present, the screen size may be controlled to display all of the contents, and at least the contents may be displayed based on the contents.
  • the virtual space may include a hierarchical layer structure, and the virtual space manager may move from the current layer to a higher or lower layer when the detected movement is a forward movement. If the moved movement is backward movement, it can move from the current layer to the lower or upper layer. For example, if the current layer is the highest layer, it stops moving the layer and informs that the current layer is the highest layer. If the current layer is the lowest layer, it stops moving the layer and the current layer is the lowest layer. You can inform. As another example, if the current layer is the highest layer, it may move to the lowest layer, and if the current layer is the lowest layer, it may move to the highest layer.
  • the virtual space may include a content collection space
  • the virtual space manager may move or copy at least one selected content corresponding to the detected movement to the content collection space. For example, when the moving or copying of the at least one selected content is completed, the currently displayed space may be changed to the content collection space and displayed. As another example, when the space moved corresponding to the detected movement is the content collection space, the at least one selected content may be displayed.
  • the content and / or object to be added to the virtual space can be downloaded, the virtual space manager can change the space to be displayed according to the detected movement, and the downloaded space is downloaded to the changed space.
  • the virtual space manager may execute content on the virtual space, overlap the virtual space according to the detected movement, and display at least one content, wherein the at least one overlapped
  • the execution of the current content may be paused, stopped and / or stopped, and the selected content may be executed.
  • FIG. 1 is a block diagram illustrating a system for providing a virtual space interface according to an embodiment of the disclosed technology.
  • FIG. 2 is a block diagram illustrating a terminal of FIG. 1.
  • FIG. 3 is a graph illustrating an operation of the signal processor of FIG. 1.
  • FIG. 4 is a flowchart illustrating a virtual space interface control method executed by a terminal according to an embodiment of the disclosed technology.
  • 5 to 7 are flowcharts illustrating one specific embodiment of FIG. 4.
  • FIG. 8 through 11 illustrate a method of selecting content in a virtual space having a multilayer structure according to an embodiment of the disclosed technology.
  • FIGS. 8 to 11 are views for explaining an example in which a specific function is selected by FIGS. 8 to 11.
  • 13 through 19 are diagrams illustrating that discrete spaces are displayed in one embodiment of the disclosed technology.
  • 26-27 illustrate a method of placing additional configurations in a continuous space in one embodiment of the disclosed technology.
  • FIG. 28 is a diagram illustrating a method of selecting another content while one content is executed in an embodiment of the disclosed technology.
  • first and second are intended to distinguish one component from another component, and the scope of rights should not be limited by these terms.
  • first component may be named a second component, and similarly, the second component may also be named a first component.
  • first item, second item and / or third item means two or more of the first, second or third individual items as well as the first, second or third item. Refers to any combination of items that can be presented from
  • an identification code (e.g., a, b, c, ...) is used for convenience of description, and the identification code does not describe the order of the steps, and each step is clearly in a specific order. Unless stated otherwise, it may occur out of the stated order. That is, each step may occur in the same order as specified, may be performed substantially simultaneously, or may be performed in the reverse order.
  • FIG. 1 is a block diagram illustrating a system for providing a virtual space interface according to an embodiment of the disclosed technology.
  • a system 100 for executing hardware that implements a virtual space and / or for executing content that implements a virtual space includes a content providing server 110 and / or a terminal 120.
  • the virtual space may include continuous space, discrete space and / or authentication space.
  • the virtual space may include a two-dimensional plane and a three-dimensional solid space, and the continuous space may be provided in a form as shown in FIG. 20, and the discrete space may be divided into spaces to select specific functions. It may be provided in the form as shown in FIG.
  • the virtual space may include a plurality of layers. For example, after moving the terminal 120 to a position corresponding to the icon “1306” of FIG.
  • the authentication space may include a space for publishing information by authentication of a user.
  • the authentication space may include a private authentication space of an individual and an authentication space shared by a certain group.
  • the content providing server 110 may be connected to the terminal 120 through a wireless or wired communication network, and may store content that is an element constituting the virtual space or constituting the virtual space, that is, content implementing at least part of the virtual space. Can be.
  • the content providing server 110 and the terminal 120 may transmit specific content and / or data bidirectionally between the providing server 110 and the terminal 120 by mutual requests. For example, content and / or data with small data size can be transmitted with only one connection.
  • the content and / or data in which the size of the data is large or in need of updating in real time may continuously transmit the content and / or data by interworking with the content providing server 110 and the terminal 120.
  • the terminal 120 may be connected to the content providing server 110 through a wireless or wired communication network, and may be equipped with a hardware configuration and / or software module or program capable of processing a function related to a virtual space.
  • the terminal 120 may include any device capable of visual display such as a smart phone, a cellular phone, a digital camera, an MP3 player, a portable media player (PMP), a head mounted display (HMD), and the like.
  • the terminal 120 may transmit and / or receive data directly and / or directly through the content providing server 110 and another terminal 125 connected to the same virtual space.
  • FIG. 2 is a block diagram illustrating a terminal of FIG. 1.
  • the terminal 120 includes a content storage unit 210, a hardware / content execution input unit 220, a movement detection sensor 230, a signal processing unit 240, a control unit 250, and a display unit 260. , A notification unit 270, an authentication unit 280, and a data communication unit 290.
  • the content storage unit 210 stores a content that is an element constituting or configuring the virtual space.
  • the virtual space may include continuous space and / or discrete space.
  • the continuous space may be configured in the shape of a plane or a sphere centered on the terminal 120.
  • the continuous space may be composed of a three-dimensional space.
  • the three-dimensional space may include a space represented by three-dimensional coordinates.
  • the three-dimensional space may be repeatedly configured a layer having two-dimensional coordinates.
  • the virtual space may include an authentication space.
  • the authentication space may include information for protecting personal privacy.
  • the authentication space may include a shared space that only a specific group of users can share.
  • the content storage unit 210 may be connected to the controller 250, the display unit 260, and / or the signal processor 240 to process data.
  • the controller 250, the display unit 260, and / or the signal processor 240 may be organically associated with each other to process data. Can be.
  • the hardware / content execution input unit 220 receives the execution of hardware and / or execution of content which is an element constituting the virtual space or constituting the virtual space.
  • the hardware / content execution input unit 220 selects an execution button (not shown) configured in the terminal 120 and / or a specific movement of the terminal 120 (eg, repeats three times from side to side). Based on the execution of the hardware and / or whether the content can be input.
  • the hardware / content execution input unit 220 is for preventing the screen of the virtual space from being changed or the hardware and / or the contents being operated according to the movement of the terminal 120 even when the movement of the virtual space is not desired. In other words, the execution of hardware and / or the execution of content can be turned on or off.
  • the hardware / content execution input unit 220 may include a button having a mechanical or optical configuration or an icon implemented on a touch screen.
  • the button or icon may include a virtual space on / off function, a zoom in / out function of a screen, content selection and execution / execution of content, and selection / lock / release function of information.
  • various functions may be set based on an operation including a number of touches, a touch duration, and a drag by a user.
  • the movement sensor 230 provides a movement distance and a movement direction of the terminal 120 when the movement of the terminal 120 occurs.
  • the movement detection sensor 230 when the movement detection sensor 230 is a digital sensor, it may provide quantized digital data. In another embodiment, when the movement detection sensor 230 is an analog sensor, it may provide a continuous signal.
  • the movement detection sensor 230 may include an acceleration sensor, an angular velocity sensor (gyroscope), a geomagnetic sensor, and / or a pressure sensor.
  • the moving distance and the moving direction of the terminal 120 may be provided based on a signal sensed by the aforementioned sensor or sensors.
  • the signal sensed by the movement detecting sensor 230 may be processed and provided to the controller 250 according to the requirements of those skilled in the art.
  • processing of the sensed signal may include amplification, attenuation, filtering, extraction, mixing and / or approximation.
  • the signal processor 240 may filter the movement distance and the movement direction of the terminal 120 provided by the movement detection sensor 230, and further amplify, attenuate, extract, mix, and / or approximate the signal according to the needs of those skilled in the art. Can be done. In one embodiment, the signal processor 240 controls the movement distance and / or the movement direction when the movement distance and / or the movement direction provided by the movement detection sensor 230 is greater than the minimum recognition distance and / or the minimum recognition direction. If it is transmitted to 250 and the provided moving distance and / or the moving direction is smaller than the minimum recognition distance and / or the minimum recognition direction, the corresponding moving distance and / or the moving direction may be deleted.
  • the signal processor 240 of the disclosed technology may remove or correct a part of a detection signal detected by the movement detection sensor 230 in a specific external environment. For example, when a user who rides in a vehicle moves the terminal 120, the amount of change in acceleration is small but the change continuously occurs (for example, when driving at a stable speed on a highway) or when it is too large. You can filter the signal (for example, if you stop and drive repeatedly in downtown). As another example, when the user riding the train moves the terminal 120, the acceleration component for the direction corresponding to the traveling direction of the train may be filtered.
  • the user may move the virtual space by moving the terminal 120 up, down, left, and right while viewing the traveling direction of the train.
  • the detection signal processing method according to the surrounding environment can be variously modified according to the needs of those skilled in the art, and according to the surrounding environment, the user selects the contents recommended by the terminal 120 or the terminal 120 automatically reflects the surrounding environment. Can be handled with
  • the controller 250 determines at least a part of the virtual space based on the provided moving distance and the moving direction. In one embodiment, when at least some of the virtual space is located in the discrete space, the controller 250 may determine that the determined at least some virtual space corresponds to one of the adjacent discrete virtual spaces.
  • the display unit 260 may display at least a portion of the virtual space determined by the controller 250.
  • the display unit 260 may include an LCD panel (Liquid Crystal Display Panel), an LED panel (Light Emitting Diode Panel), a touch screen panel, a 3D panel (Three-Dimensional Panel), and / or a hologram ( Hologram) may include a visual representation in the display device, such as a display device.
  • the notification unit 270 may visually, audibly, and / or tactilely display whether hardware is executed and / or content is executed.
  • the notification unit 270 may be visually output to a portion of the display unit 260 and / or directly to a portion of the display unit 260 through the control unit 250.
  • the notification unit 270 may correspond to a display unit (e.g., a display unit) corresponding to a coordinate value, a moving distance, a moving direction (for example, an arrow), a color change, and / or a sharpness that distinguishes the virtual space.
  • 260 may be output.
  • the notification unit 270 may directly control the operation of the speaker or vibration generating element and / or control the operation of the speaker or vibration generating element through the control unit 250.
  • the terminal 120 may be vibrated by outputting a specific sound (audible function) and / or by operating a vibration generating element (tactile function) through a speaker.
  • the notification unit 270 changes the frequency and vibration of the output sound and / or vibration generating element to start, stop, running, moving speed, moving direction, re-execution and / or the like of the hardware and / or content Can be informed.
  • the authenticator 280 may perform authentication of a user. In one embodiment, when the authentication space is included in at least a portion of the virtual space, when the terminal 120 moves to the corresponding authentication space, the control unit 250 undergoes user authentication through the authentication unit 280, and then The authentication space can be displayed. The authenticator 280 may improve security of a specific area of the virtual space.
  • the data communication unit 290 may communicate with another terminal 125 that shares the virtual space.
  • the control unit 250 communicates with the terminal 125 through the data communication unit 290, and displays the information of the terminal 125 And display at 260.
  • the information of the terminal 125 may include a location in the virtual space and / or an activity state in the virtual space.
  • the actions performed through the virtual space may be transmitted to the content providing server 110 and / or the other terminal 125 through the data communication unit 290 to share data with each other.
  • FIG. 2 data transmission and control between the components are indicated by arrows, but the directionality is according to one embodiment, and various modifications may be made without departing from the basic concept according to the needs of those skilled in the art.
  • content that is an element constituting or constituting a virtual space stored in the content storage unit 210 is transmitted to the signal processor 240 and the movement of the terminal 120 processed by the signal processor 240. After the distance and the moving direction are applied to the controller 250 may be provided.
  • the controller 250 may transmit the data to be transmitted to the other terminal 125 to the data communication unit 290 so that the data communication unit 290 may transmit the corresponding data to the other terminal 125. Therefore, the disclosed technology is not limited to the configuration shown in Figure 2 and the connection between each configuration, of course.
  • FIG. 3 is a graph illustrating a filtering operation of the signal processor 240 of FIG. 1.
  • A1 and “A2” represent the size (distance) of the area adjacent to the "X” axis direction
  • "Sen_X” is a signal for detecting the distance that the terminal 120 is moved in the "X” direction.
  • A1 is the starting boundary position of the area “A1”
  • a2 is the starting boundary position of the area "A2”
  • m1" and “m2” are the minimum recognition distances at the boundary position.
  • the terminal 120 when the terminal 120 is located at the start boundary position of the area “A1,” when the micro movement due to the shaking of the user is detected (section “T1”), the corresponding signal is transmitted to the signal processor 240. Can be filtered by When the terminal 120 moves to the area "A1”, the virtual space of the area may be displayed (section "T2"). At this time, in the state where the terminal 120 is located at the start boundary position of the area "A2", even if the micro movement due to the shaking of the user is detected, the terminal 120 may display the virtual space of the area "A1".
  • the terminal 120 may move to the area "A2" due to a temporary mistake by the user (sections "T3" and "T4"). In this case, the virtual space of the "A2" area should not be displayed.
  • the signal processor 240 of the terminal 120 does not transmit information to the controller 250 so as not to move the virtual space when the time moved to another area is shorter than the set time (section “T3”). If longer than the set time (section "T4"), the information may be transmitted to the controller 250 to move the virtual space.
  • FIG. 4 is a flowchart illustrating a virtual space interface control method executed by a terminal according to an embodiment of the disclosed technology.
  • a virtual space manager for managing a virtual space including at least one content is executed (step S410).
  • the virtual space manager provides functionality related to virtual space, including movement of the virtual space, selection of content, movement and copying of content, and / or execution of content and display of results in response to movement of the terminal 120. Can be done.
  • the virtual space manager may correspond to or be included in the controller 250 of FIG. 2.
  • the virtual space manager displays at least a portion of the virtual space (step S420). For example, in the virtual space that is initially displayed, a position set as reference coordinates may always be displayed. As another example, the last position of the virtual space previously performed may be displayed.
  • the virtual space manager detects the movement of the terminal 120 (step S430).
  • the virtual space manager may detect the movement of the terminal 120 based on the signal transmitted from the signal processor 240 of FIG. 2.
  • the virtual space manager controls the virtual space according to the detected movement (step S440).
  • the control of the virtual space may include control of a function performed on the virtual space.
  • functionality performed in the virtual space may include embodiments to be described below.
  • various modifications may be made according to the needs of those skilled in the art without departing from the features of the disclosed technology.
  • 5 to 7 are flowcharts illustrating one specific embodiment of FIG. 4.
  • the virtual space manager may display at least one content or an icon for executing the content in response to the movement of the terminal 120.
  • the virtual space manager may check whether content exists in the display area (step S502).
  • the virtual space manager may select and display the corresponding content (step S504), where the selection of the content does not mean the execution of the content, but selects the content to be displayed. I mean.
  • the virtual space manager may check the area adjacent to the corresponding area to check the nearest content (step S505). If there is only one identified closest content (step S506), the virtual space manager may select the corresponding content (step S504).
  • the virtual space manager may check the display method (step S507).
  • the virtual space manager may select a content having a higher priority among two or more contents (step S509).
  • the priority may be set corresponding to the number of executions. In another embodiment, the priority may be set by the user.
  • the virtual space manager may control the size so that all the contents may be displayed based on the contents (step S510). In one embodiment, the virtual space manager may change the virtual space and / or the display such that at least all of the contents are displayed based on the contents.
  • the virtual space manager may display the selected content (step S511).
  • the virtual space includes a discrete space of a hierarchical layer structure, and the virtual space manager may select and execute content included in the discrete space of the hierarchical layer structure. .
  • the virtual space manager may display a portion of a specific layer (step S602).
  • the particular layer may include a layer located at the top of the plurality of layers.
  • the virtual space manager may check the movement of the terminal (step S603), and if the movement is a movement in the up, down, left, and right directions (step S604), the virtual space manager may display the corresponding area in the current layer (step S605).
  • the virtual space manager may display a part of another layer when the movement is a movement back and forth (step S604) (step S606).
  • the virtual space manager when moving forward, may move from the current layer to the upper or lower layer.
  • the virtual space manager when moving backward, may move from the current layer to the lower or upper layer. For example, if the current layer is the top layer, you can stop moving the layer and notify the user that the current layer is the top layer. If the current layer is the bottom layer, stop the movement of the layer, and the current layer is the lowest. You can notify the user that it is a layer. As another example, if the current layer is the highest layer, it may move to the lowest layer, and if the current layer is the lowest layer, it may move to the highest layer.
  • the virtual space manager may execute the corresponding content (step S608).
  • the virtual space manager may move or copy at least one content selected by a user to a content collection space.
  • the virtual space manager may display a portion of a specific layer (step S702).
  • the virtual space manager checks the movement of the terminal (step S703), and if the movement is a movement in the up, down, left, and right directions (step S704), the virtual space manager may display the corresponding area on the current layer (step S705), and the virtual space manager If the movement is a movement forward and backward (step S704), a part of another layer can be displayed (step S706).
  • the virtual space manager can copy or move the selected content to the content collection space (step S708).
  • the corresponding content may be copied into the content collection space.
  • the corresponding content may move to the content collection space.
  • the user may repeat steps S703 to S709 to copy or move desired contents to the content collection space (step S709).
  • the content collection space may include content that the user frequently uses.
  • FIG. 8 through 11 illustrate a method of selecting content in a virtual space having a multilayer structure according to an embodiment of the disclosed technology.
  • the objects displayed on the screen 801 of the terminal 120 may be configured in a hierarchical structure, and each layer may be differentiated and displayed.
  • This hierarchical structure has an advantage of easy selection and management of information.
  • the virtual space may include an upper layer 810 and a lower layer 820, and the upper layer 810 may include different contents 811 to 819, and the lower layer 820 Even if the same.
  • the screen 810 is moved to the left as shown in FIG. 9.
  • the second content 812 located at may be displayed.
  • the fifth content 825 of the lower layer 820 located behind the fifth content 815 of the upper layer 810 is displayed on the screen 810. Can be.
  • FIGS. 8 to 11 are views for explaining an example in which a specific function is selected by FIGS. 8 to 11.
  • the terminal 800 may be “backed” in order for the user to sequentially select “phone book”, “a”, “old book win”, “010-1231-5678”, and “call”. ",” Back, “back”, “right”, “back”, “back” can be moved to "old” and "call”.
  • the movement of the terminal 800 is not limited to movement to one side, but may be changed to reciprocating movement. For example, the movement of "backward” may be changed to "move backward and forward again.”
  • 13 through 19 are diagrams illustrating that discrete spaces are displayed in one embodiment of the disclosed technology.
  • the entire image 1200 corresponding to the discrete space may include a plurality of icons 1301 to 1309.
  • each icon may correspond to at least one of the functions performed in the terminal 800.
  • the icon is displayed on the screen 801 of the terminal 800.
  • FIG. 14 when the position of the screen 801 of the terminal 800 that is moved by the user to select the icon of “1301” is not correct, the icon 1301 closest to the movement position of the terminal 800 is shown. Can be selected.
  • reference numerals "d1", “d2", “d3”, and “d4" denote distances from the center coordinates of the screen 801 of the terminal 800 to the center coordinates of the icons 1301, 1302, 1304, and 1305. It may include.
  • a position corresponding to the moving distance and the moving direction of the terminal 800 may be calculated based on at least a portion of the displayed virtual space, and the nearest virtual space from the calculated position. At least another portion of the.
  • the calculation of the coordinates may be calculated based on the reference coordinates.
  • the reference coordinate may be set by the user.
  • the icons 1301 to 1309 may be displayed on the screen based on a two-dimensional plane or a three-dimensional three-dimensional space / plane grid that represents the resolution of the discrete space.
  • the screen display according to the movement of 800 may also be displayed based on the basic unit of the plane / space grid.
  • the unit and shape of the plane / spatial grid may be set by the user.
  • the icons 1301, 1302, 1304, and 1305 are located.
  • One of the icons 1305 may be selected.
  • another part of the other parts having a relatively high priority may be selected.
  • the other portions among the other portions may be selected and displayed with a relatively high number of executions and / or displays.
  • the icons 1301 and 1302 are reduced while the virtual space is reduced.
  • 1304, 1305 may be displayed on the screen 801.
  • the distances from the adjacent icons 1301, 1302, 1304, and 1305 are not limited to the same case, and may be determined to be the same if they are determined to be the same within an error range.
  • the error range may include a case in which one length does not differ by more than 10% with respect to one length.
  • the content collection space 1700 may be configured as an independent space separate from the virtual space. For example, it may be included in a layer separate from the virtual space.
  • the content collection space 1700 may collect icons (eg, dining table, chair, furniture, etc.) for decorating the space, and may be displayed overlapped on the virtual space.
  • the content collected in the content collection space 1700 may be equally applied to a function input under user control. For example, all content collected in the content collection space 1700 may be moved or copied.
  • the same word may be searched by the user.
  • the size of the content collection space 1700 and the number of layers for each layer may be changed under user control.
  • the content collection space may be generated by a simple movement of the terminal 800.
  • Icons 1301, 1305, and 1309 that are grouped in 1700 may be selected and / or executed. In other words, it is possible to eliminate the hassle of having to navigate through different layers in order to find each icon, thereby providing convenience in use.
  • the process performed in the virtual space (for example, movement of an icon) and the result information may be stored. If necessary, the stored information can be restored to its previous state under the control of the user.
  • the icon 1305 displayed on the screen 801 and the icons 1301 and 1309 adjacent thereto may be managed in an execution state and an execution off state.
  • the entire image 2000 corresponding to the continuous space may be planar or spherical.
  • a part 2120 of the entire image 2000 may be displayed on the screen 801 of the terminal 800, corresponding to the movement of the terminal 800.
  • the continuous space may be displayed on the screen 801.
  • reference numeral 2110 denotes a virtual mode notification icon and may be displayed as shown in FIG. 22 when the virtual mode is executed.
  • the screen 810 of the terminal 800 displays detailed information 2311 to 2315 in addition to any object information initially shown by moving the terminal 800 forward or backward, or is connected to any object information. You can go to and display its contents.
  • the screen of FIG. 21, which is a virtual space may be enlarged or reduced.
  • the terminal 800 includes a move button (not shown) and an enlarge button (not shown), the user moves the screen as shown in FIG. 22 while pressing the move button, and the desired image ( When the terminal 800 is moved forward or backward while the 2220 is displayed as shown in FIG. 22, the corresponding image 2220 may be enlarged or reduced.
  • an enlarged image 2310 is displayed.
  • a cursor or a figure for superimposition may be displayed on the central axis of the screen to indicate a criterion of enlargement or reduction.
  • the image 2220 may be enlarged or reduced by a touch method of a touch screen or an icon menu for a function to be displayed.
  • the enlargement or reduction may be performed by displaying a cursor or a figure for recognition on the central axis of the screen or touching a screen on the central axis of the screen for enlargement or reduction.
  • the above-described information for enlargement or reduction may be equally applied even in a discrete space.
  • the entire image 2000 is rotated in the entire image 2000.
  • a part 2510 may be displayed on the screen 801 of the terminal 800.
  • the user can rotate the terminal 800 to 90 degrees (angle between the terminal's width and length), 180 degrees, 270 degrees, etc., the virtual space is in the aspect ratio of the rotated screen It may be changed to correspond.
  • an image of a corresponding product may be provided from another user or a server or a manufacturer through a communication network, or an image acquired by a terminal may be used. have. Therefore, a more realistic configuration of the virtual space may be possible.
  • 26-27 illustrate a method of placing additional configurations in a continuous space in one embodiment of the disclosed technology.
  • the signs 2610 are to be configured in the image displayed on the terminal 800 as shown in FIG. 26, the object (object) information of the corresponding signs 2610 is received through a communication network, and the received signs 2610 are shown in FIG. 27.
  • the sign 2610 may be positioned at a desired position by enlarging and / or reducing the image displayed on the screen 801 of the terminal 800. Thereafter, when the screen 801 of the terminal 800 is enlarged, the sign 2610 may be configured in the virtual space as shown in FIG. 26.
  • the change of the virtual space may be transmitted to other terminals 125 connected to the same virtual space. Thus, multiple users can add and delete their desired configurations in the same virtual space.
  • FIG. 28 is a diagram illustrating a method of selecting another content while one content is executed in an embodiment of the disclosed technology.
  • the virtual space manager may display a task bar 2810 on the image of the currently displayed virtual space. ) May be displayed to display a plurality of contents 1301 (1305) 1309.
  • the execution of the current content may be paused, stopped and / or stopped and the selected content may be executed.
  • information may be displayed before downloading, multitasking, and / or moving to a virtual space, before new information is displayed, i.e., during pre-transition time or quickly obtained via a communication network.
  • the virtual space may include a continuous space and a discrete space, may constitute a separate authentication space, and may constitute a collection space for collecting content, icons, objects, and the like.
  • various spaces may be additionally configured according to the needs of those skilled in the art. Each of these spaces can be placed in the entire virtual space in various combinations, and the virtual space manager can implement, distinguish and / or distinguish virtual spaces according to the user's needs, and can change and / or modify / complement them at any time.
  • a minimap that can easily grasp the area occupied by each space and the area currently displayed in the entire virtual space can be provided.
  • the disclosed technique can have the following effects. However, since a specific embodiment does not mean to include all of the following effects or only the following effects, it should not be understood that the scope of the disclosed technology is limited by this.
  • the virtual space interface control method executed by the terminal according to an embodiment may efficiently display the virtual space. This is because the virtual space that is changed according to the movement of the terminal can be displayed.
  • the virtual space interface control method executed by the terminal according to an embodiment may provide an anti-shake function. This is because the case where the movement of the terminal is minute does not reflect the movement of the virtual space.
  • the method for controlling a virtual space interface executed by the terminal may be applied to an augmented reality and / or three-dimensional stereoscopic screen.

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Digital Computer Display Output (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

단말기에 의하여 실행되는 가상 공간 인터페이스 제어 방법은 적어도 하나의 콘텐츠를 포함하는 가상 공간을 관리하는 가상 공간 매니저를 실행하여 가상 공간의 적어도 일부를 디스플레이하고 이동을 검출하며, 상기 검출된 이동에 따라 상기 가상 공간 매니저는 상기 가상 공간을 제어한다. 일 실시예에서, 상기 가상 공간은 이산적인 공간(Discrete Space)을 포함할 수 있고, 상기 가상 공간 매니저가 상기 검출된 이동에 상응하는 좌표상에 콘텐츠의 존재여부를 확인할 수 있으며, 해당 좌표상에 콘텐츠가 존재하면 해당 콘텐츠를 디스플레이할 수 있다. 해당 좌표상에 콘텐츠가 존재하지 않으면, 가장 인접한 콘텐츠를 확인할 수 있으며, 상기 가장 인접한 콘텐츠가 하나이면 해당 콘텐츠를 기준으로 하여 적어도 해당 콘텐츠를 디스플레이할 수 있다. 예를 들어, 상기 가장 인접한 콘텐츠가 둘 이상이면 해당 콘텐츠 중 우선순위가 높은 콘텐츠를 기준으로 하여 적어도 해당 콘텐츠를 디스플레이할 수 있다. 다른 예로, 상기 가장 인접한 콘텐츠가 둘 이상이면 해당 콘텐츠들이 모두 디스플레이되도록 화면크기를 제어하고 해당 콘텐츠들을 기준으로 하여 적어도 해당 콘텐츠들을 디스플레이할 수 있다.

Description

단말기에 의하여 실행되는 가상 공간 인터페이스 제어 방법
개시된 기술은 가상 공간 인터페이스 제어 방법에 관한 것으로, 특히 휴대용 단말기에서 실행되는 가상 공간 인터페이스 제어 방법에 관한 것이다.
사이버 공간(Cyber Space)은 컴퓨터에 의하여 만들어진 허상의 공간을 의미하는 것으로, 사용자들의 물리적인 위치와는 상관없는 곳에서 시간과 공간의 제약을 받지 않으며 컴퓨터 및/또는 정보통신망을 통해 상호 연결되어 있는 공간을 포함한다. 예를 들어, 인터넷 상에서 이루어지는 모든 활동(예를 들어, 대화, 쇼핑, 검색, 콘텐츠 이용)이 사이버 공간에서 이루어질 수 있다. 한편, 사용자는 사용자와 컴퓨터 사이의 인터페이스를 이용하여 사이버 공간에 접근하고 다양한 활동을 수행할 수 있다. 예를 들어, 인터페이스는 사이버 공간을 시각적으로 표현하는데 있어서 단말기가 가지는 디스플레이의 물리적인 한계를 극복하기 위해 가상 공간(Virtual Space)을 사용자에게 제공할 수 있다.
실시예들 중에서, 단말기에 의하여 실행되는 가상 공간 인터페이스 제어 방법은 적어도 하나의 콘텐츠를 포함하는 가상 공간을 관리하는 가상 공간 매니저를 실행하여 가상 공간의 적어도 일부를 디스플레이 하고 이동을 검출하며, 상기 검출된 이동에 따라 상기 가상 공간 매니저는 상기 가상 공간을 제어한다.
일 실시예에서, 상기 가상 공간은 이산적인 공간(Discrete Space)을 포함할 수 있고, 상기 가상 공간 매니저가 상기 검출된 이동에 상응하는 좌표상에 콘텐츠의 존재여부를 확인할 수 있으며, 해당 좌표상에 콘텐츠가 존재하면 해당 콘텐츠를 디스플레이할 수 있다. 해당 좌표상에 콘텐츠가 존재하지 않으면, 가장 인접한 콘텐츠를 확인할 수 있으며, 상기 가장 인접한 콘텐츠가 하나이면 해당 콘텐츠를 기준으로하여 적어도 해당 콘텐츠를 디스플레이할 수 있다. 예를 들어, 상기 가장 인접한 콘텐츠가 둘 이상이면 해당 콘텐츠 중 우선순위가 높은 콘텐츠를 기준으로하여 적어도 해당 콘텐츠를 디스플레이할 수 있다. 다른 예로, 상기 가장 인접한 콘텐츠가 둘 이상이면 해당 콘텐츠들이 모두 디스플레이되도록 화면크기를 제어하고 해당 콘텐츠들을 기준으로하여 적어도 해당 콘텐츠들을 디스플레이 할 수 있다.
다른 일 실시예에서, 상기 가상 공간은 계층적 레이어 구조를 포함할 수 있고, 상기 가상 공간 매니저가 상기 검출된 이동이 앞으로의 이동인 경우에는 현재 레이어에서 상위 또는 하위 레이어로 이동할 수 있으며, 상기 검출된 이동이 뒤로의 이동인 경우에는 현재 레이어에서 하위 또는 상위 레이어로 이동할 수 있다. 예를 들어, 현재 레이어가 최상위 레이어인 경우에는 레이어의 이동을 중단하고, 현재 레이어가 최상위 레이어임을 알릴 수 있고, 현재 레이어가 최하위 레이어인 경우에는 레이어의 이동을 중단하고, 현재 레이어가 최하위 레이어임을 알릴 수 있다. 다른 예로, 현재 레이어가 최상위 레이어인 경우에는 최하위 레이어로 이동할 수 있고, 현재 레이어가 최하위 레이어인 경우에는 최상위 레이어로 이동할 수 있다.
또 다른 일 실시예에서, 상기 가상 공간은 콘텐츠 모음 공간을 포함할 수 있고, 상기 가상 공간 매니저가 상기 검출된 이동에 상응하여 선택된 적어도 하나의 콘텐츠를 상기 콘텐츠 모음 공간으로 이동 또는 복사 시킬 수 있다. 예를 들어, 상기 선택된 적어도 하나의 콘텐츠의 이동 또는 복사가 완료되면 현재 디스플레이되는 공간을 상기 콘텐츠 모음 공간으로 변경하여 디스플레이할 수 있다. 다른 예로, 상기 검출된 이동에 상응하여 이동된 공간이 상기 콘텐츠 모음 공간인 경우에 상기 선택된 적어도 하나의 콘텐츠를 디스플레이할 수 있다.
또 다른 일 실시예에서, 가상 공간상에 추가될 콘텐츠 및/또는 오브젝트를 다운로드받을 수 있고, 상기 검출된 이동에 따라 상기 가상 공간 매니저가 디스플레이될 공간을 변경할 수 있으며, 상기 변경된 공간에 상기 다운로드받은 콘텐츠 및/또는 오브젝트를 추가할 수 있다. 예를 들어, 상기 다운로드받은 콘텐츠 및/또는 오브젝트와 매칭되도록 디스플레이될 공간, 콘텐츠 및/또는 오브젝트의 크기, 색상 및/또는 밝기를 변경 할 수 있다.
또 다른 일 실시예에서, 상기 가상 공간 매니저가 상기 가상 공간 상의 콘텐츠를 실행시킬 수 있고, 상기 검출된 이동에 따라 상기 가상 공간에 오버래핑하여 적어도 하나의 콘텐츠를 디스플레이할 수 있으며, 상기 오버래핑된 적어도 하나의 콘텐츠 중 어느 하나가 선택되면, 현재 콘텐츠의 실행을 일시 멈춤, 멈춤 및/또는 중단하고 선택된 콘텐츠를 실행할 수 있다.
도 1은 개시된 기술의 일 실시예에 따른 가상 공간 인터페이스를 제공하는 시스템을 설명하는 구성도이다.
도 2는 도 1의 단말기를 설명하는 블록도이다.
도 3은 도 1의 신호처리부의 동작을 설명하는 그래프이다.
도 4는 개시된 기술의 일 실시예에 따른 단말기에 의하여 실행되는 가상 공간 인터페이스 제어 방법을 설명하는 흐름도이다.
도 5 내지 도 7은 도 4의 구체적인 일 실시예들을 설명하는 순서도이다.
도 8 내지 도 11는 개시된 기술의 일 실시예에 다층 구조의 가상 공간에서 콘텐츠를 선택하는 방법을 설명하는 도면이다.
도 12는 도 8 내지 도 11에 의해 특정 기능이 선택되는 일 예를 설명하는 도면이다.
도 13 내지 도 19는 개시된 기술의 일 실시예에 이산적인 공간이 디스플레이되는 것을 설명하는 도면이다.
도 20 내지 도 25는 개시된 기술의 일 실시예에 연속적인 공간이 디스플레이되는 것을 설명하는 도면이다.
도 26 내지 도 27은 개시된 기술의 일 실시예에 연속적인 공간에 추가적인 구성을 배치하는 방법을 설명하는 도면이다.
도 28은 개시된 기술의 일 실시예에 하나의 콘텐츠가 실행되는 도중에 다른 콘텐츠를 선택하는 방법을 설명하는 도면이다.
개시된 기술에 관한 설명은 구조적 내지 기능적 설명을 위한 실시예에 불과하므로, 개시된 기술의 권리범위는 본문에 설명된 실시예에 의하여 제한되는 것으로 해석되어서는 아니 된다. 즉, 실시예는 다양한 변경이 가능하고 여러 가지 형태를 가질 수 있으므로 개시된 기술의 권리범위는 기술적 사상을 실현할 수 있는 균등물들을 포함하는 것으로 이해되어야 한다.
한편, 본 출원에서 서술되는 용어의 의미는 다음과 같이 이해되어야 할 것이다.
"제1", "제2" 등의 용어는 하나의 구성요소를 다른 구성요소로부터 구별하기 위한 것으로, 이들 용어들에 의해 권리범위가 한정되어서는 아니 된다. 예를 들어, 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다.
"및/또는"의 용어는 하나 이상의 관련 항목으로부터 제시 가능한 모든 조합을 포함하는 것으로 이해되어야 한다. 예를 들어, "제1 항목, 제2 항목 및/또는 제3 항목"의 의미는 제1, 제2 또는 제3의 각 개별 항목뿐만 아니라 제1, 제2 또는 제3 항목들 중 2개 이상으로부터 제시될 수 있는 모든 항목의 조합을 의미한다.
어떤 구성요소가 다른 구성요소에 "연결되어"있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결될 수도 있지만, 중간에 다른 구성요소가 존재할 수 도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다. 한편, 구성요소들 간의 관계를 설명하는 다른 표현들, 즉 "~사이에"와 "바로 ~사이에" 또는 "~에 이웃하는"과 "~에 직접 이웃하는" 등도 마찬가지로 해석되어야 한다.
단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한 복수의 표현을 포함하는 것으로 이해되어야 하고, "포함하다"또는 "가지다" 등의 용어는 설시된 특징, 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
각 단계들에 있어 식별부호(예를 들어, a, b, c, …)는 설명의 편의를 위하여 사용되는 것으로 식별부호는 각 단계들의 순서를 설명하는 것이 아니며, 각 단계들은 문맥상 명백하게 특정 순서를 기재하지 않는 이상 명기된 순서와 다르게 일어날 수 있다. 즉, 각 단계들은 명기된 순서와 동일하게 일어날 수도 있고 실질적으로 동시에 수행될 수도 있으며 반대의 순서대로 수행될 수도 있다.
여기서 사용되는 모든 용어들은 다르게 정의되지 않는 한, 개시된 기술이 속하는 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가진다. 일반적으로 사용되는 사전에 정의되어 있는 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한 이상적이거나 과도하게 형식적인 의미를 지니는 것으로 해석될 수 없다.
도 1은 개시된 기술의 일 실시예에 따른 가상 공간 인터페이스를 제공하는 시스템을 설명하는 구성도이다.
도 1을 참조하면, 가상 공간을 구현하는 하드웨어의 실행 및/또는 가상 공간을 구현한 콘텐츠를 실행하는 시스템(100)은 콘텐츠 제공 서버(110) 및/또는 단말기(120)를 포함한다. 일 실시예에서, 가상 공간은 연속적인 공간(Continuous Space), 이산적인 공간(Discrete Space) 및/또는 인증 공간을 포함할 수 있다. 예를 들어, 가상 공간은 2차원 평면 및 3차원 입체 공간을 포함할 수 있고 연속적인 공간은 도 20과 같은 형태로 제공될 수 있으며, 이산적인 공간은 특정 기능을 선택할 수 있도록 공간을 구분할 수 있고 도 13과 같은 형태로 제공될 수 있다. 또한, 가상 공간은 다수의 계층별 레이어(Layer)를 포함할 수 있다. 예를 들어, 이산적인 공간인 도 13의 아이콘 "1306"에 해당하는 위치로 단말기(120)를 이동시킨 후, 해당 아이콘이 디스플레이된 상태에서 단말기(120)를 앞 또는 뒤로 이동시키면 해당 아이콘의 하부 레이어(예를 들어, 전화번호 목록 리스트)가 디스플레이 될 수 있고, 다시 단말기(120)를 이동시켜 특정 목록을 선택한 후 단말기(120)를 앞 또는 뒤로 이동시키면 해당 목록의 상세정보가 디스플레이 될 수 있다. 인증 공간은 사용자의 인증에 의해 정보를 공개하는 공간을 포함할 수 있다. 예를 들어, 인증 공간은 개인의 사적인 인증 공간과 일정한 그룹이 공유하는 인증공간을 포함할 수 있다.
콘텐츠 제공 서버(110)는 무선 또는 유선 통신망을 통해 단말기(120)와 연결될 수 있으며, 가상 공간을 구현하거나 가상 공간을 구성하고 있는 요소인 콘텐츠, 다시 말해 가상 공간의 적어도 일부를 구현한 콘텐츠를 저장할 수 있다. 일 실시예에서, 콘텐츠 제공 서버(110)와 단말기(120)는 상호 요청에 의해 특정 콘텐츠 및/또는 데이터를 제공 서버(110)와 단말기(120)간에 서로 양방향으로 전송할 수 있다. 예를 들어, 데이터의 크기가 작은 콘텐츠 및/또는 데이터는 한번의 연결만으로 전송할 수 있다. 다른 예로, 데이터의 크기가 크거나 실시간으로 업데이트(Update)가 필요한 콘텐츠 및/또는 데이터는 콘텐츠 제공 서버(110)와 단말기(120)가 상호 연동하여 지속적으로 콘텐츠 및/또는 데이터를 전송할 수 있다.
단말기(120)는 무선 또는 유선 통신망을 통해 콘텐츠 제공 서버(110)와 연결될 수 있으며, 가상 공간에 관련된 기능을 처리할 수 있는 하드웨어 구성 및/또는 소프트웨어 모듈 또는 프로그램을 탑재할 수 있다. 예를 들어, 단말기(120)는 스마트폰, 셀룰러폰, 디지털 카메라, MP3 플레이어, PMP(Portable Media Player), HMD(Head Mounted Display) 등 시각적 디스플레이가 가능한 휴대용 모든 기기를 포함할 수 있다. 일 실시예에서, 단말기(120)는 동일한 가상 공간에 접속된 다른 단말기(125)와 콘텐츠 제공 서버(110)를 통하여 송수신 및/또는 직접 데이터를 송수신할 수 있다.
도 2는 도 1의 단말기를 설명하는 블록도이다.
도 2를 참조하면, 단말기(120)는 콘텐츠 저장부(210), 하드웨어/콘텐츠 실행 입력부(220), 이동 감지 센서(230), 신호처리부(240), 제어부(250), 디스플레이부(260), 알림부(270), 인증부(280) 및 데이터 통신부(290)를 포함한다.
콘텐츠 저장부(210)는 가상 공간을 구현하거나 가상 공간을 구성하고 있는 요소인 콘텐츠를 저장한다. 일 실시예에서, 가상 공간은 연속적인 공간(Continuous Space) 및/또는 이산적인 공간(Discrete Space)을 포함할 수 있다. 예를 들어, 연속된 공간은 평면 또는 단말기(120)를 중심으로 하는 구형태로 구성될 수 있다. 다른 예로, 연속된 공간은 입체 공간으로 구성될 수 있다. 일 실시예에서, 입체 공간은 3차원 좌표로 표현되는 공간을 포함할 수 있다. 다른 일 실시예에서, 입체 공간은 2차원 좌표를 갖는 레이어(Layer)를 반복하여 구성할 수 있다. 일 실시예에서, 가상 공간은 인증 공간을 포함할 수 있다. 예를 들어, 인증 공간은 개인의 사생활 보호를 위한 정보를 포함할 수 있다. 다른 예로, 인증 공간은 특정 그룹의 사용자들만이 공유할 수 있는 공유 공간을 포함할 수 있다. 일 실시예에서, 콘텐츠 저장부(210)는 제어부(250), 디스플레이부(260) 및/또는 신호처리부(240)와 서로 연결되어 데이터를 처리할 수 있다. 예를 들어, 저장된 콘텐츠를 확대, 축소, 회전, 보완 및/또는 수정하여 디스플레이 할 경우 제어부(250), 디스플레이부(260) 및/또는 신호처리부(240)가 서로 유기적으로 연관되어 데이터를 처리 할 수 있다.
하드웨어/콘텐츠 실행 입력부(220)는 하드웨어의 실행 및/또는 가상 공간을 구현하거나 가상 공간을 구성하고 있는 요소인 콘텐츠의 실행여부를 입력받는다. 일 실시예에서, 하드웨어/콘텐츠 실행 입력부(220)는 단말기(120)에 구성된 실행 버튼(도시하지 않음)의 선택 및/또는 단말기(120)의 특정 움직임(예를 들어, 좌우로 3회 반복)에 기초하여 해당 하드웨어의 실행 및/또는 콘텐츠의 실행 여부를 입력 받을 수 있다. 이러한 하드웨어/콘텐츠 실행 입력부(220)는 가상 공간의 이동을 원하지 않는 경우에도 단말기(120)의 움직임에 따라 가상 공간의 화면이 변화되거나 하드웨어 및/또는 콘텐츠가 동작되는 것을 방지하기 위한 것이다. 다시 말해, 하드웨어의 실행 및/또는 콘텐츠의 실행을 온(On) 또는 오프(Off)할 수 있다. 예를 들어, 하드웨어/콘텐츠 실행 입력부(220)는 기계적 또는 광학적 구성을 가진 버튼이나 터치스크린에 구현된 아이콘을 포함할 수 있다. 일 실시예에서, 버튼이나 아이콘은 가상 공간의 온/오프 기능, 화면의 줌 인/아웃 기능, 콘텐츠 선택 및 콘텐츠의 실행/실행 오프 기능, 정보의 선택/잠금/해제 기능을 포함할 수 있다. 예를 들어, 터치스크린에 구현된 아이콘의 경우, 사용자에 의해 터치된 횟수이나 터치 지속 시간, 드래그를 포함하는 동작을 기초로 다양한 기능을 설정할 수 있다.
이동 감지 센서(230)는 단말기(120)의 이동이 발생한 경우 단말기(120)의 이동 거리와 이동 방향을 제공한다. 일 실시예에서, 이동 감지 센서(230)가 디지털 센서인 경우, 양자화된 디지털 데이터를 제공할 수 있다. 다른 일 실시예에서, 이동 감지 센서(230)가 아날로그 센서인 경우 연속적인 신호를 제공할 수 있다. 예를 들어, 이동 감지 센서(230)는 가속도센서, 각속도센서(자이로스코프), 지자기센서, 및/또는 압력센서를 포함할 수 있다. 일 실시예에서, 단말기(120)의 이동 거리와 이동 방향은 앞에서 언급된 센서 또는 센서들에서 감지되는 신호에 기초하여 제공될 수 있다.
한편, 센서의 감지 능력이 민감한 경우, 사용자의 손떨림에도 반응하여 단말기(120) 내부의 연산량이 증가하거나 시각적으로 불안정한 디스플레이를 제공할 수 있다. 따라서, 센서에서 전송되는 데이터 중 미세한 움직임에 상응하는 데이터는 제거할 수 있다. 다시 말해, 이동 감지 센서(230)에서 감지된 신호는 당업자의 요구에 따라 다양한 방법으로 가공되어 제어부(250)로 제공될 수 있다. 예를 들어, 감지된 신호의 가공은 증폭, 감쇄, 필터링, 추출, 혼합 및/또는 근사화를 포함할 수 있다.
신호처리부(240)는 이동 감지 센서(230)에서 제공된 단말기(120)의 이동 거리와 이동 방향을 필터링할 수 있으며, 당업자의 요구에 따라 신호의 증폭, 감쇄, 추출, 혼합 및/또는 근사화를 더 수행할 수 있다. 일 실시예에서, 신호처리부(240)는 이동 감지 센서(230)에서 제공된 이동 거리 및/또는 이동 방향이 최소인식거리 및/또는 최소인식방향보다 큰 경우, 해당 이동 거리 및/또는 이동 방향을 제어부(250)로 전송하고, 제공된 이동 거리 및/또는 이동 방향이 최소인식거리 및/또는 최소인식방향보다 작은 경우, 해당 이동 거리 및/또는 이동 방향을 삭제할 수 있다.
한편, 이동중인 사용자가 단말기(120)를 움직이게 되면, 현재의 이동 방향 및 속도로 인하여, 단말기(120)의 움직임을 정확하게 감지하지 못하는 경우가 발생할 수 있다.
개시된 기술의 신호처리부(240)는 특정한 외부 환경에서 이동 감지 센서(230)에서 감지되는 감지신호의 일부를 제거하거나 보정할 수 있다. 예를 들어, 자동차에 승차한 사용자가 단말기(120)를 움직이는 경우에는 가속도의 변화량이 작지만 지속적으로 변화가 발생하는 경우(예를 들어, 고속도로에서 안정적인 속도에서 주행하고 있는 경우) 또는 너무 큰 경우의 신호(예를 들어, 도심지에서 정차 및 주행이 반복되는 경우)를 필터링 할 수 있다. 다른 예로, 전철에 승차한 사용자가 단말기(120)를 움직이는 경우에는, 전철의 진행방향에 상응하는 방향에 대한 가속도 성분을 필터링 할 수 있다. 다시 말해, 전후방향에 대한 가속도 성분이 필터링 되어 제거되도록 설정되면 사용자는 전철의 진행방향을 바라본 상태에서 단말기(120)를 상하좌우로 이동하는 것으로 가상 공간을 이동할 수 있다. 이러한 주위 환경에 따른 감지신호의 처리 방법은 당업자의 요구에 따라 다양한 변형이 가능하며, 주위 환경에 따라서 단말기(120)가 추천하는 내용을 사용자가 선택하거나 단말기(120)가 주위 환경을 반영하여 자동으로 처리하도록 할 수 있다.
제어부(250)는 제공된 이동 거리와 이동 방향을 기초로 가상 공간의 적어도 일부를 결정한다. 일 실시예에서, 제어부(250)는 적어도 일부의 가상 공간이 이산적인 공간에 위치한 경우에는 결정된 적어도 일부의 가상 공간은 인접한 이산적인 가상 공간 중 하나에 상응하도록 결정할 수 있다.
디스플레이부(260)는 제어부(250)에서 결정된 가상 공간의 적어도 일부를 디스플레이할 수 있다. 예를 들어, 디스플레이부(260)는 LCD 패널(Liquid Crystal Display Panel), LED 패널(Light Emitting Diode Panel), 터치스크린 패널(Touch Screen Panel), 3D 패널(Three-Dimensional Panel) 및/또는 홀로그램(Hologram) 표시장치 등 디스플레이하는 장치에서 시각적으로 표현하는 것을 포함할 수 있다.
알림부(270)는 하드웨어의 실행 및/또는 콘텐츠의 실행 여부를 시각적, 청각적 및/또는 촉각적으로 표시할 수 있다. 일 실시예에서, 알림부(270)는 제어부(250)를 통하여 디스플레이부(260)의 일부에 시각적으로 출력 및/또는 직접 디스플레이부(260)의 일부에 시각적으로 출력될 수 있다. 예를 들어, 알림부(270)는 현재 디스플레이되는 가상 공간의 좌표값, 이동거리, 이동방향(예를 들어, 화살표), 가상 공간을 구분하는 색의 변화 및/또는 선명도에 상응하여 디스플레이부(260)에 출력될 수 있다. 다른 일 실시예에서, 알림부(270)는 직접 스피커 또는 진동발생소자의 동작을 제어 및/또는 제어부(250)을 통하여 스피커 또는 진동발생소자의 동작을 제어할 수 있다. 예를 들어, 스피커를 통해 특정 소리를 출력(청각적 기능)하는 것 및/또는 진동발생소자를 동작(촉각적 기능) 시켜 단말기(120)를 진동시킬 수 있다. 이때, 알림부(270)는 출력되는 소리 및/또는 진동발생소자의 주파수 및 진동 방식을 변경하여 하드웨어 및/또는 콘텐츠의 시작, 중지, 실행중, 이동 속도, 이동 방향, 재실행 및/또는 종료 등을 알릴 수 있다.
인증부(280)는 사용자의 인증을 수행할 수 있다. 일 실시예에서, 가상 공간의 적어도 일부에 인증 공간이 포함된 경우, 단말기(120)가 해당 인증 공간으로 이동하게 되면, 제어부(250)는 인증부(280)를 통해 사용자 인증을 거친 후, 해당 인증 공간을 디스플레이할 수 있다. 이러한 인증부(280)는 가상 공간의 특정 영역에 대한 보안성을 향상시킬 수 있다.
데이터 통신부(290)는 해당 가상 공간을 공유하는 다른 단말기(125)와 통신을 수행할 수 있다. 일 실시예에서, 다른 단말기(125)와 가상 공간을 공유하기 위해 제어부(250)는 데이터 통신부(290)를 통해 해당 단말기(125)와 통신을 수행하고, 해당 단말기(125)의 정보를 디스플레이부(260)에 디스플레이할 수 있다. 예를 들어, 해당 단말기(125)의 정보는 가상 공간에서의 위치 및/또는 해당 가상 공간에서의 활동상태를 포함할 수 있다. 다시 말해, 가상 공간을 통해 이루어지는 행위는 데이터 통신부(290)를 통해 콘텐츠 제공 서버(110) 및/또는 다른 단말기(125)로 전송되어, 상호간에 데이터를 공유할 수 있다.
도 2에서, 각 구성간의 데이터 전송 및 제어는 화살표로 표시하였으나, 이러한 방향성은 일 실시예에 따른 것이며, 당업자의 요구에 따라 기본 개념이 변경되지 않는 한도에서 다양한 변형이 이루어질 수 있음은 당연하다. 예를 들어, 콘텐츠 저장부(210)에 저장된 가상 공간을 구현하거나 가상 공간을 구성하고 있는 요소인 콘텐츠는 신호처리부(240)로 전송되고, 신호처리부(240)에서 처리된 단말기(120)의 이동 거리와 이동 방향이 적용된 후 제어부(250)로 제공될 수 있다. 또한, 제어부(250)는 다른 단말기(125)로 전송하고자 하는 데이터를 데이터 통신부(290)로 전송하여, 데이터 통신부(290)가 다른 단말기(125)로 해당 데이터를 전송하도록 할 수 있다. 따라서, 개시된 기술은 도 2에 나타난 구성 및 각 구성간의 연결관계에 한정하지 않음은 물론이다.
도 3은 도 1의 신호처리부(240)의 필터링 동작을 설명하는 그래프이다.
도 3에서, "A1"과 "A2"는 "X"축 방향으로 인접된 영역의 크기(거리)를 나타내고, "Sen_X"는 단말기(120)가 "X"방향으로 이동된 거리를 감지한 신호이며, "a1"은 "A1"영역의 시작경계위치이고, "a2"은 "A2"영역의 시작경계위치이며, "m1"은 및 "m2"는 경계위치에서의 최소인식거리이다.
도 3을 참조하면, 단말기(120)가 "A1"영역의 시작경계위치에 위치한 상태에서, 사용자의 손떨림에 의한 미세이동이 감지(구간 "T1")되면, 해당 신호는 신호처리부(240)에 의해 필터링 될 수 있다. 단말기(120)가 "A1"영역으로 이동하면 해당 영역의 가상 공간이 디스플레이될 수 있다(구간 "T2"). 이때, 단말기(120)가 "A2"영역의 시작경계위치에 위치한 상태에서, 사용자의 손떨림에 의한 미세이동이 감지되더라도 단말기(120)는 "A1"영역의 가상 공간이 디스플레이 될 수 있다. 한편, "A1"영역의 가상 공간이 디스플레이되는 상태에서 사용자의 일시적인 실수에 의해 단말기(120)의 위치가 "A2"영역으로 이동한 경우(구간 "T3" 및 "T4")가 발생할 수 있다. 이러한 경우에는 "A2"영역의 가상 공간이 디스플레이되지 않아야 한다. 이를 위하여 단말기(120)의 신호처리부(240)는 다른 영역으로의 이동된 시간이 설정시간보다 짧은 경우(구간 "T3")에는 가상 공간을 이동시키지 않도록 제어부(250)에 정보를 전달하지 않고, 설정시간보다 긴 경우(구간 "T4")에는 가상 공간을 이동시키도록 제어부(250)에 정보를 전달 할 수 있다.
도 4는 개시된 기술의 일 실시예에 따른 단말기에 의하여 실행되는 가상 공간 인터페이스 제어 방법을 설명하는 흐름도이다.
도 4에서, 적어도 하나의 콘텐츠를 포함하는 가상 공간을 관리하는 가상 공간 매니저를 실행한다(단계 S410). 일 실시예에서, 가상 공간 매니저는 단말기(120)의 이동에 상응하여 가상 공간의 이동, 콘텐츠의 선택, 콘텐츠의 이동 및 복사 및/또는 콘텐츠의 실행 및 결과 디스플레이를 포함하는 가상 공간에 관련된 기능을 수행할 수 있다. 예를들어, 가상 공간 매니저는 도 2의 제어부(250)에 상응하거나 포함될 수 있다.
가상 공간 매니저는 가상 공간의 적어도 일부를 디스플레이한다(단계 S420). 예를 들어, 최초 디스플레이되는 가상 공간은 기준 좌표로 설정된 위치가 항상 디스플레이 될 수 있다. 다른 예로, 이전에 수행했던 가상 공간의 마지막 위치가 디스플레이 될 수 있다.
가상 공간 매니저는 단말기(120)의 이동을 검출한다(단계 S430). 일 실시예에서, 가상 공간 매니저는 도 2의 신호처리부(240)에서 전송된 신호에 기초하여 단말기(120)의 이동을 검출할 수 있다.
가상 공간 매니저는 검출된 이동에 따라 가상 공간을 제어한다(단계 S440). 일 실시예에서, 가상 공간의 제어는 가상 공간상에서 이루어지는 기능의 제어를 포함할 수 있다. 예를 들어, 가상 공간상에서 이루어지는 기능은 이하에서 설명될 실시예들을 포함할 수 있다. 다른 예로, 개시된 기술의 특징을 벗어나지 않는 범위 내에서 당업자의 요구에 따라 다양한 변형이 가능할 수 있다.
도 5 내지 도 7은 도 4의 구체적인 일 실시예들을 설명하는 순서도이다.
도 5를 참조하면, 가상 공간 매니저는 단말기(120)의 이동에 상응하여 적어도 하나의 콘텐츠 또는 콘텐츠를 실행하기 위한 아이콘을 디스플레이 할 수 있다.
도 5에서, 단말기(120)의 움직임에 상응하여 가상 공간이 이동되면(단계 S501), 가상 공간 매니저는 디스플레이 영역에 콘텐츠가 존재하는지 확인할 수 있다(단계 S502).
해당 영역에 콘텐츠가 존재하면(단계 S503), 가상 공간 매니저는 해당 콘텐츠를 선택하여 디스플레이할 수 있다(단계 S504), 여기서, 콘텐츠의 선택은 콘텐츠의 실행을 의미하는 것은 아니며, 디스플레이될 콘텐츠를 선택하는 것을 의미한다.
해당 영역에 콘텐츠가 존재하지 않은 경우(단계 S503), 가상 공간 매니저는 해당 영역에 인접한 영역을 확인하여 가장 인접한 콘텐츠를 확인할 수 있다(단계 S505). 확인된 가장 인접한 콘텐츠가 하나인 경우(단계 S506), 가상 공간 매니저는 해당 콘텐츠를 선택할 수 있다(단계 S504).
인접한 영역에 존재하는 콘텐츠가 두 개 이상인 경우(단계 S506), 가상 공간 매니저는 디스플레이 방식을 확인할 수 있다(단계 S507).
디스플레이 방식이 하나를 기준으로 적어도 해당 콘텐츠를 디스플레이하도록 설정된 경우(단계 S508), 가상 공간 매니저는 두 개 이상의 콘텐츠들 중 우선순위가 높은 콘텐츠를 선택할 수 있다(단계 S509). 일 실시예에서, 우선순위는 실행횟수에 상응하여 설정될 수 있다. 다른 일 실시예에서, 우선순위는 사용자에 의해 설정될 수 있다.
디스플레이 방식이 모든 콘텐츠를 기준으로 적어도 해당 콘텐츠를 디스플레이하도록 설정된 경우(단계 S510), 가상 공간 매니저는 모든 콘텐츠들이 기준이 되어 적어도 해당 콘텐츠들을 디스플레이될 수 있도록 크기를 제어할 수 있다(단계 S510). 일 실시예에서, 가상 공간 매니저는 해당 콘텐츠들이 기준이 되어 적어도 해당 콘텐츠들이 모두 디스플레이 되도록 가상 공간 및/또는 디스플레이를 변경할 수 있다.
가상 공간 매니저는 콘텐츠의 선택 및/또는 디스플레이 크기의 제어가 완료되면, 선택된 콘텐츠를 디스플레이할 수 있다(단계 S511).
도 6을 참조하면, 가상 공간은 계층적 레이어(Layer) 구조의 이산적인 공간(Discrete Space)을 포함하고, 가상 공간 매니저는 계층적 레이어 구조의 이산적인 공간에 포함된 콘텐츠를 선택하여 실행할 수 있다.
도 6에서, 가상 공간 매니저는 사용자의 제어 하에 가상 모드가 실행되면(단계 S601), 특정 레이어의 일부분을 디스플레이할 수 있다(단계 S602). 일 실시예에서, 특정 레이어는 다수의 레이어 중 최상위에 위치하는 레이어를 포함할 수 있다.
가상 공간 매니저는 단말기의 이동을 확인하고(단계 S603), 해당 이동이 상하좌우 방향의 이동인 경우에는(단계 S604) 현재 레이어에서 해당 영역을 디스플레이할 수 있다(단계 S605).
가상 공간 매니저는 해당 이동이 앞뒤의 이동인 경우에는(단계 S604) 다른 레이어의 일부를 디스플레이할 수 있다(단계 S606). 일 실시예에서, 앞으로의 이동인 경우 가상 공간 매니저는 현재 레이어에서 상위 또는 하위 레이어로 이동할 수 있다. 다른 일 실시예에서, 뒤로의 이동인 경우 가상 공간 매니저는 현재 레이어에서 하위 또는 상위 레이어로 이동할 수 있다. 예를 들어, 현재 레이어가 최상위 레이어인 경우에는 레이어의 이동을 중단하고, 현재 레이어가 최상위 레이어임을 사용자에게 알릴 수 있으며, 현재 레이어가 최하위 레이어인 경우에는 레이어의 이동을 중단하고, 현재 레이어가 최하위 레이어임을 사용자에게 알릴 수 있다. 다른 예로, 현재 레이어가 최상위 레이어인 경우에는 최하위 레이어로 이동할 수 있으며, 현재 레이어가 최하위 레이어인 경우에는 최상위 레이어로 이동할 수 있다.
단말기(120)의 이동이 해당 콘텐츠의 실행에 상응할 경우(단계 S607), 가상 공간 매니저는 해당 콘텐츠를 실행할 수 있다(단계 S608).
도 7을 참조하면, 가상 공간 매니저는 사용자에 의해 선택된 적어도 하나의 콘텐츠를 콘텐츠 모음 공간으로 이동 또는 복사할 수 있다.
도 7에서, 가상 공간 매니저는 사용자의 제어 하에 가상 모드가 실행되면(단계 S701), 특정 레이어의 일부분을 디스플레이할 수 있다(단계 S702). 가상 공간 매니저는 단말기의 이동을 확인하고(단계 S703), 해당 이동이 상하좌우 방향의 이동인 경우에는(단계 S704) 현재 레이어에서 해당 영역을 디스플레이할 수 있으며(단계 S705), 가상 공간 매니저는 해당 이동이 앞뒤의 이동인 경우에는(단계 S704) 다른 레이어의 일부를 디스플레이할 수 있다(단계 S706).
사용자 제어하에 디스플레이된 콘텐츠가 선택되면(단계 S707), 가상 공간 매니저는 선택된 콘텐츠를 콘텐츠 모음 공간으로 복사 또는 이동할 수 있다(단계 S708). 일 실시예에서, 사용자가 단말기(120)를 좌우로 흔들면 해당 콘텐츠가 콘텐츠 모음 공간으로 복사될 수 있다. 다른 일 실시예에서, 사용자가 단말기(120)를 앞뒤로 흔들면 해당 콘텐츠가 콘텐츠 모음 공간으로 이동할 수 있다.
사용자는 "S703" 단계 내지 "S709" 단계를 반복하여 원하는 콘텐츠들을 콘텐츠 모음 공간으로 복사 또는 이동시킬 수 있다(단계 S709). 일 실시예에서, 콘텐츠 모음 공간은 사용자가 자주 사용하는 콘텐츠들을 포함할 수 있다.
도 8 내지 도 11는 개시된 기술의 일 실시예에 다층 구조의 가상 공간에서 콘텐츠를 선택하는 방법을 설명하는 도면이다.
도 8을 참조하면, 단말기(120)의 화면(801)에 디스플레이되는 객체들을 계층구조로 구성하고, 각 계층을 차별화화여 디스플레이할 수 있다. 이러한 계층 구조는 선택적 정보 획득 및 관리가 쉬워지는 장점이 있다.
도 8에서, 가상 공간은 상위 레이어(810) 및 하위 레이어(820)를 포함할 수 있고, 상위 레이어(810)는 서로 다른 콘텐츠(811 내지 819)를 포함할 수 있으며, 하위 레이어(820)의 경우에도 동일하다.
도 8에서와 같이, 상위 레이어(810)의 제5 콘텐츠(815)가 단말기(800)의 화면(810)에 디스플레이된 상태에서, 도 9와 같이 단말기(800)가 왼쪽으로 이동하면 화면(810)에는 제5 콘텐츠(815)의 왼쪽에 위치한 제4 콘텐츠(814)가 디스플레이될 수 있고, 도 10과 같이 단말기(800)가 위로 이동하면, 화면(810)에는 제5 콘텐츠(815)의 위쪽에 위치한 제2 콘텐츠(812)가 디스플레이될 수 있다. 또한, 도 11과 같이 단말기(800)가 뒤로 이동하면, 화면(810)에는 상위 레이어(810)의 제5 콘텐츠(815)의 뒤쪽에 위치한 하위 레이어(820)의 제5 콘텐츠(825)가 디스플레이될 수 있다.
도 12은 도 8 내지 도 11에 의해 특정 기능이 선택되는 일 예를 설명하는 도면이다.
도 12와 같은 다섯개의 레이어를 갖는 경우, 사용자가 "전화번호부", "ㄱ", "구본승", "010-1231-5678", "통화"를 순차적으로 선택하기 위해서는 단말기(800)를 "뒤쪽", "뒤쪽", "뒤쪽", "우측", "뒤쪽", "뒤쪽"으로 이동시켜 "구본승"과 "통화"를 할 수 있다. 일 실시예에서, 사용상의 편의를 위하여, 단말기(800)의 이동은 한쪽으로의 이동에 한정하지 않고, 왕복이동으로 변경될 수 있다. 예를 들어, "뒤쪽"의 이동은 "뒤쪽으로 이동한 후 다시 앞으로 이동"으로 변경될 수 있다.
도 13 내지 도 19는 개시된 기술의 일 실시예에 이산적인 공간이 디스플레이되는 것을 설명하는 도면이다.
도 13에서, 이산적인 공간에 상응하는 전체 이미지(1200)는 다수의 아이콘(1301 내지 1309)을 포함할 수 있다. 예를 들어, 각 아이콘은 단말기(800)에서 수행되는 기능 중 적어도 하나에 상응할 수 있다. 일 실시예에서, 단말기(800)의 화면(801) 위치가 해당 아이콘의 위치에 상응하면, 해당 아이콘은 단말기(800)의 화면(801)에 디스플레이된다.
도 14에서, 사용자가 도면부호 "1301"의 아이콘을 선택하기 위해 이동된 단말기(800)의 화면(801) 위치가 정확하지 않은 경우에는, 단말기(800)의 이동 위치에서 가장 근접한 아이콘(1301)이 선택될 수 있다. 여기서 도면 부호 "d1", "d2", "d3" 및 "d4"는 단말기(800)의 화면(801)의 중심좌표로부터 각 아이콘(1301, 1302, 1304, 1305)의 중심좌표까지의 거리를 포함할 수 있다. 다시 말해, 가상 공간이 이산적인 공간인 경우, 디스플레이된 가상 공간의 적어도 일부를 기준으로, 단말기(800)의 이동 거리 및 이동 방향에 상응하는 위치를 계산할 수 있고, 계산된 위치로부터 가장 인접한 가상 공간의 적어도 다른 일부를 디스플레이할 수 있다. 일 실시예에서, 좌표의 계산은 기준 좌표를 기준으로 계산될 수 있다. 다른 일 실시예에서, 기준 좌표는 사용자에 의해 설정될 수 있다. 또 다른 일 실시예에서, 이산적인 공간의 해상도를 나타내는 2차원 평면 또는 3차원 입체공간의 평면/공간 그리드(Grid)를 기준으로 하여 아이콘(1301 내지 1309)이 화면에 디스플레이될 수 있으며, 단말기(800)의 이동에 따른 화면 디스플레이도 평면/공간 그리드의 기본 단위를 기초로 하여 디스플레이될 수 있다. 또 다른 실시예에서, 평면/공간 그리드의 단위 및 형태는 사용자에 의해 설정될 수 있다.
도 15에서, 이동된 단말기(800)의 화면(801) 위치가 인접된 아이콘들(1301, 1302, 1304, 1305)로부터 동일한 거리에 위치할 경우, 해당 아이콘들(1301, 1302, 1304, 1305) 중 어느 하나의 아이콘(1305)을 선택할 수 있다. 일 실시예에서, 가장 인접한 가상 공간의 적어도 다른 일부가 복수 개인 경우, 해당 다른 일부들 중 부여된 우선순위가 상대적으로 높은 다른 일부를 선택할 수 있다. 다른 일 실시예에서, 가장 인접한 가상 공간의 적어도 다른 일부가 복수 개인 경우, 해당 다른 일부들 중 실행 및/또는 디스플레이 횟수가 상대적으로 높은 다른 일부를 선택하여 디스플레이할 수 있다.
도 16에서, 이동된 단말기(800)의 화면(801) 위치가 인접된 아이콘들(1301, 1302, 1304, 1305)로부터 동일한 거리에 위치할 경우, 가상 공간이 축소되면서 해당 아이콘들(1301, 1302, 1304, 1305)이 모두 화면(801)에 디스플레이될 수 있다. 일 실시예에서, 인접된 아이콘들(1301, 1302, 1304, 1305)로부터의 거리는 반드시 동일한 경우에 한정하지 않으며, 오차 범위내에 동일하다고 판단될 경우에는 동일한 것으로 판단할 수 있다. 예를 들어, 오차 범위는 어느 하나의 길이에 대하여 다른 하나의 길이가 10%이상 차이 나지 않은 경우를 포함할 수 있다.
도 17 및 도 18에서, 가상 공간에 위치한 아이콘들 중 적어도 일부(1301)(1305)를 콘텐츠 모음 공간(1700)으로 복사 또는 이동할 수 있다. 일 실시예에서, 콘텐츠 모음 공간(1700)은 가상 공간과는 별개의 독립적인 공간으로 구성될 수 있다. 예를 들어, 가상 공간과 별개의 레이어에 포함될 수 있다. 다른 일 실시예에서, 콘텐츠 모음 공간(1700)은 공간을 꾸미기 위한 아이콘들(예를 들어, 식탁, 의자, 가구 등)을 모아놓을 수 있고, 가상공간 상에 오버래핑되어 디스플레이될 수 있다. 일 실시예에서, 콘텐츠 모음 공간(1700)에 모여진 콘텐츠는 사용자 제어하에 입력되는 기능에 대하여 동일하게 적용될 수 있다. 예를 들어, 콘텐츠 모음 공간(1700)에 모여진 콘텐츠를 모두 이동시키거나 복사할 수 있다. 다른 예로, 콘텐츠 모음 공간(1700)에 모여진 콘텐츠가 검색 엔진을 갖는 포탈사이트인 경우, 사용자에 의해 입력된 단어를 동일하게 검색하도록 할 수 있다. 일 실시예에서, 콘텐츠 모음 공간(1700)의 크기와 계층별 레이어의 개수는 사용자 제어 하에 변경이 가능함은 물론이다.
도 19에서, 사용자가 선택한 아이콘(1301)(1305)(1309)을 사용하기 위하여, 단말기(800)를 콘텐츠 모음 공간(1700)으로 이동시킨 후, 단말기(800)의 단순한 움직임 만으로도 콘텐츠 모음 공간(1700)에 그룹핑된 아이콘(1301)(1305)(1309)을 선택 및/또는 실행할 수 있다. 다시 말해, 각 아이콘들을 찾기 위하여 서로 다른 레이어를 일일이 탐색해야 하는 번거로움을 제거할 수 있어, 사용상의 편의성을 제공할 수 있다. 그리고, 가상 공간에서 수행한 과정(예를 들어, 아이콘의 이동) 및 그 결과정보를 저장할 수 있다. 필요시 저장된 정보는 사용자의 제어 하에 이전 상태로 복구할 수 있다. 이때, 도 19와 같이 화면(801)에 디스플레이되는 아이콘(1305)과 이에 인접한 아이콘들(1301)(1309)을 실행 상태와 실행 오프상태로 관리할 수 있다
도 20 내지 도 25는 개시된 기술의 일 실시예에 연속적인 공간이 디스플레이되는 것을 설명하는 도면이다.
도 20에서, 연속적인 공간에 상응하는 전체 이미지(2000)는 평면 또는 구형으로 이루어질 수 있다.
도 21에서, 가상 공간을 구현하는 가상 공간 매니저가 실행되면 전체 이미지(2000)의 일부(2120)가 단말기(800)의 화면(801)에 디스플레이될 수 있으며, 단말기(800)의 이동에 상응하여 연속적인 공간이 화면에(801) 디스플레이될 수 있다. 도 21에서, 도면 부호 "2110"은 가상 모드 알림 아이콘이며, 가상 모드가 실행되면 도 22와 같이 디스플레이될 수 있다.
도 22에서, 전체 이미지(2000)의 처음 일부(2210)가 단말기(800)의 화면(810)에 디스플레이된 상태에서 단말기(800)를 오른쪽으로 이동하게 되면, 단말기(800)의 화면(801)에는 단말기(800)의 이동에 상응하는 전체 이미지(2000)의 다음 일부(2220)가 디스플레이될 수 있다.
도 23에서, 단말기(800)의 화면(810)에는 단말기(800)를 앞 또는 뒤로 이동시켜 최초로 보여준 임의의 객체 정보에 추가적으로 자세한 정보(2311 내지 2315)를 디스플레이하거나 또는 임의의 객체 정보와 연결된 위치로 이동하여 그 내용을 디스플레이 할 수 있다. 일 실시예에서, 가상 공간인 도 21의 화면을 확대 또는 축소할 수 있다. 예를 들어, 단말기(800)에 이동버튼(도시하지 않음) 및 확대버튼(도시하지 않음)을 구비하고, 사용자가 이동버튼을 누른 상태에서 도 22와 같이 화면을 이동하고, 원하는 일부의 이미지(2220)가 도 22와 같이 디스플레이된 상태에서 확대버튼을 누른 상태로 단말기(800)를 앞 또는 뒤로 이동시키면, 해당 이미지(2220)가 확대 또는 축소될 수 있다. 도 23에서는 확대된 이미지(2310)를 디스플레이 하고 있다. 다른 일 실시예에서, 확대 또는 축소의 기준을 나타내기 위해 화면의 중심축에 커서 또는 인지용 도형을 중첩하여 디스플레이할 수 있다. 또 다른 일 실시예에서, 가상 공간 및/또는 증강현실로 나타난 임의의 객체 정보에 커서 또는 인지용 도형을 올려놓고 단말기(800)를 앞 또는 뒤로 이동시키면 더 자세한 정보 또는 추가 연결 정보를 얻을 수 있다. 또 다른 일 실시예에서, 터치스크린의 터치 방법 또는 디스플레이되는 기능용 아이콘 메뉴에 의해 해당 이미지(2220)를 확대 또는 축소할 수 있다. 또 다른 일 실시예에서, 확대 또는 축소를 위해 화면의 중심축에 커서 또는 인지용 도형을 디스플레이하거나 화면에 터치하는 위치가 중심축이 되어 확대 또는 축소를 수행할 수 있다. 또 다른 일 실시예에서, 이산적인 공간인 경우에도 확대 또는 축소를 위한 상기 내용이 동일하게 적용될 수 있다.
도 24와 같이 전체 이미지(2000)의 처음 일부(2410)가 단말기(800)의 화면(801)에 디스플레이된 상태에서, 도 25와 같이 단말기(800)를 회전시키면 전체 이미지(2000)에서 회전된 일부(2510)가 단말기(800)의 화면(801)에 디스플레이될 수 있다. 일 실시예에서, 사용자가 단말기(800)를 90도(단말기의 가로와 세로가 바뀌는 각도), 180도, 270도 등으로 회전시킬 수 있으며, 해당 가상 공간은 회전된 화면의 가로 대 세로 비에 상응하도록 변경될 수 있다.
개시된 기술에서 실내 공간을 꾸미기 위한 콘텐츠를 수행할 경우, 통신망을 통해 다른 사용자 또는 서버 또는 제조업체로부터 해당 제품(예를 들어, 식탁이나 의자)의 이미지를 제공받을 수 있거나 단말기로 획득한 이미지를 사용할 수 있다. 따라서, 보다 현실적인 가상 공간의 구성이 가능할 수 있다.
도 26 내지 도 27은 개시된 기술의 일 실시예에 연속적인 공간에 추가적인 구성을 배치하는 방법을 설명하는 도면이다.
단말기(800)에 디스플레이된 이미지에 도 26과 같이 표지판(2610)을 구성하고자 하는 경우, 통신망을 통해 해당 표지판(2610)의 오브젝트(객체) 정보를 수신하고, 수신된 표지판(2610)이 도 27과 같이 오버래핑되면 단말기(800)의 화면(801)에 디스플레이된 이미지를 확대 및/또는 축소하여 원하는 위치에 해당 표지판(2610)을 위치시킬 수 있다. 이후 단말기(800)의 화면(801)을 확대하면 도 26과 같이 가상 공간상에 표지판(2610)을 구성할 수 있다. 이러한 가상 공간의 변경은 동일한 가상 공간에 접속한 다른 단말기(125)에도 전송될 수 있다. 따라서, 다수의 사용자가 동일한 가상 공간에서 각자가 원하는 구성들을 추가 및 삭제할 수 있다.
도 28은 개시된 기술의 일 실시예에 하나의 콘텐츠가 실행되는 도중에 다른 콘텐츠를 선택하는 방법을 설명하는 도면이다.
도 28에서, 사용자가 가상 공간을 꾸미는 과정 및/또는 멀티태스킹(Multi-Tasking)을 실시하는 과정에서 다른 콘텐츠를 이용하고자 할 경우, 가상 공간 매니저는 현재 디스플레이된 가상 공간의 이미지에 태스크 바(2810)를 오버래핑하여 다수의 콘텐츠들(1301)(1305)(1309)을 디스플레이할 수 있다.
사용자 제어 하에, 오버래핑된 적어도 하나의 콘텐츠 중 어느 하나가 선택되면, 현재 콘텐츠의 실행을 일시 멈춤, 멈춤 및/또는 중단하고 선택된 콘텐츠를 실행할 수 있다. 일 실시예에서, 다운로드, 멀티태스킹 및/또는 가상공간 이동 시 새로운 정보가 디스플레이되기 전에 즉, 과도시간 동안에 미리 저장하고 있거나 통신망을 통해 빠르게 얻은 정보를 디스플레이할 수 있다.
개시된 기술에서 가상 공간은 연속적인 공간 및 이산적인 공간을 포함할 수 있으며, 각각 별도의 인증공간을 구성할 수 있고, 콘텐츠, 아이콘, 오브젝트 등을 모을 수 있는 모음 공간을 구성할 수 있다. 또한, 당업자의 요구에 따라 다양한 공간들이 추가적으로 구성될 수 있다. 이러한 각 공간들은 다양한 조합으로 전체 가상 공간상에 배치할 수 있으며, 가상 공간 매니저는 사용자의 요구에 따라 가상 공간을 다양하게 구현, 구분 및/또는 구별하고 언제나 변경 및/또는 수정/보완할 수 있도록 하는 환경을 제공함은 물론, 전체 가상 공간상에서 각 공간들이 차지하는 영역 및 현재 디스플레이되는 영역을 쉽게 파악할 수 있는 미니맵을 제공할 수 있다.
개시된 기술은 다음의 효과를 가질 수 있다. 다만, 특정 실시예가 다음의 효과를 전부 포함하여야 한다거나 다음의 효과만을 포함하여야 한다는 의미는 아니므로, 개시된 기술의 권리범위는 이에 의하여 제한되는 것으로 이해되어서는 아니 될 것이다.
일 실시예에 따른 단말기에 의하여 실행되는 가상 공간 인터페이스 제어 방법은 효율적으로 가상 공간을 디스플레이할 수 있다. 단말기의 움직임에 상응하여 변화되는 가상 공간을 디스플레이할 수 있기 때문이다.
또한, 일 실시예에 따른 단말기에 의하여 실행되는 가상 공간 인터페이스 제어 방법은 손떨림 방지기능을 제공할 수 있다. 단말기의 움직임이 미세한 경우에 대해서는 가상 공간의 이동을 반영하지 않기 때문이다.
또한, 일 실시예에 따른 단말기에 의하여 실행되는 가상 공간 인터페이스 제어 방법은 증강현실 및/또는 3D(Three-Dimensional) 입체 화면에 적용될 수 있다.
상기에서는 본 출원의 바람직한 실시예를 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구의 범위에 기재된 본 출원의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 출원을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.

Claims (14)

  1. (a) 적어도 하나의 콘텐츠를 포함하는 가상 공간을 관리하는 가상 공간 매니저를 실행하는 단계;
    (b) 가상 공간의 적어도 일부를 디스플레이 하는 단계;
    (c) 이동을 검출하는 단계; 및
    (d) 상기 검출된 이동에 따라 상기 가상 공간 매니저는 상기 가상 공간을 제어하는 단계를 포함하는 단말기에 의하여 실행되는 가상 공간 인터페이스 제어 방법.
  2. 제1항에 있어서, 상기 가상 공간은 이산적인 공간(Discrete Space)을 포함하고,
    상기 (d) 단계는
    (d-1) 상기 가상 공간 매니저가 상기 검출된 이동에 상응하는 좌표상에 콘텐츠의 존재여부를 확인하는 단계; 및
    (d-2) 해당 좌표상에 콘텐츠가 존재하면 해당 콘텐츠를 디스플레이하는 단계를 포함하는 것을 특징으로 하는 단말기에 의하여 실행되는 가상 공간 인터페이스 제어 방법.
  3. 제2항에 있어서, 상기 (d) 단계는
    (d-3) 해당 좌표상에 콘텐츠가 존재하지 않으면, 가장 인접한 콘텐츠를 확인하는 단계; 및
    (d-4) 상기 가장 인접한 콘텐츠가 하나이면 해당 콘텐츠를 기준으로 하여 적어도 해당 콘텐츠를 디스플레이하는 단계를 더 포함하는 것을 특징으로 하는 단말기에 의하여 실행되는 가상 공간 인터페이스 제어 방법.
  4. 제3항에 있어서, 상기 (d) 단계는
    (d-5) 상기 가장 인접한 콘텐츠가 둘 이상이면 해당 콘텐츠 중 우선순위가 상대적으로 다른 콘텐츠를 기준으로 하여 적어도 해당 콘텐츠를 디스플레이하는 단계를 더 포함하는 것을 특징으로 하는 단말기에 의하여 실행되는 가상 공간 인터페이스 제어 방법.
  5. 제4항에 있어서, 상기 (d) 단계는
    (d-6) 상기 가장 인접한 콘텐츠가 둘 이상이면 해당 콘텐츠들을 기준으로 하여 적어도 해당 콘텐츠들을 모두 디스플레이되도록 화면크기를 제어하는 단계를 더 포함하는 것을 특징으로 하는 단말기에 의하여 실행되는 가상 공간 인터페이스 제어 방법.
  6. 제1항에 있어서, 상기 가상 공간은 계층적 레이어 구조를 포함하고,
    상기 (d) 단계는
    (d-1) 상기 가상 공간 매니저가 상기 검출된 이동이 앞으로의 이동인 경우에는 현재 레이어에서 상위 또는 하위 레이어로 이동하는 단계; 및
    (d-2) 상기 검출된 이동이 뒤로의 이동인 경우에는 현재 레이어에서 하위 또는 상위 레이어로 이동하는 단계를 포함하는 것을 특징으로 하는 단말기에 의하여 실행되는 가상 공간 인터페이스 제어 방법.
  7. 제6항에 있어서, 상기 (d-1) 단계는 현재 레이어가 최상위 레이어인 경우에는 레이어의 이동을 중단하고, 현재 레이어가 최상위 레이어임을 알리는 단계를 더 포함하고,
    상기 (d-2) 단계는 현재 레이어가 최하위 레이어인 경우에는 레이어의 이동을 중단하고, 현재 레이어가 최하위 레이어임을 알리는 단계를 더 포함하는 것을 특징으로 하는 단말기에 의하여 실행되는 가상 공간 인터페이스 제어 방법.
  8. 제7항에 있어서, 상기 (d-1) 단계는 현재 레이어가 최상위 레이어인 경우에는 최하위 레이어로 이동하는 단계를 더 포함하고,
    상기 (d-2) 단계는 현재 레이어가 최하위 레이어인 경우에는 최상위 레이어로 이동하는 단계를 더 포함하는 것을 특징으로 하는 단말기에 의하여 실행되는 가상 공간 인터페이스 제어 방법.
  9. 제1항에 있어서, 상기 가상 공간은 콘텐츠 모음 공간을 포함하고,
    상기 (d) 단계는
    (d-1) 상기 가상 공간 매니저가 상기 검출된 이동에 상응하여 선택된 적어도 하나의 콘텐츠를 상기 콘텐츠 모음 공간으로 복사 또는 이동시키는 단계를 포함하는 것을 특징으로 하는 단말기에 의하여 실행되는 가상 공간 인터페이스 제어 방법.
  10. 제9항에 있어서, 상기 (d) 단계는
    (d-2) 상기 선택된 적어도 하나의 콘텐츠의 복사 또는 이동이 완료되면 현재 디스플레이되는 공간을 상기 콘텐츠 모음 공간으로 변경하여 디스플레이하는 단계를 더 포함하는 것을 특징으로 하는 단말기에 의하여 실행되는 가상 공간 인터페이스 제어 방법.
  11. 제9항에 있어서, 상기 (d) 단계는
    (d-2) 상기 검출된 이동에 상응하여 이동된 공간이 상기 콘텐츠 모음 공간인 경우에 상기 선택된 적어도 하나의 콘텐츠를 디스플레이하는 단계를 더 포함하는 것을 특징으로 하는 단말기에 의하여 실행되는 가상 공간 인터페이스 제어 방법.
  12. 제1항에 있어서, 상기 (d) 단계는
    (d-1) 가상 공간상에 추가될 콘텐츠 및/또는 오브젝트를 다운로드받는 단계;
    (d-2) 상기 검출된 이동에 따라 상기 가상 공간 매니저가 디스플레이될 공간을 변경하는 단계; 및
    (d-3) 상기 변경된 공간에 상기 다운로드받은 콘텐츠 및/또는 오브젝트를 추가하는 단계를 포함하는 단말기에 의하여 실행되는 가상 공간 인터페이스 제어 방법.
  13. 제12항에 있어서, 상기 (d-2) 단계는
    상기 다운로드받은 콘텐츠 및/또는 오브젝트와 매칭되도록 디스플레이될 공간, 콘텐츠 및/또는 오브젝트의 확대, 축소, 색상 및/또는 밝기를 변경하는 단계를 더 포함하는 것을 특징으로 하는 단말기에 의하여 실행되는 가상 공간 인터페이스 제어 방법.
  14. 제1항에 있어서, 상기 (d) 단계는
    (d-1) 상기 가상 공간 매니저가 상기 가상 공간 상의 콘텐츠를 실행시키는 단계;
    (d-2) 상기 검출된 이동에 따라 상기 가상 공간에 오버래핑하여 적어도 하나의 콘텐츠를 디스플레이하는 단계; 및
    (d-3) 상기 오버래핑된 적어도 하나의 콘텐츠 중 어느 하나가 선택되면, 현재 콘텐츠의 실행을 일시 멈춤, 멈춤 및/또는 중단하고 선택된 콘텐츠를 실행하는 단계를 포함하는 것을 특징으로 하는 단말기에 의하여 실행되는 가상 공간 인터페이스 제어 방법.
PCT/KR2010/006504 2009-09-24 2010-09-20 단말기에 의하여 실행되는 가상 공간 인터페이스 제어 방법 WO2011037409A2 (ko)

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
KR20090090611 2009-09-24
KR10-2009-0090611 2009-09-24
KR10-2009-0094777 2009-10-06
KR20090094777 2009-10-06
KR1020100092541A KR20110033078A (ko) 2009-09-24 2010-09-20 단말기에 의하여 실행되는 가상 공간 인터페이스 제어 방법
KR10-2010-0092541 2010-09-20

Publications (2)

Publication Number Publication Date
WO2011037409A2 true WO2011037409A2 (ko) 2011-03-31
WO2011037409A3 WO2011037409A3 (ko) 2011-09-09

Family

ID=43796385

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2010/006504 WO2011037409A2 (ko) 2009-09-24 2010-09-20 단말기에 의하여 실행되는 가상 공간 인터페이스 제어 방법

Country Status (1)

Country Link
WO (1) WO2011037409A2 (ko)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070240073A1 (en) * 2006-04-07 2007-10-11 Mccarthy Kevin Mobile communication terminal
KR20080043469A (ko) * 2006-11-14 2008-05-19 엘지전자 주식회사 비접촉 센서를 구비하는 이동 단말기 및 이를 이용한아이템 목록 탐색 방법
KR20080085983A (ko) * 2007-03-21 2008-09-25 엘지전자 주식회사 이동단말기의 사용자 인터페이스 제공 방법
KR100912310B1 (ko) * 2008-04-17 2009-08-14 엘지전자 주식회사 사용자의 제스쳐를 검출하여 사용자 인터페이스를 제어하는방법
KR100917527B1 (ko) * 2008-04-28 2009-09-16 엘지전자 주식회사 사용자의 제스쳐를 검출하여 사용자 인터페이스를 제어하는방법

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070240073A1 (en) * 2006-04-07 2007-10-11 Mccarthy Kevin Mobile communication terminal
KR20080043469A (ko) * 2006-11-14 2008-05-19 엘지전자 주식회사 비접촉 센서를 구비하는 이동 단말기 및 이를 이용한아이템 목록 탐색 방법
KR20080085983A (ko) * 2007-03-21 2008-09-25 엘지전자 주식회사 이동단말기의 사용자 인터페이스 제공 방법
KR100912310B1 (ko) * 2008-04-17 2009-08-14 엘지전자 주식회사 사용자의 제스쳐를 검출하여 사용자 인터페이스를 제어하는방법
KR100917527B1 (ko) * 2008-04-28 2009-09-16 엘지전자 주식회사 사용자의 제스쳐를 검출하여 사용자 인터페이스를 제어하는방법

Also Published As

Publication number Publication date
WO2011037409A3 (ko) 2011-09-09

Similar Documents

Publication Publication Date Title
WO2012108620A2 (en) Operating method of terminal based on multiple inputs and portable terminal supporting the same
WO2012023823A2 (en) Method of configuring menu screen, user device for performing the method and computer-readable storage medium having recorded thereon program for executing the method
WO2013168885A1 (ko) 락 스크린의 제공 방법 및 그 제공 방법이 구현된 단말 장치
WO2015037960A1 (ko) 잠금 화면 제공 장치 및 방법
WO2014088310A1 (en) Display device and method of controlling the same
WO2014084633A1 (en) Method for displaying applications and electronic device thereof
WO2014129862A1 (en) Method for controlling display of multiple objects depending on input related to operation of mobile terminal, and mobile terminal therefor
WO2012154006A2 (en) Method and apparatus for sharing data between different network devices
WO2014088343A1 (en) Display device and method of controlling the same
WO2013125921A1 (en) Method and apparatus for controlling screen by tracking head of user through camera module, and computer-readable recording medium therefor
CN101714060A (zh) 配置便携式终端的空闲屏幕的方法和设备
CN103329061A (zh) 使用姿势查看堆栈化的屏幕显示的方法和系统
WO2012153992A2 (en) Method and apparatus for controlling display of item
CN104205857A (zh) 信息处理设备、信息处理方法和程序
WO2011048901A1 (ja) 会議支援システム
CN103262010A (zh) 通过利用手势来移动逻辑显示堆栈的桌面显露
CN103329060A (zh) 用于操纵一个或多个设备显示区上的呈现的姿势捕获
CN103729054A (zh) 多显示设备及其控制方法
WO2014107005A1 (en) Mouse function provision method and terminal implementing the same
AU2014312481A1 (en) Display apparatus, portable device and screen display methods thereof
WO2013085333A1 (en) Method and apparatus for providing three-dimensional user interface in an electronic device
WO2016080596A1 (ko) 프로토타이핑 툴을 제공하기 위한 방법, 시스템 및 비일시성의 컴퓨터 판독 가능한 기록 매체
CN109857876A (zh) 一种信息显示方法及终端设备
WO2020238357A1 (zh) 图标显示方法及终端设备
WO2013125785A1 (en) Task performing method, system and computer-readable recording medium

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 10819050

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase in:

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 10819050

Country of ref document: EP

Kind code of ref document: A2