WO2017065535A1 - 전자 장치 및 그 제어 방법 - Google Patents

전자 장치 및 그 제어 방법 Download PDF

Info

Publication number
WO2017065535A1
WO2017065535A1 PCT/KR2016/011510 KR2016011510W WO2017065535A1 WO 2017065535 A1 WO2017065535 A1 WO 2017065535A1 KR 2016011510 W KR2016011510 W KR 2016011510W WO 2017065535 A1 WO2017065535 A1 WO 2017065535A1
Authority
WO
WIPO (PCT)
Prior art keywords
viewing angle
distance
virtual
user
electronic device
Prior art date
Application number
PCT/KR2016/011510
Other languages
English (en)
French (fr)
Inventor
진경신
Original Assignee
삼성전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자 주식회사 filed Critical 삼성전자 주식회사
Priority to CN201680031737.7A priority Critical patent/CN107637076B/zh
Priority to US15/741,088 priority patent/US10422996B2/en
Priority to EP16855752.8A priority patent/EP3293973A4/en
Publication of WO2017065535A1 publication Critical patent/WO2017065535A1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B27/0172—Head mounted characterised by optical features
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G06T15/10—Geometric effects
    • G06T15/20—Perspective computation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02—Services making use of location information
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0123—Head-up displays characterised by optical features comprising devices increasing the field of view

Definitions

  • the present invention relates to an electronic device and a control method thereof, and more particularly, to an electronic device providing a VR service and a control method thereof.
  • VR Virtual Reality
  • CG computer graphic
  • the present invention is directed to the above-described needs, and an object of the present invention is to provide an electronic device and a control method for providing VR content having a virtual viewing angle corresponding to a distance between a user and the electronic device.
  • An electronic device for achieving the above object, to detect the distance between at least one of a display user for displaying virtual reality (VR) content and a terminal device provided by the user and the electronic device;
  • a processor for determining a virtual field of view corresponding to a sensing unit and a distance sensed by the sensing unit, and controlling the display to display a screen including a VR content area corresponding to the virtual viewing angle.
  • the processor increases the virtual viewing angle when the detected distance is greater than the previously detected distance, and the detected distance is previously sensed. In the case of a decrease in distance, the virtual viewing angle can be reduced.
  • the processor decreases the virtual viewing angle, and the detected distance is previously sensed. If it is less than the given distance, the virtual viewing angle can be increased.
  • the processor may change the virtual viewing angle by a preset ratio corresponding to the changed distance as the detected distance is changed, and display the screen including the VR content area corresponding to the changed virtual viewing angle. You can control the display.
  • the processor may change the preset ratio according to at least one of an event in which a user command is input, an event in which a specific type of content is input, and an event in which the detected distance satisfies a preset threshold distance. Can be.
  • the processor may operate in a view changing mode for changing the virtual viewing angle according to the sensed distance or in a fixed view mode for maintaining the virtual viewing angle regardless of the detected distance.
  • the sensing unit may be implemented by at least one of a camera, an RF sensor, an ultrasonic sensor, a laser sensor, and an infrared sensor.
  • the processor may extract and display a screen including a content area corresponding to the virtual viewing angle from the VR content in which the content is projected in the virtual stereoscopic space.
  • the processor may determine a virtual viewing angle corresponding to a distance to a preset user or an average distance of the plurality of users when the plurality of users are detected by the sensing unit.
  • the electronic device may include a display for displaying VR (Virtual Reality) content and a sensing unit configured to sense a distance between the electronic device and at least one of a user and a terminal device provided by the user.
  • VR Virtual Reality
  • the method when the virtual viewing angle is the viewing angle of the user reference, when the detected distance is increased than the previously detected distance, the virtual viewing angle is increased, and the detected distance is previously sensed. If it is less than a predetermined distance, the method may further include reducing the virtual viewing angle.
  • the control method may further include reducing the virtual viewing angle when the virtual viewing angle is a viewing angle based on an electronic device, and when the detected distance is greater than a previously detected distance, and detecting the previously detected distance. If it is less than the predetermined distance, the method may further include increasing the virtual viewing angle.
  • the control method may be configured to change the virtual viewing angle by a preset ratio corresponding to the changed distance as the detected distance is changed, and to display a screen including a VR content area corresponding to the changed virtual viewing angle. It may further comprise the step.
  • the control method may include changing and applying the preset ratio according to at least one of an event in which a user command is input, an event in which a specific type of content is input, and an event in which the detected distance satisfies a preset threshold distance. It may further comprise a step.
  • the control method may further include operating in a view changing mode for changing the virtual viewing angle according to the sensed distance or in a fixed view mode for maintaining the virtual viewing angle regardless of the sensed distance.
  • the sensing unit may be implemented by at least one of a camera, an RF sensor, an ultrasonic sensor, a laser sensor, and an infrared sensor.
  • the control method may further include extracting and displaying a screen including a content area corresponding to the virtual viewing angle from the VR content in which the content is projected in the virtual stereoscopic space.
  • the control method may further include determining a virtual viewing angle corresponding to a distance to a preset user or an average distance of the plurality of users when the plurality of users are detected by the sensing unit. It may include.
  • a VR content having a virtual viewing angle corresponding to a distance between a user and an electronic device may be provided to provide a user with an optimal immersion.
  • FIG 1A and 1B illustrate an embodiment of an electronic device according to an embodiment of the present disclosure.
  • FIG. 2 is a block diagram illustrating a configuration of an electronic device according to an embodiment of the present disclosure.
  • FIG. 3 is a diagram illustrating a GUI for changing a preset ratio according to an embodiment of the present invention.
  • 4A and 4B are diagrams for describing a change of a virtual viewing angle in the case of a user reference according to an embodiment of the present invention.
  • 5A and 5B are diagrams for describing a change of a virtual viewing angle in the case of a display device reference according to an embodiment of the present invention.
  • FIG. 6 is a flowchart illustrating a process of changing a virtual viewing angle according to a sensed distance according to an embodiment of the present invention.
  • FIG. 7 is a block diagram illustrating a detailed configuration of an electronic device according to another embodiment of the present disclosure.
  • FIG. 8 is a flowchart illustrating a control method of an electronic device according to an embodiment of the present disclosure.
  • FIG. 1A and 1B illustrate an embodiment of an electronic device 100 according to an embodiment of the present disclosure.
  • the VR device that is, the electronic device 100, according to an embodiment of the present disclosure may be implemented as a general display device 100.
  • the display apparatus 100 may determine the virtual field of view by measuring the distance between the display apparatus 100 and the user 10 using various distance measuring methods.
  • the viewing angle refers to a range of human vision
  • the virtual viewing angle refers to a preset viewing angle corresponding to the distance between the electronic device 100 and the user 10 in order to provide a spatial sense to the user 10. it means. Since the maximum viewing angle of the person usually corresponds to 100 degrees to 120 degrees, the maximum range of the virtual viewing angle may also be set to 100 degrees to 120 degrees.
  • the display apparatus 100 may display the VR content of the first virtual viewing angle region corresponding to the distance A.
  • FIG. 1B when the distance between the display apparatus 100 and the user 10 becomes A to B (B> A), the display apparatus 100 has a second virtual value having a larger value than the first virtual viewing angle. VR content of the viewing angle area may be displayed.
  • VR may be a concept including augmented reality that shows information in three dimensions by superimposing information on a screen.
  • the electronic device 100 may operate in an organically coupled device such as a remote controller, a game console, and 3D glasses.
  • the electronic device 100 may be in various forms such as a TV, a monitor, a mobile phone, a PDA, an electronic dictionary, an MP3, a PMP, a tablet PC, and the like.
  • the electronic device 100 may detect a distance between the electronic device 100 and the user 10, change the virtual viewing angle based on the detected distance, and apply the changed viewing angle to the VR content to display the same.
  • FIG. 2 is a block diagram illustrating a configuration of an electronic device 100 according to an embodiment of the present disclosure.
  • the electronic device 100 includes a display 100, a detector 120, and a processor 130.
  • the electronic device 100 may receive VR content from the outside or generate VR content based on data input from the outside.
  • the display 110 displays VR content.
  • the VR content may be a general two-dimensional image, but is not limited thereto, and may be a 3D image including a left eye and a right eye image for providing a VR service, or a panorama VR content.
  • the display 100 may display VR content to which a virtual viewing angle corresponding to a distance between the electronic device 100 and the user 10 is applied under the control of the processor 130 to be described later.
  • the detector 120 detects a distance between the electronic device 100 and at least one of the user 10 and the terminal device provided by the user 10.
  • the detector 120 may detect a distance between the electronic device 100 and the user 10.
  • a point serving as a reference for detecting the distance between the electronic device 100 and the user 10 may vary.
  • the reference point is, in the electronic device 100, a display 100, a bezel part (not shown), a supporting part (not shown), a sensing part 120, and the like, which are a part of the electronic device 100.
  • the user 10 may be any body part or the whole body of the user 10.
  • the sensing unit 120 may transmit the distance information, which detects the reference point, to the processor 130. In this case, when there are a plurality of users 10, the sensing unit 120 may transmit sensing information of some users or sensing information of all users to the processor 130 among distance information detected by the plurality of users.
  • the sensing unit 120 may detect the distance between the electronic device 100 and the terminal device provided by the user 10.
  • the terminal device provided by the user 10 may be various terminal devices such as a remote controller for controlling the display device, a joystick for manipulating a game, a mobile phone, and the like.
  • the detector 120 may indirectly detect the user 10 by detecting a terminal device provided by the user 10.
  • the detector 120 may be implemented by at least one of a camera, an RF sensor, an ultrasonic sensor, a laser sensor, and an infrared sensor.
  • the camera may photograph at least one of the user 10 and a terminal device provided by the user 10.
  • the processor 130 which will be described later, may perform a process of determining a relationship between an internal parameter of the camera, a camera coordinate system, and an external parameter. After this process, the processor 130 may measure the distance by extracting the user 10 or the terminal device provided by the user 10 from a plurality of video images. Here, there may be two or more cameras, and in this case, the processor 130 may receive an image from two or more cameras at the same time and measure a distance through matching between the images.
  • the camera may be provided at a portion of the electronic device 100 or at a position spaced apart from the electronic device 100 through an extension line.
  • the RF sensor measures distance using RF (Radio Frequency).
  • the RF sensor emits electromagnetic waves corresponding to microwaves (usually 1 MHz or more) to a user device 10 or a terminal device provided by the user 10.
  • microwaves usually 1 MHz or more
  • the RF sensor By receiving the microwaves reflected back to the user device 10 or the terminal device provided by the user 10, it is possible to measure the time after the microwaves are emitted and reflected back to the RF sensor.
  • the ultrasonic sensor measures the distance using ultrasonic waves.
  • the ultrasonic (ultra sonic) refers to a sound of 20 kHz or more that cannot be heard by the human ear.
  • the ultrasonic sensor generates and emits ultrasonic waves using a piezoelectric element (a device in which a voltage is generated when a mechanical pressure is applied and a mechanical change is generated when a voltage is applied).
  • the ultrasonic sensor may measure a time when the ultrasonic wave is reflected by the user 10 or the terminal device provided by the user 10 and returns.
  • the laser sensor measures the distance using a laser.
  • the laser sensor emits and detects a laser using a laser transmitter and a laser receiver.
  • the laser sensor may emit a laser pulse signal to measure a time when the reflected pulse signals from the user 10 or a terminal provided by the user 10 within the measurement range arrive at the laser receiver.
  • the laser sensor emits a laser beam that is continuously modulated with a particular frequency and measures the amount of phase change in the signal reflected back from the user 10 or a terminal provided by the user 10 within the measurement range and time And distance can be measured.
  • the infrared sensor measures the distance using infrared rays (wavelengths of 900 nm or more).
  • the infrared sensor emits an infrared signal, and measures the amount of infrared rays reflected by the emitted infrared signal to the user 10 or the terminal device provided by the user 10.
  • the infrared sensor may measure the distance by using a correlation in which the amount of reflection of the infrared light is inversely proportional to the square of the distance.
  • the above-described distance measuring method may be measured using various known sensing technologies as well as a camera, an RF sensor, an ultrasonic sensor, a laser sensor, and an infrared sensor.
  • the distance is measured by the camera, the RF sensor, the ultrasonic sensor, the laser sensor, and the infrared sensor itself.
  • the camera, the RF sensor, the ultrasonic sensor, the laser sensor, and the infrared sensor use data for measuring the distance.
  • the processor 130 may process the collected data and measure the distance.
  • the processor 130 which will be described later, is configured by the processor 130 when a plurality of users are detected by the sensing unit.
  • the virtual viewing angle corresponding to the distance to the user or the average distance of the plurality of users may be determined.
  • the preset user may be set as the nearest person or the largest person among the plurality of users, and the average distance of the plurality of users may be an average of the distances of some of the plurality of users.
  • the detector 120 may detect the up, down, left, and right movements of the terminal provided by the user 10.
  • the sensing unit 120 may further include a sensor having a function of identifying a position according to vertical, horizontal, left and right movement of the terminal provided by the user 10, such as a radar RADAR.
  • the processor 130 which will be described later, may move and display the VR content area up, down, left, and right corresponding to the up, down, left, and right positions of the terminal provided by the user 10 detected by the sensing unit 120.
  • the processor 130 controls the overall operation of the electronic device 100.
  • the processor 130 may determine a virtual field of view corresponding to the distance sensed by the sensor 120.
  • the processor 130 may use a table in which a virtual viewing angle that matches the detected distance is recorded.
  • the processor 130 may receive a distance between the electronic device 100 and the user 10 received through the sensor 120. In this case, when the received distance is 2 m, the processor 130 may determine a virtual viewing angle corresponding to the distance 2 m by 90 degrees with reference to the table.
  • the type matching the detected distance has been described as a virtual viewing angle, but the type matching the detected distance may be a coordinate value in VR space.
  • the processor 130 may control the display 110 to display a screen including the VR content area corresponding to the virtual viewing angle.
  • the processor 130 may control to extract and display a screen including a content area corresponding to the virtual viewing angle from the VR content in which the content is projected in the virtual stereoscopic space.
  • the processor 130 may update the coordinates of the content area corresponding to the updated virtual viewing angle.
  • the processor 130 may increase or decrease a coordinate value matching the content area according to the ratio of the change amount of the virtual viewing angle.
  • the coordinate value may be in pixel units.
  • the processor 130 may also change the virtual viewing angle.
  • the processor 130 changes the virtual viewing angle by a preset ratio corresponding to the changed distance as the detected distance is changed, and displays a screen including a VR content area corresponding to the changed virtual viewing angle. 110 can be controlled.
  • the processor 130 changes the preset ratio according to at least one of an event in which a user 10 command is input, an event in which a specific type of content is input, and an event in which the detected distance satisfies a preset threshold distance.
  • the predetermined ratio refers to a ratio for increasing or decreasing the virtual viewing angle according to the increase or decrease of the detected distance.
  • the processor 130 may change and apply a preset ratio according to an event in which the user 10 command is input. This will be described with reference to FIG. 3.
  • FIG. 3 is a diagram illustrating a GUI for changing a preset ratio according to an embodiment of the present invention.
  • the processor 130 outputs a graphical user interface (GUI) for adjusting a preset ratio to the display 110.
  • GUI graphical user interface
  • the GUI 310 for adjusting the preset ratio includes an adjustment GUI 311 capable of moving in the vertical direction by the user 10.
  • the preset ratio is increased when the adjustment GUI 311 is moved upward from the previous position, and the preset ratio is decreased when the adjustment GUI 311 is moved downward from the previous position.
  • the predetermined ratio increases, the ratio of the virtual viewing angle that increases or decreases increases as the sensed distance increases. Also, if the preset ratio decreases, the ratio of the virtual viewing angle that increases or decreases increases as the sensed distance decreases.
  • GUI is only an example, and the GUI may be implemented in various forms in order to receive an input for adjusting a preset ratio from a user.
  • the processor 130 may change and apply a preset ratio according to an event in which a specific type of content is input.
  • the processor 130 sets the preset ratio to a large value, The rate of change of the size of the virtual viewing angle corresponding to the change of the distance between the device 100 and the user 10 or the terminal device provided by the user 10 may be increased.
  • the processor 130 sets the preset ratio to be small so that the ratio of the change of the size of the virtual viewing angle corresponding to the change of the distance between the electronic device 100 and the user 10 or the terminal device provided by the user 10 is changed. Can be reduced.
  • the processor 130 may change and apply the preset ratio according to an event in which the sensed distance satisfies the preset threshold distance.
  • the processor 130 may reduce the preset ratio at which the virtual viewing angle is changed in response to the change of the detected distance.
  • the processor 130 may stop increasing or decreasing the virtual viewing angle.
  • the processor 130 may increase or decrease the virtual viewing angle or decrease or increase the virtual viewing angle according to the detected distance. This will be described in detail with reference to FIGS. 4A and 4B.
  • 4A and 4B are diagrams for describing a change of a virtual viewing angle when the user 10 is a reference according to an embodiment of the present invention.
  • the VR content includes images of all regions in a 3D space. Therefore, when the user 10 views a region of VR content through the display 110 of the electronic device 100, the user 10 may have one region 420 of the sphere 410 inside the sphere 410. It can be assumed to be the same as looking at.
  • one region 420 of the sphere 410 is one wall
  • the user 10 when the user 10 is located at the distance C, and moves to the position of the distance D (here, C> D), the user ( 10) corresponds to moving closer to the wall.
  • the wall is close to the user 10, the field of view of the user 10 is reduced.
  • the processor 130 increases the virtual viewing angle when the detected distance is greater than the previously detected distance, and the detected distance is previously sensed. In the case of a decrease in distance, the virtual viewing angle can be reduced.
  • 5A and 5B are diagrams for describing a change of a virtual viewing angle when the display apparatus 100 is a reference according to an embodiment of the present disclosure.
  • 5A and 5B illustrate changes in viewing angles when the electronic device 100 is a reference.
  • the user 10 may move the sphere through the window, that is, the electronic device 100 at a position away from the electronic device 100 by a distance E. Looking at one area 530 of 510.
  • the user 10 is located in an area away from the electronic device 100. That is, the user 10 moves to a position closer to the electronic device 100 than in FIG. 5A (where E> F).
  • the user 10 looks at the area 520 of the sphere 510 through the window, that is, the electronic device 100. As such, when the user 10 approaches the electronic device 100, the field of view of the user 10 increases.
  • the processor 130 decreases the virtual viewing angle and the detected distance is larger than the previously detected distance. If decreasing, it is also possible to increase the virtual viewing angle.
  • FIG. 6 is a flowchart illustrating a process of changing a virtual viewing angle according to a sensed distance according to an embodiment of the present invention.
  • VR content may be input to the electronic device 100 (S610).
  • the processor 130 may of course generate VR content by receiving data from the outside.
  • the processor 130 sets an initial value for the virtual viewing angle (S620).
  • the initial value may be a virtual viewing angle corresponding to the type of VR content, or may be a viewing angle corresponding to the distance of the user at the time of setting the initial value.
  • the processor 130 determines whether to fix the virtual viewing angle (S630).
  • the processor 130 may determine whether to fix the viewing angle according to the type of VR content, or may determine whether to fix the viewing angle by receiving the input of the user 10.
  • the processor 130 may operate in a view changing mode for changing the virtual viewing angle according to the sensed distance or in a fixed view mode for maintaining the virtual viewing angle regardless of the detected distance.
  • the processor 130 controls the display 110 to display the VR content. If it is determined that the virtual viewing angle is not fixed (N), a rate at which the virtual viewing angle is changed may be set in response to the detected distance change (S640).
  • the processor may determine the ratio according to the type of the VR content or may determine the ratio by receiving the input of the user 10.
  • the processor 130 uses the sensor 120 to determine the distance between the electronic device 100 and the user or the terminal device provided by the user. Can be measured (S650).
  • the processor 130 may change the virtual viewing angle based on the detected distance (S660). Thereafter, the processor 130 may control the display 110 to display the VR content area to which the changed virtual viewing angle is applied (S670).
  • the processor 130 may update the virtual viewing angle by detecting the distance between the electronic device 100 and the user or the terminal device provided by the user at predetermined time intervals.
  • FIG. 7 is a block diagram illustrating a detailed configuration of an electronic device 100 ′ according to another embodiment of the present disclosure.
  • the electronic device 100 ′ includes a display 110, a detector 120, a controller 130, a storage 140, and a communicator 150. Detailed description of parts overlapping with those shown in FIG. 2 among the elements shown in FIG. 7 will be omitted.
  • the display 110 displays VR content.
  • the display 110 may be implemented as a liquid crystal display panel (LCD), organic light emitting diodes (OLED), or the like, but is not limited thereto.
  • the display 110 may be implemented as a flexible display, a transparent display, or the like in some cases.
  • the smartphone when the smartphone is connected to use as a monitor, the display 110 may be implemented as a display of the smartphone, of course.
  • the detector 120 may detect the user 10 or a terminal device provided by the user 10.
  • the sensing unit 120 may be connected to a line extending from the electronic device 100 ′.
  • the operation of the processor 130 may be performed by a program stored in the storage 140.
  • the processor 130 may access the RAM 131, the ROM 132, the main CPU 133, the graphics processor 134, the first to n interfaces 135-1 to 135-n, and the bus 136. Include.
  • the RAM 131, the ROM 132, the main CPU 133, the graphics processor 134, the first to nth interfaces 135-1 to 135-n, and the like may be connected to each other through the bus 136.
  • the first to n interfaces 135-1 to 135-n are connected to the aforementioned various components.
  • One of the interfaces may be a network interface connected to an external device via a network.
  • the main CPU 133 accesses the storage 140 and performs booting using the operating system stored in the storage 140. In addition, various operations are performed using various programs, contents, data, etc. stored in the storage 140. For example, the main CPU 133 may determine a virtual viewing angle corresponding to the sensed distance by using a table stored in the storage 140.
  • the ROM 132 stores a command set for system booting.
  • the main CPU 133 copies the O / S stored in the storage 140 to the RAM 131 according to the command stored in the ROM 132 and executes O / S.
  • the main CPU 133 copies various application programs stored in the storage 140 to the RAM 131 and executes the application programs copied to the RAM 131 to perform various operations.
  • the graphic processor 134 generates a screen including various objects such as an icon, an image, and a text by using a calculator (not shown) and a renderer (not shown).
  • An operation unit (not shown) calculates attribute values such as coordinate values, shapes, sizes, colors, and the like in which objects are displayed according to the layout of the screen based on the received control command.
  • the renderer generates a screen having various layouts including objects based on the attribute values calculated by the calculator.
  • the storage 140 may store various data such as an operating system (O / S) software module for driving the electronic device 100 'and various multimedia contents.
  • O / S operating system
  • the storage unit 150 may store virtual viewing angle information corresponding to the detected distance according to an embodiment of the present invention.
  • the storage 140 may store data for generating a control signal corresponding to a user command input through various UI screens.
  • the communicator 150 communicates with an external device.
  • the communication unit 150 may be configured through various communication methods such as BT (BlueTooth), WI-FI (Wireless Fidelity), Zigbee, IR (Infrared), Serial Interface, Universal Serial Bus (USB), and Near Field Communication (NFC). Communicate with external devices.
  • the communicator 150 may receive VR content data from an external device.
  • the communication unit 150 may receive location information from a terminal provided by the user 10.
  • the terminal provided by the user 10 may include, for example, a gyro sensor.
  • the terminal provided by the user 10 may transmit location information corresponding to up, down, left, and right sides of the terminal provided by the user 10 sensed by the gyro sensor to the electronic device 100 ′.
  • the processor 130 may move and display the area of the VR content based on the location information of the terminal provided by the user 10. For example, when the location of the terminal provided by the user 10 is moved to the left, the processor 130 may move the area of the VR content to the left and display it.
  • the communication unit 150 may receive a signal corresponding to the input of the up, down, left, and right moving buttons of the terminal provided by the user 10 from the terminal provided by the user 10.
  • the processor 130 may move the area of the VR content to the left and display the same.
  • 100 ' may display all the top, bottom, left, and right areas of the VR content according to the input of the user 10, and faithfully provide the user 10 with the VR content experience.
  • FIG. 8 is a flowchart illustrating a control method of an electronic device according to an embodiment of the present disclosure.
  • a virtual field of view corresponding to a distance sensed by a sensing unit is determined (S810), and a virtual field of view is determined.
  • the display may be controlled to display a screen including a corresponding VR content area (S820).
  • the electronic device may be implemented in the form of a display for displaying VR (Virtual Reality) content, and a sensing unit for sensing a distance between at least one of the user and the terminal device provided by the user and the electronic device.
  • the control method may include: when the virtual viewing angle is a viewing angle based on a user, when the detected distance increases from a previously detected distance, increases the virtual viewing angle, and when the detected distance decreases from a previously detected distance, The method may further include reducing the virtual viewing angle.
  • control method may reduce the virtual viewing angle when the virtual viewing angle is the viewing angle based on the electronic device, and when the detected distance is greater than the previously detected distance, the detected distance is reduced by the previously detected distance. If so, the method may further include increasing the virtual viewing angle.
  • the control method may further include changing the virtual viewing angle by a preset ratio corresponding to the changed distance as the detected distance is changed, and controlling to display a screen including a VR content area corresponding to the changed virtual viewing angle. It may further include.
  • the control method may include changing and applying a preset ratio according to at least one of an event in which a user command is input, an event in which a specific type of content is input, and an event in which the detected distance satisfies a preset threshold distance. It may further include.
  • the control method may further include operating in a view changing mode for changing the virtual viewing angle according to the sensed distance or in a fixed view mode for maintaining the virtual viewing angle regardless of the sensed distance.
  • the sensing unit may be implemented by at least one of a camera, an RF sensor, an ultrasonic sensor, a laser sensor, and an infrared sensor.
  • the control method may further include extracting and displaying a screen including a content area corresponding to the virtual viewing angle from the VR content in which the content is projected in the virtual stereoscopic space.
  • the control method may further include determining a virtual viewing angle corresponding to a distance to a preset user or an average distance of the plurality of users when the plurality of users are detected by the detector. have.
  • the methods according to various embodiments of the present disclosure may be programmed and stored in various storage media. Accordingly, the methods according to the various embodiments of the present disclosure may be implemented in various types of electronic devices that execute a storage medium.
  • determining a virtual field of view corresponding to the distance detected by the sensing unit a screen including a VR content area corresponding to the virtual viewing angle
  • a non-transitory computer readable medium may be provided that stores a program that sequentially performs the step of controlling the display to display.
  • the non-transitory readable medium refers to a medium that stores data semi-permanently and is readable by a device, not a medium storing data for a short time such as a register, a cache, a memory, and the like.
  • a non-transitory readable medium such as a CD, a DVD, a hard disk, a Blu-ray disk, a USB, a memory card, a ROM, or the like.

Abstract

전자 장치가 개시된다. 전자 장치는, VR(Virtual Reality) 컨텐츠를 디스플레이하는 디스플레이, 사용자 및 상기 사용자가 구비한 단말 장치 중 적어도 하나와 상기 전자 장치 간 거리를 감지하는 감지부 및 상기 감지부에 의해 감지된 거리에 대응되는 가상의 시야각(Field of View)을 결정하고, 상기 가상의 시야각에 대응되는 VR 컨텐츠 영역을 포함하는 화면을 디스플레이하도록 상기 디스플레이를 제어하는 프로세서를 포함한다.

Description

전자 장치 및 그 제어 방법
본 발명은 전자 장치 및 그 제어 방법에 대한 것으로, 보다 상세하게는, VR 서비스를 제공하는 전자 장치 및 그 제어 방법에 대한 것이다.
일반적으로, VR(Virtual Reality: 가상 현실) 기술은 컴퓨터 그래픽(Computer Graphic, CG) 기술을 통하여 만들어진 실제 환경과 유사한 3차원 가상 환경 내에서 인체의 모든 감각(시각, 청각, 후각, 미각, 촉각)이 상호 작용하여 가상으로 창조한 세계에 몰입되게 함으로써 참여자에게 가상 공간을 3차원적으로 재현하고 인간을 이 가상 공간에 몰입시킴으로써 정보의 활용을 극대화하는 것을 궁극적 목표로 하는 기술을 말한다.
근래에는, VR 기술이 구현된 VR 컨텐츠의 개발뿐만 아니라, VR 컨텐츠를 제공하기 위한 다양한 전자 기기가 개발되고 있다.
　그러나, 이러한 VR 컨텐츠를 제공하기 위해서는 VR 컨텐츠 재생에 특화된 전용 기기를 구비하여야만 하는 단점이 있었다.
따라서, 기존의 TV, 모니터 등으로 VR 컨텐츠를 경험하기 위한 방안의 모색이 요청되었다.
본 발명은 상술한 필요성에 따른 것으로, 본 발명의 목적은, 사용자 및 전자 장치 간 거리에 대응하는 가상의 시야각을 가지는 VR 컨텐츠를 제공하는 전자 장치 및 그 제어 방법을 제공함에 있다.
상술한 목적을 달성하기 위한 본 발명의 일 실시 예에 따른 전자 장치는, VR(Virtual Reality) 컨텐츠를 디스플레이하는 디스플레이 사용자 및 상기 사용자가 구비한 단말 장치 중 적어도 하나와 상기 전자 장치 간 거리를 감지하는 감지부 및 상기 감지부에 의해 감지된 거리에 대응되는 가상의 시야각(Field of View)을 결정하고, 상기 가상의 시야각에 대응되는 VR 컨텐츠 영역을 포함하는 화면을 디스플레이하도록 상기 디스플레이를 제어하는 프로세서를 포함한다.
여기서, 상기 프로세서는, 상기 가상의 시야각이 상기 사용자 기준의 시야각인 경우, 상기 감지된 거리가 이전에 감지된 거리보다 증가하는 경우, 상기 가상의 시야각을 증가시키고, 상기 감지된 거리가 이전에 감지된 거리보다 감소하는 경우, 상기 가상의 시야각을 감소시킬 수 있다.
또한, 상기 프로세서는, 상기 가상의 시야각이 전자 장치 기준의 시야각인 경우, 상기 감지된 거리가 이전에 감지된 거리보다 증가하는 경우, 상기 가상의 시야각을 감소시키고, 상기 감지된 거리가 이전에 감지된 거리보다 감소하는 경우, 상기 가상의 시야각을 증가시킬 수 있다.
또한, 상기 프로세서는, 상기 감지된 거리가 변경됨에 따라 상기 가상의 시야각을 변경된 거리에 대응되는 기설정된 비율만큼 변경하고, 상기 변경된 가상의 시야각에 대응되는 VR 컨텐츠 영역을 포함하는 화면을 디스플레이하도록 상기 디스플레이를 제어할 수 있다.
또한, 상기 프로세서는, 사용자 명령이 입력되는 이벤트, 특정 타입의 컨텐츠가 입력되는 이벤트, 및 상기 감지된 거리가 기설정된 임계 거리를 만족하는 이벤트 중 적어도 하나에 따라 상기 기설정된 비율을 변경하여 적용할 수 있다.
또한, 상기 프로세서는, 상기 감지된 거리에 따라 상기 가상 시야각을 변경하는 시야 변경 모드 또는 상기 가상 시야각을 상기 감지된 거리에 관계없이 유지시키는 시야 고정 모드로 동작할 수 있다.
여기서, 상기 감지부는, 카메라, RF 센서, 초음파 센서, 레이저 센서, 적외선 센서 중 적어도 하나로 구현될 수 있다.
또한, 상기 프로세서는, 가상의 입체 공간에 컨텐츠가 투영된 상기 VR 컨텐츠에서 상기 가상의 시야각에 대응되는 컨텐츠 영역을 포함하는 화면을 추출하여 디스플레이할 수 있다.
　또한, 상기 프로세서는, 상기 감지부에 의해 복수의 사용자가 검출되는 경우, 상기 복수의 사용자 중 기설정된 사용자와의 거리 또는 상기 복수의 사용자의 평균 거리에 대응되는 가상의 시야각을 결정할 수 있다.
한편, 본 발명의 일 실시 예에 따른 전자 장치의 제어 방법에 있어서, 상기 감지부에 의해 감지된 거리에 대응되는 가상의 시야각(Field of View)을 결정하는 단계 및 상기 가상의 시야각에 대응되는 VR 컨텐츠 영역을 포함하는 화면을 디스플레이하도록 상기 디스플레이를 제어하는 단계를 포함한다. 이 경우, 전자 장치는, VR(Virtual Reality) 컨텐츠를 디스플레이하는 디스플레이 및 사용자 및 상기 사용자가 구비한 단말 장치 중 적어도 하나와 상기 전자 장치 간 거리를 감지하는 감지부를 구비할 수 있다.
여기서, 제어 방법은, 상기 가상의 시야각이 상기 사용자 기준의 시야각인 경우, 상기 감지된 거리가 이전에 감지된 거리보다 증가하는 경우, 상기 가상의 시야각을 증가시키고, 상기 감지된 거리가 이전에 감지된 거리보다 감소하는 경우, 상기 가상의 시야각을 감소시키는 단계를 더 포함할 수 있다.
또한, 제어 방법은, 상기 가상의 시야각이 전자 장치 기준의 시야각인 경우, 상기 감지된 거리가 이전에 감지된 거리보다 증가하는 경우, 상기 가상의 시야각을 감소시키고, 상기 감지된 거리가 이전에 감지된 거리보다 감소하는 경우, 상기 가상의 시야각을 증가시키는 단계를 더 포함할 수 있다.
또한, 제어 방법은, 상기 감지된 거리가 변경됨에 따라 상기 가상의 시야각을 변경된 거리에 대응되는 기설정된 비율만큼 변경하고, 상기 변경된 가상의 시야각에 대응되는 VR 컨텐츠 영역을 포함하는 화면을 디스플레이하도록 제어하는 단계를 더 포함할 수 있다.
또한, 제어 방법은, 사용자 명령이 입력되는 이벤트, 특정 타입의 컨텐츠가 입력되는 이벤트, 및 상기 감지된 거리가 기설정된 임계 거리를 만족하는 이벤트 중 적어도 하나에 따라 상기 기설정된 비율을 변경하여 적용하는 단계를 더 포함할 수 있다.
또한, 제어 방법은, 상기 감지된 거리에 따라 상기 가상 시야각을 변경하는 시야 변경 모드 또는 상기 가상 시야각을 상기 감지된 거리에 관계없이 유지시키는 시야 고정 모드로 동작하는 단계를 더 포함할 수 있다.
여기서, 상기 감지부는, 카메라, RF 센서, 초음파 센서, 레이저 센서, 적외선 센서 중 적어도 하나로 구현될 수 있다.
또한, 제어 방법은, 가상의 입체 공간에 컨텐츠가 투영된 상기 VR 컨텐츠에서 상기 가상의 시야각에 대응되는 컨텐츠 영역을 포함하는 화면을 추출하여 디스플레이하는 단계를 더 포함할 수 있다.
또한, 제어 방법은, 상기 감지부에 의해 복수의 사용자가 검출되는 경우, 상기 복수의 사용자 중 기설정된 사용자와의 거리 또는 상기 복수의 사용자의 평균 거리에 대응되는 가상의 시야각을 결정하는 단계를 더 포함할 수 있다.
상술한 바와 같이 본 발명의 다양한 실시 예에 따르면 사용자 및 전자 장치 간 거리에 대응하는 가상의 시야각을 가지는 VR 컨텐츠를 제공하여 사용자로 하여금 최적의 몰입감을 제공할 수 있다.
도 1a 및 도 1b는 본 발명의 일 실시 예에 따른 전자 장치의 일 구현 예를 나타내는 도면이다.
도 2는 본 발명의 일 실시 예에 따른 전자 장치의 구성을 설명하기 위한 블록도이다.
도 3은 본 발명의 일 실시 예에 따른 기설정된 비율을 변경하는 GUI를 도시한 도면이다.
도 4a 및 도 4b는 본 발명의 일 실시 예에 따른 사용자 기준인 경우의 가상의 시야각의 변경을 설명하기 위한 도면이다.
도 5a 및 도 5b는 본 발명의 일 실시 예에 따른 디스플레이 장치 기준인 경우의 가상의 시야각의 변경을 설명하기 위한 도면이다.
도 6은 본 발명의 일 실시 예에 따른 감지된 거리에 따른 가상 시야각이 변경되는 과정을 설명하기 위한 흐름도이다.
도 7은 본 발명의 다른 실시 예에 따른 전자 장치의 세부 구성을 나타내는 블록도이다.
도 8은 본 발명의 일 실시 예에 따른 전자 장치의 제어 방법을 설명하기 위한 흐름도이다.
-
이하 첨부된 도면들을 참조하여 본 발명의 일 실시 예를 보다 상세하게 설명한다.
도 1a 및 도 1b는 본 발명의 일 실시 예에 따른 전자 장치(100)의 일 구현 예를 나타내는 도면이다.
도 1a 및 도 1b에 따르면, 본 발명의 일 실시 예에 따른 VR 기기 즉, 전자 장치(100)는 일반적인 디스플레이 장치(100)로 구현될 수 있다.
구체적으로, 디스플레이 장치(100)는 다양한 거리 측정 방법으로 디스플레이 장치(100) 및 사용자(10)의 거리를 측정하여, 가상의 시야각(Field of View)을 결정할 수 있다. 여기서, 시야각이란 사람의 시력이 미치는 범위를 말하는 것이고, 가상의 시야각이란, 사용자(10)에게 공간감각을 제공하기 위하여, 전자 장치(100) 및 사용자(10) 간 거리에 대응되도록 기설정된 시야각을 의미한다. 사람의 최대 시야각은 보통 100도 내지 120도에 해당하므로, 가상 시야각의 최대 범위도 100도 내지 120도로 설정될 수 있다.
예를 들어, 도 1a에서와같이, 디스플레이 장치(100)와 사용자(10) 간 거리가 A인 경우, 디스플레이 장치(100)는 거리 A에 대응되는 제1 가상 시야각 영역의 VR 컨텐츠를 디스플레이할 수 있다. 한편, 도 1b와 같이, 디스플레이 장치(100)와 사용자(10) 간 거리가 A에서 B가 되는 경우(B>A), 디스플레이 장치(100)는 제1 가상 시야각 보다 큰 값을 가지는 제2 가상 시야각 영역의 VR 컨텐츠를 디스플레이할 수 있다.
여기서, VR은 넓게는 정보를 화면 등에 겹쳐 3차원으로 보여주는 증강현실(Augmented Reality)까지 포함하는 개념이 될 수 있다.
또한, 전자 장치(100)는 리모컨, 게임 콘솔, 3D 안경 등의 디바이스와 유기적으로 결합되어 동작할 수 있다. 이 경우, 전자 장치(100)는 TV, 모니터, 휴대폰, PDA, 전자 사전, MP3, PMP, 태블릿 PC 등 다양한 형태가 될 수 있음은 물론이다.
한편, 전자 장치(100)는 전자 장치(100)와 사용자(10) 간 거리를 감지하여, 감지된 거리에 기초하여 가상 시야각을 변경하고, 변경된 시야각을 VR 컨텐츠에 적용하여 디스플레이할 수 있는데, 이하에서는 도면을 참조하여 본 발명에 대하여 자세히 설명하도록 한다.
도 2는 본 발명의 일 실시 예에 따른 전자 장치(100)의 구성을 설명하기 위한 블록도이다.
도 2에 따르면, 본 발명의 일 실시 예에 따른 전자 장치(100)는 디스플레이(100), 감지부(120) 및 프로세서(130)로 구성된다. 여기서, 전자 장치(100)는 VR 컨텐츠를 외부에서 입력받거나, 외부에서 입력된 데이터에 기초하여 VR 컨텐츠를 생성할 수도 있다.
디스플레이(110)는 VR 컨텐츠를 디스플레이한다. 여기서 VR 컨텐츠는 일반 2차원 영상일 수 있으나, 여기에 한정되는 것은 아니며, VR 서비스 제공을 위한 좌안 및 우안 영상을 포함하는 3D 영상이나, 파노라마 VR 컨텐츠가 될 수도 있다
또한, 디스플레이(100)는 후술하는 프로세서(130)의 제어에 의해, 전자 장치(100) 및 사용자(10) 간 거리에 대응되는 가상의 시야각이 적용된 VR 컨텐츠를 디스플레이할 수 있다.
감지부(120)는 사용자(10) 및 사용자(10)가 구비한 단말 장치 중 적어도 하나와 전자 장치(100) 간 거리를 감지한다.
구체적으로, 감지부(120)는 전자 장치(100) 및 사용자(10) 간 거리를 감지할 수 있다. 여기서, 전자 장치(100) 및 사용자(10) 간 거리 감지를 위해 기준이 되는 지점은 다양할 수 있다. 예를 들면, 기준이 되는 지점은, 전자 장치(100)에서는, 전자 장치(100)의 일부분인 디스플레이(100), 베젤부(미도시), 받침부(미도시), 감지부(120) 등이 될 수 있고, 사용자(10)에서는 사용자(10)의 모든 신체 부위나 신체 전체가 될 수 있다. 감지부(120)는 기준이 되는 지점을 감지한 거리 정보를 프로세서(130)에 전달할 수 있다. 여기서, 사용자(10)가 복수인 경우에는, 감지부(120)는 복수의 사용자로부터 감지된 거리 정보 중 일부 사용자에 대한 감지 정보 내지 전부 사용자에 대한 감지 정보를 프로세서(130)에게 전달할 수도 있다.
한편, 감지부(120) 전자 장치(100) 및 사용자(10)가 구비한 단말 장치의 거리를 감지할 수도 있다.
여기서, 사용자(10)가 구비한 단말 장치는 디스플레이 장치를 제어하는 리모트 컨트롤러, 게임을 조작하기 위한 조이스틱, 휴대폰 등 다양한 단말 장치일 수 있다. 감지부(120)는 사용자(10)가 구비한 단말 장치를 감지함으로써 사용자(10)를 간접적으로 감지할 수 있다.
한편, 감지부(120)는 카메라, RF 센서, 초음파 센서, 레이저 센서, 적외선 센서 중 적어도 하나로 구현될 수 있다.
카메라는 사용자(10) 및 사용자(10)가 구비한 단말 장치 중 적어도 하나를 촬영할 수 있다. 후술할 프로세서(130)는 카메라 내부 파라미터(intrinsic parameter), 카메라 좌표계 및 카메라 외부의 좌표계 사이의 관계(extrinsic parameter)를 결정하는 과정(camera calibration)을 수행할 수 있다. 이러한 과정을 거친 후, 프로세서(130)는 여러 장의 영상 이미지로부터 사용자(10) 또는 사용자(10)가 구비한 단말 장치를 추출하여 거리를 측정할 수 있다. 여기서, 카메라는 두 대 이상일 수 있고, 이때, 프로세서(130)는 두 대 이상의 카메라로부터 동시에 영상을 받아들여 영상 간의 매칭을 통해 거리를 측정할 수도 있다. 한편, 카메라는 전자 장치(100)의 일부분에 구비되거나 연장선을 통해 전자 장치(100)와 이격된 위치에 구비될 수도 있다.
RF 센서는 RF(Radio Frequency)를 이용하여 거리를 측정한다. RF 센서는 마이크로파에 해당하는 전자기파(보통 1Mhz 이상)를 사용자(10) 또는 사용자(10)가 구비한 단말 장치로 발산시킨다. 사용자(10) 또는 사용자(10)가 구비한 단말 장치에 반사되어 돌아온 마이크로파를 수신하여, 마이크로파가 발산된 후 반사되어 RF 센서까지 돌아오는 시간 측정할 수 있다.
초음파 센서는 초음파를 이용하여 거리를 측정한다. 여기서, 초음파(Ultra Sonic)는 사람의 귀로 들을 수 없는 20Khz 대 이상의 음을 말한다. 초음파 센서는 압전 소자(기계적 압력을 인가하면 전압이 발생하고, 전압을 인가하면 기계적 변동이 발생되는 소자)를 이용하여 초음파를 생성하여 발산시킨다. 초음파 센서는 초음파가 사용자(10) 또는 사용자(10)가 구비한 단말 장치에 반사되어 돌아오는 시간을 측정할 수 있다.
레이저 센서는 레이저를 이용하여 거리를 측정한다. 레이저 센서는 레이저 송신부 및 레이저 수신부를 이용하여 레이저를 발산 및 검출한다. 레이저 센서는 레이저 펄스 신호를 방출하여 측정 범위 내에 있는 사용자(10) 또는 사용자(10)가 구비한 단말로부터의 반사 펄스 신호들이 레이저 수신부에 도착하는 시간을 측정할 수 있다. 다른 방식으로, 레이저 센서는 특정 주파수를 가지고 연속적으로 변조되는 레이저 빔을 방출하고 측정 범위 내에 있는 사용자(10) 또는 사용자(10)가 구비한 단말로부터 반사되어 되돌아오는 신호의 위상 변화량을 측정하여 시간 및 거리를 측정할 수 있다.
적외선 센서는 적외선(900nm 이상의 파장)을 이용하여 거리를 측정한다. 적외선 센서는 적외선 신호를 발산하고, 발산된 적외선 신호가 사용자(10) 또는 사용자(10)가 구비한 단말 장치에 반사되어 돌아오는 적외선의 양을 측정할 수 있다. 여기서, 적외선 센서는 적외선의 반사량이 거리 제곱에 반비례하는 상관관계를 이용하여 거리를 측정할 수 있다.
상술한 거리 측정 방법은 카메라, RF 센서, 초음파 센서, 레이저 센서, 적외선 센서뿐만 아니라 공지된 다양한 센싱 기술을 이용하여 측정될 수도 있다.
또한, 상술한 내용에서는 카메라, RF 센서, 초음파 센서, 레이저 센서, 적외선 센서 자체에서 거리가 측정되는 것으로 서술하였으나, 카메라, RF 센서, 초음파 센서, 레이저 센서, 적외선 센서에서는 거리를 측정하기 위한 데이터를 수집하고, 수집된 데이터를 프로세서(130)가 처리하여 거리를 측정하는 것도 가능함은 물론이다.
또한, 상술한 내용에서, 사용자(10)가 1인인 경우를 가정하였으나, 후술할 프로세서(130)는 상기 프로세서(130)는 감지부에 의해 복수의 사용자가 검출되는 경우, 복수의 사용자 중 기설정된 사용자와의 거리 또는 복수의 사용자의 평균 거리에 대응되는 가상의 시야각을 결정할 수 있다. 일 예로, 기설정된 사용자는 복수의 사용자 중 가장 가까운 사람 또는 가장 큰 사람으로 설정될 수 있고, 복수의 사용자의 평균 거리는 복수의 사용자 중 일부의 거리의 평균일 수도 있다.
한편, 감지부(120)는 사용자(10)가 구비한 단말의 상하좌우 움직임을 감지할 수도 있다. 이를 위해, 감지부(120)는 레이더(RADAR)와 같이, 사용자(10)가 구비한 단말의 상하좌우 이동에 따른 위치를 식별하는 기능을 가지는 센서를 더 구비할 수 있다. 여기서, 후술할 프로세서(130)는 감지부(120)에서 감지된 사용자(10)가 구비한 단말의 상하좌우 위치에 대응하여 VR 컨텐츠 영역을 상하좌우로 이동하여 디스플레이할 수 있다. 프로세서(130)는 전자 장치(100)의 전반적인 동작을 제어한다. 특히, 프로세서(130)는 감지부(120)에 의해 감지된 거리에 대응되는 가상의 시야각(Field of View)을 결정할 수 있다.
구체적으로, 프로세서(130)는 감지된 거리에 매칭되는 가상의 시야각이 기록된 테이블을 이용할 수 있다.
일 예로, 프로세서(130)는 감지부(120)를 통해 수신된 전자 장치(100) 및 사용자(10) 간 거리를 수신할 수 있다. 이때, 수신된 거리가 2m인 경우, 프로세서(130)는 테이블을 참조하여, 거리 2m에 대응되는 가상의 시야각을 90도로 결정할 수 있다.
여기서, 테이블에서, 감지된 거리에 매칭되는 타입을 가상의 시야각으로 설명하였지만, 감지된 거리에 매칭되는 타입은 VR 공간상의 좌표 값이 될 수도 있다.
한편, 프로세서(130)는, 감지된 거리에 대응되는 시야각이 결정되면, 가상의 시야각에 대응되는 VR 컨텐츠 영역을 포함하는 화면을 디스플레이하도록 디스플레이(110)를 제어할 수 있다.
구체적으로, 프로세서(130)는 가상의 입체 공간에 컨텐츠가 투영된 VR 컨텐츠에서 가상의 시야각에 대응되는 컨텐츠 영역을 포함하는 화면을 추출하여 디스플레이하도록 제어할 수 있다.
이를 위해, 프로세서(130)는 업데이트된 가상의 시야각에 대응되는 컨텐츠 영역의 좌표를 업데이트할 수 있다. 예를 들어, 프로세서(130)는 가상의 시야각의 변화량 비율에 따라, 컨텐츠 영역에 매칭되는 좌표 값을 증감시킬 수 있다. 이 경우, 좌표 값은 픽셀 단위일 수 있다.
한편, 프로세서(130)는 사용자(10) 및 사용자(10)가 구비한 단말 장치 간 거리가 변경되는 경우, 가상의 시야각도 함께 변경할 수 있다.
구체적으로, 프로세서(130)는 감지된 거리가 변경됨에 따라 가상의 시야각을 변경된 거리에 대응되는 기설정된 비율만큼 변경하고, 변경된 가상의 시야각에 대응되는 VR 컨텐츠 영역을 포함하는 화면을 디스플레이하도록 디스플레이(110)를 제어할 수 있다.
여기서, 프로세서(130)는 사용자(10) 명령이 입력되는 이벤트, 특정 타입의 컨텐츠가 입력되는 이벤트, 및 감지된 거리가 기설정된 임계 거리를 만족하는 이벤트 중 적어도 하나에 따라 기설정된 비율을 변경하여 적용할 수 있다. 여기서, 기설정된 비율이란, 감지된 거리의 증감에 따라 가상의 시야각을 증감하기 위한 비율을 말한다.
프로세서(130)는 사용자(10) 명령이 입력되는 이벤트에 따라 기설정된 비율을 변경하여 적용할 수 있다. 이를, 도 3를 참조하여 설명한다.
도 3은 본 발명의 일 실시 예에 따른 기설정된 비율을 변경하는 GUI를 도시한 도면이다.
　도 3을 참조하여 예를 들면, 프로세서(130)는 기설정된 비율을 조정하기 위한 GUI(Graphic User Interface)를 디스플레이(110)에 출력한다. 기설정된 비율을 조정하기 위한 GUI(310)는 사용자(10)의 조작에 의해 상하 방향으로 이동이 가능한 조정 GUI(311)을 포함한다. 여기서, 조정 GUI(311)가 이전 위치에서 상 방향으로 이동되는 경우 기설정된 비율이 증가하고, 조정 GUI(311)가 이전 위치에서 하 방향으로 이동되는 경우 기설정된 비율이 감소한다. 기설정된 비율이 증가하면, 감지된 거리가 증가함에 따라 증가 또는 감소되는 가상 시야각의 비율은 증가한다. 또한, 기설정된 비율이 감소하면, 감지된 거리가 감소함에 따라 증가 또는 감소되는 가상 시야각의 비율이 증가한다.
여기서, 상술한 GUI는 일 예에 불과한 것으로, GUI는 사용자로부터 기설정된 비율을 조정하기 위한 입력을 받기 위해 다양한 형태로 구현될 수 있다.
또한, 프로세서(130)는 특정 타입의 컨텐츠가 입력되는 이벤트에 따라 기설정된 비율을 변경하여 적용할 수도 있다.
예를 들어, 특정 타입의 컨텐츠가 슈팅 게임인 경우, 사용자(10)가 목표물을 조준하기 위하여 목표 지점을 비교적 크게 확대할 필요가 있기 때문에, 프로세서(130)는 기설정된 비율을 크게 설정하여, 전자 장치(100) 및 사용자(10) 또는 사용자(10)가 구비한 단말 장치와의 거리의 변경에 대응되는 가상 시야각의 크기의 변경 비율을 증가시킬 수 있다.
또는, 특정 타입의 컨텐츠가 로맨스 영화인 경우, 거리 변경에 따른 가상 시야각의 변경이 필수적이지 않을 수 있다. 이때, 프로세서(130)는 기설정된 비율을 작게 설정하여, 전자 장치(100) 및 사용자(10) 또는 사용자(10)가 구비한 단말 장치와의 거리의 변경에 대응되는 가상 시야각의 크기의 변경 비율을 감소시킬 수 있다.
또한, 프로세서(130)는 감지된 거리가 기설정된 임계 거리를 만족하는 이벤트에 따라 기설정된 비율을 변경하여 적용할 수도 있다.
구체적으로, 사용자(10) 또는 사용자(10)가 구비한 단말장치가 전자 장치(100)와 멀어질수록 또는 가까워질수록, 가상 시야각을 무한정 크게 또는 무한정 작게 할 수는 없다. 따라서, 프로세서(130)는 감지된 거리가 기설정된 임계 거리를 벗어나는 경우, 감지된 거리의 변경에 대응하여 가상의 시야각이 변경되는 기설정된 비율을 감소시킬 수 있다. 여기서, 프로세서(130)는 기설정된 감지 거리가 기설정된 임계 거리를 만족하는 경우, 가상의 시야각의 증가 또는 감소를 중단시킬 수도 있다.
한편, 프로세서(130)는 감지된 거리의 증감에 따라 가상의 시야각을 증가 또는 감소시키거나, 감소 또는 증가시킬 수 있다. 이를 도 4a 및 4b를 이용하여 상세히 설명한다.
도 4a 및 도 4b는 본 발명의 일 실시 예에 따른 사용자(10) 기준인 경우의 가상의 시야각의 변경을 설명하기 위한 도면이다.
도 4a 및 도 4b는 사용자(10)가 기준인 경우의 시야각 변화를 도시하고 있다. 도 4a를 참조하면, VR 컨텐츠는 3차원 공간상의 모든 영역의 이미지를 포함하고 있다. 따라서, 사용자(10)가 전자 장치(100)의 디스플레이(110)를 통해 VR 컨텐츠의 일 영역을 시청하는 것은, 사용자(10)가 구(410) 내부에서 구(410)의 일 영역(420)을 바라보는 것과 같은 것으로 가정할 수 있다.
여기서, 구(410)의 일 영역(420)을 하나의 벽이라고 가정하면, 사용자(10)가 거리 C에 위치해 있다가, 거리 D의 위치로 이동하는 경우(여기서, C > D), 사용자(10)가 벽으로 가까이 이동하는 것에 해당한다. 이처럼, 벽이 사용자(10)와 근접하는 경우, 사용자(10)의 시야는 감소한다.
결론적으로, 프로세서(130)는 가상의 시야각이 사용자(10) 기준의 시야각인 경우, 감지된 거리가 이전에 감지된 거리보다 증가하는 경우, 가상의 시야각을 증가시키고, 감지된 거리가 이전에 감지된 거리보다 감소하는 경우, 가상의 시야각을 감소시킬 수 있다.
도 5a 및 도 5b는 본 발명의 일 실시 예에 따른 디스플레이 장치(100) 기준인 경우의 가상의 시야각의 변경을 설명하기 위한 도면이다.
도 5a 및 도 5b는 전자 장치(100)가 기준인 경우의 시야각 변화를 도시하고 있다. 도 5a를 참조하면, 전자 장치(100)를 창(window)으로 가정하면, 사용자(10)는 전자 장치(100)에서 거리 E만큼 떨어진 위치에서, 창 즉, 전자 장치(100)를 통해 구(510)의 일 영역(530)을 바라보게 된다. 한편, 도 5를 에서, 사용자(10)는 전자 장치(100)로부터 거리 F가 떨어진 영역에 위치하고 있다. 즉, 사용자(10)는 도 5a에서보다 전자 장치(100)로 가까운 위치로 이동하였다(여기서, E > F). 여기서, 사용자(10)는 창 즉, 전자장치(100)를 통해 구(510)의 일 영역(520)을 바라보게 된다. 이처럼, 사용자(10)가 전자 장치(100)에 근접하게 되는 경우, 사용자(10)의 시야는 증가한다.
이처럼, 프로세서(130)는 가상의 시야각이 전자 장치 기준의 시야각인 경우, 감지된 거리가 이전에 감지된 거리보다 증가하는 경우, 가상의 시야각을 감소시키고, 감지된 거리가 이전에 감지된 거리보다 감소하는 경우, 가상의 시야각을 증가시키는 것도 가능하다.
도 6은 본 발명의 일 실시 예에 따른 감지된 거리에 따른 가상 시야각이 변경되는 과정을 설명하기 위한 흐름도이다.
도 6을 참조하면, 전자 장치(100)로 VR 컨텐츠가 입력될 수 있다(S610). 상술한 바와 같이, 프로세서(130)는 외부로부터 데이터를 전달받아 VR 컨텐츠를 생성하는 것도 물론 가능하다.
VR 컨텐츠가 입력되면, 프로세서(130)는 가상 시야각에 대한 초기 값을 설정한다(S620). 여기서, 초기 값은, VR 컨텐츠의 종류에 대응되는 가상 시야각이거나, 초기 값 설정 시의 사용자의 거리에 대응되는 시야각일 수도 있다.
초기 값이 설정되면, 프로세서(130)는 가상 시야각을 고정할지 여부를 결정한다(S630). 여기서, 프로세서(130)는 VR 컨텐츠의 종류 따라 시야각을 고정할지 여부를 결정하거나, 사용자(10)의 입력을 받아 시야각 고정 여부를 결정할 수도 있다. 예를 들어, 프로세서(130)는 감지된 거리에 따라 가상 시야각을 변경하는 시야 변경 모드 또는 가상 시야각을 감지된 거리에 관계없이 유지시키는 시야 고정 모드로 동작할 수 있다.
가상 시야각이 고정인 것으로 결정되면(Y), 프로세서(130)는 디스플레이(110)를 제어하여 VR 컨텐츠를 디스플레이한다. 가상 시야각이 고정이 아닌 것으로 결정되면(N), 감지된 거리의 변경에 대응하여 가상의 시야각이 변경되는 비율을 설정할 수 있다(S640). 여기서, 프로세서는, VR 컨텐츠의 종류에 따라 비율을 결정하거나, 사용자(10)의 입력을 받아 비율을 결정할 수 있다.
감지된 거리의 변경에 대응하여 가상의 시야각이 변경되는 비율이 설정되면, 프로세서(130)는 감지부(120)를 이용하여, 전자 장치(100) 및 사용자 또는 사용자가 구비한 단말 장치 간 거리를 측정할 수 있다(S650).
또한, 프로세서(130)는 감지된 거리에 기초하여 가상 시야각을 변경할 수 있다(S660). 그 후, 프로세서(130)는 변경된 가상 시야각이 적용된 VR 컨텐츠 영역을 디스플레이하도록 디스플레이(110)를 제어할 수 있다(S670). 여기서, 프로세서(130)는 전자 장치(100) 및 사용자 또는 사용자가 구비한 단말 장치의 거리를 기설정된 시간마다 감지하여 가상 시야각을 업데이트할 수 있다.
도 7은 본 발명의 다른 실시 예에 따른 전자 장치(100')의 세부 구성을 나타내는 블록도이다.
도 7에 따르면, 전자 장치(100')는 디스플레이(110), 감지부(120), 제어부(130), 저장부(140) 및 통신부(150)를 포함한다. 도 7에 도시된 구성 중 도 2에 도시된 구성과 중복되는 부분에 대해서는 자세한 설명을 생략하도록 한다.
디스플레이(110)는 VR 컨텐츠를 디스플레이한다. 이 경우, 디스플레이(110)는 LCD(Liquid Crystal Display Panel), OLED(Organic Light Emitting Diodes) 등으로 구현될 수 있으나, 이에 한정되는 것은 아니다. 또한, 디스플레이(110)는 경우에 따라 플렉서블 디스플레이, 투명 디스플레이 등으로 구현되는 것도 가능하다. 한편, 스마트폰을 연결해 모니터로서 사용하는 경우, 디스플레이(110)는 스마트폰의 디스플레이로 구현될 수 있음은 물론이다.
감지부(120)는 사용자(10) 또는 사용자(10)가 구비한 단말 장치를 감지할 수 있다. 감지부(120)는 전자 장치(100')에서 연장된 선에 연결되어 구비될 수도 있다.
프로세서(130)의 동작은 저장부(140)에 저장된 프로그램에 의해 이루어질 수 있다.
구체적으로, 프로세서(130)는 RAM(131), ROM(132), 메인 CPU(133), 그래픽 처리부(134), 제1 내지 n 인터페이스(135-1 ~ 135-n), 버스(136)를 포함한다.
RAM(131), ROM(132), 메인 CPU(133), 그래픽 처리부(134), 제1 내지 n 인터페이스(135-1 ~ 135-n) 등은 버스(136)를 통해 서로 연결될 수 있다.
제1 내지 n 인터페이스(135-1 내지 135-n)는 상술한 각종 구성요소들과 연결된다. 인터페이스들 중 하나는 네트워크를 통해 외부 장치와 연결되는 네트워크 인터페이스가 될 수도 있다.
메인 CPU(133)는 저장부(140)에 액세스하여, 저장부(140)에 저장된 O/S를 이용하여 부팅을 수행한다. 그리고, 저장부(140)에 저장된 각종 프로그램, 컨텐츠, 데이터 등을 이용하여 다양한 동작을 수행한다. 예를 들어, 메인 CPU(133)는 저장부(140)에 저장된 테이블을 이용하여, 감지된 거리에 대응되는 가상 시야각을 결정할 수 있다.
ROM(132)에는 시스템 부팅을 위한 명령어 세트 등이 저장된다. 턴온 명령이 입력되어 전원이 공급되면, 메인 CPU(133)는 ROM(132)에 저장된 명령어에 따라 저장부(140)에 저장된 O/S를 RAM(131)에 복사하고, O/S를 실행시켜 시스템을 부팅시킨다. 부팅이 완료되면, 메인 CPU(133)는 저장부(140)에 저장된 각종 어플리케이션 프로그램을 RAM(131)에 복사하고, RAM(131)에 복사된 어플리케이션 프로그램을 실행시켜 각종 동작을 수행한다.
그래픽 처리부(134)는 연산부(미도시) 및 렌더링부(미도시)를 이용하여 아이콘, 이미지, 텍스트 등과 같은 다양한 객체를 포함하는 화면을 생성한다. 연산부(미도시)는 수신된 제어 명령에 기초하여 화면의 레이아웃에 따라 각 객체들이 표시될 좌표값, 형태, 크기, 컬러 등과 같은 속성값을 연산한다. 렌더링부(미도시)는 연산부(미도시)에서 연산한 속성값에 기초하여 객체를 포함하는 다양한 레이아웃의 화면을 생성한다.
저장부(140)는 전자 장치(100')를 구동시키기 위한 O/S(Operating System) 소프트웨어 모듈, 각종 멀티미디어 컨텐츠와 같은 다양한 데이터를 저장할 수 있다.
특히, 저장부(150)는 본 발명의 일 실시 예에 따라 감지된 거리에 대응되는 가상 시야각 정보를 저장할 수 있다.
또한, 저장부(140)는 다양한 UI 화면을 통해 입력되는 사용자 명령에 대응되는 제어 신호를 생성하기 위한 데이터를 저장할 수 있다.
통신부(150)는 외부 장치와 통신을 수행한다. 여기서, 통신부(150)는 BT(BlueTooth), WI-FI(Wireless Fidelity), Zigbee, IR(Infrared), Serial Interface, USB(Universal Serial Bus), NFC(Near Field Communication) 등과 같은 다양한 통신 방식을 통해 외부 장치와 통신을 수행할 수 있다. 특히 통신부(150)는 외부 장치로부터 VR 컨텐츠 데이터를 전송받을 수 있다.
또한, 통신부(150)는 사용자(10)가 구비한 단말로부터 위치 정보를 수신할 수 있다.
구체적으로, 사용자(10)가 구비한 단말은 예를 들어 자이로 센서를 구비할 수 있다. 사용자(10)가 구비한 단말은 자이로 센서를 통해 센싱된 사용자(10)가 구비한 단말의 상하좌우에 대응되는 위치 정보를 전자 장치(100')로 전송할 수 있다. 이때, 프로세서(130)는 사용자(10)가 구비한 단말의 위치 정보에 기초하여, VR 컨텐츠의 영역을 이동시켜 디스플레이할 수 있다. 예를 들면, 사용자(10)가 구비한 단말의 위치가 좌로 이동된 경우, 프로세서(130)는 VR 컨텐츠의 영역을 좌로 이동시켜 디스플레이할 수 있다.
또한, 통신부(150)는 사용자(10)가 구비한 단말로부터 사용자(10)가 구비한 단말의 상화좌우 이동 버튼의 입력에 대응되는 신호를 수신할 수도 있다. 예를 들어, 프로세서(130)는 사용자(10)가 구비한 단말의 좌 이동 버튼의 입력에 대응되는 신호를 수신한 경우, VR 컨텐츠의 영역을 좌로 이동시켜 디스플레이할 수 있다.이처럼, 전자 장치(100')는 사용자(10)의 입력에 따라 VR 컨텐츠의 상하좌우 전 영역을 디스플레이하여, 사용자(10)에게 VR 컨텐츠에 대한 경험을 충실히 제공할 수 있다.
도 8은 본 발명의 일 실시 예에 따른 전자 장치의 제어 방법을 설명하기 위한 흐름도이다.
도 8에 도시된 본 발명의 일 실시 예에 따른 전자 장치의 제어 방법에 따르면, 감지부에 의해 감지된 거리에 대응되는 가상의 시야각(Field of View)을 결정하고(S810), 가상의 시야각에 대응되는 VR 컨텐츠 영역을 포함하는 화면을 디스플레이하도록 디스플레이를 제어할 수 있다(S820). 이 경우, 전자 장치는 VR(Virtual Reality) 컨텐츠를 디스플레이하는 디스플레이 및 사용자 및 상기 사용자가 구비한 단말 장치 중 적어도 하나와 상기 전자 장치 간 거리를 감지하는 감지부를 구비하는 형태로 구현될 수 있다.
제어 방법은, 가상의 시야각이 사용자 기준의 시야각인 경우, 감지된 거리가 이전에 감지된 거리보다 증가하는 경우, 가상의 시야각을 증가시키고, 감지된 거리가 이전에 감지된 거리보다 감소하는 경우, 가상의 시야각을 감소시키는 단계를 더 포함할 수 있다.
또한, 제어 방법은, 가상의 시야각이 전자 장치 기준의 시야각인 경우, 감지된 거리가 이전에 감지된 거리보다 증가하는 경우, 가상의 시야각을 감소시키고, 감지된 거리가 이전에 감지된 거리보다 감소하는 경우, 가상의 시야각을 증가시키는 단계를 더 포함할 수 있다.
또한, 제어 방법은, 감지된 거리가 변경됨에 따라 가상의 시야각을 변경된 거리에 대응되는 기설정된 비율만큼 변경하고, 변경된 가상의 시야각에 대응되는 VR 컨텐츠 영역을 포함하는 화면을 디스플레이하도록 제어하는 단계를 더 포함할 수 있다.
또한, 제어 방법은, 사용자 명령이 입력되는 이벤트, 특정 타입의 컨텐츠가 입력되는 이벤트, 및 감지된 거리가 기설정된 임계 거리를 만족하는 이벤트 중 적어도 하나에 따라 기설정된 비율을 변경하여 적용하는 단계를 더 포함할 수 있다.
또한, 제어 방법은, 감지된 거리에 따라 가상 시야각을 변경하는 시야 변경 모드 또는 가상 시야각을 감지된 거리에 관계없이 유지시키는 시야 고정 모드로 동작하는 단계를 더 포함할 수 있다.
여기서, 감지부는, 카메라, RF 센서, 초음파 센서, 레이저 센서, 적외선 센서 중 적어도 하나로 구현될 수 있다.
또한, 제어 방법은, 가상의 입체 공간에 컨텐츠가 투영된 VR 컨텐츠에서 가상의 시야각에 대응되는 컨텐츠 영역을 포함하는 화면을 추출하여 디스플레이하는 단계를 더 포함할 수 있다.
또한, 제어 방법은, 감지부에 의해 복수의 사용자가 검출되는 경우, 복수의 사용자 중 기설정된 사용자와의 거리 또는 복수의 사용자의 평균 거리에 대응되는 가상의 시야각을 결정하는 단계를 더 포함할 수 있다.
한편, 이러한 다양한 실시 예에 따른 방법들은 프로그래밍되어 각종 저장 매체에 저장될 수 있다. 이에 따라, 저장 매체를 실행하는 다양한 유형의 전자 장치에서 상술한 다양한 실시 예에 따른 방법들이 구현될 수 있다.
구체적으로는, 본 발명의 일 실시 예에 따르면, 감지부에 의해 감지된 거리에 대응되는 가상의 시야각(Field of View)을 결정하는 단계, 가상의 시야각에 대응되는 VR 컨텐츠 영역을 포함하는 화면을 디스플레이하도록 디스플레이를 제어하는 단계를 순차적으로 수행하는 프로그램이 저장된 비일시적 판독 가능 매체(non-transitory computer readable medium)가 제공될 수 있다.
비일시적 판독 가능 매체란 레지스터, 캐쉬, 메모리 등과 같이 짧은 순간 동안 데이터를 저장하는 매체가 아니라 반영구적으로 데이터를 저장하며, 기기에 의해 판독(reading)이 가능한 매체를 의미한다. 구체적으로는, 상술한 다양한 어플리케이션 또는 프로그램들은 CD, DVD, 하드 디스크, 블루레이 디스크, USB, 메모리카드, ROM 등과 같은 비일시적 판독 가능 매체에 저장되어 제공될 수 있다.
또한, 이상에서는 본 발명의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.

Claims (15)

  1. 전자 장치에 있어서,
    VR(Virtual Reality) 컨텐츠를 디스플레이하는 디스플레이;
    사용자 및 상기 사용자가 구비한 단말 장치 중 적어도 하나와 상기 전자 장치 간 거리를 감지하는 감지부; 및
    상기 감지부에 의해 감지된 거리에 대응되는 가상의 시야각(Field of View)을 결정하고, 상기 가상의 시야각에 대응되는 VR 컨텐츠 영역을 포함하는 화면을 디스플레이하도록 상기 디스플레이를 제어하는 프로세서;를 포함하는 것을 특징으로 하는 전자 장치.
  2. 제1항에 있어서,
    상기 프로세서는,
    상기 가상의 시야각이 상기 사용자 기준의 시야각인 경우, 상기 감지된 거리가 이전에 감지된 거리보다 증가하는 경우, 상기 가상의 시야각을 증가시키고, 상기 감지된 거리가 이전에 감지된 거리보다 감소하는 경우, 상기 가상의 시야각을 감소시키는 것을 특징으로 하는 전자 장치.
  3. 제1항에 있어서,
    상기 프로세서는,
    상기 가상의 시야각이 전자 장치 기준의 시야각인 경우, 상기 감지된 거리가 이전에 감지된 거리보다 증가하는 경우, 상기 가상의 시야각을 감소시키고, 상기 감지된 거리가 이전에 감지된 거리보다 감소하는 경우, 상기 가상의 시야각을 증가시키는 것을 특징으로 하는 전자 장치.
  4. 제1항에 있어서,
    상기 프로세서는,
    상기 감지된 거리가 변경됨에 따라 상기 가상의 시야각을 변경된 거리에 대응되는 기설정된 비율만큼 변경하고, 상기 변경된 가상의 시야각에 대응되는 VR 컨텐츠 영역을 포함하는 화면을 디스플레이하도록 상기 디스플레이를 제어하는 전자 장치.
  5. 제4항에 있어서,
    상기 프로세서는,
    사용자 명령이 입력되는 이벤트, 특정 타입의 컨텐츠가 입력되는 이벤트, 및 상기 감지된 거리가 기설정된 임계 거리를 만족하는 이벤트 중 적어도 하나에 따라 상기 기설정된 비율을 변경하여 적용하는 것을 특징으로 하는 전자 장치.
  6. 제1항에 있어서,
    상기 프로세서는,
    상기 감지된 거리에 따라 상기 가상 시야각을 변경하는 시야 변경 모드 또는 상기 가상 시야각을 상기 감지된 거리에 관계없이 유지시키는 시야 고정 모드로 동작하는 것을 특징으로 하는 전자 장치.
  7. 제1항에 있어서,
    상기 감지부는,
    카메라, RF 센서, 초음파 센서, 레이저 센서, 적외선 센서 중 적어도 하나로 구현되는 것을 특징으로 하는 전자 장치.
  8. 제1항에 있어서,
    상기 프로세서는,
    가상의 입체 공간에 컨텐츠가 투영된 상기 VR 컨텐츠에서 상기 가상의 시야각에 대응되는 컨텐츠 영역을 포함하는 화면을 추출하여 디스플레이하도록 제어하는 전자 장치.
  9. 제1항에 있어서,
    상기 프로세서는,
    상기 감지부에 의해 복수의 사용자가 검출되는 경우, 상기 복수의 사용자 중 기설정된 사용자와의 거리 또는 상기 복수의 사용자의 평균 거리에 대응되는 가상의 시야각을 결정하는 것을 특징으로 하는 전자 장치.
  10. VR(Virtual Reality) 컨텐츠를 디스플레이하는 디스플레이 및 사용자 및 상기 사용자가 구비한 단말 장치 중 적어도 하나와 전자 장치 간 거리를 감지하는 감지부를 구비한 전자 장치의 제어 방법에 있어서,
    상기 감지부에 의해 감지된 거리에 대응되는 가상의 시야각(Field of View)을 결정하는 단계; 및
    상기 가상의 시야각에 대응되는 VR 컨텐츠 영역을 포함하는 화면을 디스플레이하도록 상기 디스플레이를 제어하는 단계;를 포함하는 제어 방법.
  11. 제10항에 있어서,
    상기 가상의 시야각이 상기 사용자 기준의 시야각인 경우, 상기 감지된 거리가 이전에 감지된 거리보다 증가하는 경우, 상기 가상의 시야각을 증가시키고, 상기 감지된 거리가 이전에 감지된 거리보다 감소하는 경우, 상기 가상의 시야각을 감소시키는 단계;를 더 포함하는 것을 특징으로 하는 제어 방법.
  12. 제10항에 있어서,
    상기 가상의 시야각이 전자 장치 기준의 시야각인 경우, 상기 감지된 거리가 이전에 감지된 거리보다 증가하는 경우, 상기 가상의 시야각을 감소시키고, 상기 감지된 거리가 이전에 감지된 거리보다 감소하는 경우, 상기 가상의 시야각을 증가시키는 단계;를 더 포함하는 것을 특징으로 하는 제어 방법.
  13. 제10항에 있어서,
    상기 감지된 거리가 변경됨에 따라 상기 가상의 시야각을 변경된 거리에 대응되는 기설정된 비율만큼 변경하고, 상기 변경된 가상의 시야각에 대응되는 VR 컨텐츠 영역을 포함하는 화면을 디스플레이하도록 제어하는 단계;를 더 포함하는 것을 특징으로 하는 제어 방법.
  14. 제13항에 있어서,
    사용자 명령이 입력되는 이벤트, 특정 타입의 컨텐츠가 입력되는 이벤트, 및 상기 감지된 거리가 기설정된 임계 거리를 만족하는 이벤트 중 적어도 하나에 따라 상기 기설정된 비율을 변경하여 적용하는 단계;를 더 포함하는 것을 특징으로 하는 제어 방법.
  15. 제10항에 있어서,
    상기 감지된 거리에 따라 상기 가상 시야각을 변경하는 시야 변경 모드 또는 상기 가상 시야각을 상기 감지된 거리에 관계없이 유지시키는 시야 고정 모드로 동작하는 단계;를 더 포함하는 것을 특징으로 하는 제어 방법.
PCT/KR2016/011510 2015-10-14 2016-10-13 전자 장치 및 그 제어 방법 WO2017065535A1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201680031737.7A CN107637076B (zh) 2015-10-14 2016-10-13 电子设备及其控制方法
US15/741,088 US10422996B2 (en) 2015-10-14 2016-10-13 Electronic device and method for controlling same
EP16855752.8A EP3293973A4 (en) 2015-10-14 2016-10-13 Electronic device and method for controlling same

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020150143569A KR102402048B1 (ko) 2015-10-14 2015-10-14 전자 장치 및 그 제어 방법
KR10-2015-0143569 2015-10-14

Publications (1)

Publication Number Publication Date
WO2017065535A1 true WO2017065535A1 (ko) 2017-04-20

Family

ID=58517423

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2016/011510 WO2017065535A1 (ko) 2015-10-14 2016-10-13 전자 장치 및 그 제어 방법

Country Status (5)

Country Link
US (1) US10422996B2 (ko)
EP (1) EP3293973A4 (ko)
KR (1) KR102402048B1 (ko)
CN (1) CN107637076B (ko)
WO (1) WO2017065535A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106990537A (zh) * 2017-05-25 2017-07-28 巢湖市金辉自控设备有限公司 一种基于vr眼镜和定位模块的空间行走装置

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102172517B1 (ko) 2017-04-04 2020-10-30 주식회사 엘지화학 크래쉬 빔 구조를 갖는 배터리 팩
US10976982B2 (en) * 2018-02-02 2021-04-13 Samsung Electronics Co., Ltd. Guided view mode for virtual reality
CN109656371A (zh) * 2018-12-28 2019-04-19 努比亚技术有限公司 移动终端护眼方法、装置、移动终端及存储介质
JP7341685B2 (ja) 2019-03-19 2023-09-11 キヤノン株式会社 電子機器、電子機器の制御方法、プログラム、及び、記憶媒体
US11436959B2 (en) 2019-12-31 2022-09-06 Samsung Electronics Co., Ltd. Display apparatus having rollable display and control method thereof
US11545024B1 (en) * 2020-09-24 2023-01-03 Amazon Technologies, Inc. Detection and alerting based on room occupancy
CN112198963A (zh) * 2020-10-19 2021-01-08 深圳市太和世纪文化创意有限公司 一种沉浸式隧道型多媒体交互展示方法、设备及存储介质
WO2024071681A1 (ko) * 2022-09-26 2024-04-04 삼성전자 주식회사 이미지를 제공하는 방법 및 이를 지원하는 웨어러블 전자 장치

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120072714A (ko) * 2010-12-24 2012-07-04 엘지디스플레이 주식회사 패턴드 리타더 방식의 3차원 영상 시스템에서 사용하는 능동형 광 시야각 보상 입체 안경
KR20130074431A (ko) * 2011-12-26 2013-07-04 고려대학교 산학협력단 능동적 가상현실 서비스 제공 장치
JP2014045474A (ja) * 2012-07-31 2014-03-13 Nlt Technologies Ltd 立体画像表示装置、画像処理装置及び立体画像処理方法
KR20140107973A (ko) * 2013-02-28 2014-09-05 고려대학교 산학협력단 스테레오 영상 획득 및 시청 연동 시스템
JP2014206638A (ja) * 2013-04-12 2014-10-30 株式会社ジャパンディスプレイ 立体表示装置

Family Cites Families (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE4309667A1 (de) 1993-03-26 1994-09-29 Univ Dresden Tech Optisches System zur zwei- und dreidimensionalen Darstellung von Information
JP3683632B2 (ja) 1995-12-21 2005-08-17 株式会社ハドソン 家庭用テレビゲーム機
US6084979A (en) 1996-06-20 2000-07-04 Carnegie Mellon University Method for creating virtual reality
US5989157A (en) 1996-08-06 1999-11-23 Walton; Charles A. Exercising system with electronic inertial game playing
US6317127B1 (en) 1996-10-16 2001-11-13 Hughes Electronics Corporation Multi-user real-time augmented reality system and method
JPH10334275A (ja) 1997-05-29 1998-12-18 Canon Inc 仮想現実方法及び装置並びに記憶媒体
US6508709B1 (en) 1999-06-18 2003-01-21 Jayant S. Karmarkar Virtual distributed multimedia gaming method and system based on actual regulated casino games
US7305691B2 (en) 2001-05-07 2007-12-04 Actv, Inc. System and method for providing targeted programming outside of the home
US6999239B1 (en) 2001-05-23 2006-02-14 Research Foundation Of The University Of Central Florida, Inc Head-mounted display by integration of phase-conjugate material
US7682021B2 (en) 2002-02-08 2010-03-23 Novavision, Inc. System and methods for the treatment of retinal diseases
US7091926B2 (en) 2002-02-08 2006-08-15 Kulas Charles J Computer display system using multiple screens
US6906836B2 (en) * 2002-10-04 2005-06-14 William Parker Full color holographic image combiner system
US7212208B2 (en) 2003-02-25 2007-05-01 Bahram Khozai System and method to present and display multiple data using enhanced box charts
JP3926837B2 (ja) 2004-06-04 2007-06-06 松下電器産業株式会社 表示制御方法および装置、プログラム、並びに携帯機器
JP4046121B2 (ja) 2005-03-24 2008-02-13 セイコーエプソン株式会社 立体画像表示装置及び方法
GB0615433D0 (en) 2006-08-04 2006-09-13 Univ York Display systems
US8269822B2 (en) * 2007-04-03 2012-09-18 Sony Computer Entertainment America, LLC Display viewing system and methods for optimizing display view based on active tracking
TW200907764A (en) 2007-08-01 2009-02-16 Unique Instr Co Ltd Three-dimensional virtual input and simulation apparatus
US8786675B2 (en) 2008-01-23 2014-07-22 Michael F. Deering Systems using eye mounted displays
WO2009116663A1 (ja) 2008-03-21 2009-09-24 Takahashi Atsushi 三次元デジタル拡大鏡手術支援システム
JP4725595B2 (ja) * 2008-04-24 2011-07-13 ソニー株式会社 映像処理装置、映像処理方法、プログラム及び記録媒体
US20100053151A1 (en) * 2008-09-02 2010-03-04 Samsung Electronics Co., Ltd In-line mediation for manipulating three-dimensional content on a display device
US8646910B1 (en) 2009-11-27 2014-02-11 Joyce Schenkein Vision training method and apparatus
US8610771B2 (en) 2010-03-08 2013-12-17 Empire Technology Development Llc Broadband passive tracking for augmented reality
US10448083B2 (en) * 2010-04-06 2019-10-15 Comcast Cable Communications, Llc Streaming and rendering of 3-dimensional video
JP2012053090A (ja) 2010-08-31 2012-03-15 Sega Corp 運転模擬装置
JP5811534B2 (ja) 2010-12-27 2015-11-11 キヤノンマーケティングジャパン株式会社 画像表示制御サーバ
CN102075776B (zh) * 2011-01-18 2014-03-26 青岛海信电器股份有限公司 一种立体显示的控制方法及装置
JP2012205267A (ja) * 2011-03-28 2012-10-22 Sony Corp 表示制御装置、表示制御方法、検出装置、検出方法、プログラム、及び表示システム
CN102158721B (zh) * 2011-04-06 2012-12-05 青岛海信电器股份有限公司 调节三维立体图像的方法、装置及电视机
US20120327116A1 (en) 2011-06-23 2012-12-27 Microsoft Corporation Total field of view classification for head-mounted display
US11068049B2 (en) 2012-03-23 2021-07-20 Microsoft Technology Licensing, Llc Light guide display and field of view
US8831780B2 (en) 2012-07-05 2014-09-09 Stanislav Zelivinski System and method for creating virtual presence
WO2014005605A1 (en) * 2012-07-06 2014-01-09 Telefonaktiebolaget L M Ericsson (Publ) Method and system for shared viewing based on viewer position tracking
CN102842301B (zh) 2012-08-21 2015-05-20 京东方科技集团股份有限公司 显示画面调节装置、显示装置及显示方法
KR102051418B1 (ko) 2012-09-28 2019-12-03 삼성전자주식회사 영상에 포함된 객체를 선택하기 위한 사용자 인터페이스 제어 장치 및 그 방법 그리고 영상 입력 장치
KR102019125B1 (ko) * 2013-03-18 2019-09-06 엘지전자 주식회사 3d 디스플레이 디바이스 장치 및 제어 방법
US9865089B2 (en) * 2014-07-25 2018-01-09 Microsoft Technology Licensing, Llc Virtual reality environment with real world objects
US10684485B2 (en) * 2015-03-06 2020-06-16 Sony Interactive Entertainment Inc. Tracking system for head mounted display
US10409443B2 (en) * 2015-06-24 2019-09-10 Microsoft Technology Licensing, Llc Contextual cursor display based on hand tracking

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120072714A (ko) * 2010-12-24 2012-07-04 엘지디스플레이 주식회사 패턴드 리타더 방식의 3차원 영상 시스템에서 사용하는 능동형 광 시야각 보상 입체 안경
KR20130074431A (ko) * 2011-12-26 2013-07-04 고려대학교 산학협력단 능동적 가상현실 서비스 제공 장치
JP2014045474A (ja) * 2012-07-31 2014-03-13 Nlt Technologies Ltd 立体画像表示装置、画像処理装置及び立体画像処理方法
KR20140107973A (ko) * 2013-02-28 2014-09-05 고려대학교 산학협력단 스테레오 영상 획득 및 시청 연동 시스템
JP2014206638A (ja) * 2013-04-12 2014-10-30 株式会社ジャパンディスプレイ 立体表示装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3293973A4 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106990537A (zh) * 2017-05-25 2017-07-28 巢湖市金辉自控设备有限公司 一种基于vr眼镜和定位模块的空间行走装置

Also Published As

Publication number Publication date
EP3293973A1 (en) 2018-03-14
CN107637076B (zh) 2020-10-09
CN107637076A (zh) 2018-01-26
US20180196266A1 (en) 2018-07-12
KR20170043911A (ko) 2017-04-24
KR102402048B1 (ko) 2022-05-26
US10422996B2 (en) 2019-09-24
EP3293973A4 (en) 2018-08-29

Similar Documents

Publication Publication Date Title
WO2017065535A1 (ko) 전자 장치 및 그 제어 방법
WO2018012945A1 (en) Method and device for obtaining image, and recording medium thereof
WO2014042458A1 (en) Apparatus and method of providing user interface on head mounted display and head mounted display thereof
WO2016204471A1 (en) User terminal device and method for adjusting luminance thereof
WO2017126741A1 (ko) Hmd 디바이스 및 그 제어 방법
WO2016137294A1 (en) Electronic device and control method thereof
WO2016204357A1 (ko) 이동 단말기 및 그 제어 방법
US11869156B2 (en) Augmented reality eyewear with speech bubbles and translation
WO2018070751A1 (en) Electronic device having a plurality of displays and operating method thereof
US20120019460A1 (en) Input method and input apparatus
WO2017052150A1 (en) User terminal device, electronic device, and method of controlling user terminal device and electronic device
WO2016060458A1 (en) Remote controller apparatus and control method thereof
WO2015178661A1 (en) Method and apparatus for processing input using display
WO2013118987A1 (en) Control method and apparatus of electronic device using control device
WO2018124823A1 (en) Display apparatus and controlling method thereof
WO2015182935A1 (en) Method of controlling display device and remote controller thereof
WO2014069722A1 (ko) 3차원 디스플레이 장치 및 그의 사용자 인터페이스 방법
WO2022250300A1 (en) A method and an electronic apparatus for acquiring a floor map of a room layout
WO2019074243A1 (en) DISPLAY DEVICE, USER TERMINAL DEVICE, DISPLAY SYSTEM COMPRISING THE SAME, AND ASSOCIATED COMAND METHOD
WO2019135550A1 (en) Electronic device for controlling image display based on scroll input and method thereof
EP3298762A1 (en) User terminal device and method for adjusting luminance thereof
WO2018143744A1 (ko) 터치 감지 디스플레이 장치 및 그 화면 제어 방법
WO2016047824A1 (ko) 화상 정보 영사 장치 및 그 영사 장치의 제어 방법
WO2016088922A1 (ko) 모바일 디바이스 및 웨어러블 디바이스를 이용한 인터페이스 제공 방법
WO2016122153A1 (en) Display apparatus and control method thereof

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16855752

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 2016855752

Country of ref document: EP

NENP Non-entry into the national phase

Ref country code: DE