WO2019082050A1 - Взаимодействие пользователей в коммуникационных системах с использованием сообщения-истории дополненной реальности - Google Patents

Взаимодействие пользователей в коммуникационных системах с использованием сообщения-истории дополненной реальности

Info

Publication number
WO2019082050A1
WO2019082050A1 PCT/IB2018/058195 IB2018058195W WO2019082050A1 WO 2019082050 A1 WO2019082050 A1 WO 2019082050A1 IB 2018058195 W IB2018058195 W IB 2018058195W WO 2019082050 A1 WO2019082050 A1 WO 2019082050A1
Authority
WO
WIPO (PCT)
Prior art keywords
user device
virtual object
augmented reality
message
screen
Prior art date
Application number
PCT/IB2018/058195
Other languages
English (en)
French (fr)
Inventor
Михаил Павлович СУТОВСКИЙ
Original Assignee
ГИОРГАДЗЕ, Анико Тенгизовна
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ГИОРГАДЗЕ, Анико Тенгизовна filed Critical ГИОРГАДЗЕ, Анико Тенгизовна
Publication of WO2019082050A1 publication Critical patent/WO2019082050A1/ru

Links

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/37—Details of the operation on graphic patterns
    • G09G5/377—Details of the operation on graphic patterns for mixing or overlaying two or more graphic patterns
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/12—Messaging; Mailboxes; Announcements

Definitions

  • the invention relates to the field of messaging, in particular to the exchange of messages of augmented reality.
  • Messaging systems - communication systems - allow users to communicate by sending messages to each other.
  • many communication systems have been implemented, which allow exchanging augmented reality messages, i.e. to complement the physical, real, world displayed on the screen of the user device with the device capturing the image of the user device with objects of the virtual world.
  • the well-known messages of augmented reality are quite ordinary and simple, and are not suitable when the sender needs to create a message that gives an opportunity to convey to the recipient a more complex idea or idea, or when the sender wants to arrange his thought or idea in such a way as to generate more interest. at the recipient.
  • an urgent task is to improve the known methods of user interaction in communication systems by expanding and supplementing the capabilities of such communication systems associated with the creation of augmented reality messages.
  • the idea of the present invention is that the sender in the communication system can independently create a complex message-history of augmented reality by creating and combining different scenes, preferably subordinate to one common idea.
  • Scenes can contain various basic virtual objects: 2d and 3d static or animated virtual objects that can be combined with additional virtual objects; text; audio or video.
  • virtual objects are most preferably displayed on the screen of the user device of the sender in a specified location as objects of augmented reality, and the actions performed by virtual objects are recorded only in the augmented reality layer.
  • the received message - the story is also reproduced as an object of augmented reality, most preferably - after a preliminary setting of the location of the specified message.
  • FIG. 1 is a block diagram of an exemplary embodiment of a method for user interaction in a communication system according to one of the preferred embodiments of the present invention
  • FIG. 2a is a schematic diagram illustrating the screen of the user's device of the sender at the stage of selecting the main virtual object of the first scene
  • FIG. 2b is a schematic diagram illustrating the screen of the user's sender's device, which displays a 3d animated virtual object of augmented reality of the first scene at the specified location
  • FIG. 1 is a block diagram of an exemplary embodiment of a method for user interaction in a communication system according to one of the preferred embodiments of the present invention
  • FIG. 2a is a schematic diagram illustrating the screen of the user's device of the sender at the stage of selecting the main virtual object of the first scene
  • FIG. 2b is a schematic diagram illustrating the screen of the user's sender's device, which displays a 3d animated virtual object of augmented reality of the first scene at the specified location
  • FIG. 1 is a
  • FIG. 2c is a schematic diagram illustrating the screen of the user's sender's device, which displays the stage of setting a new location for the displayed 3d animated virtual object of augmented reality of the first scene
  • FIG. 2d is a schematic diagram illustrating the screen of the user's device of the sender, on which the 3d animated virtual object of the augmented reality of the first scene in the new location is displayed
  • FIG. 2e is a schematic diagram illustrating the screen of the user's sender's device, which displays a 3d animated virtual object of augmented reality of the first scene, combined with text
  • FIG. 2f is a schematic diagram illustrating the screen of the user's sender's device, which displays the step of adding a 3d animated virtual object of augmented reality of the second scene
  • FIG. 2g is a schematic diagram illustrating the screen of the user's sender's device, on which a 3d animated virtual object of augmented reality of the second scene is displayed;
  • FIG. 2h is a schematic diagram illustrating the screen of the user's sender's device, which displays a 3d animated virtual object of augmented reality of the second scene, combined with an audio file;
  • FIG. 2i is a schematic diagram illustrating the screen of the user device of the sender, which displays 3d an animated virtual object of augmented reality of the second scene, combined with an audio file and a 2d virtual object;
  • FIG. 2j is a schematic diagram illustrating the screen of the user's device of the sender at the stage of selecting the main virtual object of the third scene;
  • FIG. 2k is a schematic diagram illustrating the screen of the user's sender device at the stage of selecting a video file from among the available video files as the main virtual object of the third scene
  • FIG. 21 is a schematic diagram illustrating the screen of the user's sender's device, on which the selected video file is displayed at a given location, displayed as an object of augmented reality
  • FIG. 3 is a schematic representation of an embodiment of a user device according to one of the preferred embodiments of the present invention
  • FIG. 4 is a schematic representation of an embodiment of a communication system in accordance with one of the preferred embodiments of the present invention.
  • the present invention relates to a method of user interaction in a communication system, a user device for organizing user interaction in a communication system, a communication system allowing this method to be implemented, and a computer-readable medium on which program instructions are stored that initiate execution of aspects of the method of user interaction in accordance with the present invention.
  • a method for user interaction in a communication system including creating a number of scenes using a sender's user device, each of which contains a main virtual object selected from a 3d static or animated virtual object, 2d static or animated virtual object, text , audio or video, with the formation of the message history of augmented reality, containing at least two of a number of scenes; transmitting an augmented reality history message from the sender’s user device to the at least one recipient user device; receiving message history of augmented reality by the recipient's user device; Reproduction of message history of augmented reality on the screen of the recipient's user device.
  • a user device for organizing user interaction in a communication system, including an image capture device, at least one processor, a machine-readable medium connected to at least one processor and containing program instructions for user interaction in the communication system, which, when executed by at least one processor, provide the possibility of creating using a user device of a number of scenes, each of which contains a main virtual object selected from a 3d static or animated virtual object, 2d static or animated virtual object, text, audio or video, with the formation of the message history of augmented reality, containing at least two of a number of scenes; enabling the transfer of augmented reality history message from a user device to at least one other user device; providing the possibility of receiving a message-history of augmented reality by the user device; providing the ability to play a message-history of augmented reality on the screen of the user device.
  • a communication system that allows user devices and a server to communicate with each other, containing program instructions located on a computer-readable media of a user device, which, when executed by at least one processor of a user device, ensures that it is possible to create the user device of a number of scenes, each of which contains the main virtual ny object selected from static or animated 3d virtual object, 2d static or animated virtual object, text, audio or video, with the formation of posts, stories augmented reality, comprising at least two of a series of scenes; enabling the transfer of augmented reality history message from a user device to at least one other user device; providing the possibility of receiving a message-history of augmented reality by the user device; providing the ability to play a message history of augmented reality on the screen of the user device; and program instructions located on the server's machine-readable media, which, when executed by at least one server processor, ensure that the server receives a transmitted message — the history of augmented reality from the user's sender
  • a computer-readable media contains software instructions for user interaction in a communication system, which, when executed by at least one processor of a user device, provides the possibility of creating a number of scenes using a user device, each of which contains virtual object selected from 3d static or animated virtual object, 2d static or a imirovannogo virtual object, text, audio or video, with the formation of posts, stories augmented reality, comprising at least two of a series of scenes; enabling the transfer of augmented reality history message from a user device to at least one other user device; providing the possibility of receiving a message-history of augmented reality by the user device; providing the ability to play a message-history of augmented reality on the screen of the user device.
  • the sender in the communication system can independently create a complex message-history of augmented reality by creating and combining different scenes, each of which contains different objects and conveys different thoughts to the recipient, which in 5 aggregates are preferably subordinate to the main common idea, for example, as chapters in a book or scene in a feature film.
  • Scenes can contain various basic virtual objects: 2d and 3d static or animated virtual objects that can be combined with additional virtual objects; text; audio or video.
  • the received message-story is reproduced as an object of augmented reality.
  • the sender is provided with the ability to play the created message-history of augmented reality on the screen of its user device.
  • both the recipient and the sender themselves have the ability to play the received / generated message, respectively, with the specified message history being
  • the generated message-history of augmented reality is looped.
  • user devices and a server in a communication system are communicated via a network through which connections are established between the server and user devices to allow users to interact in a communication system according to the described method, including without limitation the Internet, wireless communication networks, networks using standard communication technology and / or protocols.
  • the described communication system can function on any suitable user devices, regardless of the operating systems installed on them.
  • a smartphone As a user device, you can use, for example, a smartphone, tablet computer, or any other device that contains an image capture device capable of displaying the world around the user (for example, a camera), a display component capable of providing the user with the ability to see the image capture device the surrounding world (for example, a user device screen) and a network component that allows you to communicate with at least one other user device.
  • image capture device capable of displaying the world around the user
  • a display component capable of providing the user with the ability to see the image capture device the surrounding world
  • a network component that allows you to communicate with at least one other user device.
  • Such devices should have computing capacity and components sufficient to run and execute applications based on their current location.
  • User access to the communication system can be carried out using the appropriate application installed on the user device via the network.
  • An application is a program installed on the user's device and intended for user interaction in the communication system.
  • interacting users should be understood as the sender of an augmented reality history message and the recipient of an augmented reality history message.
  • the sender should be understood as the user of the communication system initiating the transmission of the augmented reality history message, and the recipient as the user of the communication system receiving the message history of augmented reality.
  • Transferring an augmented reality history message from the sender's user device to the user device at least one recipient can be carried out in such a way that the user interaction takes place only after the recipient receives the transmitted message-history of augmented reality, or the transmission of the message-history of augmented reality is the publication of the specified message-history in a message line of users with the recipient’s ability to open the publication with the implementation of further steps according to the present invention.
  • creating a scene includes adding the primary virtual object with its display on the user's device’s screen at a specified location, and optionally performing at least one merging of the primary virtual object with an additional virtual object and / or at least one new task in any sequence location on the screen of the user device of the sender with the subsequent movement of the displayed main virtual The object on the screen of the user of the sender device to a predetermined location.
  • a virtual object of augmented reality is used as the main virtual object.
  • the main virtual object when creating a scene will be displayed on the screen of the user device of the sender as the sender's augmented reality.
  • creating a scene includes adding the main virtual object of augmented reality with its display on the screen of the user's device of the sender in the specified the location displayed by the device for capturing the image of the user device of the sender, and it is not necessary to implement in any sequence at least one merge of the primary virtual object of augmented reality with the additional virtual object of augmented reality and / or at least one job of the new location on the screen of the user device of the sender displayed by the device image capture of the sender's user device, followed by izheniem primary virtual object displayed augmented reality on the screen of the user of the sender device to a predetermined location.
  • the scene may simply exhibit the main virtual object. If used as the main virtual object, for example, the video scene will show the video; if you use a 2d or 3d virtual object as the main virtual object, the scene will show the specified object.
  • the scene in addition to showing the main virtual object, can demonstrate the movement of the specified object to a different location than the initial one, as well as demonstrate the virtual object along with the additional virtual object.
  • Such an implementation option is most preferable when using as the main virtual object 3d an animated virtual object, the movement of which can be displayed most harmoniously.
  • an additional virtual object or additional virtual object of augmented reality they are used according to at least one of a 3d static (for example, 3d drawing) or an animated virtual object, 2d static (for example, a picture, photo) or an animated virtual object, text, an audio file (for example, music, an audio effect, a user's voice recording) or a video file.
  • Merging 5 of the main virtual object with an additional one can be implemented as a provision for the sender to attach an additional virtual object to the main virtual object.
  • the additional virtual object can be attached to the main virtual object at any time: at the initial specified location of the main virtual object on the screen of the user's device of the sender, when the virtual object moves, at the new specified location of the main virtual object.
  • the main or additional virtual object of which is an audio recording on the screen of the user device 15 of the sender when adding a specified audio recording, for example, an icon associated with the specified audio recording can be displayed.
  • an icon associated with the specified audio recording can be displayed. The same can be applied when playing back the scene of the message of the history of augmented reality, the main or additional virtual object of which is an audio recording.
  • specifying a location when a virtual object of augmented reality is used as a primary virtual object is provided by binding the primary virtual object of augmented reality to a geographic location displayed by the image capturing device of the sender’s user device, for example by binding the specified object to the table surface displayed on the screen of the user the sender device by the user device camera Avitel.
  • the specified message is history is also placed on the screen of the user device of the recipient in the specified location.
  • While setting the location is preferably provided by its binding to the geographic location displayed by the device to capture the image of the user device of the recipient.
  • the main virtual object of the first scene of the augmented reality history message is displayed, and subsequent movements of the main virtual object, for example, a 3d animated virtual object, are performed from the specified specified location.
  • the main virtual object of the first scene of an augmented reality history message is audio recording
  • the main virtual object of a second scene of an augmented reality history message is a 3d animated virtual object
  • the specified audio recording will be played first, then the specified 3d animated virtual object will be displayed in the specified location.
  • the sender after the creation of an augmented reality history message, the sender is provided with the option to edit it.
  • editing is preferably carried out by deleting at least one of the scenes from a number of scenes and / or changing the sequence of scenes in a number of scenes.
  • the interacting users can perform at least one of the following operations: sending a text message, sending a voice message, sending a video message, sending a multimedia message, video call.
  • the sender from different angles and from different points of view
  • the history of augmented reality provide the ability to display the specified object on the screen of the recipient's user device from different angles and from different points of view.
  • the user can view the main virtual object using the device for capturing an image of the user device from different viewpoints, for example, from above, from the side or go around it.
  • the image capture device will display only the physical, 15 real, world without the main virtual object.
  • additional virtual objects In case the primary or additional virtual object is an audio recording, an icon associated with the specified audio recording can be displayed on the screen of the recipient's user device.
  • FIG. 1 illustrates a block diagram of an exemplary method. user interaction in a communication system in accordance with one of the preferred embodiments of the present invention. The steps of the method illustrated in the flowchart will be further described in more detail with reference to FIG. 2a - 21.
  • the sender selects the primary virtual object of the first scene, i.e., via the user interface on the screen 200 of the sender's user device 202.
  • the type of the specified object for example, whether it will be a 3d animated virtual object, text, video or audio, as illustrated in FIG. 2a
  • the sender selects a 3d animated virtual object.
  • the sender After selecting the type of the main virtual object on the screen 200 of the user device 202, the sender displays the panel 204 with 3d-animated virtual objects available for selection, like
  • the sender adds a 3d animated virtual object 206, which in the described example is an augmented reality object, to the first scene by selecting the specified object from the available objects on the panel 204 and setting its location displayed by the image capture device
  • the sender can position the object, for example, by touching a certain location on the touchscreen 200 or dragging a selected 3d animated virtual object 206 on the touchscreen 200 to a specific location.
  • the sender After the 3d animated virtual object 206 is displayed on the screen 200 of the sender's user device 202, the sender is given the opportunity to combine the specified virtual object 206 with text, 2d or 3d virtual object, audio or video, which is also displayed in FIG. 2b.
  • FIG. 2c is a schematic diagram illustrating the screen 200 of the user device 202 of the sender, which shows the stage of setting a new location 210 of the displayed 3d animated virtual object 206 of the first scene, which, as mentioned above, can
  • FIG. 2d is a schematic diagram illustrating the screen 200 of the user device 202 of the sender, which displays the 3d animated virtual object 206 of the first scene in the new preset
  • the sender can combine the specified virtual object 206 with text, 2d or 3d virtual object, audio or video, which is also displayed in FIG. 2d.
  • the implementation of the sender selects the union 3d animated virtual object 206 with text.
  • FIG. 2e is a schematic diagram illustrating the screen 200 of the user device 202 of the sender, which displays the 3d animated virtual object 206 of the augmented reality of the first scene, combined with text 212.
  • Merging with text can be accomplished, for example, by entering text 212 or by selecting text from the available to the selection of examples, “drop-downs” after the finger touches the corresponding window with the inscription “Click to add text”, as shown in FIG. 2d.
  • This step is described in block 100 of the flowchart shown in FIG. 1, as step c) the sender creates the first scene.
  • a 3d animated virtual object 206 when performing any of the actions is displayed on the screen 200 of the user device 202 of the sender as an object of augmented reality.
  • FIG. 2f is a schematic diagram illustrating the screen 200 of the user's sender device 202, which displays the step of adding a 3d animated virtual object 214 of the augmented reality of the second scene. This step is described in block 102 of the flowchart shown in FIG. 1, as stage a) the sender creates a second scene. In the process of adding, the sender selects the specified object from the objects available to the selection on the panel 204. At the same time, the 3d animated virtual object 214 may, for example, be displayed on the screen 200 of the user device 202, replacing the displayed 3d animated virtual object of the first scene, i.e.
  • the 3d display of the animated virtual object 214 will occur after setting its location, displayed by the image capturing device of the sender's user device 202 on the screen 200 of the sender's user device 202, as is the case with adding a 3d animated virtual object 206.
  • the second option is preferable. If the sender, after completing, in his opinion, the creation of the first scene will stop its recording, for example, by touching the “Stop” button with a finger, display on screen 200 user device 202 sender. Similarly, the recording of each of the scenes can begin after a finger touches the corresponding “Start” button.
  • the sender can be given the opportunity to select the main virtual object of the second scene, i.e. select the type of the specified object, for example, whether it will be a 3d animated virtual object, text, video or audio, as illustrated in FIG. 2a
  • the sender selects 3d animated virtual object 214 from the available objects on panel 204 after selecting 3d animated virtual object as the main virtual object type of the second scene.
  • FIG. 2g is a schematic diagram illustrating the screen 200 of the user device 202 of the sender, on which the 3d animated virtual object 214 of the augmented reality of the second scene is displayed at the 15th last location of the 3d animated virtual object 206 of the first scene.
  • the sender is given the opportunity to combine the specified virtual object 214 with text, 2d or 3d virtual object, audio or video, which is also displayed in FIG. 2g.
  • FIG. 2h is a schematic diagram illustrating the screen 200 of the sender's user device 202, on which the 3d animated virtual object 214 of the augmented reality of the second scene is displayed, combined with the audio file 216.
  • the audio file can be combined, for example, by recording the sender’s voice or by
  • FIG. 2i is a schematic diagram illustrating the screen 200 of the user device 202 sender, which displays a 3d animated virtual object 214 of augmented reality of the second scene, combined with an audio file 216 and 2d virtual object 218.
  • Merging with a 2d virtual object 218 can be accomplished, for example, by selecting 5 2d virtual objects from files stored on the user's device of the sender, for example, from photographs, or by selecting from available examples to choose, “drop-down” after touching the corresponding window with a finger with the inscription “ Click to add a 2d or 3d virtual object, as shown in FIG. 2h.
  • This step is described in block 10 of the block diagram shown in FIG. 1, as step c) the sender creates the second scene.
  • Actions performed by 3d animated virtual objects 206 and 214 or related actions that is, finding virtual objects 206 and 214 at a given location, displaying additional
  • FIG. 2j is a schematic diagram illustrating the screen 200 of the user device 202 25 of the sender at the stage of selecting the main virtual object of the third scene.
  • the sender selects the video.
  • a panel 220 is displayed with available video files, as illustrated in FIG. 2k from the Sender adds the video file 222, which in the described example is object of augmented reality in the third scene by selecting the specified object from the available objects on the panel 220 and setting its location displayed by the image capturing device of the sender's user device 20 on the screen 200 of the user 5 of the sender device 202.
  • This step is described in block 104 of the flowchart shown in FIG. 1, as stage a) the sender’s creation of the third scene.
  • FIG. 21 is a schematic diagram illustrating the screen 200 of the user device 202 of the sender, on which the selected video file 222 is displayed at a given location, displayed as an object of augmented reality.
  • an augmented reality story message is carried out.
  • the scene can be added to the message history of augmented reality immediately after its creation, or the message history of augmented reality is formed after 15 scenes are created.
  • the sender after creating an augmented reality history message, the sender is provided with the opportunity to edit it, for example, by deleting at least one of the scenes from a number of scenes.
  • the sender 25 214 in the specified window display the indicator associated with the second scene, and after adding the video file - the indicator associated with the third scene.
  • the second indicator associated with the movement action of a 3d animated virtual object is removed, and the first and third indicators are associated with the display of 3d animated virtual objects, then in one of the preferred embodiments a 3d animated virtual object appears in the resulting augmented reality history message the first scene will make the movement visible to users from its specified location to the specified location of the 3d animated virtual object third scene.
  • the sender transmits it from the user device of the sender to the user device of at least one recipient.
  • This transfer step is described in block 108 of the flowchart shown in FIG. 1.
  • the recipient After receiving the message of the history of augmented reality by the recipient's user device, as described in block 110 of the block diagram shown in FIG. 1, the recipient places the specified message of the augmented reality history on the screen of the recipient’s user device at a specified location, after which the augmented reality history message is reproduced on the screen of the recipient’s user device, as described in block 112 of the flowchart shown in FIG. one.
  • FIG. 3 is a schematic representation of an embodiment of a user device according to one embodiment of the present invention.
  • the specified user device can be both the user device of the sender and the user device of the recipient and contains the processor 300 and its associated screen 302, computer-readable media 304, network component 306 and image pickup device 308.
  • FIG. 4 is a schematic representation of an exemplary communication system implementation in accordance with one embodiment. of the present invention.
  • the specified communication system contains the server 400 and its associated sender and recipient user devices 402 and 404, respectively.
  • the message of the history of augmented reality from the user's device of the sender to the user's device of the recipient and vice versa is transmitted by the server 400.
  • the user interaction method in the communication system is not limited to the specific features or steps described above.
  • the specific features and steps described above are disclosed as examples implementing the present invention, and other equivalent features and steps may be covered by the scope of the present invention.

Abstract

Изобретение относится к области обмена сообщениями, в частности – к обмену сообщениями дополненной реальности. Способ взаимодействия пользователей в коммуникационной системе включает создание при помощи пользовательского устройства отправителя ряда сцен, каждая из которых содержит основной виртуальный объект, выбранный из 3d статичного или анимированного виртуального объекта, 2d статичного или анимированного виртуального объекта, текста, аудио или видео, с формированием сообщения-истории дополненной реальности, содержащего по меньшей мере две из ряда сцен; передачу сообщения-истории дополненной реальности от пользовательского устройства отправителя на пользовательское устройство по меньшей мере одного получателя; получение сообщения-истории дополненной реальности пользовательским устройством получателя; воспроизведение сообщения-истории дополненной реальности на экране пользовательского устройства получателя.

Description

ВЗАИМОДЕЙСТВИЕ ПОЛЬЗОВАТЕЛЕЙ В КОММУНИКАЦИОННЫХ СИСТЕМАХ С ИСПОЛЬЗОВАНИЕМ СООБЩЕНИЯ-ИСТОРИИ
ДОПОЛНЕННОЙ РЕАЛЬНОСТИ
ОБЛАСТЬ ТЕХНИКИ Изобретение относится к области обмена сообщениями, в частности - к обмену сообщениями дополненной реальности.
УРОВЕНЬ ТЕХНИКИ
Системы обмена сообщениями - коммуникационные системы - позволяют пользователям общаться посредством отправки друг другу сообщений. В настоящее время с развитием технологий дополненной реальности реализовано множество коммуникационных систем, позволяющих обмениваться сообщениями дополненной реальности, т.е. дополнять физический, реальный, мир, отображаемый на экране пользовательского устройства устройством захвата изображения пользовательского устройства, объектами виртуального мира. Однако известные сообщения дополненной реальности являются достаточно обычными и простыми, и не подходят в случае, когда отправителю требуется создать сообщение, дающее возможность донести до получателя более сложную мысль или идею, или когда отправитель хочет оформить свою мысль или идею таким образом, чтобы вызвать большую заинтересованность у получателя. Таким образом, актуальной задачей является улучшение известных способов взаимодействия пользователей в коммуникационных системах путем расширения и дополнения связанных с созданием сообщений дополненной реальности возможностей подобных коммуникационных систем.
КРАТКОЕ ИЗЛОЖЕНИЕ СУЩНОСТИ ИЗОБРЕТЕНИЯ Идея настоящего изобретения заключается в том, что отправитель в коммуникационной системе может самостоятельно создать комплексное сообщение-историю дополненной реальности путем создания и комбинирования различных сцен, предпочтительно подчиненных одной общей идее. Сцены могут содержать различные основные виртуальные объекты: 2d и 3d статичные или анимированные виртуальные объекты, которые могут быть объединены с дополнительными виртуальными объектами; текст; аудио или видео. Во время создания сцен виртуальные объекты наиболее предпочтительно отображаются на экране пользовательского устройства отправителя в заданном местоположении как объекты дополненной реальности, при этом запись действий, осуществляемых виртуальными объектами, осуществляется только в слое дополненной реальности. На экране пользовательского устройства получателя полученное сообщение- история также воспроизводится как объект дополненной реальности, наиболее предпочтительно - после предварительного задания местоположения указанного сообщения.
Это краткое изложение сущности изобретения предоставлено для ознакомления с идеей изобретения в упрощенной форме, которая дополнительно раскрыта ниже в Подробном описании изобретения. Данное Краткое изложение сущности изобретения не является направленным на определение существенных признаков заявленных объектов изобретения, а также не является направленным на использование с целью ограничения объема изобретения.
КРАТКОЕ ОПИСАНИЕ ГРАФИЧЕСКИХ МАТЕРИАЛОВ Заявляемое изобретение поясняется с помощью следующих фигур, являющихся неограничивающими примерами реализации настоящего изобретения: фиг. 1 - блок-схема примера осуществления способа взаимодействия пользователей в коммуникационной системе согласно одному из предпочтительных вариантов осуществления настоящего изобретения; фиг. 2а - схематическое изображение, иллюстрирующее экран пользовательского устройства отправителя на этапе выбора основного виртуального объекта первой сцены; фиг. 2b - схематическое изображение, иллюстрирующее экран пользовательского устройства отправителя, на котором отображен 3d анимированный виртуальный объект дополненной реальности первой сцены в заданном местоположении; фиг. 2с - схематическое изображение, иллюстрирующее экран пользовательского устройства отправителя, на котором отображен этап задания нового местоположения отображаемого 3d анимированного виртуального объекта дополненной реальности первой сцены; фиг. 2d - схематическое изображение, иллюстрирующее экран пользовательского устройства отправителя, на котором отображен 3d анимированный виртуальный объект дополненной реальности первой сцены в новом заданном местоположении; фиг. 2е - схематическое изображение, иллюстрирующее экран пользовательского устройства отправителя, на котором отображен 3d анимированный виртуальный объект дополненной реальности первой сцены, объединенный с текстом; фиг. 2f - схематическое изображение, иллюстрирующее экран пользовательского устройства отправителя, на котором отображен этап добавления 3d анимированного виртуального объекта дополненной реальности второй сцены; фиг. 2g - схематическое изображение, иллюстрирующее экран пользовательского устройства отправителя, на котором отображен 3d анимированный виртуальный объект дополненной реальности второй сцены; фиг. 2h - схематическое изображение, иллюстрирующее экран пользовательского устройства отправителя, на котором отображен 3d анимированный виртуальный объект дополненной реальности второй сцены, объединенный с аудиофайлом; фиг. 2i - схематическое изображение, иллюстрирующее экран пользовательского устройства отправителя, на котором отображен 3d анимированный виртуальный объект дополненной реальности второй сцены, объединенный с аудиофайлом и 2d виртуальным объектом; фиг. 2j - схематическое изображение, иллюстрирующее экран пользовательского устройства отправителя на этапе выбора основного виртуального объекта третьей сцены; фиг. 2к - схематическое изображение, иллюстрирующее экран пользовательского устройства отправителя на этапе выбора видеофайла из доступных к выбору видеофайлов в качестве основного виртуального объекта третьей сцены; фиг. 21 - схематическое изображение, иллюстрирующее экран пользовательского устройства отправителя, на котором отображен выбранный видеофайл в заданном местоположении, отображаемый как объект дополненной реальности; фиг. 3 - схематическое изображение примера осуществления пользовательского устройства согласно одному из предпочтительных вариантов осуществления настоящего изобретения; фиг. 4 - схематическое изображение примера осуществления коммуникационной системы согласно одному из предпочтительных вариантов осуществления настоящего изобретения.
ПОДРОБНОЕ ОПИСАНИЕ ИЗОБРЕТЕНИЯ
Настоящее изобретение относится к способу взаимодействия пользователей в коммуникационной системе, пользовательскому устройству для организации взаимодействия пользователей в коммуникационной системе, коммуникационной системе, позволяющей реализовать указанный способ, и машиночитаемому носителю, на котором сохранены программные инструкции, инициирующие выполнение аспектов способа взаимодействия пользователей согласно настоящему изобретению. В соответствии с первым аспектом настоящего изобретения предложен способ взаимодействия пользователей в коммуникационной системе, включающий создание при помощи пользовательского устройства отправителя ряда сцен, каждая из которых содержит основной виртуальный объект, выбранный из 3d статичного или анимированного виртуального объекта, 2d статичного или анимированного виртуального объекта, текста, аудио или видео, с формированием сообщения-истории дополненной реальности, содержащего по меньшей мере две из ряда сцен; передачу сообщения-истории дополненной реальности от пользовательского устройства отправителя на пользовательское устройство по меньшей мере одного получателя; получение сообщения-истории дополненной реальности пользовательским устройством получателя; воспроизведение сообщения-истории дополненной реальности на экране пользовательского устройства получателя.
В соответствии со вторым аспектом настоящего изобретения предложено пользовательское устройство для организации взаимодействия пользователей в коммуникационной системе, включающее устройство захвата изображения, по меньшей мере один процессор, машиночитаемый носитель, соединенный с по меньшей мере одним процессором и содержащий программные инструкции для взаимодействия пользователей в коммуникационной системе, которые при приведении их в исполнение по меньшей мере одним процессором обеспечивают предоставление возможности создания при помощи пользовательского устройства ряда сцен, каждая из которых содержит основной виртуальный объект, выбранный из 3d статичного или анимированного виртуального объекта, 2d статичного или анимированного виртуального объекта, текста, аудио или видео, с формированием сообщения-истории дополненной реальности, содержащего по меньшей мере две из ряда сцен; предоставление возможности передачи сообщения-истории дополненной реальности от пользовательского устройства на по меньшей мере одно другое пользовательское устройство; предоставление возможности получения сообщения-истории дополненной реальности пользовательским устройством; предоставление возможности воспроизведения сообщения-истории дополненной реальности на экране пользовательского устройства.
В соответствии с третьим аспектом настоящего изобретения предложена коммуникационная система, которая обеспечивает взаимодействие пользовательских устройств и сервера межу собой, содержащая программные инструкции, расположенные на машиночитаемом носителе пользовательского устройства, которые при приведении их в исполнение по меньшей мере одним процессором пользовательского устройства обеспечивают предоставление возможности создания при помощи пользовательского устройства ряда сцен, каждая из которых содержит основной виртуальный объект, выбранный из 3d статичного или анимированного виртуального объекта, 2d статичного или анимированного виртуального объекта, текста, аудио или видео, с формированием сообщения-истории дополненной реальности, содержащего по меньшей мере две из ряда сцен; предоставление возможности передачи сообщения-истории дополненной реальности от пользовательского устройства на по меньшей мере одно другое пользовательское устройство; предоставление возможности получения сообщения-истории дополненной реальности пользовательским устройством; предоставление возможности воспроизведения сообщения-истории дополненной реальности на экране пользовательского устройства; и программные инструкции, расположенные на машиночитаемом носителе сервера, которые при приведении их в исполнение по меньшей мере одним процессором сервера обеспечивают получение сервером переданного сообщения- истории дополненной реальности от пользовательского устройства отправителя, сохранение полученного сообщения-истории дополненной реальности, передачу сохраненного сообщения-истории дополненной реальности от сервера на пользовательское устройство по меньшей мере одного получателя. В соответствии с четвертым аспектом настоящего изобретения предложен машиночитаемый носитель, содержащий программные инструкции для взаимодействия пользователей в коммуникационной системе, которые при приведении их в исполнение по меньшей мере одним процессором пользовательского устройства обеспечивают предоставление возможности создания при помощи пользовательского устройства ряда сцен, каждая из которых содержит основной виртуальный объект, выбранный из 3d статичного или анимированного виртуального объекта, 2d статичного или анимированного виртуального объекта, текста, аудио или видео, с формированием сообщения-истории дополненной реальности, содержащего по меньшей мере две из ряда сцен; предоставление возможности передачи сообщения-истории дополненной реальности от пользовательского устройства на по меньшей мере одно другое пользовательское устройство; предоставление возможности получения сообщения-истории дополненной реальности пользовательским устройством; предоставление возможности воспроизведения сообщения-истории дополненной реальности на экране пользовательского устройства. Таким образом, отправитель в коммуникационной системе может самостоятельно создать комплексное сообщение-историю дополненной реальности путем создания и комбинирования различных сцен, каждая из которых содержит различные объекты и доносит до получателя различные мысли, которые в 5 совокупности предпочтительно подчинены главной общей идее, например, как главы в книге или сцены в художественном фильме. Сцены могут содержать различные основные виртуальные объекты: 2d и 3d статичные или анимированные виртуальные объекты, которые могут быть объединены с дополнительными виртуальными объектами; текст; аудио или видео. На экране пользовательского ю устройства получателя полученное сообщение-история воспроизводится как объект дополненной реальности. Вышеописанные возможности предоставляют пользователю новый вид и формат общения, влияют на эмоциональную атмосферу, которая создается между пользователями, увеличивают заинтересованность пользователей в осуществлении подобного взаимодействия.
15 Предпочтительно отправителю предоставляют возможность воспроизведения созданного сообщения-истории дополненной реальности на экране его пользовательского устройства. Таким образом, как получатель, так и сам отправитель имеют возможность воспроизведения полученного/сформированного сообщения соответственно, при этом указанное сообщение-история будет
20 отображаться на экране пользовательского устройства получателя как дополненная реальность получателя, а на экране пользовательского устройства отправителя - как дополненная реальность отправителя соответственно. Предпочтительно сформированное сообщение-история дополненной реальности является зацикленным.
25 Предпочтительно пользовательские устройства и сервер в коммуникационной системе сообщены через сеть, при помощи которой устанавливают соединения между сервером и пользовательскими устройствами для осуществления взаимодействия пользователей в коммуникационной системе согласно описанному способу, включающую без ограничения сеть интернет, зо беспроводные коммуникационные сети, сети, использующие стандартные коммуникационные технологии и/или протоколы. Описанная коммуникационная система может функционировать на любых подходящих пользовательских устройствах вне зависимости от установленных на них операционных систем.
В качестве пользовательского устройства может быть использован, например, смартфон, планшетный компьютер, или же любое другое устройство, которое содержит устройство захвата изображения, способное отображать окружающий пользователя мир (например, камера), компонент отображения, способный обеспечивать пользователя возможностью видеть отображаемый устройством захвата изображения окружающий мир (например, экран пользовательского устройства) и сетевой компонент, позволяющий устанавливать связь с по меньшей мере одним другим пользовательским устройством. Такие устройства должны иметь вычислительную способность и компоненты, достаточные для запуска и исполнения приложений с учетом текущего местоположения. Доступ пользователя к коммуникационной системе может осуществляться при помощи соответствующего приложения, установленного на пользовательском устройстве, посредством сети.
Под приложением понимают программу, установленную на пользовательском устройстве пользователя и предназначенную для взаимодействия пользователей в коммуникационной системе.
В контексте настоящего описания под взаимодействующими пользователями следует понимать отправителя сообщения-истории дополненной реальности и получателя сообщения-истории дополненной реальности. При этом под отправителем следует понимать пользователя коммуникационной системы, инициирующего передачу сообщения-истории дополненной реальности, а под получателем - пользователя коммуникационной системы, получающего сообщение-историю дополненной реальности.
Передача сообщения-истории дополненной реальности от пользовательского устройства отправителя на пользовательское устройство по меньшей мере одного получателя может осуществляться таким образом, что взаимодействие пользователей осуществляется лишь после получения получателем переданного сообщения-истории дополненной реальности, либо же передача сообщения- истории дополненной реальности представляет собой публикацию указанного сообщения-истории в ленту сообщений пользователей с возможностью получателем открыть публикацию с осуществлением дальнейших этапов способа согласно настоящему изобретению.
Предпочтительно в общем случае создание сцены включает добавление основного виртуального объекта с его отображением на экране пользовательского устройства отправителя в заданном местоположении, и необязательно осуществление в любой последовательности по меньшей мере одного объединения основного виртуального объекта с дополнительным виртуальным объектом и/или по меньшей мере одного задания нового местоположения на экране пользовательского устройства отправителя с последующим передвижением отображаемого основного виртуального объекта на экране пользовательского устройства отправителя в заданное местоположение.
В одном из наиболее предпочтительных вариантов осуществления настоящего изобретения в качестве основного виртуального объекта используют виртуальный объект дополненной реальности. Таким образом, основной виртуальный объект при создании сцены будет отображаться на экране пользовательского устройства отправителя как дополненная реальность отправителя. В указанном случае создание сцены включает добавление основного виртуального объекта дополненной реальности с его отображением на экране пользовательского устройства отправителя в заданном местоположении, отображаемом устройством захвата изображения пользовательского устройства отправителя, и необязательно осуществление в любой последовательности по меньшей мере одного объединения основного виртуального объекта дополненной реальности с дополнительным виртуальным объектом дополненной реальности и/или по меньшей мере одного задания нового местоположения на экране пользовательского устройства отправителя, отображаемого устройством захвата изображения пользовательского устройства отправителя, с последующим передвижением отображаемого основного виртуального объекта дополненной реальности на экране пользовательского устройства отправителя в заданное местоположение .
Таким образом, в наиболее простом варианте осуществления сцена может просто демонстрировать основной виртуальный объект. В случае использования в качестве основного виртуального объекта, например, видео сцена будет демонстрировать видео, в случае использования в качестве основного виртуального объекта 2d или 3d виртуального объекта сцена будет демонстрировать указанный объект.
В более сложном варианте осуществления сцена помимо демонстрации основного виртуального объекта может демонстрировать передвижение указанного объекта в другое местоположение, отличное от начального, а также демонстрировать виртуальный объект вместе с дополнительным виртуальным объектом. Такой вариант осуществления наиболее предпочтителен при использовании в качестве основного виртуального объекта 3d анимированного виртуального объекта, передвижение которого может быть отображено наиболее гармонично.
Предпочтительно в качестве дополнительного виртуального объекта или дополнительного виртуального объекта дополненной реальности используют по меньшей мере один из 3d статичного (например, 3d рисунок) или анимированного виртуального объекта, 2d статичного (например, картинка, фотография) или анимированного виртуального объекта, текста, аудиофайла (например, музыка, аудиоэффект, запись голоса пользователя) или видеофайла. Объединение 5 основного виртуального объекта с дополнительным может быть реализовано в качестве предоставления возможности отправителю прикрепить к основному виртуальному объекту дополнительный виртуальный объект. Предпочтительно дополнительный виртуальный объект может быть прикреплен к основному виртуальному объекту в любой момент времени: в начальном заданном ю местоположении основного виртуального объекта на экране пользовательского устройства отправителя, при осуществлении виртуальным объектом передвижения, в новом заданном местоположении основного виртуального объекта.
При создании сцены, основным или дополнительным виртуальным объектом которой является аудиозапись, на экране пользовательского устройства 15 отправителя при добавлении указанной аудиозаписи, например, может быть отображена иконка, ассоциированная с указанной аудиозаписью. То же может быть применимо и при воспроизведении сцены сообщения-истории дополненной реальности, основным или дополнительным виртуальным объектом которой является аудиозапись.
Предпочтительно задание местоположения, когда в качестве основного виртуального объекта используют виртуальный объект дополненной реальности, обеспечивают посредством привязки основного виртуального объекта дополненной реальности к географическому местоположению, отображаемому устройством захвата изображения пользовательского устройства отправителя, например, посредством привязки указанного объекта к поверхности стола, отображаемой на экране пользовательского устройства отправителя камерой пользовательского устройства отправителя.
В предпочтительном варианте осуществления настоящего изобретения после получения сообщения-истории дополненной реальности пользовательским зо устройством получателя и перед его воспроизведением указанное сообщение- историю также размещают на экране пользовательского устройства получателя в заданном местоположении.
При этом задание местоположения предпочтительно обеспечивают посредством его привязки к географическому местоположению, отображаемому устройством захвата изображения пользовательского устройства получателя. Таким образом, в заданном местоположении отображается основной виртуальный объект первой сцены сообщения-истории дополненной реальности, и последующие передвижения основного виртуального объекта, представляющего собой, например, 3d анимированный виртуальный объект, осуществляются из указанного заданного местоположения. К примеру, если основным виртуальный объектом первой сцены сообщения-истории дополненной реальности будет аудиозапись, а основным виртуальным объектом второй сцены сообщения-истории дополненной реальности будет 3d анимированный виртуальный объект, то после задания местоположения указанного сообщения-истории дополненной реальности сначала будет воспроизведена указанная аудиозапись, а далее в заданном местоположении будет отображен указанный 3d анимированный виртуальный объект.
В одном из предпочтительных вариантов осуществления после создания сообщения-истории дополненной реальности отправителю предоставляют возможность его редактирования. При этом предпочтительно редактирование осуществляют посредством удаления из ряда сцен по меньшей мере одной из сцен и/или изменения последовательности сцен в ряде сцен.
Предпочтительно во время или после воспроизведения сообщения-истории дополненной реальности на экране пользовательского устройства получателя взаимодействующим пользователям предоставляют возможность осуществления по меньшей мере одной из следующих операций: передачи текстового сообщения, передачи голосового сообщения, передачи видео сообщения, передачи мультимедийного сообщения, видео звонка.
В одном из предпочтительных вариантов осуществления настоящего изобретения во время создания сцены обеспечивают возможность отображения основного виртуального объекта на экране пользовательского устройства отправителя под разными углами и с разных точек обзора, а во время воспроизведения сообщения-истории дополненной реальности обеспечивают возможность отображения указанного объекта на экране пользовательского устройства получателя под разными углами и с разных точек обзора. Это означает, 5 что после отображения основного виртуального объекта или воспроизведения сообщения-истории дополненной реальности на экране пользовательского устройства пользователь имеет возможность рассмотреть основной виртуальный объект при помощи устройства захвата изображения пользовательского устройства с разных точек обзора, например, сверху, сбоку или обойти его кругом. Например, ю во время воспроизведения сообщения-истории дополненной реальности и одновременного поворота устройства захвата изображения пользовательского устройства получателя в противоположную от места воспроизведения указанного сообщения-истории сторону на экране пользовательского устройства получателя посредством устройства захвата изображения отобразят лишь физический, 15 реальный, мир без основного виртуального объекта. То же самое применимо к дополнительным виртуальным объектам. В случае если основным или дополнительным виртуальным объектом является аудиозапись, на экране пользовательского устройства получателя может быть отображена иконка, ассоциированная с указанной аудиозаписью.
Описанные выше варианты реализации настоящего изобретения в равной степени относятся ко всем заявленным его аспектам, а именно к способу взаимодействия пользователей в коммуникационной системе, пользовательскому устройству для организации взаимодействия пользователей в коммуникационной системе, машиночитаемому носителю, коммуникационной системе, обеспечивающей взаимодействие пользовательских устройств и сервера между собой.
Аспекты настоящего изобретения далее раскрыты в данном описании со ссылками на графические материалы, которые являются неограничивающими примерами реализации настоящего изобретения. зо Фиг. 1 иллюстрирует блок-схему примера осуществления способа взаимодействия пользователей в коммуникационной системе согласно одному из предпочтительных вариантов осуществления настоящего изобретения. Этапы проиллюстрированного блок-схемой способа будут далее более подробно раскрыты со ссылками на фиг. 2а - 21.
5 При инициировании формирования сообщения-истории дополненной реальности отправитель посредством пользовательского интерфейса на экране 200 пользовательского устройства 202 отправителя выбирает основной виртуальный объект первой сцены, т.е. тип указанного объекта, например, будет ли это 3d анимированный виртуальный объект, текст, видео или аудио, как ю проиллюстрировано на фиг. 2а. В приведенном примере осуществления отправитель выбирает 3d анимированный виртуальный объект.
После выбора типа основного виртуального объекта на экране 200 пользовательского устройства 202 отправителя отображают панель 204 с доступными к выбору 3d анимированными виртуальными объектами, как
15 проиллюстрировано на фиг. 2Ь. Отправитель добавляет 3d анимированный виртуальный объект 206, который в описываемом примере является объектом дополненной реальности, в первую сцену посредством осуществления выбора указанного объекта из доступных к выбору объектов на панели 204 и задания его местоположения, отображаемого устройством захвата изображения
20 пользовательского устройства 202 отправителя на экране 200 пользовательского устройства 202 отправителя. Отправитель может задавать местоположение объекту, например, посредством касания пальцем определенного места сенсорного экрана 200 или «перетаскивания» пальцем выбранного 3d анимированного виртуального объекта 206 по сенсорному экрану 200 до определенного
25 местоположения, после чего указанный объект 206 привязывается к заданному географическому местоположению, отображаемому устройством захвата изображения пользовательского устройства 202 отправителя, и отображается как объект дополненной реальности. Т.е. на экране 200 пользовательского устройства 202 отправителя отображается как 3d анимированный виртуальный объект 206, так зо и объекты 208 реального мира, окружающего отправителя, к которым обращено устройство захвата изображения пользовательского устройства 202 отправителя. Отправитель может осмотреть отображаемый 3d анимированный виртуальный объект 206 с разных сторон через экран 200 пользовательского устройства 202 отправителя, меняя угол обзора, при помощи устройства захвата изображения пользовательского устройства 202 отправителя. Указанный этап описан в блоке 100 5 блок-схемы, приведенной на фиг. 1, как этап а) создания отправителем первой сцены.
После отображения 3d анимированного виртуального объекта 206 на экране 200 пользовательского устройства 202 отправителя отправителю предоставляется возможность объединения указанного виртуального объекта 206 с текстом, 2d или ю 3d виртуальным объектом, аудио или видео, что также отображено на фиг. 2Ь.
На фиг. 2с представлено схематическое изображение, иллюстрирующее экран 200 пользовательского устройства 202 отправителя, на котором отображен этап задания нового местоположения 210 отображаемого 3d анимированного виртуального объекта 206 первой сцены, которое, как было указано выше, может
15 быть, к примеру, задано посредством касания пальцем определенного места сенсорного экрана 200 пользовательского устройства 202 отправителя. После задания нового местоположения 210 отправитель на экране 200 пользовательского устройства 202 отправителя видит, как 3d анимированный виртуальный объект 204 передвигается из своего «начального» заданного местоположения в новое заданное
20 местоположение 210, что описано в блоке 100 блок-схемы, приведенной на фиг. 1, как этап Ь) создания отправителем первой сцены.
На фиг. 2d представлено схематическое изображение, иллюстрирующее экран 200 пользовательского устройства 202 отправителя, на котором отображен 3d анимированный виртуальный объект 206 первой сцены в новом заданном
25 местоположении. Так же, как и в начальном заданном местоположении 3d анимированного виртуального объекта, на экране 200 пользовательского устройства 202 отправителя отправителю предоставляется возможность объединения указанного виртуального объекта 206 с текстом, 2d или 3d виртуальным объектом, аудио или видео, что также отображено на фиг. 2d. В зо приведенном примере осуществления отправитель выбирает объединение 3d анимированного виртуального объекта 206 с текстом.
На фиг. 2е представлено схематическое изображение, иллюстрирующее экран 200 пользовательского устройства 202 отправителя, на котором отображен 3d анимированный виртуальный объект 206 дополненной реальности первой сцены, объединенный с текстом 212. Объединение с текстом может быть осуществлено, например, посредством ввода текста 212 или посредством выбора текста из доступных к выбору примеров, «выпадающих» после касания пальцем соответствующего окна с надписью «Нажмите для добавления текста», как представлено на фиг. 2d. Указанный этап описан в блоке 100 блок-схемы, приведенной на фиг. 1, как этап с) создания отправителем первой сцены.
3d анимированный виртуальный объект 206 при осуществлении любого из действий отображается на экране 200 пользовательского устройства 202 отправителя как объект дополненной реальности.
На фиг. 2f представлено схематическое изображение, иллюстрирующее экран 200 пользовательского устройства 202 отправителя, на котором отображен этап добавления 3d анимированного виртуального объекта 214 дополненной реальности второй сцены. Указанный этап описан в блоке 102 блок-схемы, приведенной на фиг. 1, как этап а) создания отправителем второй сцены. В процессе добавления отправитель осуществляет выбор указанного объекта из доступных к выбору объектов на панели 204. При этом 3d анимированный виртуальный объект 214 может, например, отобразиться на экране 200 пользовательского устройства 202, заменив отображаемый 3d анимированный виртуальный объект первой сцены, т.е. отобразиться в местоположении последнего, либо же отображение 3d анимированного виртуального объекта 214 произойдет после задания его местоположения, отображаемого устройством захвата изображения пользовательского устройства 202 отправителя на экране 200 пользовательского устройства 202 отправителя, как в случае с добавлением 3d анимированного виртуального объекта 206. Второй вариант предпочтителен, если отправитель после завершения, по его мнению, создания первой сцены остановит ее запись, например, коснувшись пальцем кнопки «Стоп», отображаемой на экране 200 пользовательского устройства 202 отправителя. Аналогично запись каждой из сцен может начинаться после касания пальцем соответствующей кнопки «Старт». После касания кнопки «Стоп», как и при инициировании формирования сообщения-истории дополненной реальности, отправителю может быть 5 предоставлена возможность выбора основного виртуального объекта второй сцены, т.е. выбора типа указанного объекта, например, будет ли это 3d анимированный виртуальный объект, текст, видео или аудио, как проиллюстрировано на фиг. 2а. В таком случае отправитель осуществит выбор 3d анимированного виртуального объекта 214 из доступных к выбору объектов на панели 204 после выбора 3d ю анимированного виртуального объекта в качестве типа основного виртуального объекта второй сцены.
На фиг. 2g представлено схематическое изображение, иллюстрирующее экран 200 пользовательского устройства 202 отправителя, на котором отображен 3d анимированный виртуальный объект 214 дополненной реальности второй сцены в 15 последнем местоположении 3d анимированного виртуального объекта 206 первой сцены. Как и в описанном варианте с 3d анимированным виртуальным объектом 206, отправителю предоставляется возможность объединения указанного виртуального объекта 214 с текстом, 2d или 3d виртуальным объектом, аудио или видео, что также отображено на фиг. 2g.
20 На фиг. 2h представлено схематическое изображение, иллюстрирующее экран 200 пользовательского устройства 202 отправителя, на котором отображен 3d анимированный виртуальный объект 214 дополненной реальности второй сцены, объединенный с аудиофайлом 216. Объединение с аудиофайлом может быть осуществлено, например, посредством записи голоса отправителя или посредством
25 выбора аудиофайла из доступных к выбору примеров, «выпадающих» после касания пальцем соответствующего окна с надписью «Нажмите для добавления аудио или видео», как представлено на фиг. 2g. Указанный этап описан в блоке 102 блок-схемы, приведенной на фиг. 1, как этап Ь) создания отправителем второй сцены. зо На фиг. 2i представлено схематическое изображение, иллюстрирующее экран 200 пользовательского устройства 202 отправителя, на котором отображен 3d анимированный виртуальный объект 214 дополненной реальности второй сцены, объединенный с аудиофайлом 216 и 2d виртуальным объектом 218. Объединение с 2d виртуальным объектом 218 может быть осуществлено, например, посредством 5 выбора 2d виртуального объекта из файлов, хранящихся на пользовательском устройстве отправителя, например, из фотографий, или посредством выбора из доступных к выбору примеров, «выпадающих» после касания пальцем соответствующего окна с надписью «Нажмите для добавления 2d или 3d виртуального объекта», как представлено на фиг. 2h. Указанный этап описан в ю блоке 102 блок-схемы, приведенной на фиг. 1, как этап с) создания отправителем второй сцены.
Действия, осуществляемые 3d анимированными виртуальными объектами 206 и 214 или связанные с ними действия, то есть нахождение виртуальных объектов 206 и 214 в заданном местоположении, отображение дополнительных
15 виртуальных объектов (в данном случае - текста, аудио и 2d виртуального объекта) в объединении с 3d анимированными виртуальными объектами 206 и 214, передвижение виртуального объекта 206, параллельно записываются с результирующим созданием сцены, при этом запись осуществляется только в слое дополненной реальности, т.е. записываются только действия виртуальных объектов
20 206 и 214 и действия, ассоциированных с указанными объектами, без учета объектов 208 реального мира, окружающего отправителя.
После окончания создания второй сцены отправителю предоставляется возможность создания третьей сцены. На фиг. 2j представлено схематическое изображение, иллюстрирующее экран 200 пользовательского устройства 202 25 отправителя на этапе выбора основного виртуального объекта третьей сцены. В приведенном примере осуществления отправитель выбирает видео.
После выбора типа основного виртуального объекта на экране 200 пользовательского устройства 202 отправителя отображают панель 220 с доступными к выбору видеофайлами, как проиллюстрировано на фиг. 2к. зо Отправитель добавляет видеофайл 222, который в описываемом примере является объектом дополненной реальности, в третью сцену посредством осуществления выбора указанного объекта из доступных к выбору объектов на панели 220 и задания его местоположения, отображаемого устройством захвата изображения пользовательского устройства 202 отправителя на экране 200 пользовательского 5 устройства 202 отправителя. Указанный этап описан в блоке 104 блок-схемы, приведенной на фиг. 1, как этап а) создания отправителем третьей сцены.
На фиг. 21 представлено схематическое изображение, иллюстрирующее экран 200 пользовательского устройства 202 отправителя, на котором отображен выбранный видеофайл 222 в заданном местоположении, отображаемый как объект ю дополненной реальности.
Одновременно или последовательно с созданием сцен осуществляют формирование сообщения-истории дополненной реальности. Сцена может быть добавлена в сообщение-историю дополненной реальности сразу же после ее создания, или же сообщение-историю дополненной реальности формируют после 15 создания всех сцен.
В одном из наиболее предпочтительных вариантов осуществления настоящего изобретения после создания сообщения-истории дополненной реальности отправителю предоставляют возможность его редактирования, например, посредством удаления из ряда сцен по меньшей мере одной из сцен
20 и/или изменения последовательности сцен в ряде сцен. Это может быть реализовано, например, следующим образом. На экране 200 пользовательского устройства 202 отправителя после отображения 3d анимированного виртуального объекта 206 появится окно, в котором отображают индикатор, ассоциированный с первой сценой, далее после отображения 3d анимированного виртуального объекта
25 214 в указанном окне отображают индикатор, ассоциированный со второй сценой, а после добавления видеофайла - индикатор, ассоциированный с третьей сценой. Таким образом, в рассматриваемом случае индикаторов будет три. В случае если отправитель не хочет включать в сообщение-историю дополненной реальности, которую впоследствии планирует передать получателю, третью сцену, он может зо удалить индикатор, ассоциированный с третьей сценой, из указанного окна. Таким же образом из окна, содержащего, например, пять индикаторов, может быть удален любой или любые из них.
Если, к примеру, будет удален второй индикатор, ассоциированный с действием передвижения 3d анимированного виртуального объекта, а первый и третий индикаторы ассоциированы с отображением 3d анимированных виртуальных объектов, то в одном из предпочтительных вариантов осуществления в результирующем сообщении-истории дополненной реальности 3d анимированный виртуальный объект первой сцены осуществит видимое для пользователей передвижение из своего заданного местоположения в заданное местоположение 3d анимированного виртуального объекта третьей сцены.
Далее после формирования сообщения-истории дополненной реальности отправитель осуществляет его передачу от пользовательского устройства отправителя на пользовательское устройство по меньшей мере одного получателя. Указанный этап передачи описан в блоке 108 блок-схемы, приведенной на фиг. 1. После получения сообщения-истории дополненной реальности пользовательским устройством получателя, как описано в блоке 110 блок-схемы, приведенной на фиг. 1, получатель размещает указанное сообщение-историю дополненной реальности на экране пользовательского устройства получателя в заданном местоположении, после чего осуществляют воспроизведение сообщения-истории дополненной реальности на экране пользовательского устройства получателя, как описано в блоке 112 блок-схемы, приведенной на фиг. 1.
На фиг. 3 приведено схематическое изображение примера осуществления пользовательского устройства согласно одному из вариантов осуществления настоящего изобретения. Указанное пользовательское устройство может быть как пользовательским устройством отправителя, так и пользовательским устройством получателя и содержит процессор 300 и связанные с ним экран 302, машиночитаемый носитель 304, сетевой компонент 306 и устройство 308 захвата изображения.
На фиг. 4 приведено схематическое изображение примера осуществления коммуникационной системы согласно одному из вариантов осуществления настоящего изобретения. Указанная коммуникационная система содержит сервер 400 и связанные с ним пользовательские устройства 402 и 404 отправителя и получателя соответственно. Как видно из рассматриваемой фигуры, передача сообщения-истории дополненной реальности от пользовательского устройства отправителя на пользовательское устройство получателя и наоборот осуществляется посредством сервера 400.
Следует принять во внимание, что способ взаимодействия пользователей в коммуникационной системе, пользовательское устройство для организации взаимодействия пользователей в коммуникационной системе, коммуникационная система, позволяющая реализовать указанный способ, и машиночитаемый носитель, на котором сохранены программные инструкции, инициирующие выполнение аспектов способа взаимодействия пользователей согласно настоящему изобретению, не ограничены конкретными признаками или этапами, описанными выше. Напротив, конкретные признаки и этапы, описанные выше, раскрыты в качестве примеров, реализующих настоящее изобретение, и другие эквивалентные признаки и этапы могут быть охвачены объемом настоящего изобретения.

Claims

Формула изобретения
1. Способ взаимодействия пользователей в коммуникационной системе, включающий создание при помощи пользовательского устройства отправителя ряда сцен, 5 каждая из которых содержит основной виртуальный объект, выбранный из 3d статичного или анимированного виртуального объекта, 2d статичного или анимированного виртуального объекта, текста, аудио или видео, с формированием сообщения-истории дополненной реальности, содержащего по меньшей мере две из ряда сцен; ю передачу сообщения-истории дополненной реальности от пользовательского устройства отправителя на пользовательское устройство по меньшей мере одного получателя; получение сообщения-истории дополненной реальности пользовательским устройством получателя;
15 воспроизведение сообщения-истории дополненной реальности на экране пользовательского устройства получателя.
2. Способ по п. 1, отличающийся тем, что создание сцены включает добавление основного виртуального объекта с его отображением на экране пользовательского устройства отправителя в заданном местоположении
20 и необязательно осуществление в любой последовательности по меньшей мере одного объединения основного виртуального объекта с дополнительным виртуальным объектом и/или по меньшей мере одного задания нового местоположения на экране 25 пользовательского устройства отправителя с последующим передвижением отображаемого основного виртуального объекта на экране пользовательского устройства отправителя в заданное местоположение.
3. Способ по п. 1, отличающийся тем, что в качестве основного виртуального объекта используют виртуальный объект дополненной реальности.
4. Способ по п. 3, отличающийся тем, что создание сцены включает добавление основного виртуального объекта дополненной реальности с его отображением на экране пользовательского устройства отправителя в заданном местоположении, отображаемом устройством захвата изображения пользовательского устройства отправителя, и необязательно осуществление в любой последовательности по меньшей мере одного объединения основного виртуального объекта дополненной реальности с дополнительным виртуальным объектом дополненной реальности и/или по меньшей мере одного задания нового местоположения на экране пользовательского устройства отправителя, отображаемого устройством захвата изображения пользовательского устройства отправителя, с последующим передвижением отображаемого основного виртуального объекта дополненной реальности на экране пользовательского устройства отправителя в заданное местоположение.
5. Способ по пп. 2 или 4, отличающийся тем, что в качестве дополнительного виртуального объекта или дополнительного виртуального объекта дополненной реальности используют по меньшей мере один из 3d статичного или анимированного виртуального объекта, 2d статичного или анимированного виртуального объекта, текста, аудио или видео.
6. Способ по п. 4, отличающийся тем, что задание местоположения обеспечивают посредством привязки основного виртуального объекта дополненной реальности к географическому местоположению, отображаемому устройством захвата изображения пользовательского устройства отправителя.
7. Способ по п. 1, отличающийся тем, что после получения сообщения- истории дополненной реальности пользовательским устройством получателя и перед его воспроизведением указанное сообщение-историю размещают на экране пользовательского устройства получателя в заданном местоположении.
5 8. Способ по п. 7, отличающийся тем, что размещение сообщения-истории дополненной реальности обеспечивают посредством его привязки к географическому местоположению, отображаемому устройством захвата изображения пользовательского устройства получателя.
9. Способ по п. 1, отличающийся тем, что после создания сообщения- ю истории дополненной реальности отправителю предоставляют возможность его редактирования.
10. Способ по п. 9, отличающийся тем, что редактирование осуществляют посредством удаления из ряда сцен по меньшей мере одной из сцен и/или изменения последовательности сцен в ряде сцен.
15 11. Способ по п. 1, отличающийся тем, что во время или после воспроизведения сообщения-истории дополненной реальности на экране пользовательского устройства получателя взаимодействующим пользователям предоставляют возможность осуществления по меньшей мере одной из следующих операций: передачи текстового сообщения, передачи голосового сообщения,
20 передачи видео сообщения, передачи мультимедийного сообщения, видео звонка.
12. Способ по п. 1, отличающийся тем, что во время создания сцены обеспечивают возможность отображения основного виртуального объекта на экране пользовательского устройства отправителя под разными углами и с разных точек обзора, а во время воспроизведения сообщения-истории дополненной 25 реальности обеспечивают возможность отображения указанного объекта на экране пользовательского устройства получателя под разными углами и с разных точек обзора.
13. Пользовательское устройство для организации взаимодействия пользователей в коммуникационной системе, включающее устройство захвата изображения, по меньшей мере один процессор, машиночитаемый носитель, соединенный с по меньшей мере одним процессором и содержащий программные инструкции для взаимодействия пользователей в коммуникационной системе, которые при приведении их в исполнение по меньшей мере одним процессором обеспечивают предоставление возможности создания при помощи пользовательского устройства ряда сцен, каждая из которых содержит основной виртуальный объект, выбранный из 3d статичного или анимированного виртуального объекта, 2d статичного или анимированного виртуального объекта, текста, аудио или видео, с формированием сообщения-истории дополненной реальности, содержащего по меньшей мере две из ряда сцен; предоставление возможности передачи сообщения-истории дополненной реальности от пользовательского устройства на по меньшей мере одно другое пользовательское устройство; предоставление возможности получения сообщения-истории дополненной реальности пользовательским устройством; предоставление возможности воспроизведения сообщения-истории дополненной реальности на экране пользовательского устройства.
14. Устройство по п. 13, отличающееся тем, что программные инструкции содержат инструкции, которые обеспечивают предоставление возможности создания сцены посредством добавления основного виртуального объекта с его отображением на экране пользовательского устройства в заданном местоположении и необязательно осуществления в любой последовательности по меньшей мере одного объединения основного виртуального объекта с дополнительным виртуальным объектом
5 и/или по меньшей мере одного задания нового местоположения на экране пользовательского устройства с последующим передвижением отображаемого основного виртуального объекта на экране пользовательского устройства в заданное местоположение.
15. Устройство по п. 13, отличающееся тем, что основной виртуальный ю объект представляет собой виртуальный объект дополненной реальности.
16. Устройство по п. 15, отличающееся тем, что программные инструкции содержат инструкции, которые обеспечивают предоставление возможности создания сцены посредством добавления основного виртуального объекта дополненной реальности с его 15 отображением на экране пользовательского устройства в заданном местоположении, отображаемом устройством захвата изображения пользовательского устройства, и необязательно осуществления в любой последовательности по меньшей мере одного 20 объединения основного виртуального объекта дополненной реальности с дополнительным виртуальным объектом дополненной реальности и/или по меньшей мере одного задания нового местоположения на экране пользовательского устройства, отображаемого устройством захвата изображения пользовательского устройства, с последующим передвижением отображаемого 25 основного виртуального объекта дополненной реальности на экране пользовательского устройства в заданное местоположение.
17. Устройство по пл. 14 или 16, отличающееся тем, что дополнительный виртуальный объект или дополнительный виртуальный объект дополненной реальности представляет собой по меньшей мере один из 3d статичного или анимированного виртуального объекта, 2d статичного или анимированного виртуального объекта, текста, аудио или видео.
5 18. Устройство по п. 16, отличающееся тем, что программные инструкции содержат инструкции, которые обеспечивают предоставление возможности задания местоположения посредством привязки основного виртуального объекта дополненной реальности к географическому местоположению, отображаемому устройством захвата изображения пользовательского устройства. ю
19. Устройство по п. 13, отличающееся тем, что программные инструкции содержат инструкции, которые после получения сообщения-истории дополненной реальности пользовательским устройством и перед его воспроизведением обеспечивают предоставление возможности размещения указанного сообщения- истории на экране пользовательского устройства в заданном местоположении.
15 20. Устройство по п. 19, отличающееся тем, что программные инструкции содержат инструкции, которые обеспечивают предоставление возможности размещения сообщения-истории дополненной реальности посредством его привязки к географическому местоположению, отображаемому устройством захвата изображения пользовательского устройства.
20 21. Устройство по п. 13, отличающееся тем, что программные инструкции содержат инструкции, которые после создания сообщения-истории дополненной реальности обеспечивают предоставление возможности его редактирования.
22. Устройство по п. 21, отличающееся тем, что программные инструкции содержат инструкции, которые обеспечивают предоставление возможности
25 осуществления редактирования посредством удаления из ряда сцен по меньшей мере одной из сцен и/или изменения последовательности сцен в ряде сцен.
23. Устройство по п. 13, отличающееся тем, что программные инструкции содержат инструкции, которые во время или после воспроизведения сообщения- истории дополненной реальности на экране пользовательского устройства обеспечивают предоставление возможности осуществления по меньшей мере одной из следующих операций: передачи текстового сообщения, передачи голосового сообщения, передачи видео сообщения, передачи мультимедийного сообщения, видео звонка.
24. Устройство по п. 13, отличающееся тем, что программные инструкции содержат инструкции, которые во время создания сцены и во время воспроизведения сообщения-истории дополненной реальности обеспечивают предоставление возможности отображения основного виртуального объекта на экране пользовательского устройства под разными углами и с разных точек обзора.
25. Коммуникационная система, которая обеспечивает взаимодействие пользовательских устройств и сервера межу собой, содержащая программные инструкции, расположенные на машиночитаемом носителе пользовательского устройства, которые при приведении их в исполнение по меньшей мере одним процессором пользовательского устройства обеспечивают предоставление возможности создания при помощи пользовательского устройства ряда сцен, каждая из которых содержит основной виртуальный объект, выбранный из 3d статичного или анимированного виртуального объекта, 2d статичного или анимированного виртуального объекта, текста, аудио или видео, с формированием сообщения-истории дополненной реальности, содержащего по меньшей мере две из ряда сцен; предоставление возможности передачи сообщения-истории дополненной реальности от пользовательского устройства на по меньшей мере одно другое пользовательское устройство; предоставление возможности получения сообщения-истории дополненной реальности пользовательским устройством; предоставление возможности воспроизведения сообщения-истории дополненной реальности на экране пользовательского устройства; и программные инструкции, расположенные на машиночитаемом носителе сервера, которые при приведении их в исполнение по меньшей мере одним процессором сервера обеспечивают получение сервером переданного сообщения- истории дополненной реальности от пользовательского устройства отправителя, 5 сохранение полученного сообщения-истории дополненной реальности, передачу сохраненного сообщения-истории дополненной реальности от сервера на пользовательское устройство по меньшей мере одного получателя.
26. Система по п. 25, отличающаяся тем, что программные инструкции, расположенные на машиночитаемом носителе пользовательского устройства, ю содержат инструкции, которые обеспечивают предоставление возможности создания сцены посредством добавления основного виртуального объекта с его отображением на экране пользовательского устройства в заданном местоположении и необязательно
15 осуществления в любой последовательности по меньшей мере одного объединения основного виртуального объекта с дополнительным виртуальным объектом и/или по меньшей мере одного задания нового местоположения на экране пользовательского устройства с последующим передвижением отображаемого 20 основного виртуального объекта на экране пользовательского устройства в заданное местоположение.
27. Система по п. 25, отличающаяся тем, что основной виртуальный объект представляет собой виртуальный объект дополненной реальности.
28. Система по п. 27, отличающаяся тем, что программные инструкции, 25 расположенные на машиночитаемом носителе пользовательского устройства, содержат инструкции, которые обеспечивают предоставление возможности создания сцены посредством добавления основного виртуального объекта дополненной реальности с его отображением на экране пользовательского устройства в заданном местоположении, отображаемом устройством захвата изображения пользовательского устройства,
5 и необязательно осуществления в любой последовательности по меньшей мере одного объединения основного виртуального объекта дополненной реальности с дополнительным виртуальным объектом дополненной реальности и/или по меньшей мере одного задания нового местоположения на экране ю пользовательского устройства, отображаемого устройством захвата изображения пользовательского устройства, с последующим передвижением отображаемого основного виртуального объекта дополненной реальности на экране пользовательского устройства в заданное местоположение.
29. Система по пп. 26 или 28, отличающаяся тем, что дополнительный 15 виртуальный объект или дополнительный виртуальный объект дополненной реальности представляет собой по меньшей мере один из 3d статичного или анимированного виртуального объекта, 2d статичного или анимированного виртуального объекта, текста, аудио или видео.
30. Система по п. 28, отличающаяся тем, что программные инструкции, 20 расположенные на машиночитаемом носителе пользовательского устройства, содержат инструкции, которые обеспечивают предоставление возможности задания местоположения посредством привязки основного виртуального объекта дополненной реальности к географическому местоположению, отображаемому устройством захвата изображения пользовательского устройства.
25 31. Система по п. 25, отличающаяся тем, что программные инструкции, расположенные на машиночитаемом носителе пользовательского устройства, содержат инструкции, которые после получения сообщения-истории дополненной реальности пользовательским устройством и перед его воспроизведением обеспечивают предоставление возможности размещения указанного сообщения- истории на экране пользовательского устройства в заданном местоположении.
32. Система по п. 31, отличающаяся тем, что программные инструкции, расположенные на машиночитаемом носителе пользовательского устройства, содержат инструкции, которые обеспечивают предоставление возможности размещения сообщения-истории дополненной реальности посредством его привязки к географическому местоположению, отображаемому устройством захвата изображения пользовательского устройства.
33. Система по п. 25, отличающаяся тем, что программные инструкции, расположенные на машиночитаемом носителе пользовательского устройства, содержат инструкции, которые после создания сообщения-истории дополненной реальности обеспечивают предоставление возможности его редактирования.
34. Система по п. 33, отличающаяся тем, что программные инструкции, расположенные на машиночитаемом носителе пользовательского устройства, содержат инструкции, которые обеспечивают предоставление возможности осуществления редактирования посредством удаления из ряда сцен по меньшей мере одной из сцен и/или изменения последовательности сцен в ряде сцен.
35. Система по п. 25, отличающаяся тем, что программные инструкции, расположенные на машиночитаемом носителе пользовательского устройства, содержат инструкции, которые во время или после воспроизведения сообщения- истории дополненной реальности на экране пользовательского устройства обеспечивают предоставление возможности осуществления по меньшей мере одной из следующих операций: передачи текстового сообщения, передачи голосового сообщения, передачи видео сообщения, передачи мультимедийного сообщения, видео звонка.
36. Система по п. 25, отличающаяся тем, что программные инструкции, расположенные на машиночитаемом носителе пользовательского устройства, содержат инструкции, которые во время создания сцены и во время воспроизведения сообщения-истории дополненной реальности обеспечивают предоставление возможности отображения основного виртуального объекта на экране пользовательского устройства под разными углами и с разных точек обзора.
37. Машиночитаемый носитель, содержащий программные инструкции для взаимодействия пользователей в 5 коммуникационной системе, которые при приведении их в исполнение по меньшей мере одним процессором пользовательского устройства обеспечивают предоставление возможности создания при помощи пользовательского устройства ряда сцен, каждая из которых содержит основной виртуальный объект, выбранный из 3d статичного или анимированного виртуального объекта, 2d ю статичного или анимированного виртуального объекта, текста, аудио или видео, с формированием сообщения-истории дополненной реальности, содержащего по меньшей мере две из ряда сцен; предоставление возможности передачи сообщения-истории дополненной реальности от пользовательского устройства на по меньшей мере одно другое 15 пользовательское устройство; предоставление возможности получения сообщения-истории дополненной реальности пользовательским устройством; предоставление возможности воспроизведения сообщения-истории дополненной реальности на экране пользовательского устройства.
20 38. Носитель по п. 37, отличающийся тем, что программные инструкции содержат инструкции, которые обеспечивают предоставление возможности создания сцены посредством добавления основного виртуального объекта с его отображением на экране пользовательского устройства в заданном местоположении
25 и необязательно осуществления в любой последовательности по меньшей мере одного объединения основного виртуального объекта с дополнительным виртуальным объектом и/или по меньшей мере одного задания нового местоположения на экране пользовательского устройства с последующим передвижением отображаемого 5 основного виртуального объекта на экране пользовательского устройства в заданное местоположение.
39. Носитель по п. 37, отличающийся тем, что основной виртуальный объект представляет собой виртуальный объект дополненной реальности.
40. Носитель по п. 39, отличающийся тем, что программные инструкции ю содержат инструкции, которые обеспечивают предоставление возможности создания сцены посредством добавления основного виртуального объекта дополненной реальности с его отображением на экране пользовательского устройства в заданном местоположении, отображаемом устройством захвата изображения 15 пользовательского устройства, и необязательно осуществления в любой последовательности по меньшей мере одного объединения основного виртуального объекта дополненной реальности с дополнительным виртуальным объектом дополненной реальности
20 и/или по меньшей мере одного задания нового местоположения на экране пользовательского устройства, отображаемого устройством захвата изображения пользовательского устройства, с последующим передвижением отображаемого основного виртуального объекта дополненной реальности на экране пользовательского устройства в заданное местоположение.
25 41. Носитель по пп. 38 или 40, отличающийся тем, что дополнительный виртуальный объект или дополнительный виртуальный объект дополненной реальности представляет собой по меньшей мере один из 3d статичного или анимированного виртуального объекта, 2d статичного или анимированного виртуального объекта, текста, аудио или видео.
42. Носитель по п. 40, отличающийся тем, что программные инструкции содержат инструкции, которые обеспечивают предоставление возможности
5 задания местоположения посредством привязки основного виртуального объекта дополненной реальности к географическому местоположению, отображаемому устройством захвата изображения пользовательского устройства.
43. Носитель по п. 37, отличающийся тем, что программные инструкции содержат инструкции, которые после получения сообщения-истории дополненной ю реальности пользовательским устройством и перед его воспроизведением обеспечивают предоставление возможности размещения указанного сообщения- истории на экране пользовательского устройства в заданном местоположении.
44. Носитель по п. 43, отличающийся тем, что программные инструкции содержат инструкции, которые обеспечивают предоставление возможности
15 размещения сообщения-истории дополненной реальности посредством его привязки к географическому местоположению, отображаемому устройством захвата изображения пользовательского устройства.
45. Носитель по п. 37, отличающийся тем, что программные инструкции содержат инструкции, которые после создания сообщения-истории дополненной
20 реальности обеспечивают предоставление возможности его редактирования.
46. Носитель по п. 45, отличающийся тем, что программные инструкции содержат инструкции, которые обеспечивают предоставление возможности осуществления редактирования посредством удаления из ряда сцен по меньшей мере одной из сцен и/или изменения последовательности сцен в ряде сцен.
25 47. Носитель по п. 37, отличающийся тем, что программные инструкции содержат инструкции, которые во время или после воспроизведения сообщения- истории дополненной реальности на экране пользовательского устройства обеспечивают предоставление возможности осуществления по меньшей мере одной из следующих операций: передачи текстового сообщения, передачи голосового сообщения, передачи видео сообщения, передачи мультимедийного сообщения, видео звонка.
48. Носитель по п. 37, отличающийся тем, что программные инструкции содержат инструкции, которые во время создания сцены и во время воспроизведения сообщения-истории дополненной реальности обеспечивают предоставление возможности отображения основного виртуального объекта на экране пользовательского устройства под разными углами и с разных точек обзора.
PCT/IB2018/058195 2017-10-23 2018-10-22 Взаимодействие пользователей в коммуникационных системах с использованием сообщения-истории дополненной реальности WO2019082050A1 (ru)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US201762575543P 2017-10-23 2017-10-23
US62/575,543 2017-10-23

Publications (1)

Publication Number Publication Date
WO2019082050A1 true WO2019082050A1 (ru) 2019-05-02

Family

ID=66246806

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/IB2018/058195 WO2019082050A1 (ru) 2017-10-23 2018-10-22 Взаимодействие пользователей в коммуникационных системах с использованием сообщения-истории дополненной реальности

Country Status (1)

Country Link
WO (1) WO2019082050A1 (ru)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20200213799A1 (en) * 2019-01-01 2020-07-02 Philip Scott Lyren Displaying Graphical Representations for Binaural Sound
CN112954423A (zh) * 2020-04-08 2021-06-11 深圳市明源云客电子商务有限公司 一种动画播放方法、装置及设备
US11711664B2 (en) 2018-09-09 2023-07-25 Pelagic Concepts Llc Moving an emoji to move a location of binaural sound

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110201362A1 (en) * 2010-02-12 2011-08-18 Samsung Electronics Co., Ltd. Augmented Media Message
US20110280497A1 (en) * 2010-05-13 2011-11-17 Kelly Berger System and method for creating and sharing photo stories
US20130293584A1 (en) * 2011-12-20 2013-11-07 Glen J. Anderson User-to-user communication enhancement with augmented reality
US20140126724A1 (en) * 2010-12-02 2014-05-08 Empire Technology Development Llc Augmented reality system

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110201362A1 (en) * 2010-02-12 2011-08-18 Samsung Electronics Co., Ltd. Augmented Media Message
US20110280497A1 (en) * 2010-05-13 2011-11-17 Kelly Berger System and method for creating and sharing photo stories
US20140126724A1 (en) * 2010-12-02 2014-05-08 Empire Technology Development Llc Augmented reality system
US20130293584A1 (en) * 2011-12-20 2013-11-07 Glen J. Anderson User-to-user communication enhancement with augmented reality

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11711664B2 (en) 2018-09-09 2023-07-25 Pelagic Concepts Llc Moving an emoji to move a location of binaural sound
US20200213799A1 (en) * 2019-01-01 2020-07-02 Philip Scott Lyren Displaying Graphical Representations for Binaural Sound
US10848893B2 (en) * 2019-01-01 2020-11-24 Philip Scott Lyren Displaying graphical representations for binaural sound
US11765538B2 (en) 2019-01-01 2023-09-19 Pelagic Concepts Llc Wearable electronic device (WED) displays emoji that plays binaural sound
CN112954423A (zh) * 2020-04-08 2021-06-11 深圳市明源云客电子商务有限公司 一种动画播放方法、装置及设备

Similar Documents

Publication Publication Date Title
US20210287717A1 (en) Digital media editing
US10057731B2 (en) Image and message integration system and method
US20160227115A1 (en) System for digital media capture
US10230779B2 (en) Content provision system, information processing apparatus and content reproduction method
WO2020077855A1 (zh) 视频拍摄方法、装置、电子设备及计算机可读存储介质
WO2020077856A1 (zh) 视频拍摄方法、装置、电子设备及计算机可读存储介质
AU2001241645B2 (en) Communication system and method including rich media tools
US20180067641A1 (en) Social networking application for real-time selection and sorting of photo and video content
US9131059B2 (en) Systems, methods, and computer programs for joining an online conference already in progress
WO2015050924A2 (en) Image with audio conversation system and method
AU2015218540A1 (en) Method for providing contents, device and system for the same
WO2019082050A1 (ru) Взаимодействие пользователей в коммуникационных системах с использованием сообщения-истории дополненной реальности
JP2019528594A (ja) 協調没入型ライブアクション３６０度ビデオおよび仮想現実
KR101123370B1 (ko) 휴대단말용 객체기반 콘텐츠 제공방법 및 장치
WO2019092590A1 (ru) Взаимодействие пользователей в коммуникационной системе при помощи множественного потокового вещания данных дополненной реальности
WO2015050966A1 (en) Image and message integration system and method
KR102289822B1 (ko) 교육용 콘텐츠 제작 시스템, 제작방법, 및 그에 사용되는 서비스 서버, 저작자 단말, 클라이언트 단말
CA2852340A1 (en) Facilitating generation and presentation of sound images
JP7080336B2 (ja) メディアコンテンツの項目を共有するための方法及びシステム
JP2000267639A (ja) 情報処理装置
WO2016184193A1 (zh) 媒体文件生成方法和装置
US20150046807A1 (en) Asynchronous Rich Media Messaging
WO2020124228A1 (en) Asynchronous short video communication platform based on animated still images and audio
JP7445272B1 (ja) 動画処理方法、動画処理システム、及び動画処理プログラム
KR101983837B1 (ko) 사용자 피드백이 가능한 봇을 기반으로 영상을 제작하는 방법과 시스템 및 비-일시적인 컴퓨터 판독가능한 기록 매체

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18869892

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 18869892

Country of ref document: EP

Kind code of ref document: A1