KR20220047026A - A system for performing the mission of Media Things (MThings) using a mission diagram in the Internet of Media Things (IoMT), a method therefor, and a computer-readable recording medium in which a program that performs this method is recorded - Google Patents
A system for performing the mission of Media Things (MThings) using a mission diagram in the Internet of Media Things (IoMT), a method therefor, and a computer-readable recording medium in which a program that performs this method is recorded Download PDFInfo
- Publication number
- KR20220047026A KR20220047026A KR1020200130438A KR20200130438A KR20220047026A KR 20220047026 A KR20220047026 A KR 20220047026A KR 1020200130438 A KR1020200130438 A KR 1020200130438A KR 20200130438 A KR20200130438 A KR 20200130438A KR 20220047026 A KR20220047026 A KR 20220047026A
- Authority
- KR
- South Korea
- Prior art keywords
- mission
- media
- thing
- data
- participating
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
- H04N21/43615—Interfacing a Home Network, e.g. for connecting the client to a plurality of peripherals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/443—OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB
- H04N21/4431—OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB characterized by the use of Application Program Interface [API] libraries
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
- H04N21/4722—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content
- H04N21/4725—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content using interactive regions of the image, e.g. hot spots
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/84—Generation or processing of descriptive data, e.g. content descriptors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/85—Assembly of content; Generation of multimedia applications
- H04N21/858—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot
- H04N21/8586—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot by using a URL
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Databases & Information Systems (AREA)
- Computer Networks & Wireless Communication (AREA)
- Software Systems (AREA)
- Library & Information Science (AREA)
- Health & Medical Sciences (AREA)
- Computing Systems (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Human Computer Interaction (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Information Transfer Between Computers (AREA)
Abstract
Description
본 발명은 미디어 사물인터넷(Internet of Media Things: IoMT)에 관한 것으로, 보다 상세하게는, 미디어 사물인터넷에서 미션 다이어그램을 이용한 미디어사물(Media Things: MThings)의 미션을 수행하기 위한 시스템, 이를 위한 방법 및 이 방법을 수행하는 프로그램이 기록된 컴퓨터 판독 가능한 기록매체에 관한 것이다. The present invention relates to the Internet of Media Things (IoMT), and more particularly, a system for performing a mission of Media Things (MTHings) using a mission diagram in the Media Internet of Things, and a method therefor And it relates to a computer-readable recording medium in which a program for performing the method is recorded.
근래 사물인터넷(Internet of Things)을 이용한 제품, 시스템 및 서비스에 대한 산업계나 학계의 관심이 높다. 따라서, 사물간 연결을 통한 가치 있는 서비스 제공을 위해서는 사물 간의 네트워크, 사물(예: 센서, 구동기), 사용자와 사물, 사물과 사물 간 주고 받는 데이터(예: 센서데이터, 제어명령) 등의 전체를 아우를 수 있는 표준의 필요성이 높아지고 있다. 현재 ISO, ITU, IEEE, IETF, oneM2M, OMA와 같은 공적/사적 국제기구를 중심으로 사물인터넷의 표준화를 진행하고 있으나, 대부분 사물과 사물을 연결하는 네트워크 프로토콜이나 사물의 고유식별자(identifier)에 대한 표준화에 중점을 두고 있다. Recently, industrial and academic circles have high interest in products, systems, and services using the Internet of Things. Therefore, in order to provide valuable services through connection between things, the entire network of things, things (eg, sensors, actuators), users and things, and data exchanged between things (eg, sensor data, control commands), etc. There is a growing need for standards that can be embraced. Currently, public/private international organizations such as ISO, ITU, IEEE, IETF, oneM2M, and OMA are in the process of standardizing the Internet of Things, but most of them are concerned with network protocols connecting things and their unique identifiers. The focus is on standardization.
사물 인터넷 표준화에 간과해서는 안 되는 중요한 점은 바로 기존 인터넷 상에서 가장 많이 교환되는 데이터가 미디어 콘텐츠(비디오, 오디오, 사진 등)였듯이, 사물인터넷 환경에서 가장 많이 교환될 데이터 역시 미디어 콘텐츠라는 점이다. 따라서 미디어 중심의 시각에서 사물인터넷 시스템 및 서비스에 대한 고려와 이를 구성하는 인터페이스의 표준의 제정이 시급한 상황이다. An important point that should not be overlooked in the standardization of the Internet of Things is that just as the most exchanged data on the existing Internet was media content (video, audio, photos, etc.), the data to be exchanged the most in the Internet of Things environment is also media content. Therefore, it is urgent to consider IoT systems and services from a media-centric perspective and to establish standards for interfaces that compose them.
본 발명의 목적은 복수의 미디어사물을 이용하여 미션을 수행할 때, 복수의 미디어사물 각각이 각 상태에서 수행할 태스크 및 그 순서 등을 나타내는 미션 데이터를 이용하여 미션을 수행하는 시스템, 이를 위한 방법 및 이 방법을 수행하는 프로그램이 기록된 컴퓨터 판독 가능한 기록매체를 제공함에 있다. SUMMARY OF THE INVENTION It is an object of the present invention to provide a system for performing a mission using mission data indicating a task to be performed by each of a plurality of media things in each state and an order thereof when a mission is performed using a plurality of media things, and a method therefor And to provide a computer-readable recording medium on which a program for performing this method is recorded.
상술한 바와 같은 목적을 달성하기 위한 본 발명의 바람직한 실시예에 따른 미션을 수행하기 위한 시스템은 상호 연관된 복수의 태스크를 포함하는 미션에 대한 미션 데이터를 수신하면, 수신된 미션 데이터를 기초로 미션을 수행하는 적어도 하나의 참여 미디어사물과, 적어도 하나의 상태를 포함하며 각 상태에서 참여 미디어사물의 태스크를 정의하는 미션 데이터를 생성하고, 생성된 미션 데이터를 상기 참여 미디어사물로 전송하는 사용자장치를 포함한다. When the system for performing a mission according to a preferred embodiment of the present invention for achieving the object as described above receives mission data for a mission including a plurality of interrelated tasks, the mission is based on the received mission data. a user device that includes at least one participating media thing to perform, at least one state, generates mission data defining a task of the participating media thing in each state, and transmits the generated mission data to the participating media thing do.
상기 미션 데이터는 미션의 상태를 나타내며, 미션의 각 상태에서의 미션에 참여한 복수의 미디어사물 각각의 태스크에 대한 설명을 포함하는 노드와, 상태 전이를 위해 요구되는 입력 혹은 출력을 나타내는 링크를 포함하는 미션 다이어그램으로 표현되는 것을 특징으로 한다. The mission data indicates the state of the mission, and includes a node including a description of each task of a plurality of media things participating in the mission in each state of the mission, and a link indicating an input or output required for state transition. It is characterized in that it is expressed in a mission diagram.
상기 미션 데이터는 마크업 언어 형식에 따라 상기 미션의 상태를 나타내며 각 상태를 식별하기 위한 식별자를 나타내는 식별자 속성을 포함하는 적어도 하나의 상태 요소를 포함한다. 더욱이, 상기 상태 요소는 자신의 자식 요소로 상기 참여 미디어사물을 나타내며 각 상태에서 참여 미디어사물 각각이 수행할 태스크를 설명하는 속성인 상태 설명 속성을 포함하는 사물 요소, 입력되는 API(Application Programming Interface)를 나타내는 입력 요소, 입력 대상 미디어사물을 나타내는 입력사물 요소, 출력되는 데이터를 나타내는 출력 요소 및 출력 대상 미디어사물을 나타내는 출력사물 요소를 포함한다. The mission data includes at least one status element representing the status of the mission according to a markup language format and including an identifier attribute representing an identifier for identifying each status. Furthermore, the state element represents the participating media thing as its child element, and a thing element including a state description attribute, which is a property that describes a task to be performed by each participating media thing in each state, an input API (Application Programming Interface) It includes an input element representing , an input thing element representing an input target media thing, an output factor representing output data, and an output thing factor representing an output target media thing.
상기 참여 미디어사물 중 어느 하나의 미디어사물이 연결된 다른 참여 미디어사물 및 상기 사용자장치에 주어진 태스크를 포기하기 위해 연결 해제를 알리면, 상기 사용자장치는 상기 어느 하나의 미디어사물을 대체하는 대체 미디어사물을 선택하고, 상기 대체 미디어사물에 따라 태스크를 수정함으로써 미션 데이터를 수정하고, 상기 미션의 나머지 태스크를 수행하도록 상기 수정된 미션 데이터를 상기 대체 미디어사물을 비롯한 나머지 참여 미디어사물로 전송하는 것을 특징으로 한다. When any one of the participating media things notifies the connected other participating media things and the user device to disconnect to give up the given task, the user device selects a replacement media thing to replace the one media thing and modifying the mission data by modifying the task according to the replacement media thing, and transmitting the modified mission data to the remaining participating media things including the replacement media thing to perform the remaining tasks of the mission.
상기 사용자장치는 미션을 수정하기 위해 미션을 중단시키고, 상기 미션 데이터를 수정하고, 연결된 미디어사물로 상기 수정된 미션 데이터에 미션을 수행하도록 상기 수정된 미션 데이터를 전송하는 것을 특징으로 한다. The user device interrupts the mission to modify the mission, corrects the mission data, and transmits the modified mission data to a connected media thing to perform the mission on the modified mission data.
상술한 바와 같은 목적을 달성하기 위한 본 발명의 바람직한 실시예에 따른 미션을 수행하기 위한 미디어사물은 사용자장치로부터 상호 연관된 복수의 태스크를 포함하는 미션에 대한 미션 데이터를 수신하면, 수신된 미션 데이터를 기초로 미션을 수행하는 것을 특징으로 한다. When the media thing for performing a mission according to a preferred embodiment of the present invention for achieving the above object receives mission data for a mission including a plurality of interrelated tasks from a user device, the received mission data is It is characterized in that the mission is performed on the basis of it.
상기 미션 데이터는 미션의 상태를 나타내며, 미션의 각 상태에서의 미션에 참여한 복수의 미디어사물 각각의 태스크에 대한 설명을 포함하는 노드와, 상태 전이를 위해 요구되는 입력 혹은 출력을 나타내는 링크를 포함하는 미션 다이어그램으로 표현되는 것을 특징으로 한다. The mission data indicates the state of the mission, and includes a node including a description of each task of a plurality of media things participating in the mission in each state of the mission, and a link indicating an input or output required for state transition. It is characterized in that it is expressed in a mission diagram.
상기 미션 데이터는 마크업 언어 형식에 따라 상기 미션의 상태를 나타내며 각 상태를 식별하기 위한 식별자를 나타내는 식별자 속성을 포함하는 적어도 하나의 상태 요소를 포함하며, 상기 상태 요소는 자신의 자식 요소로 상기 미션에 참여한 복수의 미디어사물을 나타내며 각 상태에서 미디어사물 각각이 수행할 태스크를 설명하는 속성인 상태 설명 속성을 포함하는 사물 요소, 입력되는 API(Application Programming Interface)를 나타내는 입력 요소, 입력 대상 미디어사물을 나타내는 입력사물 요소, 출력되는 데이터를 나타내는 출력 요소 및 출력 대상 미디어사물을 나타내는 출력사물 요소를 포함한다. The mission data includes at least one status element indicating the status of the mission according to a markup language format and comprising an identifier attribute representing an identifier for identifying each status, the status element being its child element. It represents a plurality of media things participating in , and includes a thing element including a state description attribute, which is a property that describes the task to be performed by each media thing in each state, an input element indicating an input API (Application Programming Interface), and an input target media thing. It includes an input object element representing the output object, an output element representing output data, and an output object element representing an output target media object.
상기 미디어사물은 상기 미션 데이터의 각 상태의 태스크가 종료되거나, 모든 상태의 태스크가 종료되는 경우, 상기 사용자장치에 태스크 종료를 알리는 것을 특징으로 한다. The media thing is characterized by notifying the end of the task to the user device when the task in each state of the mission data is finished or the tasks in all states are terminated.
상술한 바와 같은 목적을 달성하기 위한 본 발명의 바람직한 실시예에 따른 미션을 수행하기 위한 방법은 사용자장치가 상호 연관된 복수의 태스크를 포함하는 미션을 수행하기 위한 적어도 하나의 미디어사물을 선택하는 단계와, 상기 사용자장치가 상기 선택된 미디어사물 중 상기 미션에 참여하는 참여 미디어사물을 연결하는 단계와, 상기 사용자장치가 적어도 하나의 상태를 포함하며 각 상태에서 참여 미디어사물의 태스크를 정의하는 미션 데이터를 생성하는 단계와, 상기 사용자장치가 상기 미션 데이터를 상기 참여 미디어사물로 전송하는 단계와, 상기 참여 미디어사물이 상기 미션 데이터에 따라 상기 미션을 수행하는 단계를 포함한다. A method for performing a mission according to a preferred embodiment of the present invention for achieving the above object includes the steps of: selecting, by a user device, at least one media thing for performing a mission including a plurality of interrelated tasks; , connecting, by the user device, a participating media thing participating in the mission among the selected media things; generating mission data in which the user device includes at least one state and defining a task of the participating media thing in each state and transmitting, by the user device, the mission data to the participating media thing, and the participating media thing performing the mission according to the mission data.
상기 방법은 상기 참여 미디어사물 각각이 상기 미션 데이터에 기록된 어느 하나의 태스크를 완료할 때마다, 완료 후의 상태 정보를 사용자장치 및 연결된 다른 참여 미디어사물에 전송하는 단계를 더 포함한다. The method further includes, whenever each of the participating media things completes any one task recorded in the mission data, transmitting status information after completion to the user device and other connected participating media things.
상기 방법은 상기 미션의 모든 태스크가 완료되면, 마지막 태스크를 수행한 참여 미디어사물이 연결된 다른 참여 미디어사물 및 사용자장치에 미션 완료를 알리는 상태 정보를 전달하는 단계를 더 포함한다. The method further includes, when all tasks of the mission are completed, transmitting status information notifying the completion of the mission to other participating media things and user devices connected to the participating media things that performed the last task.
상기 방법은 상기 참여 미디어사물 중 어느 하나의 미디어사물이 연결된 다른 참여 미디어사물 및 상기 사용자장치에 주어진 태스크를 포기하기 위해 연결 해제를 알리는 단계와, 상기 사용자장치가 상기 어느 하나의 미디어사물을 대체하는 대체 미디어사물을 선택하는 단계와, 상기 사용자장치가 상기 대체 미디어사물에 따라 태스크를 수정함으로써 상기 미션 데이터를 수정하는 단계와, 사용자장치가 상기 미션의 나머지 태스크를 수행하도록 상기 수정된 미션 데이터를 상기 대체 미디어사물을 비롯한 나머지 참여 미디어사물로 전송하는 단계를 더 포함한다. The method includes the steps of notifying the user device and the other participating media thing to which one of the participating media things is connected to disconnect to give up a given task, and the user device replaces the one media thing. selecting an alternative media thing; modifying, by the user device, the mission data by modifying a task according to the replacement media thing; and sending the modified mission data to the user device to perform the remaining tasks of the mission. The method further includes transmitting to the remaining participating media things, including alternative media things.
상기 미션 데이터를 수정하는 단계는 상기 사용자장치가 미디어사물이 태스크가 완료되었음을 보고한 경우, 완료된 태스크를 제외한 나머지 태스크에 대한 미션 데이터를 수정하는 것을 특징으로 한다. In the step of modifying the mission data, when the user device reports that the task is completed by the media thing, the mission data for the remaining tasks except for the completed task is modified.
상기 방법은 상기 사용자장치가 미션을 수정하기 위해 미션을 중단시키는 단계와, 사용자장치가 미션 데이터를 수정하는 단계와, 사용자장치가 연결된 미디어사물로 상기 수정된 미션 데이터에 미션을 수행하도록 상기 수정된 미션 데이터를 전송하는 단계를 더 포함한다. The method includes the steps of the user device stopping the mission to modify the mission, the user device modifying mission data, and the user device is a media thing connected to the modified mission data to perform the mission on the modified mission data. The method further includes transmitting the mission data.
상기 미션을 수행하는 단계는 상기 미디어사물이 상기 미션 데이터에 따라 주어진 태스크를 개별적으로 완료하는 단계를 포함한다. The performing the mission includes the media thing individually completing a given task according to the mission data.
상기 미션을 수행하는 단계는 관리서버가 상기 참여 미디어사물을 연결한 상태에서, 상기 미션 데이터를 기초로 상기 미션 수행 및 완료를 관리하는 단계를 포함한다. The step of performing the mission includes managing the mission performance and completion based on the mission data in a state in which the management server connects the participating media things.
상기 사용자장치가 상기 미션 데이터를 상기 참여 미디어사물로 전송하는 단계는 상기 사용자장치가 직접 혹은 관리서버를 통해 상기 참여 미디어사물로 상기 미션 데이터를 브로드캐스트 또는 멀티캐스트 방식으로 전송하는 단계를 포함한다. The step of transmitting, by the user device, the mission data to the participating media thing includes the step of transmitting, by the user device, the mission data to the participating media thing directly or through a management server in a broadcast or multicast manner.
상기 사용자장치가 상기 미션 데이터를 상기 참여 미디어사물로 전송하는 단계는 상기 사용자장치가 상기 미션 데이터를 스토리지에 저장하는 단계와, 상기 참여 미디어사물이 상기 미션 데이터가 저장된 스토리지로부터 상기 저장된 미션 데이터를 수신하는 단계를 포함한다. The transmitting of the mission data to the participating media thing by the user device includes the steps of the user device storing the mission data in a storage, and the participating media thing receiving the stored mission data from the storage in which the mission data is stored including the steps of
상기 참여 미디어사물을 연결하는 단계는 상기 참여 미디어사물로 이루어진 애드혹 네트워크를 구성하는 것을 특징으로 한다. The step of connecting the participating media things is characterized in that the ad hoc network composed of the participating media things is configured.
상기 참여 미디어사물을 연결하는 단계는 상기 관리서버에 상기 참여 미디어사물 전체가 연결되는 것을 특징으로 한다. The step of connecting the participating media things is characterized in that all of the participating media things are connected to the management server.
상기 미션 데이터는 미션의 상태를 나타내며, 미션의 각 상태에서의 미션에 참여한 복수의 미디어사물 각각의 태스크에 대한 설명을 포함하는 노드와, 상태 전이를 위해 요구되는 입력 혹은 출력을 나타내는 링크를 포함하는 미션 다이어그램으로 표현되는 것을 특징으로 한다. The mission data indicates the state of the mission, and includes a node including a description of each task of a plurality of media things participating in the mission in each state of the mission, and a link indicating an input or output required for state transition. It is characterized in that it is expressed in a mission diagram.
상기 미션 데이터는 마크업 언어 형식에 따라 상기 미션의 상태를 나타내며 각 상태를 식별하기 위한 식별자를 나타내는 식별자 속성을 포함하는 적어도 하나의 상태 요소를 포함한다. 상기 상태 요소는 자신의 자식 요소로 상기 참여 미디어사물을 나타내며 각 상태에서 참여 미디어사물 각각이 수행할 태스크를 설명하는 속성인 상태 설명 속성을 포함하는 사물 요소, 입력되는 API(Application Programming Interface)를 나타내는 입력 요소, 입력 대상 미디어사물을 나타내는 입력사물 요소, 출력되는 데이터를 나타내는 출력 요소 및 출력 대상 미디어사물을 나타내는 출력사물 요소를 포함한다. The mission data includes at least one status element representing the status of the mission according to a markup language format and including an identifier attribute representing an identifier for identifying each status. The state element represents the participating media thing as its child element, and represents a thing element including a state description attribute, which is a property that describes a task to be performed by each participating media thing in each state, and an input API (Application Programming Interface) It includes an input element, an input thing element representing an input target media thing, an output factor representing output data, and an output thing factor representing an output target media thing.
본 발명의 다른 견지에 따르면, 전술한 바와 같은 본 발명의 바람직한 실시예에 따른 미션을 수행하기 위한 방법을 실행하는 프로그램이 기록된 컴퓨터 판독 가능한 기록매체를 제공한다. According to another aspect of the present invention, there is provided a computer-readable recording medium in which a program for executing a method for performing a mission according to a preferred embodiment of the present invention as described above is recorded.
본 발명에 따르면, 미션 다이어그램과 같은 미션 데이터를 기준으로 미션을 수행하기 때문에 정규화된 미디어 관련 서비스를 제공할 수 있다. 더욱이, 본 발명은 미션 다이어그램을 통해 어떤 미디어사물이 현재 어떤 상태에 있는지 알 수 있고, 어떤 미디어사물이 어떤 미디어사물로 어떤 데이터 또는 API를 전송하는지 일련의 과정을 모니터링할 수 있다. 즉, 본 발명은 각 미디어사물의 상태를 정확하게 모니터링 할 수 있어, 트러블 슈팅에 용이하다. According to the present invention, since a mission is performed based on mission data such as a mission diagram, a normalized media-related service can be provided. Moreover, according to the present invention, it is possible to know which media thing is in what state through the mission diagram, and to monitor a series of processes of which media thing transmits which data or API to which media thing. That is, the present invention can accurately monitor the state of each media object, making it easy to troubleshoot.
도 1은 본 발명의 실시예에 따른 본 발명의 실시예에 따른 미디어 사물인터넷에서 미션 다이어그램을 이용한 미디어사물의 미션을 수행하기 시스템의 구성을 설명하기 위한 도면이다.
도 2는 본 발명의 일 실시예에 따른 미션을 설명하기 위한 흐름도이다.
도 3은 도 2의 본 발명의 일 실시예에 따른 미션을 표현한 미션 다이어그램이다.
도 4는 본 발명의 실시예에 따른 미션 다이어그램을 이용한 미디어사물의 미션을 수행하기 위한 방법을 설명하기 위한 흐름도이다.
도 5는 본 발명의 추가적인 실시예에 따른 미디어 사물인터넷에서 미션 다이어그램을 이용한 미디어사물의 미션을 수행하기 위한 방법을 설명하기 위한 흐름도이다.
도 6은 본 발명의 다른 실시예에 따른 미디어 사물인터넷에서 미션 다이어그램을 이용한 미디어사물의 미션을 수행하기 위한 방법을 설명하기 위한 흐름도이다.
도 7은 본 발명의 실시예에 따른 컴퓨팅 장치를 나타내는 도면이다. 1 is a diagram for explaining the configuration of a system for performing a mission of a media thing using a mission diagram in the media IoT according to an embodiment of the present invention.
2 is a flowchart for explaining a mission according to an embodiment of the present invention.
Figure 3 is a mission diagram representing a mission according to an embodiment of the present invention of Figure 2;
4 is a flowchart illustrating a method for performing a mission of a media thing using a mission diagram according to an embodiment of the present invention.
5 is a flowchart illustrating a method for performing a mission of a media thing using a mission diagram in the Internet of Things (IoT) according to an additional embodiment of the present invention.
6 is a flowchart illustrating a method for performing a mission of a media thing using a mission diagram in the media IoT according to another embodiment of the present invention.
7 is a diagram illustrating a computing device according to an embodiment of the present invention.
이하 첨부된 도면을 참조하여 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명을 용이하게 실시할 수 있는 바람직한 실시예를 상세히 설명한다. 다만, 본 발명의 바람직한 실시예에 대한 동작 원리를 상세하게 설명함에 있어 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략한다. 이는 불필요한 설명을 생략함으로써 본 발명의 핵심을 흐리지 않고 더욱 명확히 전달하기 위함이다. 또한 본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시 예를 가질 수 있는 바, 특정 실시 예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 하나, 이는 본 발명을 특정한 실시 형태로 한정하려는 것은 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.Hereinafter, with reference to the accompanying drawings, a preferred embodiment in which a person of ordinary skill in the art to which the present invention pertains can easily practice the present invention will be described in detail. However, when it is determined that a detailed description of a related well-known function or configuration may unnecessarily obscure the gist of the present invention in describing the operating principle of the preferred embodiment of the present invention in detail, the detailed description thereof will be omitted. This is to more clearly convey the essence of the present invention by omitting unnecessary description. In addition, the present invention can make various changes and can have various embodiments, and specific embodiments are illustrated in the drawings and described in detail in the detailed description, which is not intended to limit the present invention to specific embodiments, It should be understood to include all modifications, equivalents and substitutes included in the spirit and scope of the present invention.
더하여, 어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급할 경우, 이는 논리적 또는 물리적으로 연결되거나, 접속될 수 있음을 의미한다. 다시 말해, 구성요소가 다른 구성요소에 직접적으로 연결되거나 접속되어 있을 수 있지만, 중간에 다른 구성요소가 존재할 수도 있으며, 간접적으로 연결되거나 접속될 수도 있다고 이해되어야 할 것이다. In addition, when an element is referred to as being “connected” or “connected” to another element, it means that it is logically or physically connected or can be connected. In other words, it should be understood that a component may be directly connected or connected to another component, but another component may exist in between, and may be indirectly connected or connected.
또한, 본 명세서에서 사용한 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 또한, 본 명세서에서 기술되는 "포함 한다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다. In addition, the terms used herein are used only to describe specific embodiments, and are not intended to limit the present invention. The singular expression includes the plural expression unless the context clearly dictates otherwise. In addition, terms such as "comprises" or "have" described in this specification are intended to designate that the features, numbers, steps, operations, components, parts, or combinations thereof described in the specification exist, but one or the It should be understood that the above does not preclude the possibility of the existence or addition of other features or numbers, steps, operations, components, parts, or combinations thereof.
이제 본 발명의 실시 예에 대하여 도면을 참조하여 상세하게 설명하도록 한다. 이때, 도면 전체에 걸쳐 유사한 기능 및 작용을 하는 부분에 대해서는 동일한 도면 부호를 사용하며, 이에 대한 중복되는 설명은 생략하기로 한다. 또한, 본 발명의 개념이 모호해지는 것을 피하기 위하여 공지의 구조 및 장치는 생략되거나, 각 구조 및 장치의 핵심기능을 중심으로 한 블록도 형식으로 도시 될 수 있다. Now, an embodiment of the present invention will be described in detail with reference to the drawings. In this case, the same reference numerals are used for parts having similar functions and actions throughout the drawings, and overlapping descriptions thereof will be omitted. In addition, in order to avoid obscuring the concept of the present invention, well-known structures and devices may be omitted or shown in block diagram form focusing on core functions of each structure and device.
먼저, 본 발명의 실시예에 따른 미디어 사물인터넷에서 미션 다이어그램을 이용한 미디어사물의 미션을 수행하기 시스템에 대해서 설명하기로 한다. 도 1은 본 발명의 실시예에 따른 본 발명의 실시예에 따른 미디어 사물인터넷에서 미션 다이어그램을 이용한 미디어사물의 미션을 수행하기 시스템의 구성을 설명하기 위한 도면이다. 도 1을 참조하면, 미션수행시스템은 사용자장치(100), 미디어사물(200, (Media Things: MThings), 관리서버(300) 및 스토리지(400)를 포함한다. First, a system for performing a mission of a media thing using a mission diagram in the media IoT according to an embodiment of the present invention will be described. 1 is a diagram for explaining the configuration of a system for performing a mission of a media thing using a mission diagram in the media IoT according to an embodiment of the present invention according to an embodiment of the present invention. Referring to FIG. 1 , the mission performance system includes a
미디어사물(200)은 MPEG-IoMT (Internet of Media Things: ISO/IEC 23093) 규격에서 정의하는 “Media Things”이며, 미디어 또는 미디어의 메타 데이터를 감지, 획득, 작동 또는 처리 할 수 있는 장치이다. 미디어사물(200)은 사용자장치(100)와 연결되어, 사용자장치(100)를 통해 네트워크에 연결될 수 있다. 혹은, 미디어사물(200) 단독으로 네트워크에 연결될 수도 있다. The
사용자장치(100)는 네트워크의 에지(edge)에 존재하는 장치이며, 미디어사물(200)의 일종이거나, 미디어사물(200)을 포함하거나, 미디어사물(200)과 직접 유선으로 연결되거나, 미디어사물(200)과 직접(P2P: Point to Point) 무선으로 연결될 수 있다. 또한, 사용자장치(100)는 직접적인 연결 외에 미디어사물(200)과 네트워크를 통해 연결될 수 있다. 이때, 사용자장치(100)는 통상적으로 알려진 코어네트워크(Core Network) 장비를 통해 미디어사물(200)과 연결되거나, 관리서버(300)를 통해 관리서버(300)가 관리하는 미디어사물(200)과 연결될 수 있다. The
관리서버(300)는 네트워크 연결을 통해 복수의 미디어사물(200)을 관리하기 위한 장치이며, 복수의 미디어사물(200)을 통해 미디어 관련 서비스를 제공하기 위한 서버가 될 수 있다. The
스토리지(400)는 대량의 데이터를 저장하기 위한 것으로, 바람직하게는 블록 체인(Block Chain) 네트워크(401)로 구현될 수 있다. 또한, 스토리지(400)는 데이터베이스 서버(402)로 구현될 수도 있다. The
MPEG-IoMT(ISO/IEC 23093)에서 미션은 특정 작업을 수행하기 위해 미디어사물(MThings)간에 수행할 일련의 태스크가 있는 것을 의미한다. 미션을 수행하기 위하여 각 미디어사물(200)은 자신이 어떤 상태에 있는지, 어떤 태스크를 수행해야 하는지, 어떤 데이터를 전송해야 하는지 알아야 한다. In MPEG-IoMT (ISO/IEC 23093), a mission means that there is a set of tasks to be performed between media things (MThings) to perform a specific task. In order to perform a mission, each
이에 따라 본 발명은 상호 관련된 복수의 태스크를 포함하는 미션을 설명하기 위한 도구를 제공한다. 사용자장치(100)는 미션을 수행할 적어도 하나의 미디어사물(200)을 선택한다. 이러한 선택에 따라, 미션에 참여하는 미디어사물(200)을 참여 미디어사물(200)이라고 칭하며, 참여 미디어사물(200)은 네트워크를 통해 상호 통신 가능한 상태로 연결된다. 그러면, 사용자장치(100)는 미션을 설명하는 미션 데이터를 생성한 후, 참여 미디어사물(200)에 미션 데이터를 제공한다. 그러면, 참여 미디어사물(200)은 미션 데이터를 기초로 상호 관련된 복수의 태스크를 포함하는 미션을 수행한다. Accordingly, the present invention provides a tool for describing a mission comprising a plurality of interrelated tasks. The
다음으로, 본 발명의 실시예에 따른 미션을 표현하기 위한 미션 다이어그램에 대해서 설명하기로 한다. 도 2는 본 발명의 일 실시예에 따른 미션을 설명하기 위한 흐름도이다. 도 3은 도 2의 본 발명의 일 실시예에 따른 미션을 표현한 미션 다이어그램이다. Next, a mission diagram for expressing a mission according to an embodiment of the present invention will be described. 2 is a flowchart for explaining a mission according to an embodiment of the present invention. Figure 3 is a mission diagram representing a mission according to an embodiment of the present invention of Figure 2;
먼저, 도 2에서, 3개의 미디어사물(201, 202, 203)이 존재하며, 비디오컨텐츠클래스생성사물(MVideoContentClassGenerator: 201), 카메라사물(MCamera, 202) 및 스토리지사물(MStorage, 203)을 포함한다(Information technology - Internet of media things - Part 3: Media data formats and API ISO/IEC 23093-3:2019 참조). First, in FIG. 2 , three
도 2를 참조하면, 비디오 소스를 분석하기 위해 비디오컨텐츠클래스생성사물(201)은 카메라사물(202)로부터 비디오 소스의 URL((Uniform Resource Locator)을 가져와야 한다. 이에 따라, 비디오컨텐츠클래스생성사물(201)은 T10 단계에서 함수는 비디오 소스의 URL을 반환하도록 하는 “getVideoURL()” 함수를 실행한다. 이에 따라, 카메라사물(202)은 T20 단계에서 비디오 소스의 URL을 반환한다. 그런 다음, 비디오컨텐츠클래스생성사물(201)은 비디오 소스를 분석한 후, T30 단계에서 분석된 데이터(AnalyzedData)를 저장하도록 saveAnalyzedData(AnalyzedData) 함수를 스토리지사물(203)로 전송하며, 스토리지사물(203)은 분석된 데이터(AnalyzedData)를 저장하고, T40 단계에서 분석된 데이터를 저장한 파일을 나타내는 파일 식별자(unique file ID)를 반환한다. 그러면, 비디오컨텐츠클래스생성사물(201)은 저장한 파일을 나타내는 파일 식별자(unique file ID)를 저장할 수 있다. 2, in order to analyze a video source, the video content
본 발명의 실시예에 따른 미션은 전술한 도 2의 일 실시예와 같이 상호 연관된 복수의 태스크를 포함하며, 이러한 미션은 참여하는 미디어사물의 역할과 실행 순서를 정의하는 미션 데이터로 나타낼 수 있다. A mission according to an embodiment of the present invention includes a plurality of interrelated tasks as in the embodiment of FIG. 2 described above, and such a mission may be represented by mission data defining a role and an execution sequence of a participating media thing.
일 실시예에 따르면, 미션 데이터는 도 3에 도시된 바와 같이, 미션 다이어그램으로 표현될 수 있다. 미션 다이어그램은 노드와 링크를 포함한다. 노드는 미션의 상태를 나타내며, 미션의 각 상태에서의 미션에 참여한 복수의 미디어사물 각각의 태스크에 대한 설명을 포함한다. 링크는 상태 전이를 위해 요구되는 입력 혹은 출력을 나타낸다. 이 예에서 각 상태에서 비디오컨텐츠클래스생성사물(201), 카메라사물(202) 및 스토리지사물(203) 각각의 태스크를 설명한다. 예컨대, getVideoURL() 함수, saveAnalyzedData(AnalyzedData) 함수와 같은 API 호출, 통해 미디어사물은 소스 비디오 URL 또는 분석된 데이터가 저장된 파일의 파일 식별자와 같은 출력 데이터를 반환하고 그 미션의 상태가 변경된다. According to an embodiment, the mission data may be expressed in a mission diagram as shown in FIG. 3 . A mission diagram contains nodes and links. A node indicates a state of a mission, and includes a description of each task of a plurality of media things participating in the mission in each state of the mission. A link represents an input or output required for a state transition. In this example, each task of the video content
도시된 바와 같이, 초기 상태를 나타내는 초기상태 노드(S0), 제1 상태를 나타내는 제1 상태 노드(S1) 및 제2 상태를 나타내는 제2 상태 노드(S2)를 포함한다. As shown, it includes an initial state node S0 indicating the initial state, a first state node S1 indicating the first state, and a second state node S2 indicating the second state.
초기상태 노드(S0)에 따르면, 비디오컨텐츠클래스생성사물(201), 카메라사물(202) 및 스토리지사물(203) 모두 초기 상태로, 어떤 태스크도 수행하지 않은 상태이다. According to the initial state node S0, the video content
제1 링크(L1)에 따르면, 초기 상태에서 제1 상태로 전이하기 위해 입력 및 출력으로 getVideoURL() 함수 및 비디오 소스의 URL이 요구된다. 제1 상태 노드(S1)의 경우, 제1 상태에서 카메라사물(202)은 비디오 소스의 URL을 출력하는 태스크를 수행하며, 이는 마지막(final) 태스크이다. 비디오컨텐츠클래스생성사물(201)은 getVideoURL() 함수를 호출하여 비디오 소스의 URL을 반환 받는 태스크를 수행한다. 여전히, 스토리지사물(203)은 초기 상태이며, 어떤 태스크도 수행하지 않는다. According to the first link L1, the getVideoURL() function and the URL of the video source are required as inputs and outputs to transition from the initial state to the first state. In the case of the first state node S1, the
제2 링크(L2)에 따르면, 제1 상태에서 제2 상태로 전이하기 위해 입력 및 출력으로 saveAnalyzedData 함수 및 파일 식별자(unique file ID)가 요구된다. 제2 상태 노드(S1)의 경우, 제2 상태에서 비디오컨텐츠클래스생성사물(201)은 분석된 데이터(AnalyzedData)를 저장하도록 saveAnalyzedData(AnalyzedData) 함수를 호출하여 스토리지사물(203)로 전송하고, 스토리지사물(203)이 분석된 데이터를 저장한 파일을 식별하기 위한 파일 식별자(unique file ID)를 반환하면, 반환된 파일 식별자(returned unique file ID)를 저장하는 태스크를 마지막으로 수행한다. 스토리지사물(203)은 분석된 데이터(AnalyzedData)를 저장하고, 분석된 데이터를 저장한 파일을 식별하기 위한 파일 식별자(unique file ID)를 반환하는 마지막 태스크를 수행한다. 한편, 카메라사물(202)은 이미 마지막(final) 태스크를 수행했기 때문에 제1 상태와 동일하게 유지된다. According to the second link L2, a saveAnalyzedData function and a unique file ID are required as input and output to transition from the first state to the second state. In the case of the second state node (S1), in the second state, the video content
이러한 미션 다이어그램은 미션에 참여한 모든 미디어사물(200)에게 전송되어 공유될 수 있다. MPEG-IoMT에서는 블록 체인을 활용할 수 있고 미디어사물 관련 정보를 스토리지 혹은 블록 체인(400)에 업로드 할 수 있기 때문에 미션 다이어그램도 머신에 의해 쉽게 저장하고 읽을 수 있다. 따라서 상태에 대한 정보는 형식에 맞춰 표현되어야 한다. 다음의 표 1은 도 3의 미션 다이어그램을 마크업 언어 형식, 예컨대, XML 형식으로 작성한 미션 데이터의 일례이다. This mission diagram may be transmitted and shared to all
L02: <MCamera>
L03: <StateDescription/>Initial
L04: </MCamera>
L05: <MVideoContentClassGenerator>
L06: <StateDescription/>Initial
L07: </MVideoContentClassGenerator>
L08: <MStorage>
L09: <StateDescription/>Initial
L10: </MStorage>
L11: <InputAPI>getVideoURL</InputAPI>
L12: <fromMThing>MCamera</fromMThing>
L13: <OutputData>URL</OutputData>
L14: <toMThing>MVideoContentClassGenerator</toMThing>
L15: </state>
L16: <state id = “S1”>
L17: <MCamera>
L18: <StateDescription/>Sent a URL(final)
L19: </MCamera>
L20: <MVideoContentClassGenerator>
L21: <StateDescription/>Called getVideoURL andgot a video URL
L22: </MVideoContentClassGenerator>
L23: <MStorage>
L24: <StateDescription/>Initial
L25: </MStorage>
L26: <InputAPI>saveAnalyzedData</InputAPI>
L27: <fromMThing>MStorage</fromMThing>
L28: <OutputData>String</OutputData>
L29: <toMThing>MVideoContentClassGenerator</toMThing>
L30: </state>
L31: <state id = “S2”>
L32: <MCamera>
L33: <StateDescription/>Sent a URL(final)
L34: </MCamera>
L35: <MVideoContentClassGenerator>
L36: <StateDescription/>Sent an analyzeddata and Saved a returned unique file ID (final)
L37: </MVideoContentClassGenerator>
L38: <MStorage>
L39: <StateDescription/>saved an analyzed data and returned a unique file ID(final)
L40: </MStorage>
L41: <InputAPI>None</InputAPI> # If input API is None, that means the state is final.
L42: <OutputData>None</OutputData>
L43: </state>L01: <state id = “S0”>
L02: <MCamera>
L03: <StateDescription/>Initial
L04: </MCamera>
L05: <MVideoContentClassGenerator>
L06: <StateDescription/>Initial
L07: </MVideoContentClassGenerator>
L08: <MSStorage>
L09: <StateDescription/>Initial
L10: </MSStorage>
L11: <InputAPI>getVideoURL</InputAPI>
L12: <fromMThing>MCamera</fromMThing>
L13: <OutputData>URL</OutputData>
L14: <toMThing>MVideoContentClassGenerator</toMThing>
L15: </state>
L16: <state id = “S1”>
L17: <MCamera>
L18: <StateDescription/>Sent a URL(final)
L19: </MCamera>
L20: <MVideoContentClassGenerator>
L21: <StateDescription/>Called getVideoURL andgot a video URL
L22: </MVideoContentClassGenerator>
L23: <MSStorage>
L24: <StateDescription/>Initial
L25: </MSStorage>
L26: <InputAPI>saveAnalyzedData</InputAPI>
L27: <fromMThing>MStorage</fromMThing>
L28: <OutputData>String</OutputData>
L29: <toMThing>MVideoContentClassGenerator</toMThing>
L30: </state>
L31: <state id = “S2”>
L32: <MCamera>
L33: <StateDescription/>Sent a URL(final)
L34: </MCamera>
L35: <MVideoContentClassGenerator>
L36: <StateDescription/>Sent an analyzeddata and Saved a returned unique file ID (final)
L37: </MVideoContentClassGenerator>
L38: <MSStorage>
L39: <StateDescription/>saved an analyzed data and returned a unique file ID ( final)
L40: </MStorage>
L41: <InputAPI>None</InputAPI># If input API is None, that means the state is final.
L42: <OutputData>None</OutputData>
L43: </state>
표 1의 L01, L15, L16, L30, L31, L43에 보인 바와 같이, 미션 데이터는 마크업 언어 형식에 따른 하나 이상의 상태 요소를 포함한다. 즉, 미션은 적어도 하나의 상태를 포함하며, 상태 요소는 상태를 식별하기 위한 식별자를 나타내는 식별자 속성(id)을 포함한다. 표 1의 실시예에서, 식별자 속성(id)의 속성값은 S1, S2, S3이다. 또한, 미션 데이터는 상태 요소의 자식 요소로 사물 요소, 입력 요소, 입력사물 요소, 출력 요소 및 출력사물 요소를 포함한다. As shown in L01, L15, L16, L30, L31, and L43 of Table 1, the mission data includes one or more state elements according to the markup language format. That is, the mission includes at least one state, and the state element includes an identifier attribute (id) indicating an identifier for identifying the state. In the embodiment of Table 1, the attribute values of the identifier attribute (id) are S1, S2, and S3. In addition, the mission data includes an object element, an input element, an input object element, an output element, and an output object element as child elements of the state element.
특히, 사물 요소는 표 1의 L02 내지 L10, L17 내지 L25 및 L32 내지 L40에 기재된 바와 같이, 미션에 참여한 모든 미디어사물 각각을 나타낸다. 이러한 사물 요소는 예컨대, 카메라사물(202)을 나타내는 카메라사물 요소 “<MCamera> </MCamera>”, 비디오컨텐츠클래스생성사물(201)을 나타내는 비디오컨텐츠클래스생성사물 요소 “<MVideoContentClassGenerator> </MVideoContentClassGenerator>” 및 스토리지사물(203)을 나타내는 스토리지사물 요소 “<MStorage> </MStorage>”를 포함한다. 각 사물 요소는 각 상태에서 수행할 태스크를 설명하는 속성인 상태 설명 속성 “<StateDescription/>”을 포함한다. In particular, as described in L02 to L10, L17 to L25, and L32 to L40 of Table 1, the thing element represents all media things participating in the mission, respectively. Such a thing element is, for example, a camera thing element "<MCamera> </MCamera>" representing the
입력 요소 “<InputAPI> </InputAPI>”는 표 1의 L11, L26에 기술된 바와 같이, 각 상태 별로 다른 상태로 상태 전이 하기 위해 입력되는 API를 나타낸다. 이러한 API는 예컨대, 초기 상태에서 제1 상태로 상태 전이 하기 위한 경우, getVideoURL() 함수가 적용되며, 제1 상태에서 제2 상태로 상태 전이 하기 위한 경우, saveAnalyzedData() 함수를 이용할 수 있다. 한편, L41에 기술된 바와 같이, 입력 요소이 값이 None인 경우, 상태가 종료된 경우를 나타낸다. As described in L11 and L26 of Table 1, the input element “<InputAPI> </InputAPI>” represents the API input for state transition to a different state for each state. For this API, for example, when transitioning from the initial state to the first state, the getVideoURL() function is applied, and in the case of transitioning from the first state to the second state, the saveAnalyzedData() function can be used. On the other hand, as described in L41, when the value of the input element is None, it indicates that the state is terminated.
입력대상 요소 “<fromMThing> </fromMThing>”는 표 1의 L12, L27에 기술된 바와 같이, API를 입력 받는 대상 미디어사물을 나타낸다. 예컨대, getVideoURL() 함수의 입력 대상은 카메라사물(202)이기 때문에 입력대상 요소의 값은 MCamera이며, saveAnalyzedData() 함수 함수의 입력 대상은 스토리지사물(203)이기 때문에 입력대상 요소의 값은 MStorage이다. As described in L12 and L27 of Table 1, the input target element “<fromMThing> </fromMThing>” represents a target media thing that receives API input. For example, since the input target of the getVideoURL() function is a
출력 요소 “<OutputData> </OutputData>”는 표 1의 L13, L28에 기술된 바와 같이, 각 상태 별로 다른 상태로 상태 전이 하기 위해 출력되는 데이터를 나타낸다. 이러한 데이터는 예컨대, 초기 상태에서 제1 상태로 상태 전이 하기 위한 경우, getVideoURL() 함수에 따른 소스 비디오의 URL이며, 제1 상태에서 제2 상태로 상태 전이 하기 위한 경우, saveAnalyzedData() 함수에 따라 분석된 데이터를 저장한 파일을 식별하기 위한 파일 식별자이다. 한편, L42에 기술된 바와 같이, 출력 요소의 값이 None인 경우, 상태가 종료된 경우를 나타낸다. As described in L13 and L28 of Table 1, the output element “<OutputData> </OutputData>” indicates the data output for state transition to a different state for each state. This data is, for example, the URL of the source video according to the getVideoURL() function for state transition from the initial state to the first state, and according to the saveAnalyzedData() function for state transition from the first state to the second state. It is a file identifier for identifying the file in which the analyzed data is stored. On the other hand, as described in L42, when the value of the output element is None, it indicates that the state is terminated.
출력대상 요소 “<toMThing> </toMThing>”는 표 1의 L14, L29에 기술된 바와 같이, 데이터 출력의 대상 미디어사물을 나타낸다. 예컨대, URL 및 파일 식별자 모두 출력 대상은 비디오컨텐츠클래스생성사물(201)이기 때문에 출력대상 요소의 값은 “MVideoContentClassGenerator”이다. As described in L14 and L29 of Table 1, the output target element “<toMThing> </toMThing>” indicates a target media thing for data output. For example, since the output target of both the URL and the file identifier is the video
그러면, 본 발명의 실시예에 따른 미디어 사물인터넷에서 미션 다이어그램을 이용한 미디어사물의 미션을 수행하기 위한 방법에 대해서 설명하기로 한다. 도 4는 본 발명의 실시예에 따른 미션 다이어그램을 이용한 미디어사물의 미션을 수행하기 위한 방법을 설명하기 위한 흐름도이다. Next, a method for performing a mission of a media thing using a mission diagram in the media IoT according to an embodiment of the present invention will be described. 4 is a flowchart illustrating a method for performing a mission of a media thing using a mission diagram according to an embodiment of the present invention.
도 4를 참조하면, 사용자장치(100)는 S110 단계에서 상호 연관된 복수의 태스크를 포함하는 미션을 수행하기 위한 적어도 하나의 미디어사물(200)을 선택한다. 이때, 사용자장치(100)는 사용자가 미디어사물을 선택하도록 제공한다. 미디어사물 그래픽 사용자 인터페이스를 제공한다. Referring to FIG. 4 , the
S120 단계에서 사용자장치(100)가 선택한 미디어사물 중 미션에 참여하는 것을 수락한 참여 미디어사물(200)이 결정되면, 이러한 참여 미디어사물(200)이 통신 가능한 상태로 연결된다. 일 실시예에 따르면, 참여 미디어사물(200)의 수가 기 설정된 수 미만이거나, 해당 미션이 일회성이거나, 혹은 해당 미션의 완료 시간이 기 설정된 시간 미만의 단기간일 경우, S120 단계에서 참여 미디어사물(200)로 이루어진 애드훅 네트워크가 구성될 수 있다 다른 실시예에 따르면, 참여 미디어사물(200)의 수가 기 설정된 수 이상이거나, 해당 미션이 반영구적이거나, 혹은 해당 미션의 완료 시간이 기 설정된 시간 이상의 장기간일 경우, S120 단계에서 관리서버(300)에 참여 미디어사물(200) 전체가 통신 가능한 상태로 연결될 수 있다. 그리고 이러한 경우, 관리서버(300)에 의해 참여 미디어사물(200) 전체가 관리될 수 있다. In step S120 , when the participating
참여 미디어사물(200)은 상호간의 연결이 완료되면, S130 단계에서 연결이 완료되었음을 사용자장치(100)에 알린다. 그러면, 모든 참여 미디어사물(200)의 연결이 완료되면, 사용자장치(100)는 S140 단계에서 미션 데이터를 생성한다. 이러한 미션 데이터에 대해 도 2, 도 3 및 표 1을 참조로 설명한 바 있다. 미션 데이터는 적어도 하나의 상태를 포함하며, 각 상태에서 상태 전이를 위한 참여 미디어사물의 태스크를 정의한다. S140 단계에서 사용자는 사용자장치(100)에 각 참여 미디어사물(200)의 역할과 실행 순서를 입력할 수 있다. 이때 사용자는 GUI의 그래프 도구, 메뉴 버튼 인터페이스 또는 자연어를 통해 각 참여 미디어사물(200)의 미션 및 태스크를 설명하거나 입력 할 수 있다. 이러한 입력에 따라 사용자장치(100)는 미션 데이터를 생성한다. 이때, 사용자장치(100)는 도 3에 도시된 바와 같은 미션 다이어그램 및 표 1에 도시된 바와 같은 표준화된 데이터 형식(e.g., XML, JSON, YAML, Binary 등)의 미션 데이터를 생성할 수 있다. When the mutual connection between the participating
미션 데이터가 생성되면, 사용자장치(100)는 S150 단계에서 미션 데이터를 사용자에게 표시한다. 즉, 사용자장치(100)는 미션 다이어그램 혹은 표준화된 데이터 형식의 미션 데이터를 예컨대, GUI를 통해 사용자가 확인할 수 있도록 표시한다. When the mission data is generated, the
사용자의 확인이 완료되면, 사용자장치(100)는 S160 단계에서 모든 참여 미디어사물(200)로 미션 데이터를 전달한다. 일 실시예에 따르면, 사용자장치(100)는 미션 데이터를 참여 미디어사물(200)로 직접 전송하거나, 관리서버(300)를 통해 미션 데이터를 참여 미디어사물(200)로 전송할 수 있다. 이때, 전송 방식은 브로드캐스트 또는 멀티캐스트 방식으로 전송하는 것이 바람직하다. 한편, 다른 실시예에 따르면, 사용자장치(100)가 미션 데이터를 스토리지(400)에 저장하면, 참여 미디어사물이 미션 데이터가 저장된 스토리지(400)로부터 저장된 미션 데이터를 수신할 수 있다. 여기서 스토리지(400)는 단일의 스토리지 서버, 클라우드 서버가 될 수 있다. 혹은, 스토리지(400)는 복수의 노드를 포함하는 블록 체인이 될 수도 있다. When the user's confirmation is completed, the
미션 데이터를 수신한 참여 미디어사물(200)은 S170 단계에서 미션 데이터를 기초로 미션을 수행을 시작한다. 미션의 수행 중 참여 미디어사물(200) 각각은 S180 단계에서 미션 데이터에 기록된 어느 하나의 태스크를 완료할 때마다, 완료 후의 상태 정보를 사용자장치(100) 및 연결된 다른 참여 미디어사물(200)에 전송한다. 이때, 전송 방식은 브로드캐스트 또는 멀티캐스트 방식으로 전송하는 것이 바람직하다. 이에 따라, 사용자장치(100)는 참여 미디어사물(200) 각각의 상태를 GUI를 통해 표시하고, 이를 통해 사용자는 참여 미디어사물(200) 각각의 상태를 확인할 수 있다. The participating
미션의 모든 태스크가 완료되면, 마지막 태스크를 수행한 참여 미디어사물(200)은 S190 단계에서 연결된 다른 참여 미디어사물(200) 및 사용자장치(100)에 미션 완료를 알리는 상태 정보를 전달한다. 이때, 전송 방식은 브로드캐스트 또는 멀티캐스트 방식으로 전송하는 것이 바람직하다. 이에 따라, 사용자장치(100)는 참여 미디어사물(200) 각각의 미션 완료를 알리는 상태 정보를 GUI를 통해 표시하고, 이를 통해 사용자는 참여 미디어사물(200) 각각의 미션 완료 상태를 확인할 수 있다. When all tasks of the mission are completed, the participating
이때, 일 실시예에 따르면, 각 참여 미디어사물(200) 각각은 분산 방식으로 미션 데이터에 따라 주어진 작업을 개별적으로 완료할 수 있다. 다른 실시예에 따르면, 관리 서버(300)는 중앙 집중식으로 미션에 참여하는 미디어사물(200)을 연결하고 전체 미션 수행을 관리할 수 있다. In this case, according to an embodiment, each of the participating
전술한 바와 같은 실시예를 실시하기 위하여, 연결된 모든 미디어사물에 미션 데이터(예: 미션 다이어그램)를 전송(브로드캐스트 혹은 멀티캐스트)하여 미션을 트리거(시작)하는 API, 및 작업 완료 시 상태 정보(현재 또는 최종)를 전송(브로드캐스트 혹은 멀티캐스트)하기 위한 API 및 미디어사물(200) 간에 미션 데이터를 요청하고, 그 요청에 응답하기 위한 API가 이용될 수 있다. In order to implement the above-described embodiment, an API that triggers (starts) a mission by transmitting (broadcast or multicast) mission data (eg, mission diagram) to all connected media things, and status information ( An API for transmitting (broadcast or multicast) current or final) and an API for requesting mission data between the
다음으로 미션을 수행하는 중 특이 상황, 예컨대, 미디어사물의 실패로 인해 미션을 수정하는 절차에 대해서 설명하기로 한다. 도 5는 본 발명의 추가적인 실시예에 따른 미디어 사물인터넷에서 미션 다이어그램을 이용한 미디어사물의 미션을 수행하기 위한 방법을 설명하기 위한 흐름도이다. Next, a procedure for modifying a mission due to a specific situation, for example, failure of a media object while performing a mission, will be described. 5 is a flowchart illustrating a method for performing a mission of a media thing using a mission diagram in the Internet of Things (IoT) according to an additional embodiment of the present invention.
도 5를 참조하면, 전술한 바와 같이, 참여 미디어사물(200)은 S170 단계에서 미션 데이터를 기초로 미션을 수행하는 중이라고 가정한다. 이때, 참여 미디어사물(200) 중 어느 하나의 미디어사물(200)에 특이 상황, 예컨대, 미디어사물(200)의 고장(failure)이 발생할 수 있다. Referring to FIG. 5 , as described above, it is assumed that the participating
따라서 S210 단계에서 특이 상황이 발생하는지 여부를 판별하고, 이러한 판별 결과, 특이 상황이 발생하면, 해당 미디어사물(200)은 S220 단계에서 연결된 다른 참여 미디어사물(200) 및 사용자장치(100)에 미션을 포기하기 위해 연결 해제를 알린다. 이때, 해당 미디어사물(200)은 alertDisconnection() 함수를 이용할 수 있다. Therefore, it is determined whether a special situation occurs in step S210, and as a result of this determination, when a special situation occurs, the corresponding
그러면, 사용자장치(100)는 S230 단계에서 해당 미디어사물(200)을 대체하는 대체 미디어사물(200)을 선택한다. 즉, S230 단계에서 사용자장치(100)가 해당 미디어사물(200)의 연결 해제를 알리면, 사용자는 GUI를 통해 이를 확인하고 연결 해제된 미디어사물(200)을 대체 할 수 있는 대체 미디어사물(200)을 선택할 수 있다. Then, the
그런 다음, 사용자장치(100)는 S240 단계에서 대체 미디어사물(200)에 따라 미션에서 태스크를 수정함으로써 미션 데이터를 수정한다. 이어서, 사용자장치(100)는 S250 단계에서 미션의 나머지 태스크를 수행하도록 상기 수정된 미션 데이터를 대체 미디어사물(200)을 비롯한 나머지 참여 미디어사물(200)로 전달한다. 이에 따라, S170 단계로 회귀하여 대체 미디어사물(200)을 포함하는 참여 미디어사물(200)은 수정된 미션 데이터를 기초로 미션을 수행할 수 있다. Then, the
다음으로 미션을 수행하는 중 사용자의 의도에 따라 예컨대, 새로운 미디어사물(200)을 추가하거나, 새로운 기능을 추가하거나, 기존의 참여 미디어사물(200)을 제외하는 미션 수정 절차에 대해서 설명하기로 한다. 도 6은 본 발명의 다른 실시예에 따른 미디어 사물인터넷에서 미션 다이어그램을 이용한 미디어사물의 미션을 수행하기 위한 방법을 설명하기 위한 흐름도이다. Next, according to the user's intention while performing the mission, for example, a mission modification procedure of adding a
도 6을 참조하면, 전술한 바와 같이, 참여 미디어사물(200)은 S170 단계에서 미션 데이터를 기초로 미션을 수행하는 중이라고 가정한다. Referring to FIG. 6 , as described above, it is assumed that the participating
이때, 사용자장치(100)는S310 단계에서 사용자에 의해 미션을 중단하도록 하는 입력이 있는지 여부를 확인한다. 상기 확인 결과, 미션을 중단하도록 하는 입력이 있으면, 사용자장치(100)는S320 단계에서 미션을 수정하기 위해 미션을 중단시킨다. At this time, the
그러면, 사용자장치(100)는 S330 단계에서 사용자의 입력에 따라 미션 데이터를 수정한다. 예컨대, 새로운 미디어사물(200)을 추가하거나, 새로운 함수(API)를 추가하거나, 기존의 참여 미디어사물(200)을 제외할 수 있다. Then, the
미디어사물(200)은 어느 하나의 상태에서 자신의 태스크가 완료되거나, 모든 상태의 태스크가 완료되면, 태스크가 완료되었음을 사용자장치(100)에 보고(report)한다. 다른 말로, 이러한 보고는 사용자장치(100)로 하여금 미디어사물(200) 자신에게 할당된 자원을 해제하도록 요청하는 것이 될 수 있다. 그러면, 사용자장치(100)는 태스크를 모두 완료한 미디어사물(200)에 대한 리소스를 해제할 수 있다. 이에 따라, 사용자장치(100)는 완료된 태스크를 제외한 나머지 태스크에 대해 미션 데이터를 수정할 수 있다. 즉, 사용자장치(100)는 미디어사물(200)이 태스크가 완료되었음을 보고한 경우, 완료된 태스크를 제외한 나머지 태스크에 대한 미션 데이터를 수정할 수 있다. The
사용자장치(100)가 미션 데이터를 수정하는 경우에, 완료된 태스크를 제외한 나머지 태스크에 대한 미션 데이터를 수정할 수 있다. 예를 들어, 미션 데이터를 수정하는 시점의 상태를 기준으로, 사용자장치(100)는 해당 미션과 관련된 모든 태스크를 수행 완료한 미디어사물(200)(즉, 해당 미션과 관련하여 더 이상 수행할 태스크가 존재하지 않는 미디어사물(200))을 제외한 나머지 미디어사물들(200)에 관한 미션 데이터를 수정할 수 있다.When the
이어서, 사용자장치(100)는 S340 단계에서 연결된 참여 미디어사물(200)로 수정된 미션 데이터에 미션을 수행하도록 수정된 미션 데이터를 전송한다. 이에 따라, S170 단계로 회귀하여 참여 미디어사물(200)은 수정된 미션 데이터를 기초로 미션을 수행할 수 있다. Then, the
전술한 바와 같은 실시예를 실행하기 위하여, 수정 혹은 업데이트된 미션 데이터를 연결된 모든 참여 미디어사물(200)에 전송하여 미션을 재개하도록 하는 API, 미디어사물에 의한 연결 해제를 경고하는 연결해제경고 및 미디어사물 또는 그 기능 연결 해제를 위한 API 및 미션 일시 중지 또는 중단을 위한 API가 이용될 수 있다. In order to implement the embodiment as described above, an API for resuming a mission by transmitting the modified or updated mission data to all the connected participating
상술한 바와 같은 본 발명에 따르면, 사용자는 사용자장치(100)를 통해 예컨대, 디스플레이, 디지털 사이니지, 감시 카메라, 스피커, 미디어 분석기와 같은 주변의 미디어사물을 검색하고 연결하여 사용자가 원하는 서비스 (미션)를 설계하고 수행 할 수 있다. 이러한 사용 사례는 분산 방식, 능동적 미션 데이터 전송, 소규모 및 미디어사물 간의 애드혹 연결의 조합으로 가능합니다. 한편, 호텔이나 건물의 모든 미디어사물을 연결하여 서비스(미션)를 수행 할 때보다 안정적이고 견고한 시스템이 필요합니다. 따라서 이 경우 서비스를 관리하는 중앙 집중식 시스템에 미리 저장된 미션 데이터를 각 미디어사물이 수동적으로 읽어 작업을 수행하고, 대규모 오류 복원력과 안정적인 연결 방식의 조합을 구성 할 수도 있다. According to the present invention as described above, the user searches for and connects media objects in the vicinity such as, for example, a display, a digital signage, a surveillance camera, a speaker, and a media analyzer, through the
도 7은 본 발명의 실시예에 따른 컴퓨팅 장치를 나타내는 도면이다. 도 7의 컴퓨팅 장치(TN100)는 본 명세서에서 기술된 장치(예, 사용자장치, 미디어사물, 관리서버, 스토리지 등) 일 수 있다. 7 is a diagram illustrating a computing device according to an embodiment of the present invention. The computing device TN100 of FIG. 7 may be a device (eg, a user device, a media thing, a management server, storage, etc.) described herein.
도 7의 실시예에서, 컴퓨팅 장치(TN100)는 적어도 하나의 프로세서(TN110), 송수신 장치(TN120), 및 메모리(TN130)를 포함할 수 있다. 또한, 컴퓨팅 장치(TN100)는 저장 장치(TN140), 입력 인터페이스 장치(TN150), 출력 인터페이스 장치(TN160) 등을 더 포함할 수 있다. 컴퓨팅 장치(TN100)에 포함된 구성 요소들은 버스(bus)(TN170)에 의해 연결되어 서로 통신을 수행할 수 있다. In the embodiment of FIG. 7 , the computing device TN100 may include at least one processor TN110 , a transceiver device TN120 , and a memory TN130 . In addition, the computing device TN100 may further include a storage device TN140 , an input interface device TN150 , an output interface device TN160 , and the like. Components included in the computing device TN100 may be connected by a bus TN170 to communicate with each other.
프로세서(TN110)는 메모리(TN130) 및 저장 장치(TN140) 중에서 적어도 하나에 저장된 프로그램 명령(program command)을 실행할 수 있다. 프로세서(TN110)는 중앙 처리 장치(CPU: central processing unit), 그래픽 처리 장치(GPU: graphics processing unit), 또는 본 발명의 실시예에 따른 방법들이 수행되는 전용의 프로세서를 의미할 수 있다. 프로세서(TN110)는 본 발명의 실시예와 관련하여 기술된 절차, 기능, 및 방법 등을 구현하도록 구성될 수 있다. 프로세서(TN110)는 컴퓨팅 장치(TN100)의 각 구성 요소를 제어할 수 있다. The processor TN110 may execute a program command stored in at least one of the memory TN130 and the storage device TN140. The processor TN110 may mean a central processing unit (CPU), a graphics processing unit (GPU), or a dedicated processor on which methods according to an embodiment of the present invention are performed. The processor TN110 may be configured to implement procedures, functions, and methods described in connection with an embodiment of the present invention. The processor TN110 may control each component of the computing device TN100.
메모리(TN130) 및 저장 장치(TN140) 각각은 프로세서(TN110)의 동작과 관련된 다양한 정보를 저장할 수 있다. 메모리(TN130) 및 저장 장치(TN140) 각각은 휘발성 저장 매체 및 비휘발성 저장 매체 중에서 적어도 하나로 구성될 수 있다. 예를 들어, 메모리(TN130)는 읽기 전용 메모리(ROM: read only memory) 및 랜덤 액세스 메모리(RAM: random access memory) 중에서 적어도 하나로 구성될 수 있다. Each of the memory TN130 and the storage device TN140 may store various information related to the operation of the processor TN110. Each of the memory TN130 and the storage device TN140 may be configured as at least one of a volatile storage medium and a nonvolatile storage medium. For example, the memory TN130 may include at least one of a read only memory (ROM) and a random access memory (RAM).
송수신 장치(TN120)는 유선 신호 또는 무선 신호를 송신 또는 수신할 수 있다. 송수신 장치(TN120)는 네트워크에 연결되어 통신을 수행할 수 있다.The transceiver TN120 may transmit or receive a wired signal or a wireless signal. The transceiver TN120 may be connected to a network to perform communication.
한편, 본 발명의 실시 예에 따른 방법은 컴퓨터 프로그램 명령어와 데이터를 저장하기에 적합한 컴퓨터로 판독 가능한 매체의 형태로 제공될 수도 있다. 특히, 전술한 함수 및 API는 프로그램의 일부로써 컴퓨터 판독 가능한 기록 매체에 저장된다. 이러한, 컴퓨터가 읽을 수 있는 기록매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있으며, 컴퓨터 시스템에 의해 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 기록매체의 예로는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(Magnetic Media), CD-ROM(Compact Disk Read Only Memory), DVD(Digital Video Disk)와 같은 광기록 매체(Optical Media), 플롭티컬 디스크(Floptical Disk)와 같은 자기-광 매체(Magneto-Optical Media) 및 롬(ROM, Read Only Memory), 램(RAM, Random Access Memory), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치를 포함한다. 또한, 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다. 그리고, 본 발명을 구현하기 위한 기능적인(functional) 프로그램, 코드 및 코드 세그먼트들은 본 발명이 속하는 기술분야의 프로그래머들에 의해 용이하게 추론될 수 있다.Meanwhile, the method according to an embodiment of the present invention may be provided in the form of a computer-readable medium suitable for storing computer program instructions and data. In particular, the above-described functions and APIs are stored in a computer-readable recording medium as a part of a program. Such a computer-readable recording medium may include program instructions, data files, data structures, etc. alone or in combination, and includes all types of recording devices in which data readable by a computer system is stored. Examples of computer-readable recording media include magnetic media such as hard disks, floppy disks and magnetic tapes, compact disk read only memory (CD-ROM), and optical recording media such as DVD (Digital Video Disk). Stores program instructions such as Magneto-Optical Media, ROM (Read Only Memory), RAM (Random Access Memory), Flash memory, etc. and hardware devices specially configured to perform In addition, the computer-readable recording medium is distributed in a computer system connected through a network, so that the computer-readable code can be stored and executed in a distributed manner. In addition, functional programs, codes, and code segments for implementing the present invention can be easily inferred by programmers in the technical field to which the present invention pertains.
이상으로 본 발명의 기술적 사상을 예시하기 위한 바람직한 실시예와 관련하여 설명하고 도시하였지만, 본 발명은 이와 같이 도시되고 설명된 그대로의 구성 및 작용에만 국한되는 것은 아니며, 기술적 사상의 범주를 이탈함없이 본 발명에 대해 다수의 변경 및 수정이 가능함을 당업자들은 잘 이해할 수 있을 것이다. 따라서 그러한 모든 적절한 변경 및 수정과 균등물들도 본 발명의 범위에 속하는 것으로 간주되어야 할 것이다. Although described and illustrated in relation to a preferred embodiment for illustrating the technical idea of the present invention above, the present invention is not limited to the configuration and operation as shown and described as such, and without departing from the scope of the technical idea. It will be apparent to those skilled in the art that many changes and modifications to the present invention are possible. Accordingly, all such suitable alterations and modifications and equivalents are to be considered as falling within the scope of the present invention.
100: 사용자장치
200: 미디어사물
300: 관리서버
400: 스토리지 100: user device
200: media thing
300: management server
400: storage
Claims (24)
상호 연관된 복수의 태스크를 포함하는 미션에 대한 미션 데이터를 수신하면, 수신된 미션 데이터를 기초로 미션을 수행하는 적어도 하나의 참여 미디어사물; 및
적어도 하나의 상태를 포함하며 각 상태에서 참여 미디어사물의 태스크를 정의하는 미션 데이터를 생성하고, 생성된 미션 데이터를 상기 참여 미디어사물로 전송하는 사용자장치;
를 포함하는 것을 특징으로 하는
미션을 수행하기 위한 시스템. In the system for performing a mission,
at least one participating media thing for performing a mission based on the received mission data when receiving mission data for a mission including a plurality of interrelated tasks; and
a user device for generating mission data including at least one state and defining a task of a participating media thing in each state, and transmitting the generated mission data to the participating media thing;
characterized in that it comprises
A system to accomplish a mission.
상기 미션 데이터는
미션의 상태를 나타내며, 미션의 각 상태에서의 미션에 참여한 복수의 미디어사물 각각의 태스크에 대한 설명을 포함하는 노드와,
상태 전이를 위해 요구되는 입력 혹은 출력을 나타내는 링크
를 포함하는 미션 다이어그램으로 표현되는 것
을 특징으로 하는
미션을 수행하기 위한 시스템. According to claim 1,
The mission data is
A node indicating the state of the mission and including a description of each task of a plurality of media things participating in the mission in each state of the mission;
A link representing the input or output required for a state transition.
What is expressed as a mission diagram containing
characterized by
A system to accomplish a mission.
상기 미션 데이터는
마크업 언어 형식에 따라
상기 미션의 상태를 나타내며 각 상태를 식별하기 위한 식별자를 나타내는 식별자 속성을 포함하는 적어도 하나의 상태 요소를 포함하며,
상기 상태 요소는 자신의 자식 요소로
상기 참여 미디어사물을 나타내며 각 상태에서 참여 미디어사물 각각이 수행할 태스크를 설명하는 속성인 상태 설명 속성을 포함하는 사물 요소,
입력되는 API(Application Programming Interface)를 나타내는 입력 요소,
입력 대상 미디어사물을 나타내는 입력사물 요소,
출력되는 데이터를 나타내는 출력 요소 및
출력 대상 미디어사물을 나타내는 출력사물 요소
를 포함하는 것을 특징으로 하는
미션을 수행하기 위한 시스템. According to claim 1,
The mission data is
according to the markup language format
at least one status element indicating the status of the mission and comprising an identifier attribute representing an identifier for identifying each status;
The state element is its own child element.
a thing element representing the participating media thing and including a state description attribute, which is an attribute that describes a task to be performed by each participating media thing in each state;
an input element representing an application programming interface (API) being input;
an input thing element representing the input target media thing;
an output element representing the data being output; and
The output thing element representing the output target media thing
characterized in that it comprises
A system to accomplish a mission.
상기 참여 미디어사물 중 어느 하나의 미디어사물이 연결된 다른 참여 미디어사물 및 상기 사용자장치에 주어진 태스크를 포기하기 위해 연결 해제를 알리면,
상기 사용자장치는
상기 어느 하나의 미디어사물을 대체하는 대체 미디어사물을 선택하고, 상기 대체 미디어사물에 따라 태스크를 수정함으로써 미션 데이터를 수정하고, 상기 미션의 나머지 태스크를 수행하도록 상기 수정된 미션 데이터를 상기 대체 미디어사물을 비롯한 나머지 참여 미디어사물로 전송하는
것을 특징으로 하는
미션을 수행하기 위한 시스템. According to claim 1,
When any one of the participating media things notifies the connected other participating media things and the user device to disconnect to give up a given task,
The user device is
Selecting an alternative media thing to replace the one media thing, modifying mission data by modifying a task according to the replacement media thing, and converting the modified mission data to the replacement media thing to perform the remaining tasks of the mission to other participating media things, including
characterized by
A system to accomplish a mission.
상기 사용자장치는
미션을 수정하기 위해 미션을 중단시키고, 상기 미션 데이터를 수정하고, 연결된 미디어사물로 상기 수정된 미션 데이터에 미션을 수행하도록 상기 수정된 미션 데이터를 전송하는 것을 특징으로 하는
미션을 수행하기 위한 시스템. According to claim 1,
The user device is
Interrupting the mission to modify the mission, modifying the mission data, and transmitting the modified mission data to perform the mission on the modified mission data to a connected media thing
A system to accomplish a mission.
사용자장치로부터 상호 연관된 복수의 태스크를 포함하는 미션에 대한 미션 데이터를 수신하면, 수신된 미션 데이터를 기초로 미션을 수행하는
미디어사물. In a media thing for performing a mission,
When receiving mission data for a mission including a plurality of interrelated tasks from the user device, performing a mission based on the received mission data
media stuff.
상기 미션 데이터는
미션의 상태를 나타내며, 미션의 각 상태에서의 미션에 참여한 복수의 미디어사물 각각의 태스크에 대한 설명을 포함하는 노드와,
상태 전이를 위해 요구되는 입력 혹은 출력을 나타내는 링크
를 포함하는 미션 다이어그램으로 표현되는 것
을 특징으로 하는
미디어사물.7. The method of claim 6,
The mission data is
A node indicating the state of the mission and including a description of each task of a plurality of media things participating in the mission in each state of the mission;
A link representing the input or output required for a state transition.
What is expressed as a mission diagram containing
characterized by
media stuff.
상기 미션 데이터는
마크업 언어 형식에 따라
상기 미션의 상태를 나타내며 각 상태를 식별하기 위한 식별자를 나타내는 식별자 속성을 포함하는 적어도 하나의 상태 요소를 포함하며,
상기 상태 요소는 자신의 자식 요소로
상기 미션에 참여한 복수의 미디어사물을 나타내며 각 상태에서 미디어사물 각각이 수행할 태스크를 설명하는 속성인 상태 설명 속성을 포함하는 사물 요소,
입력되는 API(Application Programming Interface)를 나타내는 입력 요소,
입력 대상 미디어사물을 나타내는 입력사물 요소,
출력되는 데이터를 나타내는 출력 요소 및
출력 대상 미디어사물을 나타내는 출력사물 요소
를 포함하는 것을 특징으로 하는
미디어사물.7. The method of claim 6,
The mission data is
according to the markup language format
at least one status element indicating the status of the mission and comprising an identifier attribute representing an identifier for identifying each status;
The state element is its own child element.
a thing element indicating a plurality of media things participating in the mission and including a state description attribute, which is an attribute that describes a task to be performed by each media thing in each state;
an input element representing an application programming interface (API) being input;
an input thing element representing the input target media thing;
an output element representing the data being output; and
The output thing element representing the output target media thing
characterized in that it comprises
media stuff.
상기 미디어사물은
상기 미션 데이터의 각 상태의 태스크가 종료되거나,
모든 상태의 태스크가 종료되는 경우,
상기 사용자장치에 태스크 종료를 알리는 것을 특징으로 하는
미션을 수행하기 위한 미디어사물. 7. The method of claim 6,
The media thing is
The task of each state of the mission data is terminated, or
When all status tasks are terminated,
Characterized in that notifying the end of the task to the user device
Media things to accomplish a mission.
사용자장치가 상호 연관된 복수의 태스크를 포함하는 미션을 수행하기 위한 적어도 하나의 미디어사물을 선택하는 단계;
상기 사용자장치가 상기 선택된 미디어사물 중 상기 미션에 참여하는 참여 미디어사물을 연결하는 단계;
상기 사용자장치가 적어도 하나의 상태를 포함하며 각 상태에서 참여 미디어사물의 태스크를 정의하는 미션 데이터를 생성하는 단계;
상기 사용자장치가 상기 미션 데이터를 상기 참여 미디어사물로 전송하는 단계; 및
상기 참여 미디어사물이 상기 미션 데이터에 따라 상기 미션을 수행하는 단계;
를 포함하는 것을 특징으로 하는
미션을 수행하기 위한 방법. In a method for performing a mission,
selecting, by the user device, at least one media thing for performing a mission including a plurality of interrelated tasks;
connecting, by the user device, a participating media thing participating in the mission among the selected media things;
generating, by the user device, mission data including at least one state and defining a task of a participating media thing in each state;
transmitting, by the user device, the mission data to the participating media thing; and
performing, by the participating media thing, the mission according to the mission data;
characterized in that it comprises
How to accomplish the mission.
상기 참여 미디어사물 각각이 상기 미션 데이터에 기록된 어느 하나의 태스크를 완료할 때마다, 완료 후의 상태 정보를 사용자장치 및 연결된 다른 참여 미디어사물에 전송하는 단계;
를 더 포함하는 것을 특징으로 하는
미션을 수행하기 위한 방법. 11. The method of claim 10,
each time the participating media things complete any one task recorded in the mission data, transmitting status information after completion to the user device and other connected participating media things;
characterized in that it further comprises
How to accomplish the mission.
상기 미션의 모든 태스크가 완료되면, 마지막 태스크를 수행한 참여 미디어사물은 연결된 다른 참여 미디어사물 및 사용자장치에 미션 완료를 알리는 상태 정보를 전달하는 단계;
를 더 포함하는 것을 특징으로 하는
미션을 수행하기 위한 방법. 11. The method of claim 10,
When all tasks of the mission are completed, the participating media thing that performed the last task transmits status information notifying the completion of the mission to other participating media things and user devices connected thereto;
characterized in that it further comprises
How to accomplish the mission.
상기 사용자장치가 상기 어느 하나의 미디어사물을 대체하는 대체 미디어사물을 선택하는 단계;
상기 사용자장치가 상기 대체 미디어사물에 따라 태스크를 수정함으로써 상기 미션 데이터를 수정하는 단계; 및
상기 사용자장치가 상기 미션의 나머지 태스크를 수행하도록 상기 수정된 미션 데이터를 상기 대체 미디어사물을 비롯한 나머지 참여 미디어사물로 전송하는 단계;
를 더 포함하는 것을 특징으로 하는
미션을 수행하기 위한 방법. 11. The method of claim 10, further comprising: notifying the user device and other participating media things to which one of the participating media things is connected to release the connection to give up a given task;
selecting, by the user device, an alternative media thing to replace the one media thing;
modifying, by the user device, the mission data by modifying a task according to the replacement media thing; and
transmitting, by the user device, the modified mission data to the remaining participating media things including the replacement media things so that the user device performs the remaining tasks of the mission;
characterized in that it further comprises
How to accomplish the mission.
상기 미션 데이터를 수정하는 단계는
상기 사용자장치가
미디어사물이 태스크가 완료되었음을 보고한 경우, 완료된 태스크를 제외한 나머지 태스크에 대한 미션 데이터를 수정하는 것을 특징으로 하는
미션을 수행하기 위한 방법. 14. The method of claim 13,
The step of modifying the mission data is
the user device
When the media thing reports that the task has been completed, it is characterized in that the mission data for the remaining tasks is modified except for the completed task.
How to accomplish the mission.
상기 사용자장치가 미션을 수정하기 위해 미션을 중단시키는 단계;
상기 사용자장치가 미션 데이터를 수정하는 단계; 및
상기 사용자장치가 연결된 미디어사물로 상기 수정된 미션 데이터에 미션을 수행하도록 상기 수정된 미션 데이터를 전송하는 단계;
를 더 포함하는 것을 특징으로 하는
미션을 수행하기 위한 방법. 11. The method of claim 10,
stopping, by the user device, the mission to modify the mission;
modifying, by the user device, mission data; and
transmitting the modified mission data to a media thing connected to the user device to perform a mission on the modified mission data;
characterized in that it further comprises
How to accomplish the mission.
상기 미션을 수행하는 단계는
상기 미디어사물이 상기 미션 데이터에 따라 주어진 태스크를 개별적으로 완료하는 단계;
를 포함하는 것을 특징으로 하는
미션을 수행하기 위한 방법. 11. The method of claim 10,
The step of performing the mission is
the media thing individually completing a given task according to the mission data;
characterized in that it comprises
How to accomplish the mission.
상기 미션을 수행하는 단계는
관리서버가 상기 참여 미디어사물을 연결한 상태에서 상기 미션 데이터를 기초로 상기 미션 수행 및 완료를 관리하는 단계
를 포함하는 것을 특징으로 하는
미션을 수행하기 위한 방법. 11. The method of claim 10,
The step of performing the mission is
managing the mission performance and completion based on the mission data in a state in which the management server connects the participating media things
characterized in that it comprises
How to accomplish the mission.
상기 사용자장치가 상기 미션 데이터를 상기 참여 미디어사물로 전송하는 단계는
상기 사용자장치가 직접 혹은 관리서버를 통해 상기 참여 미디어사물로 상기 미션 데이터를 브로드캐스트 또는 멀티캐스트 방식으로 전송하는 단계;
를 포함하는 것을 특징으로 하는
미션을 수행하기 위한 방법. 11. The method of claim 10,
The step of the user device transmitting the mission data to the participating media thing
transmitting, by the user device, the mission data to the participating media things directly or through a management server in a broadcast or multicast manner;
characterized in that it comprises
How to accomplish the mission.
상기 사용자장치가 상기 미션 데이터를 상기 참여 미디어사물로 전송하는 단계는
상기 사용자장치가 상기 미션 데이터를 스토리지에 저장하는 단계;
상기 참여 미디어사물이 상기 미션 데이터가 저장된 스토리지로부터 상기 저장된 미션 데이터를 수신하는 단계;
를 포함하는 것을 특징으로 하는
미션을 수행하기 위한 방법. 11. The method of claim 10,
The step of the user device transmitting the mission data to the participating media thing
storing, by the user device, the mission data in a storage;
receiving, by the participating media thing, the stored mission data from a storage in which the mission data is stored;
characterized in that it comprises
How to accomplish the mission.
상기 참여 미디어사물을 연결하는 단계는
상기 참여 미디어사물로 이루어진 애드혹 네트워크를 구성하는 것을 특징으로 하는
미션을 수행하기 위한 방법. 11. The method of claim 10,
The step of connecting the participating media things is
Comprising an ad hoc network composed of the participating media things
How to accomplish the mission.
상기 참여 미디어사물을 연결하는 단계는
상기 관리서버에
상기 참여 미디어사물 전체가 연결되는 것을 특징으로 하는
미션을 수행하기 위한 방법. 11. The method of claim 10,
The step of connecting the participating media things is
to the management server
characterized in that all of the participating media objects are connected
How to accomplish the mission.
상기 미션 데이터는
미션의 상태를 나타내며, 미션의 각 상태에서의 미션에 참여한 복수의 미디어사물 각각의 태스크에 대한 설명을 포함하는 노드와,
상태 전이를 위해 요구되는 입력 혹은 출력을 나타내는 링크
를 포함하는 미션 다이어그램으로 표현되는 것
을 특징으로 하는
미션을 수행하기 위한 방법. 11. The method of claim 10,
The mission data is
A node indicating the state of the mission and including a description of each task of a plurality of media things participating in the mission in each state of the mission;
A link representing the input or output required for a state transition.
What is expressed as a mission diagram containing
characterized by
How to accomplish the mission.
상기 미션 데이터는
마크업 언어 형식에 따라
상기 미션의 상태를 나타내며 각 상태를 식별하기 위한 식별자를 나타내는 식별자 속성을 포함하는 적어도 하나의 상태 요소를 포함하며,
상기 상태 요소는 자신의 자식 요소로
상기 참여 미디어사물을 나타내며 각 상태에서 참여 미디어사물 각각이 수행할 태스크를 설명하는 속성인 상태 설명 속성을 포함하는 사물 요소,
입력되는 API(Application Programming Interface)를 나타내는 입력 요소,
입력 대상 미디어사물을 나타내는 입력사물 요소,
출력되는 데이터를 나타내는 출력 요소 및
출력 대상 미디어사물을 나타내는 출력사물 요소
를 포함하는 것을 특징으로 하는
미션을 수행하기 위한 방법. 11. The method of claim 10,
The mission data is
according to the markup language format
at least one status element indicating the status of the mission and comprising an identifier attribute representing an identifier for identifying each status;
The state element is its own child element.
a thing element representing the participating media thing and including a state description attribute, which is an attribute that describes a task to be performed by each participating media thing in each state;
an input element representing an application programming interface (API) being input;
an input thing element representing the input target media thing;
an output element representing the data being output; and
The output thing element representing the output target media thing
characterized in that it comprises
How to accomplish the mission.
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020200130438A KR102472893B1 (en) | 2020-10-08 | 2020-10-08 | A system for performing the mission of Media Things (MThings) using a mission diagram in the Internet of Media Things (IoMT), a method therefor, and a computer-readable recording medium in which a program that performs this method is recorded |
| KR1020220159176A KR20220164457A (en) | 2020-10-08 | 2022-11-24 | A system for performing the mission of Media Things (MThings) using a mission diagram in the Internet of Media Things (IoMT), a method therefor, and a computer-readable recording medium in which a program that performs this method is recorded |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020200130438A KR102472893B1 (en) | 2020-10-08 | 2020-10-08 | A system for performing the mission of Media Things (MThings) using a mission diagram in the Internet of Media Things (IoMT), a method therefor, and a computer-readable recording medium in which a program that performs this method is recorded |
Related Child Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020220159176A Division KR20220164457A (en) | 2020-10-08 | 2022-11-24 | A system for performing the mission of Media Things (MThings) using a mission diagram in the Internet of Media Things (IoMT), a method therefor, and a computer-readable recording medium in which a program that performs this method is recorded |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20220047026A true KR20220047026A (en) | 2022-04-15 |
| KR102472893B1 KR102472893B1 (en) | 2022-11-30 |
Family
ID=81212260
Family Applications (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020200130438A KR102472893B1 (en) | 2020-10-08 | 2020-10-08 | A system for performing the mission of Media Things (MThings) using a mission diagram in the Internet of Media Things (IoMT), a method therefor, and a computer-readable recording medium in which a program that performs this method is recorded |
| KR1020220159176A KR20220164457A (en) | 2020-10-08 | 2022-11-24 | A system for performing the mission of Media Things (MThings) using a mission diagram in the Internet of Media Things (IoMT), a method therefor, and a computer-readable recording medium in which a program that performs this method is recorded |
Family Applications After (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020220159176A KR20220164457A (en) | 2020-10-08 | 2022-11-24 | A system for performing the mission of Media Things (MThings) using a mission diagram in the Internet of Media Things (IoMT), a method therefor, and a computer-readable recording medium in which a program that performs this method is recorded |
Country Status (1)
| Country | Link |
|---|---|
| KR (2) | KR102472893B1 (en) |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20080064164A (en) * | 2005-10-18 | 2008-07-08 | 인터트러스트 테크놀로지즈 코포레이션 | Methods for digital rights management |
| KR20140121534A (en) * | 2013-04-05 | 2014-10-16 | 한국과학기술원 | Service providing method and system for processing information of node based on profile of node in instance hosting environment |
| KR20150106233A (en) * | 2014-03-11 | 2015-09-21 | 삼성전자주식회사 | Method and Electronic device for Performing Functions among a plurality of Devices |
| KR20160012436A (en) | 2014-07-24 | 2016-02-03 | 엘지전자 주식회사 | Wearable device |
| KR20190015456A (en) * | 2015-10-16 | 2019-02-13 | 명지대학교 산학협력단 | Media things based on media centric internet of things and method of operating the same |
-
2020
- 2020-10-08 KR KR1020200130438A patent/KR102472893B1/en active IP Right Grant
-
2022
- 2022-11-24 KR KR1020220159176A patent/KR20220164457A/en active Application Filing
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20080064164A (en) * | 2005-10-18 | 2008-07-08 | 인터트러스트 테크놀로지즈 코포레이션 | Methods for digital rights management |
| KR20140121534A (en) * | 2013-04-05 | 2014-10-16 | 한국과학기술원 | Service providing method and system for processing information of node based on profile of node in instance hosting environment |
| KR20150106233A (en) * | 2014-03-11 | 2015-09-21 | 삼성전자주식회사 | Method and Electronic device for Performing Functions among a plurality of Devices |
| KR20160012436A (en) | 2014-07-24 | 2016-02-03 | 엘지전자 주식회사 | Wearable device |
| KR20190015456A (en) * | 2015-10-16 | 2019-02-13 | 명지대학교 산학협력단 | Media things based on media centric internet of things and method of operating the same |
Also Published As
| Publication number | Publication date |
|---|---|
| KR20220164457A (en) | 2022-12-13 |
| KR102472893B1 (en) | 2022-11-30 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN109542865B (en) | Method, device, system and medium for synchronizing configuration files of distributed cluster system | |
| US8489548B2 (en) | Method, system, and device for data synchronization | |
| US20150134727A1 (en) | Cloud-based data server providing home appliance management service and method thereof | |
| CN103460203B (en) | cluster unique identifier | |
| KR101775026B1 (en) | Method and apparatus for providing pair play service | |
| CN101854343A (en) | Method for providing node information, and method and device for acquiring node information | |
| CN112838940A (en) | Network controller framework and data processing method | |
| US20080162644A1 (en) | Auto selection of connectors in a middleware framework | |
| CN112583630B (en) | Device management method, device, system, device and storage medium | |
| JP5214929B2 (en) | Method and apparatus for managing device services in home network | |
| US20140059154A1 (en) | Leader Node Appointment | |
| KR20140138360A (en) | Method and apparatus for managing wireless docking network | |
| CN112131014B (en) | Decision engine system and business processing method thereof | |
| KR102472893B1 (en) | A system for performing the mission of Media Things (MThings) using a mission diagram in the Internet of Media Things (IoMT), a method therefor, and a computer-readable recording medium in which a program that performs this method is recorded | |
| CN114172821B (en) | Service state synchronization method and device and server | |
| KR101800745B1 (en) | Method and apparatus for connecting between devices | |
| CN115996187A (en) | Routing information processing method and device, routing information interaction system and routing equipment | |
| CN111464395B (en) | Method and device for creating blockchain and readable storage medium | |
| US11343750B2 (en) | Method for the identification of a connected object in a network infrastructure | |
| CN111193765B (en) | Device connection method, device, computer device and computer-readable storage medium | |
| KR20180065053A (en) | Server for distributed network and method of consensus thereof | |
| KR102077093B1 (en) | Device and method to share image received from user terminal with other user terminals | |
| KR102444435B1 (en) | A system for selecting Media Things (MThings) for performing a mission by using service descriptions in the Internet of Media Things (IoMT), a method therefor, and a computer-readable recording medium in which a program that performs this method is recorded | |
| KR100765788B1 (en) | Method for exchange service controlling device, network device capable of performing the method, and storage medium thereof | |
| CN113259265B (en) | Message processing method and device, electronic equipment and storage medium |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| E902 | Notification of reason for refusal | ||
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant |