KR20210056272A - Optimization for network data analytic device - Google Patents

Optimization for network data analytic device Download PDF

Info

Publication number
KR20210056272A
KR20210056272A KR1020200148515A KR20200148515A KR20210056272A KR 20210056272 A KR20210056272 A KR 20210056272A KR 1020200148515 A KR1020200148515 A KR 1020200148515A KR 20200148515 A KR20200148515 A KR 20200148515A KR 20210056272 A KR20210056272 A KR 20210056272A
Authority
KR
South Korea
Prior art keywords
network data
analysis
function device
network
information
Prior art date
Application number
KR1020200148515A
Other languages
Korean (ko)
Other versions
KR102441775B1 (en
Inventor
이수환
신명기
이승익
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to US17/092,888 priority Critical patent/US11188785B2/en
Publication of KR20210056272A publication Critical patent/KR20210056272A/en
Application granted granted Critical
Publication of KR102441775B1 publication Critical patent/KR102441775B1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/08Configuration management of networks or network elements
    • H04L41/0803Configuration setting
    • H04L41/0823Configuration setting characterised by the purposes of a change of settings, e.g. optimising configuration for enhancing reliability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/14Network analysis or design
    • H04L41/145Network analysis or design involving simulating, designing, planning or modelling of a network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W24/00Supervisory, monitoring or testing arrangements
    • H04W24/02Arrangements for optimising operational condition

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Crystals, And After-Treatments Of Crystals (AREA)
  • Measurement Of Radiation (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

An optimization method for a network data analysis function device is disclosed. The optimization method allows the network data analysis function device to collect network data according to an analysis request of network data received from a consumer network function device and provide analysis information, which is an analysis result for the network data, to a consumer network function device. The network data analysis function device can receive a feedback about the analysis information from the consumer network function device and adjust the analysis method of the network data based on the feedback.

Description

네트워크 데이터 분석 기능 장치의 최적화 방법 {OPTIMIZATION FOR NETWORK DATA ANALYTIC DEVICE}Optimization method of network data analysis function device {OPTIMIZATION FOR NETWORK DATA ANALYTIC DEVICE}

본 발명은 네트워크 데이터 분석 기능 장치의 최적화 방법에 관한 것이다.The present invention relates to a method for optimizing a network data analysis function device.

최근에 다양한 서비스와 저지연의 네트워크를 제공하면서 네트워크 운용의 복잡성이 증가하고 있다. 예를 들어, 네트워크는 슬라이스를 지원해야 하고, 버티컬 서비스를 지원해야 하며, 다양한 서비스의 유연한 조합이 요구된다. 이러한 네트워크의 복잡도가 증가하면서, 기존의 사람이 네트워크를 운용하는 것은 한계가 존재한다.Recently, while providing various services and low-latency networks, the complexity of network operation is increasing. For example, the network must support slices, vertical services, and flexible combinations of various services are required. As the complexity of such a network increases, there is a limit to the existing humans operating the network.

그래서, 네트워크에서 발생하는 네트워크 데이터를 분석하는 별도의 네트워크 데이터 분석 기능 장치가 제안되었다. 복잡한 네트워크에서 네트워크 데이터는 빅데이터와 같은 형태로 발생되나, 네트워크 데이터를 효율적으로 분석하고 보다 품질이 좋은 분석 정보를 도출하는 방법이 필요하다.Thus, a separate network data analysis function device for analyzing network data generated in a network has been proposed. In a complex network, network data is generated in the same form as big data, but there is a need for a method to efficiently analyze network data and derive better quality analysis information.

본 발명은 네트워크 데이터의 분석 정보를 소비하는 네트워크 기능 장치의 피드백에 기초하여 네트워크 데이터의 분석을 수행하는 네트워크 데이터 분석 기능 장치를 최적화하는 방법을 제공한다.The present invention provides a method of optimizing a network data analysis function device that analyzes network data based on feedback from a network function device that consumes analysis information of network data.

본 발명은 네트워크 데이터 분석 기능 장치가 네트워크 데이터의 분석 정보를 수행한 것에 대해 평가하고, 평가한 결과에 기초하여 네트워크 데이터를 분석할 때의 분석 방법을 변경함으로써 네트워크 데이터 분석 기능 장치의 성능을 향상시키는 방법을 제공한다.The present invention evaluates that the network data analysis function device performs analysis information on network data, and improves the performance of the network data analysis function device by changing an analysis method when analyzing network data based on the evaluation result. Provides a way.

본 발명의 일실시예에 따른 네트워크 데이터 분석 기능 장치의 최적화 방법은 네트워크 데이터의 분석 정보를 사용하고자 하는 컨슈머 네트워크 기능 장치로부터 네트워크 데이터의 분석 요청 메시지를 수신하는 단계; 제1 프로바이더 네트워크 기능 장치로부터 상기 분석 요청 메시지에 기초하여 네트워크 분석을 위한 제1 네트워크 데이터를 수집하는 단계; 네트워크 데이터를 분석하는 방법에 기초하여 상기 수집한 네트워크 데이터를 분석함으로써 네트워크 데이터에 대한 분석 정보를 생성하는 단계; 상기 네트워크 데이터의 분석 정보를 포함하는 분석 응답 메시지를 컨슈머 네트워크 기능 장치에 제공하는 단계; 상기 컨슈머 네트워크 기능 장치로부터 상기 네트워크 데이터의 분석 정보에 대한 피드백을 수신하는 단계; 상기 네트워크 데이터의 분석 정보를 평가하기 위해 제2 프로바이더 네트워크 기능 장치로부터 제2 네트워크 데이터를 수집하는 단계; 상기 수신한 피드백 및 제2 네트워크 데이터 중 적어도 하나에 기초하여 상기 네트워크 데이터 분석 기능 장치가 수행하는 네트워크 데이터의 분석 방법을 변경하는 단계를 포함할 수 있다.According to an embodiment of the present invention, a method for optimizing a network data analysis function device includes: receiving a network data analysis request message from a consumer network function device that intends to use the analysis information of the network data; Collecting first network data for network analysis based on the analysis request message from a first provider network function device; Generating analysis information on network data by analyzing the collected network data based on a method of analyzing network data; Providing an analysis response message including analysis information of the network data to a consumer network function device; Receiving feedback on the analysis information of the network data from the consumer network function device; Collecting second network data from a second provider network function device to evaluate analysis information of the network data; And changing a method of analyzing network data performed by the device for analyzing network data based on at least one of the received feedback and second network data.

상기 분석 정보를 생성하는 단계는, 상기 네트워크 데이터의 분석 정보를 생성하기 위해, 복수의 분석 모델 중 적어도 하나의 분석 모델을 선택할 수 있다.The generating of the analysis information may include selecting at least one analysis model from among a plurality of analysis models to generate analysis information of the network data.

상기 변경하는 단계는, 상기 네트워크 데이터를 분석할 때 사용한 분석 모델을 교체하거나, 삭제하거나, 업데이트하거나, 추가 훈련하거나, 분석 모델을 추가할 수 있다.In the changing step, the analysis model used to analyze the network data may be replaced, deleted, updated, additional training, or an analysis model added.

상기 변경하는 단계는, 상기 네트워크 데이터를 분석할 때 사용한 분석 모델의 종류, 레이어의 가중치, 레이어의 개수, 레이어의 순서 중 적어도 하나를 변경하거나 또는 레이어를 교체할 수 있다.The changing may include changing at least one of a type of an analysis model used to analyze the network data, a weight of a layer, a number of layers, and an order of layers, or replacing a layer.

상기 변경하는 단계는, 상기 제1 네트워크 기능 장치로부터 수집한 제1 네트워크 데이터를 필터링하고, 상기 필터링은, 시간적 필터링, 공간적 필터링, 어플리케이션 필터링, 네트워크 필터링, 슬라이스 필터링 중 적어도 하나를 포함할 수 있다.The changing may include filtering the first network data collected from the first network function device, and the filtering may include at least one of temporal filtering, spatial filtering, application filtering, network filtering, and slice filtering.

상기 변경하는 단계는, 상기 네트워크 데이터의 분석 정보를 생성한 분석 모델을 훈련할 때 사용한 학습 데이터를 변경하거나 교체하거나, 추가하거나 또는 필터링할 수 있다.The changing may include changing, replacing, adding, or filtering the training data used when training the analysis model that generated the analysis information of the network data.

상기 변경하는 단계는, 상기 분석 모델의 학습 횟수를 증가시키거나 또는 상기 분석 모델의 종류를 변경하거나 또는, 상기 분석 모델의 종류는 유지하면서 분석 모델의 속성을 변경할 수 있다. The changing may include increasing the number of times of learning of the analysis model, changing the type of the analysis model, or changing the properties of the analysis model while maintaining the type of the analysis model.

상기 피드백은, 상기 네트워크 데이터의 분석 정보를 상기 컨슈머 네트워크 기능 장치가 사용했는지 여부, 상기 네트워크 데이터의 분석 정보를 적용했을 때 컨슈머 네트워크 기능 장치의 성능 변화에 대한 정보, 상기 네트워크 데이터의 분석 정보에 대한 만족도, 상기 네트워크 데이터의 분석 정보에 대한 사용 용도인 유즈케이스, 상기 네트워크 데이터의 사용에 대한 시간적 또는 공간적 정보 중 적어도 하나를 포함할 수 있다.The feedback includes whether the consumer network function device has used the analysis information of the network data, information on the performance change of the consumer network function device when the analysis information of the network data is applied, and the analysis information of the network data. It may include at least one of a satisfaction level, a use case that is a use purpose of the analysis information of the network data, and temporal or spatial information about the use of the network data.

상기 분석 요청 메시지를 수신하는 단계는, 상기 네트워크 데이터 분석 장치가 복수인 경우, 상기 컨슈머 네트워크 기능 장치가 네트워크 데이터 분석 장치들 중 네트워크 데이터의 분석 정보를 생성하는 적어도 하나의 네트워크 데이터 분석 장치를 선택하거나 또는 네트워크 기능 저장 장치가 선택하고, 상기 선택된 네트워크 데이터 분석 장치들 각각이 상기 분석 요청 메시지를 수신할 수 있다. Receiving the analysis request message may include, when there are a plurality of network data analysis apparatuses, the consumer network function apparatus selects at least one network data analysis apparatus for generating analysis information of network data among network data analysis apparatuses, or Alternatively, a network function storage device may select, and each of the selected network data analysis devices may receive the analysis request message.

상기 분석 방법을 변경하는 단계는, 상기 피드백 및 제2 네트워크 데이터에 기초하여 상기 제1 네트워크 데이터의 분석 정보에 대한 평가를 수행하고, 상기 제1 네트워크 데이터의 분석 정보에 대한 평가에 기초하여, 상기 네트워크 데이터의 분석 방법에 대해 변경할 수 있다.The step of changing the analysis method includes performing an evaluation on the analysis information of the first network data based on the feedback and the second network data, and based on the evaluation on the analysis information of the first network data, the You can change the analysis method of network data.

본 발명의 일실시예에 따른 네트워크 데이터 분석 기능 장치는 상기 네트워크 데이터 분석 기능 장치는 프로세서를 포함하고, 상기 프로세서는, 네트워크 데이터의 분석 정보를 사용하고자 하는 컨슈머 네트워크 기능 장치로부터 네트워크 데이터의 분석 요청 메시지를 수신하고, 제1 프로바이더 네트워크 기능 장치로부터 상기 분석 요청 메시지에 기초하여 네트워크 분석을 위한 제1 네트워크 데이터를 수집하고, 네트워크 데이터를 분석하는 방법에 기초하여 상기 수집한 네트워크 데이터를 분석함으로써 네트워크 데이터에 대한 분석 정보를 생성하고, 상기 네트워크 데이터의 분석 정보를 포함하는 분석 응답 메시지를 컨슈머 네트워크 기능 장치에 제공하고, 상기 컨슈머 네트워크 기능 장치로부터 상기 네트워크 데이터의 분석 정보에 대한 피드백을 수신하고, 상기 네트워크 데이터의 분석 정보를 평가하기 위해 제2 프로바이더 네트워크 기능 장치로부터 제2 네트워크 데이터를 수집하고, 상기 수신한 피드백 및 제2 네트워크 데이터 중 적어도 하나에 기초하여 상기 네트워크 데이터 분석 기능 장치가 수행하는 네트워크 데이터의 분석 방법을 변경할 수 있다.In the network data analysis function device according to an embodiment of the present invention, the network data analysis function device includes a processor, and the processor includes a network data analysis request message from a consumer network function device that intends to use the analysis information of the network data. Network data by receiving, and collecting first network data for network analysis based on the analysis request message from a first provider network function device, and analyzing the collected network data based on a method of analyzing network data. Generates analysis information for, and provides an analysis response message including analysis information of the network data to a consumer network function device, receives feedback on the analysis information of the network data from the consumer network function device, and receives the network data Network data performed by the network data analysis function device based on at least one of the received feedback and second network data, and collects second network data from the second provider network function device to evaluate the analysis information of the data You can change the method of analysis.

상기 프로세서는, 상기 네트워크 데이터의 분석 정보를 생성하기 위해, 복수의 분석 모델 중 적어도 하나의 분석 모델을 선택할 수 있다.The processor may select at least one analysis model from among a plurality of analysis models to generate analysis information of the network data.

상기 프로세서는, 상기 네트워크 데이터를 분석할 때 사용한 분석 모델을 교체하거나, 삭제하거나, 업데이트하거나, 추가 훈련하거나, 또는 분석 모델을 추가함으로써 네트워크 데이터의 분석 방법을 변경할 수 있다.The processor may change an analysis method of network data by replacing, deleting, updating, additional training, or adding an analysis model used to analyze the network data.

상기 프로세서는, 상기 네트워크 데이터를 분석할 때 사용한 분석 모델의 종류, 레이어의 가중치, 레이어의 개수, 레이어의 순서 중 적어도 하나를 변경하거나 또는 레이어를 교체함으로써 네트워크 데이터의 분석 방법을 변경할 수 있다.The processor may change the analysis method of network data by changing at least one of a type of an analysis model used to analyze the network data, a weight of a layer, a number of layers, and an order of layers, or by replacing layers.

상기 프로세서는, 상기 제1 네트워크 기능 장치로부터 수집한 제1 네트워크 데이터를 필터링하고, 상기 필터링은, 시간적 필터링, 공간적 필터링, 어플리케이션 필터링, 네트워크 필터링, 슬라이스 필터링 중 적어도 하나를 포함할 수 있다.The processor may filter the first network data collected from the first network function device, and the filtering may include at least one of temporal filtering, spatial filtering, application filtering, network filtering, and slice filtering.

상기 프로세서는, 상기 네트워크 데이터의 분석 정보를 생성한 분석 모델을 훈련할 때 사용한 학습 데이터를 변경하거나 교체하거나, 추가하거나 또는 필터링함으로써 네트워크 데이터의 분석 방법을 변경할 수 있다.The processor may change the method of analyzing network data by changing, replacing, adding, or filtering training data used to train the analysis model that generated the analysis information of the network data.

상기 프로세서는, 상기 분석 모델의 학습 횟수를 증가시키거나 또는 상기 분석 모델의 종류를 변경하거나 또는, 상기 분석 모델의 종류는 유지하면서 분석 모델의 속성을 변경할 수 있다.The processor may increase the number of times of learning the analysis model, change the type of the analysis model, or change the properties of the analysis model while maintaining the type of the analysis model.

상기 피드백은, 상기 네트워크 데이터의 분석 정보를 상기 컨슈머 네트워크 기능 장치가 사용했는지 여부, 상기 네트워크 데이터의 분석 정보를 적용했을 때 컨슈머 네트워크 기능 장치의 성능 변화에 대한 정보, 상기 네트워크 데이터의 분석 정보에 대한 만족도, 상기 네트워크 데이터의 분석 정보에 대한 사용 용도인 유즈케이스, 상기 네트워크 데이터의 사용에 대한 시간적 또는 공간적 정보 중 적어도 하나를 포함할 수 있다.The feedback includes whether the consumer network function device has used the analysis information of the network data, information on the performance change of the consumer network function device when the analysis information of the network data is applied, and the analysis information of the network data. It may include at least one of a satisfaction level, a use case that is a use purpose of the analysis information of the network data, and temporal or spatial information about the use of the network data.

상기 프로세서는, 상기 네트워크 데이터 분석 장치가 복수인 경우, 상기 컨슈머 네트워크 기능 장치가 네트워크 데이터 분석 장치들 중 네트워크 데이터의 분석 정보를 생성하는 적어도 하나의 네트워크 데이터 분석 장치를 선택하거나 또는 네트워크 기능 저장 장치가 선택하고, 상기 선택된 네트워크 데이터 분석 장치들 각각이 상기 분석 요청 메시지를 수신할 수 있다.The processor, when the plurality of network data analysis devices, the consumer network function device selects at least one network data analysis device for generating network data analysis information from among the network data analysis devices, or the network function storage device After selecting, each of the selected network data analysis devices may receive the analysis request message.

상기 프로세서는, 상기 피드백 및 제2 네트워크 데이터에 기초하여 상기 제1 네트워크 데이터의 분석 정보에 대한 평가를 수행하고, 상기 제1 네트워크 데이터의 분석 정보에 대한 평가에 기초하여, 상기 네트워크 데이터의 분석 방법에 대해 변경할 수 있다.The processor, based on the feedback and the second network data, performs an evaluation of the analysis information of the first network data, based on the evaluation of the analysis information of the first network data, the method of analyzing the network data Can be changed for.

본 발명의 일실시예에 따르면, 네트워크 데이터의 분석 정보를 소비하는 네트워크 기능 장치의 피드백에 기초하여 네트워크 데이터의 분석을 수행하는 네트워크 데이터 분석 기능 장치를 최적화할 수 있다.According to an embodiment of the present invention, a network data analysis function device that analyzes network data may be optimized based on feedback from a network function device that consumes analysis information of network data.

본 발명의 일실시예에 따르면, 네트워크 데이터 분석 기능 장치가 네트워크 데이터의 분석 정보를 수행한 것에 대해 평가하고, 평가한 결과에 기초하여 네트워크 데이터를 분석할 때의 분석 방법을 변경함으로써 네트워크 데이터 분석 기능 장치의 성능이 향상될 수 있다.According to an embodiment of the present invention, a network data analysis function is performed by changing the analysis method when the network data analysis function device evaluates the analysis information of the network data and analyzes the network data based on the evaluation result. The performance of the device can be improved.

도 1은 본 발명의 일실시예에 따른 네트워크 데이터 분석 기능 장치의 동작을 설명하기 위한 도면이다.
도 2는 본 발명의 일실시예에 따른 네트워크 데이터 분석 기능 장치의 최적화 방법을 도시한 플로우차트이다.
도 3은 본 발명의 일실시예에 따른 네트워크 데이터 분석 기능 장치의 분석 정보에 대해 피드백을 수신한 이후의 처리 과정을 설명하는 도면이다.
도 4는 본 발명의 일실시예에 따른 네트워크 데이터 분석 기능 장치의 처리 과정을 도시한 도면이다.
도 5는 본 발명의 일실시예에 따른 네트워크 데이터 분석 기능 장치가 복수인 경우에 처리하는 과정을 도시한 도면이다.
1 is a diagram illustrating an operation of a device for analyzing network data according to an embodiment of the present invention.
2 is a flowchart illustrating a method of optimizing a device for analyzing network data according to an embodiment of the present invention.
3 is a diagram illustrating a processing procedure after receiving a feedback on analysis information of a network data analysis function device according to an embodiment of the present invention.
4 is a diagram illustrating a processing procedure of a device for analyzing network data according to an embodiment of the present invention.
5 is a diagram illustrating a process of processing when there are a plurality of network data analysis function devices according to an embodiment of the present invention.

이하, 실시예들을 첨부된 도면을 참조하여 상세하게 설명한다. 그러나, 특허출원의 범위가 이러한 실시예들에 의해 제한되거나 한정되는 것은 아니다. 각 도면에 제시된 동일한 참조 부호는 동일한 부재를 나타낸다.Hereinafter, embodiments will be described in detail with reference to the accompanying drawings. However, the scope of the patent application is not limited or limited by these embodiments. The same reference numerals shown in each drawing indicate the same members.

아래 설명하는 실시예들에는 다양한 변경이 가해질 수 있다. 아래 설명하는 실시예들은 실시 형태에 대해 한정하려는 것이 아니며, 이들에 대한 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.Various changes may be made to the embodiments described below. The embodiments described below are not intended to be limited to the embodiments, and should be understood to include all changes, equivalents, and substitutes thereto.

제1 또는 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 이런 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 이해되어야 한다. 예를 들어, 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소는 제1 구성요소로도 명명될 수 있다.Terms such as first or second may be used to describe various components, but these terms should be understood only for the purpose of distinguishing one component from other components. For example, a first component may be referred to as a second component, and similarly, a second component may be referred to as a first component.

실시예에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 실시예를 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수 개의 표현을 포함한다. 본 명세서에서, "포함하다" 또는 "가지다" 등의 용어는 명세서 상에 기재된 특징, 숫자, 단계, 동작, 구성 요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.The terms used in the examples are used only to describe specific embodiments, and are not intended to limit the embodiments. Singular expressions include plural expressions unless the context clearly indicates otherwise. In the present specification, terms such as "comprise" or "have" are intended to designate the presence of features, numbers, steps, actions, components, parts, or combinations thereof described in the specification, but one or more other features. It is to be understood that the presence or addition of elements or numbers, steps, actions, components, parts, or combinations thereof does not preclude in advance.

다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 실시예가 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.Unless otherwise defined, all terms used herein, including technical or scientific terms, have the same meaning as commonly understood by one of ordinary skill in the art to which the embodiment belongs. Terms as defined in a commonly used dictionary should be interpreted as having a meaning consistent with the meaning in the context of the related technology, and should not be interpreted as an ideal or excessively formal meaning unless explicitly defined in the present application. Does not.

또한, 첨부 도면을 참조하여 설명함에 있어, 도면 부호에 관계없이 동일한 구성 요소는 동일한 참조 부호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다. 실시예를 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 실시예의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다.In addition, in the description with reference to the accompanying drawings, the same reference numerals are assigned to the same components regardless of the reference numerals, and redundant descriptions thereof will be omitted. In describing the embodiments, when it is determined that a detailed description of a related known technology may unnecessarily obscure the subject matter of the embodiment, a detailed description thereof will be omitted.

이하, 본 발명의 실시예를 첨부된 도면을 참조하여 상세하게 설명한다. Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 일실시예에 따른 네트워크 데이터 분석 기능 장치의 동작을 설명하기 위한 도면이다.1 is a diagram illustrating an operation of a device for analyzing network data according to an embodiment of the present invention.

도 1을 참고하면, 네트워크 데이터 분석 기능 장치(Network Data Analytics Function: NWDAF)(101)는 컨슈머 네트워크 기능 장치(Consumer Network Function)(102)와 적어도 하나의 프로바이더 네트워크 기능 장치(Provider Network Function)에 대응하는 제1 프로바이더 네트워크 기능 장치(103-1)와 제2 프로바이더 네트워크 기능 장치(103-2), 그리고 네트워크 저장 기능 장치 (Network Repository Function) (104)와 연결될 수 있다. 또한, 도 1에 도시되지 않았지만, 네트워크 데이터 분석 기능 장치(101)는 OAM 기능 장치(Operations, administration and management)(105)와 연결될 수 있다.Referring to FIG. 1, a network data analysis function device (Network Data Analytics Function: NWDAF) 101 is provided in a consumer network function device 102 and at least one provider network function device. The corresponding first provider network function device 103-1, the second provider network function device 103-2, and a network storage function device 104 may be connected. In addition, although not shown in FIG. 1, the network data analysis function device 101 may be connected to an OAM function device (Operations, administration and management) 105.

네트워크 데이터 분석 기능 장치(101)는 컨슈머 네트워크 기능 장치(102)로부터 네트워크 데이터에 대한 분석 요청(또는 분석 구독)을 수신할 수 있다. 컨슈머 네트워크 기능 장치(102)는 네트워크 데이터에 대한 분석 정보를 사용하고자 하는 네트워크 기능 장치를 의미한다. 그러면, 네트워크 데이터 분석 기능 장치(101)는 네트워크 데이터에 대한 분석 요청에 기초하여, 분석을 위한 제1 네트워크 데이터를 제1 프로바이더 네트워크 기능 장치(103-1)로부터 수집할 수 있다. The network data analysis function device 101 may receive an analysis request (or analysis subscription) for network data from the consumer network function device 102. The consumer network function device 102 refers to a network function device that intends to use analysis information on network data. Then, the network data analysis function device 101 may collect the first network data for analysis from the first provider network function device 103-1 based on the analysis request for the network data.

네트워크 데이터 분석 기능 장치(101)는 제1 프로바이더 네트워크 기능 장치(103-1)로부터 수집한 제1 네트워크 데이터를 분석할 수 있다. 제1 프로바이더 네트워크 기능 장치(103-1)는 네트워크 데이터의 분석 정보를 생성하기 위해 필요한 제1 네트워크 데이터를 제공하는 네트워크 기능 장치를 의미할 수 있다. 네트워크 데이터 분석 기능 장치(101)는 제1 네트워크 데이터에 대한 분석 요청에 응답하여 제1 프로바이더 네트워크 기능 장치(103-1)로부터 수집한 제1 네트워크 데이터의 분석 정보를 컨슈머 네트워크 기능 장치(102)에 제공할 수 있다. 그리고, 컨슈머 네트워크 기능 장치(102)는 제1 네트워크 데이터의 분석 정보에 대한 피드백을 네트워크 데이터 분석 기능 장치(101)에 제공할 수 있다.The network data analysis function device 101 may analyze the first network data collected from the first provider network function device 103-1. The first provider network function device 103-1 may mean a network function device that provides first network data necessary to generate analysis information of network data. The network data analysis function device 101 transmits the analysis information of the first network data collected from the first provider network function device 103-1 in response to the analysis request for the first network data to the consumer network function device 102. Can be provided to. In addition, the consumer network function device 102 may provide feedback on the analysis information of the first network data to the network data analysis function device 101.

네트워크 데이터 분석 기능 장치(101)는 제1 네트워크 데이터의 분석 정보에 대한 평가를 위해 제2 프로바이더 네트워크 기능 장치(103-2)로부터 제2 네트워크 데이터를 수집할 수 있다. 제2 프로바이더 네트워크 기능 장치(103-2)는 네트워크 데이터의 분석 정보를 평가하기 위해 필요한 제2 네트워크 데이터를 제공하는 네트워크 기능 장치를 의미할 수 있다.The network data analysis function device 101 may collect second network data from the second provider network function device 103-2 in order to evaluate the analysis information of the first network data. The second provider network function device 103-2 may mean a network function device that provides second network data necessary for evaluating analysis information of the network data.

이 때, 제1 프로바이더 네트워크 기능 장치(103-1)는 제2 프로바이더 네트워크 기능 장치(103-2)와 동일하거나 또는 다를 수 있다. 또한, 제1 네트워크 데이터는 제2 네트워크 데이터와 동일하거나 또는 다를 수 있다.In this case, the first provider network function device 103-1 may be the same as or different from the second provider network function device 103-2. Also, the first network data may be the same as or different from the second network data.

네트워크 데이터 분석 기능 장치(101)는 제2 네트워크 데이터를 이용하여 제1 네트워크 데이터의 분석 정보에 대해 평가를 수행할 수 있다. 그리고, 네트워크 데이터 분석 기능 장치(101)는 제1 네트워크 데이터의 분석 정보에 대한 평가에 기초하여 제1 네트워크 데이터에 대한 분석 방법을 변경할 수 있다. The network data analysis function device 101 may evaluate analysis information of the first network data by using the second network data. In addition, the network data analysis function device 101 may change the analysis method for the first network data based on the evaluation of the analysis information of the first network data.

네트워크 데이터 분석 기능 장치(101)의 동작에 대해서는 도 2 내지 도 5에서 보다 구체적으로 설명하기로 한다.The operation of the network data analysis function device 101 will be described in more detail with reference to FIGS. 2 to 5.

도 2는 본 발명의 일실시예에 따른 네트워크 데이터 분석 기능 장치의 최적화 방법을 도시한 플로우차트이다.2 is a flowchart illustrating a method of optimizing a device for analyzing network data according to an embodiment of the present invention.

단계(i)에서, 컨슈머 네트워크 기능 장치(102)는 네트워크 데이터 분석 기능 장치(101)에 네트워크 데이터의 분석 요청을 전달할 수 있다. 이 때, 컨슈머 네트워크 기능 장치(102)는 네트워크 데이터의 분석 요청 메시지(ex. Nnwdaf_AnalyticsInfo_Request) 또는 네트워크 데이터의 분석 구독 메시지(ex. Nnwdaf_AnalyticsSubscription_Subscribe)를 네트워크 데이터 분석 기능 장치(101)에 전달할 수 있다. In step (i), the consumer network function device 102 may transmit a network data analysis request to the network data analysis function device 101. At this time, the consumer network function device 102 may transmit a network data analysis request message (ex.Nnwdaf_AnalyticsInfo_Request) or a network data analysis subscription message (ex.Nnwdaf_AnalyticsSubscription_Subscribe) to the network data analysis function device 101.

네트워크 데이터의 분석 요청 메시지 또는 네트워크 데이터의 분석 구독 메시지는 컨슈머 네트워크 기능 장치의 타입(type)(ex. AMF 또는 SMF 등) 및 유즈케이스 인디케이션을 포함할 수 있다. 또는, 네트워크 데이터의 분석 요청 메시지 또는 네트워크 데이터의 분석 구독 메시지는 분석 필터 정보(analytics filter information)를 더 포함할 수도 있다.The network data analysis request message or the network data analysis subscription message may include a type of a consumer network functional device (eg, AMF or SMF) and a use case indication. Alternatively, the network data analysis request message or the network data analysis subscription message may further include analysis filter information.

여기서, 타입은 컨슈머 네트워크 기능 장치가 어떤 종류의 네트워크 기능 장치인지를 구분하기 위한 정보이다. 그리고, 유즈케이스 인디케이션은 복수의 유즈케이스들을 나타내는 정보이다. 일례로, 유즈케이스 인디케이션은 컨슈머 네트워크 기능 장치(102)가 요청한 네트워크 데이터의 분석(analytics)에 대한 목적(purpose)을 식별한다.Here, the type is information for discriminating what kind of network function device the consumer network function device is. And, the use case indication is information representing a plurality of use cases. As an example, the use case indication identifies a purpose for analysis of network data requested by the consumer network function device 102.

단계(ii)에서, 네트워크 데이터 분석 기능 장치(101)는 프로바이더 네트워크 기능 장치(103) 또는 OAM 장치(105)로부터 제1 네트워크 데이터를 수집할 수 있다. 그리고, 네트워크 데이터 분석 기능 장치(101)는 컨슈머 네트워크 기능 장치(102)로부터 수신한 네트워크 데이터의 분석 요청에 따라 수집한 제1 네트워크 데이터를 분석을 수행하여 제1 네트워크 데이터에 대한 분석 정보를 생성할 수 있다.In step (ii), the network data analysis function device 101 may collect the first network data from the provider network function device 103 or the OAM device 105. In addition, the network data analysis function device 101 analyzes the first network data collected according to the analysis request of the network data received from the consumer network function device 102 to generate analysis information on the first network data. I can.

이 때, 네트워크 데이터 분석 기능 장치(101)는 제1 네트워크 데이터에 대한 분석 정보를 생성하는 분석 모델을 식별할 수 있다. 일례로, 네트워크 데이터 분석 기능 장치(101)는 분석 모델을 스스로 생성하거나 또는 다른 엔티티에서 생성한 분석 모델을 불러올 수 있다. In this case, the network data analysis function device 101 may identify an analysis model that generates analysis information for the first network data. For example, the network data analysis function device 101 may generate an analysis model by itself or may call an analysis model generated by another entity.

일례로, 분석 모델은 분석 리포팅의 타겟(Target of Analytics Reporting), 분석 리포팅 파라미터(Analytics Reporting Parameters), 분석 필터 정보(Analytics Filter Information), 네트워크 기능 장치의 타입 (NF Type) 또는 유즈케이스 인디케이션 중 적어도 하나에 기초하여 결정될 수 있다. For example, the analysis model is a target of analytics reporting, analytics reporting parameters, analytics filter information, network function device type (NF Type), or use case indication. It can be determined based on at least one.

이 때, 분석 리포팅의 타겟은 사용자 단말 또는 사용자 단말의 그룹을 의미할 수 있다. 그리고, 분석 리포팅 파라미터는, 네트워크 데이터 분석 기능 장치(101)가 수집한 제1 네트워크 데이터에 대한 타임스탬프, 제1 네트워크 데이터에 대한 수집 주기 등을 포함할 수 있다. 분석 필터 정보는 사용자 단말의 위치, 사용자 단말이 사용하는 슬라이스 정보 등을 포함할 수 있다. 그리고, 네트워크 기능 장치의 타입은 컨슈머 네트워크 기능 장치(102)의 종류를 구분하기 위한 정보를 의미할 수 있다. 또한, 유즈케이스 인디케이션은 복수의 유즈케이스들을 나타내는 정보를 의미할 수 있다.In this case, the target of the analysis reporting may mean a user terminal or a group of user terminals. In addition, the analysis reporting parameter may include a timestamp for the first network data collected by the network data analysis function device 101, a collection period for the first network data, and the like. The analysis filter information may include the location of the user terminal and slice information used by the user terminal. In addition, the type of the network function device may mean information for classifying the type of the consumer network function device 102. Also, the use case indication may mean information representing a plurality of use cases.

단계(iii)에서, 네트워크 데이터 분석 기능 장치(101)가 특정 유즈케이스 또는 컨슈머 네트워크 기능 장치(102)에 대한 분석 모델을 평가하기 위해, 컨슈머 네트워크 기능 장치(102)로부터 피드백을 획득할 필요가 있다. 그러면, 네트워크 데이터 분석 기능 장치(101)는 컨슈머 네트워크 기능 장치(102)로부터 수신한 네트워크 데이터의 분석 요청에 응답하여 제1 네트워크 데이터의 분석 정보를 컨슈머 네트워크 기능 장치(102)에 제공할 수 있다. In step (iii), in order for the network data analysis function device 101 to evaluate a specific use case or an analysis model for the consumer network function device 102, it is necessary to obtain feedback from the consumer network function device 102. . Then, the network data analysis function device 101 may provide analysis information of the first network data to the consumer network function device 102 in response to a request for analysis of the network data received from the consumer network function device 102.

이 때, 네트워크 데이터의 분석 요청에 대한 응답은 네트워크 데이터의 분석 요청에 대한 응답 메시지(ex. Nnwdaf_AnalyticsInfo_Request_response) 또는 네트워크 데이터의 분석 구독에 대한 통지 메시지 (Nnwdaf_AnalyticsSubscription_Notify)를 포함할 수 있다. At this time, the response to the network data analysis request may include a response message (ex.Nnwdaf_AnalyticsInfo_Request_response) for the analysis request of network data or a notification message for the analysis subscription of network data (Nnwdaf_AnalyticsSubscription_Notify).

네트워크 데이터의 분석 요청에 대한 응답 메시지 또는 네트워크 데이터의 분석 구독에 대한 통지 메시지는 피드백 인디케이션(Feedback Indication) 또는 만료 시간(Expiry Time)을 포함할 수 있다. 피드백 인디케이션은 컨슈머 네트워크 기능 장치(102)로부터 제1 네트워크 데이터의 분석 정보에 대한 피드백을 수신할 필요가 있는지를 식별하는 정보이다. 그리고 만료 시간은 피드백을 획득하기 위한 만료 시간을 식별한다.The response message for the analysis request of the network data or the notification message for the analysis subscription of the network data may include a feedback indication or an expiry time. The feedback indication is information for identifying whether it is necessary to receive feedback on the analysis information of the first network data from the consumer network function device 102. And the expiration time identifies the expiration time for obtaining feedback.

단계(iv)에서, 컨슈머 네트워크 기능 장치(102)는 네트워크 데이터 분석 기능 장치(101)로부터 제1 네트워크 데이터에 대한 분석 정보를 수신할 수 있다. 그리고, 제1 네트워크 데이터에 대한 분석 정보를 포함하는 네트워크 데이터의 분석 요청에 대한 응답 메시지 또는 네트워크 데이터의 분석 구독에 대한 통지 메시지에 피드백 인디케이션이 인에이블(enable)된 경우, 컨슈머 네트워크 기능 장치(102)는 제1 네트워크 데이터의 분석 정보에 대한 피드백을 네트워크 분석 기능 장치(101)에 제공할 수 있다. 이 때, 컨슈머 네트워크 기능 장치(102)는 네트워크 데이터의 분석 정보에 대한 피드백은 피드백 메시지(ex. Nnwdaf_AnalyticsInfo_Feedback 또는 Nnwdaf_AnalyticsSubscription_Feedback)를 통해 네트워크 데이터 분석 장치(101)에 제공할 수 있다.In step (iv), the consumer network function device 102 may receive analysis information on the first network data from the network data analysis function device 101. In addition, when the feedback indication is enabled in a response message to a request for analysis of network data including analysis information on the first network data or a notification message for a subscription to analysis of network data, the consumer network function device ( 102) may provide feedback on the analysis information of the first network data to the network analysis function device 101. In this case, the consumer network function device 102 may provide the feedback on the analysis information of the network data to the network data analysis device 101 through a feedback message (ex.Nnwdaf_AnalyticsInfo_Feedback or Nnwdaf_AnalyticsSubscription_Feedback).

여기서, 피드백 메시지는 분석 정보 ID(Analytics ID), 분석 정보의 사용 여부(Analytics Usage), 컨슈머 네트워크 기능 장치의 타입 (NF Type), 유즈케이스 인디케이션(Use Case Indication), 평가값 (Evaluation value), 통지 타겟 주소(Notification Target Address) (+ 통지 상관 ID(Notification Correlation Id)), 피드백에 대한 타임스탬프 등을 포함할 수 있다. Here, the feedback message is the analysis information ID (Analytics ID), whether the analysis information is used (Analytics Usage), the type of the consumer network function device (NF Type), a use case indication, and an evaluation value. , Notification Target Address (+ Notification Correlation Id), a timestamp for feedback, and the like.

분석 정보 ID는 피드백과 관련된 분석 정보를 나타내는 정보이다. 분석 정보의 사용 여부는 컨슈머 네트워크 기능 장치(102)가 제1 네트워크 데이터에 대한 분석 정보를 사용했는지 여부를 식별하기 위한 정보이다. 분석 정보의 사용 여부는 컨슈머 네트워크 기능 장치(102)가 분석 정보에 의해 하나 또는 복수의 행동을 수행했을 때 인에이블될 수 있다. The analysis information ID is information representing analysis information related to feedback. Whether the analysis information is used is information for identifying whether the consumer network function device 102 has used analysis information for the first network data. Whether to use the analysis information may be enabled when the consumer network function device 102 performs one or more actions based on the analysis information.

컨슈머 네트워크 기능 장치의 타입은 컨슈머 네트워크 기능 장치(102)가 어떤 종류의 네트워크 기능 장치인지(ex. AMF 또는 SMF)를 식별하기 위한 정보이다. 유즈케이스 인디케이션은 제1 네트워크 데이터에 대한 분석 정보에 따라 컨슈머 네트워크 기능 장치(102)가 수행한 행동(action)의 목적(purpose)을 식별하기 위한 정보이다. 유즈케이스 인디케이션은 복수의 유즈케이스들을 나타낸다.The type of the consumer network function device is information for identifying what kind of network function device (eg, AMF or SMF) the consumer network function device 102 is. The use case indication is information for identifying a purpose of an action performed by the consumer network function device 102 according to analysis information on the first network data. The use case indication represents a plurality of use cases.

본 발명의 일실시예에 따르면, 단계(i)에서 설명한 유즈케이스 인디케이션과 단계(iv)에서 설명하는 유즈케이스 인디케이션은 다를 수 있다. 왜냐하면, 컨슈머 네트워크 기능 장치(102)는 단계(i)에서 설명되는 유즈케이스 인디케이션이 나타내는 유즈케이스에 대해 행동을 수행하지 않기 때문이다.According to an embodiment of the present invention, the use case indication described in step (i) and the use case indication described in step (iv) may be different. This is because the consumer network function device 102 does not perform an action on the use case indicated by the use case indication described in step (i).

평가값은 컨슈머 네트워크 기능 장치(102)가 네트워크 데이터 분석 기능 장치(101)로부터 획득한 제1 네트워크 데이터의 분석 정보에 대한 만족도를 나타낸다. 평가값은 컨슈머 네트워크 기능 장치(102)가 제1 네트워크 데이터의 분석 정보를 평가할 때 제공된다. The evaluation value represents the degree of satisfaction with the analysis information of the first network data obtained by the consumer network function device 102 from the network data analysis function device 101. The evaluation value is provided when the consumer network function device 102 evaluates analysis information of the first network data.

통지 타겟 주소와 통지 상관 정보는 네트워크 데이터의 분석을 구독했을 때의 정보이다. 통지 타겟 주소는 컨슈머 네트워크 기능 장치의 주소를 나타낸다. 통지 상관 ID는 구독이 적용되었을 때, 네트워크 데이터 분석 기능 장치(101)로부터의 통지들(notifications)을 컨슈머 네트워크 기능 장치(102)에 대해 상관(correlation)하기 위한 정보이다. 피드백에 대한 타임스탬프는 컨슈머 네트워크 기능 장치가 피드백을 생성한 시점을 의미한다. The notification target address and notification correlation information are information when a network data analysis is subscribed. The notification target address represents the address of the consumer network function device. The notification correlation ID is information for correlating notifications from the network data analysis function device 101 to the consumer network function device 102 when a subscription is applied. The timestamp for the feedback refers to the time point at which the consumer network function device generates the feedback.

단계(v)에서, 네트워크 데이터 분석 기능 장치(101)는 프로바이더 네트워크 기능 장치(103) 또는 OAM 장치(105)로부터 제2 네트워크 데이터를 수집할 수 있다. 제1 네트워크 데이터는 제2 네트워크 데이터와 동일하거나 또는 다를 수 있다. 단계(ii)에서 설명되는 프로바이더 네트워크 기능 장치(103)는 도 1의 제1 프로바이더 네트워크 기능 장치(103-1)에 대응할 수 있고, 단계(v)에서 설명되는 프로바이더 네트워크 기능 장치(103)는 도 1의 제2 프로바이더 네트워크 기능 장치(103-2)에 대응할 수 있다.In step (v), the network data analysis function device 101 may collect the second network data from the provider network function device 103 or the OAM device 105. The first network data may be the same as or different from the second network data. The provider network function device 103 described in step (ii) may correspond to the first provider network function device 103-1 in FIG. 1, and the provider network function device 103 described in step (v). ) May correspond to the second provider network function device 103-2 of FIG. 1.

단계(vi)에서, 네트워크 데이터 분석 기능 장치(101)는 컨슈머 네트워크 기능 장치(102)부터 획득한 피드백 및 단계(v)에서 수집한 제2 네트워크 데이터에 기초하여 제1 네트워크 데이터의 분석 정보를 평가할 수 있다. 그리고, 네트워크 데이터 분석 기능 장치(101)는 평가 결과에 기초하여 특정 유즈케이스 또는 특정 네트워크 기능 장치에 대해 제1 네트워크 데이터의 분석 정보를 생성할 때 사용한 분석 방법을 변경할 수 있다. 일례로, 네트워크 데이터 분석 기능 장치(101)는 제1 네트워크 데이터의 분석 정보를 생성할 때 이용된 분석 모델을 업데이트(예를 들면, 최적화 또는 분석 모델을 추가적으로 훈련함)할 수 있다.In step (vi), the network data analysis function device 101 evaluates the analysis information of the first network data based on the feedback obtained from the consumer network function device 102 and the second network data collected in step (v). I can. In addition, the network data analysis function device 101 may change the analysis method used when generating analysis information of the first network data for a specific use case or a specific network function device based on the evaluation result. For example, the network data analysis function device 101 may update the analysis model used when generating analysis information of the first network data (eg, optimize or additionally train the analysis model).

도 3은 본 발명의 일실시예에 따른 네트워크 데이터 분석 기능 장치의 분석 정보에 대해 피드백을 수신한 이후의 처리 과정을 설명하는 도면이다.3 is a diagram illustrating a processing procedure after receiving a feedback on analysis information of a network data analysis function device according to an embodiment of the present invention.

도 3을 참고하면, 네트워크 데이터 분석 기능 장치(101)는 컨슈머 네트워크 기능 장치(102)로부터 네트워크 데이터의 분석 요청을 수신할 수 있다. 그러면, 네트워크 데이터 분석 기능 장치(101)는 네트워크 데이터의 분석 요청에 응답하여 프로바이더 네트워크 기능 장치(103)으로부터 네트워크 데이터를 수집할 수 있다. 그리고, 네트워크 데이터 분석 기능 장치(101)는 복수의 분석 모델들(분석 모델 1-분석 모델 N)중 적어도 하나를 선택하여, 수집한 네트워크 데이터를 선택한 분석 모델로 분석할 수 있다. 네트워크 데이터 분석 기능 장치(101)는 선택한 분석 모델을 이용하여 네트워크 데이터를 분석함으로써 네트워크 데이터의 분석 정보를 생성할 수 있다.Referring to FIG. 3, the network data analysis function device 101 may receive a network data analysis request from the consumer network function device 102. Then, the network data analysis function device 101 may collect network data from the provider network function device 103 in response to the network data analysis request. In addition, the network data analysis function device 101 may select at least one of a plurality of analysis models (analysis model 1-analysis model N) and analyze the collected network data as the selected analysis model. The network data analysis function device 101 may generate analysis information of the network data by analyzing the network data using the selected analysis model.

본 발명의 일실시예에 따르면, 네트워크 데이터 분석 기능 장치(101)는 복수의 분석 모델들이 사용될 수 있다. 그리고, 분석 모델들 각각은 컨슈머 네트워크 기능 장치(102)의 특정 사용에 대해 최적화될 수 있다. 네트워크 데이터 분석 기능 장치(101)는 복수의 분석 모델들 중 컨슈머 네트워크 기능 장치(101)가 전송한 네트워크 데이터의 분석 요청에 포함된 정보(예를 들면, 분석 리포팅의 타겟, 분석 필터 등)에 기초하여 적절한 분석 모델을 선택할 수 있다.According to an embodiment of the present invention, the network data analysis function device 101 may use a plurality of analysis models. And, each of the analysis models can be optimized for a specific use of the consumer network functional device 102. The network data analysis function device 101 is based on information (e.g., analysis reporting target, analysis filter, etc.) included in the analysis request of the network data transmitted by the consumer network function device 101 among a plurality of analysis models. Thus, you can select an appropriate analysis model.

복수의 분석 모델들은 동일한 분석 정보에 대해 서로 다른 유즈케이스를 지원하기 위해 필수적일 수 있다. 일례로, 컨슈머 네트워크 기능 장치(102)가 전달한 동일한 분석 ID에 대한 분석 모델에 대한 요구 사항은 각각의 유즈케이스마다 서로 다를 수 있다. 예를 들어, 특정 유즈케이스에서는, 정확도 레벨보다 분석 정보를 생성할 때 발생되는 처리 지연이 상대적으로 더 중요할 수 있고, 다른 유즈케이스에서는 처리 지연보다 정확도 레벨이 상대적으로 더 중요할 수 있기 때문이다.Multiple analysis models may be essential to support different use cases for the same analysis information. As an example, requirements for an analysis model for the same analysis ID delivered by the consumer network function device 102 may be different for each use case. For example, in certain use cases, the processing delay that occurs when generating analysis information may be more important than the accuracy level, and in other use cases, the accuracy level may be relatively more important than the processing delay. .

그래서, 본 발명의 일실시예에 따르면, 복수의 분석 모델들이 지원될 수 있다. 네트워크 데이터 분석 기능 장치(101)는 같은 분석 ID로 라벨링된 분석 정보에 대한 유즈케이스에 대해 최적화된 분석 모델로부터 적절한 분석 정보를 제공할 수 있다.So, according to an embodiment of the present invention, a plurality of analysis models may be supported. The network data analysis function device 101 may provide appropriate analysis information from an analysis model optimized for a use case for analysis information labeled with the same analysis ID.

본 발명의 일실시예에 따르면, 네트워크 데이터 분석 기능 장치(101)는 컨슈머 네트워크 기능 장치(102)로부터 전달된 네트워크 데이터의 분석 요청 메시지 또는 네트워크 데이터의 분석 구독 메시지에 포함된 정보들(예를 들면, 분석 리포팅의 타겟, 분석 리포팅 파라미터들, 분석 필터 정보, 네트워크 기능 장치의 타입, 유즈케이스 인디케이션 등)을 카테고리화할 수 있다. 네트워크 데이터 분석 기능 장치(101)는 카테고리화된 결과에 따라 네트워크 데이터의 분석 요청의 유즈케이스를 인식할 수 있다.According to an embodiment of the present invention, the network data analysis function device 101 includes information included in a network data analysis request message or a network data analysis subscription message transmitted from the consumer network function device 102 (for example, , Analysis reporting target, analysis reporting parameters, analysis filter information, network function device type, use case indication, etc.) can be categorized. The network data analysis function device 101 may recognize a use case of a network data analysis request according to a categorized result.

또한, 본 발명의 일실시예에 따르면, 컨슈머 네트워크 기능 장치(102)로부터 수신한 피드백 뿐만 아니라 제2 네트워크 기능 장치들(103-2) 또는 OAM 장치(105)로부터 수집한 네트워크 데이터를 이용하여 네트워크 데이터 분석 기능 장치(101)가 생성한 분석 정보에 대해 평가가 수행될 수 있다.In addition, according to an embodiment of the present invention, a network using the network data collected from the second network function devices 103-2 or the OAM device 105 as well as the feedback received from the consumer network function device 102 An evaluation may be performed on the analysis information generated by the data analysis function device 101.

그리고, 본 발명의 일실시예에 따르면, 평가에 기초하여 분석 정보를 생성한 분석 모델에 대해 조절 (예를 들면, 최적화 또는 추가적인 모델 훈련)이 수행될 수 있다. 이에 따라, 네트워크 데이터 분석 기능 장치(101)는 컨슈머 네트워크 기능 장치(102)에서의 특정 사용에 대해 보다 적절한 분석 정보를 제공할 수 있다.Further, according to an embodiment of the present invention, adjustment (eg, optimization or additional model training) may be performed on an analysis model that has generated analysis information based on the evaluation. Accordingly, the network data analysis function device 101 can provide more appropriate analysis information for a specific use in the consumer network function device 102.

일례로, 네트워크 데이터의 분석 정보는 (i) 네트워크 슬라이스 인스턴스 레벨에서 슬라이스 로드 레벨 정보(slice load level information), (ii) 관찰된 서비스 경험(observed service experience) (ex. 네트워크 슬라이스에 대한 서비스 경험, 어플리케이션에 대한 서비스 경험)의 통계 정보 또는 예측 정보, (iii) 네트워크 기능 장치의 로드 정보(ex. 네트워크 기능 장치에 대한 로드 통계 정보 또는 로드 예측 정보), (iv) 네트워크 성능 정보 (ex. 네트워크 성능에 대한 통계 정보 또는 예측 정보), (v) 사용자 단말과 관련된 정보 (ex. 사용자 단말의 이동성 정보(통계 정보, 예측 정보), 통신 패턴, 유저 플레인 트래픽 등의 사용자 단말의 통신 정보(통계 정보, 예측 정보), 사용자 단말의 예측된 행동, 사용자 단말의 비이상적인 행동 등), (vi) 사용자 데이터의 혼잡도 정보(통계 정보, 예측 정보), (vii) QoS의 지속성 정보 (통계 정보, 예측 정보) 등을 나타내는 분석 ID 등으로 식별될 수 있다. 위에서 언급한 분석 정보를 위해 네트워크 데이터 분석 기능 장치(101)가 수집할 네트워크 데이터의 포맷과 내용은 다를 수 있으며, 분석 정보의 내용도 다를 수 있다.As an example, analysis information of network data includes (i) slice load level information at the network slice instance level, (ii) observed service experience (ex.service experience for network slices, and Service experience for the application) statistical information or prediction information, (iii) load information of the network function device (ex. load statistics information or load prediction information about the network function device), (iv) network performance information (ex. network performance information) Statistical information or predicted information), (v) information related to the user terminal (e.g., user terminal mobility information (statistical information, predictive information), communication pattern, and user terminal communication information (statistical information, Prediction information), predicted behavior of the user terminal, abnormal behavior of the user terminal, etc.), (vi) congestion information of user data (statistical information, prediction information), (vii) persistence information of QoS (statistical information, prediction information) It can be identified by an analysis ID or the like indicating the like. For the aforementioned analysis information, the format and content of the network data to be collected by the network data analysis function device 101 may be different, and the content of the analysis information may be different.

그러면, 네트워크 데이터 분석 기능 장치(101)는 네트워크 데이터의 분석 정보를 컨슈머 네트워크 기능 장치(102)에 제공할 수 있다. 이 때, 컨슈머 네트워크 기능 장치(102)는 네트워크 데이터의 분석 정보에 대한 피드백을 네트워크 데이터 분석 기능 장치(101)에 제공할 수 있다. 본 발명의 일실시예에 따르면, 피드백 인디케이션이 인에이블되는 경우에 컨슈머 네트워크 기능 장치(102)가 네트워크 데이터의 분석 정보에 대한 피드백을 네트워크 데이터 분석 기능 장치(101)에 제공할 수 있다. 본 발명의 다른 실시예에 따르면, 피드백 인디케이션과 무관하게, 컨슈머 네트워크 기능 장치(102)가 네트워크 데이터 분석 기능 장치(101)로부터 네트워크 데이터의 분석 정보를 수신하면 언제든지 분석 정보에 대한 피드백을 네트워크 데이터 분석 기능 장치(101)에 제공할 수 있다.Then, the network data analysis function device 101 may provide analysis information of the network data to the consumer network function device 102. In this case, the consumer network function device 102 may provide feedback on the analysis information of the network data to the network data analysis function device 101. According to an embodiment of the present invention, when the feedback indication is enabled, the consumer network function device 102 may provide feedback on the analysis information of the network data to the network data analysis function device 101. According to another embodiment of the present invention, regardless of the feedback indication, whenever the consumer network function device 102 receives the analysis information of the network data from the network data analysis function device 101, the feedback on the analysis information is transmitted to the network data. It can be provided to the analysis function device 101.

네트워크 데이터 분석 기능 장치(101)는 컨슈머 네트워크 기능 장치(102)가 제공한 피드백에 기초하여, 네트워크 데이터의 분석 방법을 변경할 수 있다. 본 발명의 일실시예에 따르면, 네트워크 데이터 분석 기능 장치(101)는 머신 러닝을 통해 훈련된 복수의 분석 모델들 중 적어도 하나의 분석 모델을 선택하여 네트워크 데이터를 분석할 수 있다. 이 때, 분석 모델은 뉴럴 네트워크일 수 있으며, CNN, DNN, SVM 등 다양한 종류의 뉴럴 네트워크가 사용될 수 있다. 이 때, 분석 모델은 네트워크 데이터 기능 장치(101)에 의해 훈련되거나 또는 네트워크 데이터 기능 장치(101)와 다른 엔티티에 의해 훈련될 수도 있다.The network data analysis function device 101 may change the analysis method of network data based on the feedback provided by the consumer network function device 102. According to an embodiment of the present invention, the network data analysis function device 101 may analyze network data by selecting at least one analysis model from among a plurality of analysis models trained through machine learning. In this case, the analysis model may be a neural network, and various types of neural networks such as CNN, DNN, and SVM may be used. In this case, the analysis model may be trained by the network data function device 101 or may be trained by an entity other than the network data function device 101.

본 발명의 일실시예에 따르면, 네트워크 데이터의 분석 방법을 변경하는 것은 네트워크 데이터 분석 기능 장치(101)가 네트워크 데이터를 분석하기 위해 사용한 분석 모델을 추가적으로 훈련하는 것을 의미할 수 있다. 이 때, 네트워크 데이터의 피드백에서 평가값이 낮을수록 분석 모델을 추가 훈련하는 횟수가 증가할 수 있다.According to an embodiment of the present invention, changing the analysis method of network data may mean additionally training an analysis model used by the network data analysis function device 101 to analyze network data. In this case, as the evaluation value in the feedback of the network data decreases, the number of additional training of the analysis model may increase.

본 발명의 일실시예에 따르면, 네트워크 데이터의 분석 방법을 변경하는 것은 네트워크 데이터 분석 기능 장치(101)가 네트워크 데이터를 분석하기 위해 사용한 분석 모델을 다른 분석 모델로 변경하거나, 이후에 네트워크 데이터를 분석하기 위해 분석 모델을 추가하거나, 또는 선택한 복수의 분석 모델들 중 적어도 일부 또는 전부를 교체할 수 있다. 이에 따라, 네트워크 데이터를 분석할 때 사용한 분석 모델을 향상시킬 수 있으며, 분석 방법이 업데이트될 수 있다.According to an embodiment of the present invention, changing the analysis method of network data is to change the analysis model used by the network data analysis function device 101 to analyze network data to another analysis model, or to analyze network data later. To do this, an analysis model may be added, or at least some or all of the selected plurality of analysis models may be replaced. Accordingly, an analysis model used when analyzing network data can be improved, and an analysis method can be updated.

본 발명의 일실시예에 따르면, 네트워크 데이터의 분석 방법을 변경하는 것은 네트워크 데이터를 분석할 때 사용한 분석 모델의 종류를 변경하거나(ex. CNN

Figure pat00001
DNN), 분석 모델의 종류는 유지하면서 분석 모델을 구성하는 레이어의 개수를 증가, 레이어를 교체하거나 또는 레이어별 특징값을 변경하는 것을 의미할 수 있다.According to an embodiment of the present invention, changing the analysis method of network data changes the type of analysis model used when analyzing the network data (ex. CNN)
Figure pat00001
DNN), while maintaining the type of the analysis model, it may mean increasing the number of layers constituting the analysis model, replacing the layers, or changing a feature value for each layer.

본 발명의 일실시예에 따르면, 네트워크 데이터의 분석 방법을 변경하는 것은 네트워크 데이터를 제공하는 프로바이더 네트워크 기능 장치(103)를 변경하거나 또는 교체하거나 또는 추가하는 것을 의미할 수 있다. 또는 본 발명의 일실시예에 따르면, 네트워크 데이터의 분석 방법을 변경하는 것은 프로바이더 네트워크 기능 장치(103)로부터 수집한 네트워크 데이터를 전부 그대로 사용하지 않고 필터링(ex, 시간적 필터링-특정 시간에 획득하거나 또는 특정 시간에 생성된 네트워크 데이터만 이용하여 분석하거나, 공간적 필터링-특정 위치에서 획득하거나 또는 특정 위치에서 생성된 네트워크 데이터만 이용하여 분석하는 것)이 적용된 네트워크 데이터를 이용하는 것을 의미할 수 있다. 또는, 본 발명의 일실시예에 따르면, 네트워크 데이터의 분석 방법을 변경하는 것은 프로바이더 네트워크 기능 장치(103)로부터 수집한 네트워크 데이터의 종류, 속성(포맷, 메타데이터, 크기 등), 수량 등을 변경하는 것을 의미할 수 있다.According to an embodiment of the present invention, changing the method of analyzing network data may mean changing, replacing, or adding a provider network function device 103 that provides network data. Alternatively, according to an embodiment of the present invention, changing the analysis method of network data does not use all of the network data collected from the provider network function device 103 as it is, but filtering (ex, temporal filtering-acquired at a specific time or Alternatively, it may mean using network data to which only network data generated at a specific time is used for analysis, or spatial filtering-acquired at a specific location or analyzed using only network data generated at a specific location) is applied. Alternatively, according to an embodiment of the present invention, changing the analysis method of network data includes the type, attribute (format, metadata, size, etc.), quantity, etc. of the network data collected from the provider network function device 103. It can mean changing.

본 발명의 일실시예에 따르면, 네트워크 데이터의 분석 방법을 변경하는 것은 분석 모델을 훈련할 때 이용한 학습 데이터를 변경/교체하는 것을 의미할 수 있다. 또는, 본 발명의 다른 실시예에 따르면, 네트워크 데이터의 분석 방법을 변경하는 것은 분석 모델을 훈련할 때 이용한 학습 데이터를 추가하거나 또는 필터링(예: 시간적 필터링 (사용자 단말이 특정 시간 대에 생성된 학습 데이터만 이용), 공간적 필터링 (특정 장소에서 생성된 학습 데이터만 이용), 어플리케이션 필터링 (사용자 단말에서 사용되는 특정 어플리케이션에서 생성된 학습 데이터만 이용), 네트워크 필터링 (사용자 단말이 특정 네트워크나 셀에 접속했을 때 생성된 학습 데이터 등), 슬라이스 필터링 (사용자 단말에 특정 슬라이스가 할당되었을 때 생성된 학습 데이터)할 수 있다According to an embodiment of the present invention, changing the analysis method of network data may mean changing/replacement of training data used when training an analysis model. Alternatively, according to another embodiment of the present invention, changing the analysis method of network data is to add or filter the training data used when training the analysis model (e.g., temporal filtering (learning generated by the user terminal at a specific time)) Data only), spatial filtering (only learning data generated in a specific place is used), application filtering (only learning data generated in a specific application used in the user terminal is used), network filtering (user terminal accesses a specific network or cell The training data generated when you do it, etc.), and slice filtering (learning data generated when a specific slice is assigned to the user terminal) can be performed.

본 발명의 일실시예에 따르면, 네트워크 데이터 분석 기능 장치(101)가 컨슈머 네트워크 기능 장치(102)로부터 네트워크 데이터의 분석 요청이 아닌 분석 구독을 수신한 경우, 네트워크 데이터의 분석 방법을 변경하는 것은 이전 주기에서의 네트워크 데이터에 대한 수집 방법을 다음 주기에서 변경하는 것을 의미할 수 있다. 여기서, 네트워크 데이터에 대한 수집 방법은 시간적 범위, 공간적 범위 또는 수집 소스를 변경하는 것을 포함할 수 있다.According to an embodiment of the present invention, when the network data analysis function device 101 receives an analysis subscription rather than a network data analysis request from the consumer network function device 102, changing the analysis method of the network data is It may mean that the collection method for network data in the cycle is changed in the next cycle. Here, the method of collecting network data may include changing a temporal range, a spatial range, or a collection source.

분석 정보에 대한 피드백은, 분석 모델을 훈련하는 엔티티에게 제공될 수 있다. 예를 들어, 네트워크 데이터 분석 기능 장치(101)가 스스로 분석 모델을 훈련하는 경우, 컨슈머 네트워크 기능 장치(102)가 제공한 분석 정보에 대한 피드백이 네트워크 데이터 분석 기능 장치(101)에 제공될 수 있다. 다만, 분석 모델을 네트워크 데이터 분석 기능 장치(101)와 연결된 네트워크 저장 기능 장치(104)에서 훈련하는 경우, 경우, 컨슈머 네트워크 기능 장치(102)가 제공한 분석 정보에 대한 피드백은 네트워크 저장 기능 장치(104)에 제공될 수 있다.Feedback on the analysis information may be provided to an entity training the analysis model. For example, when the network data analysis function device 101 trains an analysis model by itself, feedback on the analysis information provided by the consumer network function device 102 may be provided to the network data analysis function device 101. . However, in the case of training the analysis model in the network storage function device 104 connected to the network data analysis function device 101, the feedback on the analysis information provided by the consumer network function device 102 is the network storage function device ( 104).

일례로, 피드백은, 네트워크 데이터의 분석 정보를 컨슈머 네트워크 기능 장치(102)가 사용했는지 여부, 네트워크 데이터의 분석 정보를 적용했을 때 컨슈머 네트워크 기능 장치의 성능 변화에 대한 정보(예를 들면, 처리 속도, 정확도 등의 변경 여부 또는 변경 정도), 네트워크 데이터의 분석 정보에 대한 만족도, 네트워크 데이터의 분석 정보에 대한 사용 용도, 네트워크 데이터의 사용에 대한 시간적 또는 공간적 정보 중 적어도 하나를 포함할 수 있다.As an example, the feedback is information on whether the consumer network function device 102 has used the analysis information of the network data, and information on the performance change of the consumer network function device when the analysis information of the network data is applied (e.g., processing speed , Whether or not the accuracy is changed or the degree of change), satisfaction with the analysis information of the network data, the purpose of using the analysis information of the network data, and temporal or spatial information about the use of the network data.

네트워크 데이터 분석 기능 장치(101)는 네트워크 데이터를 분석하여 네트워크 데이터의 분석 정보를 생성할 수 있다. 이 때, 네트워크 데이터 분석 기능 장치(101)는 네트워크 데이터의 분석 정보를 자체적으로 평가하지 않고 그대로 컨슈머 네트워크 기능 장치(102)에 제공하거나 또는 자체적으로 평가한 후, 일정 수준 이상의 품질을 나타내는 경우에만 컨슈머 네트워크 기능 장치(102)에 제공할 수 있다. 만약에 네트워크 데이터 분석 기능 장치(101)가 생성한 분석 정보가 일정 수준 이상의 품질을 나타내지 못하는 경우, 네트워크 데이터 분석 기능 장치(101)는 컨슈머 네트워크 기능 장치(102)에 분석 정보를 제공하기 전에 위에서 언급한 네트워크 데이터의 분석 방법을 변경할 수 있다.The network data analysis function device 101 may analyze network data to generate analysis information of network data. At this time, the network data analysis function device 101 does not self-evaluate the analysis information of the network data, but provides it to the consumer network function device 102 as it is, or evaluates itself, and only when the quality is higher than a certain level. It can be provided to the network function device 102. If the analysis information generated by the network data analysis function device 101 does not exhibit a certain level or higher quality, the network data analysis function device 101 is mentioned above before providing the analysis information to the consumer network function device 102. You can change the analysis method of one network data.

도 4는 본 발명의 일실시예에 따른 네트워크 데이터 분석 기능 장치의 처리 과정을 도시한 도면이다.4 is a diagram illustrating a processing procedure of a device for analyzing network data according to an embodiment of the present invention.

도 4를 참고하면, 단계(1)에서 컨슈머 네트워크 기능 장치(102)는 네트워크 데이터 분석 기능 장치(101)에 네트워크 데이터의 분석 요청을 전달할 수 있다. 단계(2)에서, 네트워크 데이터 분석 기능 장치(101)는 제1 프로바이더 네트워크 기능 장치(103-1)로부터 제1 네트워크 데이터를 수집할 수 있다. 여기서, 제1 네트워크 데이터는 네트워크 데이터의 분석을 위해 사용되는 네트워크 데이터를 의미할 수 있다.Referring to FIG. 4, in step (1), the consumer network function device 102 may transmit a network data analysis request to the network data analysis function device 101. In step (2), the network data analysis function device 101 may collect the first network data from the first provider network function device 103-1. Here, the first network data may mean network data used for analysis of network data.

단계(3)에서, 네트워크 데이터 분석 기능 장치(101)는 제1 프로바이더 네트워크 기능 장치(103-1)로부터 수집한 제1 네트워크 데이터를 분석하여, 제1 네트워크 데이터의 분석 정보를 생성할 수 있다. 그런 후에, 네트워크 데이터 분석 기능 장치(101)는 제1 네트워크 데이터의 분석 정보를 네트워크 데이터의 분석 요청을 전달한 컨슈머 네트워크 기능 장치(102)에 제공할 수 있다.In step (3), the network data analysis function device 101 may analyze the first network data collected from the first provider network function device 103-1 to generate analysis information of the first network data. . Thereafter, the network data analysis function device 101 may provide analysis information of the first network data to the consumer network function device 102 that has transmitted the network data analysis request.

단계(4)에서, 컨슈머 네트워크 기능 장치(102)는 네트워크 데이터 분석 기능 장치(101)로부터 획득한 분석 정보를 이용할 수 있다. 그리고, 컨슈머 네트워크 기능 장치(102)는 분석 정보에 대한 피드백을 네트워크 데이터 기능 장치(101)에 제공할 수 있다.In step (4), the consumer network function device 102 may use the analysis information obtained from the network data analysis function device 101. In addition, the consumer network function device 102 may provide feedback on the analysis information to the network data function device 101.

단계(5)에서, 네트워크 데이터 분석 기능 장치(101)는 제2 프로바이더 네트워크 기능 장치(103-2)로부터 제2 네트워크 데이터를 수집할 수 있다. 제2 네트워크 데이터는 제1 네트워크 데이터의 분석 정보를 평가하기 위한 네트워크 데이터를 의미할 수 있다. In step (5), the network data analysis function device 101 may collect second network data from the second provider network function device 103-2. The second network data may mean network data for evaluating analysis information of the first network data.

단계(6)에서, 네트워크 데이터 분석 기능 장치(101)는 컨슈머 네트워크 기능 장치(102)로부터 획득한 피드백 및 제2 네트워크 데이터를 이용하여 제1 네트워크 데이터의 분석 정보를 스스로 평가할 수 있다. 그리고, 네트워크 데이터 분석 기능 장치(101)는 제1 네트워크 데이터의 분석 정보에 대해 스스로 평가한 평가 정보에 기초하여 제1 네트워크 데이터의 분석 방법을 변경할 수 있다.In step (6), the network data analysis function device 101 may self-evaluate the analysis information of the first network data using the feedback and the second network data obtained from the consumer network function device 102. In addition, the network data analysis function device 101 may change the analysis method of the first network data based on the evaluation information self-evaluated for the analysis information of the first network data.

도 5는 본 발명의 일실시예에 따른 네트워크 데이터 분석 기능 장치가 복수인 경우에 처리하는 과정을 도시한 도면이다.5 is a diagram illustrating a process of processing when there are a plurality of network data analysis function devices according to an embodiment of the present invention.

도 5를 참고하면, 네트워크 데이터 분석 기능 장치가 N개 존재하는 경우가 설명된다. 컨슈머 네트워크 기능 장치(102)는 네트워크 데이터의 분석 정보를 사용하기 위해, N개의 네트워크 데이터 분석 기능 장치들(101-1~101-N) 중 어느 하나를 선택하여 네트워크 데이터의 분석 요청을 전달할 수 있다. 이 때, 컨슈머 네트워크 기능 장치(102)는 네트워크 저장 기능 장치(104)로부터 N개의 네트워크 데이터 분석 기능 장치들(101-1~101-N)에 대한 리스트를 획득하고, 네트워크 데이터의 분석 요청에 적합한 적어도 하나의 네트워크 데이터 분석 기능 장치를 선택할 수 있다. 또는, 컨슈머 네트워크 기능 장치(102)는 네트워크 저장 기능 장치(104)에 네트워크 데이터의 분석 요청에 적합한 네트워크 데이터 분석 장치를 문의하여 확인할 수 있다. 네트워크 저장 기능 장치(104)는 네트워크 기능 장치에 대한 주소들과 프로파일을 저장할 수 있다. 여기서, 네트워크 기능 장치의 프로파일은 네트워크 기능 장치의 종류와 타입을 의미할 수 있다.Referring to FIG. 5, a case in which there are N network data analysis function devices will be described. The consumer network function device 102 may select any one of the N network data analysis function devices 101-1 to 101-N to transmit a network data analysis request in order to use the analysis information of the network data. . At this time, the consumer network function device 102 obtains a list of N network data analysis function devices 101-1 to 101-N from the network storage function device 104, and is suitable for requesting analysis of network data. At least one network data analysis function device may be selected. Alternatively, the consumer network function device 102 may contact the network storage function device 104 for a network data analysis device suitable for a network data analysis request to confirm. The network storage function device 104 may store addresses and profiles for the network function device. Here, the profile of the network function device may mean the type and type of the network function device.

또는, 컨슈머 네트워크 기능 장치(102)는 네트워크 데이터의 분석별로 서로 다른 네트워크 데이터 분석 장치에 네트워크 데이터의 분석을 요청할 수 있다. 예를 들어, 네트워크 데이터의 분석 정보 A를 요청할 때, 컨슈머 네트워크 기능 장치(102)는 네트워크 데이터 분석 기능 장치(101-1)에 네트워크 데이터의 분석 정보를 요청할 수 있다. 그리고, 네트워크 데이터의 분석 정보 B를 요청할 때, 컨슈머 네트워크 기능 장치(102)는 네트워크 데이터 분석 기능 장치(101-2)에 네트워크 데이터의 분석 정보를 요청할 수 있다.Alternatively, the consumer network function device 102 may request network data analysis from different network data analysis devices for each analysis of the network data. For example, when requesting the analysis information A of network data, the consumer network function device 102 may request the network data analysis function device 101-1 for analysis information of the network data. In addition, when requesting the analysis information B of the network data, the consumer network function device 102 may request the network data analysis function device 101-2 for analysis information of the network data.

일례로, 컨슈머 네트워크 기능 장치(102)는 동일한 네트워크 데이터의 분석 정보를 요청하기 위해 복수의 네트워크 데이터 기능 분석 장치에 동일한 분석 정보를 요청할 수 있다. 그리고, 컨슈머 네트워크 기능 장치(102)는 복수의 네트워크 데이터 기능 분석 장치들로부터 모두 분석 정보를 획득한 후, 분석 정보를 사용할 수 있다. 또는, 그리고, 컨슈머 네트워크 기능 장치(102)는 복수의 네트워크 데이터 기능 분석 장치들로부터 모두 분석 정보를 획득한 후, 특정 기준(정확도, 선호도, 시간, 공간, 어플리케이션)에 따라 적어도 하나의 분석 정보를 선택하여 이용할 수 있다.As an example, the consumer network function device 102 may request the same analysis information from a plurality of network data function analysis devices in order to request analysis information of the same network data. In addition, the consumer network function device 102 may use the analysis information after acquiring all analysis information from the plurality of network data function analysis devices. Alternatively, the consumer network function device 102 obtains all analysis information from a plurality of network data function analysis devices, and then provides at least one analysis information according to a specific criterion (accuracy, preference, time, space, application). You can choose and use it.

한편, 본 발명에 따른 방법은 컴퓨터에서 실행될 수 있는 프로그램으로 작성되어 마그네틱 저장매체, 광학적 판독매체, 디지털 저장매체 등 다양한 기록 매체로도 구현될 수 있다.Meanwhile, the method according to the present invention is written as a program that can be executed on a computer and can be implemented in various recording media, such as a magnetic storage medium, an optical reading medium, and a digital storage medium.

본 명세서에 설명된 각종 기술들의 구현들은 디지털 전자 회로조직으로, 또는 컴퓨터 하드웨어, 펌웨어, 소프트웨어로, 또는 그들의 조합들로 구현될 수 있다. 구현들은 데이터 처리 기능 장치, 예를 들어 프로그램가능 프로세서, 컴퓨터, 또는 다수의 컴퓨터들의 동작에 의한 처리를 위해, 또는 이 동작을 제어하기 위해, 컴퓨터 프로그램 제품, 즉 정보 캐리어, 예를 들어 기계 판독가능 저장 기능 장치(컴퓨터 판독가능 매체) 또는 전파 신호에서 유형적으로 구체화된 컴퓨터 프로그램으로서 구현될 수 있다. 상술한 컴퓨터 프로그램(들)과 같은 컴퓨터 프로그램은 컴파일된 또는 인터프리트된 언어들을 포함하는 임의의 형태의 프로그래밍 언어로 기록될 수 있고, 독립형 프로그램으로서 또는 모듈, 구성요소, 서브루틴, 또는 컴퓨팅 환경에서의 사용에 적절한 다른 유닛으로서 포함하는 임의의 형태로 전개될 수 있다. 컴퓨터 프로그램은 하나의 사이트에서 하나의 컴퓨터 또는 다수의 컴퓨터들 상에서 처리되도록 또는 다수의 사이트들에 걸쳐 분배되고 통신 네트워크에 의해 상호 연결되도록 전개될 수 있다.Implementations of the various techniques described herein may be implemented in digital electronic circuitry, or in computer hardware, firmware, software, or combinations thereof. Implementations may include a data processing functional device, e.g., a programmable processor, a computer, or a computer program product, i.e. an information carrier, e.g., machine-readable It may be implemented as a storage function device (computer readable medium) or a computer program tangibly embodied in a radio signal. Computer programs such as the above-described computer program(s) may be recorded in any type of programming language, including compiled or interpreted languages, and as a standalone program or in a module, component, subroutine, or computing environment. It can be deployed in any form, including as other units suitable for the use of. A computer program can be deployed to be processed on one computer or multiple computers at one site or to be distributed across multiple sites and interconnected by a communication network.

컴퓨터 프로그램의 처리에 적절한 프로세서들은 예로서, 범용 및 특수 목적 마이크로프로세서들 둘 다, 및 임의의 종류의 디지털 컴퓨터의 임의의 하나 이상의 프로세서들을 포함한다. 일반적으로, 프로세서는 판독 전용 메모리 또는 랜덤 액세스 메모리 또는 둘 다로부터 명령어들 및 데이터를 수신할 것이다. 컴퓨터의 요소들은 명령어들을 실행하는 적어도 하나의 프로세서 및 명령어들 및 데이터를 저장하는 하나 이상의 메모리 기능 장치들을 포함할 수 있다. 일반적으로, 컴퓨터는 데이터를 저장하는 하나 이상의 대량 저장 기능 장치들, 예를 들어 자기, 자기-광 디스크들, 또는 광 디스크들을 포함할 수 있거나, 이것들로부터 데이터를 수신하거나 이것들에 데이터를 송신하거나 또는 양쪽으로 되도록 결합될 수도 있다. 컴퓨터 프로그램 명령어들 및 데이터를 구체화하는데 적절한 정보 캐리어들은 예로서 반도체 메모리 기능 장치들, 예를 들어, 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(Magnetic Media), CD-ROM(Compact Disk Read Only Memory), DVD(Digital Video Disk)와 같은 광 기록 매체(Optical Media), 플롭티컬 디스크(Floptical Disk)와 같은 자기-광 매체(Magneto-Optical Media), 롬(ROM, Read Only Memory), 램(RAM, Random Access Memory), 플래시 메모리, EPROM(Erasable Programmable ROM), EEPROM(Electrically Erasable Programmable ROM) 등을 포함한다. 프로세서 및 메모리는 특수 목적 논리 회로조직에 의해 보충되거나, 이에 포함될 수 있다.Processors suitable for processing a computer program include, by way of example, both general and special purpose microprocessors, and any one or more processors of any kind of digital computer. In general, the processor will receive instructions and data from read-only memory or random access memory or both. The elements of the computer may include at least one processor that executes instructions and one or more memory functional devices that store instructions and data. In general, a computer may include one or more mass storage functional devices that store data, such as magnetic, magnetic-optical disks, or optical disks, or receive data from or transmit data to them, or It can also be combined so as to be both. Information carriers suitable for embodying computer program instructions and data are, for example, semiconductor memory functional devices, for example magnetic media such as hard disks, floppy disks and magnetic tapes, Compact Disk Read Only (CD-ROM). Memory), optical media such as DVD (Digital Video Disk), magnetic-optical media such as floptical disk, ROM (Read Only Memory), RAM ( RAM, Random Access Memory), flash memory, EPROM (Erasable Programmable ROM), EEPROM (Electrically Erasable Programmable ROM), and the like. The processor and memory may be supplemented by or included in a special purpose logic circuit structure.

또한, 컴퓨터 판독가능 매체는 컴퓨터에 의해 액세스될 수 있는 임의의 가용매체일 수 있고, 컴퓨터 저장매체 및 전송매체를 모두 포함할 수 있다.Further, the computer-readable medium may be any available medium that can be accessed by a computer, and may include both a computer storage medium and a transmission medium.

본 명세서는 다수의 특정한 구현물의 세부사항들을 포함하지만, 이들은 어떠한 발명이나 청구 가능한 것의 범위에 대해서도 제한적인 것으로서 이해되어서는 안되며, 오히려 특정한 발명의 특정한 실시형태에 특유할 수 있는 특징들에 대한 설명으로서 이해되어야 한다. 개별적인 실시형태의 문맥에서 본 명세서에 기술된 특정한 특징들은 단일 실시형태에서 조합하여 구현될 수도 있다. 반대로, 단일 실시형태의 문맥에서 기술한 다양한 특징들 역시 개별적으로 혹은 어떠한 적절한 하위 조합으로도 복수의 실시형태에서 구현 가능하다. 나아가, 특징들이 특정한 조합으로 동작하고 초기에 그와 같이 청구된 바와 같이 묘사될 수 있지만, 청구된 조합으로부터의 하나 이상의 특징들은 일부 경우에 그 조합으로부터 배제될 수 있으며, 그 청구된 조합은 하위 조합이나 하위 조합의 변형물로 변경될 수 있다.While this specification includes details of a number of specific implementations, these should not be construed as limiting to the scope of any invention or claimable, but rather as a description of features that may be peculiar to a particular embodiment of a particular invention. It must be understood. Certain features described herein in the context of separate embodiments may be implemented in combination in a single embodiment. Conversely, various features described in the context of a single embodiment can also be implemented in multiple embodiments individually or in any suitable sub-combination. Furthermore, although features operate in a particular combination and may be initially described as so claimed, one or more features from a claimed combination may in some cases be excluded from the combination, and the claimed combination may be a sub-combination. Or sub-combination variations.

마찬가지로, 특정한 순서로 도면에서 동작들을 묘사하고 있지만, 이는 바람직한 결과를 얻기 위하여 도시된 그 특정한 순서나 순차적인 순서대로 그러한 동작들을 수행하여야 한다거나 모든 도시된 동작들이 수행되어야 하는 것으로 이해되어서는 안 된다. 특정한 경우, 멀티태스킹과 병렬 프로세싱이 유리할 수 있다. 또한, 상술한 실시형태의 다양한 기능 장치 컴포넌트의 분리는 그러한 분리를 모든 실시형태에서 요구하는 것으로 이해되어서는 안되며, 설명한 프로그램 컴포넌트와 기능 장치들은 일반적으로 단일의 소프트웨어 제품으로 함께 통합되거나 다중 소프트웨어 제품에 패키징 될 수 있다는 점을 이해하여야 한다.Likewise, although operations are depicted in the drawings in a specific order, it should not be understood that such operations must be performed in that particular order or sequential order shown or that all illustrated operations must be performed in order to obtain a desired result. In certain cases, multitasking and parallel processing can be advantageous. In addition, the separation of the various functional device components of the above-described embodiments should not be understood as requiring such separation in all embodiments, and the program components and functional devices described are generally integrated together into a single software product or in multiple software products. It should be understood that it can be packaged.

한편, 본 명세서와 도면에 개시된 본 발명의 실시 예들은 이해를 돕기 위해 특정 예를 제시한 것에 지나지 않으며, 본 발명의 범위를 한정하고자 하는 것은 아니다. 여기에 개시된 실시 예들 이외에도 본 발명의 기술적 사상에 바탕을 둔 다른 변형 예들이 실시 가능하다는 것은, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 자명한 것이다.On the other hand, the embodiments of the present invention disclosed in the specification and drawings are merely presented specific examples to aid understanding, and are not intended to limit the scope of the present invention. It is apparent to those of ordinary skill in the art that other modified examples based on the technical idea of the present invention may be implemented in addition to the embodiments disclosed herein.

Claims (20)

네트워크 데이터 분석 기능 장치의 최적화 방법에 있어서,
네트워크 데이터의 분석 정보를 사용하고자 하는 컨슈머 네트워크 기능 장치로부터 네트워크 데이터의 분석 요청 메시지를 수신하는 단계;
제1 프로바이더 네트워크 기능 장치로부터 상기 분석 요청 메시지에 기초하여 네트워크 분석을 위한 제1 네트워크 데이터를 수집하는 단계;
네트워크 데이터를 분석하는 방법에 기초하여 상기 수집한 네트워크 데이터를 분석함으로써 네트워크 데이터에 대한 분석 정보를 생성하는 단계;
상기 네트워크 데이터의 분석 정보를 포함하는 분석 응답 메시지를 컨슈머 네트워크 기능 장치에 제공하는 단계;
상기 컨슈머 네트워크 기능 장치로부터 상기 네트워크 데이터의 분석 정보에 대한 피드백을 수신하는 단계;
상기 네트워크 데이터의 분석 정보를 평가하기 위해 제2 프로바이더 네트워크 기능 장치로부터 제2 네트워크 데이터를 수집하는 단계;
상기 수신한 피드백 및 제2 네트워크 데이터 중 적어도 하나에 기초하여 상기 네트워크 데이터 분석 기능 장치가 수행하는 네트워크 데이터의 분석 방법을 변경하는 단계
를 포함하는 네트워크 데이터 분석 기능 장치의 최적화 방법.
In the network data analysis function device optimization method,
Receiving a network data analysis request message from a consumer network function device that intends to use the network data analysis information;
Collecting first network data for network analysis based on the analysis request message from a first provider network function device;
Generating analysis information on network data by analyzing the collected network data based on a method of analyzing network data;
Providing an analysis response message including analysis information of the network data to a consumer network function device;
Receiving a feedback on the analysis information of the network data from the consumer network function device;
Collecting second network data from a second provider network function device to evaluate analysis information of the network data;
Changing a network data analysis method performed by the network data analysis function device based on at least one of the received feedback and second network data
Optimization method of a network data analysis function device comprising a.
제1항에 있어서,
상기 분석 정보를 생성하는 단계는,
상기 네트워크 데이터의 분석 정보를 생성하기 위해, 복수의 분석 모델 중 적어도 하나의 분석 모델을 선택하는 네트워크 데이터 분석 기능 장치의 최적화 방법.
The method of claim 1,
Generating the analysis information,
An optimization method of a network data analysis function device for selecting at least one analysis model from among a plurality of analysis models to generate analysis information of the network data.
제1항에 있어서,
상기 변경하는 단계는,
상기 네트워크 데이터를 분석할 때 사용한 분석 모델을 교체하거나, 삭제하거나, 업데이트하거나, 추가 훈련하거나, 분석 모델을 추가하는 네트워크 데이터 분석 기능 장치의 최적화 방법.
The method of claim 1,
The changing step,
An optimization method of a network data analysis function device for replacing, deleting, updating, additional training, or adding an analysis model to an analysis model used to analyze the network data.
제1항에 있어서,
상기 변경하는 단계는,
상기 네트워크 데이터를 분석할 때 사용한 분석 모델의 종류, 레이어의 가중치, 레이어의 개수, 레이어의 순서 중 적어도 하나를 변경하거나 또는 레이어를 교체하는 네트워크 데이터 분석 기능 장치의 최적화 방법.
The method of claim 1,
The changing step,
A method of optimizing a network data analysis function device for changing at least one of a type of an analysis model used to analyze the network data, a weight of a layer, a number of layers, and an order of layers, or replacing layers.
제1항에 있어서,
상기 변경하는 단계는,
상기 제1 네트워크 기능 장치로부터 수집한 제1 네트워크 데이터를 필터링하고,
상기 필터링은, 시간적 필터링, 공간적 필터링, 어플리케이션 필터링, 네트워크 필터링, 슬라이스 필터링 중 적어도 하나를 포함하는 네트워크 데이터 분석 기능 장치의 최적화 방법.
The method of claim 1,
The changing step,
Filtering the first network data collected from the first network function device,
The filtering may include at least one of temporal filtering, spatial filtering, application filtering, network filtering, and slice filtering.
제1항에 있어서,
상기 변경하는 단계는,
상기 네트워크 데이터의 분석 정보를 생성한 분석 모델을 훈련할 때 사용한 학습 데이터를 변경하거나 교체하거나, 추가하거나 또는 필터링하는 네트워크 데이터 분석 기능 장치의 최적화 방법.
The method of claim 1,
The changing step,
An optimization method of a network data analysis function device for changing, replacing, adding, or filtering training data used when training an analysis model that generates analysis information of the network data.
제1항에 있어서,
상기 변경하는 단계는,
상기 분석 모델의 학습 횟수를 증가시키거나 또는 상기 분석 모델의 종류를 변경하거나 또는, 상기 분석 모델의 종류는 유지하면서 분석 모델의 속성을 변경하는 네트워크 데이터 분석 기능 장치의 최적화 방법.
The method of claim 1,
The changing step,
An optimization method of a network data analysis function device in which the number of times of learning of the analysis model is increased, the type of the analysis model is changed, or properties of the analysis model are changed while maintaining the type of the analysis model.
제1항에 있어서,
상기 피드백은,
상기 네트워크 데이터의 분석 정보를 상기 컨슈머 네트워크 기능 장치가 사용했는지 여부, 상기 네트워크 데이터의 분석 정보를 적용했을 때 컨슈머 네트워크 기능 장치의 성능 변화에 대한 정보, 상기 네트워크 데이터의 분석 정보에 대한 만족도, 상기 네트워크 데이터의 분석 정보에 대한 사용 용도인 유즈케이스, 상기 네트워크 데이터의 사용에 대한 시간적 또는 공간적 정보 중 적어도 하나를 포함하는 네트워크 데이터 분석 기능 장치의 최적화 방법.
The method of claim 1,
The feedback is,
Whether the consumer network function device uses the analysis information of the network data, information on the performance change of the consumer network function device when the analysis information of the network data is applied, satisfaction with the analysis information of the network data, the network A method for optimizing a network data analysis function device comprising at least one of a use case for use of data analysis information and temporal or spatial information for use of the network data.
제1항에 있어서,
상기 분석 요청 메시지를 수신하는 단계는,
상기 네트워크 데이터 분석 장치가 복수인 경우, 상기 컨슈머 네트워크 기능 장치가 네트워크 데이터 분석 장치들 중 네트워크 데이터의 분석 정보를 생성하는 적어도 하나의 네트워크 데이터 분석 장치를 선택하거나 또는 네트워크 기능 저장 장치가 선택하고, 상기 선택된 네트워크 데이터 분석 장치들 각각이 상기 분석 요청 메시지를 수신하는 네트워크 데이터 분석 기능 장치의 최적화 방법.
The method of claim 1,
Receiving the analysis request message,
When there are a plurality of network data analysis devices, the consumer network function device selects at least one network data analysis device that generates analysis information of network data from among the network data analysis devices, or a network function storage device selects the An optimization method of a network data analysis function device in which each of the selected network data analysis devices receives the analysis request message.
제1항에 있어서,
상기 분석 방법을 변경하는 단계는,
상기 피드백 및 제2 네트워크 데이터에 기초하여 상기 제1 네트워크 데이터의 분석 정보에 대한 평가를 수행하고,
상기 제1 네트워크 데이터의 분석 정보에 대한 평가에 기초하여, 상기 네트워크 데이터의 분석 방법에 대해 변경하는 네트워크 데이터 분석 기능 장치의 최적화 방법.
The method of claim 1,
The step of changing the analysis method,
Performing evaluation on the analysis information of the first network data based on the feedback and the second network data,
An optimization method of a network data analysis function device for changing the analysis method of the network data based on an evaluation of the analysis information of the first network data.
네트워크 데이터 분석 기능 장치에 있어서,
상기 네트워크 데이터 분석 기능 장치는 프로세서를 포함하고,
상기 프로세서는,
네트워크 데이터의 분석 정보를 사용하고자 하는 컨슈머 네트워크 기능 장치로부터 네트워크 데이터의 분석 요청 메시지를 수신하고,
제1 프로바이더 네트워크 기능 장치로부터 상기 분석 요청 메시지에 기초하여 네트워크 분석을 위한 제1 네트워크 데이터를 수집하고,
네트워크 데이터를 분석하는 방법에 기초하여 상기 수집한 네트워크 데이터를 분석함으로써 네트워크 데이터에 대한 분석 정보를 생성하고,
상기 네트워크 데이터의 분석 정보를 포함하는 분석 응답 메시지를 컨슈머 네트워크 기능 장치에 제공하고,
상기 컨슈머 네트워크 기능 장치로부터 상기 네트워크 데이터의 분석 정보에 대한 피드백을 수신하고,
상기 네트워크 데이터의 분석 정보를 평가하기 위해 제2 프로바이더 네트워크 기능 장치로부터 제2 네트워크 데이터를 수집하고,
상기 수신한 피드백 및 제2 네트워크 데이터 중 적어도 하나에 기초하여 상기 네트워크 데이터 분석 기능 장치가 수행하는 네트워크 데이터의 분석 방법을 변경하는 네트워크 데이터 분석 기능 장치.
In the network data analysis function device,
The network data analysis function device includes a processor,
The processor,
Receiving a network data analysis request message from a consumer network function device that wants to use the network data analysis information,
Collecting first network data for network analysis based on the analysis request message from a first provider network function device,
Generate analysis information for network data by analyzing the collected network data based on a method of analyzing network data,
Providing an analysis response message including analysis information of the network data to a consumer network function device,
Receiving a feedback on the analysis information of the network data from the consumer network function device,
Collecting second network data from a second provider network function device to evaluate the analysis information of the network data,
A network data analysis function device for changing a network data analysis method performed by the network data analysis function device based on at least one of the received feedback and second network data.
제11항에 있어서,
상기 프로세서는,
상기 네트워크 데이터의 분석 정보를 생성하기 위해, 복수의 분석 모델 중 적어도 하나의 분석 모델을 선택하는 네트워크 데이터 분석 기능 장치의 최적화 방법.
The method of claim 11,
The processor,
An optimization method of a network data analysis function device for selecting at least one analysis model from among a plurality of analysis models to generate analysis information of the network data.
제11항에 있어서,
상기 프로세서는,
상기 네트워크 데이터를 분석할 때 사용한 분석 모델을 교체하거나, 삭제하거나, 업데이트하거나, 추가 훈련하거나, 또는 분석 모델을 추가함으로써 네트워크 데이터의 분석 방법을 변경하는 네트워크 데이터 분석 기능 장치.
The method of claim 11,
The processor,
A network data analysis function device for changing an analysis method of network data by replacing, deleting, updating, additional training, or adding an analysis model to the analysis model used to analyze the network data.
제11항에 있어서,
상기 프로세서는,
상기 네트워크 데이터를 분석할 때 사용한 분석 모델의 종류, 레이어의 가중치, 레이어의 개수, 레이어의 순서 중 적어도 하나를 변경하거나 또는 레이어를 교체함으로써 네트워크 데이터의 분석 방법을 변경하는 네트워크 데이터 분석 기능 장치.
The method of claim 11,
The processor,
A network data analysis function device that changes an analysis method of network data by changing at least one of a type of an analysis model used to analyze the network data, a weight of a layer, a number of layers, and an order of layers, or by replacing layers.
제11항에 있어서,
상기 프로세서는,
상기 제1 네트워크 기능 장치로부터 수집한 제1 네트워크 데이터를 필터링하고,
상기 필터링은, 시간적 필터링, 공간적 필터링, 어플리케이션 필터링, 네트워크 필터링, 슬라이스 필터링 중 적어도 하나를 포함하는 네트워크 데이터 분석 기능 장치.
The method of claim 11,
The processor,
Filtering the first network data collected from the first network function device,
The filtering may include at least one of temporal filtering, spatial filtering, application filtering, network filtering, and slice filtering.
제11항에 있어서,
상기 프로세서는,
상기 네트워크 데이터의 분석 정보를 생성한 분석 모델을 훈련할 때 사용한 학습 데이터를 변경하거나 교체하거나, 추가하거나 또는 필터링함으로써 네트워크 데이터의 분석 방법을 변경하는 네트워크 데이터 분석 기능 장치.
The method of claim 11,
The processor,
A network data analysis function device for changing an analysis method of network data by changing, replacing, adding, or filtering training data used when training an analysis model that generated analysis information of the network data.
제11항에 있어서,
상기 프로세서는,
상기 분석 모델의 학습 횟수를 증가시키거나 또는 상기 분석 모델의 종류를 변경하거나 또는, 상기 분석 모델의 종류는 유지하면서 분석 모델의 속성을 변경하는 네트워크 데이터 분석 기능 장치.
The method of claim 11,
The processor,
A network data analysis function device for increasing the number of times of learning of the analysis model, changing the type of the analysis model, or changing properties of the analysis model while maintaining the type of the analysis model.
제11항에 있어서,
상기 피드백은,
상기 네트워크 데이터의 분석 정보를 상기 컨슈머 네트워크 기능 장치가 사용했는지 여부, 상기 네트워크 데이터의 분석 정보를 적용했을 때 컨슈머 네트워크 기능 장치의 성능 변화에 대한 정보, 상기 네트워크 데이터의 분석 정보에 대한 만족도, 상기 네트워크 데이터의 분석 정보에 대한 사용 용도인 유즈케이스, 상기 네트워크 데이터의 사용에 대한 시간적 또는 공간적 정보 중 적어도 하나를 포함하는 네트워크 데이터 분석 기능 장치.
The method of claim 11,
The feedback is,
Whether the consumer network function device uses the analysis information of the network data, information on the performance change of the consumer network function device when the analysis information of the network data is applied, satisfaction with the analysis information of the network data, the network A network data analysis function device comprising at least one of a use case for use of data analysis information and temporal or spatial information for use of the network data.
제11항에 있어서,
상기 프로세서는,
상기 네트워크 데이터 분석 장치가 복수인 경우, 상기 컨슈머 네트워크 기능 장치가 네트워크 데이터 분석 장치들 중 네트워크 데이터의 분석 정보를 생성하는 적어도 하나의 네트워크 데이터 분석 장치를 선택하거나 또는 네트워크 기능 저장 장치가 선택하고, 상기 선택된 네트워크 데이터 분석 장치들 각각이 상기 분석 요청 메시지를 수신하는 네트워크 데이터 분석 기능 장치.
The method of claim 11,
The processor,
When there are a plurality of network data analysis devices, the consumer network function device selects at least one network data analysis device that generates analysis information of network data from among the network data analysis devices, or a network function storage device selects the Each of the selected network data analysis devices receives the analysis request message.
제11항에 있어서,
상기 프로세서는,
상기 피드백 및 제2 네트워크 데이터에 기초하여 상기 제1 네트워크 데이터의 분석 정보에 대한 평가를 수행하고,
상기 제1 네트워크 데이터의 분석 정보에 대한 평가에 기초하여, 상기 네트워크 데이터의 분석 방법에 대해 변경하는 네트워크 데이터 분석 기능 장치.
The method of claim 11,
The processor,
Performing evaluation on the analysis information of the first network data based on the feedback and the second network data,
A network data analysis function device that changes the analysis method of the network data based on an evaluation of the analysis information of the first network data.
KR1020200148515A 2019-11-08 2020-11-09 Optimization for network data analytic device KR102441775B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US17/092,888 US11188785B2 (en) 2019-11-08 2020-11-09 Optimization of network data analysis device

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020190142827 2019-11-08
KR20190142827 2019-11-08

Publications (2)

Publication Number Publication Date
KR20210056272A true KR20210056272A (en) 2021-05-18
KR102441775B1 KR102441775B1 (en) 2022-09-13

Family

ID=76158843

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200148515A KR102441775B1 (en) 2019-11-08 2020-11-09 Optimization for network data analytic device

Country Status (1)

Country Link
KR (1) KR102441775B1 (en)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101897962B1 (en) * 2017-11-27 2018-10-31 한국인터넷진흥원 Method for performing machine learning for neural network model and apparatus thereof
KR20190075160A (en) * 2016-05-09 2019-06-28 스트롱 포스 아이오티 포트폴리오 2016, 엘엘씨 Methods and systems for the industrial internet of things

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190075160A (en) * 2016-05-09 2019-06-28 스트롱 포스 아이오티 포트폴리오 2016, 엘엘씨 Methods and systems for the industrial internet of things
KR101897962B1 (en) * 2017-11-27 2018-10-31 한국인터넷진흥원 Method for performing machine learning for neural network model and apparatus thereof

Also Published As

Publication number Publication date
KR102441775B1 (en) 2022-09-13

Similar Documents

Publication Publication Date Title
US11188785B2 (en) Optimization of network data analysis device
Goian et al. Popularity-based video caching techniques for cache-enabled networks: A survey
US20220108214A1 (en) Management method of machine learning model for network data analytics function device
WO2017215647A1 (en) Root cause analysis in a communication network via probabilistic network structure
CN112740746A (en) Communication network insight to detect alerts
CN111405030B (en) Message pushing method and device, electronic equipment and storage medium
KR20190002736A (en) Methods and apparatus to compensate impression data for misattribution and/or non-coverage by a database proprietor
CN105183873A (en) Malicious clicking behavior detection method and device
US8874095B2 (en) Techniques for improving cache effectiveness of caches with low user population
CN109982293B (en) Flow product pushing method and system, electronic equipment and storage medium
CN112241327A (en) Shared information processing method and device, storage medium and electronic equipment
CN111881358B (en) Object recommendation system, method and device, electronic equipment and storage medium
US20170364833A1 (en) Ranking video delivery problems
JP2012186667A (en) Network fault detection apparatus, network fault detection method of network fault detection apparatus, and network fault detection program
CN107093092B (en) Data analysis method and device
EP3264696B1 (en) Control device, traffic control method, and recording medium onto which computer program is recorded
US20230153685A1 (en) Methods, apparatus and machine-readable media relating to data analytics in a communications network
CN105516746A (en) Video pre-downloading system and method
KR20210056272A (en) Optimization for network data analytic device
CN112085282B (en) Cell traffic prediction method and server
US20150236910A1 (en) User categorization in communications networks
CN106375363A (en) Method, system and device for eliminating message alert in social application client
CN106066864B (en) A kind of various dimensions mobile subscriber preference dynamic identifying method
De Masi et al. Less annoying: quality of experience of commonly used mobile applications
CN113569126A (en) Multimedia file recommendation method and device and server

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant