KR102123286B1 - 데이터 처리 시스템 및 데이터 처리 방법 - Google Patents
데이터 처리 시스템 및 데이터 처리 방법 Download PDFInfo
- Publication number
- KR102123286B1 KR102123286B1 KR1020190172898A KR20190172898A KR102123286B1 KR 102123286 B1 KR102123286 B1 KR 102123286B1 KR 1020190172898 A KR1020190172898 A KR 1020190172898A KR 20190172898 A KR20190172898 A KR 20190172898A KR 102123286 B1 KR102123286 B1 KR 102123286B1
- Authority
- KR
- South Korea
- Prior art keywords
- data
- data file
- management
- file
- field
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
- G06F16/258—Data format conversion from or to a database
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
- G06F16/221—Column-oriented storage; Management thereof
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Software Systems (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
컴퓨터를 이용하여 데이터를 체계적으로 처리하고 업데이트하는 데이터 처리 시스템에 있어서,
기업으로부터 제공받은 상품과 관련된 데이터를 포함하는 원시 데이터 파일;
대리점의 서버에서 사용하는 단일 양식의 관리 데이터 파일;
원시 데이터 파일을 관리 데이터 파일로 순차적으로 변환 처리하는 순차 변환부;
원시 데이터 파일을 관리 데이터 파일로 일괄적으로 변환 처리하는 일괄 변환부;
컬럼 위치에 대한 데이터 정렬을 비교하여 보여주고 데이터 변환을 처리하는 편집 도구;
및 상기 원시 데이터 파일의 예고없이 수시로 변경되는 데이터를 편리하게 관리할 수 있도록 필터링 하는 필터링 옵션부를 포함하는 것을 특징으로 하는 데이터 처리 시스템
기업으로부터 제공받은 상품과 관련된 데이터를 포함하는 원시 데이터 파일;
대리점의 서버에서 사용하는 단일 양식의 관리 데이터 파일;
원시 데이터 파일을 관리 데이터 파일로 순차적으로 변환 처리하는 순차 변환부;
원시 데이터 파일을 관리 데이터 파일로 일괄적으로 변환 처리하는 일괄 변환부;
컬럼 위치에 대한 데이터 정렬을 비교하여 보여주고 데이터 변환을 처리하는 편집 도구;
및 상기 원시 데이터 파일의 예고없이 수시로 변경되는 데이터를 편리하게 관리할 수 있도록 필터링 하는 필터링 옵션부를 포함하는 것을 특징으로 하는 데이터 처리 시스템
Description
본 발명은 데이터를 체계적으로 처리하고 업데이트 할 수 있는 데이터 처리시스템 및 데이터 처리방법에 관한 발명이다.
현재 기업들이 생산하는 다양한 제품과 서비스를 일괄적으로 제공하는 대리점이 보편화되고 있으며, 소비자는 각 개별 기업의 제품과 서비스를 판매하는 매장을 일일이 방문하지 않고 대리점을 방문하여 여러 기업의 제품과 서비스를 구매할 수 있다.
그런데 기업들로부터 대리점으로 제공되는 것은 상품 뿐만이 아니라, 제품 또는 서비스의 판매와 관련된 정보가 온라인 또는 오프라인을 통하여 대리점으로 제공되고 있는데, 상품의 판매와 관련된 정보가 포함된 데이터 파일은 각 기업에 따라서 동일한 제품 또는 서비스일지라도 서로 다른 형식으로 작성되고 있다. 그런데 다양한 제품과 서비스를 총괄하여 판매하고 관리하는 대리점으로서는 기업들로부터 제공받은 다양한 형식의 데이터 파일을 관리함에 있어서 많은 불편함이 발생하고 있다.
예를 들면, 데이터 파일의 데이터 필드명과 순서가 매번 동일하지 않고, 수시로 변경될 수 있으며, 각 기업별로 데이터 파일에 포함된 데이터 필드의 개수가 상이하고, 동일한 속성의 데이터 값에 대하여 상이한 필드명이 부여될 수 있다.
그리고 이렇게 상이한 복수의 데이터 파일을 모아 하나의 양식으로 작성하여 관리하려고 한다면 그 과정이 매우 번거롭고 지루하게 될 수 있다. 또한 하나의 양식으로 작성하는 과정에서 데이터 값이 누락이 되거나 데이터 값이 변경되는 에러가 발생할 수도 있다.
본 발명은 현재의 이러한 문제점을 해결하기 위해 각각 서로 다른 양식의 데이터 파일을 하나의 양식으로 작성하여 관리할 수 있는 데이터 처리시스템과 데이터 처리방법을 제공하는 것이 목적이다.
본 발명은 여러 기업들로부터 제공받은 다양한 형식의 데이터 파일을 대리점 서버에서 사용하는 데이터 파일 양식으로 변환시키는 데이터 처리시스템과 데이터 처리방법을 제공하는 것이 목적이다.
본 발명은 각 기업으로부터 제공받은 원시 데이터 파일에 포함된 모든 데이터의 필드명과 데이터 값을 표시 한다.
본 발명에 따른 원시 데이터 파일은 일반 규칙이 있는 텍스트 파일이나, CSV 파일 등 모든 원시 데이터를 포함할 수 있는 파일을 의미한다.
본 발명은 관리 데이터 파일을 제공하며, 관리 데이터 파일의 항목은 원시 데이터 파일 중에서 관리에 필요한 항목을 유저가 임의로 선택하여 정의할 수 있다.
본 발명은 원시 데이터 파일의 데이터를 관리 데이터 파일로 복사하여 입력하는 데이터 처리시스템과 데이터 처리방법을 포함한다.
본 발명은 데이터 파일의 변환 처리를 위해서 별도의 편집 도구를 포함한다.
본 발명에 따른 편집 도구는 원시 데이터 파일에 포함된 모든 데이터 필드의 위치와 필드명을 추출하여 보여줄 수 있다.
본 발명은 다양한 형식의 데이터를 단일 형식의 데이터 양식으로 편리하게 작성하여 관리가 가능하다.
본 발명은 대리점이 각 기업들로부터 주기적으로 제공받는 많은 데이터를 편리하게 업데이트 할 수 있으며, 데이터 관리 비용을 줄이는 효과가 있다.
도 1 내지 도 22는 본 발명에 따른 데이터 처리 시스템과 처리방법을 설명하기 위한 실시예의 도면이다.
본 발명은 다양한 변환을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변환, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.
본 발명에서 사용한 용어는 단지 특정 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다.
이하, 본 발명의 실시예를 첨부한 도면들을 참조하여 상세히 설명하기로 한다.
도 1은 본 발명에 따른 원시 데이터 파일의 일 실시예이다.
본 발명의 데이터 처리시스템은 각 기업들로부터 제공받은 원시 데이터 파일의 데이터 필드명과 데이터 값을 각 컬럼에 표시하여 유저에게 디스플레이 할 수 있다.
각 컬럼에는 각 기업으로부터 제공받고 판매하는 상품과 관련된 모든 데이터가 포함될 수 있으며, 이와 같은 원시 데이터 파일의 형식과 내용은 기업체별로 상이할 수 있고, 하나의 기업으로부터 매번 동일한 양식의 원시 데이터 파일을 제공받을 수 있는 것은 아니다.
도 2는 본 발명에 따른 관리 데이터 파일의 일 실시예이다.
본 발명의 데이터 처리시스템은 대리점의 서버에서 사용하는 단일 양식의 관리 데이터 파일을 유저에게 제공할 수 있다.
관리 데이터 파일의 항목은 원시 데이터 파일 중에서 관리에 필요한 데이터 항목을 유저가 임의로 선택하여 정의할 수 있다.
데이터 필드명은 데이터 값의 속성을 나타내는 명칭으로서, 동일한 속성의 데이터 (또는 데이터 값) 에 대하여 각 기업별로 데이터 필드명이 서로 상이할 수 있다.
그리고 대리점은 각 기업으로부터 전송받은 파일에 기재된 명칭을 그대로 사용할 수도 있으나, 관리 데이터 파일에서는 관리의 편의상 보편적으로 대표할 수 있는 하나의 명칭으로 변경하여 사용하는 것이 바람직하다.
도 3은 본 발명에 따른 편집 도구의 일 실시예이다.
본 발명에 따른 편집 도구는 원시 데이터 파일에 기재된 데이터를 관리 데이터 파일로 변환 처리하는 과정의 편의성을 높이기 위하여 구비될 수 있다.
본 발명에 따른 편집 도구는 컬럼 위치에 대한 데이터 정렬을 서로 비교하여, 동일한 컬럼의 위치에 상이한 데이터가 기재되어 있는 것을 유저가 쉽게 파악할 수 있도록 시각적으로 식별력 있게 디스플레이 하여 보여준다.
본 발명에 따른 변환 처리 과정의 실시예를 살펴 본다.
(제1 실시예 : 순차변환부) 원시 데이터 파일에 포함된 데이터를 관리 데이터 파일로 변환 처리하는 과정은 아래와 같다.
(a) 원시 데이터 파일에 포함된 하나의 필드를 컴퓨터 자판기 또는 마우스를 이용하여 활성화 시킨다.(도 4)
유저가 변환 처리할 데이터 필드의 컬럼 셀, 필드명 셀, 데이터 값 셀 중 어느 곳을 활성화시키더라도, 시스템은 그 활성화된 셀이 속하는 데이터 필드를 변환 처리할 대상으로 인식한다.
도 4는 원시 데이터 파일의 컬럼 1에 위치한 기업체명의 데이터를 변환 처리의 대상으로 활성화시킨 결과를 보여주고 있다.
(b) 활성화된 데이터 필드의 원시 데이터를 자동으로 복사한다.
본 발명의 도 4의 실시예에 따르면 컬럼 1의 기업체명을 나타내는 데이터(○○○○)가 셀의 개수만큼 복사된다.
(c) 선택한 필드의 원시 데이터가 이동하게 될 관리 데이터 파일의 데이터 필드를 컴퓨터 자판기 또는 마우스를 이용하여 활성화시킨다.(도 5)
유저가 변환 처리될 데이터 필드의 컬럼 셀, 필드명 셀, 데이터 값 셀 중 어느 곳을 활성화시키더라도, 시스템은 그 활성화된 셀이 속하는 데이터 필드가 변환 처리될 대상으로 인식한다.
(d) 상기 (b)에서 복사된 원시 데이터를 관리 데이터 파일의 활성화된 데이터 필드의 셀에 모두 자동으로 입력 한다.
본 발명은 원시 데이터 파일의 데이터 필드를 활성화하면 자동으로 데이터 값을 복사하고, 관리 데이터 파일의 데이터 필드를 활성화하면 자동으로 복사된 데이터를 셀에 입력한다. 도 6은 데이터가 셀에 입력된 결과를 보여준다.
(e) 원시 데이터 파일에 포함된 다른 데이터 필드를 선택하여 활성화 시킨다.(도 7)
바람직하게는 관리 데이터 파일의 컬럼 2로 이동시킬 데이터 필드를 선택하여 활성화 시킨다.
(f) 활성화된 데이터 필드의 모든 데이터를 자동으로 복사한다.
(g) 선택된 필드의 데이터가 이동하게 될 관리 데이터 파일 정렬의 데이터 필드를 컴퓨터 자반기 또는 마우스를 이용하여 활성화시킨다.(도 8)
(h) 상기 (f)에서 복사된 데이터를 관리 데이터 파일의 활성화된 데이터 필드의 셀에 모두 자동으로 입력 한다.
도 9는 데이터가 셀에 입력된 결과를 보여준다.
바람직하게 본 발명에 따른 데이터 변환 처리 과정은 상기 (a)-(h) 과정이 반복 된다.
본 발명의 원시 데이터 파일에 포함된 데이터를 관리 데이터 파일로 이동하는 과정은 컬럼 1로부터 순차적으로 진행될 수도 있고, 도중에 임의의 컬럼을 비워둔 채 다음 컬럼으로 점프하여 이동할 수 도 있다.
예를 들면, 상기의 실시예와 같이 관리 데이터 파일의 컬럼 2에 대한 데이터 이동을 마친 후에 컬럼 3을 채우지 않고, 컬럼 4를 먼저 채운 이후에 컬럼 3을 데이터로 채울 수도 있다.
도 10은 이와 같은 데이터 이동을 모두 마친 관리 데이터 파일의 실시예이다.
본 발명은 바람직하게는 변환된 데이터의 원시 데이터 파일과 관리 데이터 파일의 위치를 패턴 관리에 저장할 수 있다. 본 발명에 따른 패턴 관리에 위치 정보를 저장하면, 이후 원시 데이터 파일을 관리 데이터 파일로 변환 처리할 때에 자동으로 위치가 지정될 수 있다.
(제2 실시예 : 일괄변환부) 원시 데이터 파일에 포함된 데이터 값을 관리 데이터 파일로 일괄 변환 처리하는 과정은 아래와 같다.
(ⅰ) 제공받은 원시 데이터 파일에 포함된 데이터 필드명을 순서대로 읽어 들인다.(도 11)
(ⅱ) 기존에 작성되어 보관 중인 관리 데이터 파일 양식에 포함된 데이터 필드명을 순서대로 읽어 들인다.(도 12)
(ⅲ) 원시 데이터 파일과 관리 데이터 파일의 데이터 필드명을 컬럼 1에서 마지막 컬럼까지 순서대로 비교한다.
(ⅳ) 원시 데이터 파일과 관리 데이터 파일의 동일한 컬럼에 다른 필드명 데이터가 기재되어 있으면 원시 데이터 파일의 해당 컬럼을 유저가 시각적으로 인식할 수 있도록 필드명의 색을 식별력 있게 변경 처리한다. 예를 들면 도 13과 같이 원시 데이터 파일과 관리 데이터 파일의 필드명이 서로 다른 4개의 컬럼 셀에 대하여 원시 데이터 파일의 해당 컬럼 셀을 붉은 색으로 변경 처리한다.
(ⅴ) 원시 데이터 파일의 데이터를 관리 데이터 파일로 일괄 변환 처리한다. 일괄 변환 처리는 원시 데이터 파일에 기재되어 있는 데이터 값을 동일한 위치의 관리 데이터 파일로 복사하여 입력하는 과정을 한번에 구현하는 기능이다. 이때, 도 13과 같이 필드명의 서로 달라서 컬럼 색이 변경된 필드는 일괄 변환 처리의 대상에서 제외된다.(도 14)
(ⅵ) 일괄 변환이 이루어지지 않은 원시 데이터 필드를 관리 데이터 파일로 순차적으로 변환 처리한다.
원시 데이터 파일의 대리점고유번호를 활성화하여 데이터를 복사하고, 관리 데이터 파일의 필드를 활성화하여 데이터를 셀들에 입력한다. 동일한 방식으로 제품번호, 제품분류코드 및 대리점직원코드를 순차적으로 활성화하여 데이터를 변환 처리한다.(도 15)
(제3 실시예) 본 발명은 원시 데이터 파일과 관리 데이터 파일의 데이터 필드명과 데이터 값이 다른 경우, 해당하는 데이터 값의 바른 위치를 확인 해주는 자동찾기 기능(단계)을 더 포함한다.
데이터 값의 속성과 내용을 머신러닝 및 딥러닝에 의하여 분석하여 해당하는 데이터 필드명의 위치를 자동으로 확인해 줄 수 있다. 자동찾기 기능을 활용하면 많은 수의 데이터 필드에 대해서도 필드명은 다르지만 데이터 속성이 동일한 필드를 편리하게 찾아서 매칭시켜 줄 수 있다.
또한 바람직하게는 원시 데이터 파일과 관리 데이터 파일의 변환된 위치를 패턴 관리에 저장하여 자동으로 위치를 지정하여 변환할 수 있다.
(제4 실시예) 도 3의 본 발명에 따른 편집 도구를 이용한 변환 처리의 실시예이다.
(α) 데이터 매칭맵을 이용하여 변환 처리
도 16의 편집 도구의 원시 데이터 파일의 1번 컬럼은 기업체코드로서, 관리 데이터 파일 1번 컬럼의 기업체명과 데이터의 속성은 동일한 것으로 볼 수 있으나, 표시되는 데이터 값은 한글(기업체명)과 숫자(기업체코드)로서 서로 상이하게 표시된다.
도 16과 같이 데이터 속성은 동일한 것이나, 표시되는 데이터 값이 한글(문자)과 숫자로서 서로 상이한 경우에는 데이터를 관리 데이터 파일에 입력하는 과정에서 숫자를 한글(문자)로 변환하여 입력처리 해야 한다.
이러한 경우에는 동일한 데이터 속성 값에 대한 데이터 매칭맵을 활용 한다. 즉, 시스템은 동일한 데이터 속성을 갖는 여러 유형의 데이터 값의 매칭 상태를 저장하고 있는 데이터 매칭맵을 구비하고, 변환 과정에서 필드명이 동일하지는 않지만 매칭맵에 동일 그룹으로 저장되어 있는 데이터(예와 같이 기업체명과 기업체코드, 대리점명과 대리점고유번호, 제품명과 제품번호 등) 사이에는 자동으로 숫자에서 한글(문자)로 또는 한글(문자)에서 숫자로 변환하여 입력 처리한다.
(β) 데이터 값 속성이 다른 경우의 변환 처리
원시 데이터 파일의 2번 컬럼 제품번호는 관리 데이터 파일 2번 컬럼의 대리점고유번호와 표시되는 데이터 값(숫자 또는 문자와 숫자의 조합)은 동일할 수 있으나, 데이터 값의 속성은 전혀 다르다.
이러한 경우 원시 데이터 파일의 항목(제품번호)이 관리 데이터 파일에 포함되어 있는 항목인지를 확인한다.
확인 결과 관리 데이터 파일의 다른 컬럼에 제품 번호 항목이 있으면, 원시 데이터 파일의 제품번호를 관리 데이터 파일의 제품번호 필드로 변환 처리한다.
만일 제품 번호 항목이 관리 데이터 파일의 항목에 포함되지 않는 데이터일 경우에는 변환 대상에서 제외하고 다음 3번 컬럼으로 이동하여 변환 처리를 계속 진행한다.
편집 도구에 표시된 원시 데이터 파일의 모든 데이터 필드에 대하여 동일한 관리 데이터 파일로의 데이터 값의 변환이 완료된 후에 종료한다.
(제5 실시예) 본 발명은 필터링 옵션부를 포함할 수 있다.
각 기업으로부터 제공되는 원시 데이터 파일의 형식과 데이터들은 수시로 예고 없이 변경 된다. 그때마다 유저가 원시 데이터 파일의 수정 작업을 하게 되면 많은 시간과 노력이 소모된다. 본 발명은 예고 없이 변경되는 데이터를 편리하게 관리할 수 있도록 필터링 하는 필터링 옵션부를 구비할 수 있다.
각 기업들로부터 제공받은 원시 데이터 파일의 데이터 값 중에는 관리 파일의 관점에서 불필요한 문자, 숫자, 부호가 포함되어 있을 수 있다. 불필요한 문자, 숫자, 부호는 원시 데이터 파일에서 관리 데이터 파일로의 변환 과정에서 삭제하거나 자릿수를 제한하는 필터링 옵션을 구비함으로써 변환 이후에 통일된 양식의 데이터를 확보할 수 있다.
필터링 옵션에 포함되는 4가지 실시예는 불필요한 문자 제거, 자릿수 제한, 오래된 데이터 삭제, 중복 데이터 합산 삭제가 있다.
필터링 옵션의 일 실시예로는 “/” 와 “-”의 제거를 들 수 있다. (도 18)
필터링 옵션의 다른 일 실시예로는 자릿수 제한을 포함할 수 있다. (도 19)
필터링 옵션의 다른 일 실시예로는 작성일자가 오래된 데이터의 삭제 기능을 포함할 수 있다.(도 20)
필터링 옵션의 다른 일 실시예로는 동일한 관리번호의 중복된 데이터 중에서 불필요한 데이터를 합산하거나 삭제 처리하는 기능을 포함할 수 있다. (도 21)
도 22는 본 발명에 따른 데이터 처리 시스템의 실시예를 보여주는 도면이다.
본 발명은 컴퓨터를 이용하여 데이터를 체계적으로 처리하고 업데이트하는 데이터 처리 시스템으로서,
기업으로부터 제공받은 상품과 관련된 데이터를 포함하는 원시 데이터 파일; 대리점의 서버에서 사용하는 단일 양식의 관리 데이터 파일; 원시 데이터 파일을 관리 데이터 파일로 순차적으로 변환 처리하는 순차 변환부; 원시 데이터 파일을 관리 데이터 파일로 일괄적으로 변환 처리하는 일괄 변환부; 컬럼 위치에 대한 데이터 정렬을 비교하여 보여주고 데이터 변환을 처리하는 편집 도구; 및 상기 원시 데이터 파일의 예고없이 수시로 변경되는 데이터를 편리하게 관리할 수 있도록 필터링 하는 필터링 옵션부를 포함한다.
본 발명은 상기의 데이터 처리 시스템을 이용하여 원시 데이터 파일을 관리 데이터 파일로 변환 처리하기 위한 데이터 처리 방법으로서,
원시 데이터 파일에 포함된 하나의 필드를 활성화시키는 단계; 상기 활성화된 필드의 원시 데이터를 복사하는 단계; 상기 복사된 원시 데이터가 이동하게 될 관리 데이터 파일의 필드를 활성화시키는 단계;
상기 복사된 원시 데이터를 상기 관리 데이터 파일의 활성화된 필드의 셀에 입력하는 단계;를 포함하고,
상기 원시 데이터 파일에 포함된 다른 데이터 필드를 활성화하여 데이터를 복사하고, 상기 관리 데이터 파일의 셀에 데이터를 입력하는 단계를 순차적으로 반복하여 실행하는 것을 특징으로 한다.
본 발명은 상기의 데이터 처리 시스템을 이용하여 원시 데이터 파일을 관리 데이터 파일로 변환 처리하기 위한 데이터 처리 방법에 있어서,
원시 데이터 파일에 포함된 데이터 필드명을 순서대로 읽는 단계; 기존에 작성되어 보관 중인 관리 데이터 파일 양식에 포함된 데이터 필드명을 순서대로 읽는 단계; 상기 원시 데이터 파일과 관리 데이터 파일의 데이터 필드명을 순서대로 비교하는 단계; 상기 원시 데이터 파일과 관리 데이터 파일의 동일한 컬럼에 다른 필드명 데이터가 기재되어 있으면 상기 원시 데이터 파일의 필드명의 색을 변경 처리하는 단계;
상기 색이 변경 처리된 필드를 제외하고, 상기 원시 데이터 파일을 관리 데이터 파일로 일괄 변환 처리하는 단계;를 포함하며, 일괄 변환이 이루어지지 않은 원시 데이터 필드는 순차적으로 변환 처리하는 것을 특징으로 하는 데이터 처리 방법이다.
Claims (12)
- 컴퓨터를 이용하여 데이터를 체계적으로 처리하고 업데이트하는 데이터 처리 시스템에 있어서,
기업으로부터 제공받은 상품과 관련된 데이터를 포함하는 원시 데이터 파일;
대리점의 서버에서 사용하는 단일 양식의 관리 데이터 파일;
원시 데이터 파일을 관리 데이터 파일로 순차적으로 변환 처리하는 순차 변환부;
원시 데이터 파일을 관리 데이터 파일로 일괄적으로 변환 처리하는 일괄 변환부;
컬럼 위치에 대한 데이터 정렬을 비교하여 보여주고 데이터 변환을 처리하는 편집 도구; 및
상기 원시 데이터 파일의 예고없이 수시로 변경되는 데이터를 편리하게 관리할 수 있도록 필터링 하는 필터링 옵션부를 포함하며,
상기 순차 변환부는 상기 원시 데이터 파일의 필드를 순차적으로 활성화시켜 데이터를 복사하고, 상기 관리 데이터 파일의 필드에 복사된 데이터를 입력하는 것으로서,
(a)원시 데이터 파일에 포함된 하나의 필드를 컴퓨터 자판기 또는 마우스를 이용하여 활성화시키는 단계;
(b)활성화된 데이터 필드의 원시 데이터를 자동으로 복사하는 단계;
(c)선택한 필드의 원시 데이터가 이동하게 될 관리 데이터 파일의 데이터 필드를 컴퓨터 자판기 또는 마우스를 이용하여 활성화시키는 단계;
(d)상기 (b)에서 복사된 원시 데이터를 관리 데이터 파일의 활성화된 데이터 필드의 셀에 모두 자동으로 입력하는 단계;
(e)원시 데이터 파일에 포함된 다른 데이터 필드를 선택하여 활성화 시키는 단계;
(f)활성화된 데이터 필드의 모든 데이터를 자동으로 복사하는 단계;
(g)선택된 필드의 데이터가 이동하게 될 관리 데이터 파일 정렬의 데이터 필드를 컴퓨터 자반기 또는 마우스를 이용하여 활성화시키는 단계;
(h) 상기 (f)에서 복사된 데이터를 관리 데이터 파일의 활성화된 데이터 필드의 셀에 모두 자동으로 입력하는 단계를 포함하여, (a)-(h) 단계를 반복하여 데이터 변환을 처리하며,
상기 일괄 변환부는 상기 원시 데이터 파일의 여러 필드의 데이터 값을 동일한 위치의 관리 데이터 파일로 한번에 복사하여 입력 처리하는 것으로서,
(ⅰ) 제공받은 원시 데이터 파일에 포함된 데이터 필드명을 순서대로 읽어 들이는 단계;
(ⅱ) 기존에 작성되어 보관 중인 관리 데이터 파일 양식에 포함된 데이터 필드명을 순서대로 읽어 들이는 단계;.
(ⅲ) 원시 데이터 파일과 관리 데이터 파일의 데이터 필드명을 컬럼 1에서 마지막 컬럼까지 순서대로 비교하는 단계;
(ⅳ) 원시 데이터 파일과 관리 데이터 파일의 동일한 컬럼에 다른 필드명 데이터가 기재되어 있으면 원시 데이터 파일의 해당 컬럼을 유저가 시각적으로 인식할 수 있도록 필드명의 색을 식별력 있게 변경 처리하는 단계;
(ⅴ) 원시 데이터 파일의 데이터를 관리 데이터 파일로 일괄 변환 처리하는 단계;
(ⅵ) 일괄 변환이 이루어지지 않은 원시 데이터 필드를 관리 데이터 파일로 순차적으로 변환 처리하는 단계;를 포함하는 것을 특징으로 하는 데이터 처리 시스템
- 삭제
- 삭제
- 삭제
- 삭제
- 제1항에서,
상기 편집 도구는 동일한 데이터 속성을 갖는 여러 유형의 데이터 값의 매칭 상태를 저장하고 있는 데이터 매칭맵을 이용하여 데이터를 변환 처리하는 것을 특징으로 하는 데이터 처리 시스템
- 제1항에서,
상기 필터링 옵션부는 불필요한 문자를 제거, 자릿수 제한, 오래된 데이터의 삭제 및 중복 데이터를 합산삭제 처리하는 것을 특징으로 하는 데이터 처리 시스템
- 원시 데이터 파일을 관리 데이터 파일로 변환 처리하기 위한 데이터 처리 방법에 있어서,
원시 데이터 파일에 포함된 하나의 필드를 활성화시키는 단계;
상기 활성화된 필드의 원시 데이터를 복사하는 단계;
상기 복사된 원시 데이터가 이동하게 될 관리 데이터 파일의 필드를 활성화시키는 단계;
상기 복사된 원시 데이터를 상기 관리 데이터 파일의 활성화된 필드의 셀에 입력하는 단계;를 포함하고,
상기 원시 데이터 파일에 포함된 다른 데이터 필드를 활성화하여 데이터를 복사하고, 상기 관리 데이터 파일의 셀에 데이터를 입력하는 단계를 순차적으로 반복하여 실행하는 것을 특징으로 하는 데이터 처리 방법
- 원시 데이터 파일을 관리 데이터 파일로 변환 처리하기 위한 데이터 처리 방법에 있어서,
원시 데이터 파일에 포함된 데이터 필드명을 순서대로 읽는 단계;
기존에 작성되어 보관 중인 관리 데이터 파일 양식에 포함된 데이터 필드명을 순서대로 읽는 단계;
상기 원시 데이터 파일과 관리 데이터 파일의 데이터 필드명을 순서대로 비교하는 단계;
상기 원시 데이터 파일과 관리 데이터 파일의 동일한 컬럼에 다른 필드명 데이터가 기재되어 있으면 상기 원시 데이터 파일의 필드명의 색을 변경 처리하는 단계;
상기 색이 변경 처리된 필드를 제외하고, 상기 원시 데이터 파일을 관리 데이터 파일로 일괄 변환 처리하는 단계;를 포함하며, 일괄 변환이 이루어지지 않은 원시 데이터 필드는 순차적으로 변환 처리하는 것을 특징으로 하는 데이터 처리 방법
- 제8항 또는 제9항 중 하나의 항에서,
머신러닝 및 딥러닝에 의하여 데이터 필드명은 다르지만 데이터 속성이 동일한 필드를 찾아서 매칭시켜 주는 자동찾기 단계;를 더 포함하는 것을 특징으로 하는 데이터 처리방법
- 제8항 또는 제9항 중 하나의 항에서,
동일한 데이터 속성을 갖는 여러 유형의 데이터 값의 매칭 상태를 저장하고 있는 데이터 매칭맵을 이용하여 변환 처리하는 단계를 더 포함하는 것을 특징으로 하는 데이터 처리 방법
- 제8항 또는 제9항 중 하나의 항에서,
원시 데이터 파일의 항목이 관리 데이터 파일에 포함되지 않는 데이터일 경우에는 변환 대상에서 제외하는 것을 특징으로 하는 데이터 처리 방법
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020190172898A KR102123286B1 (ko) | 2019-12-23 | 2019-12-23 | 데이터 처리 시스템 및 데이터 처리 방법 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020190172898A KR102123286B1 (ko) | 2019-12-23 | 2019-12-23 | 데이터 처리 시스템 및 데이터 처리 방법 |
Publications (1)
Publication Number | Publication Date |
---|---|
KR102123286B1 true KR102123286B1 (ko) | 2020-06-16 |
Family
ID=71141855
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020190172898A KR102123286B1 (ko) | 2019-12-23 | 2019-12-23 | 데이터 처리 시스템 및 데이터 처리 방법 |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR102123286B1 (ko) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113268637A (zh) * | 2021-06-24 | 2021-08-17 | 京东科技控股股份有限公司 | 一种数据处理方法、系统、存储介质及电子设备 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20050240615A1 (en) * | 2004-04-22 | 2005-10-27 | International Business Machines Corporation | Techniques for identifying mergeable data |
JP2006268661A (ja) * | 2005-03-25 | 2006-10-05 | Yamatake Corp | データインポート方法およびデータインポート装置 |
KR20160031974A (ko) * | 2014-09-15 | 2016-03-23 | 주식회사 지에이서포트 | RAW DATA의 DataBase화를 위한 지능형 업로드 시스템 |
KR101637504B1 (ko) | 2015-01-16 | 2016-07-07 | 주식회사 솔트룩스 | 비정형 데이터 처리 시스템 및 방법 |
KR20180004632A (ko) * | 2016-07-04 | 2018-01-12 | 한다시스템 주식회사 | 스프레드 시트를 데이터베이스로 통합하는 방법 및 컴퓨터 프로그램 |
-
2019
- 2019-12-23 KR KR1020190172898A patent/KR102123286B1/ko active IP Right Grant
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20050240615A1 (en) * | 2004-04-22 | 2005-10-27 | International Business Machines Corporation | Techniques for identifying mergeable data |
JP2006268661A (ja) * | 2005-03-25 | 2006-10-05 | Yamatake Corp | データインポート方法およびデータインポート装置 |
KR20160031974A (ko) * | 2014-09-15 | 2016-03-23 | 주식회사 지에이서포트 | RAW DATA의 DataBase화를 위한 지능형 업로드 시스템 |
KR101637504B1 (ko) | 2015-01-16 | 2016-07-07 | 주식회사 솔트룩스 | 비정형 데이터 처리 시스템 및 방법 |
KR20180004632A (ko) * | 2016-07-04 | 2018-01-12 | 한다시스템 주식회사 | 스프레드 시트를 데이터베이스로 통합하는 방법 및 컴퓨터 프로그램 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113268637A (zh) * | 2021-06-24 | 2021-08-17 | 京东科技控股股份有限公司 | 一种数据处理方法、系统、存储介质及电子设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP3108984B2 (ja) | データ処理装置 | |
US6532480B1 (en) | Synchronization of databases with record sanitizing and intelligent comparison | |
Groh et al. | Access 2007 Bible | |
WO2005096198A1 (en) | An apparatus for revising corporate checklist | |
CN111400354A (zh) | 基于mes系统的机床制造bom存储查询及树形结构构建方法 | |
US5870712A (en) | Data processing method and its apparatus | |
KR102123286B1 (ko) | 데이터 처리 시스템 및 데이터 처리 방법 | |
CN114064611B (zh) | 一种元数据可复用的数据建模方法及系统 | |
KR0158073B1 (ko) | 데이터 처리장치 | |
JPH09274630A (ja) | Icカードによる図書管理方法 | |
Cuadra et al. | The Goupil Stock Books Project | |
JP2009086835A (ja) | チラシ・カタログ類の作成作業支援装置 | |
JP2004110182A (ja) | データ変換装置およびデータ変換方法およびデータ変換プログラム | |
JP7445555B2 (ja) | 書類ナビゲーション装置、書類ナビゲーション方法、および、書類ナビゲーションプログラム | |
JP4262495B2 (ja) | 業務システムパラメータ設定方法及び業務システムパラメータ設定システム | |
JP3298102B2 (ja) | Posレジスタ装置 | |
JP2001319046A (ja) | 不動産担保物件管理方法、及び不動産担保物件管理装置、並びに不動産担保物件管理プログラムを記録した記録媒体。 | |
JPH06332927A (ja) | データ処理装置 | |
Wilson et al. | Storing and Filing Information: Databases | |
EP0358860B1 (en) | Apparatus and method for processing data corresponding to labels | |
Alexander | The Excel Analyst's Guide to Access | |
CN1041838A (zh) | 数据处理装置 | |
JPH1153399A (ja) | 医療材料データベースの検索システム | |
JPH06282367A (ja) | データ入力方法 | |
Abraham | Coding a customers information system for EDP use |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant |