KR20160133677A - 공간 크라우드소싱 데이터의 신뢰성 향상을 위한 프로그래밍 기반 동적 자동 검증 시스템 - Google Patents

공간 크라우드소싱 데이터의 신뢰성 향상을 위한 프로그래밍 기반 동적 자동 검증 시스템 Download PDF

Info

Publication number
KR20160133677A
KR20160133677A KR1020150066507A KR20150066507A KR20160133677A KR 20160133677 A KR20160133677 A KR 20160133677A KR 1020150066507 A KR1020150066507 A KR 1020150066507A KR 20150066507 A KR20150066507 A KR 20150066507A KR 20160133677 A KR20160133677 A KR 20160133677A
Authority
KR
South Korea
Prior art keywords
task
crowd
space
verification
crowd sourcing
Prior art date
Application number
KR1020150066507A
Other languages
English (en)
Inventor
이충호
이성호
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to KR1020150066507A priority Critical patent/KR20160133677A/ko
Publication of KR20160133677A publication Critical patent/KR20160133677A/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F15/00Digital computers in general; Data processing equipment in general
    • G06F15/16Combinations of two or more digital computers each having at least an arithmetic unit, a program unit and a register, e.g. for a simultaneous processing of several programs
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3664Environments for testing or debugging software

Abstract

본 발명은 공간 크라우드소싱 플랫폼에 관한 것으로, 공간 크라우드소싱 데이터를 검증하는 기술에 관한 것이다.
본 발명의 일면에 따른 공간 크라우드소싱 데이터의 신뢰성 향상을 위한 프로그래밍 기반 동적 자동 검증 시스템은 크라우드소싱 서비스 생성 요청 신호를 전송하는 태스크 요청 장치 및 요청 신호에 따라 생성된 태스크를 참여자 모바일 장치로 배포하고, 참여자 모바일 장치로부터 수신한 센서 데이터에 대한 후 처리를 수행하여, 크라우드소싱 데이터를 저장하는 크라우드센싱 서버를 포함하고, 크라우드센싱 서버는 태스크 검증 도구로서 공간 제약 조건, 시간 제약 조건 및 위상 제약 조건에 기초하여 해당 태스크에 대한 검증을 수행하되, 해당 태스크 검증에 대하여 제공되는 프로그램 소스에 따라 스크립트 기반으로 생성된 시공간 제약을 이용하여 태스크 결과값을 검증하는 것을 특징으로 한다.

Description

공간 크라우드소싱 데이터의 신뢰성 향상을 위한 프로그래밍 기반 동적 자동 검증 시스템{DYNAMIC AUTO VERIFICATION SYSTEM FOR IMPROVING RELIABILITY OF CROWDSOURCING DATA BASED ON PROGRAMMING}
본 발명은 공간 크라우드소싱 플랫폼에 관한 것으로, 공간 크라우드소싱 데이터를 검증하는 기술에 관한 것이다.
크라우드소싱은 대중(crowd)과 외부 자원 활용(outsourcing)의 합성어로서, 생산, 서비스 등의 활동에 있어 대중을 참여시키는 것으로, 문제 해결을 위한 시간과 비용을 절감하고 문제 해결의 폭을 넓히는 데 그 목적이 있다.
종래 기술에 따른 크라우드소싱 플랫폼에서 태스크의 결과를 검증하는 방법은 태스크 작업자의 신뢰도로 데이터의 품질을 예측하는 간접적인 방법이거나, 테스트 태스크를 수행하게 함으로써 작업자의 작업 비용이 증가하는 등의 문제점이 있어, 크라우드소싱 데이터의 품질을 신뢰성 있게 검증하는 것이 어려운 문제점이 있다.
본 발명은 전술한 문제점을 해결하기 위하여 제안된 것으로, 크라우드 소싱을 통해 개별 작업자가 수행한 태스크의 결과인 공간 크라우드소싱 데이터 중, 프로그래밍에 의한 시공간 제약조건 생성을 통하여 동적으로 신뢰성 있는 데이터를 추출하는 것이 가능한 프로그래밍 기반 동적 자동 검증 시스템을 제공하는 데 목적이 있다.
본 발명의 일면에 따른 공간 크라우드소싱 데이터의 신뢰성 향상을 위한 프로그래밍 기반 동적 자동 검증 시스템은 크라우드소싱 서비스 생성 요청 신호를 전송하는 태스크 요청 장치 및 요청 신호에 따라 생성된 태스크를 참여자 모바일 장치로 배포하고, 참여자 모바일 장치로부터 수신한 센서 데이터에 대한 후 처리를 수행하여, 크라우드소싱 데이터를 저장하는 크라우드센싱 서버를 포함하고, 크라우드센싱 서버는 태스크 검증 도구로서 공간 제약 조건, 시간 제약 조건 및 위상 제약 조건에 기초하여 해당 태스크에 대한 검증을 수행하되, 해당 태스크 검증에 대하여 제공되는 프로그램 소스에 따라 스크립트 기반으로 생성된 시공간 제약을 이용하여 태스크 결과값을 검증하는 것을 특징으로 한다.
본 발명에 따른 공간 크라우드소싱 데이터의 신뢰성 향상을 위한 프로그래밍 기반 동적 자동 검증 시스템은 작업자의 신뢰도를 기반으로 그 결과를 예측하는 종래의 간접적인 태스크 검증 방법에 비하여, 직접적으로 데이터에 대한 품질을 검증하는 것이 가능한 효과가 있다.
또한, 본 발명에 따르면 작업자에게 추가적으로 작업 부담을 주지 않고, 태스크의 특성 및 예상 결과를 가장 잘 알고 있는 태스크 생성자로 하여금 스크립트 기반 프로그래밍을 이용하여 데이터를 검증할 수 있도록 지원함으로써, 태스크 검증의 정확도가 증가하고 크라우드소싱 플랫폼의 신뢰도를 높이는 효과가 있다.
본 발명의 효과는 이상에서 언급한 것들에 한정되지 않으며, 언급되지 아니한 다른 효과들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.
도 1은 본 발명의 실시예에 따른 공간 크라우드소싱 데이터의 신뢰성 향상을 위한 프로그래밍 기반 동적 자동 검증 시스템을 나타내는 전체 구성도이다.
도 2는 본 발명의 실시예에 따른 공간 크라우드소싱 데이터의 신뢰성 향상을 위한 프로그래밍 기반 동적 자동 검증 시스템의 서버 태스크 검증 모듈을 나타내는 세부 구성도이다.
본 발명의 전술한 목적 및 그 이외의 목적과 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다.
그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 이하의 실시예들은 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 목적, 구성 및 효과를 용이하게 알려주기 위해 제공되는 것일 뿐으로서, 본 발명의 권리범위는 청구항의 기재에 의해 정의된다.
한편, 본 명세서에서 사용된 용어는 실시예들을 설명하기 위한 것이며 본 발명을 제한하고자 하는 것은 아니다. 본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다. 명세서에서 사용되는 "포함한다(comprises)" 및/또는 "포함하는(comprising)"은 언급된 구성소자, 단계, 동작 및/또는 소자가 하나 이상의 다른 구성소자, 단계, 동작 및/또는 소자의 존재 또는 추가됨을 배제하지 않는다.
본 발명의 바람직한 실시예를 설명하기에 앞서, 이하에서는 당업자의 이해를 돕기 위하여 본 발명이 제안된 배경을 먼저 살펴보기로 한다.
종래 기술에 따른 크라우드소싱 플랫폼에서 태스크 결과를 검증하는 방법은 작업자가 태스크를 수행하기 전에 테스트 태스크를 수행하게 하는 방법, 동일한 태스크를 여러 작업자가 중복 수행하게 하는 방법, 작업자의 태스크 수행 중의 상황 정보를 모니터링하는 방법 등이 있다.
태스크를 수행하기 전 테스트 태스크를 수행하게 하는 경우, 태스크의 결과를 직접 검증하는 것이 아니고, 작업자의 능력을 검증하는 방법에 불과하므로, 태스크의 결과값을 검증할 수 없으며 작업자의 작업 비용을 증가시키는 문제점이 있다.
동일한 태스크를 여러 작업자가 중복 수행하게 하는 방법은 태스크 결과값을 서로 비교하여 상이한 것을 찾는 것은 가능하나, 해당 결과값에 대한 신뢰도가 높다는 것을 확신할 수 있는 근거는 되지 아니하며, 전술한 테스트 태스크를 수행하게 하는 경우와 마찬가지로 작업자의 작업 비용이 증가되는 문제점이 있다.
작업자의 태스크 수행 중의 상황 정보(작업 시간, 작업 수행 단계 등)을 모니터링하여 비정상적인 작업자의 행동을 검출하여 태스크의 결과를 예측하는 경우, 작업자의 작업 비용이 증가되지는 않으나, 작업자의 신뢰도를 검증하는 간접적인 방법에 불과하며 태스크 결과값을 직접 검증할 수는 없다.
본 발명은 전술한 종래 기술에 따른 문제점을 해결하기 위하여 제안된 것으로서, 태스크 작업자의 신뢰도를 검증하여 테이터의 품질을 예측하는 간접적인 방법이 아니고, 작업자의 추가적인 작업 부담이 없어 작업 비용을 증가시키지 아니하는 크라우드소싱 데이터 품질 검증 기술에 관한 것이다.
즉, 본 발명은 태스크 결과값에 대해 직접 스크립트 기반 프로그래밍을 통해서, 시공간 제약조건을 동적으로 생성하여 체크함으로써 크라우드소싱 데이터의 품질을 검증하는 시스템과 관련한 것으로, 이하에서는 도 1 내지 도 2의 상세한 설명으로 본 발명의 바람직한 실시예를 설명한다.
도 1은 본 발명의 실시예에 따른 공간 크라우드소싱 데이터의 신뢰성 향상을 위한 프로그래밍 기반 동적 자동 검증 시스템을 나타내는 구성도이다.
본 발명의 실시예에 따른 크라우드센싱 플랫폼은 크라우드센싱 서버(100)와, 크라우드센싱 클라이언트(200) 및 태스크 요청 장치(300)를 포함하여 구성되며, 이들 구성은 인터넷 통신망(400)을 통해 연결된다.
본 발명의 실시예에 따른 태스크 요청 장치(300)는 데스크탑 컴퓨터의 태스크 관리자가 크라우드소싱 서비스를 생성을 요청하는 구성이다.
크라우드센싱 서버(100)는 도 1에 도시된 바와 같이 태스크 생성 및 할당 모듈(110), 모바일 태스크 배포 모듈(120), 서버 태스크 실행 모듈(130), 데이터 저장소 모듈(140)을 포함하여 구성된다.
본 발명의 실시예에 따른 태스크 생성 및 할당 모듈(110)은 태스크 요청 장치(300)로부터 태스크 관리자에 의한 크라우드센싱 서비스 생성 요청을 수신하고, 태스크 관리자가 직접 태스크를 설계할 수 있도록 지원한다.
모바일 태스크 배포 모듈(120)은 생성된 태스크 중에서 모바일 장치의 참여자가 수행해야 할 태스크를 배포한다.
서버 태스크 실행 모듈(130)은 모바일 장치에서 업로드된 센서 데이터에 대하여, 서버 단에서 후처리를 수행하는 구성이며, 데이터 저장소 모듈(140)은 크라우드소싱 데이터를 저장하는 구성이다.
본 발명의 실시예에 따른 크라우드센싱 클라이언트(200)는 모바일 장치 상에 크라우드센싱에 참여하는 참여자 또는 작업자가 태스크 데몬(210) 및 샌드박스(230)를 최초 설치한 후, 크라우드센싱 서버(100)의 태스크 생성 및 할당 모듈(110)이 생성하고, 모바일 태스크 배포 모듈(120)로부터 실시간으로 전송 받은 모바일 태스크를 실행한다.
샌드박스(230)는 개별 모바일 태스크(220)를 실행할 수 있는 환경을 제공하며, 각 모바일 태스크(220)는 모바일 장치상에 내장된 센서(240)에 접근하여 센서 데이터를 추출하고, 이에 대한 필터링을 수행한 후, 크라우드센싱 서버(100)로 전송한다.
크라우드센싱 서버(100)의 서버 태스크 실행 모듈(130)은 필터링이 수행되어 전송된 센서 데이터에 대하여 서버 단에서 후 처리를 수행하게 된다.
도 2는 본 발명의 실시예에 따른 공간 크라우드소싱 데이터의 신뢰성 향상을 위한 프로그래밍 기반 동적 자동 검증 시스템의 서버 태스크 검증 모듈을 나타내는 세부 구성도이다.
본 발명의 실시예에 따르면, 태스크 요청 장치(300)를 통하여 태스크 관리자가 태스크를 생성하고, 검증을 수행하기 위한 사용자 인터페이스로서, 태스크 검증 도구(131), 태스크 검증 뷰(132), 태스크 검증 속성(133) 및 스크립트(134)가 제공된다.
태스크 검증 도구(131)는 태스크 검증을 위한 도구를 제공하며, 그 세부 도구로는 도 2에 도시된 바와 같이 공간 제약 조건(Spatial Constraints), 시간 제약 조건(Temporal Constraints), 위상 제약 조건(Topological Constraints)이 포함된다.
공간 제약 조건은 위치와 관련된 정보를 필터링하는 기준이 되고, 시간 제약 조건은 시간과 관련된 정보를 필터링하는 기준이 되며, 위상 제약 조건은 데이터 및 데이터 사이의 위상과 관련된 정보를 필터링하는 기준이 된다.
본 발명의 실시예에 따른 태스크 검증 뷰(132)는 드래그 앤 드랍(Drag and Drop), 파이프라인(Pipeline) 방식의 사용자 인터페이스를 통하여 세부 검증 태스크들의 조합을 구성할 수 있도록 한다.
도 2에 도시된 바와 같이, ST1 서버 태스크에 대하여, 태스크를 검증하기 위한 세부 도구로서 공간, 시간, 위상을 이용하여 검증을 수행하여, 맵 퍼블리싱을 수행한다.
본 발명의 실시예에 따른 태스크 검증 속성(133)은 각 세부 검증 태스크에 대한 세부적인 설정값을 설정할 수 있도록 지원한다.
일례로, 도 2에 도시된 바와 같이, 로케이션 필터를 통하여 공간 제약 조건에 관한 세부적인 설정값으로서 포인트(127.29, 36.12), 버퍼링 10킬로미터를 설정한다.
스크립트(134)는 태스크 검증 뷰(132)에서 작성되는 전체 태스크에 대한 프로그램 소스 코드를 보여주며, 스크립트 언어에 익숙한 전문가를 위하여 제공되는 구성이다.
본 발명의 실시예에 따르면, 직접적인 크라우드소싱 데이터에 대한 품질을 검증하는 것이 가능하므로, 작업자의 신뢰도로 결과를 예측하는 종래의 간접적인 태스크 검증 방법에 비하여 검증의 신뢰도가 향상된다.
또한, 별도의 테스트 태스크 수행 또는 동일 태스크에 대한 여러 작업자의 중복 수행을 요구하지 아니하는 바, 작업자의 추가적인 작업 부담을 야기하지 아니하므로 작업 비용의 측면에서 유리한 효과가 있다.
본 발명에 따르면, 태스크 요청 장치를 통해 크라우드소싱 서비스 생성을 요청하고, 크라우드센싱 서버의 태스크 생성 및 할당 모듈을 통하여 생성된 태스크에 대하여, 그 특성 및 예상 결과를 가장 잘 알고 있는 태스크 생성자가 스크립트 기반 프로그래밍을 통해서 태스크 검증 세부 도구로써 시공간 제약조건을 동적으로 생성하여 데이터를 검증하는 것이 가능하므로, 보다 정확한 태스크 검증이 가능한 효과가 있다.
이제까지 본 발명의 실시예들을 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.
100: 크라우드센싱 서버 110: 태스크 생성 및 할당 모듈
120: 모바일 태스크 배포 모듈 130: 서버 태스크 실행 모듈
131: 태스크 검증 도구 132: 태스크 검증 뷰
133: 태스크 검증 속성 134: 스크립트
140: 데이터 저장소 모듈 200: 크라우드센싱 클라이언트
210: 태스크 데몬 220: 모바일 태스크
230: 샌드박스 240: 센서
250, 260: 모바일 장치 300: 태스크 요청 장치
400: 통신망

Claims (1)

  1. 크라우드소싱 서비스 생성 요청 신호를 전송하는 태스크 요청 장치; 및
    상기 요청 신호에 따라 생성된 태스크를 참여자 모바일 장치로 배포하고, 상기 참여자 모바일 장치로부터 수신한 센서 데이터에 대한 후 처리를 수행하여, 크라우드소싱 데이터를 저장하는 크라우드센싱 서버를 포함하고,
    상기 크라우드센싱 서버는 태스크 검증 도구로서 공간 제약 조건, 시간 제약 조건 및 위상 제약 조건에 기초하여 해당 태스크에 대한 검증을 수행하되, 해당 태스크 검증에 대하여 제공되는 프로그램 소스에 따라 스크립트 기반으로 생성된 시공간 제약을 이용하여 태스크 결과값을 검증하는 것
    을 특징으로 하는 공간 크라우드소싱 데이터의 신뢰성 향상을 위한 프로그래밍 기반 동적 자동 검증 시스템.
KR1020150066507A 2015-05-13 2015-05-13 공간 크라우드소싱 데이터의 신뢰성 향상을 위한 프로그래밍 기반 동적 자동 검증 시스템 KR20160133677A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020150066507A KR20160133677A (ko) 2015-05-13 2015-05-13 공간 크라우드소싱 데이터의 신뢰성 향상을 위한 프로그래밍 기반 동적 자동 검증 시스템

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020150066507A KR20160133677A (ko) 2015-05-13 2015-05-13 공간 크라우드소싱 데이터의 신뢰성 향상을 위한 프로그래밍 기반 동적 자동 검증 시스템

Publications (1)

Publication Number Publication Date
KR20160133677A true KR20160133677A (ko) 2016-11-23

Family

ID=57541966

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020150066507A KR20160133677A (ko) 2015-05-13 2015-05-13 공간 크라우드소싱 데이터의 신뢰성 향상을 위한 프로그래밍 기반 동적 자동 검증 시스템

Country Status (1)

Country Link
KR (1) KR20160133677A (ko)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107066322A (zh) * 2017-02-28 2017-08-18 吉林大学 一种面向自组织群智感知系统的在线任务分派方法
WO2019098908A1 (en) * 2017-11-19 2019-05-23 Kk Deliver Limited (Hk) System and method for verification of reliability and validity of crowd sourcing users
KR20190068479A (ko) 2017-12-08 2019-06-18 한국전자통신연구원 크라우드 소싱 기반의 핑거프린트 데이터베이스 업데이트 방법 및 이를 위한 장치
KR101993083B1 (ko) * 2018-02-08 2019-06-25 인하대학교 산학협력단 공간 크라우드소싱 시스템에서 R-Tree 기반의 태스크 관리 방법
WO2021213293A1 (zh) * 2020-04-24 2021-10-28 西北工业大学 一种面向群智感知的泛在操作系统

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107066322A (zh) * 2017-02-28 2017-08-18 吉林大学 一种面向自组织群智感知系统的在线任务分派方法
WO2019098908A1 (en) * 2017-11-19 2019-05-23 Kk Deliver Limited (Hk) System and method for verification of reliability and validity of crowd sourcing users
US10904263B2 (en) 2017-11-19 2021-01-26 Kekeqihuo (Shenzhen) Technologies Co., Ltd. System and method for verification of reliability and validity of crowd sourcing users
US11799873B2 (en) 2017-11-19 2023-10-24 Kekeqihuo (Shenzhen) Technologies Co., Ltd. System and method for verification of reliability and validity of crowd sourcing users
KR20190068479A (ko) 2017-12-08 2019-06-18 한국전자통신연구원 크라우드 소싱 기반의 핑거프린트 데이터베이스 업데이트 방법 및 이를 위한 장치
KR101993083B1 (ko) * 2018-02-08 2019-06-25 인하대학교 산학협력단 공간 크라우드소싱 시스템에서 R-Tree 기반의 태스크 관리 방법
WO2021213293A1 (zh) * 2020-04-24 2021-10-28 西北工业大学 一种面向群智感知的泛在操作系统

Similar Documents

Publication Publication Date Title
KR102089284B1 (ko) 클라우드 검증 및 테스트 자동화
KR20160133677A (ko) 공간 크라우드소싱 데이터의 신뢰성 향상을 위한 프로그래밍 기반 동적 자동 검증 시스템
US9547579B1 (en) Method and apparatus for automatically detecting defects
US20140282421A1 (en) Distributed software validation
EP3365791B1 (en) Techniques for determining client-side effects of server-side behavior using canary analysis
US9294464B2 (en) Automatic authorization of users and configuration of software development environment
EP2769304B1 (en) Telemetry file hash and conflict detection
RU2014115456A (ru) Система и способ распределения задач антивирусной проверки между виртуальными машинами в виртуальной сети
CN106612204B (zh) 业务校验方法及装置
US9170924B2 (en) Ecosystem certification of a partner product
CN110659202A (zh) 客户端自动化测试方法及装置
US20140298107A1 (en) Dynamic Near Real-Time Diagnostic Data Capture
JP2021518026A (ja) エントロピ値に基づいて性能を判定するシステム
CN112463588A (zh) 一种自动化测试系统及方法、存储介质、计算设备
CN106294114A (zh) 一种代码覆盖率获取方法、服务器及待测应用装置
KR20150025106A (ko) 애플리케이션 검증결과 모니터링 서비스를 위한 검증장치, 단말장치, 시스템, 방법 및 컴퓨터로 판독 가능한 기록 매체
US8881112B2 (en) Quality measure tool for a composite application
CN111221727A (zh) 测试方法、装置、电子设备和计算机可读介质
CN109522202B (zh) 一种软件测试的方法和装置
CN111949548A (zh) 一种自动化越权渗透测试方法和存储设备
KR101527745B1 (ko) 객체 추출 기반의 어플리케이션 검증 방법 및 그 장치
KR20060114660A (ko) 장치관리 시스템 및 그 시스템에서의 장치관리 스케줄링방법
US8561132B2 (en) Access control apparatus, information management apparatus, and access control method
CN107872493B (zh) 一种信息处理方法、终端和服务器
CN114462003A (zh) 多类型测试环境下的服务器用户权限控制方法及装置