KR20110066657A - Wap 스크래핑 방법 및 시스템 - Google Patents
Wap 스크래핑 방법 및 시스템 Download PDFInfo
- Publication number
- KR20110066657A KR20110066657A KR1020090123400A KR20090123400A KR20110066657A KR 20110066657 A KR20110066657 A KR 20110066657A KR 1020090123400 A KR1020090123400 A KR 1020090123400A KR 20090123400 A KR20090123400 A KR 20090123400A KR 20110066657 A KR20110066657 A KR 20110066657A
- Authority
- KR
- South Korea
- Prior art keywords
- scraping
- wap
- proxy server
- data packet
- data
- Prior art date
Links
- 238000007790 scraping Methods 0.000 title claims abstract description 155
- 238000000034 method Methods 0.000 title claims abstract description 17
- 238000010295 mobile communication Methods 0.000 claims description 17
- 238000010586 diagram Methods 0.000 description 6
- 238000004891 communication Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000013500 data storage Methods 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W88/00—Devices specially adapted for wireless communication networks, e.g. terminals, base stations or access point devices
- H04W88/02—Terminal devices
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/04—Protocols specially adapted for terminals or networks with limited capabilities; specially adapted for terminal portability
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W80/00—Wireless network protocols or protocol adaptations to wireless operation
- H04W80/08—Upper layer protocols
- H04W80/12—Application layer protocols, e.g. WAP [Wireless Application Protocol]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W88/00—Devices specially adapted for wireless communication networks, e.g. terminals, base stations or access point devices
- H04W88/18—Service support devices; Network management devices
- H04W88/182—Network node acting on behalf of an other network entity, e.g. proxy
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Business, Economics & Management (AREA)
- Tourism & Hospitality (AREA)
- General Health & Medical Sciences (AREA)
- Marketing (AREA)
- Primary Health Care (AREA)
- Strategic Management (AREA)
- Physics & Mathematics (AREA)
- General Business, Economics & Management (AREA)
- General Physics & Mathematics (AREA)
- Human Resources & Organizations (AREA)
- Theoretical Computer Science (AREA)
- Economics (AREA)
- Health & Medical Sciences (AREA)
- Mobile Radio Communication Systems (AREA)
Abstract
본 발명은 WAP 스크래핑 방법 및 시스템에 관한 것으서, 그 WAP 스크래핑 방법은, WAP 스크래핑 엔진이 이동통신사의 프록시서버 주소를 헤더의 소정 위치에 삽입하고, 스크래핑 명령어를 포함하는 WAP 스크래핑 데이터 패킷을 생성하여 프록시 서버로 전송하는 단계; 프록시 서버가 데이터 패킷의 헤더정보를 디코딩하여 프록시 서버 주소를 체크하여 일치하면, WAP 스크래핑 데이터 패킷의 바디(BODY)에 있는 URL 정보를 찾아내어 해당 URL로 접속되게 하는 단계; 데이터 패킷의 바디에 있는 명령어에 따라 WAP 페이지를 스크래핑하여 스크래핑된 데이터가 포함된 바디와 프락시서버 주소가 포함된 헤더를 포함하여 이루어진 데이터 패킷을 상기 프록시 서버가 수신하는 단계; 프록시 서버는 데이터 패킷의 헤더를 체크하여 프록시서버 주소를 추출하여 자신의 주소와 일치하면 데이터 패킷을 WAP 스크래핑 엔진에게 전송하는 단계; 및 WAP 스크래핑 엔진은 데이터패킷을 파싱해서 유저 화면에 디스플레이하는 단계를 포함하는 것을 특징으로 한다.
본 발명에 의하면, 용자가 원하는 공간에서 컴퓨터 없이 휴대 단말기를 통해 WAP 스크래핑을 통해 원하는 정보를 스크래핑할 수 있게 하여 사용자에게 편리성을 가져다 주고 공간의 제약을 받지 않게 한다.
Description
본 발명은 스크래핑에 관한 것으로서, 특히 휴대 단말기를 통한 WAP(wireless application protocol) 스크래핑 방법 및 시스템에 관한 것이다.
일반적으로 스크린 스크래핑이란 인터넷 등 네트워크 상에 다양하게 흩어져 있는 컨텐츠 및 서비스들을 하나로 묶어 고객 중심의 통합된 화면으로 재구성하여 제공하는 웹기술을 말한다. 사용자가 스크린 스크래핑 기술을 이용하여 금융기관별로 분산되어 있는 계좌 정보 등을 통합하기 위해서는 주로 컴퓨터를 활용한다. 그런데, 현재의 스크래핑 기능은 컴퓨터 이외의 공간이나 휴대 단말기에서는 사용하기 어렵다. 사용자는 컴퓨터가 설치되어 있지 않은 장소에서 스크래핑을 이용하여 계좌 통합정보 검색이 어렵고, 모바일을 통해서는 각 금융기관의 계좌마다 접속해야 하는 불편함이 있다. 특히 금융기관별로 아이디(ID)와 패스워드(Password) 등을 그 때 그 때 입력해야 하므로 사용하기에 불편하고, 모바일 인터넷 사용료 등 비용도 많이 발생한다.
본 발명이 해결하고자 하는 과제는 휴대폰에 장착되는 WAP 스크래핑 장치를 제공하는 것이다.
본 발명이 해결하고자 하는 다른 과제는 상기 WAP 스크래핑 장치를 구비하며 휴대단말기를 통해 원하는 정보를 스크래핑할 수 있는 WAP 스크래핑 방법 및 시스템을 제공하는 것이다.
상기 기술적 과제를 이루기 위한 본 발명에 의한 WAP 스크래핑 장치는, 이동통신사 망을 통해 스크래핑을 하는 휴대 단말기에 설치되는 WAP스크래핑 장치에 있어서, 스크래핑하고자 하는 WAP 페이지에 접속하여 WAP 페이지를 스크래핑하고, 상기 스크래핑된 데이터와 이동통신사의 프락시서버 주소를 포함하는 데이터 패킷을 생성하여 상기 프록시 서버로 전송되게 제어하는 스크래핑을 위한 일련의 스크래핑 명령어를 생성하는 스크래핑 명령어 생성부; 이동통신사가 제공하는 서버정보가 기재된 휴대단말기의 WAP 브라우저를 통해 획득한 이동통신사의 프록시서버 주소를 헤더의 소정 위치에 삽입하고, 상기 스크래핑 명령어 생성부에서 생성된 스크래핑 명령어를 포함하는 WAP 스크래핑 데이터 패킷을 생성하는 WAP 스크래핑 데이터 패킷 생성부; 상기 WAP 스크래핑 데이터 패킷을 상기 프록시 서버로 전송하는 패킷전송부; 및 스크래핑된 WAP 페이지 데이터 및 상기 프락시서버 주소를 포함하는 데이터 패킷이 상기 프록시 서버를 통과하면, 상기 프록시 서버를 통과한 데이터 패킷 을 수신하는 패킷수신부; 및 상기 패킷수신부로부터 수신된 스크래핑 데이터를 파싱해서 유저 화면에 디스플레이하는 스크래핑 데이터 제공부를 포함하는 것을 특징으로 한다.
상기 다른 기술적 과제를 이루기 위한 본 발명에 의한 WAP 스크래핑 방법은, WAP(wireless application protocol) 스크래핑 엔진이 이동통신사의 프록시 서버 주소를 헤더의 소정 위치에 삽입하고, 스크래핑 명령어를 포함하는 WAP 스크래핑 데이터 패킷을 생성하는 단계; WAP 스크래핑 엔진이 상기 WAP 스크래핑 데이터 패킷을 상기 프록시 서버로 전송하는 단계; 상기 프록시 서버가 상기 데이터 패킷의 헤더정보를 디코딩하여 프록시 서버 주소를 체크하여 자신의 주소와 일치하면, 상기 WAP 스크래핑 데이터 패킷의 바디(BODY)에 있는 URL 정보를 찾아내어 해당 URL로 접속되게 하는 단계; 상기 URL로 접속되면, 상기 데이터 패킷의 바디(BODY)에 있는 명령어에 따라 WAP 페이지를 스크래핑하는 단계; 상기 스크래핑된 데이터가 포함된 바디와 상기 프락시서버 주소가 포함된 헤더를 포함하여 이루어진 데이터 패킷을 상기 프록시 서버가 수신하는 단계; 상기 프록시 서버는 상기 데이터 패킷의 헤더를 체크하여 프록시서버 주소를 추출하여 자신의 주소와 일치하면 상기 데이터 패킷을 WAP 스크래핑 엔진에게 전송하는 단계; 및 WAP 스크래핑 엔진은 데이터패킷을 파싱해서 유저 화면에 디스플레이하는 단계를 포함하는 것을 특징으로 한다.
상기 기술적 과제를 이루기 위한 본 발명에 의한 WAP 스크래핑 시스템은, WAP 페이지를 스크래핑하는 WAP 스크래핑 엔진이 탑재되어 있는 휴대단말기; WAP 페이지를 제공하는 WAP 서버; 및 이동통신사에 설치되며, 상기 휴대단말기로부터 스크래핑을 위한 데이터 패킷을 수신하여 상기 WAP 서버로 중계하는 프록시 서버를 포함하는 것을 특징으로 한다. 상기 WAP 스크래핑 엔진은 스크래핑하고자 하는 WAP 페이지에 접속하여 WAP 페이지를 스크래핑하고, 상기 스크래핑된 데이터와 상기 프락시서버 주소를 포함하는 데이터 패킷을 생성하여 상기 프록시 서버로 전송되게 제어하는 스크래핑을 위한 일련의 스크래핑 명령어를 생성하는 스크래핑 명령어 생성부; 이동통신사의 프록시 서버 주소를 헤더의 소정 위치에 삽입하고, 상기 스크래핑 명령어 생성부에서 생성된 스크래핑 명령어를 포함하는 WAP 스크래핑 데이터 패킷을 생성하는 WAP 스크래핑 데이터 패킷 생성부; 상기 WAP 스크래핑 데이터 패킷을 상기 프록시 서버로 전송하는 패킷전송부; 및 스크래핑된 WAP 페이지 데이터 및 상기 프락시서버 주소를 포함하는 데이터 패킷이 상기 프록시 서버를 통과하면, 상기 프록시 서버를 통과한 데이터 패킷을 수신하는 패킷수신부; 및 상기 패킷수신부로부터 수신된 스크래핑 데이터를 파싱해서 유저 화면에 디스플레이하는 스크래핑 데이터 제공부를 포함하는 것을 특징으로 한다.
본 발명에 의한 WAP 스크래핑 방법 및 시스템에 의하면, 사용자가 원하는 공간에서 컴퓨터 없이 휴대 단말기를 통해 WAP 스크래핑을 통해 원하는 정보를 스크래핑할 수 있게 하여 사용자에게 편리성을 가져다 주고 공간의 제약을 받지 않게 한다.
이하, 첨부된 도면을 참조로 본 발명의 바람직한 실시예를 상세히 설명하기로 한다. 본 명세서에 기재된 실시예와 도면에 도시된 구성은 본 발명의 바람직한 일 실시예에 불과할 뿐이고, 본 발명의 기술적 사상을 모두 대변하는 것은 아니므로, 본 출원시점에 있어서 이들을 대체할 수 있는 다양한 균등물과 변형예들이 있을 수 있음을 이해하여야 한다.
도 1은 본 발명에 의한 WAP 스크래핑 시스템의 일실시예에 대한 구성을 블록도로 도시한 것으로서, 휴대단말기(100), 프록시 서버(120) 및 WAP서버(140, 160)를 포함하여 이루어진다.
상기 휴대단말기(100)는 WAP 페이지를 스크래핑하는 WAP 스크래핑 엔진(105)이 탑재되어 있으며, 휴대폰이 주로 사용되고 있다.
상기 WAP 서버(140, 160)는 WAP 페이지를 제공하며, 일예로 금융기관의 모바일 뱅킹서버가 WAP 페이지를 제공할 수 있으며, 고객인증처리, 뱅킹 인터페이스, 금융거래 데이터 처리 등을 수행한다.
상기 프록시 서버(120)는 이동통신사에 설치되며, 상기 휴대단말기(100)로부터 스크래핑을 위한 데이터 패킷을 수신하여 상기 WAP 서버(140, 160)로 중계한다. 기존의 유선 웹페이지 방문을 위한 웹 스크래핑은 상기 프록시 서버(120)에 의해 차단되어 이동통신사의 통신망을 이용할 수 없다.
도 2는 상기 WAP 스크래핑 엔진(105)의 보다 상세한 구성을 블록도로 도시한 것으로서, 스크래핑 명령어 생성부(210), WAP 스크래핑 데이터 패킷 생성부(220), 패킷전송부(230), 패킷 수신부(250) 및 스크래핑 데이터 파싱 & 디스플레이부(260) 를 포함하여 이루어지며, 프록시 서버주소 획득부(270)를 더 포함할 수 있다..
상기 스크래핑 명령어 생성부(210)는 WAP 페이지 스크래핑을 위한 일련의 스크래핑 명령어를 생성하며, 상기 스크래핑 명령어는 스크래핑하고자 하는 WAP 페이지에 접속하여 WAP 페이지를 스크래핑하고, 상기 스크래핑된 데이터와 상기 프록시 서버(120)의 주소를 포함하는 데이터 패킷을 생성하여 상기 프록시 서버(120)로 전송되게 제어한다.
상기 WAP 스크래핑 데이터 패킷 생성부(220)는 이동통신사의 프록시 서버 주소를 WAP 스크래핑 데이터 패킷을 구성하고 있는 헤더의 소정 위치에 삽입하고, 상기 스크래핑 명령어 생성부(210)에서 생성된 스크래핑 명령어를 포함하는 WAP 스크래핑 데이터 패킷을 생성한다. 여기서, 상기 프록시 서버 주소는 이동통신사의 연결망을 통과할 때 반드시 필요한 것으로, WAP 브라우즈에 내장된 정보를 통해서 해당 이통사의 프록시서버주소를 파악하고 WAP 스크래핑 엔진(105)에 저장하는 것이 바람직하다. 본 발명의 일실시예에 따르면, 상기 프록시서버 주소 획득을 위해 프록시서버 주소 획득부(270)는 휴대단말기의 WAP 브라우저를 검색하여 프록시 서버 주소를 획득하여 상기 WAP 스크래핑 데이터 패킷 생성부(220)에 전달할 수 있다.
상기 패킷전송부(230)는 상기 WAP 스크래핑 데이터 패킷을 상기 프록시 서버(120)로 전송한다. 상기 WAP스크래핑 데이터 패킷은 상기 프록시 서버(120)를 통과하여 WAP 서버(140, 160)에 전달되어 WAP페이지를 스크래핑한 후 상기 스크래핑된 데이터와 상기 프락시서버 주소를 포함하는 WAP 데이터 패킷이 생성된다.
상기 패킷 수신부(250)는 상기 스크래핑된 데이터를 포함하고 있는 데이터 패킷 데이터 패킷이 상기 프록시 서버(120)를 통과하면, 상기 프록시 서버(120)를 통과한 데이터 패킷을 수신한다.
상기 스크래핑 데이터 파싱&디스플레이부(260)는 상기 패킷수신부(250)로부터 수신된 스크래핑 데이터를 파싱해서 유저 화면에 스크래핑된 데이터를 디스플레이한다.
도 3은 본 발명에 의한 WAP 스크래핑 방법에 대한 일실시예를 흐름도로 도시한 것이다. 먼저, WAP 스크래핑을 하기 전에 휴대단말기(100)의 WAP 브라우저를 검색하여 프록시 서버(120)의 주소를 획득한다.(S300단계) 상기 프록시 서버 주소가 저장되어 있는 페이지는 이동통신사 마다 다를 수 있기 때문에, 예를 들어 환경설정 메뉴 등을 통해 프록시 서버 주소를 알 수 있다.
그리고 나서, WAP(wireless application protocol) 스크래핑 엔진이 이동통신사의 프록시 서버 주소를 헤더의 소정 위치에 삽입하고, 스크래핑 명령어를 포함하는 WAP 스크래핑 데이터 패킷을 생성한다.(S310단계) 여기서 데이터 패킷을 이동통신사의 통신망으로 보낼 때 상기 데이터 패킷에는 프록시 서버의 주소를 포함되어 있어야 상기 데이터 패킷이 이동통신사의 프록시 망을 지날 때 에러가 발생하지 않는다.
WAP 스크래핑 엔진(105)이 상기 WAP 스크래핑 데이터 패킷을 상기 프록시서버(120)로 전송한다.(S310단계)
상기 프록시 서버(120)가 상기 데이터 패킷을 받아 헤더의 해당 섹션 정보를 디코딩하여 프록시 서버 주소를 체크하여 자신의 주소와 일치하면(S320단계), 상기 WAP 스크래핑 데이터 패킷의 바디(BODY)에 있는 WAP 서버의 URL 정보를 찾아내어 해당 URL로 접속되게 한다.(S330단계) 상기 URL로 접속되면, 상기 데이터 패킷의 바디(BODY)에 있는 명령어에 따라 WAP 페이지를 스크래핑한다.(S330단계)
상기 스크래핑된 데이터가 포함된 바디와 상기 프락시서버 주소가 포함된 헤더를 포함하여 이루어진 데이터 패킷을 상기 프록시 서버(120)가 수신하면, 상기 프록시 서버(120)는 상기 데이터 패킷의 헤더를 체크하여(S340단계), 프록시서버 주소를 추출하여 자신의 주소와 일치하면(S350단계) 상기 데이터 패킷을 WAP 스크래핑 엔진(105)에게 전송한다.(S360단계)
WAP 스크래핑 엔진(105)은 데이터패킷을 파싱해서 유저 화면에 디스플레이한다.(S370단계)
본 발명의 응용예로 WAP 뱅킹을 들 수 있다. 도 4는 본 발명이 적용될 수 있는 은행의 모바일 뱅킹에 대한 시스템 구성도를 도시한 것으로서, 휴대폰(Show Banking Phone)과 이동통신사(KT)의 WAP Proxy Server간에는 무선망을 통해 데이터 송수신이 이루어지고, 이동통신망의 서버와 은행 간에는 유선망을 이용하여 뱅킹 데이터를 송수신할 수 있다. 이 때 핸드폰으로부터 전송되는 WAP스크래핑 데이터 패킷은 WAP Proxy Server를 통과할려면 헤더의 해당 섹션에 상기 WAP Proxy Sever 주소를 포함하고 있어야 한다. 그리고 도 5는 상기 은행의 모바일 뱅킹에 대한 소프트웨어 아키텍쳐를 도시한 것이다.
본 발명을 이용한 WAP 뱅킹은 다음과 같이 이루어질 수 있다. 먼저 핸드폰의 무선인터넷 연결을 위해 제공되는 접속 버튼을 눌러 무선인터넷에 접속한다. 그러 면 이통사에서 제공하는 WAP 포탈 초기화면이 디스플레이된다. 그리고 나서 금융 메뉴, 모바일 뱅킹 메뉴, WAP 뱅킹을 위한 서비스, 은행들 목록, 해당 은행 선택을 순서대로 선택 및 실행하면 해당 은행 WAP 페이지가 디스플레이된다.
예를 들어 사용자가 자신이 거래하고 있는 농협의 잔액조회를 원하면, 은행 목록에서 농협을 선택하고 농협의 WAP 페이지가 디스플레이되면, 자신의 계좌번호와 계좌비밀번호를 입력한다. 그리고 나서 예금조회 버튼을 누르면, 상술한 본 발명에 의한 WAP스크래핑 시스템 및 방법에 의해 자신의 계좌에 대한 잔액 데이터가 디스플레이된다.
여기서 상기 WAP 스크래핑을 보다 자세히 설명하면 다음과 같다. 먼저 WAP 스크래핑 엔진(105)이 핸드폰에 설치되어 있어야 한다. 사용자 인터페이스 화면에 있는 WAP 스크래핑 메뉴버튼을 누르면, WAP 스크래핑 엔진(105)이 구동된다. 고객이 원하는 데이터를 스크래핑하기 위해 일련의 스크래핑 명령어가 생성되는데, 사용자인터페이스를 통해 스크래핑 사항을 미리 정해 입력할 수 있도록 제공하는 것이 바람직하다. 스크래핑을 위한 기본 데이터를 사용자 인터페이스로부터 입력 받으면, WAP 스크래핑 엔진(105)이 데이터를 읽어 스크래핑을 수행한다.
보다 자세히 설명하면, WAP 스크래핑 엔진(105)이 사용자가 입력한 계좌번호, 계좌비밀번호를 가지고 이동통신사 망의 프록시 서버(120)에 접속한다. 해당 금융기관, 예를 들어 농협에 WAP 페이지 중 잔액조회 페이지에 가서 금융기관의 WAP서버와 통신을 한 후 응답 WAP 페이지를 스크래핑한다. 그리고 나서 상기 스크래핑된 데이터가 포함된 바디와 상기 프락시서버 주소가 포함된 헤더를 포함하여 이루어진 데이터 패킷이 생성되고, 상기 데이터 패킷이 프록시 서버(120)를 통과하여 패킷수신부(250)을 통해 수신되면 스크래핑 데이터 파싱&디스플레이부(260)에 의해 필요한 데이터만 파싱해서 사용자에게 보여준다.
본 발명은 컴퓨터로 읽을 수 있는 기록 매체에 컴퓨터(정보 처리 기능을 갖는 장치를 모두 포함한다)가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록 매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록 장치를 포함한다. 컴퓨터가 읽을 수 있는 기록 장치의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광데이터 저장장치 등이 있다.
본 발명은 도면에 도시된 실시예를 참고로 설명되었으나 이는 예시적인 것에 불과하며, 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호 범위는 첨부된 등록청구범위의 기술적 사상에 의해 정해져야 할 것이다.
도 1은 본 발명에 의한 WAP 스크래핑 시스템의 일실시예에 대한 구성을 블록도로 도시한 것이다.
도 2는 WAP 스크래핑 엔진의 보다 상세한 구성을 블록도로 도시한 것이다.
도 3은 본 발명에 의한 WAP 스크래핑 방법에 대한 일실시예를 흐름도로 도시한 것이다.
도 4는 본 발명이 적용될 수 있는 은행의 모바일 뱅킹에 대한 시스템 구성도를 도시한 것이다.
도 5는 은행의 모바일 뱅킹에 대한 소프트웨어 아키텍쳐를 도시한 것이다.
Claims (7)
- WAP(wireless application protocol) 스크래핑 엔진이 이동통신사의 프록시 서버 주소를 헤더의 소정 위치에 삽입하고, 스크래핑 명령어를 포함하는 WAP 스크래핑 데이터 패킷을 생성하는 단계;WAP 스크래핑 엔진이 상기 WAP 스크래핑 데이터 패킷을 상기 프록시 서버로 전송하는 단계;상기 프록시 서버가 상기 데이터 패킷의 헤더정보를 디코딩하여 프록시 서버 주소를 체크하여 자신의 주소와 일치하면, 상기 WAP 스크래핑 데이터 패킷의 바디(BODY)에 있는 URL 정보를 찾아내어 해당 URL로 접속되게 하는 단계;상기 URL로 접속되면, 상기 데이터 패킷의 바디(BODY)에 있는 명령어에 따라 WAP 페이지를 스크래핑하는 단계;상기 스크래핑된 데이터가 포함된 바디와 상기 프락시서버 주소가 포함된 헤더를 포함하여 이루어진 데이터 패킷을 상기 프록시 서버가 수신하는 단계;상기 프록시 서버는 상기 데이터 패킷의 헤더를 체크하여 프록시서버 주소를 추출하여 자신의 주소와 일치하면 상기 데이터 패킷을 WAP 스크래핑 엔진에게 전송하는 단계; 및상기 WAP 스크래핑 엔진은 데이터패킷을 파싱해서 유저 화면에 디스플레이하는 단계를 포함하는 것을 특징으로 하는 WAP스크래핑 방법.
- 제1항에 있어서, 상기 프록시 서버 주소는프록시서버 정보가 기재된 휴대단말기의 브라우저를 통해 획득되는 것을 특징으로 하는 WAP스크래핑 방법.
- 제1항에 있어서, 상기 WAP 스크래핑 데이터 패킷 생성 단계는WAP 스크랩핑 엔진이 휴대단말기의 브라우저를 검색하는 단계; 및상기 브라우저에서 프록시서버 정보를 획득하는 단계를 더 포함하는 것을 특징으로 하는 WAP스크래핑 방법.
- WAP 페이지를 스크래핑하는 WAP 스크래핑 엔진이 탑재되어 있는 휴대단말기;WAP 페이지를 제공하는 WAP 서버; 및이동통신사에 설치되며, 상기 휴대단말기로부터 스크래핑을 위한 데이터 패킷을 수신하여 상기 WAP 서버로 중계하는 프록시 서버를 포함하는 것을 특징으로 하고,상기 WAP 스크래핑 엔진은스크래핑하고자 하는 WAP 페이지에 접속하여 WAP 페이지를 스크래핑하고, 상기 스크래핑된 데이터와 상기 프락시서버 주소를 포함하는 데이터 패킷을 생성하여 상기 프록시 서버로 전송되게 제어하는 스크래핑을 위한 일련의 스크래핑 명령어를 생성하는 스크래핑 명령어 생성부;이동통신사의 프록시 서버 주소를 헤더의 소정 위치에 삽입하고, 상기 스크 래핑 명령어 생성부에서 생성된 스크래핑 명령어를 포함하는 WAP 스크래핑 데이터 패킷을 생성하는 WAP 스크래핑 데이터 패킷 생성부;상기 WAP 스크래핑 데이터 패킷을 상기 프록시 서버로 전송하는 패킷전송부; 및스크래핑된 WAP 페이지 데이터 및 상기 프락시서버 주소를 포함하는 데이터 패킷이 상기 프록시 서버를 통과하면, 상기 프록시 서버를 통과한 데이터 패킷을 수신하는 패킷수신부; 및상기 패킷수신부로부터 수신된 스크래핑 데이터를 파싱해서 유저 화면에 디스플레이하는 스크래핑 데이터 제공부를 포함하는 것을 특징으로 하는 WAP스크래핑 시스템.
- 제4항에 있어서, 상기 WAP 스크래핑 엔진은프록시 서버 정보가 기재된 휴대단말기의 WAP 브라우저를 검색하여 프록시 주소를 획득하는 프록시서버 주소 획득부를 더 포함하는 것을 특징으로 하는 WAP스크래핑 시스템.
- 이동통신사 망을 통해 스크래핑을 하는 휴대 단말기에 설치되는 WAP스크래핑 장치에 있어서,스크래핑하고자 하는 WAP 페이지에 접속하여 WAP 페이지를 스크래핑하고, 상기 스크래핑된 데이터와 이동통신사의 프락시서버 주소를 포함하는 데이터 패킷을 생성하여 상기 프록시 서버로 전송되게 제어하는 스크래핑을 위한 일련의 스크래핑 명령어를 생성하는 스크래핑 명령어 생성부;이동통신사가 제공하는 서버정보가 기재된 휴대단말기의 WAP 브라우저를 통해 획득한 이동통신사의 프록시서버 주소를 헤더의 소정 위치에 삽입하고, 상기 스크래핑 명령어 생성부에서 생성된 스크래핑 명령어를 포함하는 WAP 스크래핑 데이터 패킷을 생성하는 WAP 스크래핑 데이터 패킷 생성부;상기 WAP 스크래핑 데이터 패킷을 상기 프록시 서버로 전송하는 패킷전송부; 및스크래핑된 WAP 페이지 데이터 및 상기 프락시서버 주소를 포함하는 데이터 패킷이 상기 프록시 서버를 통과하면, 상기 프록시 서버를 통과한 데이터 패킷을 수신하는 패킷수신부; 및상기 패킷수신부로부터 수신된 스크래핑 데이터를 파싱해서 유저 화면에 디스플레이하는 스크래핑 데이터 제공부를 포함하는 것을 특징으로 하는 WAP 스크래핑 장치.
- 제6항에 있어서,프록시 서버 정보가 기재된 휴대단말기의 WAP 브라우저를 검색하여 프록시 주소를 획득하는 프록시서버 주소 획득부를 더 포함하는 것을 특징으로 하는 WAP스크래핑 시스템.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020090123400A KR101063513B1 (ko) | 2009-12-11 | 2009-12-11 | Wap 스크래핑 방법 및 시스템 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020090123400A KR101063513B1 (ko) | 2009-12-11 | 2009-12-11 | Wap 스크래핑 방법 및 시스템 |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20110066657A true KR20110066657A (ko) | 2011-06-17 |
KR101063513B1 KR101063513B1 (ko) | 2011-09-07 |
Family
ID=44399437
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020090123400A KR101063513B1 (ko) | 2009-12-11 | 2009-12-11 | Wap 스크래핑 방법 및 시스템 |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR101063513B1 (ko) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2021064480A1 (en) * | 2019-10-01 | 2021-04-08 | metacluster lt, UAB | Smart proxy rotator |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20030033434A1 (en) | 2001-08-13 | 2003-02-13 | Sathya Kavacheri | Client aware content scrapping and aggregation in a wireless portal system |
KR100727082B1 (ko) | 2006-08-04 | 2007-06-13 | 주식회사 케이티프리텔 | 모바일 브라우저에서의 무선 인터넷 주소 정보 획득 장치및 방법 |
-
2009
- 2009-12-11 KR KR1020090123400A patent/KR101063513B1/ko active IP Right Grant
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2021064480A1 (en) * | 2019-10-01 | 2021-04-08 | metacluster lt, UAB | Smart proxy rotator |
EP4047905A1 (en) | 2019-10-01 | 2022-08-24 | Metacluster LT, UAB | A system for effectively managing proxy service quality, a computer implemented method and a computer readable medium |
EP4366262A2 (en) | 2019-10-01 | 2024-05-08 | oxylabs, UAB | Smart proxy rotator |
Also Published As
Publication number | Publication date |
---|---|
KR101063513B1 (ko) | 2011-09-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2010165187A (ja) | 電子クーポン処理システム | |
JP2008129635A (ja) | 決済方法および決済代行サーバ | |
WO2020134654A1 (zh) | 一种电子支付方法、装置、系统和存储介质 | |
KR101307578B1 (ko) | 검색 기능이 부여된 대표전화 정보제공시스템 및 그 방법 | |
CN104158789A (zh) | 一种支付类网站的安全性检测方法及装置 | |
JP5186135B2 (ja) | 対面アフェリエイトシステム | |
KR101070053B1 (ko) | Url을 이용하여 검색 광고를 제공하는 방법 및 그방법을 채용한 시스템 | |
CN104182402A (zh) | 浏览器界面地址栏输入控制方法及系统 | |
KR101537555B1 (ko) | 인스턴트 메신저 상의 메시지 바로 검색 지원 방법 | |
KR101063513B1 (ko) | Wap 스크래핑 방법 및 시스템 | |
JP5404485B2 (ja) | 端末における身元情報カードの表示方法、端末及びプログラム | |
CN102202139A (zh) | 一种互联网搜索方法、搜索设备及搜索系统 | |
KR100644411B1 (ko) | 웹 사이트 인증 정보 제공 방법 및 장치 | |
KR100834128B1 (ko) | 게시물을 이용한 광고 서비스 방법 및 그 시스템 | |
US20040148337A1 (en) | System and method for enabling communication between a web browser and a software agent infrastructure | |
KR20200005248A (ko) | 소셜 네트워크 서비스를 이용한 개인 판매몰 자동 생성 방법 및 시스템 | |
KR20150047971A (ko) | 통합 티켓 서비스를 위한 방법 및 장치, 이를 위한 통합 티켓 서비스 시스템 | |
KR101493015B1 (ko) | 마우스 이벤트 기반 가치 제공을 위한 광고 출력 방법 | |
KR101033146B1 (ko) | 무선 인터넷 광고 서비스 시스템 및 방법 | |
JP2017117351A (ja) | ライフイベント情報収集システム | |
EP2061207A1 (en) | Method for processing settlement by VoIP terminal and recording medium | |
KR101016617B1 (ko) | 웹서버 접속 브라우저의 실시간 원격 판별 방법 | |
TW554273B (en) | Global data network using existing wireless infrastructures | |
KR102141061B1 (ko) | 사용자 장치와 서비스 제공 장치, 그 제어 방법 및 컴퓨터 프로그램이 기록된 기록 매체 | |
JP2002032286A (ja) | 携帯電話を利用したファイル取得システムおよびその取得方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20140724 Year of fee payment: 6 |