KR101444466B1 - 원격 통신 엔드포인트 - Google Patents
원격 통신 엔드포인트 Download PDFInfo
- Publication number
- KR101444466B1 KR101444466B1 KR1020080120852A KR20080120852A KR101444466B1 KR 101444466 B1 KR101444466 B1 KR 101444466B1 KR 1020080120852 A KR1020080120852 A KR 1020080120852A KR 20080120852 A KR20080120852 A KR 20080120852A KR 101444466 B1 KR101444466 B1 KR 101444466B1
- Authority
- KR
- South Korea
- Prior art keywords
- endpoint
- waveform
- packet stream
- quality indication
- media
- Prior art date
Links
- 238000000034 method Methods 0.000 claims abstract description 20
- 238000004891 communication Methods 0.000 claims description 26
- 230000005540 biological transmission Effects 0.000 abstract description 11
- 230000007246 mechanism Effects 0.000 description 8
- 238000010586 diagram Methods 0.000 description 6
- 230000032258 transport Effects 0.000 description 6
- 230000006735 deficit Effects 0.000 description 3
- 238000005562 fading Methods 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 230000015556 catabolic process Effects 0.000 description 2
- 230000001413 cellular effect Effects 0.000 description 2
- 238000006731 degradation reaction Methods 0.000 description 2
- 238000011156 evaluation Methods 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 241001620634 Roger Species 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 230000001143 conditioned effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000015541 sensory perception of touch Effects 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/12—Systems in which the television signal is transmitted via one channel or a plurality of parallel channels, the bandwidth of each channel being less than the bandwidth of the television signal
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L1/00—Arrangements for detecting or preventing errors in the information received
- H04L1/20—Arrangements for detecting or preventing errors in the information received using signal quality detector
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
- G10L25/69—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for evaluating synthetic or decoded voice signals
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Quality & Reliability (AREA)
- Computer Networks & Wireless Communication (AREA)
- Multimedia (AREA)
- Telephonic Communication Services (AREA)
- Detection And Prevention Of Errors In Transmission (AREA)
- Dc Digital Transmission (AREA)
- Mobile Radio Communication Systems (AREA)
Abstract
제 2 엔드포인트가 만족할 정도의 파형 품질로 제 1 엔드포인트의 패킷 스트림 송신을 수신하고 있음을 제 1 원격 통신 엔드포인트가 보장할 수 있도록 하는 장치 및 방법이 개시된다. 제 2 엔드포인트가 패킷 스트림을 수신할 때, 스트림으로부터 매체 파형을 디코딩하고, 그 파형을 제 2 패킷 스트림으로 다시 인코딩하며, 제 2 스트림 내의 패킷의 일부 또는 전부를 제 1 엔드포인트로 다시 송신한다. 그 다음에 제 1 엔드포인트는 제 2 스트림 내의 수신된 파형을 디코딩하고 이를 제 1 엔드포인트로 송신된 최초의 파형과 비교한다. 비교에 기초하여, 제 1 엔드포인트는 품질 표시의 값을 조정하고, 이 품질 표시를 사용자 및 제 2 엔드포인트에 제공한다. 유리하게는, 제 1 엔드포인트에서의 사용자는 제 1 엔드포인트의 사용자가 수신하고 이해하도록 의도된 파형에 수신된 파형이 실제로 충분히 근접하는지를 판정할 수 있다.
Description
본 발명은 전반적으로 원격 통신에 관한 것으로서, 보다 구체적으로, 제 1 원격 통신 엔드포인트에 의해 인코딩되는 매체 파형이 제 2 원격 통신 엔드포인트에 의해 만족할 정도로 수신되는지를 검증하는 것에 관한 것이다.
사람들은 서로 간에 거리를 두어 통신할 때, 가입자가 서로 간에 들리는지 여부에 대한 불확실성이 존재한다. 불확실성은 가입자 사이의 전송 경로에서 존재하는 노이즈 또는 다른 형태의 손상에 기인할 수 있다. 무선 통신에서, 예를 들어, 손상은 공동 채널 간섭, 레일레이 페이딩, 열 잡음 등의 형태로 생성될 수 있다. 심지어 무선 링크가 존재하지 않는 지상 통신에서도, 손상은 에코우, 트랜스코딩 에러, 패킷 손실 등의 형태로 또한 생성될 수 있다.
성공적인 통신을 성취함에 있어 불확실성은 통신의 임의의 한 형태에 대해 고유하지 않다. 이것은, 예를 들어, 가입자가 통상 청취하는 것을 반복하도록 강요되는 군사, 우주 항공, 또는 공용 서비스를 위한 2중 방식 무선 통신에서 명백하 다. 추가적으로, 통신의 정확성을 명시적으로 승인하고 확인하도록, 가입자는 정보가 수신되는 것을 표시하기 위한 "로저(roger)" 또는 통상 방금 전송된 것이 이해되는지를 표시하기 위한 "복사"와 같은 단어를 사용해야 한다. 심지어 2중 방식 무선 통신의 적응된 형태를 포함하는 셀룰라 원격 통신에서도, 셀룰라 서비스 제공자에 의한 상업 광고는 통상 다른 사람이 자신의 셀 폰을 청취할 수 있는지를 연속적으로 요청하는 서비스 렙(rep)의 셀 폰 사용자 또는 다름 사람을 청취하지 않는 셀 폰 사용자에 의해 초래된 요구의 테마를 특징으로 한다.
통신의 견고함을 향상시키고 다른 사람이 실제로 가입자 자신을 청취하고 있는 통화 상태에서 각각의 가입자를 보장하는데 많은 시도가 소요되어 왔음은 놀라운 것이 아니다. VoIP(Voice over Internet Protocol) 컨텍스트에서, 특히 통신의 견고함을 향상시키는 것을 다루기 위해, 예를 들어, RTCP(Real-time Transport Control Protocol)와 같은 프로토콜이 개발되어 왔다. 특히 RTCP는 엔드포인트 사이에서 음성 또는 다른 매체 정보를 전달하는 RTP(Real-time Transport Protocol) 패킷 스트림에 대해 대역 이외의 제어 정보를 제공한다. RTCP는 VoIP 호출 동안 거래된 것과 같은 스트리밍 멀티미디어 세션에서 가입자에게 제어 패킷을 주기적으로 송신하도록 사용되는 것으로 의도된다. RTCP의 주요 기능은 송신된 RTP 패킷 스트림에 대해 제공되는 서비스의 품질 상에서 피드백을 제공하는 것이다. 패킷 스트림의 수신 엔드포인트는 수신 엔드포인트에 의해 경험되는 서비스의 품질을 보고하기 위해, RTCP 패킷을 송신 엔드포인트에 다시 송신할 수 있다.
RTCP와 같이, 종래 기술에서 프로토콜의 일부에 의존하는 문제점은 대역폭, 에러 레이트 및 레이턴시의 특성에 관련되고, 엔드포인트가 데이터 패킷 및 비트를 얼마나 양호하게 수신하고 있는지를 특징짓는 서비스 품질 상에서 피드백을 제공하는 것과 주로 관련된다. 그러나, RTCP는 상대적으로 새로운 개념의 매체 파형 품질을 다루어야 하는 아날로그 도메인에서 측정되는 신호 품질 상에서 보고하는 메커니즘을 제공하지 않는다.
매체 파형 품질은 비즈니스, 오디오 왜곡, 노이즈, 페이딩, 크로스토크, 에코우 및 비디오 왜곡의 특성과 관련되며, 이들로만 제한되지 않는다. 즉, 파형 품질은 서비스의 품질과 상이한 신호 특성과 관련된다. 예를 들어, 수신 엔드포인트는 채택 가능한 서비스 품질에서의 수신 패킷일 수 있으나, 아날로그 도메인에 도입되는 손상으로 인해, 채택 불가능한 파형 품질에서의 기본 매체 파형을 수신할 수도 있다. 이러한 하나의 아날로그 손상은 하나의 포맷으로부터 다른 포맷으로 스피치(speech) 신호를 즉시 변환하는 스피치 트랜스코더에 의해 도입되는 것이다.
또한, 수신 엔드포인트, 또는 보다 구체적으로 사용자가 채택 가능한 인지된 파형 품질로 매체 파형을 수신하고 있다 하더라도, 수신자는 수신되고 디코딩된 파형이 여전히 인코딩되고 송신된 파형과 현저하게 상이하다는 것을 판정하는 것이 불가능할 수 있다. 이것은, 예를 들어, 평가를 위해 또는 법적인 용도로 통화를 기억하는데 사용되는 시스템에서 높은 품질의 오디오를 송신할 때 중요할 수 있다. 즉, 수신 가입자에 의해 인지된 바와 같은 채택 가능한 파형 품질을 수신하는 것이 중요할 뿐만 아니라, 수신 가입자가 청취하고 이해하는 것으로 송신 가입자가 의도하는 것을 수신하는 것이 통상 중요하다.
본 발명은 제 2 엔드포인트가 만족할 정도의 파형 품질로 제 1 엔드포인트의 패킷 스트림 송신을 수신하고 있음을 제 1 원격 통신 엔드포인트가 보장할 수 있도록 한다. 본 발명의 예시적인 실시예에 따르면, 제 2 엔드포인트가 패킷 스트림을 수신할 때, 스트림으로부터 매체 파형을 디코딩하고, 파형을 제 2 패킷 스트림으로 다시 인코딩하며, 제 2 스트림 내의 패킷의 일부 또는 전부를 제 1 엔드포인트로 다시 송신한다. 그 다음에 제 1 엔드포인트는 제 2 스트림 내의 수신된 파형을 디코딩하고 이를 제 1 엔드포인트로 송신된 최초의 파형과 비교한다. 비교에 기초하여, 제 1 엔드포인트는 품질 표시의 값을 조정하고, 이 품질 표시를 사용자 및 제 2 엔드포인트에 제공한다. 이와 같이 행함으로써, 제 1 엔드포인트에서의 사용자는 제 1 엔드포인트의 사용자가 수신하고 이해하도록 의도된 파형에 수신된 파형이 실제로 충분히 근접하는지를 판정할 수 있다.
본 발명은 라운드 트립(round-trip) 품질(즉, 제 1 엔드포인트로부터 제 2 엔드포인트로 진행하고, 역으로 진행하는 것과 연관된 품질)이 적절하면, 원 웨이 트립(one-way-trip) 품질(즉, 제 1 엔드포인트로부터 제 2 엔드포인트로만 진행하는 것과 연관된 품질) 역시 적절해야 한다는 개념에 기초한다. 예시적인 실시예에 따르면, 반대 방향으로 역시 동일한 개념이 동시에 적용되며, 제 2 엔드포인트는 제 1 엔드포인트로부터 수신하는 파형을 제 2 엔드포인트가 제 1 엔드포인트로 송신한 최초의 파형과 비교한다.
본 발명의 예시적인 실시예의 엔드포인트는 제 1 매체 파형 a(t)를 전달하는 제 1 패킷 스트림을 제 2 원격 통신 엔드포인트로 송신하는 송신기 인터페이스와, 제 2 매체 파형 a'(t)를 나타내는 데이터의 제 2 패킷 스트림을 상기 제 2 원격 통신 엔드포인트로부터 수신하는 수신기 인터페이스와, 사전 결정된 특성에 따라 a'(t) 및 a(t)를 비교하고, 이 비교에 기초하여, 제 1 품질 표시의 값을 조정하는 프로세서와, 상기 제 1 품질 표시의 값에 기초하는 상태를 제공하는 사용자 인터페이스를 포함한다.
이상과 같은 본 발명에 의하면, 제 1 원격 통신 엔드포인트에 의해 인코딩되는 매체 파형이 제 2 원격 통신 엔드포인트에 의해 만족할 정도로 수신되는지를 검증하는 것이 가능하게 된다.
도 1은 본 발명의 예시적인 실시예에 따라 원격 통신 시스템(100)의 주요한 구성요소의 블록도를 도시한다. 시스템(100)은 도시된 바와 같이 상호 접속된 원격 통신 엔드포인트(101-1 내지 101-4) 및 원격 통신 전송 네트워크(102)를 포함한 다. 예시적인 실시예가 4개의 원격 통신 엔드포인트를 포함한다 하더라도, 당 분야에서 통상의 지식을 가진 자라면 본 개시 내용을 읽은 후에, 임의의 수의 원격 통신 엔드포인트를 포함하는 본 발명의 다른 실시예를 어떻게 형성하여 사용할지가 명백할 것이다.
원격 통신 엔드포인트(101-m)(m은 1 및 M 사이의 값을 가지며 M은 예시적인 실시예에서 4임)은 호출 동안 교환되는 패킷 스트림을 발신하고/하거나 수신할 수 있는 디바이스이다. 예를 들어, 엔드포인트(101-m)는 데스크세트 전화, 셀룰라 전화, 노트북 컴퓨터, PDA(personal digital computer), 컨퍼런스 브리지(conference bridge) 등일 수 있다. 엔드포인트(101-1 내지 10-M)의 일부 또는 전부는 동일하거나 또는 서로 간에 상이할 수 있으며, 엔드포인트(101-1)는 데스크세트일 수 있고, 엔드포인트(101-2)는 셀 전화일 수 있으며, 엔드포인트(101-3)는 노트북 컴퓨터 상에서의 소프트폰일 수 있고, 엔드포인트(101-4)는 컨퍼런스 브리지일 수 있다.
엔드포인트(101-m)는 원격 통신 전송 네트워크(102)를 통해 호출을 핸들링하고 시스템(100) 내의 다른 엔드포인트와 같은 하나 이상의 다른 디바이스와 음성 및 호출 프로세싱 관련 신호를 교환할 수 있다. 이를 위해, 엔드포인트(101-m)는 IP(Internet Protocol) 데이터 패킷을 다른 디바이스와 교환한다. 그러나, 몇몇 대안거인 실시예에서, 엔드포인트(101-m)는 전송 이전에 정보를 디지털화하지 않는 아날로그 디바이스일 수 있다. 하여간, 당 분야에서 통상의 지식을 가진 자라면 본 명세서를 읽은 후에, 원격 통신 엔드포인트(101-m)를 어떻게 형성하여 사용할지 가 명백할 것이다.
원격 통신 전송 네트워크(102)는 2개 이상의 원격 통신 엔드포인트 사이의 호출과 연관된 패킷 스트림을 트랜스포트하는 네트워크이다. 패킷 스트림은 음성, 비디오 등을 포함말 수 있다. 예시적인 실시예에 따르면, 네트워크(102)는 패킷 스위칭된 인프라스트럭쳐(infrastructure)를 포함한다. 그러나, 당 분야에서 통상의 지식을 가진 자라면 본 명세서를 읽은 후에, 네트워크(102)가 다음을 포함하는 본 발명의 예시적인 실시예를 어떻게 형성하여 사용할지가 명백할 것이다. 즉,
ⅰ. PSTN(Public Switched Telephone Network)
ⅱ. 인터넷
ⅲ. 하나 이상의 다른 원격 통신 네트워크
ⅳ. ⅰ, ⅱ 및 ⅲ의 임의의 결합
또한, 당 분야에서 통상의 지식을 가진 자가 이해하는 바와 같이, 네트워크(102)는 패킷 스트림 표시의 하나의 유형으로부터 다른 유형으로 변환하기 위해, 당 분야에서 알려져 있는 바와 같이, 스피치 트랜스코더 또는 다른 유형의 트랜스코더를 포함할 수 있다.
도 2는 도시된 바와 같이 구성요소가 상호 접속되는 본 발명의 예시적인 실시예에 따른 원격 통신 엔드포인트(101-m)의 주요한 구성요소의 블록도를 도시한다. 예시적인 실시예에 따르면, 원격 통신 엔드포인트(101)는 다음을 포함한다. 즉,
ⅰ. 수신기 인터페이스(201)
ⅱ. 송신기 인터페이스(202)
ⅲ. 프로세서(203)
ⅳ. 메모리(204)
ⅴ. 디스플레이(205)
ⅵ. 라우드스피커(206)
ⅶ. 진동 메커니즘(207)
당 분야에서 통상의 지식을 가진 자라면 본 개시 내용을 읽은 후에, 원격 통신 엔드포인트(101-m)가 상기 리스트된 구성요소의 임의의 결합을 포함하는 본 발명의 대안적인 실시예를 어떻게 형성하여 사용할지가 명백할 것이다.
수신기 인터페이스(201) 및 송신기 인터페이스(202)는 잘 알려진 방식으로, 엔드포인트(101-m)가 네트워크(102)로부터 신호를 수신하고 네트워크(102)로 신호를 송신하도록 할 수 있는 회로를 포함한다. 예시적인 실시예에 따르면, 엔드포인트(101-m)는 잘 알려진 방식으로 ITU-G.729 표준을 통해 인코딩되고 데이터이 VoIP(Voice over Internet Protocol) 패킷 스트림으로 표현되는 매체 파형 신호를 수신하고 송신한다. 당 분야에서 통상의 지식을 가진 자가 이해하는 바와 같이, 몇몇 대안적인 실시예에서 엔드포인트(101-m)는 상이한 포맷으로 인코딩되고/되거나 표현되는 매체 파형 신호를 수신하고 송신한다.
프로세서(203)는 수신기 인터페이스(201)로부터 정보를 수신하고, 메모리(204)에 저장된 인스트럭션을 실행하며, 메모리(204)로부터 데이터를 수신하고 메모리(204)에 데이터를 기입라며, 정보를 송신기 인터페이스(202)에 송신할 수 있 는 범용 프로세서이다. 추가적으로, 프로세서(203)는 디스플레이(205), 라우드스피커(206) 및 진동 메커니즘(207)에 신호를 제공할 수 있다. 본 발명의 몇몇 대안적인 실시예에서, 프로세서(203)는 특수용 프로세서일 수도 있다.
메모리(204)는 잘 알려진 방식으로, 프로세서(203)에 의해 사용된 인스트럭션 및 데이터를 저장한다. 메모리(204)는 동적 랜덤 액세스 메모리(RAM), 플래쉬 메모리, 디스크 드라이브 메모리 등의 임의의 결합일 수 있다.
디스플레이(205)는 엔드포인트(101-m)의 사용자 인터페이스의 일부분이다. 예시적인 실시예에 따르면, 디스플레이(205)는 엔드포인트의 사용자에 상태의 시각적 표시를 제공할 수 있는 액정 디스플레이이다. 당 분야에서 통상의 지식을 가진 자라면 디스플레이(205)가 액정 디스플레이 이외의 것을 포함하는 본 발명의 대안적인 실시예를 어떻게 형성하여 사용할지가 명백할 것이다.
라우드스피커(206)는 엔드포인트(101-m)의 사용자 인터페이스의 다른 부분이다. 예시적인 실시예에 따르면, 라우드스피커(206)는 엔드포인트의 사용자에 상태의 청각적 표시를 제공할 수 있다. 당 분야에서 통상의 지식을 가진 자가 이해하는 바와 같이, 엔드포인트(101-m)의 몇몇 대안적인 실시예에서, 라우드스피커(206)는 그 대신에 이어피스와 같은 라우드스피커 이외의 전자 어쿠스틱 트랜스듀서의 유형일 수 있다. 하여간, 당 분야에서 통상의 지식을 가진 자라면 라우드스피커(206)를 어떻게 형성하여 사용할지가 명백할 것이다.
진동 메커니즘(207)은 엔드포인트(101-m)의 사용자 인터페이스의 또 다른 부분이다. 예시적인 실시예에 따르면, 진동 메커니즘(207)은 엔드포인트의 사용자에 상태의 촉각적 표시를 제공할 수 있다. 당 분야에서 통상의 지식을 가진 자라면 진동 메커니즘(207)을 어떻게 형성하여 사용할지가 명백할 것이다.
예시적인 실시예에 따르면, 엔드포인트(101-m)는 도 3 및 도 4에 대해 이하 기술된 태스크를 수행한다. 당 분야에서 통상의 지식을 가진 자가 이해하는 바와 같이, 엔드포인트(101-m) 내의 각각의 구성요소는 기술된 태스크의 상이한 서브세트를 수행할 수 있다. 예를 들어, 프로세서(203)가 수행할 수 있는 이들 태스크는 수신된 패킷 스트림으로부터의 매체 파형의 디코딩, 송신될 패킷 스트림으로의 매체 파형의 인코딩, 및 제 1 매체 파형의 하나 이상의 사전 결정된 특성과 제 2 매체 파형의 사전 결정된 특성의 비교를 포함한다.
도 3은 본 발명의 예시적인 실시예에 따라 패킷 스트림을 교환하는 것 뿐만 아니라 이들 패킷 스트림의 파형 콘텐츠를 분석하는 것에 관련되는 주요한 메시지 및 태스크를 도시한다. 당 분야에서 통상의 지식을 가진 자가 이해하는 바와 같이, 후속하는 도면에서 나타나는 메시지 및 태스크의 일부는 병렬적으로 또는 표시된 것과 상이한 순서로 수행될 수 있다. 또한, 당 분야에서 통상의 지식을 가진 자라면, 본 발명의 몇몇 대안적인 실시예에서, 표시된 메시지 및 태스크의 서브세트만이 수행된다.
도 3에 도시된 바와 같이, 원격 통신 엔드포인트(101-1 및 101-2)는 데이터의 패킷 스트림을 교환하고 있으며, 이들의 각각은 서로 간의 2중 방식 호출의 일부분으로서, 매체 파형을 나타낸다. 시나리오에 따르면, 엔드포인트(101-1 및 101-2)는 이들 사용자의 음성의 음성 파형을 교환한다. 그러나, 당 분야에서 통상 의 지식을 가진 자가 이해하는 바와 같이, 다른 시나리오에서, 2개 이상의 엔드포인트는 본 명세서에서 기술된 기법에 따라, 다른 유형의 매체를 교환할 수 있다.
엔드포인트(101-1)는 데이터의 패킷 스트림이 엔드포인트(101-1)의 사용자 음성의 파형인 제 1 매체 파형 a(t)를 전달하는 엔드포인트(101-2)에 패킷 스트림(301)을 송신한다.
엔드포인트(101-2)는 패킷 스트림(301)을 수신하고, 태스크(302)에서, 수신된 패킷 스트림으로부터 제 2 매체 파형 a'(t)를 디코딩한다. 제 1 매체 파형과 제 2 매체 파형의 구분은, 제 2 매체 파형이 제 1 매체 파형의 표시로서 간주되지만, 정확한 재생으로서 반드시 보장되지는 않는다는 점에서 중요하다. 보장의 결여는 엔드포인트(101-1) 및 엔드포인트(101-2) 사이의 하나 이상의 손상(예를 들어, 인코딩 에러, 트랜스코딩 에러, 디코딩 에러 등)에 대해 실시되는 제 1 매체 파형으로 인한 것이다.
엔드포인트(101-2)는 태스크(303)에서, 디코딩된 제 2 매체 파형을 데이터의 제 2 패킷 스트림, 즉, 패킷 스트림(304)으로 인코딩하고, 패킷 스트림을 엔드포인트(101-1)에 송신한다. 이것은 엔드포인트(101-1)가 엔드포인트(101-2)에 이미 송신되는 제 1 매체 파형과 비교하기 위한 파형을 갖도록 수행된다.
몇몇 대안적인 실시예에서, 엔드포인트(101-2)는 파형 자체를 인코딩하고 송신하는 대신에, 파형의 표시 모델을 제공하고 송신한다. 몇몇 다른 대안적인 실시예에서, 엔드포인트(101-2)는 해당 데이터를 디코딩하고 인코딩하는 대신에, 패킷 스트림(301)에서 수신된 페이로드 데이터의 일부 또는 전부를 선택하고 페이로드 데이터를 패킷 스트림(304)에 삽입한다.
엔드포인트(101-1)는 패킷 스트림(304)을 수신하고 수신된 패킷 스트림으로부터 제 3 매체 파형을 디코딩한다. 제 1 매체 파형과 제 3 매체 파형의 구분, 또는 제 2 매체 파형과 제 3 매체 파형의 구분은, 제 3 매체 파형이 제 1 매체 파형 또는 제 2 매체 파형의 표시로서 간주되지만, 정확한 재생으로서 반드시 보장되지는 않는다는 점에서 중요하다.
태스크(305)에서, 신호를 디코딩한 후에, 엔드포인트(101-1)는 사전 결정된 특성 또는 특성들에 기초하여, 패킷 스트림(301)의 일부분에 의해 표현되는 제 1 매체 파형과, 패킷 스트림(304)의 일부분에 의해 표현되는 제 3 매체 파형을 비교한다. 비교에 사용된 특성은 다음과 같은 하나 이상을 포함할 수 있다. 즉,
ⅰ. 난청
ⅱ. 오디오 왜곡
ⅲ. 노이즈
ⅳ. 페이딩
ⅴ. 크로스토크
ⅵ. 에코우
ⅶ. 비디오 왜곡(예를 들어, 공간적, 시간적, 광학적 등)
당 분야에서 통상의 지식을 가진 자라면, 2개 이상의 특성이 비교될 수 있고, 앞서 리스트된 다른 특성이 비교될 수 있음을 이해할 것이다. 또한, 실질적인 비교 방법은 상관, 비트 단위의 매핑, 파형을 나타내는 수신된 스피치 또는 음악 모델에 대해 송신된 파형의 평가 등을 수반할 수 있다. 하여간, 당 분야에서 통상의 지식을 가진 자라면 하나 이상의 특성에 기초하여, 다른 파형 또는 해당 다른 파형의 표시(예를 들어, 모델 등)에 대해 어떻게 하나의 파형을 비교할지가 명백할 것이다.
태스크(305)에서 수행된 비교의 결과에 기초하여, 엔드포인트(101-1)는 품질 표시의 값을 조정하고 후속적으로 메시지(306)의 일부분으로서 이들 엔드포인트(101-2)에 송신한다. 예를 들어, 채택 가능한 품질의 표시는 2개의 파형이 채택 가능하게 충분한지를 비교할 때마다 송신될 수 있다. 이것은 임의의 파형 저하가 스트림(301)의 송신 동안이 아니라, 스트림(304)이 송신 동안 발생할 수 있는 가능성에 의해 지시될 수 있으며, 그러한 경우에 채택 가능한 품질의 포지티브(positive) 표시만이 엔드포인트(101-2)에 의해 경험된 파형 품질의 한정적인 설명서를 제공할 것이다.
대안적으로, 채택 불가능한 품질의 표시는 2개의 파형이 채택 불가능하게 비교하지 않을 때마다 송신될 수 있다. 이것은, 예를 들어, 스트림(204)이 손실 없는 인코딩으로 상태 조정된 경로를 통해 송신될 때와 같이, 스트림(204)에 의해 표시된 매체 파형이 저하를 겪지 않을 때에 저절할 수 있다. 하여간, 당 분야에서 통상의 지식을 가진 자라면 비교에 사용된 특성 또는 특성들에 기초하여, 어떻게 채택 가능성의 임계치를 판정할지가 명백할 것이다.
태스크(307)에서, 엔드포인트(101-1)는 사용자 인터페이스(즉, 엔드포인트(101-1)의 디스플레이(205), 라우드스피커(206), 및/또는 진동 메커니즘(207))를 통해, 파형 송신의 상태를 그 사용자에게 제공한다. 상태는 그 값이 태스크(305)에서 조정되는 품질 표시에 기초한다.
엔드포인트(101-1)의 사용자에 대한 프리젠테이션 방법은, 몇몇 실시에에서, 태스크(305)에서 조정된 품질 표시의 값에 의존한다. 또한, 몇몇 다른 실시예에서, 사용자에 대한 프리젠테이션 방법은 사용자가 엔드포인트(101-1)(예를 들어, 핸드세트, 헤드세트, 스피커 등)를 조작하는 오디오 모드에 의존한다. 예를 들어, 엔드포인트가 사용자에 근접하에 유지되는 오디오 모드를 이용하여 사용자가 엔드포인트(101-1)를 조작하면, 품질 상태를 제공하기 위한 목적으로 사용자에 촉각적인 감지를 제공하는데 보다 효과적일 수 있다. 당 분야에서 통상의 지식을 가진 자가 이해하는 바와 같이, 프리젠테이션 방법은 엔드포인트(101-1)의 품질 표시 값, 오디오 모드, 다른 특성, 사용자, 호출, 및/또는 엔드포인트 사이에 교환된 정보의 결합에 기초할 수 있다.
프리젠테이션 방법이 시각적이면, 디스플레이(205)는 상이한 수, 상이한 컬러, 상이한 수의 바(bars), 스마일리(smiley) 안면/프라우닝(frowning) 안면 아이콘 등과 같은 하나 이상의 다양한 포맷으로 품질 표시의 값을 렌더링할 수 있다.
태스크(308)에서 엔드포인트(101-2)는 사용자 인터페이스(즉, 엔드포인트(101-1)의 디스플레이(205) 및/또는 라우드스피커(206))를 통해, 파형 송신의 상태를 그 사용자에게 제공하는 것이다. 상태는 그 값이 메시지(306)에 제공되는 품질 표시에 기초한다.
엔드포인트(101-2)의 사용자(예를 들어, 시각적, 청각적, 촉각적 등)에 대한 프리젠테이션 방법은, 몇몇 실시에에서, 메시지(306)에 제공된 바와 같은 품질 표시의 값에 의존한다. 또한, 몇몇 다른 실시예에서, 사용자에 대한 프리젠테이션 방법은 사용자가 엔드포인트(101-2)를 조작하는 오디오 모드에 의존한다. 당 분야에서 통상의 지식을 가진 자가 이해하는 바와 같이, 프리젠테이션 방법은 엔드포인트(101-2)의 품질 표시 값, 오디오 모드, 다른 특성, 사용자, 호출, 및/또는 엔드포인트 사이에 교환된 정보의 결합에 기초할 수 있다.
몇몇 실시에에서, 엔드포인트(101-1)는 태스크(305)에서 결정된 품질 표시의 값에 기초하여, 순방향으로 진행하는 패킷 스트림(301)에서 단위 시간 당 송신된 비트 수를 조정한다. 예를 들어, 품질 비교가 선호하는 것으로 나타나면, 엔드포인트(101-2)에 송신된 비트 수는, 예를 들어, 스피치 인코딩(즉, 보코딩) 프로세스를 변경함으로써, 파형 품질에 대한 효과가 거의 없이 감소될 수 있다. 당 분야에서 통상의 지식을 가진 자가 이해하는 바와 같이, 송신된 비트 수를 증가시키거나 감소시킬지의 선택 뿐만 아니라 얼마나 많은 비트 수일지는 다른 인자에도 또한 의존할 수 있다.
몇몇 실시에에서, 엔드포인트(101-2)는 메시지(306)에서 수신된 품질 표시의 값에 기초하여, 순방향으로 진행하는 패킷 스트림(304)에서 단위 시간 당 송신된 비트 수를 조정한다. 예를 들어, 품질 비교가 선호하는 것으로 나타너면, 엔드포인트(101-1)에 송신된 비트 수는, 파형 품질에 대한 효과가 거의 없이 감소될 수 있다. 당 분야에서 통상의 지식을 가진 자가 이해하는 바와 같이, 송신된 비트 수를 증가시키거나 감소시킬지의 선택 뿐만 아니라 얼마나 많은 비트 수일지는 다른 인자에도 또한 의존할 수 있다.
호출의 지속 기간에 걸쳐, 엔드포인트(101-1 및 101-2)는 도 3에 대해 기술된 태스크를 연속적으로 수행하고 메시지를 교환한다. 또한, 몇몇 실시에에서, 엔드포인트(101-1 및 101-2)는 상이한 파형 세트에 대해 각각의 다른 것의 역할을 수행한다. 예를 들어, 엔드포인트(101-2)는 수신된 패킷 스트림으로부터 매페 파형 b'(t)를 디코딩하는 엔드포인트(101-1)에 대해 사용자의 음성의 매체 파형 b(t)를 송신한다. 즉, 도 4에 도시된 바와 같이, 엔드포인트(101-1)는 도 3의 엔드포인트(101-2)에 의해 수행되는 태스크를 수행하고, 엔드포인트(101-2)는 도 3의 엔드포인트(101-1)에 의해 수행되는 태스크를 수행한다. 이것은 엔드포인트(101-2)에 의해 송신되는 스트림(401), 엔드포인트(101-1)에 의해 수행되는 태스크(402)에 의해 반영되며, 여기서 태스크(401 내지 408)는 태스크(301 내지 308)에 각각 대응한다.
당 분야에서 통상의 지식을 가진 자가 이해하는 바와 같이, 본 명세서를 읽은 후에, 예시적인 실시예의 원격 통신 엔드포인트는 3중 방식 호출의 일부분으로서, 패킷 스트림을 교한할 뿐만 아니라, 이들 패킷 스트림이 파형 콘텐츠를 분석할 수 있다. 3중 방식 호출(예를 들어, 엔드포인트(101-1, 101-2 및 101-3) 등을 수반함)에서, 엔드포인트(101-1)와 같은 적어도 하나의 엔드포인트는 엔드포인트(101-2 및 101-3)와 같은 2개의 다른 엔드포인트와 패킷 스트림을 교환한다. 그러한 경우에, 엔드포인트(101-1)는 이미 기술된 바와 같은 엔드포인트(101-2)와 연관된 패킷 스트림, 및 엔드포인트(101-3)와 연관된 패킷 스트림에 대해 예시적인 실시예의 기법을 수행한다.
도 5는 네트워크(102) 내에서 스피치 트랜스코더의 존재를 나타내는 원격 통신 시스템(100)의 다른 블록도를 도시한다. 도 3 및 도 4에 도시된 바와 같이, 엔드포인트(101-1 및 101-2)는 서로 통신하고 있다. 교환되는 패킷 스트림은 스피치 트랜스코더(501-1 및 501-2) 및 인프라스트럭쳐(502-1, 502-2 및 502-3)를 포함하는 네트워크(102) 요소를 진행한다. 당 분야에서 통상의 지식을 가진 자가 이해하는 바와 같이, 스피치 트랜스코더는 당 분야에서 알려져 있는 바와 같이, 게이트웨이 노드에 위치할 수 있다. 추가적으로, 도시된 하나 이상의 원격 통신 디바이스(예를 들어, 엔드포인트, 스피치 인코더 등)는 데이터를 집중시키고/시키거나 하나 이상의 원격 통신 디바이스를 제어하는데 사용될 수 있는 서버 또는 다른 디바이스일 수 있는 데이터 프로세싱 디바이스(503)에 품질 표시를 송신할 수 있다.
예시적인 실시예에 따르면, 하나 이상의 도시된 원격 통신 디바이스의 쌍(예를 들어, 엔드포인트(101-1)와 트랜스코더(501-1), 트랜스코더(501-1 및 501-2), 트랜스코더(501-2)와 엔드포인트(101-2) 등)은 도 3 및 도 4에 대해 앞서 기술된 태스크를 수행할 수 있다. 예를 들어, 트랜스코더(501-1 및 501-2)는 서로 간에 패킷 스트림을 교환하고, 이들 스트림의 콘텐츠를 비교하며, 이에 따라 그 특정의 전송 경로 요청에 대해 품질 표시를 조정할 수 있다.
추가적으로, 하나 이상의 도시된 원격 통신 디바이스는 그 품질 표시를 데이터 프로세싱 디바이스(503)에 송신할 수 있다. 몇몇 실시예에서, 디바이스(503)는 디바이스 사이에 교환되는 패킷 스트림을 수정하기 위해, 하나 이상의 디바이스에 메시지를 송신할 수 있다. 예를 들어, 디바이스(503)가 엔드포인트(101-1 및 101-2) 사이에 하나 이상의 전송 경로 세그먼트를 따라 낮은 인코딩 레이트가 충분할 수 있는 것으로 판정하면, 서버는 영향 받은 디바이스가 낮은 비트 레이트로 보코더를 사용하는 것으로 지정할 수 있다. 다른 예로서, 디바이스(503)가 비교를 위해 패킷 스트림을 디바이스에 다시 송신하는데 너무 많은 대역폭이 사용되는 것으로 판정하면, 서버는 대표적인 스피치 모델과 같은 파형을 나타내는데 낮은 비트 레이트를 갖는 표시가 사용되는 것으로 지정할 수 있다.
당 분야에서 통상의 지식을 가진 자라면 본 명세서를 읽은 후에, 엔드포인트(101-m) 또는 디바이스(503)는 적어도 2개의 다른 엔드포인트로 패킷 스트림의 교환 뿐만 아니라 이들 패킷 스트림의 파형 콘텐츠의 분석 및/또는 하나 이상이 다른 디바이스의 후속적인 통지 및 제어를 핸들링하는 컨퍼런스 브리지와 같은 중앙화된 데이터 프로세싱 시스템일 수 있다.
본 개시 내용은 단지 예시적인 실시예의 일례이며 본 개시 내용을 읽은 후에 당 분야에서 통상의 지식을 가진 자라면 본 발명의 다수의 변형예를 용이하게 고안할 수 있으며 본 발명의 범위는 후술하는 청구 범위에 의해 결정된다는 것을 이해해야 한다.
도 1은 본 발명의 예시적인 실시예에 따른 원격 통신 시스템(100)의 주요한 구성요소의 블록도를 도시하고,
도 2는 시스템(100) 내에서 원격 통신 엔드포인트(101-m)의 주요한 구성요소의 블록도를 도시하며,
도 3은 본 발명의 예시적인 실시예에 따라 패킷 스트림을 교환하는 것 뿐만 아니라 이들 패킷 스트림의 파형 콘텐츠를 분석하는 것에 관련되는 주요한 메시지 및 태스크를 도시하고,
도 4는 엔드포인트(101-1 및 101-2)가 역할을 교환하는 도 3에 도시된 주요한 메시지 및 태스크를 도시하며,
도 5는 네트워크(102) 내에서 스피치 트랜스코더의 존재를 나타내는 원격 통신 시스템(100)의 다른 블록도를 도시한다.
도면의 주요 부분에 대한 부호의 설명
101-1, 101-2, 101-3 및 101-4 : 원격 통신 엔드포인트
102 : 원격 통신 전송 네트워크
201 : 수신기 인터페이스
202 : 송신기 인터페이스
203 : 프로세서
204 : 메모리
205 : 디스플레이
206 : 라우드스피커
207 : 진동 메커니즘
Claims (10)
- 제 1 매체 파형을 전달하는 데이터의 제 1 패킷 스트림을 통신 엔드포인트로 송신하는 송신기 인터페이스와,상기 제 1 매체 파형으로부터 도출된 제 2 매체 파형을 나타내는 데이터의 제 2 패킷 스트림을 상기 통신 엔드포인트로부터 수신하는 수신기 인터페이스와,비교를 위하여 사전결정된 특성에 따라 데이터의 상기 제 2 패킷 스트림으로부터 도출된 제 3 매체 파형과 상기 제 1 매체 파형을 비교하고, 상기 비교에 기초하여 품질 표시를 조정하는 프로세서 -상기 품질 표시는 채택 가능한 품질 및 채택 불가능한 품질 중 하나를 나타내며, 상기 제 1 매체 파형은 사용자의 음성을 포함하며, 상기 제 2 매체 파형은 상기 통신 엔드포인트에서 재생된 상기 음성의 재생을 포함하며, 데이터의 상기 제 1 패킷 스트림에서의 단위 시간 당 송신된 비트 수는 상기 품질 표시에 영향받음- 을 포함하는장치.
- 제 1 항에 있어서,상기 송신기 인터페이스는 상기 통신 엔드포인트로 상기 품질 표시를 또한 송신하는장치.
- 제 1 항에 있어서,상기 수신기 인터페이스는 상기 통신 엔드포인트로부터 상기 통신 엔드포인트에 의해 인코딩된 제 4 매체 파형을 전달하는 데이터의 제 3 패킷 스트림을 또한 수신하고,상기 프로세서는 데이터의 상기 제 3 패킷 스트림으로부터 제 5 매체 파형을 디코딩하고, 상기 제 5 매체 파형을 데이터의 제 4 패킷 스트림으로 인코딩하며, 상기 제 5 매체 파형은 상기 제 4 매체 파형으로부터 도출되고,상기 송신기 인터페이스는 데이터의 상기 제 4 패킷 스트림을 상기 통신 엔드포인트로 또한 송신하는장치.
- 제 3 항에 있어서,상기 품질 표시는 제 1 품질 표시이며 상기 비교는 제 1 비교이고,상기 수신기 인터페이스는 상기 통신 엔드포인트로부터 제 2 품질 표시를 또한 수신하고, 상기 제 2 품질 표시는 데이터의 상기 제 4 패킷 스트림으로부터 도출된 제 6 매체 파형과 상기 제 4 매체 파형의 제 2 비교에 기초하는장치.
- 제 1 항에 있어서,상기 품질 표시에 기초하는 상태를 제공하는 사용자 인터페이스를 더 포함하는장치.
- 삭제
- 제 4 항에 있어서,상기 제 2 품질 표시에 기초하는 상태를 제공하는 사용자 인터페이스를 더 포함하는장치.
- 제 1 항에 있어서,상기 품질 표시에 기초하여, 스피치(speech) 인코딩을 변경함으로써 데이터의 상기 제 1 패킷 스트림에서의 단위 시간 당 송신된 비트 수가 조정되는장치.
- 제 1 항에 있어서,데이터의 상기 제 1 패킷 스트림은 상기 장치 및 상기 통신 엔드포인트로부터 물리적으로 분리되는 스피치 트랜스코더를 통과하는장치.
- 제 9 항에 있어서,상기 스피치 트랜스코더는 게이트웨이에 위치하는장치.
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US11/949,615 US7821957B2 (en) | 2007-12-03 | 2007-12-03 | Acknowledgment of media waveforms between telecommunications endpoints |
US11/949,615 | 2007-12-03 |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20090057917A KR20090057917A (ko) | 2009-06-08 |
KR101444466B1 true KR101444466B1 (ko) | 2014-09-24 |
Family
ID=40675602
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020080120852A KR101444466B1 (ko) | 2007-12-03 | 2008-12-02 | 원격 통신 엔드포인트 |
Country Status (4)
Country | Link |
---|---|
US (1) | US7821957B2 (ko) |
KR (1) | KR101444466B1 (ko) |
CN (1) | CN101488828B (ko) |
BR (1) | BRPI0805306A2 (ko) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2209281B1 (de) * | 2009-01-15 | 2018-03-14 | VoIPFuture GmbH | Beurteilung einer VoIP-Paketerzeugung und Paketübertragung und Indikation an den an der VoIP-Kommunikation beteiligten Endpunkten |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004297803A (ja) * | 2003-03-26 | 2004-10-21 | Agilent Technol Inc | ネットワーク内の音質を評価する方法 |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6304567B1 (en) * | 1996-11-26 | 2001-10-16 | Lucent Technologies Inc. | Methods and apparatus for providing voice communications through a packet network |
US6449255B1 (en) * | 1999-04-26 | 2002-09-10 | Cisco Technology, Inc. | Method and apparatus for managing packets using a real-time feedback signal |
US7173910B2 (en) * | 2001-05-14 | 2007-02-06 | Level 3 Communications, Inc. | Service level agreements based on objective voice quality testing for voice over IP (VOIP) networks |
US6738353B2 (en) * | 2002-03-20 | 2004-05-18 | Sunrise Telecom Incorporated | System and method for monitoring a packet network |
US7328150B2 (en) * | 2002-09-04 | 2008-02-05 | Microsoft Corporation | Innovations in pure lossless audio compression |
US7525918B2 (en) * | 2003-01-21 | 2009-04-28 | Broadcom Corporation | Using RTCP statistics for media system control |
JP2004297287A (ja) * | 2003-03-26 | 2004-10-21 | Agilent Technologies Japan Ltd | 通話品質評価システム、および、該通話品質評価のための装置 |
WO2005004370A2 (en) * | 2003-06-28 | 2005-01-13 | Geopacket Corporation | Quality determination for packetized information |
-
2007
- 2007-12-03 US US11/949,615 patent/US7821957B2/en active Active
-
2008
- 2008-12-02 CN CN200810183324.8A patent/CN101488828B/zh active Active
- 2008-12-02 KR KR1020080120852A patent/KR101444466B1/ko active IP Right Grant
- 2008-12-03 BR BRPI0805306-5A patent/BRPI0805306A2/pt not_active IP Right Cessation
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004297803A (ja) * | 2003-03-26 | 2004-10-21 | Agilent Technol Inc | ネットワーク内の音質を評価する方法 |
Also Published As
Publication number | Publication date |
---|---|
US20090141647A1 (en) | 2009-06-04 |
CN101488828B (zh) | 2014-04-23 |
BRPI0805306A2 (pt) | 2009-08-18 |
US7821957B2 (en) | 2010-10-26 |
CN101488828A (zh) | 2009-07-22 |
KR20090057917A (ko) | 2009-06-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10930262B2 (en) | Artificially generated speech for a communication session | |
JP5112447B2 (ja) | 通信ネットワーク環境におけるアナウンスメディアの処理 | |
KR101479393B1 (ko) | 대역 내 신호들을 이용한 코덱 전개 | |
US9326160B2 (en) | Sharing electromagnetic-signal measurements for providing feedback about transmit-path signal quality | |
US8126394B2 (en) | Purposeful receive-path audio degradation for providing feedback about transmit-path signal quality | |
KR101444466B1 (ko) | 원격 통신 엔드포인트 | |
US20220360617A1 (en) | Transmission of a representation of a speech signal | |
US8229105B2 (en) | Purposeful degradation of sidetone audio for providing feedback about transmit-path signal quality | |
JP2005157045A (ja) | 音声伝送方法 | |
Arafat et al. | SIP-based QoS in IP telephony | |
Epstein | Scalable VoIP mobility: Integration and deployment | |
KR100636278B1 (ko) | 브이오아이피 단말의 음성 큐오에스 보장 시스템 및 그 방법 | |
Gambhir | Objective measurement of speech quality in VoIP over wireless LAN during handoff | |
JP2005167684A (ja) | 伝送制御装置 | |
Tiwari et al. | A Survey on Enhancing the QoS through voice Quality for Voice over Wireless LANs (VOWLAN) | |
JP2005045737A (ja) | 通話装置及び通話方法、並びに通話システム | |
KR100646308B1 (ko) | 패킷망에서의 무선 코덱 송수신 방법 | |
CN102100057A (zh) | 数字电信系统、用于管理此类系统的程序产品和方法 | |
Vaighan | VoIp Voice Quality Measurement by Network Traffic Analysis | |
KR20090037662A (ko) | 영상 통화를 위한 단말 및 방법 | |
KR20100032508A (ko) | 휴대 인터넷 시스템에서 음성패킷망의 서비스 품질 보장 방법 및 장치 | |
EP2173063A1 (en) | Method, communication system, sender and computer program product for transmitting data from a sender to a receiver in a communication system | |
ATLANToUE | Najmeddine MAJED | |
Lee et al. | Internet Telephony Gateway Server-Software Design | |
JP2004289319A (ja) | Ip端末装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
AMND | Amendment | ||
E902 | Notification of reason for refusal | ||
AMND | Amendment | ||
E601 | Decision to refuse application | ||
AMND | Amendment | ||
J201 | Request for trial against refusal decision | ||
B701 | Decision to grant | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20170907 Year of fee payment: 4 |
|
FPAY | Annual fee payment |
Payment date: 20190906 Year of fee payment: 6 |