KR102621410B1 - 자율주행차량에서의 IoT 통신 연결 정보 제공 방법 - Google Patents

자율주행차량에서의 IoT 통신 연결 정보 제공 방법 Download PDF

Info

Publication number
KR102621410B1
KR102621410B1 KR1020170021431A KR20170021431A KR102621410B1 KR 102621410 B1 KR102621410 B1 KR 102621410B1 KR 1020170021431 A KR1020170021431 A KR 1020170021431A KR 20170021431 A KR20170021431 A KR 20170021431A KR 102621410 B1 KR102621410 B1 KR 102621410B1
Authority
KR
South Korea
Prior art keywords
iot
communication connection
user
surrounding
iot device
Prior art date
Application number
KR1020170021431A
Other languages
English (en)
Other versions
KR20180095223A (ko
Inventor
정임영
은창오
Original Assignee
경북대학교산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 경북대학교산학협력단 filed Critical 경북대학교산학협력단
Priority to KR1020170021431A priority Critical patent/KR102621410B1/ko
Publication of KR20180095223A publication Critical patent/KR20180095223A/ko
Application granted granted Critical
Publication of KR102621410B1 publication Critical patent/KR102621410B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/30—Services specially adapted for particular environments, situations or purposes
    • H04W4/38—Services specially adapted for particular environments, situations or purposes for collecting sensor information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02—Services making use of location information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02—Services making use of location information
    • H04W4/021—Services related to particular areas, e.g. point of interest [POI] services, venue services or geofences
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/30—Services specially adapted for particular environments, situations or purposes
    • H04W4/40—Services specially adapted for particular environments, situations or purposes for vehicles, e.g. vehicle-to-pedestrians [V2P]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W8/00—Network data management
    • H04W8/005—Discovery of network devices, e.g. terminals

Abstract

본 발명은 자율주행차량 내에 위치하는 사용자 IoT 기기와 차량 외부에 위치하는 주변 IoT 기기간의 통신 연결 상태를 판단하여 그 통신 연결정보를 표시출력함으로써, 사용자가 자신의 IoT 기기와 통신 연결된 주변 IoT 기기에 대한 연결 상태를 직접 확인할 수 있도록 해 주는 자율주행차량에서의 IoT 통신 연결 정보 제공 방법에 관한 것이다.
본 발명에 따른 자율주행차량에서의 IoT 통신 연결 정보 제공 방법은 자율주행차량에 위치하는 서비스 단말에서 차량내에 위치하는 사용자 IoT 기기를 탐색하는 제1 단계와, 상기 서비스 단말에서 카메라를 통해 획득한 차량 주변 배경 영상 범위에 위치하는 주변 IoT 기기를 탐색하는 제2 단계, 상기 서비스 단말에서 상기 제2 단계에서 탐색된 주변 IoT 기기 중 사용자 IoT 기기와 통신 연결된 주변 IoT 기기의 신호 감도를 측정하는 제3 단계 및, 상기 서비스 단말에서 카메라로부터 획득한 배경 영상에 사용자 IoT 기기와 주변 IoT 기기 및, 사용자 IoT 기기와 통신 연결된 주변 IoT 기기에 대한 통신 연결 라인을 신호 감도에 대응하여 합성하여 표시출력하는 제4 단계를 포함하여 구성되는 것을 특징으로 한다.

Description

자율주행차량에서의 IoT 통신 연결 정보 제공 방법{Method for visualization of IoT connection information in autonomous vehicle}
본 발명은 자율주행차량 내에 위치하는 사용자 IoT 기기와 차량 외부에 위치하는 주변 IoT 기기간의 통신 연결 상태를 판단하여 그 통신 연결정보를 표시출력함으로써, 사용자가 자신의 IoT 기기와 통신 연결된 주변 IoT 기기에 대한 연결 상태를 직접 확인할 수 있도록 해 주는 자율주행차량에서의 IoT 통신 연결 정보 제공 방법에 관한 것이다.
IoT란 Internet of Things를 줄인 말로 각종 사물에 센서와 통신 기능을 내장하여 인터넷에 연결하는 기술을 의미한다.
이미 스마트 TV, 스마트 냉장고, 에어컨, 도어락 등이 가전 IoT 제품으로 출시되어 있으며, 웨어러블 IoT 기기로는 스마트 안경, 스마트 워치, 스마트 밴드 등 모바일 형태의 다양한 종류로도 제품화되고 있다.
향후 기술이 발전하면서 상기한 기기들을 사용하는 사람들은 계속 늘어날 것이며, 이에 따라 기기가 비정상적인 네트워크에 연결됨으로 인해 중요한 사용자의 개인 정보가 유출되는 해킹이 일어날 확률도 증가할 것이다.
이를 막기 위해서는 자신이 소지하고 있는 IoT 기기들이 본인이 연결을 의도한 정상적인 네트워크에 연결되어 있는지, 또 그 상태는 어떠한지에 대해 사용자가 직접 확인 할 필요가 있다.
한편, 최근에는 운전자의 전방 주시 태만, 졸음운전, 안전거리 미확보와 같은 운전 부주의로 발생되는 교통사고를 상당 부분 줄일 수 있을 것이란 기대에서 자율주행차량 기술이 개발되어 실제 운행되어지고 있다.
자율주행차량은 운전자의 개입없이 주변 환경을 인식하고, 주행 상황을 판단하여 차량을 제어함으로써, 스스로 주어진 목적지까지 주행하는 자동차를 말한다.
이에 따라 자율주행차량내에서 사용자가 다양한 자신의 IoT 기기를 사용할 수 있는 환경이 자연스럽게 조성될 수 있다.
그런데, 자율주행차량은 사용자에 의해 설정된 목적지에 대응하여 도로를 따라 다양한 위치로 이동하게 되고, 이로 인해 차량내에 위치하는 사용자 IoT 기기와 통신 연결될 수 있는 차량 외부의 주변 IoT 기기는 보다 많아지게 된다. 이는 다시 말해 차량내에 위치하는 사용자 IoT 기기가 악의적인 비정상 네트워크와 연결되는 가능성이 높아짐을 의미하는 것이다.
즉, 자율주행차량이 보급됨에 따라 자율주행차량내에 위치하는 사용자 IoT 기기와 차량 외부에 위치하는 주변 IoT 기기간의 통신 연결정보를 표시출력하는 기능이 더욱 절실히 필요하게 된다.
또한, 차량은 일정 이상의 속도로 이동하고, 이동 속도에 대응하여 주변 IoT 기기에 대한 데이터량은 증가하게 되는 바, 차량이 이동하는 것을 고려할 때 차량 주변에 위치하는 모든 주변 IoT 기기에 대하여 사용자 IoT 기기에 대한 통신 연결상태를 분석하기에는 그 데이터 처리에 무리가 있게 된다.
1. 한국공개특허 제2015-0047278호 (명칭 : 기기간 자동 무선 통신 연결되는 영상 표시장치 및 이에 따른 영상표시 방법) 2. 한국공개특허 제2016-0088102호 (명칭 : 네트워크에서 연결 상태를 표시가힉 위한 장치 및 방법)
이에, 본 발명은 상기한 사정을 감안하여 창출된 것으로, 자율주행차량내에 위치하는 사용자 IoT 기기와 연결된 주변 IoT 기기간의 연결정보와 차량 외부에 위치하는 주변 IoT 기기에 대한 상태정보를 증강 현실 기법을 이용하여 시각적으로 표시출력함으로써, 사용자가 자신이 소지하고 있는 IoT 기기들이 본인이 연결을 의도한 정상적인 네트워크에 연결되어 있는지, 또 그 상태는 어떠한지에 대해 확인을 간편하게 할 수 있도록 해 주는 자율주행차량에서의 IoT 통신 연결 정보 제공 방법을 제공함에 그 기술적 목적이 있다.
또한, 사용자의 선택에 따라 현재 자율주행차량 내에 위치하는 사용자 IoT 기기와 연결된 주변 IoT 기기간의 연결상태를 해제할 수 있도록 함으로써, 자신도 모르게 악의적인 네트워크에 연결된 주변 IoT 기기에 대한 연결을 용이하게 해제하여 개인정보가 유출되는 해킹문제를 최소화할 수 있도록 해 주는 자율주행차량에서의 IoT 통신 연결 정보 제공 방법을 제공함에 또 다른 기술적 목적이 있다.
또한, 카메라를 통해 획득한 배경 영상 범위에 위치하는 주변 IoT 기기에 한하여 사용자 IoT 기기와의 통신 연결 상태를 분석함으로써, 데이터 처리 효율을 향상시킬 수 있도록 해 주는 자율주행차량에서의 IoT 통신 연결 정보 제공 방법을 제공함에 또 다른 기술적 목적이 있다.
상기 목적을 달성하기 위한 본 발명의 일측면에 따르면, 자율주행차량에 위치하는 서비스 단말에서 차량내에 위치하는 사용자 IoT 기기를 탐색하는 제1 단계와, 상기 서비스 단말에서 카메라를 통해 획득한 차량 주변 배경 영상 범위에 위치하는 주변 IoT 기기를 탐색하는 제2 단계, 상기 서비스 단말에서 상기 제2 단계에서 탐색된 주변 IoT 기기 중 사용자 IoT 기기와 통신 연결된 주변 IoT 기기의 신호 감도를 측정하는 제3 단계 및, 상기 서비스 단말에서 카메라로부터 획득한 배경 영상에 사용자 IoT 기기와 주변 IoT 기기 및, 사용자 IoT 기기와 통신 연결된 주변 IoT 기기에 대한 통신 연결 라인을 신호 감도에 대응하여 합성하여 표시출력하는 제4 단계를 포함하여 구성되는 것을 특징으로 하는 자율주행차량에서의 IoT 통신 연결 정보 제공 방법이 제공된다.
또한, 상기 제2 단계는 자율주행차량에 구비된 카메라를 통해 이동되는 자율주행차량의 전방 배경 영상을 획득하도록 구성되는 것을 특징으로 하는 자율주행차량에서의 IoT 통신 연결 정보 제공 방법이 제공된다.
또한, 상기 서비스 단말은 자율주행차량 내에 위치하는 사용자 단말로서, 상기 제2 단계는 상기 사용자 단말에 구비된 카메라를 통해 배경 영상을 획득하는 것을 특징으로 하는 자율주행차량에서의 IoT 통신 연결 정보 제공 방법이 제공된다.
또한, 상기 제2 단계에서 상기 카메라는 전방향 카메라로서, 전방향 배경 영상을 획득하도록 구성되는 것을 특징으로 하는 자율주행차량에서의 IoT 통신 연결 정보 제공 방법이 제공된다.
또한, 상기 제2 단계에서 상기 카메라는 전방향 카메라로서, 서비스 단말로부터 제공되는 영역 또는 방향에 대응되는 배경 영상을 촬영하도록 구성되는 것을 특징으로 하는 자율주행차량에서의 IoT 통신 연결 정보 제공 방법이 제공된다.
또한, 상기 사용자 IoT 기기별 서로 다른 IoT 통신 방식으로 주변 IoT 기기와 통신 연결되도록 구성되고, 상기 제3 단계는 IoT 통신 방식에 대응하여 사용자 IoT 기기와 연결되는 주변 IoT 기기를 탐색하는 것을 특징으로 하는 자율주행차량에서의 IoT 통신 연결 정보 제공 방법이 제공된다.
또한, 상기 제3 단계에서 서비스 단말은 사용자 IoT 기기와 통신 연결된 주변 IoT 기기의 신호 감도를 측정하도록 구성되고, 상기 제4 단계에서 서비스 단말은 신호 감도에 대응하여 사용자 IoT 기기와 주변 IoT 기기간의 통신연결라인을 표시출력하도록 구성되는 것을 특징으로 하는 자율주행차량에서의 IoT 통신 연결 정보 제공 방법이 제공된다.
또한, 상기 제4 단계에서 배경 영상에 주변 IoT 기기는 사용자 IoT 기기와 연결된 통신 방식에 대응되는 아이콘 형태로 표시출력되고, 상기 통신연결라인은 직선 라인으로 표현되되, 신호 감도에 대응하여 기설정된 직선의 굵기 및 종류로 표시출력되도록 구성되는 것을 특징으로 하는 자율주행차량에서의 IoT 통신 연결 정보 제공 방법이 제공된다.
또한, 상기 서비스 단말은 사용자 IoT 기기와 통신 연결된 주변 IoT 기기에 대해서는 해당 주변 IoT 기기의 신호감도와 신호 수신방향을 근거로 배경 영상에서의 해당 주변 IoT 기기 위치를 산출하고, 상기 제4 단계에서 서비스 단말은 주변 IoT 기기에 대해 기 산출된 위치정보를 근거로 배경 영상의 해당 위치에 해당 주변 IoT 기기에 대응되는 아이콘을 배치하여 표시출력하는 것을 특징으로 하는 자율주행차량에서의 IoT 통신 연결 정보 제공 방법이 제공된다.
또한, 상기 서비스 단말은 상기 제4 단계에서 표시출력되는 주변 IoT 기기 아이콘 중 사용자에 의해 선택된 주변 IoT 기기 아이콘에 대하여 해당 주변 IoT 기기에 대해 현재 설정된 통신 연결 상태와 반대의 상태로의 전환 요청처리를 수행하는 것을 특징으로 하는 자율주행차량에서의 IoT 통신 연결 정보 제공 방법이 제공된다.
또한, 상기 서비스 단말은 상기 제4 단계에서 표시출력되는 주변 IoT 기기 아이콘 중 사용자에 의해 선택된 주변 IoT 기기 아이콘에 대하여 해당 주변 IoT 기기에 대한 통신 연결 해제 또는 통신 연결 접속을 위한 통신 연결 설정창을 제공하고, 이에 대응하여 사용자의 선택에 따라 해당 주변 IoT 기기와 사용자 IoT 기기간 통신 접속 설정 및 해제 처리를 수행하는 것을 특징으로 하는 자율주행차량에서의 IoT 통신 연결 정보 제공 방법이 제공된다.
또한, 상기 제3 단계에서 서비스 단말은 상기 주변 IoT 기기와 통신 연결된 사용자 IoT 기기에 대한 통신연결 상세정보를 획득하여 저장하고, 상기 제4 단계에서 서비스 단말은 현재 표시출력되는 주변 IoT 기기 아이콘 중 사용자에 의해 선택된 주변 IoT 기기 아이콘에 대하여 해당 주변 IoT 기기와 연결된 사용자 IoT 기기간 통신연결 상세정보를 표시출력하도록 구성되되, 상기 통신연결 상세정보는 인증을 통해 연결된 것인지의 여부, 최초 인증 연결 시점을 포함하는 통신연결 인증정보와, 적어도 하나 이상의 홉을 통해 연결된 경우에 대해 해당 홉 네트워크를 형성하는 장치 정보와, 인증 연결 여부 및, 인증이 성공한 장치의 홉 위치를 포함하는 홉 연결 정보 중 적어도 하나의 정보를 포함하는 것을 특징으로 하는 자율주행차량에서의 IoT 통신 연결 정보 제공 방법이 제공된다.
또한, 상기 제4 단계는 자율주행차량에 구비된 자율주행장치와 통신 연결되는 주변 환경에 대한 통신연결정보를 추가적으로 표시출력하되,
상기 자율주행장치에 대한 차량 외부 주변 IoT 기기와의 무선 통신, 위성과의 통신, 주변 차량들과의 통신, 사용자 개인기기와의 통신, 도로와의 통신 중 적어도 하나 이상에 대한 통신연결정보를 포함하는 것을 특징으로 하는 자율주행차량에서의 IoT 통신 연결 정보 제공 방법이 제공된다.
본 발명에 의하면 사용자 IoT와 주변 사용자 IoT 기기 간의 연결 및 그 상태를 증강 현실 기술을 이용하여 배경 영상에 합성하여 시각적으로 표시출력함으로써, 사용자는 자율주행차량에 탑승한 상태에서 차량 이동에 대응하여 자신의 IoT 기기와 주변 IoT 기기간 통신 연결 상태를 용이하게 확인할 수 있다.
따라서, 사용자는 자신이 원하지 않는 불필요한 IoT 기기 연결을 최소화할 수 있음은 물론, 비정상적인 IoT 통신 연결에 의한 개인 정보의 유출을 방지할 수 있다.
도1은 본 발명이 적용되는 자율주행차량에서의 IoT 통신 연결 정보 제공 시스템의 개략적인 구성을 도시한 도면.
도2는 도1에 도시된 서비스 단말(100)의 요부구성을 기능적으로 분리하여 나타낸 블록구성도.
도3은 본 발명에 따른 자율주행차량에서의 IoT 통신 연결 정보 제공 방법을 설명하기 위한 흐름도.
도4는 도3에서 본 발명에 따른 IoT 통신 연결 정보 제공 화면을 예시한 도면.
이하에서는 첨부된 도면을 참조하여 본 발명을 보다 상세하게 설명한다. 도면들 중 동일한 구성요소들은 가능한 한 어느 곳에서든지 동일한 부호로 나타내고 있음을 유의해야 한다. 한편, 이에 앞서 본 명세서 및 특허청구범위에 사용된 용어나 단어는 통상적이거나 사전적인 의미로 한정해서 해석되어서는 아니 되며, 발명자는 그 자신의 발명을 가장 최선의 방법으로 설명하기 위해 용어의 개념을 적절하게 정의할 수 있다는 원칙에 입각하여 본 발명의 기술적 사상에 부합하는 의미와 개념으로 해석되어야만 한다. 따라서 본 명세서에 기재된 실시예와 도면에 도시된 구성은 본 발명의 가장 바람직한 일 실시예에 불과할 뿐이고, 본 발명의 기술적 사상을 모두 대변하는 것은 아니므로, 본 출원시점에 있어서 이들을 대체할 수 있는 다양한 균등물과 변형예들이 있을 수 있음을 이해하여야 한다.
도1은 본 발명이 적용되는 자율주행차량에서의 IoT 통신 연결 정보 제공 시스템의 개략적인 구성을 도시한 도면이다.
도1에 도시된 바와 같이 자율주행차량에서의 IoT 통신 연결 정보 제공 시스템은 서비스 단말(100)과 사용자 IoT 기기(200) 및 주변 IoT 기기(300)를 포함하여 구성된다. 이때, 상기 서비스 단말(100)과 사용자 IoT 기기(200)는 자율주행차량 내에 위치한다.
상기 서비스 단말(100)은 자율주행차량 내에 위치하는 사용자 IoT 기기(200)와 자율주행차량 외측 주변에 위치하는 주변 IoT 기기(300) 간의 통신 연결 상태정보를 표시출력한다.
상기 서비스 단말(100)은 자율주행차량 내에 위치하여 차량에 대한 자율주행처리를 수행하는 자율주행장치이거나, 또는 사용자가 별도로 구비하는 스마트 기기 등의 사용자 단말, 또는 IoT 통신을 수행하는 사용자 IoT 기기 중 하나, 또는 별도의 독립적인 단말형태로서 자율주행차량에 설치되어질 수 있다.
또한, 상기 서비스 단말(100)은 해당 서비스를 제공하기 위한 어플리케이션이 설치되어 이 어플리케이션의 실행에 따라 본 발명에 따른 IoT 통신 연결상태 정보 표시출력 서비스를 제공할 수 있다.
또한, 상기 사용자 IoT 기기(200)는 자율주행차량에 탑승한 사용자가 소지한 IoT 기기로서, 스마트 안경이나, 스마트 워치 등이 될 수 있으며, 상기 일정 거리 이내에 위치하는 주변 IoT 기기(300)와 와이파이 뿐만 아니라 블루투스, 지그비, NFC 등을 포함하는 각종 형태의 IoT 통신 인터페이스를 통해 상호 연결된다. 특히, 상기한 IoT 통신 인터페이스는 억세스 포인트 등의 거치지 않고 무선 통신 단말 사이에 직접 형성된 무선채널을 통해 데이터를 주고받는 와이파이 피어투피어(WiFi Peer to Peer) 등의 무선 직접 접속 통신(wireless direct access communication)을 포함된다.
도2는 도1에 도시된 서비스 단말(100)의 요부구성을 기능적으로 분리하여 나타낸 블록구성도이다.
도2에서 카메라(C)는 차량 외부의 배경 영상을 획득한다. 이때, 상기 카메라(C)는 자율주행차량에 기본적으로 설치되는 카메라로서, 차량의 전방 또는 후방 배경 영상을 촬영하도록 구성될 수 있다.
또한, 해당 서비스 단말(100)이 사용자의 스마트 폰 등의 카메라 위치가 이동 가능한 구성으로 된 형태인 경우, 사용자의 의지에 따라 다양한 방향에 대한 배경 영상을 획득할 수 있다.
또한, 상기 카메라(C)는 파노라마 카메라와 같이 360°전방향 촬영이 가능한 형태의 카메라로서, 차량 주변에 대한 전방향 배경 영상을 촬영하도록 실시하는 것도 가능함은 물론이다.
또한, 상기한 전방향 촬영 카메라(C)의 경우, 특정 영역이나 방향에 대한 영상을 촬영하도록 구성될 수 있다. 이때, 특정 영역이나 방향은 서비스 단말(100)과의 통신을 통해 설정될 수 있다.
또한, 도2에 도시된 바와 같이 서비스 단말(100)은 무선통신수단(110)과, 표시수단(120)과, 정보 입력수단(130) 및, 통신 연결정보 제공수단(140)을 포함하여 구성된다.
상기 무선통신수단(110)은 상기 사용자 IoT 기기(200) 및 주변 IoT 기기 (300)와 무신신호 송수신처리를 수행한다. 이때, 상기 무선통신수단(110)는 각종 IoT 규격에 대응되는 인터페이스 모듈을 구비하여 구성된다. 예컨대 와이파이(WiFi, 지그비, 블루투스 등의 IoT 통신 연결이 가능한 인터페이스 모듈을 구비하여 구성된다.
상기 표시수단(120)은 상기 통신 연결정보 생성수단(140)으로부터 제공되는 IoT 통신 연결정보를 표시출력한다.
상기 정보 입력수단(130)은 사용자의 명령을 입력받기 위한 것으로, 표시부(130)상에 터치 패널 형태로 이루어질 수 있다.
상기 통신 연결정보 제공수단(140)은 자율주행차량 내에 위치하는 사용자 IoT 기기(200)와 IoT 통신 인터페이스를 통해 연결된 차량 외부에 위치하는 주변 IoT 기기(200)에 대한 통신 연결정보를 상기 카메라(C)를 통해 획득한 배경 이미지상에 합성하여 통신 연결상태 이미지를 생성함과 더불어, 이를 상기 표시수단(120)을 통해 표시출력하도록 제어한다.
이때, 상기 통신 연결정보 생성수단(140)은 카메라를 통해 촬영된 배경 영상 범위에 위치하는 주변 IoT 기기(300)를 탐색하고, 해당 주변 IoT 기기(300)와, 이 주변 IoT 기기(300)와 통신 연결된 사용자 IoT 기기(200)간의 송수신 정보를 분석하여 해당 주변 IoT 기기(300)에 대한 통신연결 상세정보를 획득하고, 이를 사용자의 선택에 대응하여 표시수단(120)을 통해 표시출력하도록 제어한다. 통신연결 상세정보로는 주변 IoT 기기(300)와 연결된 사용자 IoT 기기(200)간의 인증 연결 상태와 홉 연결 상태 및, 통신연결의 잠정중단 여부 중 적어도 하나를 포함할 수 있다.
이어, 본 발명에 따른 자율주행차량에서의 IoT 통신 연결 정보 제공 방법을 도3에 도시된 흐름도를 참조하여 설명한다.
먼저, 사용자가 사용자 IoT 기기(200)를 소지한 상태로 자율주행차량에 탑승한 후, 자율주행차량 내에 위치하는 서비스 단말(100)을 통해 IoT 통신 연결 정보 제공 서비스를 수행하기 위한 어플리케이션을 실행상태로 설정한다.
상기한 상태에서, 서비스 단말(100)은 해당 자율주행차량내에 위치하는 사용자 IoT 기기(200)로 일정 주기로 CONNECTION 신호를 무선 송출함으로써, 사용자 IoT 기기(200)를 탐색한다(ST110). 서비스 단말(100)은 사용자 IoT 기기(200)와 통신 연결상태로 설정하고, 탐색된 사용자 IoT 기기(200)에 대한 식별정보를 저장한다. 이때, 사용자 IoT 기기(200)는 복수개가 될 수 있으며, 서로다른 IoT 통신 인터페이스가 구비될 수 있다. 즉, 서비스 단말(100)은 다수의 IoT 통신 인터페이스 모듈을 구비하고, 다수의 IoT 통신 인터페이스 모듈을 통해 순차적으로 OCNNECTION 신호를 무선 송출함으로써, 사용자 IoT 기기(200)별 IoT 통신방법이 저장될 수 있다.
이어, 서비스 단말(100)은 현재 자율주행차량 위치에 대응하여 카메라(C)로부터 배경 영상을 획득한다(ST120). 즉, 자율주행차량이 이동함에 따라 서로 다른 배경 영상이 획득된다.
이때, 해당 차량에 기 설치된 카메라를 이용하여 배경 영상을 획득하는 경우, 차량 전방 영상으로 촬영 방향이 고정 설정될 수 있고, 서비스 단말(100)이 사용자의 스마트 기기로 구현되는 등의 이유로 카메라(C)의 촬영 방향 변경이 가능한 경우, 사용자의 선택에 따라 차량 주변의 각 방향에 대한 배경 영상을 획득하는 것이 가능하다.
또한, 상기 ST120 단계에서 카메라(C)가 전방향 카메라인 경우, 전방향 배경 영상이 획득될 수 있다. 이때, 상기 카메라(C)는 서비스 단말(100)로부터의 요청에 따라 특정 영역이나 특정 방향에 대한 배경 영상을 획득하도록 실시할 수 있음은 물론이다.
서비스 단말(100)은 서비스 단말(100)은 일정 주기로 CONNECTION 신호를 무선 송출하여 카메라(C)로부터 획득한 배경 이미지에 해당하는 위치에 존재하는 주변 IoT 기기(300)를 탐색한다(ST130). 이때, 상기 서비스 단말(100)는 탐색된 주변 IoT 기기(300)에 대해 응답신호의 방향 및 신호세기를 근거로 해당 주변 IoT 기기(300)에 대한 위치를 산출한다.
또한, 상기 서비스 단말(100)은 상기 ST130 단계에서 탐색된 주변 IoT 기기(300) 중 상기 ST110 단계에서 탐색된 사용자 IoT 기기(200)와 IoT 통신 인터페이스를 통해 연결된 통신연결 주변 IoT 기기(300)를 추출한다(ST140). 이때, 상기 서비스 단말(100)은 사용자 IoT 기기(200)의 IoT 통신 방법에 대응하여 해당 사용자 IoT 기기(200)와 통신 연결된 주변 IoT 기기(300)를 판단하거나, 또는 서비스 단말(100)은 사용자 IoT 기기(200)와 통신 연결된 주변 IoT 기기(300)간의 트래픽 흐름을 근거로 통신 연결 상태를 판단할 수 있다. 또한, 상기 서비스 단말(100)은 사용자 IoT 기기(200) 또는 주변 IoT 기기(300)로부터 통신 연결정보를 제공받아 사용자 IoT 기기(200)와 통신 연결된 주변 IoT 기기(300)를 판단할 수 있다.
또한, 상기 서비스 단말(100)은 상기 ST140 단계에서 추출된 통신연결 주변 IoT 기기(300)에 대한 신호 감도를 측정한다(ST150). 이때, 상기 서비스 단말(100)은 각 사용자 IoT 기기(200)에 대응하여 통신연결 주변 IoT 기기(300)에 대한 신호 감도를 각각 측정한다. 여기서, 신호감도의 측정은 카메라(C)의 촬영 영역에서 벗어나는 때까지 지속적으로 이루어질 수 있다. 또한, 카메라(100)의 촬영 영역이 벗어나더라도 현재 사용자 IoT 기기(200)와 통신 연결상태의 주변 IoT 기기(300)에 대해서는 표시대상 주변 IoT 기기(300)와의 통신 연결이 종료되는 때까지 지속적으로 신호감도 측정 처리를 수행하는 것이 가능하다.
또한, 상기 서비스 단말(100)은 사용자 IoT 기기(200)와 연결된 통신연결 주변 IoT 기기(300)간의 통신연결 상세정보를 획득하여 분석한다(ST160). 즉, 서비스 단말(100)은 사용자 IoT 기기(200)별 상기 ST140 단계에서 추출된 통신연결 주변 IoT 기기(300)간의 송수신 정보를 분석하거나 또는 해당 기기와의 통신을 통해 수신된 신호 분석을 통해 통신연결 상세정보를 획득할 수 있다.
이어, 상기 서비스 단말(100)은 상기 카메라에 의해 획득된 배경 영상에 사용자 IoT 기기(200)와 주변 IoT 기기(300)간의 통신 연결 상태를 포함하는 통신연결정보를 증강현실(AR) 방식으로 합성하여 통신연결 이미지를 생성하고, 이를 표시수단(120)을 통해 표시출력한다(ST170). 도4에는 자율주행차량 내에 제1 내지 제4 사용자 IoT 기기 즉, 기기1, 기기2, 기기3, 기기4 (201,202,203,204)가 위치하고, 배경 영상(B) 범위에는 제1 및 제2 주변 IoT 기기(301,302)가 존재하며, 제1 사용자 IoT 기기(201)와 제1 주변 IoT 기기(301)가 통신 연결되어 해당 기기간 통신 연결 라인(L1)이 표시됨과 더불어, 제2 사용자 IoT 기기(202)와 제2 주변 IoT 기기(302)가 통신 연결되어 해당 기기간 통신 연결 라인(L2)가 표시되어 있다. 이때. 상기 통신 연결 주변 IoT 기기(301, 302)는 도4에 도시된 바와 같이 기기간 IoT 통신방식에 대응되는 아이콘(와이파이, 블루투스 등)으로 표현될 수 있다. 상기 기기간 통신 연결라인(L1,L2)은 기기간 직선 라인 형태로 표현되되, 신호 감도에 대응하여 라인 굵기 또는 라인 형태(직선, 점선 등)으로 표현될 수 있다. 예컨대, 신호감도 "강"은 두꺼운 직선이나 이중 직선, 신호감도 "중"은 보통 직선, 신호감도 "약"은 점선의 형태로 표현될 수 있다.
상기한 상태에서 서비스 단말(100)은 표시수단(120)을 통해 표시출력되는 통신연결 이미지에 대해 정보 입력수단(130)을 통해 사용자로부터 임의 아이콘 즉, 주변 IoT 기기(300)가 선택되면, 선택된 해당 주변 IoT 기기(300)에 대한 통신 연결정보를 추가적으로 표시출력하고, 이에 대한 사용자의 선택에 따른 통신 연결 설정을 변경하거나 또는 통신 연결 상세정보를 추가적으로 표시출력한다(ST180, ST190).
즉, 상기 서비스 단말(100)은 상기 ST180 단계에서 선택된 주변 IoT 기기(300)에 대하여 해당 주변 IoT 기기에 대해 현재 설정된 통신 연결 상태와 반대 상태로의 전환 요청처리를 수행할 수 있다. 예컨대, 해당 주변 IoT 기기(300)가 사용자 IoT 기기(200)와 통신 연결된 상태인 경우, 해당 주변 IoT 기기(300)에 대해 통신 해제 처리를 수행하고, 해당 주변 IoT 기기(300)가 사용자 IoT 기기(200)와 통신 연결되지 않은 경우, 해당 주변 IoT 기기(300)와 사용자 IoT 기기(200)간의 통신 연결 처리를 수행할 수 있다. 이때, 통신 연결 처리에 대해서는 해당 주변 해당 주변 IoT 기기(300)와 동일한 통신 방식을 갖는 사용자 IoT 기기(200)가 자동 통신 연결될 수 있다.
또한, 상기 서비스 단말(100)은 상기 ST180 단계에서 선택된 주변 IoT 기기(300)에 대하여 통신 연결 설정창을 표시출력하고, 이에 대해 사용자로부터의 통신 연결 해제 요구가 선택되면, 해당 표시대상 주변 IoT 기기(300)와 연결된 해당 사용자 IoT 기기(200)에 대한 접속을 해제한다. 이때, 서비스 단말(100)은 해당 사용자 IoT 기기(201)로 해당 표시대상 주변 IoT 기기(300) 접속 해제 요청정보를 제공하여 이를 실시할 수 있다.
또한, 서비스 단말(100)은 상기 ST180 단계에서 선택된 표시대상 주변 IoT 기기(300) 중 사용자 IoT 기기(200)와 연결되지 않은 표시대상 주변 IoT 기기(300)에 대해서는, 사용자의 선택에 따라 해당 주변 IoT 기기(300)와의 통신 연결을 수행하도록 실시할 수 있음은 물론이다.
또한, 서비스 단말(100)은 상기 ST180 단계에서 선택된 표시대상 주변 IoT 기기(300)에 대해 상기 ST160 단계에서 획득한 통신연결 상세정보를 표시출력할 수 있다. 상기 통신연결 상세정보는 통신 연결 인증정보와, 홉 연결 정보 및, 통신 해제 상태정보 중 적어도 하나를 포함할 수 있다. 상기 통신 연결 인증정보는 인증을 통해 연결된 것인지의 여부, 최초 인증 연결 시점을 포함하여 구성되고, 상기 홉 연결 정보는 적어도 하나 이상의 홉을 통해 연결된 경우에 있어서 해당 홉 네트워크를 형성하는 장치 정보와, 인증 연결 여부 및, 인증이 성공한 홉 위치 등을 포함하여 구성되며, 상기 통신 해제 상태정보는 현재 통신 연결이 이루어지지 않는 경우에 있어서 연결 해제 상태가 잠정적인 것인지의 여부, 잠정적 해제 상태에 대해 새로운 인증이 필요한지의 여부 등을 포함하여 구성될 수 있다.
한편, 상기 실시예에 있어서는 자율주행차량 내에 위치하는 사용자 IoT 기기와 통신 연결된 주변 IoT 기기에 대해서만 표시출력하도록 실시하였으나, 자율주행장치와 통신 연결되는 주변 환경에 대한 통신연결정보를 추가적으로 표시출력할 수 있다. 이는 자율주행차량 내에 구비된 자율주행장치가 서비스 단말로 구현됨이 바람직하다. 또한, 사용자 단말을 통해 상기한 서비스를 제공하는 경우에는 자율주행차량의 주행 안정성을 보장하기 위하여 해당 자율주행차량과 연결 인증된 사용자 단말로 한정하는 것이 바람직할 것이다.
즉, 자율주행장치에 대해 차량 외부 주변 IoT 기기와의 무선 통신, 위성과의 통신, 주변 차량들과의 통신, 사용자 개인기기와의 통신, 도로와의 통신을 포함하는 각종 통신 환경 중 적어도 하나 이상의 통신환경에 대한 연결상태정보를 추가적으로 표시출력하도록 실시할 수 있다.
상기 실시예에 의하면, 사용자는 자율주행차량에 탑승한 상태에서 차량 이동에 대응하여 자신의 사용자 IoT 기기와 주변 IoT 기기간의 통신 연결 상태를 용이하게 확인할 수 있다.
100 : 서비스 단말, 200 : 사용자 IoT기기
300 : 주변 IoT 기기.

Claims (13)

  1. 자율주행차량에 위치하는 서비스 단말에서 차량내에 위치하는 사용자 IoT 기기를 탐색하는 제1 단계와,
    상기 서비스 단말에서 카메라를 통해 획득한 차량 주변 배경 영상 범위에 위치하는 주변 IoT 기기를 탐색하는 제2 단계,
    상기 서비스 단말은 상기 제2 단계에서 탐색된 주변 IoT 기기 중 사용자 IoT 기기와 통신 연결된 주변 IoT 기기를 추출하는 제3 단계 및,
    상기 서비스 단말에서 카메라로부터 획득한 배경 영상에 사용자 IoT 기기와 주변 IoT 기기 및, 사용자 IoT 기기와 통신 연결된 주변 IoT 기기에 대한 통신 연결 라인을 합성하여 표시출력하는 제4 단계를 포함하여 구성되는 것을 특징으로 하는 자율주행차량에서의 IoT 통신 연결 정보 제공 방법.
  2. 제1항에 있어서,
    상기 제2 단계는 자율주행차량에 구비된 카메라를 통해 이동되는 자율주행차량의 전방 배경 영상을 획득하도록 구성되는 것을 특징으로 하는 자율주행차량에서의 IoT 통신 연결 정보 제공 방법.
  3. 제1항에 있어서,
    상기 서비스 단말은 자율주행차량 내에 위치하는 사용자 단말로서,
    상기 제2 단계는 상기 사용자 단말에 구비된 카메라를 통해 배경 영상을 획득하는 것을 특징으로 하는 자율주행차량에서의 IoT 통신 연결 정보 제공 방법.
  4. 제1항에 있어서,
    상기 제2 단계에서 상기 카메라는 전방향 카메라로서, 전방향 배경 영상을 획득하도록 구성되는 것을 특징으로 하는 자율주행차량에서의 IoT 통신 연결 정보 제공 방법.
  5. 제1항에 있어서,
    상기 제2 단계에서 상기 카메라는 전방향 카메라로서, 서비스 단말로부터 제공되는 영역 또는 방향에 대응되는 배경 영상을 촬영하도록 구성되는 것을 특징으로 하는 자율주행차량에서의 IoT 통신 연결 정보 제공 방법.
  6. 제1항에 있어서,
    상기 사용자 IoT 기기별 서로 다른 IoT 통신 방식으로 주변 IoT 기기와 통신 연결되도록 구성되고,
    상기 제3 단계는 IoT 통신 방식에 대응하여 사용자 IoT 기기와 연결되는 주변 IoT 기기를 추출하는 것을 특징으로 하는 자율주행차량에서의 IoT 통신 연결 정보 제공 방법.
  7. 제1항에 있어서,
    상기 제3 단계에서 서비스 단말은 사용자 IoT 기기와 통신 연결된 주변 IoT 기기의 신호 감도를 측정하도록 구성되고,
    상기 제4 단계에서 서비스 단말은 신호 감도에 대응하여 사용자 IoT 기기와 주변 IoT 기기간의 통신연결라인을 표시출력하도록 구성되는 것을 특징으로 하는 자율주행차량에서의 IoT 통신 연결 정보 제공 방법.
  8. 제1항에 있어서,
    상기 제4 단계에서 배경 영상에 주변 IoT 기기는 사용자 IoT 기기와 연결된 통신 방식에 대응되는 아이콘 형태로 표시출력되고,
    상기 통신연결라인은 직선 라인으로 표현되되, 신호 감도에 대응하여 기설정된 직선의 굵기 및 종류로 표시출력되도록 구성되는 것을 특징으로 하는 자율주행차량에서의 IoT 통신 연결 정보 제공 방법.
  9. 제8항에 있어서,
    상기 서비스 단말은 사용자 IoT 기기와 통신 연결된 주변 IoT 기기에 대해서는 해당 주변 IoT 기기의 신호감도와 신호 수신방향을 근거로 배경 영상에서의 해당 주변 IoT 기기 위치를 산출하고,
    상기 제4 단계에서 서비스 단말은 주변 IoT 기기에 대해 기 산출된 위치정보를 근거로 배경 영상의 해당 위치에 해당 주변 IoT 기기에 대응되는 아이콘을 배치하여 표시출력하는 것을 특징으로 하는 자율주행차량에서의 IoT 통신 연결 정보 제공 방법.
  10. 제8항 또는 제9항에 있어서,
    상기 서비스 단말은 상기 제4 단계에서 표시출력되는 주변 IoT 기기 아이콘 중 사용자에 의해 선택된 주변 IoT 기기 아이콘에 대하여 해당 주변 IoT 기기에 대해 현재 설정된 통신 연결 상태와 반대의 상태로의 전환 요청처리를 수행하는 것을 특징으로 하는 자율주행차량에서의 IoT 통신 연결 정보 제공 방법.
  11. 제8항 또는 제9항에 있어서,
    상기 서비스 단말은 상기 제4 단계에서 표시출력되는 주변 IoT 기기 아이콘 중 사용자에 의해 선택된 주변 IoT 기기 아이콘에 대하여 해당 주변 IoT 기기에 대한 통신 연결 해제 또는 통신 연결 접속을 위한 통신 연결 설정창을 제공하고,
    이에 대응하여 사용자의 선택에 따라 해당 주변 IoT 기기와 사용자 IoT 기기간 통신 접속 설정 및 해제 처리를 수행하는 것을 특징으로 하는 자율주행차량에서의 IoT 통신 연결 정보 제공 방법.
  12. 제8항 또는 제9항에 있어서,
    상기 제3 단계에서 서비스 단말은 상기 주변 IoT 기기와 통신 연결된 사용자 IoT 기기에 대한 통신연결 상세정보를 획득하여 저장하고,
    상기 제4 단계에서 서비스 단말은 현재 표시출력되는 주변 IoT 기기 아이콘 중 사용자에 의해 선택된 주변 IoT 기기 아이콘에 대하여 해당 주변 IoT 기기와 연결된 사용자 IoT 기기간 통신연결 상세정보를 표시출력하도록 구성되되,
    상기 통신연결 상세정보는 인증을 통해 연결된 것인지의 여부, 최초 인증 연결 시점을 포함하는 통신연결 인증정보와,
    적어도 하나 이상의 홉을 통해 연결된 경우에 대해 해당 홉 네트워크를 형성하는 장치 정보와, 인증 연결 여부 및, 인증이 성공한 장치의 홉 위치를 포함하는 홉 연결 정보 중 적어도 하나의 정보를 포함하는 것을 특징으로 하는 자율주행차량에서의 IoT 통신 연결 정보 제공 방법.
  13. 제1항에 있어서,
    상기 제4 단계는 자율주행차량에 구비된 자율주행장치와 통신 연결되는 주변 환경에 대한 통신연결정보를 추가적으로 표시출력하되,
    상기 자율주행장치에 대한 차량 외부 주변 IoT 기기와의 무선 통신, 위성과의 통신, 주변 차량들과의 통신, 사용자 개인기기와의 통신, 도로와의 통신 중 적어도 하나 이상에 대한 통신연결정보를 포함하는 것을 특징으로 하는 자율주행차량에서의 IoT 통신 연결 정보 제공 방법.




KR1020170021431A 2017-02-17 2017-02-17 자율주행차량에서의 IoT 통신 연결 정보 제공 방법 KR102621410B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020170021431A KR102621410B1 (ko) 2017-02-17 2017-02-17 자율주행차량에서의 IoT 통신 연결 정보 제공 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170021431A KR102621410B1 (ko) 2017-02-17 2017-02-17 자율주행차량에서의 IoT 통신 연결 정보 제공 방법

Publications (2)

Publication Number Publication Date
KR20180095223A KR20180095223A (ko) 2018-08-27
KR102621410B1 true KR102621410B1 (ko) 2024-01-04

Family

ID=63455025

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170021431A KR102621410B1 (ko) 2017-02-17 2017-02-17 자율주행차량에서의 IoT 통신 연결 정보 제공 방법

Country Status (1)

Country Link
KR (1) KR102621410B1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20200080786A (ko) 2018-12-27 2020-07-07 주식회사 웨이티즈 커넥티드카의 멀티채널 통신 장치 및 방법

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130060733A (ko) * 2011-11-30 2013-06-10 서울대학교산학협력단 지리 정보 시스템과 스마트폰을 이용한 실시간 무선 랜 환경 측정 시스템 및 방법
KR20140028273A (ko) * 2012-08-28 2014-03-10 삼성전자주식회사 연결 정보 제어 방법 및 그 전자 장치
KR101558236B1 (ko) * 2012-10-16 2015-10-12 전자부품연구원 ＩｏＴ 브라우징 방법 및 장치
US20150047278A1 (en) 2013-08-15 2015-02-19 Brian M. Blount Thin cementitious decking members
KR102074760B1 (ko) * 2013-10-24 2020-02-07 현대모비스 주식회사 기기 간 자동 무선 통신 연결되는 영상 표시장치 및 이에 따른 영상표시 방법
KR20160023368A (ko) * 2014-08-22 2016-03-03 한국전자통신연구원 사물인터넷 단말과 사용자 단말간의 양방향 통신방법, 이를 위한 사물인터넷 단말 및 사용자 단말
US10530876B2 (en) 2014-09-23 2020-01-07 Com Tec Co Technologies Ltd. System and method for managing thematic information aggregations
KR20160049759A (ko) * 2014-10-28 2016-05-10 삼성전자주식회사 주변 기기 탐색 방법 및 그 전자 장치
KR20160088102A (ko) * 2015-01-15 2016-07-25 삼성전자주식회사 네트워크에서 연결 상태를 표시하기 위한 장치 및 방법
KR102351500B1 (ko) * 2015-05-12 2022-01-17 엘지전자 주식회사 이동단말기 및 그 제어방법
KR101769895B1 (ko) * 2015-06-19 2017-08-21 에스케이텔레콤 주식회사 사용자 단말 장치 및 이를 이용한 사물 인터넷 기기 제어 방법, 이를 수행시키기 위한 컴퓨터 프로그램 및 그 컴퓨터 프로그램을 기록한 컴퓨터 판독 가능한 기록 매체
KR20170015114A (ko) * 2015-07-30 2017-02-08 삼성전자주식회사 자율 주행 차량 및 자율 주행 차량 제어 방법

Also Published As

Publication number Publication date
KR20180095223A (ko) 2018-08-27

Similar Documents

Publication Publication Date Title
EP3035738B1 (en) Method for connecting appliance to network and corresponding device
KR102464898B1 (ko) 차량과 관련된 영상 정보를 공유하는 방법 및 장치
US10736002B2 (en) Device for performing communication in wireless communication system and method thereof
US10979617B2 (en) Mobile device and control method
EP3300449B1 (en) Method for establishing connection between devices
EP3501174A1 (en) Reverse casting from a first screen device to a second screen device
EP2754263B1 (en) Mobile terminal, image display device mounted on vehicle and data processing method using the same
US20120242473A1 (en) Image processing for image dislay apparatus mounted to vehicle
US9386136B2 (en) Automatic device initialization and pairing
US20120242510A1 (en) Communication connecting apparatus and method thereof
US20120105447A1 (en) Augmented reality-based device control apparatus and method using local wireless communication
KR102003546B1 (ko) 사용자 디바이스와 스트리밍 미디어 콘텐츠 디바이스 간의 연결을 인증하기 위한 방법들, 시스템들, 및 매체들
EP4055842B1 (en) Mobile device and operating method thereof
KR20120066375A (ko) 증강 현실을 이용한 무선 네트워크 정보 제공 장치 및 방법
CN106205177A (zh) 使用智能眼镜提供车辆位置的引导的方法及其设备
JP6049135B2 (ja) コミュニケーションシステムならびにそのデジタルサイネージおよびモバイル端末
US11525882B2 (en) Establishing a direct communication link with another vehicle in the vicinity of a motor vehicle
US20160219424A1 (en) Methods, apparatuses and devices for transmitting data
US9609681B2 (en) Method and apparatus for discovering target in device-to-device direct communication
KR102621410B1 (ko) 자율주행차량에서의 IoT 통신 연결 정보 제공 방법
US10630833B2 (en) Display device and operating method thereof
US20200098005A1 (en) Information service system and information service method
CN109219044A (zh) 无线网络的切换方法、移动终端及计算机可读存储介质
US11265529B2 (en) Method and apparatus for controlling image display
US20160323542A1 (en) User terminal device and method for providing interaction service therefor

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant