KR100416152B1 - 운전자 훈련 시스템 - Google Patents

운전자 훈련 시스템 Download PDF

Info

Publication number
KR100416152B1
KR100416152B1 KR10-2001-7010227A KR20017010227A KR100416152B1 KR 100416152 B1 KR100416152 B1 KR 100416152B1 KR 20017010227 A KR20017010227 A KR 20017010227A KR 100416152 B1 KR100416152 B1 KR 100416152B1
Authority
KR
South Korea
Prior art keywords
driver
vehicle
information
training system
camera
Prior art date
Application number
KR10-2001-7010227A
Other languages
English (en)
Other versions
KR20010102090A (ko
Inventor
클래퍼에드워드오.
Original Assignee
인텔 코오퍼레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 인텔 코오퍼레이션 filed Critical 인텔 코오퍼레이션
Publication of KR20010102090A publication Critical patent/KR20010102090A/ko
Application granted granted Critical
Publication of KR100416152B1 publication Critical patent/KR100416152B1/ko

Links

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B9/00—Simulators for teaching or training purposes
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B19/00—Teaching not covered by other main groups of this subclass
    • G09B19/16—Control of vehicles or other craft
    • G09B19/167—Control of land vehicles
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B9/00—Simulators for teaching or training purposes
    • G09B9/02—Simulators for teaching or training purposes for teaching control of vehicles or other craft
    • G09B9/04—Simulators for teaching or training purposes for teaching control of vehicles or other craft for teaching control of land vehicles
    • G09B9/042—Simulators for teaching or training purposes for teaching control of vehicles or other craft for teaching control of land vehicles providing simulation in a real vehicle
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B9/00—Simulators for teaching or training purposes
    • G09B9/02—Simulators for teaching or training purposes for teaching control of vehicles or other craft
    • G09B9/04—Simulators for teaching or training purposes for teaching control of vehicles or other craft for teaching control of land vehicles
    • G09B9/05—Simulators for teaching or training purposes for teaching control of vehicles or other craft for teaching control of land vehicles the view from a vehicle being simulated
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B9/00—Simulators for teaching or training purposes
    • G09B9/02—Simulators for teaching or training purposes for teaching control of vehicles or other craft
    • G09B9/04—Simulators for teaching or training purposes for teaching control of vehicles or other craft for teaching control of land vehicles
    • G09B9/052—Simulators for teaching or training purposes for teaching control of vehicles or other craft for teaching control of land vehicles characterised by provision for recording or measuring trainee's performance

Abstract

운전자를 훈련 및 평가하기 위한 시스템(10)은 운전자에 의해 취해진 다양한 행동에 대한 정보를 탐지 및 기록한다. 예를들어, 시스템은 운전자가 적절하게 검사해야만 하는 것을 바라보는 지의 여부를 결정하기 위해 탈것을 조종하는 코스에서 운전자가 응시하는 것을 기록한다. 또한, 시스템은 속도 및 제어 및 지시기의 서용을 포함하는 운전자의 수행능력에 대한 기타 관점에 대한 정보(80,82)를 제공한다. 이 정보는 평가 형태로 상관 및 제공된다. 대안으로, 운전자는 운전자의 수행능력을 향상시키기 위해 운전자의 수행능력을 개선하도록 하기 위해 탈것을 조종하는 코스에서 프롬프팅되어(76)진다.

Description

운전자 훈련 시스템{OPERATOR TRAINING SYSTEM}
현재, 탈것 운전자는 시뮬레이터를 이용하여 훈련될 수 있다. 예를들어, 운전자를 다양하고 상이한 환경 조건에 노출시키고 이러한 조건에 대한 운전자의 반응을 평가하는 비행기 훈련 시뮬레이터가 알려져 있다. 또한, 자동화된 운전자 시험에서, 운전자는 일련의 질문을 받고 이에 대한 운전자의 대답이 컴퓨터 데이터베이스에 저장된 올바른 대답에 대해 검사된다. 이러한 연구법은 양호하고 저비용으로 탈것 운전자를 평가 및 훈련시킬 필요에 부합하는 것이다. 이것은 바람직하게 그러한 운전자의 수행능력을 향상시키고 운전자들의 훈련 비용을 감소시킨다.
양호한 운전자의 몇몇 특성은 평가하기 곤란할 수 있다. 훈련시키는 사람은 후방 보기 미러를 검사하는 것 및 계기등을 검사하는 등과 같은 일정한 특징에 대해 운전자를 관찰할 수 있다. 그러나, 사람이 탈것을 올바르게 조작하는 데에 필요한 기술을 완전히 습득했는 지에 대한 객관적인 올바른 평가를 얻기는 곤란하다. 예를들어, 한 운전자의 능력을 다른 운전자와 능력과 비교하는 것은 곤란할 수 있다.
따라서, 탈것 운전자를 양호하게 훈련 및 평가하기 위한 지속적인 필요가 있다.
본 발명은 일반적으로 자동차, 트럭, 항공기, 보트등과 같은 탈것(vehicles)의 운전자를 훈련 및 평가하기 위한 시스템에 관한 것이다.
도 1은 운전자에 의해 보여지는 탈것 전방 운전석 영역의 전면 입면도.
도 2는 탈것의 조종 코스에서 운전자가 응시하는 것을 탐지하기 위한 장치의 블록도.
도 3은 탈것의 조종 동안 운전자가 운전자가 응시하는 것을 결정하기 위한 흐름도.
도 4는 본 발명의 일실시예에 따라 운전자를 평가하기 위한 흐름도.
도 5는 이전 도면에 도시된 시스템을 구현하기 위한 프로세서 기반 시스템의 일실시예를 도시하는 다이어그램.
도 6은 본 발명의 일실시예에 따른 운전자의 수행성능에 대한 시뮬레이팅된 재생 디스플레이를 도시하는 스크린 디스플레이를 나타내는 도.
본 발명의 일 실시예에 따라, 탈것 운전자 훈련 시스템은 운전자가 응시하는 것을 감지하도록 응용된 센서를 포함한다. 제어기는 운전자가 응시한 것에 대한 정보를 기록하도록 응용된다.
도 1을 참조하면, 탈것 운전자는 자동차, 트럭, 항공기, 보트등과 같은 실제 탈것 또는 시뮬레이터일 수 있는 운전석(10)에 앉을 수 있다. 운전석(10)은 윈드쉴드(12), 대쉬보드(14), 운전대(16), 후방 보기 미러(18) 및 측방 보기 미러(20)등을 포함할 수 있다. 또한 응시 카메라(26) 및 눈 카메라(28)를 포함할 수 있다.
응시 카메라(26)는 적외선 광 방사 다이오드(LEDs)(24)에 팬/틸트 유닛(22)에 의해 결합될 수 있다. 카메라(26 및 28)는 운전자가 탈것의 조종 코스에서 응시하는 것을 결정하기 위한 입력정보를 제공한다. 이것은 탈것을 효과적으로 조종하기 위해 운전자가 정보의 소스를 적절하게 사용하는 지의 여부를 평가하기 위해 사용될 수 있다.
예를들어, 자동차의 경우에, 시스템은 운전자가 전방 윈드쉴드(12)를 살피는 지, 운전자가 전방 윈드쉴드를 스캐닝하는 지, 운전자가 측방 보기 미러(20) 및 후방 보기 미러(18)를 검사하는 지 및 운전자가 대쉬보드(14)에 구비된 다양한 계기를 검사하는 지의 여부를 결정할 수 있다.
눈 카메라(28)는 짧은 초점 거리를 가질 수 있고 3차원 눈 위치를 측정하는 데에 사용될 수 있다. 응시 카메라(26)는 응시 기능을 결정하는데에 사용될 수 있다. 이것은 긴 초점 거리를 가질 수 있고 헤드가 움직일 때 눈을 따르도록 패닝 및 경사질 수 있다. 적외선 LED 어레이(24)는 눈에 조명하고 눈의 움직임을 추적하는 데에 유용한 눈에서의 반사를 위해 응시 카메라로부터 짧은 거리에 장착될 수 있다.
본 명세서에 설명된 시스템은, 눈 및 응시 추적, 주요한 성분 분석 및 적외선 LED 어레이를 사용하여, 사용자가 응시하는 것을 결정하기 위한 것이다. 그러나, 본 발명은 이 기술에 제한되는 것은 아니다. 대신에, 이 기술은 운전자가 탈것을 조종하면서 응시하는 것을 결정하기 위한 한 기술을 단지 예시하는 것이다. 사람이 보는 것을 결정하기 위한 기타 기술은 헤드 장착 카메라를 포함한다. 카메라 이미지는 플래시를 탐지하기 위해 처리될수 있다. 기타 시스템은 물체를 추적하기 위해 좌표화된 동시적인 이미지를 캡춰링하기 위해 다수의 비디오 카메라를 사용한다.
예시된 시스템은 1998년 8월 17-20일, 오스트레일리아의 브리스베인에서 개최된 패턴 인식에 관한 제14회 국제 회의에서 Jin Liu가 발표한, "Determination of the Point of Fixation in a Head-fixed Coordinate System," 에 더욱 설명되어 있다. 이 시스템에 대한 또다른 정보는 현재 인터넷사이트 http://www.hhi.de/~blick/papers/eyegaze 97/eye-gaze.html에서 찾을 수 있는 제목이 "Eye and Gaze Tracking for Visually Controlled Interactive Stereoscopic Displays" 이고, Kay Talmi 와 Jin Liu가 작성한 논문에서도 찾을 수 있다.
도 2를 참조하면, 눈 추적기(34) 및 응시 추적기(38)는 카메라(26 및 28)로부터의 입력을 수신한다. 즉, 이미지(32)에 의해 나타내 진 바와 같이, 눈 추적기는 운전자의 얼굴 사진에 해당하는 카메라(26)로부터의 디지털 이미지를 수신한다. 동시에, 응시 추적기(38)는 운전자의 눈의 하나 또는 두 이미지를 수신한다. 눈 추적기는 눈 카메라(28)의 비디오 이미지를 분석하여 3차원 눈 위치를 추적한다. 또한, 하나 또는 두개의 동공은 검출되어 3차원 눈 위치를 계산할 수 있도록 하기 위해 추적된다.
눈 추적기(34)는 팬/틸트 유닛(40)을 사용하여, 운전자의 헤드가 움직임에따라 눈의 위치를 따르도록 눈 카메라(28)가 패닝 및 경사지게 한다. 움직임 보상은 운전자의 헤드 움직임을 보상하기 위해 블록(42)에 표시된 바와 같이 제공될 수 있다.
맨처음에 정지 헤드 카메라 이미지가 분석을 위해 수신될 수 있다. 밸리라 칭하는 검은 영역은 분석이 계속되도록 하기 위해 식별되어 제거된다.
주요 성분 분석(PCA;principal component analysis)이 운전자의 눈을 찾기 위해 사용된다. 훈련 단계에서, 인간 눈의 특징이 PCA를 이용하여 눈 위치를 찾기 위해 기록된다. 이들 특징은 눈지문이라고 칭해지는 기준 눈 패턴으로서 저장된다. 카메라(26) 이미지는 분석되어 눔의 위치를 찾기위해 저장된 눈 패턴과 비교된다. 한 실시예에서, 이들 결정된 눈 위치는 E다른 이차원 카메라 이미지(추가의 카메라 사용된다면)에서 탐색될 수 있다. 이차원 매칭에 의해, 두 눈의 3차원 위치가 결정될 수 있다. 이 정보는 그후 눈 카메라(26)의 팬 및 경사 유닛(22)을 제어하는 데에 사용된다.
각막-반사 방법은 응시 방향을 결정하는 데에 사용될 수 있다. 저전력 적외선 LEDs(24)는 카메라(26)의 광축에 대해 병렬인 어레이에 대해 직교하는 카메라(26)의 한 측에서 팬 경사 유닛(22)에 장착될 수 있다. LEDs(24)는 눈을 조명하고 각막상에 하이라이트를 발생시킨다. 각막-반사 알고리즘은 동공중의 하나의 센터와 각막 표면반사의 센터를 식별한다. 두 센터 사이의 거리와 그들의 방향은 응시 방향을 결정하는 데에 사용된다. 헤드 움직임에 따른 응시방향의 변화는 3차원 헤드 위치에 관한 정보를 이용하여 보상된다.
PCA는 비교적 작은 차원을 이용하여 인간의 눈의 일반적 특성을 표현한다. PCA는 눈에 대한 조도 설명을 상이한 좌표 시스템으로 변환한다. 이 좌표 시스템은 좌표 시스템의 기본 벡터를 트런케이팅시킴으로써 발생하는 평균 평방근 에러를 감소시킨다.
도 3을 참조하면, 카메라(28)로부터의 입력은 도 2에서 32로 표시되고 도 3에서 블록(46)으로 표시된 헤드 뷰우를 현상시키는 데에 사용된다. 선처리동안, 블록(48)에서, 시스템은 얼굴 특징에 대한 몇몇 초기 특징을 유추해낸다. 예를들어, 검은 영역은 이들이 눈 위치를 지시하는 얼굴 특징찾는 데에 유용하지 않으므로 제거된다. 블록(50)에서, 얼굴 특징 검출은 PCA를 이용하여 구현된다. 블록(54)에서, 3차원 눈 위치는 단일 카메라 또는 한 쌍의 입체 카메라중의 하나를 사용하여 결정된다. 동공의 위치는 도 2에 36으로 표시된 바와 같이 그리고 카메라(26)로부터의 입력을 사용하여 블록(58)에서 나타낸 바와 같이 패턴 인식 및/또는 각막 반사 분석을 이용하여 탐지된다.
각막상에서 LED 반사에 의해 야기된 하이라이트는 블록(60)에서 탐지되고 변위 인자는 블록(62)에서 나타낸 바와 같이 결정된다. 변위 인자는 다른 카메라(28)로부터의 정보룰 이용하여, 헤드의 움직임을 보정한다. 마지막으로, PCA 분석은 블록(66)에서 나타낸 바와 같이, 응시 방향을 결정하는 데에(블록(64)) 이용된다.
본 발명의 한 실시예에서, 사용자가 턴 어라운드할 때에 얼굴의 위치탐색을 용이하게 하기 위해 복수의 카메라가 운전석 주위에 배치될 수 있다. 예를들어, 운전자가 탈것의 뒤를 보려고 돌릴 때에, 카메라(26,28)는 운전자의 얼굴을 "놓칠수" 있다. 운전석 주위에 배치된 카메라는 운전자의 얼굴의 위치를 탐지하는 데에 사용될 수 있다. 이 정보는 운전자의 행동이 적절한 지의 여부를 결정하기 위해 분석된다.
응시방향은 운전자를 평가 및 훈련시키는 데에 사용된다. 도 4를 참조하면, 소프트웨어(66)는 블록(68)에 나타낸 바와 같이 눈 움직임 정보를 수신함으로써 시작한다. 한 실시예에서, 이것은 임의의 시간 간격으로, 눈이 실제로 바라보는 것에 관한 정보이다. 이 정보는 블록(70)에 나타낸 바와 같이 응시좌표로 변환결정되어진다.
응시좌표는 측방향 보기 미러 또는 후방향 보기 미러와 같은 타겟에 대응한다. 한 실시예에서, 응시좌표는 임의의 시간 간격으로 눈이 실제로 바라보는 것에 관한 정보를 포함한다. 예를들어, 응시 좌표 정보는 블록(70)에 나타낸 바와 같이 타겟에 응시된 것으로 변환결정되어진다. 운전자의 응시 좌표 및 응시 타겟의 좌표를 알게 됨으로써, 보여지는 특정 물체가 결정될 수 있다. 타겟에 대한 응시는 자동차에서 측방향 보기 미러 또는 후방향 보기 미러, 계기 패널 및 전방 윈드쉴드와 같은 타겟에 대응한다. 이들 물체의 각각의 좌표는 주어진 응시 방향과 비교되고 시스템(30)에 의해 탐지된 응시 방향이 일반적으로 주어진 타겟의 좌표에 대응할 때, 응시정보는 운전자의 응시가 알려진 응시 타겟중의 하나로 지향되는 것을 결정하도록 결정되어진다.
다음에, 타겟 응시 빈도는 블록(72)에 나타낸 바와 같이, 운전자가 주어진 타겟 또는 물체를 몇 번 응시하는 지를 결정함으로써 결정된다. 이러한 방식으로,시스템은 주어진 소정 주행 코스에서 운전자가 주어진 물체를 바라보는 횟수를 결정할 수 있다.
따라서, 한 실시예에서, 운전자는 운전자가 각각의 타겟을 검사해야 할 횟수를 알 수 있는 시뮬레이팅된 코스를 주행하는 탈것을 운전한다. 대안으로, 운전자는 알려진 코스에 대해 탈것을 조종할 수 있고 여기서 다양한 응시 타겟을 검사하기 위해 운전자에게 합리적으로 예상되는 횟수가 알려져 있다. 대안으로, 타겟 응시 빈도 정보는 응시 빈도의 표준 범위와 상관되고 비교된다. 예를들어, 평균적으로 운전자가 시간 당 후방 보기 미러 X를 검사해야 할 횟수가 결장된다. 소정 횟수를 알게됨으로써, 운전자의 수행능력이 설정된 표준에 속하는 지를 결정하기 위해 분석이 행해질 수 있다.
결정블록(74)에서, 운전자가 자신의 응시 횟수를 변경시켜야 하는 지의 여부를 결정할 수 있다. 그보단 단순히 사용자를 평가함으로써, 시스템은 운전자가 정보의 특정 소스를 검사하는 횟수를 증가시키도록 운전자를 훈련시킨다. 예를들어, 운전자가 후방 보기 미러를 충분한 빈도로 검사하지 않는 것으로 결정되면, 운전자가 후방 보기 미러를 빈번히 검사하도록 블록(76)에 나타낸 바와 같이 운전자에게 프롬프팅될 수 있다.
시스템은 블록(78)에 나타낸 바와 같이 탈것의 속도를 포함한 다른 정보를 수신한다. 속도 이력은 기록될 수 있고 주어진 코스에 대해 추천된 알려진 한계치 또는 알려진 속도와 비교된다. 다음에, 시스템은 블록(82)에 나타낸 바와 같이 제어정보를 수신한다. 시스템은 운전자가 브레이크 도는 기타 제어수단을 언제 어떻게 빈번히 행하는 지를 기록하고 운전자가 얼마나 자주 회전 지시기 및 기타 지시를 사용하는 지를 기록한다. 상기한 바와 같이, 이 정보는 소정 코스에 대해 예상되는 것 또는 기타 코스에서의 표준에 대해 비교된다.
시스템은 블록(83)에 나타낸 바와 같이, 탈것 위치 정보를 수신한다. 광역 위치지정 시스템(GPS) 수신기와 같은, 탈 것 위치탐색 장치는 탈것의 위치 및 응시 타겟 정보와 상관된 정보를 결정하기 위해 사용될 수 있다. 시스템은 그후 운전자가 주어진 위치 예를들어 소정 훈련 또는 평가 코스에서 반드시 바라보아야 할 것을 바라보았는 지의 여부를 평가할 수 있다.
블록(84)을 참조하면, 운전자의 응시 타겟 빈도, 속도 및 제어/지시기 수행능력이 평가된다. 이것은 상이한 코스 및 조건에 대해 광범위하게 상이한 운전자에 대해 표준 값의 데이터베이스에 대해 운전자의 수행능력을 비교함으로써 행해진다. 대안으로, 공지된 코스에 대한 운전자의 수행능력과 예상된 수행능력을 비교함으로써 개발될 수 있다. 운전자에게는 따라서 예상되는 숙련기술에 대해 운전자 숙련기술을 어떻게 비교하는 지에 대한 정보가 제공된다. 이것은 운전자가 자신의 수행능력을 개선시키는 방법에 대해 운전자에게 피드백을 제공하기 위해 또는 운전자를 훈련시키는 경우에 운전자를 평가하기 위해 사용될 수 있다.
도 5에 도시된 바와 같은, 본 발명의 한 실시예를 구현하기 위한 프로세서 기반 시스템(100)은 프로세서(102)를 포함한다. 한 실시예에서, 프로세서는 가속된 그래픽 포트 구현체를 구현하기 위해 가속된 그래픽 포트(AGP)(캘리포니아, 산타 클라라 소재의 인텔사에 의해 1996년 7월 31일 발행된 가속된 그래픽 포트 인터페이스 버전1.0 설명서를 참조) 칩셋트(104)에 결합될 수 있다. 칩셋트(104)는 AGP 포트(105) 및 그래픽 가속기(106)와 통신할 수 있다. 디스플레이(110)는 그래픽 가속기(106)의 비디오 출력에 연결될 수 있다. 칩셋트(104)는 또한 시스템 메모리(108)와 버스(112)에 연결된다.
버스(112)는 또한 움직임 보상기(42)에 연결된다. 이것은 카메라(26 및 28)로부터 입력을 수신하고 출력신호를 팬/경사 유닛(22)과 어레이(24)에 제공한다. 버스(112)는 또한 하드 디스크 드라이브(118)를 연결하는 브리지(116)에 연결된다. 소프트웨어(66)는 고유 얼굴 정보(116) 및 교정 데이터베이스(114)와 함께 하드 디스크 드라이브(118)에 저장된다. 브리지(116)는 다른 버스(132)에 연결된다. 버스(132)는 또한 직렬 입력/출력(SIO) 디바이스(134)에 연결된다. 디바이스(134)는, 각각이 탈것으로부터 정보를 수신하기 위해 연결된, 제어 인터페이스(138) 및 속도 인터페이스(140), 및 위치지정 시스템(144)으로부터 직렬 입력을 수신한다. 또한 버스(132)에는 기본 입력/출력 시스테(BIOS)이 연결된다.
본 발명의 한 실시예에 따라, 탈것 조종 세션의 프로세서 기반 재생은 주어진 운전자에게 수행능력 평가 및 피드백을 제공하기 위해 취해질 수 있다. 도 6을 참조하면, 디스플레이 스크린(110)은 시뮬레이팅된 포맷으로 대쉬보드(86), 스티어링 컬럼(88) 및 드라이버(90)를 포함하는 디스플레이를 포함한다. 드라이버의 시선은 점선(92)으로 나타내었다.
움직임 보상기(42)로부터 수신된 정보를 기초로 하여, 시간 및 특정 위치에 대한 운전자의 시선은 도 6에 도시된 점선(92)과 같은 그래픽 사용자 인터페이스로서 재생성될 수 있다. 따라서, 훈련시키는 자 및 훈련받는 자는 주어진 시간 및 상황에서 운전자가 무엇을 바라보는 지를 볼 수 있다. 예를들어, 디스플레이부(94)는 각각의 시간에서의 주변환경에 대한 정보를 제공한다. 광역 위치 지정 시스템은 한 실시예에서, 주어진 응시 방향에서 탈 것이 어디에 있는 지 및 운전자가 바라보는 때에 대한 정보를 제공하도록, 디스플레이상에 지시된다. 부재번호 94에 나타낸 바와 같이, 스크린상에 디스플레이된 정보는 각각의 시간에 대한, 코스 조건, 날씨 지시, 속도 지시, 브레이트의 사용을 지시하는 제동 인자 및 운전자가 난시청지역(blind spot)을 효과적으로 모니터링하는 법을 지시하는 난시청 요인을 포함한다. 이러한 방식으로, 훈련받는 자는 주어진 코스를 따라 연속적으로 또는 일정한 시간 간격으로 재생된 자신의 수행능력을 볼 수 있다. 이와같은 재생은 탈것이 어디에 있었는지 및 운전자가 주어진 방식으로 반응했는 지를 나타낸다.
시스템(30)은 운전자의 수행능력을 평가하기 위해 또는 훈련 연습을 제공하기 위해 시스템에 의해 유발되는 외부 이벤트를 제공한다. 외부 이벤트 발생은 광역 위치 시스템 수신기에 의해 제공되는 바와 같이 탈것의 위치와 동기화된다. 예를들어, 다른 탈것은 탈것이 주어진 위치에 접근할 때 탈것의 주행 라인내로 움직이게 한다. 운전자의 시선이 이벤트를 탐지하는 법과 운전자가 반응하는 법을 포함하는, 이벤트에 대한 운전자의 반응은 프로세서 기반 시스템에 의해 평가된다.
외부 이벤트는 주어진 조건하에서 운전자의 수행능력을 테스트하기 위해 탈것에 대한 광역 위치지정 좌표에 의해 유발된 셋트 스크립트에 기초한다. 주어진 이벤트에 대한 운전자의 반응 시간은 결정 및 기록될 수 있다.
예를들어, 운전자가 계속적으로 주어진 방향에서 및 주어진 시간에 바라보는 방향을 회피한다면, 시스템은 그 구역에서 볼 것이 요구되는 이벤트를 응용적으로 발생시킨다. 이러한 방식으로, 운전자는 넓은 시계를 유지하지 못하는 결과를 갖게되는 나쁜 습관을 극복하도록 조정될 수 있다.
탈것에 대한 광역 위치지정 좌표를 결정함으로써, 표지물에 키 입력된 운전자의 반응이 결정될 수 있다. 예를들어, GPS 시스템 좌표가 레인 스트라이프에 대해 알려졌다면, 광역 위치지정 시스템 좌표에 기초하여 운전자가 자신의 레인내에서 중앙에 유지되고 있는 지 또는 좌우로 벗어나고 있는 지의 여부를 결정할 수 있다.
시스템은 또한 운전자의 수행능력을 평가하는 데에 고려되는 날의 날씨 및 시간을 수신한다. 날씨, 교통 상황 및 기타 정보는 인터넷으로부터 또는 길을 따라 센서로부터 수신될 수 있다.
몇몇 실시예에서, 윈드쉴드로부터 뷰우를 기록하기 위해 카메라를 제공하는 것이 바람직할 수 있다. 그후 재생 모드에서, 탈것의 윈드쉴드로부터 실제 기록된 뷰우는 더욱 현실감 있도록 재생된다. 지시기의 시선은 기록된 이미지에 중첩될 수 있다. 또한, 비디오 재생은 운전자의 시선과 기타 운전자의 반응에 대해 발생하는 것에 대한 더욱 상세한 피드백을 제공할 수 있다.
본 발명이 제한된 수의 실시예에 대해 설명되었을 지라도, 당업자는 그로부터 다양한 수정 및 변형을 인식할 것이다. 첨부된 청구범위는 본 발명의 범위 및 정신에 속하는 그러한 모든 수정 및 변형을 포함하는 것으로 의도된다.

Claims (20)

  1. 운전자가 응시하는 것을 감지하도록 응용된 센서; 및
    운전자 훈련 세션의 코스에서 운전자가 응시하는 것에 대한 기록을 행하고 미리정의된 정보와 상기 기록을 비교하도록 응용된 제어기를 포함하는 특징으로 하는 탈것 운전자 훈련 시스템.
  2. 제 1 항에 있어서, 상기 센서는 카메라를 포함하는 것을 특징으로 하는 탈것 운전자 훈련 시스템.
  3. 제 2 항에 있어서, 상기 카메라는 디지털 카메라인 것을 특징으로 하는 탈것 운전자 훈련 시스템.
  4. 제 3 항에 있어서, 헤드 위치를 찾기 위한 제1 카메라와 눈 위치를 찾기 위한 제2 카메라를 포함하는 것을 특징으로 하는 탈것 운전자 훈련 시스템.
  5. 제 1 항에 있어서, 위치 찾기 디바이스를 포함하는 것을 특징으로 하는 탈것 운전자 훈련 시스템.
  6. 제 5 항에 있어서, 상기 위치 찾기 디바이스는 광역 위치지정 시스템 수신기인 것을 특징으로 하는 탈것 운전자 훈련 시스템.
  7. 제 1 항에 있어서, 탈것 제어부로부터의 정보를 수신하도록 응용된 인터페이스를 포함하는 것을 특징으로 하는 탈것 운전자 훈련 시스템.
  8. 제 1 항에 있어서, 탈것 속도 정보를 수신하도록 응용된 인터페이스를 포함하는 것을 특징으로 하는 탈것 운전자 훈련 시스템.
  9. 제 1 항에 있어서, 탈것 지시기의 사용에 대한 정보를 수신하도록 응용된 인터페이스를 포함하는 것을 특징으로 하는 탈것 운전자 훈련 시스템.
  10. 운전자가 응시하는 것을 자동적으로 감지하는 단계;
    운전자 평가 세션의 코스에서 운전자가 응시하는 것에 대한 기록을 행하는 단계; 및
    상기 기록을 미리 정의된 정보와 비교하는 단계를 포함하는 특징으로 하는 탈것 운전자 평가 방법.
  11. 제 10 항에 있어서, 탈것의 현재 위치에 대한 정보를 수신하는 단계를 포함하는 것을 특징으로 하는 탈것 운전자 평가 방법.
  12. 제 10 항에 있어서, 탈것 제어부의 조종에 대한 정보를 수신하는 단계를포함하는 것을 특징으로 하는 탈것 운전자 평가 방법.
  13. 제 10 항에 있어서, 운전자의 수행능력을 미리정의된 표준과 비교하는 단계를 포함하는 것을 특징으로 하는 탈것 운전자 평가 방법.
  14. 제 10 항에 있어서, 주어진 물체를 운전자가 응시하는 빈도를 결정하는 단계를 포함하는 것을 특징으로 하는 탈것 운전자 평가 방법.
  15. 제 10 항에 있어서, 탈것 속도에 대한 정보를 기록하는 단계를 포함하는 것을 특징으로 하는 탈것 운전자 평가 방법.
  16. 제 10 항에 있어서, 운전자가 하나 이상의 물체를 응시하는 빈도를 증가시키도록 운전자에게 프롬프팅하는 단계를 포함하는 것을 특징으로 하는 탈것 운전자 평가 방법.
  17. 제 16 항에 있어서, 운전자가 물체를 응시하고 있을 때의 탈것의 위치와 운전자가 응시하는 것을 상관시키는 단계를 포함하는 것을 특징으로 하는 탈것 운전자 평가 방법.
  18. 프로세서 기반 시스템이,
    탈것 운전자가 응시하는 것에 대한 정보를 수신하고,
    운전자가 운전자 평가 코스에서 응시하는 것을 기록하고, 및
    상기 기록과 미리정의된 정보를 비교하게 하는,
    명령을 저장하는 매체를 포함하는 것을 특징으로 하는 아티클.
  19. 제 18 항에 있어서, 운전자가 하나 이상의 물체를 응시하는 빈도를 증가시키도록 프로세서 기반 시스템이 운전자에게 프롬프팅하게 하기 위한 명령을 저장하는 것을 특징으로 하는 아티클.
  20. 제 18 항에 있어서, 운전자가 응시하는 것과 운전자가 물체를 응시하고 있을 때의 탈것의 위치를 프로세서 기반 시스템이 상관시키게 하는 명령을 저장하는 것을 특징으로 하는 아티클.
KR10-2001-7010227A 1999-02-26 2000-01-12 운전자 훈련 시스템 KR100416152B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US09/258,848 US6200139B1 (en) 1999-02-26 1999-02-26 Operator training system
US09/258,848 1999-02-26

Publications (2)

Publication Number Publication Date
KR20010102090A KR20010102090A (ko) 2001-11-15
KR100416152B1 true KR100416152B1 (ko) 2004-01-24

Family

ID=22982383

Family Applications (1)

Application Number Title Priority Date Filing Date
KR10-2001-7010227A KR100416152B1 (ko) 1999-02-26 2000-01-12 운전자 훈련 시스템

Country Status (10)

Country Link
US (1) US6200139B1 (ko)
EP (1) EP1177544B1 (ko)
JP (2) JP3787493B2 (ko)
KR (1) KR100416152B1 (ko)
CN (1) CN1248174C (ko)
AT (1) ATE262207T1 (ko)
AU (1) AU2502800A (ko)
DE (1) DE60009057T2 (ko)
TW (1) TW440807B (ko)
WO (1) WO2000051097A2 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100898417B1 (ko) * 2007-06-08 2009-06-19 샬롬엔지니어링 주식회사 열차 운행 시뮬레이션 시스템

Families Citing this family (85)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7788008B2 (en) * 1995-06-07 2010-08-31 Automotive Technologies International, Inc. Eye monitoring system and method for vehicular occupants
US6200139B1 (en) * 1999-02-26 2001-03-13 Intel Corporation Operator training system
US8032264B2 (en) * 1999-12-15 2011-10-04 Automotive Technologies International, Inc. Vehicular heads-up display system
US8686922B2 (en) * 1999-12-15 2014-04-01 American Vehicular Sciences Llc Eye-location dependent vehicular heads-up display system
US8818647B2 (en) * 1999-12-15 2014-08-26 American Vehicular Sciences Llc Vehicular heads-up display system
US7565230B2 (en) * 2000-10-14 2009-07-21 Temic Automotive Of North America, Inc. Method and apparatus for improving vehicle operator performance
KR100736472B1 (ko) * 2000-11-14 2007-07-06 지멘스 악티엔게젤샤프트 차량 내부의 탑승 유무를 결정하는 방법 및 장치
DE10061038A1 (de) * 2000-12-08 2002-06-13 Daimler Chrysler Ag Informationssystem zur Bereitstellung von erklärenden Informationen zu Funktions-oder Bedienelementen in Kraftfahrzeugen
US6397137B1 (en) * 2001-03-02 2002-05-28 International Business Machines Corporation System and method for selection of vehicular sideview mirrors via eye gaze
US9400921B2 (en) * 2001-05-09 2016-07-26 Intel Corporation Method and system using a data-driven model for monocular face tracking
WO2003088126A1 (en) * 2002-04-05 2003-10-23 Konstantin Sizov Portable in-the-vehicle road simulator
US20070271078A1 (en) * 2002-06-25 2007-11-22 New York Air Brake Corporation Remote Control Locomotive Simulator
NO317200B1 (no) * 2002-08-09 2004-09-13 Best Practice Deployment As System for trafikkopplaering i et kjoretoy
CN1294510C (zh) * 2003-01-28 2007-01-10 中国南方航空股份有限公司 一种航空模拟机训练的计算机辅助教学系统及其方法
US6859144B2 (en) * 2003-02-05 2005-02-22 Delphi Technologies, Inc. Vehicle situation alert system with eye gaze controlled alert signal generation
DE10339314B3 (de) * 2003-08-27 2005-04-21 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Verfahren zur Anzeigesteuerung von unterschiedlichen Informationen in einem Fahrzeug und optoakustische Informationseinheit
JP2005208478A (ja) * 2004-01-26 2005-08-04 Ota Hiroo 模擬運転装置
JP4565445B2 (ja) * 2004-03-18 2010-10-20 国立大学法人 奈良先端科学技術大学院大学 顔情報計測システム
JP4650028B2 (ja) * 2005-03-02 2011-03-16 株式会社デンソー 運転評価装置および運転評価システム
JP4540507B2 (ja) * 2005-03-07 2010-09-08 株式会社日立国際電気 行動訓練内容表示方法
JP4682714B2 (ja) * 2005-06-14 2011-05-11 トヨタ自動車株式会社 対話システム
US20070047517A1 (en) * 2005-08-29 2007-03-01 Hua Xu Method and apparatus for altering a media activity
US10878646B2 (en) * 2005-12-08 2020-12-29 Smartdrive Systems, Inc. Vehicle event recorder systems
US20070150138A1 (en) 2005-12-08 2007-06-28 James Plante Memory management in event recording systems
US9201842B2 (en) 2006-03-16 2015-12-01 Smartdrive Systems, Inc. Vehicle event recorder systems and networks having integrated cellular wireless communications systems
US8996240B2 (en) * 2006-03-16 2015-03-31 Smartdrive Systems, Inc. Vehicle event recorders with integrated web server
JP2007264490A (ja) * 2006-03-29 2007-10-11 National Univ Corp Shizuoka Univ 情報提示評価システム
US9792319B2 (en) 2006-05-08 2017-10-17 Lytx, Inc. System and method for identifying non-event profiles
US8314708B2 (en) * 2006-05-08 2012-11-20 Drivecam, Inc. System and method for reducing driving risk with foresight
US9836716B2 (en) 2006-05-09 2017-12-05 Lytx, Inc. System and method for reducing driving risk with hindsight
US7659827B2 (en) * 2006-05-08 2010-02-09 Drivecam, Inc. System and method for taking risk out of driving
CN100483478C (zh) * 2006-09-06 2009-04-29 李宏 挖掘机模拟操作培训系统
US8989959B2 (en) 2006-11-07 2015-03-24 Smartdrive Systems, Inc. Vehicle operator performance history recording, scoring and reporting systems
US8649933B2 (en) 2006-11-07 2014-02-11 Smartdrive Systems Inc. Power management systems for automotive video event recorders
US8868288B2 (en) 2006-11-09 2014-10-21 Smartdrive Systems, Inc. Vehicle exception event management systems
JP2008139553A (ja) * 2006-12-01 2008-06-19 National Agency For Automotive Safety & Victim's Aid 運転適性診断方法、運転適性診断の評価基準決定方法、運転適性診断プログラム
US20080208646A1 (en) * 2007-02-28 2008-08-28 Thompson Ralph E Method for increasing productivity and safety in the mining and heavy construction industries
US8239092B2 (en) 2007-05-08 2012-08-07 Smartdrive Systems Inc. Distributed vehicle event recorder systems having a portable memory data transfer system
WO2008151942A2 (en) * 2007-06-14 2008-12-18 Driving Performance Solutions As System for performing driver education
RU2471246C2 (ru) * 2007-07-13 2012-12-27 Вольво Констракшн Эквипмент Аб Способ обеспечения оперативной информацией водителя транспортного средства
US8645001B2 (en) * 2007-09-04 2014-02-04 International Business Machines Corporation Method and system for blind spot identification and warning utilizing visual indicators
JP2009107373A (ja) * 2007-10-26 2009-05-21 Equos Research Co Ltd 警報音出力装置
US20090191531A1 (en) * 2007-12-21 2009-07-30 Joseph Saccocci Method and Apparatus for Integrating Audio and/or Video With a Book
JP5408572B2 (ja) * 2008-06-06 2014-02-05 株式会社山城自動車教習所 運転行動自動評価システム
EP2708267B1 (en) * 2008-11-25 2017-02-08 Fox Factory, Inc. Video apparatus for virtual competition
AU2010295239B2 (en) 2009-09-16 2015-04-23 Sydac Pty Ltd Visual presentation system
US11875707B2 (en) 2009-09-29 2024-01-16 Advanced Training Systems, Inc. System, method and apparatus for adaptive driver training
US9418568B2 (en) * 2009-09-29 2016-08-16 Advanced Training System Llc System, method and apparatus for driver training system with dynamic mirrors
US8770980B2 (en) 2009-09-29 2014-07-08 Advanced Training System Llc System, method and apparatus for adaptive driver training
KR101364080B1 (ko) 2009-12-17 2014-02-20 한국전자통신연구원 안전 운전 평가 방법 및 장치
DE102010016113A1 (de) * 2010-03-24 2011-09-29 Krauss-Maffei Wegmann Gmbh & Co. Kg Verfahren zur Ausbildung eines Besatzungsmitglieds eines insbesondere militärischen Fahrzeugs
WO2011126379A1 (en) * 2010-04-04 2011-10-13 Driving Performance Solutions As A system and method for drivers training
JP5387763B2 (ja) * 2010-05-25 2014-01-15 富士通株式会社 映像処理装置、映像処理方法及び映像処理プログラム
CH703735A2 (it) * 2010-09-15 2012-03-15 Erbicol Sa Riflessometro per determinare la reattivita' di un guidatore e suo impiego.
WO2012107892A2 (en) * 2011-02-09 2012-08-16 Primesense Ltd. Gaze detection in a 3d mapping environment
TWI491524B (zh) * 2012-03-08 2015-07-11 Ind Tech Res Inst 全周鳥瞰影像產生方法、訓練方法及應用其之車體端裝置及訓練裝置
CN104246682B (zh) 2012-03-26 2017-08-25 苹果公司 增强的虚拟触摸板和触摸屏
AU2013201418B2 (en) * 2012-04-23 2014-09-11 The Boeing Company Aircrew training system
US10102773B2 (en) 2012-04-23 2018-10-16 The Boeing Company Methods for evaluating human performance in aviation
JP5946349B2 (ja) * 2012-07-24 2016-07-06 日本無線株式会社 ドライビングシミュレータ
US9728228B2 (en) 2012-08-10 2017-08-08 Smartdrive Systems, Inc. Vehicle event playback apparatus and methods
DE102012016765A1 (de) * 2012-08-27 2014-02-27 Dr. Ing. H.C. F. Porsche Ag Kraftfahrzeugsimulationssystem
DE102012220321A1 (de) * 2012-11-08 2014-06-12 Bayerische Motoren Werke Aktiengesellschaft Demonstration von Fahrerassistenzsystemen
CN103854539A (zh) * 2012-12-07 2014-06-11 永泰软件有限公司 一种基于视频分析的电子路考监测系统
US9619695B2 (en) * 2013-06-06 2017-04-11 Visteon Global Technologies, Inc. Gaze time indicator for a vehicle
US9501878B2 (en) 2013-10-16 2016-11-22 Smartdrive Systems, Inc. Vehicle event playback apparatus and methods
US9610955B2 (en) 2013-11-11 2017-04-04 Smartdrive Systems, Inc. Vehicle fuel consumption monitor and feedback systems
US8892310B1 (en) 2014-02-21 2014-11-18 Smartdrive Systems, Inc. System and method to detect execution of driving maneuvers
US20150310758A1 (en) * 2014-04-26 2015-10-29 The Travelers Indemnity Company Systems, methods, and apparatus for generating customized virtual reality experiences
US20160107642A1 (en) * 2014-10-15 2016-04-21 Continental Automotive Systems, Inc. Collision avoidance system using driver eye monitoring during gear change
US9663127B2 (en) 2014-10-28 2017-05-30 Smartdrive Systems, Inc. Rail vehicle event detection and recording system
US11069257B2 (en) 2014-11-13 2021-07-20 Smartdrive Systems, Inc. System and method for detecting a vehicle event and generating review criteria
US9679420B2 (en) 2015-04-01 2017-06-13 Smartdrive Systems, Inc. Vehicle event recording system and method
CN105654808A (zh) * 2016-02-03 2016-06-08 北京易驾佳信息科技有限公司 一种基于实际机动车的机动车驾驶人智能化训练系统
US9639804B1 (en) 2016-03-22 2017-05-02 Smartdrive Systems, Inc. System and method to determine responsiveness of a driver of a vehicle to feedback regarding driving behaviors
CN105788401B (zh) * 2016-04-20 2018-09-28 公安部交通管理科学研究所 基于实车体的防御性驾驶模拟体验训练系统
US10083620B2 (en) 2016-07-29 2018-09-25 Nissan North America, Inc. Smart tutorial that learns and adapts
JP6892244B2 (ja) * 2016-11-02 2021-06-23 京セラドキュメントソリューションズ株式会社 表示装置及び表示方法
US11715387B2 (en) * 2018-03-30 2023-08-01 Cae Inc. Standard operating procedures feedback during an interactive computer simulation
JP7261370B2 (ja) * 2018-08-07 2023-04-20 国立大学法人東海国立大学機構 情報処理装置、情報処理システム、情報処理方法、および、コンピュータプログラム
CN109102194B (zh) * 2018-08-20 2021-06-18 安徽佳略信息科技有限公司 一种基于全球定位系统与惯性传感器的驾驶行为评分方法
US10625745B1 (en) * 2019-01-07 2020-04-21 Sean Tremblay Automated driver's exam system
US10699556B1 (en) 2019-03-01 2020-06-30 Honeywell International Inc. System and method for plant operation gap analysis and guidance solution
SE2030301A1 (en) * 2020-09-30 2022-03-31 Chadalavada Ravi Teja Method and system for driving skill feedback
FR3123491A1 (fr) * 2021-05-31 2022-12-02 Psa Automobiles Sa Simulateur de conduite automobile

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5016282A (en) 1988-07-14 1991-05-14 Atr Communication Systems Research Laboratories Eye tracking image pickup apparatus for separating noise from feature portions
US5138555A (en) 1990-06-28 1992-08-11 Albrecht Robert E Helmet mounted display adaptive predictive tracking
JPH0431172U (ko) * 1990-07-11 1992-03-12
JPH04129173U (ja) * 1991-05-13 1992-11-25 三菱重工業株式会社 視界目標の捕捉・追尾評価装置
JPH06189906A (ja) * 1992-12-26 1994-07-12 Nissan Motor Co Ltd 視線方向計測装置
US5373857A (en) * 1993-06-18 1994-12-20 Forte Technologies, Inc. Head tracking apparatus
US5471542A (en) 1993-09-27 1995-11-28 Ragland; Richard R. Point-of-gaze tracker
JPH07141095A (ja) * 1993-11-17 1995-06-02 Matsushita Electric Ind Co Ltd トレーニング装置
JPH0736299U (ja) * 1993-12-03 1995-07-04 昌久 時山 車輌用居眠り防止装置
FR2714508B1 (fr) 1993-12-23 1996-01-26 Thomson Csf Dispositif de simulation visuelle à parallaxe monoscopique pour un véhicule.
JP2993345B2 (ja) * 1993-12-29 1999-12-20 日産自動車株式会社 車両用表示装置
JP3134667B2 (ja) * 1994-06-02 2001-02-13 日産自動車株式会社 車両用表示装置
JP3119076B2 (ja) * 1994-06-02 2000-12-18 日産自動車株式会社 車両用警報表示装置
US5764291A (en) * 1994-09-30 1998-06-09 Apple Computer, Inc. Apparatus and method for orientation-dependent camera exposure and focus setting optimization
JP3257310B2 (ja) * 1994-12-22 2002-02-18 トヨタ自動車株式会社 漫然運転検出装置
US5583795A (en) * 1995-03-17 1996-12-10 The United States Of America As Represented By The Secretary Of The Army Apparatus for measuring eye gaze and fixation duration, and method therefor
JPH1097179A (ja) * 1996-09-20 1998-04-14 Sanyo Electric Works Ltd 走行情報記録装置、走行情報解析装置及び両装置を用いた車両教習システム
US5839000A (en) * 1997-11-10 1998-11-17 Sharp Laboratories Of America, Inc. Automatic zoom magnification control using detection of eyelid condition
US6154559A (en) 1998-10-01 2000-11-28 Mitsubishi Electric Information Technology Center America, Inc. (Ita) System for classifying an individual's gaze direction
US6200139B1 (en) * 1999-02-26 2001-03-13 Intel Corporation Operator training system

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100898417B1 (ko) * 2007-06-08 2009-06-19 샬롬엔지니어링 주식회사 열차 운행 시뮬레이션 시스템

Also Published As

Publication number Publication date
AU2502800A (en) 2000-09-14
WO2000051097A2 (en) 2000-08-31
TW440807B (en) 2001-06-16
KR20010102090A (ko) 2001-11-15
DE60009057T2 (de) 2004-08-05
JP3787493B2 (ja) 2006-06-21
CN1248174C (zh) 2006-03-29
ATE262207T1 (de) 2004-04-15
CN1470044A (zh) 2004-01-21
EP1177544A2 (en) 2002-02-06
EP1177544B1 (en) 2004-03-17
WO2000051097A3 (en) 2001-11-29
JP2002538498A (ja) 2002-11-12
US6200139B1 (en) 2001-03-13
JP2006163375A (ja) 2006-06-22
DE60009057D1 (de) 2004-04-22

Similar Documents

Publication Publication Date Title
KR100416152B1 (ko) 운전자 훈련 시스템
Braunagel et al. Ready for take-over? A new driver assistance system for an automated classification of driver take-over readiness
CN102510480B (zh) 驾驶员视线自动校准和跟踪系统
US10705600B2 (en) Method and apparatus for detecting and following an eye and/or the gaze direction thereof
CN105741643B (zh) 用于培训驾驶技术的自动化实现方法、装置和系统
US7162054B2 (en) Augmented reality technology
Jiménez et al. Gaze fixation system for the evaluation of driver distractions induced by IVIS
JP4181037B2 (ja) 視標追跡システム
US20060238707A1 (en) Method and installation for detecting and following an eye and the gaze direction thereof
US20150238087A1 (en) Biological information measurement device and input device utilizing same
Wahlstrom et al. Vision-based methods for driver monitoring
CN109849788B (zh) 信息提供方法、装置及系统
US20200150427A1 (en) Method, apparatus and system for determining line of sight, and wearable eye movement device
JPH07505308A (ja) 視点の運動性のテスト方法および装置
Guasconi et al. A low-cost implementation of an eye tracking system for driver's gaze analysis
CN105987717B (zh) 驾驶员视觉传感器性能测试系统
Gish et al. Sensory and cognitive factors affecting automotive head-up display effectiveness
CN113767026A (zh) 用于运行机动车的方法
KR102340184B1 (ko) 콘솔 단말기에서 인공지능 학습기법을 이용하여 수동 표적을 추적하는 장치 및 방법
JPH06251272A (ja) 運転者視点判定装置及び脇見判定装置
Hamada et al. Detecting method applicable to individual features for drivers' drowsiness
SE2030301A1 (en) Method and system for driving skill feedback
US20210295731A1 (en) Information processing apparatus, information processing system, information processing method, and computer program
JP2988235B2 (ja) 車両用視線方向検出装置
JP3242685B2 (ja) 視線測定装置

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130104

Year of fee payment: 10

FPAY Annual fee payment

Payment date: 20140103

Year of fee payment: 11

FPAY Annual fee payment

Payment date: 20141230

Year of fee payment: 12

FPAY Annual fee payment

Payment date: 20160104

Year of fee payment: 13

LAPS Lapse due to unpaid annual fee