KR20120068879A - Portable telepresence apparatus - Google Patents

Portable telepresence apparatus Download PDF

Info

Publication number
KR20120068879A
KR20120068879A KR1020127007318A KR20127007318A KR20120068879A KR 20120068879 A KR20120068879 A KR 20120068879A KR 1020127007318 A KR1020127007318 A KR 1020127007318A KR 20127007318 A KR20127007318 A KR 20127007318A KR 20120068879 A KR20120068879 A KR 20120068879A
Authority
KR
South Korea
Prior art keywords
telepresence device
housing
station
coupled
remote station
Prior art date
Application number
KR1020127007318A
Other languages
Korean (ko)
Inventor
켈톤 템비
찰스 에스. 조단
다니엘 에스. 산체스
스티븐 이. 버트너
데릭 제이. 왈터스
푸지 래이
케빈 피. 한라한
조슈아 에이. 보우가님
제임스 로센탈
Original Assignee
인터치 테크놀로지스 인코퍼레이티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from US12/548,122 external-priority patent/US8384755B2/en
Application filed by 인터치 테크놀로지스 인코퍼레이티드 filed Critical 인터치 테크놀로지스 인코퍼레이티드
Publication of KR20120068879A publication Critical patent/KR20120068879A/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/141Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/142Constructional details of the terminal equipment, e.g. arrangements of the camera and the display
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/147Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
    • G16H40/67ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for remote operation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/53Constructional details of electronic viewfinders, e.g. rotatable or detachable
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/66Remote control of cameras or camera parts, e.g. by remote control devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/66Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/661Transmitting camera control signals through networks, e.g. control via the Internet
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00Aspects of interface with display user
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00Aspects of data communication
    • G09G2370/16Use of wireless transmission of display information
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2380/00Specific applications
    • G09G2380/08Biomedical applications
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums

Abstract

원격 스테이션에 결합된 포터블 텔레프레즌스 장치를 포함하는 텔레프레즌스 시스템이 제공된다. 상기 텔레프레즌스 장치는 하우징에 결합된 모니터, 카메라, 마이크로폰 및 뷰파인더 스크린을 포함한다. 뷰파인더 스크린은 사용자로 하여금 상기 카메라에 의해 캡처된 이미지를 볼 수 있도록 한다. 상기 포터블 텔레프레즌스 장치는 상기 원격 스테이션으로부터의 음성 명령에 응답하여 상기 디바이스의 소지자에 의해 이동될 수 있는 핸드헬드 디바이스이다. 상기 텔레프레즌스 장치는 빠르고 효율적인 방식으로 환자를 원격으로 볼 수 있도록 의료진에 의해 사용될 수 있다.A telepresence system is provided that includes a portable telepresence device coupled to a remote station. The telepresence device includes a monitor, camera, microphone and viewfinder screen coupled to the housing. The viewfinder screen allows the user to view the image captured by the camera. The portable telepresence device is a handheld device that can be moved by a bearer of the device in response to a voice command from the remote station. The telepresence device can be used by medical personnel to remotely view a patient in a fast and efficient manner.

Description

포터블 텔레프레즌스 장치{PORTABLE TELEPRESENCE APPARATUS}Portable telepresence device {PORTABLE TELEPRESENCE APPARATUS}

본 개시물은 일반적으로 텔레프레즌스 시스템의 분야에 관한 것이다. This disclosure relates generally to the field of telepresence systems.

보다 특정하여, 본 개시물은 원격 스테이션을 통해 원격으로 제어되는 장치를 포함하는 포터블 텔레프레즌스 시스템에 관한 것이고, 여기서 상기 시스템은 카메라, 모니터, 마이크로폰, 및 스피커를 포함하여 양방향 오디오-비주얼 통신을 가능하게 한다.More specifically, the present disclosure relates to a portable telepresence system comprising a device remotely controlled via a remote station, wherein the system enables a two-way audio-visual communication including a camera, a monitor, a microphone, and a speaker. do.

본 발명은 원격 스테이션을 통해 원격으로 제어되는 포터블 텔레프레즌스 시스템을 제공하기 위한 것이다.The present invention is to provide a portable telepresence system that is controlled remotely through a remote station.

본문에 도면에서 전체적으로 기술되고 예시된 바와 같이 실시예의 컴포넌트들이 배치되고 폭넓게 다양한 상이한 구성으로 설계될 수 있다는 것이 용이하게 이해될 것이다. 따라서, 도면에 나타낸 바와 같이, 다양한 실시예의 하기의 보다 상세한 설명은 청구된 바와 같이 본 발명의 범위를 한정할 것을 의도하지 않으며, 단지 본 발명의 다양한 실시예를 나타낼 뿐이다. 추가로, 일부 경우에, 공지된 구조, 재료, 또는 동작은 본 발명의 측면들을 모호하게 하는 것을 방지하기 위해 상세하게 도시 또는 기술되지 않는다. 추가로, 기술된 특징, 구조 또는 특성은 하나 이상의 실시예에서 임의의 적절한 방식으로 조합될 수 있다.It will be readily understood that the components of an embodiment may be arranged and designed in a wide variety of different configurations as described and illustrated throughout the figures in the text. Thus, as shown in the drawings, the following more detailed description of various embodiments is not intended to limit the scope of the invention as claimed, but merely to illustrate various embodiments of the invention. In addition, in some cases, well-known structures, materials, or operations are not shown or described in detail in order to avoid obscuring aspects of the present invention. In addition, the described features, structures or features may be combined in any suitable manner in one or more embodiments.

"예시적"이라는 단어, 또는 "예를 들면"이라는 용어는 "예시로서 기능하는, 예시를 들면, 예시"를 의미하도록 본 문에서 사용된다. 본문에서 "예시적" 또는 "예를 들면"으로 기술된 실시예는 다른 실시예들에 대해 바람직하거나 이점으로서 구속될 필요가 없다. 다양한 측면들의 실시예들이 도면에 제시되지만, 도면들은 특정하여 지시되지 않는다면 크기를 나타내어 도시될 필요가 없다.The word "exemplary" or the term "for example" is used herein to mean "an example, serving as an example." Embodiments described herein as "exemplary" or "for example" need not be constrained as preferred or advantageous over other embodiments. While embodiments of the various aspects are presented in the drawings, the drawings need not be drawn to scale unless specifically indicated.

원격 스테이션에 결합된 포터블 텔레프레즌스(telepresence) 장치를 포함하는 텔레프레즌스 시스템이 개시된다. 텔레프레즌스 장치는 모니터, 카메라, 스피커 및 마이크로폰을 포함한다. 상기 원격 스테이션은 스테이션 모니터, 스테이션 카메라, 스테이션 스피커 및 스테이션 마이크로폰을 포함한다. 상기 포터블 텔레프레즌스 장치는 구급차의 천정에 장착된 플랫폼에 부착될 수 있다. 상기 포터블 텔레프레즌스 장치는 원격 의료 진료를 제공하기 위해 상기 원격 스테이션에서 외과의 또는 헬스캐어 작업자에 의해 이용될 수 있다. 환자가 구급차로부터 이동될 때, 상기 포터블 텔레프레즌스 장치는 상기 플랫폼으로부터 분리되어 상기 환자와 함께 이동될 수 있다.A telepresence system is disclosed that includes a portable telepresence device coupled to a remote station. Telepresence devices include monitors, cameras, speakers, and microphones. The remote station includes a station monitor, station camera, station speaker, and station microphone. The portable telepresence device may be attached to a platform mounted on the ceiling of an ambulance. The portable telepresence device may be used by a surgeon or health care worker at the remote station to provide telemedical care. When the patient is moved out of the ambulance, the portable telepresence device can be removed from the platform and moved with the patient.

모니터, 카메라, 스피커, 마이크로폰 및 뷰파인더 스크린 모두가 하우징에 결합된 포터블 텔레프레즌스 장치가 또한 개시된다. 상기 뷰파인더 스크린은 사용자로 하여금 카메라에 의해 캡처되는 이미지를 볼 수 있도록 한다. 상기 포터블 텔레프레즌스 장치는 상기 원격 스테이션으로부터의 오디오 명령에 응답하여 그 디바이스의 소지자에 의해 이동될 수 있는 핸드 헬드 디바이스이다. 상기 텔레프레즌스 장치는 빠르고 효율적인 방식으로 환자를 원격으로 보기 위해 의료진에 의해 사용될 수 있다.Also disclosed is a portable telepresence device in which a monitor, camera, speaker, microphone, and viewfinder screen are all coupled to the housing. The viewfinder screen allows the user to view the image captured by the camera. The portable telepresence device is a hand held device that can be moved by a holder of the device in response to an audio command from the remote station. The telepresence device can be used by medical personnel to view the patient remotely in a fast and efficient manner.

본 실시예는 첨부 도면과 함께 취해져, 하기의 설명과 첨부된 청구범위로부터 보다 완전히 명확하게 될 것이다. 첨부 도면은 단지 본 발명의 전형적인 실시예를 도시할 뿐이고, 따라서 본 발명의 범위를 제한할 것을 의미하지 않는다는 것을 이해할 때, 실시예들은 하기에 열거된 첨부도면을 이용하여 특히 그리고 상세하게 기술되고 및 설명될 것이다.
도 1은 구급차 내에 위치된 포터블 텔레프레즌스 장치에 결합된 원격 스테이션을 포함하는 텔레프레즌스 시스템의 예시이다.
도 2는 구급차 내에서의 포터블 텔레프레즌스 장치를 도시하는 예시이다.
도 3은 구급차 천정에 장착된 플랫폼으로부터 분리되는 포터블 텔레프레즌스 장치를 도시하는 예시이다.
도 4는 환자용 거니(gurney)에 부착된 포터블 텔레프레즌스 장치를 도시하는 예시이다.
도 5는 스탠드에 부착된 포터블 텔레프레즌스 장치를 도시하는 예시이다.
도 6은 붐(boom)에 부착된 텔레프레즌스 장치를 구비하는 헬스케어 시설내에서의 환자를 도시하는 예시이다.
도 7a 및 7b는 텔레프레즌스 장치의 대안의 실시예의 예시이다.
도 8은 도 1에 도시된 텔레프레즌스 장치의 후면도의 예시이다.
도 9는 뷰파인더 스크린을 통해 카메라에 의해 캡처된 이미지를 보면서 포터블 텔레프레즌스 장치를 유지하는 사용자를 도시하는 예시이다.
도 10은 스피커와 마이크로폰 볼륨을 사용자로 하여금 변경시키도록 허용하는 사용자 인터페이스를 도시하는 예시이다.
도 11은 그래픽 아이콘을 통해 사용자로 하여금 특정한 기능을 수행하도록 허용하는 사용자 인터페이스를 도시하는 예시이다.
도 12는 화상 디스플레이로 화상을 도시하는 예시이다.
도 13은 교환된 위치에서의 화상을 도시하는 예시이다.
도 14는 시스템에서의 통신 링크를 도시하는 그래픽 인터페이스를 나타내는 예시이다.
This embodiment will be taken in conjunction with the accompanying drawings, which will become more fully apparent from the following description and the appended claims. BRIEF DESCRIPTION OF THE DRAWINGS When it is understood that the accompanying drawings merely illustrate exemplary embodiments of the invention, and therefore are not meant to limit the scope of the invention, the embodiments are described in particular and in detail using the accompanying drawings listed below and Will be explained.
1 is an illustration of a telepresence system including a remote station coupled to a portable telepresence device located in an ambulance.
2 is an illustration showing a portable telepresence device in an ambulance.
3 is an illustration showing a portable telepresence device detached from a platform mounted on an ambulance ceiling.
4 is an illustration showing a portable telepresence device attached to a patient gurney.
5 is an illustration showing a portable telepresence device attached to a stand.
FIG. 6 is an illustration showing a patient in a healthcare facility having a telepresence device attached to a boom.
7A and 7B are illustrations of alternative embodiments of telepresence devices.
8 is an illustration of a rear view of the telepresence device shown in FIG. 1.
9 is an illustration showing a user holding a portable telepresence device while viewing an image captured by a camera through a viewfinder screen.
10 is an illustration showing a user interface allowing a user to change speaker and microphone volume.
11 is an illustration showing a user interface that allows a user to perform a particular function through a graphical icon.
12 is an illustration showing an image on an image display.
13 is an illustration showing an image at the exchanged position.
14 is an illustration showing a graphical interface illustrating a communication link in a system.

참조 번호에 의해 보다 특정하여 도면을 참조하면, 도 1은 텔레프레즌스(telepresence) 시스템(10)을 도시한다. 시스템(10)은 무선 네트워크(18)를 통해 원격 제어 스테이션(14)에 결합된 포터블 텔레프레즌스 장치(12)를 포함한다. 무선 네트워크는 셀룰러 광대역 네트워크, 위성, 와이맥스(WiMAX), 및/또는 와이파이(WiFi) 네트워크가 될 수 있다. 포터블 텔레프레즌스 장치(12)는 구급차(20) 내에 위치될 수 있다.Referring to the drawings in more detail by reference numerals, FIG. 1 shows a telepresence system 10. System 10 includes a portable telepresence device 12 coupled to a remote control station 14 via a wireless network 18. The wireless network may be a cellular broadband network, satellite, WiMAX, and / or Wi-Fi network. The portable telepresence device 12 may be located in the ambulance 20.

원격 제어 스테이션(14)은 모니터(24), 카메라(26), 마이크로폰(28) 및 스피커(30)를 구비한 컴퓨터(22)를 포함할 수 있다. 컴퓨터(22)는 또한 조이스틱 또는 마우스와 같은 입력 디바이스(32)를 포함할 수 있다. 제어 스테이션(14)은 일반적으로 포터블 텔레프레즌스 장치(12)로부터 원격에 있는 위치에 배치된다. 하나의 원격 제어 스테이션(14) 만 도시되었지만, 시스템(10)은 복수의 원격 스테이션(14)을 포함할 수 있다. 일반적으로, 임의의 수의 텔레프레즌스 장치(12)가 임의의 수의 원격 스테이션(14) 또는 다른 포터블 텔레프레즌스 장치(12)에 결합될 수 있다. 예를 들면, 하나의 원격 스테이션(14)이 복수의 포터블 텔레프레즌스 장치(12)에 결합되거나, 또는 하나의 텔레프레즌스 장치(12)가 복수의 원격 스테이션(14) 또는 복수의 텔레프레즌스 장치(12)에 결합될 수 있다. 시스템은 텔레프레즌스 장치(12)와 원격 스테이션(14) 사이에서의 액세스를 제어하는 중개기(arbitrator)(도시되지 않음)를 포함할 수 있다.The remote control station 14 may include a computer 22 with a monitor 24, a camera 26, a microphone 28, and a speaker 30. Computer 22 may also include an input device 32 such as a joystick or mouse. The control station 14 is generally located at a location remote from the portable telepresence device 12. Although only one remote control station 14 is shown, the system 10 may include a plurality of remote stations 14. In general, any number of telepresence devices 12 may be coupled to any number of remote stations 14 or other portable telepresence devices 12. For example, one remote station 14 is coupled to a plurality of portable telepresence devices 12, or one telepresence device 12 is coupled to a plurality of remote stations 14 or a plurality of telepresence devices 12. Can be. The system may include an intermediary (not shown) that controls access between the telepresence device 12 and the remote station 14.

도 2 및 3에 도시된 바와 같이, 포터블 텔레프레즌스 장치(12)는 플랫폼(34)에 부착될 수 있다. 플랫폼(34)은 구급차(20)의 천정(도시되지 않음)으로부터 뻗어져 나와 있다. 플랫폼(34)은 적어도 2의 자유도를 제공하고 환자 및 구급차 내의 EMT를 보기 위해 사용자로 하여금 텔레프레즌스 장치(12)를 상이한 위치로 이동시키도록 하는 관절(articulate)(36, 38)을 포함한다As shown in FIGS. 2 and 3, the portable telepresence device 12 may be attached to the platform 34. The platform 34 extends out of the ceiling (not shown) of the ambulance 20. The platform 34 includes articulates 36, 38 that provide at least two degrees of freedom and allow the user to move the telepresence device 12 to a different position to view the EMT in the patient and the ambulance.

각각의 텔레프레즌스 장치(12)는 그 모두가 하우징(58)에 부착되는 카메라(들)(50), 모니터(52), 마이크로폰(들)(54) 및 스피커(들)(56)을 포함한다. 카메라(50)는 원격 모니터(24)에 결합되어, 원격 스테이션(14)에서의 사용자가 환자 및/또는 EMT를 볼 수 있도록 한다. 유사하게, 모니터(52)는 원격 카메라(26)에 결합되어 환자 및 EMT가 원격 스테이션(14)의 사용자를 볼 수 있도록 한다. 마이크로폰(28, 54) 및 스피커(30, 56)는 시스템 오퍼레이터와 환자 및/또는 EMT 사이의 음성 통신을 가능하게 한다.Each telepresence device 12 includes a camera (s) 50, a monitor 52, a microphone (s) 54 and a speaker (s) 56 all of which are attached to the housing 58. The camera 50 is coupled to the remote monitor 24, allowing the user at the remote station 14 to see the patient and / or the EMT. Similarly, monitor 52 is coupled to remote camera 26 to allow the patient and EMT to see the user of remote station 14. Microphones 28 and 54 and speakers 30 and 56 enable voice communication between the system operator and the patient and / or the EMT.

시스템(10)은 외과의와 같은 시스템 사용자로 하여금 구급차의 환자를 보고 원격 스테이션(14) 및 텔레프레즌스 장치(12)를 통해 원격 의료진료를 제공하도록 한다. EMT와 같은 인원은 시스템을 통해 다시 외과의에게 질문 및 응답을 전송할 수 있다. 카메라(50)는 외과의로 하여금 환자를 볼 수 있게 하여 의료진료를 개선시킨다. 모니터(52)는 구급차에서와 같은 현장의 느낌을 제공하기 위해 외과의에게 디스플레이할 수 있다. 플랫폼(34)은 외과의로 하여금 텔레프레즌스 장치(12)를 패닝(pan)하고 틸팅할 수 있도록 한다.System 10 allows a system user, such as a surgeon, to view a patient in an ambulance and provide telemedicine through remote station 14 and telepresence device 12. Personnel such as EMT can send questions and responses back to the surgeon via the system. The camera 50 allows the surgeon to see the patient and improve the medical care. The monitor 52 may be displayed to the surgeon to provide an on-site feel as in an ambulance. The platform 34 allows the surgeon to pan and tilt the telepresence device 12.

텔레프레즌스 장치(12)는 무선 네트워크에 결합된 무선 트랜시버(60)를 포함할 수 있다. 포터블 텔레프레즌스 장치(12)는 또한 배터리(62)를 포함한다.Telepresence device 12 may include a wireless transceiver 60 coupled to a wireless network. Portable telepresence device 12 also includes a battery 62.

시스템(10)은 캘리포니아, 골레타의 InTouch Technologies에 의해 제공되는 로보틱 시스템과 동일하거나 유사한 특정한 컴포넌트 및 소프트웨어를 가질 수 있으며, 참조에 의해 본문에 통합된 미국특허 제 6,925,357에 기술된 시스템을 구현한다.System 10 may have specific components and software identical or similar to robotic systems provided by InTouch Technologies, Goleta, California, and implement the system described in US Pat. No. 6,925,357, incorporated herein by reference. .

도 3에 도시된 바와 같이, 포터블 텔레프레즌스 장치(12)는 플랫폼(34)으로부터 분리될 수 있다. 텔레프레즌스 장치(12) 및 플랫폼(34)은 텔레프레즌스 장치(12)가 플랫폼(34)에 용이하게 착탈될 수 있도록 하는 기계적 커넥터(64)를 포함할 수 있다. 유사하게, 텔레프레즌스 장치(12) 및 플랫폼(34)은 전기 커넥터(66)를 포함할 수 있다. 구급차에서와 같은, 시스템(10)이 활용되는 위치는 원격 제어 스테이션(14)으로 무선 통신을 제공할 수 있는 무선 트랜시버(도시되지 않음)를 포함할 수 있다. 전기 커넥터(66)는 텔레프레즌스 장치(12)와 무선 트랜시버 사이의 전기적 연결을 제공한다. 커넥터(66)는 또한 텔레프레즌스 장치(12)에 전력을 공급할 수 있다. 대안으로, 텔레프레즌스 장치(12)의 무선 트랜시버(60)는 구급차에서와 같은 시스템(10)이 활용되는 인근의 무선 트랜시버를 통해 원격 제어 스테이션(14)에 결합될 수 있다. 텔레프레즌스 장치(12)는 2 이상의 자유도로 카메라(50)를 이동시킬 수 있는 액추에이터 시스템(68)을 포함할 수 있다. 이는 오퍼레이터로 하여금 텔레프레즌스 장치(12)가 플랫폼(34)으로부터 분리될 때조차 카메라 시야를 이동시킬 수 있도록 한다.As shown in FIG. 3, the portable telepresence device 12 may be separated from the platform 34. Telepresence device 12 and platform 34 may include mechanical connectors 64 that allow telepresence device 12 to be easily detachable from platform 34. Similarly, telepresence device 12 and platform 34 may include electrical connectors 66. Locations where system 10 is utilized, such as in an ambulance, may include a wireless transceiver (not shown) capable of providing wireless communication to remote control station 14. The electrical connector 66 provides an electrical connection between the telepresence device 12 and the wireless transceiver. Connector 66 may also power telepresence device 12. Alternatively, the wireless transceiver 60 of the telepresence device 12 may be coupled to the remote control station 14 via a nearby wireless transceiver where the system 10 is utilized, such as in an ambulance. The telepresence device 12 may include an actuator system 68 capable of moving the camera 50 in two or more degrees of freedom. This allows the operator to shift the camera field of view even when the telepresence device 12 is separated from the platform 34.

도 4에 도시된 바와 같이, 포터블 텔레프레즌스 장치(12)는 플랫폼(도시되지 않음)으로부터 분리되어 환자 거니(gurney)(70)에 부착될 수 있다. 텔레프레즌스 장치(12)는 원격 스테이션 사용자로 하여금 텔레프레즌스 장치(12)를 이동시킬 수 있도록 하는 2의 자유도를 가지고 플랫폼(72)에 부착될 수 있다. 플랫폼(72)은 거니(70)에 부착할 수 있도록 하는 클램프(74)를 포함할 수 있다. 텔레프레즌스 장치(12)와 환자는 거니(70) 상으로 구급차로부터 나와서 이동될 수 있다. 텔레프레즌스 장치(12)의 포터블 측면은 그것이 환자와 함께 이동될 수 있도록 한다. 텔레프레즌스 장치(12)는 개인이 그것을 용이하게 들어올릴 수 있도록 하기 위한 크기 및 무게여야 한다.As shown in FIG. 4, the portable telepresence device 12 may be detached from the platform (not shown) and attached to the patient gurney 70. Telepresence device 12 may be attached to platform 72 with two degrees of freedom allowing a remote station user to move telepresence device 12. Platform 72 may include clamp 74 to allow attachment to gunny 70. The telepresence device 12 and the patient can be moved out of the ambulance onto the gurney 70. The portable side of the telepresence device 12 allows it to be moved with the patient. The telepresence device 12 should be sized and weighted so that the individual can easily lift it.

도 5에 도시된 바와 같이, 포터블 텔레프레즌스 장치(12)는 구급차 플랫폼(도시되지 않음)으로부터 분리되어 원격 위치에서 스탠드(80)로 부착된다. 텔레프레즌스 장치(12)의 포터블 특성은 원격 스테이션의 오퍼레이터의 원격 텔레프레즌스를 허용하는 임의의 위치로 그것을 가져갈 수 있도록 한다. 오퍼레이터가 외과의라면, 포터블 텔레프레즌스 장치(12)는 임의의 부위에서의 의료진료를 허용한다.As shown in FIG. 5, the portable telepresence device 12 is detached from an ambulance platform (not shown) and attached to the stand 80 at a remote location. The portable nature of the telepresence device 12 makes it possible to take it to any location that allows remote telepresence of the operator of the remote station. If the operator is a surgeon, the portable telepresence device 12 allows medical care at any site.

도 6은 붐(boom)(92)에 부착된 텔레프레즌스 장치(90)를 가지고 헬스케어 시설로 이동되는 환자 및 거니를 도시한다. 거니(70)가 헬스케어 시설과 인접하게 이동될 때, 텔레프레즌스 장치의 무선 트랜시버가 WiFi 네트워크와 같은 헬스케어 시설의 로컬 무선 네트워크를 통해 원격 스테이션으로 결합될 수 있다. 시설내로 들어가면, 포터블 텔레프레즌스 장치(90)는 전력 아울렛 및 이더넷 연결을 위한 네트워크로 연결될 수 있다. 전자 ID 디바이스(94)가 환자에게 부착될 수 있다. ID 디바이스(94)는 무선 신호를 붐(92)에 부착된 텔레프레즌스 장치(90)에 전송할 수 있다. 텔레프레즌스 장치(90)에 의한 신호 수신은 포터블 텔레프레즌스 장치(90) 대신에 원격 스테이션으로 하여금 붐(92)에 부착된 텔레프레즌스 장치(90)에 결합되도록 할 수 있다. 텔레프레즌스 장치(90)는 다른 수단에 의해 원격 스테이션에 결합될 수 있다. 예를 들면, 간호사가 환자의 새로운 위치를 식별하는 정보를 헬스케어 시설의 네트워크 시스템으로 타이핑하여 기입할 수 있다. 이러한 기입은 시스템으로하여금 원격 제어 스테이션을 텔레프레즌스 장치(90)로 스위칭하도록 할 수 있다. 추가로, 시스템으로 하여금 자동으로 하나의 텔레프레즌스 장치로부터 다른 텔레프레즌스 장치로 원격 스테이션을 이동시키도록 유도하는 다른 방법들이 있을 수 있다.FIG. 6 shows a patient and gunny moved to a healthcare facility with a telepresence device 90 attached to a boom 92. When the gunny 70 is moved adjacent to the healthcare facility, the wireless transceiver of the telepresence device may be coupled to the remote station via a local wireless network of the healthcare facility, such as a WiFi network. Once inside the facility, the portable telepresence device 90 can be connected to a network for power outlet and Ethernet connections. Electronic ID device 94 may be attached to the patient. The ID device 94 can transmit a wireless signal to the telepresence device 90 attached to the boom 92. Signal reception by the telepresence device 90 may cause the remote station to be coupled to the telepresence device 90 attached to the boom 92 instead of the portable telepresence device 90. The telepresence device 90 may be coupled to the remote station by other means. For example, a nurse may fill out and fill out information identifying a patient's new location into a network system of a healthcare facility. Such writing may allow the system to switch the remote control station to the telepresence device 90. In addition, there may be other ways to induce the system to automatically move the remote station from one telepresence device to another telepresence device.

도 7a, 7b, 및 8은 포터블 텔레프레즌스 장치(100)의 또다른 실시예를 도시한다. 텔레프레즌스 장치(100)는 그 모두가 하우징(112)의 제 1 면(110)에 부착된 모니터(102), 제 1 카메라(104), 마이크로폰(106) 및 스피커(108)를 포함한다. 카메라(104)는 180°의 시야와 줌 피처를 가진 어안 렌즈(fish eye lens)를 포함할 수 있다. 보다 특정하여, 카메라는 10 메가픽셀 CCD이다. 원격 사용자가 "줌 아웃"될 때, 시스템은 이미지를 압축하여 인터넷을 통해 그것을 전송하기 전에 10MP 이미지를 1440x768로 재샘플링한다. 원격 사용자는 그것의 주위로 상자를 그려서, 예를 들면 좌측상단의 1/4과 같은, 이미지의 일부를 선택할 수 있다. 이러한 상자의 좌표는 텔레프레즌스 장치로 전송되고, 그런다음 이는 카메라 입력의 좌측 상단의 2.5MP로 재샘플링 영역을 한정시킬 것이다. 면(100)은 그것이 단일한 인간에 의해 수행될수 있도록 하는 크기 및 무게를 가지도록 한정된다. 텔레프레즌스 장치(100)는 그것을 이송하고 이동시키는 것을 보조하기 위한 핸들(114)을 구비할 수 있다. 예를 들면, 텔레프레즌스 장치는 5 파운드 미만의 중량이 될 수 있다. 하우징(112)은 텔레프레즌스 장치(100)가 표면 상의 직립위치에, 가능한 뷰잉을 보조하기 위해 5°의 뒤로 기울어진 각도로 서 있을 수 있다.7A, 7B, and 8 illustrate another embodiment of a portable telepresence device 100. The telepresence device 100 includes a monitor 102, a first camera 104, a microphone 106, and a speaker 108, all of which are attached to the first side 110 of the housing 112. Camera 104 may include a fish eye lens with a 180 ° field of view and a zoom feature. More specifically, the camera is a 10 megapixel CCD. When a remote user is "zipped out", the system compresses the image and resamples the 10MP image to 1440x768 before sending it over the Internet. The remote user can draw a box around it to select a portion of the image, for example, one quarter of the top left. The coordinates of this box are sent to the telepresence device, which will then limit the resampling area to 2.5 MP at the top left of the camera input. Face 100 is defined to have a size and weight that allows it to be performed by a single human being. The telepresence device 100 may have a handle 114 to assist in transporting and moving it. For example, a telepresence device may weigh less than five pounds. The housing 112 may stand at an angle of inclination of 5 degrees back to assist televiewing device 100 in an upright position on the surface to assist possible viewing.

텔레프레즌스 장치(100)는 하우징(112)의 제 2 면(120)에 부착된 뷰파인더 스크린(116)과 제 2 카메라(118)를 포함할 수 있다. 제 2 카메라(118)는 원격 사용자가 그들에게 명령어를 2 방향 오디오 비디오 통신을 통해 제공하기위해 소지자의 뷰를 스위칭하도록 원격 스테이션으로 전송되는 텔레프레즌스 장치를 소지하는 사람의 이미지를 캡처할 수 있다. 텔레프레즌스 장치(100)의 다양한 기능들을 수행할 수 있는 프로세서(들), 메모리 및 하드디스크 드라이브(도시되지 않음)를 포함하는 전자 회로 및 장치들이 하우징(112) 내에 배치된다. 텔레프레즌스 장치(100)의 한 측은 다양한 포트(122, 124, 126, 128, 및 130)를 포함할 수 있다. 포트(122)는 USB 및/또는 블루투스, 또는 기타 연결을 제공할 수 있다. USB 포트는 청진기 또는 혈액 펄스 옥시미터(blood pulse oximeter)와 같은 의료기기를 텔레프레즌스 장치(100)로 부착하는 데에 사용될 수 있다. 포트(124)는 C 비디오, S 비디오 보조 입력을 제공할 수 있다. 텔레프레즌스 장치의 배터리는 커넥터(126)를 통해 충전될 수 있다. 셀 폰 연결은 하우징(112) 내의 트랜시버(128)를 통해 구축될 수 있다. 커넥터(130)는 801.11 WiFi 커넥티비티를 제공할 수 있다. 도 7b에 도시된 바와 같이, 텔레프레즌스 장치(100)의 다른 측은 오디오 볼륨 조정과 같은 화상회의 시행 제어를 구축할 수 있는 상이한 입력 버튼(132)을 포함할 수 있다. 모니터(102)는 사용자에 의해 동작되는 터치스크린을 통해 텔레프레즌스 장치(100)로 사용될 수 있는 다양한 포트 및 플러그가능한(pluggable) 장치를 디스플레이할 수 있다. 시스템(100)은 캘리포니아, 골레타의 InTouch Technologies에 의해 제공되는 로보틱 시스템과 동일하거나 유사한 특정한 컴포넌트 및 소프트웨어를 가질 수 있으며, 참조에 의해 본문에 통합된 미국특허 제6,925,357에 기술된 시스템을 구현한다.The telepresence device 100 may include a viewfinder screen 116 and a second camera 118 attached to the second side 120 of the housing 112. The second camera 118 may capture an image of the person carrying the telepresence device that is sent to the remote station to allow the remote user to switch the holder's view to provide them with instructions via two-way audio video communication. Electronic circuits and devices, including processor (s), memory, and hard disk drives (not shown), capable of performing the various functions of the telepresence device 100, are disposed within the housing 112. One side of the telepresence device 100 may include various ports 122, 124, 126, 128, and 130. Port 122 may provide USB and / or Bluetooth, or other connection. The USB port can be used to attach a medical device, such as a stethoscope or blood pulse oximeter, to the telepresence device 100. Port 124 may provide C video and S video auxiliary inputs. The battery of the telepresence device may be charged via the connector 126. The cell phone connection can be established through the transceiver 128 in the housing 112. Connector 130 may provide 801.11 WiFi connectivity. As shown in FIG. 7B, the other side of the telepresence device 100 may include different input buttons 132 that may establish videoconferencing enforcement controls such as audio volume adjustment. The monitor 102 can display various ports and pluggable devices that can be used as the telepresence device 100 via a touchscreen operated by a user. System 100 may have specific components and software identical or similar to robotic systems provided by InTouch Technologies, Goleta, CA, and implement the system described in US Pat. No. 6,925,357, incorporated herein by reference. .

도 9는 원격 오퍼레이터로 하여금 텔레프레즌스 장치(100)의 대향하는 측면 상에 배치된 제 1 카메라(104)를 통해 환자를 볼 수 있도록 하기 위해 포터블 텔레프레즌스 장치(100)를 사용자가 소지하는 것을 도시한다. 뷰파인더 스크린(116)은 따라서 소지자로 하여금 제 1 카메라(104)에 의해 캡처되는 이미지를 볼 수 있고 텔레프레즌스 장치(100)를 이동시킬 수 있도록 한다. 예를 들면, 원격 스테이션의 오퍼레이터는 소지자에게 음성 명령을 제공하여 원하는 환자의 뷰를 얻기위해 포터블 텔레프레즌스 장치(100)를 이동시키도록 할 수 있다. 이러한 정도로, 사용자는 상술한 바와 같이, 도 2 및 3에 도시된 액추에이터의 기능을 수행한다.9 shows the user carrying the portable telepresence device 100 to allow a remote operator to view the patient through the first camera 104 disposed on the opposite side of the telepresence device 100. The viewfinder screen 116 thus allows the holder to view the image captured by the first camera 104 and to move the telepresence device 100. For example, the operator of the remote station can provide voice commands to the bearer to move the portable telepresence device 100 to obtain the desired patient's view. To this extent, the user performs the function of the actuator shown in FIGS. 2 and 3 as described above.

텔레프레즌스 장치(100)는 가속도계, 자이로 및/또는 자기계와 같은 모션 감지 장치(134)를 포함할 수 있다. 모션 감지 장치(134)는 모니터에 의해 표시되는 사람이 사용자가 기울어진 방식으로 텔레프레즌스 장치(100)를 소지하고 있을지라도 정상적으로 크기조정되도록 활용될 수 있다. 즉, 장치가 45°의 각도로 유지된다면 머리의 탑 부분이 스크린의 좌측 상단 코너에 나타나도록, 모니터에 의해 표시되는 사람의 머리의 탑 부분이 항상 상방으로 중력으로부터 멀어져 위로 있을 것이다. 유사하게, 모션 감지 장치(134)는 카메라(104) 상에서 캡처된 이미지의 정상적 크기조정된 버전을 원격 스테이션으로 제공하도록 사용될 수 있다.The telepresence device 100 may include a motion sensing device 134 such as an accelerometer, gyro and / or magnetic field. The motion sensing device 134 may be utilized to resize normally even if the person displayed by the monitor possesses the telepresence device 100 in a tilted manner. That is, if the device is held at an angle of 45 °, the top portion of the person's head displayed by the monitor will always be upwards away from gravity so that the top portion of the head appears in the upper left corner of the screen. Similarly, motion sensing device 134 may be used to provide a normal scaled version of the image captured on camera 104 to a remote station.

뷰파인더 스크린(116)은 텔레프레즌스 장치(100)의 소지자가 캡처되는 이미지를 변경시킬 수 있도록 하는 터치 피처를 포함할 수 있다. 예를 들면, 내부위치로부터 외부 방식으로의 소지자의 손가락의 이동이 캡처된 이미지가 줌인되도록 할 수 있다. 사용자의 손가락의 반대방향의 이동은 이미지가 줌아웃하도록 할 수 있다. 대안으로, 소지자는 환자의 이미지를 표시하는 작은 터치 스크린 상에서 선을 그릴수 있고 그 결과인 텔레스트레이션(telestration)이 원격 사용자에 공유될 수 있다. 원격 사용자는 공유된 피처 제어를 보유하고, 이러한 피처 중 특정한 것을 소지자에 가용한 것으로부터 디세이블하게 할 수 있다. The viewfinder screen 116 may include a touch feature that allows the holder of the telepresence device 100 to change the captured image. For example, movement of the holder's finger from an internal position to an external manner may cause the captured image to be zoomed in. Movement in the opposite direction of the user's finger can cause the image to zoom out. Alternatively, the holder can draw a line on a small touch screen displaying an image of the patient and the resulting telest can be shared with the remote user. The remote user may have shared feature control and may disable certain of these features from those available to the holder.

도 10은 뷰파인더(116)에 의해 표시되는 사용자 인터페이스(140)를 도시한다. 인터페이스(140)는 스피커와 마이크로폰의 볼륨을 변경시키기위해 사용자에 의해 터치될 수 있는 그래픽 아이콘(142)을 포함한다. 뷰파인더(116)는 또한 도 11에 도시된 인터페이스(144)를 표시할 수 있다. 인터페이스(144)는 파워, 오디오 모드, 연결/연결해제, 및 홀드 버튼과 같은 기능을 제어하기 위해 터치될 수 있는 그래픽 아이콘(146)을 포함한다. 예를 들면, 사용자는 로컬 마이크로폰으로부터 블루투스 기반 헤드셋으로 음원을 변경할 수 있다.10 illustrates a user interface 140 displayed by the viewfinder 116. Interface 140 includes a graphic icon 142 that can be touched by the user to change the volume of the speaker and microphone. The viewfinder 116 may also display the interface 144 shown in FIG. 11. Interface 144 includes graphical icons 146 that can be touched to control functions such as power, audio mode, connect / disconnect, and hold buttons. For example, the user can change the sound source from the local microphone to the Bluetooth based headset.

도 12는 화상 포맷으로 원격 오퍼레이터의 이미지(148)와 카메라에 의해 캡처된 이미지(150)를 화상으로 표시하는 모니터(102)를 도시한다. 이미지(148, 150)는 도 13에서 교환될 수 있다. 이미지는 원격에서 뷰파인더 스크린 또는 그래픽 스위치에 의해 표시되는 터치 스크린 토글(도시되지 않음)에 의해 교환될 수 있다. 도 12 및 13은 또한 카메라의 대안의 실시예를 도시하여, 단일한 카메라가 전방 또는 후방 중 어느 하나의 포인트로 180° 물리적으로 회전될 수 있다.12 shows a monitor 102 that displays an image 148 of a remote operator and an image 150 captured by a camera in an image format. Images 148 and 150 may be exchanged in FIG. 13. Images can be exchanged by touch screen toggles (not shown) that are remotely displayed by the viewfinder screen or graphics switch. 12 and 13 also show alternative embodiments of the camera, such that a single camera can be physically rotated 180 ° to either point of front or rear.

도 14에 도시된 바와 같이, 텔레프레즌스 장치 및/또는 원격 스테이션은 텔레프레즌스 장치와 원격 스테이션 사이의 커넥티비티를 나타내는 그래픽 인터페이스(160)를 제공할 수 있다. 그래픽 아이콘(162, 164, 166 및 168)은 텔레프레즌스 장치, 서버, 네트워크 및 원격 스테이션을 각각 나타낼 수 있다. 2개 디바이스 사이의 실선은 구축된 링크를 표시한다. 파선은 2개 디바이스 사이의 깨진 통신 링크를 표시한다. 예를 들면, 도 14는 네트워크와 원격 스테이션 사이의 깨진 통신을 도시한다. 시스템은 깨진 링크에 대한 진단 및 보정 액션 기능을 수행할 수 있다. 보정 액션은 자동이거나, 또는 사용자로 하여금 자신들의 이더넷 케이블에서의 플러그인과 같은 특정한 태스크를 수행하도록하는 프롬프트 메시지를 포함하거나, 또는 방화벽을 설정하도록하는 지시를 제공할 수 있다. 그래픽 아이콘(162)은 연결이 시도되는 텔레프레즌스의 엔드포인트의 유형에 따라 변경될 수 있다. 예를 들면, 사용자가 모바일 로봇으로의 연결을 시도하면, 아이콘은 모바일 로봇을 도시하지만, 반면에 사용자가 헤드-전용(head-only) 디바이스에 연결을 시도하면, 아이콘은 그 디바이스를 도시할 것이다.As shown in FIG. 14, the telepresence device and / or the remote station may provide a graphical interface 160 that represents the connectivity between the telepresence device and the remote station. Graphic icons 162, 164, 166, and 168 may represent telepresence devices, servers, networks, and remote stations, respectively. The solid line between the two devices indicates the established link. Broken lines indicate broken communication links between the two devices. For example, FIG. 14 illustrates a broken communication between a network and a remote station. The system can perform diagnostic and corrective action functions for broken links. The corrective action may be automatic or may include a prompt message that allows the user to perform a particular task, such as a plug-in on their Ethernet cable, or provide instructions to set up a firewall. The graphic icon 162 may change depending on the type of endpoint of the telepresence to which a connection is attempted. For example, if the user attempts to connect to the mobile robot, the icon shows the mobile robot, whereas if the user attempts to connect to a head-only device, the icon will show the device. .

텔레프레즌스 장치(100)는 다수의 온보드 모뎀을 이용하여 무선 셀룰러 캐리어, WiFi 및 WiMAX 로컬 무선 및 위성 커넥티비티로의 동시 액세스를 제공할 수 있다. 하나의 캐리어는 2G 표준에 따라 동작하고, 또다른 것은 3G 표준에 따라 동작하고, 또 다른것은 4G 표준에 따라 동작하는 등이 될 수 있다. 이러한 네트워크 연결은 텔레프레즌스 장치(100)의 온보드로 존재하거나, 또는 대안으로 텔레프레즌스 장치는 외부로 나가는 커넥티비티를 제어하는 인접한 고정 통신(base communication) 유닛으로의 단일한 로컬 무선 연결을 구비할 수 있다. 고정 통신 유닛은 모바일 시스템의 형태를 취하고, 이는 차량에 장착되거나 또는 텔레프레즌스 장치와 함께 이동될 수 있다. 시스템은 또한 차량에 설치되는 추가 증폭 스테이지로 확장될 수 있다. 시스템은 가용한 연결을 집속하여 다양한 모드 중 하나로 서비스 품질(QoS)의 측정기준을 개선시킨다. 모드는: 다중 연결을 통해 동일한 신호를 전송하는 리던던시 모드; 상이한 연결을 통해 신호의 일부분들을 전송하는 밸런싱 모드; 최상의 가용한 연결을 통해 모든 트래픽을 전송하는 스위칭 모드; 및 세션동안 리던던시, 밸런싱 및 스위칭 모드 사이에서 스위칭하는 VPN 스위칭 모드를 포함한다.The telepresence device 100 may provide simultaneous access to wireless cellular carriers, WiFi and WiMAX local wireless and satellite connectivity using multiple onboard modems. One carrier may operate according to the 2G standard, another may operate according to the 3G standard, another may operate according to the 4G standard, and so on. This network connection may exist onboard the telepresence device 100, or alternatively, the telepresence device may have a single local wireless connection to an adjacent base communication unit that controls outgoing connectivity. The fixed communication unit takes the form of a mobile system, which can be mounted on a vehicle or moved with a telepresence device. The system can also be extended to additional amplification stages installed in the vehicle. The system focuses on the available connections to improve the quality of service (QoS) metrics in one of a variety of modes. The modes include: a redundancy mode for transmitting the same signal over multiple connections; A balancing mode for transmitting portions of the signal over different connections; Switching mode that transmits all traffic over the best available connection; And a VPN switching mode that switches between redundancy, balancing and switching modes during the session.

시스템은 자신의 무선 연결 각각에서 신뢰성 및 동적 대역폭을 평가한다. 현재 네트워킹 통계에 기초하여, 네트워킹 알고리즘은, 예를 들면 하나의 연결에 대해서는 제어 명령어 및 또다른 연결에 대해서는 비디오/오디오, 또는 하나에 대해서는 비디오 및 또다른 연결에 대해서는 제어와 같은 상이한 연결 사이에서 통신 스트림을 분할하도록 선택할 수 있다. 특정한 연결이 현저하게 열화하면, 알고리즘은 자신의 데이터 스트림을 다른 연결로 이동시키도록 선택할 수 있다. 때때로, 이는 오디오-전용(2G) 연결로 스위칭하기위해 비디오(3G 연결로)를 포기하는 것을 의미할 수도 있다. 추가로, 알고리즘은 오디오용으로 구형이고 더 느리지만 보다 신뢰할 수 있는 네트워크(예를 들면, 2G)인 무선 연결을 이용하고, 동시에 비디오용으로 신형/더 빠르지만 신뢰성이 떨어지는 네트워크(예를 들면, 3G) 상의 연결을 이용하도록 선택할 수 있다. 이러한 접근 방식은 오디오가 항상 강건하게 전송되는 반면, 비디오는 인터럽션이 있지만 양질의 화질과 프레임 속도를 유지하도록 보장할 수 있다. 대안으로, 시스템은 구형/더 느린 연결 상의 오디오 백업을 동시에 하면서 신형/더 빠른 연결 상의 비디오 및 오디오를 가질 수 있다. 신형 연결이 신뢰성이 떨어진다면, 시스템은 구형/더 느린 연결로부터의 데이터를 이용하기 위해 재생된 오디오를 크로스 페이딩(cross-fade)할 수 있다.The system evaluates the reliability and dynamic bandwidth on each of its wireless connections. Based on current networking statistics, the networking algorithm communicates between different connections such as, for example, control instructions for one connection and video / audio for another connection, or control for video and another connection for one. You can choose to split the stream. If a particular connection is significantly degraded, the algorithm may choose to move its data stream to another connection. Occasionally, this may mean giving up video (with a 3G connection) to switch to an audio-only (2G) connection. In addition, the algorithm uses a wireless connection that is older and slower but more reliable for audio (e.g., 2G), while at the same time a new / faster but less reliable network for video (e.g., 3G) can be selected to use the connection. This approach ensures that audio is always transmitted robustly, while video has interruption but maintains high quality and frame rate. Alternatively, the system may have video and audio on the new / faster connection while simultaneously audio backup on the older / slower connection. If the new connection is unreliable, the system can cross-fade the reproduced audio to take advantage of the data from the older / slower connection.

포터블 텔레프레즌스 장치(100)는 다양한 애플리케이션에서 사용될 수 있다. 예를 들면, 텔레프레즌스 장치(100)는 환자의 원격 검사를 허용하도록 사용될 수 있다. 텔레프레즌스 장치(100)는 진행중인 원격 오퍼레이터가 있는 세션이 없을 때에도 액티브 설정-및-기록 모드로 유지될 수 있다. 이는 선행 "설정" 뿐 아니라 환자 상태의 오프라인 기록을 허용한다. 선행 설정은 사용자로 하여금 텔레프레즌스 장치를 배치하고 원격 외과의의 참가 이전에 환자의 최적의 뷰잉을 보장하도록 디지털 박스-줌 제어를 이용하도록 허용한다. 이는 이전의 텔레프레즌스 시스템과는 대조되는 것인데, 여기서 새로운 세션의 시작시에, 카메라 팬/틸트/설정은 디폴트 또는 이전의 설정 중 어느 하나가 된다. 텔레프레즌스 장치는 로컬 사용자로 하여금 원격 의사의 세션 개시 이전에 원격 의사에 대해 최적의 시야를 설정할 수 있도록 하고; 및 추가로 원격 의사가 일시적으로 비지(busy)이거나 또는 로컬 도움을 요청할 때 시야를 갱신할 수 있다.The portable telepresence device 100 may be used in various applications. For example, the telepresence device 100 can be used to allow remote examination of a patient. The telepresence device 100 may remain in the active setup-and-record mode even when there is no session with a remote operator in progress. This allows offline recording of patient status as well as prior "settings." The preceding setup allows the user to deploy the telepresence device and use digital box-zoom control to ensure optimal viewing of the patient prior to the remote surgeon's participation. This is in contrast to the previous telepresence system, where at the start of a new session, the camera pan / tilt / setting becomes either the default or the previous setting. The telepresence device allows the local user to establish an optimal field of view for the remote physician prior to initiation of the remote physician's session; And in addition, the field of view may be updated when the remote physician is temporarily busy or calls for local help.

텔레프레즌스 장치(100)는 예를 들면 텔레프레즌스 장치가 비행기 내에 배치될 때 이착륙 동안 외부로의 송신을 금지하는 "비행기 모드(aircraft mode)"를 가질 수 있다. 추가로, 시스템은 제한된 무선 커넥티비티의 기간 동안 "캡처-후-전송(capture-then-send)" 속성으로 스위칭될 수 있다. 이러한 속성에서, 사용자는 외과의에 대해 의도된 환자 검사의 비디오 기록을 할 수 있다. 비디오 기록은 부착된 의료 디바이스로부터의 원격측정 데이터에 의해 보충될 수 있다. 검사 보고서는 그런다음 자동으로 시스템이 적절한 커넥티비티를 재획득했을 때에 외과의로 포워딩되고 외과의의 원격 스테이션에서 줄지어 배치된다.The telepresence device 100 may have an "aircraft mode" which, for example, prohibits transmission to the outside during takeoff and landing when the telepresence device is deployed in an airplane. In addition, the system can be switched to a "capture-then-send" attribute for a limited period of wireless connectivity. In this attribute, the user can make a video record of the patient examination intended for the surgeon. The video record may be supplemented by telemetry data from the attached medical device. The inspection report is then automatically forwarded to the surgeon and lined up at the surgeon's remote station when the system reacquires the appropriate connectivity.

텔레프레즌스 장치는 또한 GPS(도시되지 않음)가 장치될 수 있다. 이는 각각의 텔레프레즌스 장치의 지리적 위치의 실시간 추적 및 세션 통계의 지오-태깅(geo-tagging)을 허용한다. 이는 지리적 위치에 기반한 무선 커넥티비티의 분석; 병원에 대한 인접도 및 구급차 속도에 기초한 비디오 클립 및 환자 데이터의 추적; 및 병원 및 경비 감사(billing auditing)을 포함하는 다양한 기능들을 수행한다. GPS 특징은 또한 고유한 신속한 모니터링, 도난방지 등을 제공할 수 있다.The telepresence device may also be equipped with a GPS (not shown). This allows for real-time tracking of the geographic location of each telepresence device and geo-tagging of session statistics. This includes the analysis of wireless connectivity based on geographic location; Tracking video clips and patient data based on proximity to the hospital and ambulance speed; And perform various functions including hospital and billing auditing. GPS features can also provide unique rapid monitoring, anti-theft, and more.

포터블 텔레프레즌스 장치는 의료분야에서의 다양한 애플리게이션에 사용될 수 있다. 하나의 애플리케이션은 특수 수송, 특히 소아 수송이다. 구급차와 팀은 병원(A)로부터 병원(B)로 환자 수송을 위해 분산될 수 있다. 병원(B)에 도착시, 환자는 수송 이전에 안정을 필요로하는 것이 발견될 수 있다. 전문가 조언이 병원(B)에서, 또는 병원(A)로의 복귀시의 수송동안 발생할 수 있다.Portable telepresence devices can be used for a variety of applications in the medical field. One application is special transport, especially pediatric transport. Ambulances and teams can be distributed for patient transportation from hospital (A) to hospital (B). Upon arrival at hospital B, it may be found that the patient needs stability prior to transportation. Expert advice can take place in the hospital (B), or during transportation upon return to the hospital (A).

예를 들면, 병원(A)가 가진 전문기술(예를 들면, 소아과 중환자 전문 치료 전문가의 케어(pediatric intensivist specialist care)와 같은)이 없는 스포크 병원(B)으로부터의 호출이 환자수송을 위해 제시될 수 있다. 병원(A)으로부터의 수송 팀은 병원(B)로 배치된다. 팀은 텔레프레즌스 장치(100)를 가지고와서, 그것을 거니에 장착시키고 거니를 구급차에 배치한다. 팀은 병원(B)에 도착하여 환자를 살펴본다. 임의의 포인트에서, 수송 팀이 조언을 요청하고자 한다면, 병원(A)으로부터의 원격 외과의가 거니 상에 위치된 텔레프레즌스 장치와이 링크를 구축한다. 원격 외과의가 원하는 뷰를 얻기 위해 이미지를 팬-틸팅-줌할 수 있다. 여전히 원하는 뷰에 접근할 수 없다면, 텔레프레즌스 장치 측에서의 누군가 텔레프레즌스 장치(100)를 재위치시키고 환자/원하는 뷰에 전면 카메라를 위치시키는 것을 돕기위해 뷰파인더를 이용함으로써 보조할 수 있다. 텔레프레즌스 장치측 팀은 장치 상의 메인 스피커/마이크를 통해 원격 외과의와 통신할 수 있다. 원격 외과의는 병원(B)에서의 팀의 다양한 멤버 및 환자/가족과 대화하여 권고를 할 수 있다. 소음이 있는 환경, 또는 프라이버시의 경우에, 블루투스 또는 무선 헤드셋이 대안으로서 사용될 수 있다. 원격 외과의는 환자의 케어/수송에 관한 결정으로 도울 수 있다.For example, a call from a spokes hospital (B) that lacks the expertise of hospital (A) (such as pediatric intensivist specialist care) may be proposed for patient transportation. Can be. The transport team from the hospital (A) is assigned to the hospital (B). The team brings the telepresence device 100, mounts it on the gunny and places the gunny in the ambulance. The team arrives at hospital (B) and examines the patient. At any point, if the transportation team wants to ask for advice, a remote surgeon from hospital A establishes this link with a telepresence device located on the gurney. The remote surgeon can pan-tilt-zoom the image to obtain the desired view. If still unable to access the desired view, someone at the telepresence device side can assist by using the viewfinder to reposition the telepresence device 100 and position the front camera to the patient / desired view. The telepresence device-side team can communicate with the remote surgeon through the main speaker / microphone on the device. The telesurgeon may speak with various members of the team and the patient / family in the hospital (B) to make recommendations. In the case of noisy environments, or privacy, a Bluetooth or wireless headset may be used as an alternative. The telesurgeon can help with the decision regarding care / transportation of the patient.

케어는 수송을 계속할지 수송을 계속하지 않을지, 또는 현장의 팀과의 공동작업으로 원격 외과의에 의해 결정된 바와 같은 특정한 케어를 집행하도록하는 결정을 통해 진행될 수 있다. 환자가 대상부전하기(decompensate) 시작하는 상황이라면 수송동안 상담이 발생할 수 있다. 이러한 경우, 환자의 수송동안 원격 스테이션과 구급차 내에 배치된 텔레프레즌스 장치 사이에 링크가 있을 것이다. 텔레프레즌스 장치는 거니 상에 장착되고, 원격 외과의가 환자를 보고 케어 결정을 하는 것을 돕기 위해 수송 팀과 통신한다.Care may proceed through a decision to continue or not continue the transport, or to perform specific care as determined by the telesurgeon in collaboration with a team in the field. Consultation may occur during transport if the patient is beginning to decompensate. In this case, there will be a link between the telepresence device deployed in the ambulance and the remote station during the transport of the patient. The telepresence device is mounted on the gunny and communicates with the transportation team to help the remote surgeon see the patient and make care decisions.

또다른 애플리케이션은 자신들의 집에 있는 만성 질환자에 대한 스케줄링된 방문을 수행하는 간호사를 포함한다. 간호사는 환자를 살펴본다. 텔레프레즌스 장치의 터치 스크린이 다양한 증상을 기록하기 위해 사용될 수 있다. 텔레프레즌스 장치에 데이터가 저장된다. 특정한 환자의 상호작용의 데이터 및 비디오가 서버로 포워딩될 수 있다. 텔레프레즌스 장치는 서버로부터 요청된 정보를 수신할 수 있다. 간호사는 문제를 일으키는 증상을 관찰하고 외과의의 진료를 요청할 수 있다. 간호사는 외과의를 호출하여, 그는 텔레프레즌스 장치와의 링크를 구축하고 간호사의 도움을 받아 환자와의 원격의료 세션을 시작할 수 있다. 외과의는 간호사가 디지털 청진기를 텔레프레즌스 장치에 부착하여 그것을 환자에 적용시키도록 요청할 수 있다. 외과의는 그런다음 간호사가 포터블 초음파 디바이스를 텔레프레즌스 장치의 보조 비디오 포트로 부착하도록 요청할 수 있다. 마지막으로, 외과의는 환자가 즉시 의료시설로 옮겨져야한다고 결정할 수 있다. 간호사는 구급차를 호출할 수 있다. 간호사는, 환자가 시설로 수송될 때, 환자의 곁에 머무르고, 원격 외과의는 텔레프레즌스 장치로 로깅된다.Another application includes a nurse who performs a scheduled visit to a chronically ill person in their home. The nurse looks at the patient. The touch screen of the telepresence device can be used to record various symptoms. Data is stored on the telepresence device. Data and video of specific patient interactions can be forwarded to the server. The telepresence device may receive the requested information from the server. The nurse can watch for symptoms that cause the problem and ask the surgeon to see you. The nurse calls the surgeon, who can establish a link with the telepresence device and, with the help of the nurse, can initiate a telemedicine session with the patient. The surgeon may ask the nurse to attach the digital stethoscope to the telepresence device and apply it to the patient. The surgeon can then request that the nurse attach the portable ultrasound device to the secondary video port of the telepresence device. Finally, the surgeon may decide that the patient should be taken to a medical facility immediately. The nurse can call an ambulance. The nurse stays with the patient when the patient is transported to the facility, and the remote surgeon is logged with the telepresence device.

본 발명의 내재한 원리를 벗어나지 않고서 상술한 실시예의 상세한 사항에 대한 변형이 있을 수 있다는 것이 당업자에게는 명료할 것이다. 특정한 예시적인 실시예들이 기술되고 첨부 도면에 도시되었지만, 이러한 실시예들은 단지 예시일 뿐이며 광범위한 발명에 대해 한정하는 것이 아니고, 본 발명은, 다양한 기타 변형이 당업자에게 발생할 수 있기 때문에, 도시되고 기술된 특정한 한정 및 배치에 한정되지 않는다는 것이 이해되어야 한다. 청구범위에서, 접속사 "and"는 포괄적이며, 접속사 "or"는 배타적이고, 접속사 "and/or"는 포괄적 또는 배타적이다. 배타적 속성 또는 면이 요구되는 본 발명의 실시예는 하기에서와 같이 정의된다.It will be apparent to those skilled in the art that there may be variations to the details of the above-described embodiments without departing from the inherent principles of the invention. While specific example embodiments have been described and illustrated in the accompanying drawings, these embodiments are illustrative only and are not limiting of the scope of the invention, as the invention is shown and described as various other modifications may occur to those skilled in the art. It should be understood that it is not limited to specific limitations and arrangements. In the claims, the conjunction "and" is inclusive, the conjunction "or" is exclusive, and the conjunction "and / or" is inclusive or exclusive. Embodiments of the invention where exclusive properties or aspects are required are defined as follows.

Claims (33)

스테이션 모니터, 스테이션 카메라, 스테이션 스피커 및 스테이션 마이크로폰을 구비한 원격 스테이션에 결합되도록 조정된 포터블 텔레프레즌스 장치로서,
하우징;
상기 하우징에 결합된 제 1 카메라;
상기 하우징에 결합되고, 상기 스테이션 카메라에 의해 캡처된 이미지를 표시하도록 조정된 모니터;
상기 하우징에 결합되고, 상기 스테이션 마이크로폰을 통해 제공되는 소리를 생성하도록 조정된 스피커;
상기 하우징에 결합된 마이크로폰;
상기 하우징에 결합된 배터리;
상기 하우징에 결합된 무선 트랜시버; 및
상기 하우징에 결합된 뷰파인더 스크린;
을 포함하는 것을 특징으로 하는 포터블 텔레프레즌스 장치.
A portable telepresence device adapted to be coupled to a remote station with a station monitor, station camera, station speaker, and station microphone,
housing;
A first camera coupled to the housing;
A monitor coupled to the housing and adapted to display an image captured by the station camera;
A speaker coupled to the housing and adapted to produce sound provided through the station microphone;
A microphone coupled to the housing;
A battery coupled to the housing;
A wireless transceiver coupled to the housing; And
A viewfinder screen coupled to the housing;
Portable telepresence device comprising a.
제 1 항에 있어서, 상기 하우징에 결합된 제 2 카메라를 더 포함하고, 상기 제 1 카메라는 상기 모니터를 포함하는 상기 하우징의 제 1 면 상에 배치되고 상기 제 2 카메라는 상기 뷰파인더 스크린을 포함하는 상기 하우징의 제 2 면 상에 위치되는 것을 특징으로 하는 포터블 텔레프레즌스 장치.2. The apparatus of claim 1, further comprising a second camera coupled to the housing, wherein the first camera is disposed on a first side of the housing including the monitor and the second camera comprises the viewfinder screen. Portable telepresence device, characterized in that located on the second side of the housing. 제 1 항에 있어서, 상기 뷰파인더 스크린은 상기 제 1 카메라에 의해 캡처된 이미지를 변경시킬수 있는 적어도 하나의 터치 스크린 기능을 포함하는 것을 특징으로 하는 포터블 텔레프레즌스 장치.The portable telepresence device of claim 1, wherein the viewfinder screen includes at least one touch screen function that can alter an image captured by the first camera. 제 1 항에 있어서, 상기 하우징에 부착되는 모션 감지 디바이스를 더 포함하는 것을 특징으로 하는 포터블 텔레프레즌스 장치.The portable telepresence device of claim 1, further comprising a motion sensing device attached to the housing. 제 4 항에 있어서, 상기 모션 감지 디바이스는 상기 모니터에 의해 표시되는 이미지를 수정하도록 활용되는 것을 특징으로 하는 포터블 텔레프레즌스 장치.The portable telepresence device of claim 4, wherein the motion sensing device is utilized to modify an image displayed by the monitor. 제 4 항에 있어서, 상기 모션 감지 디바이스는 상기 원격 스테이션으로 제공되는 이미지를 수정하도록 활용되는 것을 특징으로 하는 포터블 텔레프레즌스 장치.The portable telepresence device of claim 4, wherein the motion sensing device is utilized to modify an image provided to the remote station. 제 1 항에 있어서, 상기 모니터는 사용자로 하여금 오디오 특성을 변경시킬 수 있도록 하는 그래픽 사용자 인터페이스를 포함하는 것을 특징으로 하는 포터블 텔레프레즌스 장치.The portable telepresence device of claim 1, wherein the monitor includes a graphical user interface that allows a user to change audio characteristics. 제 1 항에 있어서, 상기 하우징은 우측상단 위치의 표면상에 배치되도록 구성되는 것을 특징으로 하는 포터블 텔레프레즌스 장치.The portable telepresence device of claim 1, wherein the housing is configured to be disposed on a surface of an upper right position. 제 1 항에 있어서, 상기 원격 스테이션 모니터는 하드웨어 아이콘을 표시하고 하드웨어 디바이스 사이의 통신 링크의 파손을 표시하는 것을 특징으로 하는 포터블 텔레프레즌스 장치.The portable telepresence apparatus of claim 1, wherein the remote station monitor displays a hardware icon and indicates a breakdown of a communication link between hardware devices. 제 1 항에 있어서, 상기 제 1 카메라를 이동시키고 상기 원격 스테이션에 의해 제어되는 액추에이터 시스템을 더 포함하는 것을 특징으로 하는 포터블 텔레프레즌스 장치.The portable telepresence device of claim 1, further comprising an actuator system that moves the first camera and is controlled by the remote station. 제 1 항에 있어서, GPS 장치를 더 포함하는 것을 특징으로 하는 포터블 텔레프레즌스 장치.The portable telepresence device of claim 1, further comprising a GPS device. 스테이션 모니터, 스테이션 카메라, 스테이션 스피커 및 스테이션 마이크로폰을 구비한 원격 스테이션에 결합되도록 조정된 포터블 텔레프레즌스 장치로서,
하우징;
상기 하우징에 결합된 카메라;
상기 하우징에 결합되고, 상기 스테이션 카메라에 의해 캡처된 이미지를 표시하도록 조정된 모니터;
상기 하우징에 결합되고, 상기 스테이션 마이크로폰을 통해 제공되는 소리를 생성하도록 조정된 스피커;
상기 하우징에 결합된 마이크로폰;
상기 하우징에 결합된 배터리;
상기 하우징에 결합된 무선 트랜시버; 및
통신을 구축하기 전에 적어도 하나의 이미지를 캡처하는 메모리 디바이스로서, 상기 적어도 하나의 이미지는 상기 원격 스테이션이 상기 포터블 텔레프레즌스 장치와의 통신을 구축한 후에 상기 원격 스테이션으로 전송되는 메모리 디바이스;
를 포함하는 것을 특징으로 하는 포터블 텔레프레즌스 장치.
A portable telepresence device adapted to be coupled to a remote station with a station monitor, station camera, station speaker, and station microphone,
housing;
A camera coupled to the housing;
A monitor coupled to the housing and adapted to display an image captured by the station camera;
A speaker coupled to the housing and adapted to produce sound provided through the station microphone;
A microphone coupled to the housing;
A battery coupled to the housing;
A wireless transceiver coupled to the housing; And
A memory device for capturing at least one image prior to establishing a communication, the at least one image being transmitted to the remote station after the remote station establishes communication with the portable telepresence device;
Portable telepresence device comprising a.
제 12 항에 있어서, 상기 원격 스테이션이 상기 포터블 텔레프레즌스 장치와의 통신을 구축하기 전에 사용자로 하여금 상기 포터블 텔레프레즌스 장치의 입력 특성을 변경시킬 수 있도록 하는 적어도 하나의 입력부를 더 포함하는 것을 특징으로 하는 포터블 텔레프레즌스 장치.13. The portable device of claim 12, further comprising at least one input for enabling a user to change input characteristics of the portable telepresence device before the remote station establishes communication with the portable telepresence device. Telepresence Device. 스테이션 모니터, 스테이션 카메라, 스테이션 스피커 및 스테이션 마이크로폰을 구비한 원격 스테이션에 결합되도록 조정된 포터블 텔레프레즌스 장치로서,
하우징;
상기 하우징에 결합된 제 1 카메라;
상기 하우징에 결합되고, 상기 스테이션 카메라에 의해 캡처된 이미지를 표시하도록 조정된 모니터;
상기 하우징에 결합되고, 상기 스테이션 마이크로폰을 통해 제공되는 소리를 생성하도록 조정된 스피커;
상기 하우징에 결합된 마이크로폰;
상기 하우징에 결합된 배터리;
상기 하우징에 결합된 무선 트랜시버; 및
상기 하우징에 결합된 모션 감지 디바이스;
를 포함하는 것을 특징으로 하는 포터블 텔레프레즌스 장치.
A portable telepresence device adapted to be coupled to a remote station with a station monitor, station camera, station speaker, and station microphone,
housing;
A first camera coupled to the housing;
A monitor coupled to the housing and adapted to display an image captured by the station camera;
A speaker coupled to the housing and adapted to produce sound provided through the station microphone;
A microphone coupled to the housing;
A battery coupled to the housing;
A wireless transceiver coupled to the housing; And
A motion sensing device coupled to the housing;
Portable telepresence device comprising a.
제 14 항에 있어서, 상기 모션 감지 디바이스는 상기 모니터에 의해 표시되는 이미지를 수정하도록 활용되는 것을 특징으로 하는 포터블 텔레프레즌스 장치.15. The portable telepresence apparatus of claim 14, wherein the motion sensing device is utilized to modify an image displayed by the monitor. 제 14 항에 있어서, 상기 모션 감지 디바이스는 상기 원격 스테이션으로 제공되는 이미지를 수정하도록 활용되는 것을 특징으로 하는 포터블 텔레프레즌스 장치.15. The portable telepresence device of Claim 14, wherein the motion sensing device is utilized to modify an image provided to the remote station. 스테이션 모니터, 스테이션 카메라, 스테이션 스피커 및 스테이션 마이크로폰을 구비한 원격 스테이션에 결합되도록 조정된 포터블 텔레프레즌스 장치로서,
하우징;
상기 하우징에 결합된 제 1 카메라;
상기 하우징에 결합되고, 상기 스테이션 카메라에 의해 캡처된 이미지를 표시하도록 조정된 모니터;
상기 하우징에 결합되고, 상기 스테이션 마이크로폰을 통해 제공되는 소리를 생성하도록 조정된 스피커;
상기 하우징에 결합된 마이크로폰;
상기 하우징에 결합된 배터리;
상기 하우징에 결합된 무선 트랜시버;
를 포함하고,
상기 무선 트랜시버는 더 낮은 대역폭으로 하나의 유형의 데이터를 전송하고 더 높은 대역폭의 네트워크로 제 2 유형의 데이터를 전송하는 것을 특징으로 하는 포터블 텔레프레즌스 장치.
A portable telepresence device adapted to be coupled to a remote station with a station monitor, station camera, station speaker, and station microphone,
housing;
A first camera coupled to the housing;
A monitor coupled to the housing and adapted to display an image captured by the station camera;
A speaker coupled to the housing and adapted to produce sound provided through the station microphone;
A microphone coupled to the housing;
A battery coupled to the housing;
A wireless transceiver coupled to the housing;
Including,
And wherein said wireless transceiver transmits one type of data at a lower bandwidth and a second type of data at a higher bandwidth network.
원격 의료 진료 제공 방법으로서,
환자를 보기 위해 포터블 텔레프레즌스 장치를 설정하는 단계로서, 상기 포터블 텔레프레즌스 장치는 카메라, 모니터, 스피커 및 마이크로폰을 포함하는 단계;
상기 포터블 텔레프레즌스 장치로 상기 환자의 이미지를 캡처하는 단계;
상기 포터블 텔레프레즌스 장치를 원격 스테이션, 원격 스테이션 모니터, 원격 스테이션 스피커 및 원격 스테이션 마이크로폰을 동작시키는 헬스케어 작업자의 이미지를 캡처할 수 있는 원격 스테이션 카메라를 포함하는 상기 원격 스테이션으로 링크시키는 단계;
상기 헬스케어 작업자의 상기 이미지를 상기 포터블 텔레프레즌스 장치로 전송하는 단계;
상기 모니터 상에 상기 헬스케어 작업자의 이미지를 표시하는 단계;
상기 환자의 이미지를 상기 원격 스테이션으로 전송하는 단계;
상기 원격 스테이션 모니터 상에 상기 환자의 이미지를 표시하는 단계; 및
상기 원격 스테이션으로부터 상기 포터블 텔레프레즌스 장치로 음성 명령을 전송하는 단계;
를 포함하는 것을 특징으로 하는 원격 의료 진료 제공 방법.
As a telemedicine delivery method,
Setting up a portable telepresence device to view a patient, the portable telepresence device including a camera, a monitor, a speaker, and a microphone;
Capturing an image of the patient with the portable telepresence device;
Linking the portable telepresence device to the remote station including a remote station camera capable of capturing an image of a healthcare worker operating a remote station, remote station monitor, remote station speaker, and remote station microphone;
Transmitting the image of the healthcare worker to the portable telepresence device;
Displaying an image of the healthcare worker on the monitor;
Transmitting the image of the patient to the remote station;
Displaying an image of the patient on the remote station monitor; And
Sending a voice command from the remote station to the portable telepresence device;
Telemedicine providing method comprising a.
제 18 항에 있어서, 상기 환자의 이미지를 저장하는 단계 및 상기 원격 스테이션이 상기 포터블 텔레프레즌스 장치와 링크된 후에 상기 저장된 환자의 이미지를 전송하는 단계를 더 포함하는 것을 특징으로 하는 원격 의료 진료 제공 방법.19. The method of claim 18, further comprising storing the image of the patient and transmitting the image of the stored patient after the remote station is linked with the portable telepresence device. 제 18 항에 있어서, 상기 환자는 상기 카메라가 상기 환자의 이미지를 캡처하는 동안 수송되는 것을 특징으로 하는 원격 의료 진료 제공 방법.19. The method of claim 18, wherein the patient is transported while the camera captures an image of the patient. 제 20 항에 있어서, 상기 원격 스테이션과 상기 포터블 텔레프레즌스 장치 사이의 링크를 중단시키는 단계 및 상기 포터블 텔레프레즌스 장치로 상기 환자의 이미지를 캡처하고 저장하는 것을 계속하는 단계를 더 포함하는 것을 특징으로 하는 원격 의료 진료 제공 방법.21. The telemedicine of claim 20, further comprising interrupting a link between the remote station and the portable telepresence device and continuing to capture and store an image of the patient with the portable telepresence device. How to Provide Care. 제 20 항에 있어서, 상기 포터블 텔레프레즌스 장치를 제 1 병원으로 이동시키는 단계를 더 포함하는 것을 특징으로 하는 원격 의료 진료 제공 방법.21. The method of claim 20, further comprising moving the portable telepresence device to a first hospital. 제 22 항에 있어서, 상기 환자를 제 2 병원으로 이동시키는 단계를 더 포함하는 것을 특징으로 하는 원격 의료 진료 제공 방법.23. The method of claim 22, further comprising moving the patient to a second hospital. 제 23 항에 있어서, 상기 포터블 텔레프레즌스 장치는 상기 환자와 함께 상기 제 2 병원으로 이동되는 것을 특징으로 하는 원격 의료 진료 제공 방법.24. The method of claim 23, wherein the portable telepresence device is moved with the patient to the second hospital. 제 24 항에 있어서, 상기 포터블 텔레프레즌스 장치는 상기 환자가 상기 제 2 병원으로 이동되는 동안 상기 환자의 이미지를 상기 원격 스테이션으로 전송하는 것을 특징으로 하는 원격 의료 진료 제공 방법.25. The method of claim 24, wherein the portable telepresence device transmits the image of the patient to the remote station while the patient is moved to the second hospital. 제 25 항에 있어서, 상기 원격 스테이션은 상기 제 2 병원에 위치되는 것을 특징으로 하는 원격 의료 진료 제공 방법.27. The method of claim 25, wherein said remote station is located in said second hospital. 제 18 항에 있어서, 상기 포터블 텔레프레즌스 장치를 가정으로 이동시키는 단계를 더 포함하는 것을 특징으로 하는 원격 의료 진료 제공 방법.19. The method of claim 18, further comprising moving the portable telepresence device to a home. 제 27 항에 있어서, 상기 환자를 의료시설로 이동시키는 단계를 더 포함하는 것을 특징으로 하는 원격 의료 진료 제공 방법.28. The method of claim 27, further comprising moving the patient to a medical facility. 제 28 항에 있어서, 상기 포터블 텔레프레즌스 장치로 입력된 데이터를 저장하는 단계 및 상기 데이터를 상기 원격 스테이션으로 전송하는 단계를 더 포함하는 것을 특징으로 하는 원격 의료 진료 제공 방법.29. The method of claim 28, further comprising storing data input to the portable telepresence device and transmitting the data to the remote station. 제 28 항에 있어서, 의료 기기를 상기 포터블 텔레프레즌스 장치로 부착시키는 단계 및 상기 의료 기기를 통해 환자 데이터를 획득하는 단계를 더 포함하는 것을 특징으로 하는 원격 의료 진료 제공 방법.29. The method of claim 28, further comprising attaching a medical device to the portable telepresence device and obtaining patient data via the medical device. 원격으로 캡처된 이미지를 획득하는 방법으로서,
포터블 텔레프레즌스 장치를 원격 스테이션으로 링크시키는 단계로서, 상기 포터블 텔레프레즌스 장치는 제 1 카메라, 모니터, 스피커 및 마이크로폰을 포함하고, 상기 원격 스테이션은 원격 스테이션 카메라, 원격 스테이션 모니터, 원격 스테이션 스피커 및 원격 스테이션 마이크로폰을 포함하는 단계;
상기 제 1 카메라에 의해 캡처된 이미지를 상기 원격 스테이션으로 전송하는 단계;
상기 원격 스테이션으로부터 상기 포터블 텔레프레즌스 장치에 대한 음성 명령을 상기 포터블 텔레프레즌스 장치를 소지하고 있는 사용자에게 전송하는 단계; 및
상기 포터블 텔레프레즌스 장치를 소지하고 있는 사용자에 의해 상기 포터블 텔레프레즌스 장치를 이동시키는 단계;
를 포함하는 것을 특징으로 하는 원격으로 캡처된 이미지를 획득하는 방법.
A method of acquiring a remotely captured image,
Linking a portable telepresence device to a remote station, the portable telepresence device including a first camera, a monitor, a speaker and a microphone, the remote station linking a remote station camera, a remote station monitor, a remote station speaker and a remote station microphone. Comprising;
Transmitting the image captured by the first camera to the remote station;
Sending a voice command for the portable telepresence device from the remote station to a user having the portable telepresence device; And
Moving the portable telepresence device by a user having the portable telepresence device;
And obtaining the remotely captured image.
제 31 항에 있어서, 상기 카메라에 의해 캡처된 이미지를 상기 포터블 텔레프레즌스 장치상의 뷰파인더 스크린을 통해 뷰잉하는 단계를 더 포함하는 것을 특징으로 하는 원격으로 캡처된 이미지를 획득하는 방법.32. The method of claim 31, further comprising viewing an image captured by the camera through a viewfinder screen on the portable telepresence device. 제 32 항에 있어서, 제 2 카메라로 상기 포터블 텔레프레즌스 장치를 소지하고 있는 상기 사용자의 이미지를 캡처하는 단계 및 상기 사용자의 이미지를 상기 원격 스테이션으로 전송하는 단계를 더 포함하는 것을 특징으로 하는 원격으로 캡처된 이미지를 획득하는 방법.33. The method of claim 32, further comprising capturing an image of the user with the portable telepresence device with a second camera and transmitting the image of the user to the remote station. How to obtain a captured image.
KR1020127007318A 2009-08-26 2010-08-26 Portable telepresence apparatus KR20120068879A (en)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US12/548,122 US8384755B2 (en) 2009-08-26 2009-08-26 Portable remote presence robot
US12/548,122 2009-08-26
US39963710P 2010-07-14 2010-07-14
US61/399,637 2010-07-14

Publications (1)

Publication Number Publication Date
KR20120068879A true KR20120068879A (en) 2012-06-27

Family

ID=43649908

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020127007318A KR20120068879A (en) 2009-08-26 2010-08-26 Portable telepresence apparatus

Country Status (6)

Country Link
EP (1) EP2470986A4 (en)
JP (1) JP2013503571A (en)
KR (1) KR20120068879A (en)
CN (2) CN106406801A (en)
IN (1) IN2012DN02197A (en)
WO (1) WO2011028589A2 (en)

Families Citing this family (48)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6925357B2 (en) 2002-07-25 2005-08-02 Intouch Health, Inc. Medical tele-robotic system
US20040162637A1 (en) 2002-07-25 2004-08-19 Yulun Wang Medical tele-robotic system with a master remote station with an arbitrator
US7813836B2 (en) 2003-12-09 2010-10-12 Intouch Technologies, Inc. Protocol for a remotely controlled videoconferencing robot
US20050204438A1 (en) 2004-02-26 2005-09-15 Yulun Wang Graphical interface for a remote presence system
US8077963B2 (en) 2004-07-13 2011-12-13 Yulun Wang Mobile robot with a head-based movement mapping scheme
US9198728B2 (en) 2005-09-30 2015-12-01 Intouch Technologies, Inc. Multi-camera mobile teleconferencing platform
US8849679B2 (en) 2006-06-15 2014-09-30 Intouch Technologies, Inc. Remote controlled robot system that provides medical images
US8265793B2 (en) 2007-03-20 2012-09-11 Irobot Corporation Mobile robot for telecommunication
US9160783B2 (en) 2007-05-09 2015-10-13 Intouch Technologies, Inc. Robot system that operates through a network firewall
US10875182B2 (en) 2008-03-20 2020-12-29 Teladoc Health, Inc. Remote presence system mounted to operating room hardware
US8179418B2 (en) 2008-04-14 2012-05-15 Intouch Technologies, Inc. Robotic based health care system
US8170241B2 (en) 2008-04-17 2012-05-01 Intouch Technologies, Inc. Mobile tele-presence system with a microphone system
US9193065B2 (en) 2008-07-10 2015-11-24 Intouch Technologies, Inc. Docking system for a tele-presence robot
US9842192B2 (en) 2008-07-11 2017-12-12 Intouch Technologies, Inc. Tele-presence robot system with multi-cast features
US8340819B2 (en) 2008-09-18 2012-12-25 Intouch Technologies, Inc. Mobile videoconferencing robot system with network adaptive driving
US8996165B2 (en) 2008-10-21 2015-03-31 Intouch Technologies, Inc. Telepresence robot with a camera boom
US8463435B2 (en) 2008-11-25 2013-06-11 Intouch Technologies, Inc. Server connectivity control for tele-presence robot
US9138891B2 (en) 2008-11-25 2015-09-22 Intouch Technologies, Inc. Server connectivity control for tele-presence robot
US8849680B2 (en) 2009-01-29 2014-09-30 Intouch Technologies, Inc. Documentation through a remote presence robot
US8897920B2 (en) 2009-04-17 2014-11-25 Intouch Technologies, Inc. Tele-presence robot system with software modularity, projector and laser pointer
US8384755B2 (en) 2009-08-26 2013-02-26 Intouch Technologies, Inc. Portable remote presence robot
US11399153B2 (en) 2009-08-26 2022-07-26 Teladoc Health, Inc. Portable telepresence apparatus
US11154981B2 (en) 2010-02-04 2021-10-26 Teladoc Health, Inc. Robot user interface for telepresence robot system
US8670017B2 (en) 2010-03-04 2014-03-11 Intouch Technologies, Inc. Remote presence system including a cart that supports a robot face and an overhead camera
US8935005B2 (en) 2010-05-20 2015-01-13 Irobot Corporation Operating a mobile robot
US8918213B2 (en) 2010-05-20 2014-12-23 Irobot Corporation Mobile human interface robot
US9014848B2 (en) 2010-05-20 2015-04-21 Irobot Corporation Mobile robot system
US10343283B2 (en) 2010-05-24 2019-07-09 Intouch Technologies, Inc. Telepresence robot system that can be accessed by a cellular phone
US10808882B2 (en) 2010-05-26 2020-10-20 Intouch Technologies, Inc. Tele-robotic system with a robot face placed on a chair
US9264664B2 (en) 2010-12-03 2016-02-16 Intouch Technologies, Inc. Systems and methods for dynamic bandwidth allocation
US8930019B2 (en) 2010-12-30 2015-01-06 Irobot Corporation Mobile human interface robot
KR102018763B1 (en) 2011-01-28 2019-09-05 인터치 테크놀로지스 인코퍼레이티드 Interfacing with a mobile telepresence robot
US9323250B2 (en) 2011-01-28 2016-04-26 Intouch Technologies, Inc. Time-dependent navigation of telepresence robots
US10769739B2 (en) 2011-04-25 2020-09-08 Intouch Technologies, Inc. Systems and methods for management of information among medical providers and facilities
US9098611B2 (en) 2012-11-26 2015-08-04 Intouch Technologies, Inc. Enhanced video interaction for a user interface of a telepresence network
US20140139616A1 (en) 2012-01-27 2014-05-22 Intouch Technologies, Inc. Enhanced Diagnostics for a Telepresence Robot
US8836751B2 (en) 2011-11-08 2014-09-16 Intouch Technologies, Inc. Tele-presence system with a user interface that displays different communication links
US9251313B2 (en) 2012-04-11 2016-02-02 Intouch Technologies, Inc. Systems and methods for visualizing and managing telepresence devices in healthcare networks
US8902278B2 (en) 2012-04-11 2014-12-02 Intouch Technologies, Inc. Systems and methods for visualizing and managing telepresence devices in healthcare networks
WO2013176762A1 (en) 2012-05-22 2013-11-28 Intouch Technologies, Inc. Social behavior rules for a medical telepresence robot
US9361021B2 (en) 2012-05-22 2016-06-07 Irobot Corporation Graphical user interfaces including touchpad driving interfaces for telemedicine devices
CN103051924A (en) * 2012-12-27 2013-04-17 宁波中研瑞华数字技术有限公司 Dual-mode third-generation (3G) video server
CN104063192B (en) * 2013-03-19 2017-05-24 联想(北京)有限公司 Display method and electronic equipment
US11862302B2 (en) 2017-04-24 2024-01-02 Teladoc Health, Inc. Automated transcription and documentation of tele-health encounters
US10483007B2 (en) 2017-07-25 2019-11-19 Intouch Technologies, Inc. Modular telehealth cart with thermal imaging and touch screen user interface
US11636944B2 (en) 2017-08-25 2023-04-25 Teladoc Health, Inc. Connectivity infrastructure for a telehealth platform
US10617299B2 (en) 2018-04-27 2020-04-14 Intouch Technologies, Inc. Telehealth cart that supports a removable tablet with seamless audio/video switching
WO2023150575A2 (en) * 2022-02-01 2023-08-10 The George Washington University Cyber-physical system to enhance usability and quality of telehealth consultation

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6369847B1 (en) * 2000-03-17 2002-04-09 Emtel, Inc. Emergency facility video-conferencing system
JP3513084B2 (en) * 2000-06-14 2004-03-31 株式会社東芝 Information processing system, information equipment and information processing method
US7307653B2 (en) * 2001-10-19 2007-12-11 Nokia Corporation Image stabilizer for a microcamera module of a handheld device, and method for stabilizing a microcamera module of a handheld device
US7539504B2 (en) * 2001-12-05 2009-05-26 Espre Solutions, Inc. Wireless telepresence collaboration system
JP3910112B2 (en) * 2002-06-21 2007-04-25 シャープ株式会社 Camera phone
US7593030B2 (en) * 2002-07-25 2009-09-22 Intouch Technologies, Inc. Tele-robotic videoconferencing in a corporate environment
US6925357B2 (en) * 2002-07-25 2005-08-02 Intouch Health, Inc. Medical tele-robotic system
US6753899B2 (en) * 2002-09-03 2004-06-22 Audisoft Method and apparatus for telepresence
US20060052676A1 (en) * 2004-09-07 2006-03-09 Yulun Wang Tele-presence system that allows for remote monitoring/observation and review of a patient and their medical records
CN1315351C (en) * 2004-09-20 2007-05-09 华为技术有限公司 Mobile communication terminal, mobile communication system and its method
US7379664B2 (en) * 2005-07-26 2008-05-27 Tinkers & Chance Remote view and controller for a camera
US7643051B2 (en) * 2005-09-09 2010-01-05 Roy Benjamin Sandberg Mobile video teleconferencing system and control method
KR100672338B1 (en) * 2005-09-09 2007-01-24 엘지전자 주식회사 Mobile communication terminal having dual display equipment and method of taking picture using same
US8049678B2 (en) * 2005-09-09 2011-11-01 Lg Electronics, Inc. Image capturing and displaying method and system
US20070291128A1 (en) * 2006-06-15 2007-12-20 Yulun Wang Mobile teleconferencing system that projects an image provided by a mobile robot
US7761185B2 (en) * 2006-10-03 2010-07-20 Intouch Technologies, Inc. Remote presence display through remotely controlled robot
US7557758B2 (en) * 2007-03-26 2009-07-07 Broadcom Corporation Very high frequency dielectric substrate wave guide

Also Published As

Publication number Publication date
CN102473081A (en) 2012-05-23
CN106406801A (en) 2017-02-15
JP2013503571A (en) 2013-01-31
WO2011028589A3 (en) 2011-04-28
WO2011028589A2 (en) 2011-03-10
EP2470986A2 (en) 2012-07-04
CN102473081B (en) 2016-05-25
IN2012DN02197A (en) 2015-08-07
EP2470986A4 (en) 2013-06-26

Similar Documents

Publication Publication Date Title
US11399153B2 (en) Portable telepresence apparatus
KR20120068879A (en) Portable telepresence apparatus
US10871889B2 (en) Tele-presence system with a user interface that displays different communication links
US11389962B2 (en) Telepresence robot system that can be accessed by a cellular phone
US20210260749A1 (en) Graphical interface for a remote presence system
US11798683B2 (en) Remote presence system including a cart that supports a robot face and an overhead camera
US10073950B2 (en) Telepresence robot with a camera boom
US20060259193A1 (en) Telerobotic system with a dual application screen presentation
US20120072024A1 (en) Telerobotic system with dual application screen presentation
US20090240371A1 (en) Remote presence system mounted to operating room hardware
JP6244201B2 (en) Nurse call system
JP6524732B2 (en) Communication device, communication system, control method of communication device and program
JP6123961B1 (en) Terminal device of monitored person monitoring system, terminal side monitoring processing method of the terminal device, and monitored person monitoring system
Hameed et al. An intelligent agent-based medication and emergency system
US11265384B2 (en) Device-level network switching
JP6697236B2 (en) Nurse call system
JP6146772B2 (en) Medical worker call system
JP2022163894A (en) Critical care system, critical care system control method, and program
EP2549398A2 (en) Telepresence system

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application