KR20210086647A - 생체 내 이미지들의 스트림의 스터디를 생성하고 디스플레이하기 위한 시스템들 및 방법들 - Google Patents

Abstract

시스템들 및 방법들은 경구형 캡슐에 의해 생체 내에서 수집된 환자의 위장관의 다수의 선택된 이미지들의 분석을 디스플레이하고/하거나 제공할 수 있다. 이미지들은 검토를 위해 (예컨대, 스터디로서) 그리고/또는 사용자에 의한 추가 분석을 위해 디스플레이될 수 있다. 이미지들의 스트림을 표현하고 제1 선택 방법에 따라 자동으로 선택되는 이미지들의 서브세트가 디스플레이될 수 있다. 사용자 입력 시에, 현재 디스플레이되는 이미지에 대응하는 추가 이미지들이 디스플레이될 수 있는데, 여기서 추가 이미지들은 제2 선택 방법에 따라 자동으로 선택된다. 제2 선택 방법은 생체 내 이미지들의 스트림 중의 이미지들과 현재 디스플레이된 이미지 사이의 관계에 기초할 수 있다.

Description

생체 내 이미지들의 스트림의 스터디를 생성하고 디스플레이하기 위한 시스템들 및 방법들

본 발명은 생체 내에서 캡처된 이미지들의 시리즈들 또는 스트림으로부터의 의료 이미지들을 디스플레이하고/하거나 분석하고/하거나 보고하기 위한 방법들, 시스템들 및 컴퓨터 프로그램 제품들에 관한 것이다. 특히, 본 발명은 캡슐 내시경검사(Capsule Endoscopy, CE) 시술을 통해 캡처된 생체 내 이미지들의 스터디(study)를 생성하고 디스플레이하기 위한 방법들, 시스템들 및 컴퓨터 프로그램 제품들에 관한 것이다.

캡슐 시스템들은 위장관(gastrointestinal tract, "Gl" 관 또는 "GIT")의 이미지들을 캡처하는 경구형 캡슐(swallowable capsule)을 포함할 수 있다. 이미지들은 캡슐 상에 저장될 수 있고/있거나, 전형적으로 안테나를 포함하는 수신 디바이스로 송신될 수 있다. 수신 디바이스는 이미지들을 수신하고 이들을 (예컨대, 수신 디바이스 내의 저장 디바이스 내에) 저장할 수 있다. 경구형 캡슐은 하나 이상의 카메라들 또는 이미징 디바이스들, 전원(들), 프로세서(들), 및 송신기(들)를 포함할 수 있다.

캡슐, 수신 디바이스 또는 수신 디바이스의 제거가능형 저장 디바이스는 서버와 같은 컴퓨팅 디바이스와 커플링될 수 있다. 컴퓨팅 디바이스는 수신된 이미지들을 프로세싱할 수 있고, 이미지들을, 전형적으로 비디오 또는 영화(예컨대, 움직이는 이미지들의 시리즈)로서 디스플레이하기 위한 인터페이스를 제공할 수 있다. 그러한 프로세싱은 또한, 수신기 또는 레코더로부터 전송되는 이미지들을 수용한 후에, 의료 전문가에 의해 운영되는 워크스테이션 상에서 "국부적으로" 수행될 수 있다. 일부 실시예들에서, 환자 상에 위치된 물리적 수신 디바이스는 프로세싱 및 보기(viewing)를 위해 이미지들을 컴퓨터로 전송하거나 다운로드할 수 있다. 이미지들을 프로세싱하거나 보는 데 사용되는 워크스테이션은 로컬 컴퓨터, 태블릿 또는 워크스테이션일 수 있다.

의사와 같은 건강 전문가는 이미지들을, 그들이 예컨대 워크스테이션, 단말기 상에, 또는 예컨대 웹 브라우저를 통해 원격으로 디스플레이됨에 따라 검토할 수 있는데, 이는 건강 전문가가 전형적으로 이미지들을 영화 또는 이미지 스트림(이는 전형적으로, 예를 들어 사전 프로세싱(pre-processing)으로 인해 모든 캡처된 이미지들보다 더 적은 이미지들을 포함함)으로서 보기 때문이다.

건강 전문가가 정확하게 이미지들을 검토하고 중요한 이미지들 또는 특징부들을 찾도록 하는 방식으로 그리고 합리적인 시간에 캡슐에 의해 수집된 수천 개의 이미지들을 제시하는 것이 바람직하다.

의사에 의해 보여지는 시술 결과들 또는 시술 스터디의 전형적인 종래 기술의 뷰는 움직이는 이미지 또는 비디오로서 보여지는 수천 개의 이미지들을 포함한다(예컨대, 단일 카메라에 의해 캡처된 이미지들의 각각의 스트림에 대한 시퀀스에서 한 번에 하나의 이미지를 디스플레이함). 수천 개의 이미지들을 보는 것은 상당한 시간이 걸리고, 귀찮은 작업일 수 있다. 수천 개의 이미지들을 비디오로서 보는 것은 또한, 관심 이미지들을 누락시킬 더 높은 확률로 이어질 수 있다. 의료 전문가가 이미지들을 보는 데 걸리는 시간을 단축시키는 것이 바람직하다. 보기 작업(view task)을 더 효율적이고 더 유익하게 만드는 것이 또한 요망된다.

본 발명의 실시예들은 캡슐 디바이스 및 선택적으로 수신 디바이스를 포함할 수 있다. 캡슐 디바이스는, 위장관을 횡단하면서 이미지들을 캡처하고 이미지들을 전형적으로 안테나를 포함하는 수신 디바이스로 송신하는 경구형 캡슐일 수 있다. 수신 디바이스는 이미지들을 수신하고, 예컨대 수신 디바이스 내의 저장 디바이스 내에 그들을 저장할 수 있다. 수신 디바이스는 이미지들을 실시간으로(예컨대, 시술 동안) "클라우드" 기반 서버 또는 다른 원격 디바이스로 송신할 수 있다. 수신 디바이스는, 예를 들어 환자에게 착용되는 벨트 또는 패치 또는 임의의 다른 아이템일 수 있다. 수신 디바이스는 수신된 이미지들을, 실시간 디스플레이를 포함하는 디스플레이, 저장, 프로세싱 및/또는 분석을 위해 원격 디바이스로 포워딩할 수 있다. 수신 디바이스는 이미지들을, 예컨대 환자의 셀룰러 전화기를 통해 원격 디바이스로 송신할 수 있다. 로컬 또는 원격(예컨대, "클라우드") 서버 또는 임의의 다른 적합한 컴퓨팅 디바이스는 이미지들 및 CE 시술의 스터디를 생성하기 위해 수신되는 다른 시술 관련 데이터(예컨대, 이미지 캡처 시간 및 환자 데이터)를 프로세싱하고 분석할 수 있다. 컴퓨팅 디바이스는 사용자(예컨대, 의료 전문가)에 의한 검토를 위한 스터디를 디스플레이하도록 인터페이스를 국부적으로 또는 원격으로 제공할 수 있다. 이미지들을 저장, 수신, 프로세싱 및 디스플레이하는 다른 방법들이 사용될 수 있다.

본 발명의 실시예들은 검토(예컨대, 스터디)를 위해 그리고/또는 뷰어 또는 사용자에 의한 추가의 분석을 위해 다수의 선택된 이미지들의 분석을 디스플레이하고/하거나 제공하기 위한 시스템들, 방법들 및 컴퓨터 프로그램 제품들을 포함한다. 이미지들은 소장(small bowel, "SB") 및/또는 결장(colon)과 같은 위장관의 일부분들을 횡단하는 캡슐 내시경에 의해 생체 내에서 캡처되는 이미지들의 스트림으로부터 선택된다. 개시된 방법들, 시스템들, 도구들 및/또는 컴퓨터 프로그램 제품들은, 특히, GIT의 다양한 병리(pathology)들, 장애들, 이상들 및 질병들의 진단, 치료 결정하기, 모니터링, 및/또는 스크리닝을 위해 사용될 수 있다.

이미지들은 검토를 위해 (예컨대, 스터디로서) 그리고/또는 사용자에 의한 추가 분석을 위해 디스플레이될 수 있다. 이미지들의 스트림을 나타내고 제1 선택 방법에 따라 자동으로 선택되는 이미지들의 서브세트가 디스플레이될 수 있다. 사용자 입력 시에, 현재 디스플레이되는 이미지에 대응하는 추가 이미지들이 디스플레이될 수 있는데, 여기서 추가 이미지들은 제2 선택 방법에 따라 자동으로 선택된다. 제2 선택 방법은 생체 내 이미지들의 스트림 중의 이미지들과 현재 디스플레이된 이미지 사이의 관계에 기초할 수 있다.

본 발명의 실시예들은 첨부 도면의 도면들에서 제한이 아닌 예로서 예시되며, 첨부 도면들에서 유사한 도면 부호들은 대응하는, 닮은 또는 유사한 요소들을 나타낸다.
도 1은 본 발명의 실시예들과 함께 사용될 수 있는 예시적인 컴퓨팅 디바이스의 하이레벨 블록도이다.
도 2는 일부 실시예들에 따른, 뷰어(viewer) 또는 사용자에게 처음에 제시되는 제1 스크린 또는 디폴트 스크린을 보여준다.
도 3은 일부 실시예들에 따른 예시적인 스크린을 보여준다.
도 4는 일부 실시예들에 따른, 디스플레이된 추가 정보, 예컨대, 스터디를 갖는 예시적인 스크린 또는 디스플레이를 보여준다.
도 5는 일부 실시예들에 따른, 줌인(zoom-in) 동작 이후의 도 4의 예시적인 스크린을 보여준다.
도 6a는 본 발명의 일 실시예에 따른 스터디 뷰(study view) 모드의 개략도를 보여준다.
도 6b는 일 실시예에 따른, 도 6a의 디폴트 뷰(default view) 모드에서의 맵(예컨대, 바)의 개략도이다.
도 7은 일부 실시예들에 따른, 도 6a에 예시된 디스플레이에 따라 선택된 이미지의 제2 레벨의 정보의 디스플레이 또는 뷰의 예시적인 예시를 보여준다.
도 8a는 일 실시예에 따른 디폴트 스터디 뷰를 도시한다.
도 8b는 일부 실시예들에 따른, 도 8a에서 보여준 이미지들의 매트릭스 레이아웃을 도시한다.
도 9a는 본 발명의 일 실시예에 따른 디폴트 뷰 모드의 예시적인 스크린 샷이다.
도 9b는 도 9a의 디스플레이에서 선택된 이미지의 제2 레벨의 정보의 디스플레이 또는 뷰의 예시적인 스크린 샷이다.
도 10은 본 발명의 일 실시예에 따른 샘플 디스플레이를 도시한다.
도 11은 본 발명의 실시예들에 따른 방법의 흐름도이다.
예시의 간단함 및 명료함을 위해, 도면들에 도시된 요소들은 반드시 정확하게 또는 축척대로 그려진 것은 아니라는 것이 이해될 것이다. 예를 들어, 요소들 중 일부의 치수들은 명료함을 위해 다른 요소들에 비해 과장되거나 더 강조될 수 있거나, 또는 여러 물리적 컴포넌트들이 하나의 기능 블록 또는 요소에 포함될 수 있다. 또한, 적절한 것으로 간주되는 경우, 대응하는 또는 유사한 요소들을 나타내기 위해 도면들 사이에서 참조 부호들이 반복될 수 있다.

하기의 상세한 설명에서, 본 발명의 완전한 이해를 제공하기 위해 다수의 특정 상세 사항들이 기재된다. 그러나, 본 발명이 이들 특정 상세 사항들 없이 실시될 수 있다는 것이 당업자에 의해 이해될 것이다. 다른 사례들에서, 잘 알려진 방법들, 절차들, 및 컴포넌트들은 본 발명을 모호하게 하지 않도록 하기 위해 상세히 기술되지 않았다. 일 실시예에 대해 기술된 일부 특징부들 또는 요소들은 다른 실시예들에 대해 기술된 특징부들 또는 요소들과 조합될 수 있다. 명료함을 위해, 동일한 또는 유사한 특징부들 또는 요소들의 논의가 반복되지 않을 수 있다.

본 발명의 실시예들이 이와 관련하여 제한되지 않지만, 예를 들어, "프로세싱", "컴퓨팅", "계산", "결정", "확립", "분석", "검사" 등과 같은 용어들을 이용하는 논의들은, 컴퓨터의 레지스터들 및/또는 메모리들 내에 물리적(예컨대, 전자적) 수량들로서 표현된 데이터를 컴퓨터의 레지스터들 및/또는 메모리들 내에 물리적 수량들로서 유사하게 표현된 다른 데이터로 조작하고/하거나 변환하는, 컴퓨터, 컴퓨팅 플랫폼, 컴퓨팅 시스템, 또는 다른 전자 컴퓨팅 디바이스의 동작(들) 및/또는 프로세스(들), 또는 동작들 및/또는 프로세스들을 수행하기 위한 명령어들을 저장할 수 있는 비일시적 저장 매체 내의 다른 정보를 지칭할 수 있다.

본 발명의 실시예들이 이와 관련하여 제한되지 않지만, 본 명세서에 사용되는 바와 같은 용어들 "복수" 및 "다수"는, 예를 들어, "다수" 또는 "2개 이상"을 포함할 수 있다. 용어들 "복수" 또는 "다수"는 2개 이상의 컴포넌트들, 디바이스들, 요소들, 유닛들, 파라미터들 등을 기술하기 위해 명세서 전체에 걸쳐 사용될 수 있다. 본 명세서에서 사용될 때 용어 "세트"는 하나 이상의 아이템들을 포함할 수 있다. 명시적으로 언급되지 않는 한, 본 명세서에 기술된 방법 실시예들은 특정 순서 또는 시퀀스로 제한되지 않는다. 추가적으로, 기술된 방법 실시예들 또는 이들의 요소들 중 일부는 동시에, 동일한 시점에, 또는 동시적으로 발생하거나 수행될 수 있다.

본 명세서에서 이미지에 대해 지칭되는 바와 같은, 용어 "위치" 및 그의 파생어들은 이미지를 캡처하는 동안 GIT를 따른 캡슐의 추정된 위치를 또는 GIT를 따라 이미지에 뿌려진 GIT의 부분의 추정된 위치를 지칭할 수 있다.

캡슐 내시경검사 시술의 유형은 특히, 관심이 있는 그리고 이미징될 GIT의 부분(예컨대, 결장 또는 소장("SB"))에 기초하여, 또는 특정 사용(예컨대, 크론병(Crohn's disease)과 같은 Gl 질환의 상태를 검사하기 위해, 또는 결장암 스크리닝을 위해)에 기초하여 결정될 수 있다.

용어들 스크린/스크린들, 뷰/뷰들 및 디스플레이/디스플레이들은 본 명세서에서 상호교환가능하게 사용될 수 있고, 특정 문맥에 따라 이해될 수 있다.

본 명세서에 지칭된 바와 같은, 용어들 "디폴트 뷰", "디폴트 디스플레이" 및 "디폴트 스크린"은 본 시스템들 및 방법들에 따른 시술의 스터디의 검토의 각각의 개시 시에 먼저 디스플레이되는 "뷰", "디스플레이" 및 "스크린"을 상응하여 지칭할 수 있고, 여기서 이러한 제1 뷰, 디스플레이 또는 스크린은 미리정의되며 사용자 선택의 결과가 아니다.

특정 정보의 뷰 또는 디스플레이와 관련되어 본 명세서에 지칭된 바와 같은, 용어들 "디폴트 뷰" 및 "디폴트 디스플레이"는 본 시스템들 및 방법들에 따른 시술의 스터디의 검토의 각각의 개시 시에 특정 정보의 제1 "뷰" 및 "디스플레이"를 상응하여 지칭할 수 있고, 여기서 특정 정보의 이러한 제1 뷰 또는 디스플레이는 미리정의되며 사용자 선택의 결과가 아니다.

특정 정보의 디스플레이 또는 뷰와 관련하여 본 명세서에 지칭되는 바와 같은, 용어들 "디폴트로" 또는 "디폴트로서"는 디스플레이를 업로드하거나, 개시하거나 또는 트리거하기 위한 사용자 동작 또는 입력에 대한 필요성 없이 특정 뷰, 디스플레이 또는 스크린의 프레임 내에 디스플레이되는 정보에 관련될 수 있다.

이미지들(예컨대, 다른 이미지/이미지들을 둘러싸거나, 다른 이미지/이미지들에 인접한 이미지들)과 관련하여 본 명세서에서 지칭되는 바와 같은, 용어들 "둘러싸는" 또는 "인접한"은, 달리 구체적으로 나타내지 않는 한, 공간적 및/또는 시간적 특성들에 관련될 수 있다. 예를 들어, 다른 이미지/이미지들을 둘러싸거나 그에 인접한 이미지들은, GIT 및/또는 이미지들을 따라 다른 이미지/이미지들 근처에 위치되는 것으로 추정되는 이미지들 및/또는 소정 임계치 내에서, 예컨대 1 또는 2 센티미터 내에서, 또는 1 초, 5 초 또는 10 초 내에서, 다른 이미지의 캡처 시간 근처에 캡처되었던 이미지들일 수 있다.

용어들 "GIT" 및 "GIT의 일부분"은 각각, 그들의 문맥에 따라 다른 것을 지칭하거나 이를 포함할 수 있다. 따라서, 용어 "GIT의 일부분"은 또한 전체 GIT를 지칭할 수 있고, 용어 "GIT"는 또한 GIT의 일부분만을 지칭할 수 있다.

본 발명의 실시예들은, 종래 기술의 애플리케이션들이 전형적으로 영화 또는 이미지 스트림 - 예컨대, 일련의 시간으로 제시되는 일련의 이미지들 - 을, 제1 또는 디폴트 뷰 또는 디스플레이로서 제시한다는 점에서 종래 기술의 CE 시술 보기 애플리케이션들과 상이할 수 있다. 본 발명의 실시예들에서, 예컨대 경구형 캡슐을 통해 GIT로부터 수집된 이미지들의 세트는 프로세싱되고, 이어서 예컨대, 일단 이미지들이 업로드되고 프로세싱되면, 캡슐에 의해 캡처된 후에 그리고 기술된 시스템들 및 방법들의 실시예들에 따른 시술의 스터디의 검토의 각각의 개시 시에, 예컨대, 디폴트 또는 제1 뷰로서, 정지 이미지들의 세트로서 처음에 제시될 수 있다. 디폴트 뷰에 제시된 각각의 이미지는 관심 특징부(예컨대, 병리의 특정 사례)의 것일 수 있고, 디폴트 뷰에 도시되지 않은 그러한 동일한 특징부의(예컨대, 병리의 그러한 동일한 사례의) 다른 이미지들과 연관되거나 그에 대응할 수 있다. 관심 특징부의 사례를 표현하도록 디스플레이되는 단일의 정지 이미지를 나타내거나 선택하는 것(예컨대, 입력 디바이스를 사용하여 클릭함)은 제2 레벨 또는 추가 정보 뷰를 제시할 수 있는데, 이는, 예를 들어 특징부의 그러한 사례를 또한 보여주는 움직이는 이미지 또는 스크롤가능 일련의 이미지들일 수 있다.

GIT(예컨대, SB)의 상이한 부분들(대장 또는 결장, 식도, 위 등)의 이미지들이 제시될 수 있고, 사용자 인터페이스는 디스플레이되는 상이한 부분들에 따라 달라질 수 있다. 수행된 시술의 유형, 예컨대 SB 시술 또는 결장 시술 또는 둘 모두의 시술(예컨대, 구체적으로 SB를 나타내거나 검사하는 것을 목표로 하는 시술 또는 구체적으로 결장을 나타내거나 검사하는 것을 목표로 하는 시술 또는 둘 모두의 시술)은, GIT의 어느 부분이 관심 부분인지를 결정할 수 있다. 전형적으로, 디스플레이되는 대부분의 이미지들은 관심 부분의 것이다. 각각의 관심 부분은 세그먼트들로 분할될 수 있다. 각각의 세그먼트(예컨대, 그 세그먼트 내에 위치되는 것으로 추정되는 GIT의 부분들을 보여주는 이미지들)는 상이한 뷰로, 예컨대 상이한 탭을 통해 디스플레이될 수 있다. 예를 들어, 관심 부분이 결장인 경우(예컨대, 시술은 결장 시술임), 그것은 5개의 해부학적 세그먼트들(맹장, 상행부(ascending), 횡행부(transverse), 하행부(descending), 및 직장)로 세그먼트화될 수 있으며, 각각의 세그먼트는 탭을 통해 액세스 가능한 별개의 뷰를 갖는다. 따라서, 사용자에게는 맹장, 상행부, 횡행부, 하행부, 및 직장으로 라벨링된 탭들이 제시될 수 있고, 맹장 상의 클릭은 맹장 내에 위치되는 것으로 추정되는 수신된 이미지들의 스트림 중의 이미지들을 가장 잘 표현하는 것으로 추정되는 제1 레벨의 세트를 보여줄 수 있다.

제2 레벨 이미지들은 제1 레벨 이미지들과 동일한 스크린 상에 디스플레이될 수 있거나(예컨대, 제1 레벨 이미지가 움직이는 이미지 또는 스크롤가능 이미지로서 디스플레이되도록 전이되어 그의 대응하는 제2 레벨 이미지들을 디스플레이할 수 있고, 이때 다른 제1 레벨의 정지 이미지들은 디스플레이 상에 남아 있음), 또는 상이한 윈도우 또는 팝업 창에 디스플레이될 수 있다. 제2 레벨의 이미지들은 이미지 캡처 시간에 따라 대응하는 제1 레벨 이미지에 선행하고/하거나 후속하거나 또는 연속될 수 있다. 제2 레벨 이미지들은 대응하는 제1 레벨 이미지(시드 이미지)를 포함할 수 있거나, 제2 레벨 이미지들의 디스플레이는 대응하는 제1 레벨 이미지를 포함할 수 있다. 따라서, 대응하는 제1 레벨 이미지를 포함하는 또는 그에 추가되는 제2 레벨 이미지들은 그들의 캡처 시간에 따라 디스플레이될 수 있다. 이어서, 제1 레벨 이미지(예컨대, "최상의" 대표 이미지)가 0으로 번호가 매겨져 있고, 제2 레벨 이미지들 또는 다른 제2 레벨 이미지들이 이미지 0으로부터의 이미지들에서의 그들의 거리에 의해 번호가 매겨져 있도록, 제2 레벨 이미지들은 번호가 매겨질 수 있다.

사용자는 체크박스를 클릭하거나, 그렇지 않으면 보고서 또는 최종 보고서에 배치된 그러한 이미지(전형적으로 사용자가 이미지들을 검토한 후에 디스플레이되거나 전달됨)를 갖도록 제1 레벨에 디스플레이된 이미지를 선택할 수 있고; 사용자는 단지 "선택된" 이미지들의 디스플레이를 야기하도록 제1 레벨 내의 이미지들 상에서 필터링할 수 있다. 자동 병리 크기 추정 및 (예컨대, 폴립들에 대한) 병리 크기 추정 도구와 같은 다양한 도구들 또는 이미지 분석 능력들이 제시될 수 있다. 이미지들은 다른 방식들로 사용자 입력에 기초하여 필터링되고/되거나 선택적으로 디스플레이될 수 있다.

매트릭스 또는 그리드 뷰, 캐러셀(carousel) 뷰(예컨대, 여기서 이미지들은 이미지들의 링의 가장자리에서 보이는 것처럼 디스플레이되는데, 이때 하나의 "현재" 이미지는 전면에서 가장 크고 다른 이미지들은 "링" 둘레에서 크기가 감소함)와 같은, 이미지 디스플레이들 또는 뷰들의 상이한 유형들이 사용자에 의해 선택될 수 있다. 맵 또는 "히트 맵(heat map)"은 소정 이미지들을 GIT를 따르는 그들의 공간적 배향에 관련시킬 수 있는데, 이때 소정 특징부들 또는 특징부들의 조합은, 예컨대 컬러를 사용하여 히트 맵을 따라 나타내어진 특징부의 "확산(spread)" 또는 길이를 갖는다. 맵은 GIT의 일부분 또는 GIT의 관심 부분을 표현할 수 있다. 맵이 이미지들이 촬영된 GIT의 일부분을 표현할 수 있고/있거나 이미지들의 추정된 위치에 대응하는 마커들을 포함할 수 있다는 점에서, 맵은 제1 레벨 이미지들에 대응할 수 있다. 따라서, 맵은 그들의 위치 또는 GIT 내의 추정된 위치에 따라 이미지들을 표현하는 국부화된 이미지 표시들 또는 마커들을 포함할 수 있다.

본 명세서에 사용되는 경우, 프로세서 및 알고리즘 방법에 이용가능한 정보에 기초하여, 위치, 크기 또는 세정(cleansing) 레벨과 같은 프로세서 도출된 설명들이 추정되거나 근사될 수 있다.

사용자는 이미지에 정보를 추가할 수 있고/있거나, 정보가 이미지에 자동으로 추가될 수 있다. 예를 들어, 사용자는 선택가능한 병리 유형들을 사용하여 이미지를 라벨링할 수 있다. 프로세스는 이미지에서 자동으로 식별되는 병리의 위치 주위에 박스 또는 테두리를 그 이미지 내에 자동으로 그릴 수 있다.

일부 태양들에 따르면, 스터디의 안출 또는 생성은 이미지들의 서브세트 중의 이미지들에 대응하는 추가적인 하나 이상의 이미지들에 더하여, 추가 정보 또는 제2 레벨 정보를 생성하는 것을 포함할 수 있다. 예를 들어, 추가 정보는 GIT의 적어도 관심 부분의 세그먼트들로의 분할, GIT의 적어도 관심 부분을 따른 이미지들의 스트림 중의 이미지들의 위치들, GIT의 적어도 관심 부분을 따른 이미지들의 서브세트 중의 이미지들의 표시들을 포함하는 GIT의 적어도 관심 부분을 표현하는 맵, 제3 선택 방법에 따라 이미지들의 서브세트로부터 선택된 이미지들의 미리정의된 개수, 이미지들에서의 관심 특징부들의 표시들, 이미지마다, 세그먼트들마다 및/또는 시술마다 결정된 세정 레벨의 표시, 관심 특징부의 추정된 크기의 표시, 관심 특징부의 정도의 표시, GIT의 적어도 관심 부분의 해부학적 섹션들 사이의 전이를 표현하는 생체 내 이미지들의 스트림 중의 이미지들의 선택, 및 이들의 조합을 포함할 수 있다.

일부 태양들에서, 시스템 또는 방법은 사용자의 검토를 위한 캡슐 내시경검사 시술 동안 (예컨대, 환자에 의해 삼켜진) 캡슐에 의해 캡처되는 이미지들을 포함한, 캡슐 내시경검사 시술의 스터디를 디스플레이할 수 있다. 시스템은 캡슐 내시경검사 시술을 통해 캡처된 환자의 또는 대상의 GIT의 적어도 일부분의 생체 내 이미지들의 세트 또는 스트림으로부터 선택되는 이미지들의 서브세트(예컨대, 제1 레벨 이미지들)를 수신할 수 있다. 일부 태양들에 따르면, 시스템은 환자의 또는 대상의 GIT의 적어도 일부분의 생체 내 이미지들의 세트 또는 스트림을 수신할 수 있다. 이어서, 시스템은 제1 선택 방법에 따라 수신된 생체 내 이미지들의 세트 또는 스트림으로부터 이미지들의 서브세트를 자동으로 선정하거나 선택할 수 있고, 이미지들의 서브세트는 수신된 생체 내 이미지들의 세트 또는 스트림을 "표현한다". "표현하는"이라는 것은, 의료 진단을 하고 환자의 GIT의 관심 부분과 관련하여 치료 결정을 하는 양상으로부터 또는 이들의 이익을 위해 표현하는 것을 의미한다. 예를 들어, 시스템은 수신된 이미지들에서 하나 이상의 관심 특징부들(예컨대, 병리들의 하나 이상의 유형들)을 식별할 수 있다. 하나 이상의 관심 특징부들은 캡슐 내시경검사 시술의 특정 유형에 기초하여 미리결정될 수 있다. 관심 특징부들의 그러한 식별에 기초하여, 이미지들의 서브세트는, 특히 식별된 병리들을 표현하도록 선택될 수 있다.

이미지들의 서브세트의 적어도 일부분의 각각의 이미지에 대해, 시스템은, 이미지들의 서브세트(예컨대, 제2 레벨 이미지들) 중의 이미지에 대응하는, 생체 내 이미지들의 세트 또는 스트림으로부터 하나 이상의 이미지들을 수신하거나, 선정하거나 또는 식별할 수 있다. 하나 이상의 대응하는 이미지들이 제2 선택 방법에 따라 선택될 수 있다. 일부 태양들에 따르면, 이미지들의 서브세트 중의 각각의 이미지에 대해, 대응하는 하나 이상의 이미지들이 선택되고 수신된다. 일부 태양들에 따르면, 선택된 대응하는 하나 이상의 이미지들은 이미지들의 서브세트 중의 대응하는 이미지를 포함할 수 있다. 일부 태양들에 따르면, 대응하는 하나 이상의 이미지들은 이미지들의 서브세트 중의 이미지들을 포함하지 않을 수 있다. 일부 태양들에 따르면, 시스템은 제2 선택 방법에 따라 대응하는 하나 이상의 이미지들을 선택할 수 있다.

제2 선택 방법은 생체 내 이미지들의 스트림 중의 이미지들 사이의 관계 또는 필터에 기초할 수 있다. 그러한 이미지들 사이의 관계 또는 필터는 동일한 특징부(예컨대, 동일한 특정 궤양(ulcer)) 또는 동일한 유형의 특징부로부터의 적어도 일부분을 포함하는 것으로 식별된 이미지들(예컨대, 궤양들을 포함하는 것으로 식별된 이미지들), GIT를 따라 시간적으로 근접하여 캡처되었던 이미지들, 또는 GIT를 따라 인접하게 위치되는 이미지들, 또는 이들의 조합일 수 있다. 일부 태양들에 따르면, 이미지들의 서브세트로부터 선택된 미리정의된 개수의 이미지들이 수신되고 디스플레이될 수 있다. 미리정의된 개수의 이미지들(예컨대, 5개의 이미지들, 10개의 이미지들, 또는 10개까지의 임의의 수)은 사용자 입력의 수신 시에 디스플레이될 수 있다. 미리정의된 개수의 이미지들은 이미지들의 서브세트를 요약하기 위해 제3 선택 방법에 따라 선택될 수 있다. 일부 태양들에 따르면, 제3 선택 방법은 가장 관심있는 것으로 결정되거나 추정되는 이미지들의 서브세트 중의 이미지들을 선택할 수 있다. 예를 들어, 결장 시술에서, 어느 정도 수준의 확실성으로 폴립들을 포함하는 것으로 식별되는 수신된 이미지들의 세트 또는 스트림 중의 이미지들이 이미지들의 서브세트에 대한 제1 선택 방법에 따라 선택될 수 있다.

5개의 가장 큰 폴립들을 포함하는 것으로 식별되었던 이미지들의 서브세트 중 5개의 이미지들, 또는 최고 수준의 확실성으로 폴립들을 포함하는 것으로 식별되었던 5개의 이미지들이 제3 선택 방법에 따라 선택될 수 있다. 본 명세서에 기술된 각각의 이미지 선택 방법은 하나 이상의 필터들 또는 선택 또는 검출 규칙들을 포함할 수 있고, 각각의 방법에 따른 선택은 하나 이상의 스테이지들에서 수행될 수 있다. 선택 또는 검출 규칙들은 알고리즘들, 예컨대 특히 기계 학습 알고리즘들 및 딥 러닝(deep-learning) 알고리즘들을 이용함으로써 적용될 수 있다. 예를 들어, 수신된 이미지들의 스트림으로부터 이미지들의 서브세트를 선택할 때, 하나 이상의 관심 특징부들의 검출이 제1 스테이지에서 수행될 수 있다. 상이한 규칙들(예컨대, 알고리즘들)이 상이한 병리들 또는 GIT의 상이한 해부학적 부분들 사이의 통로와 같은 상이한 유형들의 특징부들의 검출에 사용될 수 있다. 전형적으로, 검출 알고리즘들의 결과들은, 이미지가 검출된 특징부를 포함하는 확실성의 수준을 나타내는 이미지에 할당된 점수들일 수 있다. 제2 선택 방법이 기초로 하는 관계 또는 필터는 이미지들의 서브세트 중의 이미지들 또는 상이한 제1 레벨 이미지들에 대한 상이한 대응하는 추가 이미지들을 생성할 수 있다. 적어도 제1 선택 방법은 딥 러닝 기법들, 예컨대 신경망 기법들에 기초할 수 있다. 제1 선택 방법 및 제2 선택 방법은 각각 하나 이상의 선택 규칙들을 포함할 수 있다.

제2 스테이지에서, 이미지들은 제1 스테이지의 검출 결과들에 기초하여 이미지들의 스트림으로부터 선택될 수 있다. 선택은 예를 들어, 병리들의 상이한 유형들 및 해부학적 부분들 사이의 통로와 같은 상이한 유형들의 특징부들에 대한 상이한 선택 규칙들을 포함할 수 있다. 제2 스테이지에서의 선택 규칙들은, 특히, 검출 점수들에 대해 결정된 임계치에 기초할 수 있다. 예를 들어, SB 시술의 경우, 이미지들에서 식별된 병리들 또는 특징부들의 유형, GI 관을 따른 식별된 병리들의 확산의 유형(예컨대, 초점, 확산 또는 '카펫형(carpet like)' 분포), 및 식별된 병리들의 심각성 또는 위치에 기초하여 그리고 제2 스테이지에서 이미지들의 서브세트에 대한 이미지들을 선택하기 위해 상이한 규칙들이 결정될 수 있다. 규칙들은 또한, 특정 특징부에 따라, 특징부의 유형에 따라 그리고/또는 선택될 이미지들의 전체 세트에 따라 디스플레이될 이미지들의 최대 수에 기초할 수 있다. 예를 들어, 초점 병리학(focal pathology)의 경우, 시스템은 병리를 표현하는 단지 하나의 이미지만을 선택하여 이미지들의 서브세트에 나타나게 할 수 있다(예를 들어, 하나의 규칙). 확산 병리학(diffusive pathology)의 경우, 시스템은 다수의 이미지들을 선택하여 이미지들의 서브세트에 병리를 표현하게 할 수 있다(예컨대, 다른 규칙).

다른 예로서, 암 스크리닝 도구로서 사용되는 결장 시술에서, 관심 특징부들은 단지 하나의 병리, 즉 폴립들을 포함할 수 있다. 그 다음에, 시스템은, 각각의 식별된 폴립에 대한 이미지들의 서브세트에 대해 하나의 이미지가 선택되는 규칙을 포함할 수 있다. 식별된 폴립은 이미지의 폴립 검출 점수에 대한 임계치에 따라 결정될 수 있다. 대안적으로 또는 추가적으로, 다른 규칙이 결정될 수 있는데, 그에 따르면, 제1 서브세트가 최대 수의 이미지들(예컨대, 50, 100, 160, 200 또는 수십 정도의 최대 수, 100 정도의 최대 수 또는 수백 정도의 최대 수)을 포함할 것이다. 2개의 규칙들이 적용되고, 제1 규칙에 따라 선택된 이미지들의 개수가 제2 규칙에 따라 결정된 최대 개수를 초과하는 경우, 제3 규칙이 적용될 수 있다. 그러한 제3 규칙은 최고 검출 점수를 갖는 제1 규칙에 따라 선택된 이미지들 중 제2 규칙에 따른 이미지들의 최대 개수가 이미지들의 서브세트에 대해 선택된다고 결정할 수 있다. 더 높은 검출 점수를 갖는 식별된 폴립들의 이미지들이 더 중요한 것으로 간주될 수 있는데, 예를 들어 그러한 이미지들이 폴립들을 나타낼 확률이 더 높기 때문이다.

일부 태양들에 따르면, 폴립들의 궤양들과 같은 특징부들을 추적하는 것에 기초한 규칙이 포함될 수 있다. 그러한 규칙은 추가 스테이지에서 적용될 수 있다. 그러한 규칙은 동일한 특정 특징부(예컨대, 동일한 폴립)를 이미징하는 이미지들의 식별을 허용할 수 있다. 그러한 규칙은 이미지들의 서브세트 중의 이미지에 보여지는 동일한 특징부의 적어도 일부분을 보여주는 하나 이상의 이미지들을 결정하기 위해 제2 선택 방법에서 사용될 수 있다. 그러한 특징부 추적은, 예를 들어, 전체적으로 본 명세서에 참고로 포함되는 미국 특허 제9,430,706호에 개시된 것과 같은 방법들, 또는 광학 흐름 기법들에 기초하여 수행될 수 있다.

시스템은, 예를 들어 본 명세서에 기술된 방법들을 이용함으로써 캡슐 내시경검사 시술의 스터디를 안출하거나 생성할 수 있다. 스터디는 적어도 선택된 이미지들의 서브세트(예컨대, 레벨 1 뷰) 및 선택적으로 추가 정보를 포함할 수 있다. 추가 정보는, 예를 들어 이미지들의 "레벨 1" 서브세트의 적어도 일부분의 각각의 이미지에 대응하는 (예컨대, 시스템에 의해) 선택된 하나 이상의 추가 이미지들을 포함할 수 있다. 추가 정보는, GIT를 따른 디스플레이된 이미지들의 국부화, 디스플레이된 이미지들에서의 식별된 또는 의심되는 특징부들의 위치 및/또는 유형의 표시, GIT를 따른 특징부들의 유형 또는 식별되거나 의심되는 특징부들의 정도(예컨대, "카펫형" 병리 또는 전염병(diffusive disease)의 정도)의 표시, 관심있는 GIT의 부분의 세그먼트화의 표시, GIT의 해부학적 부분들의 표시 및 GIT의 상이한 해부학적 부분들 사이의 해부학적 통로를 표현하는 이미지들의 디스플레이와 같은 정보를 추가로 포함할 수 있다. 일부 태양들에 따르면, 추가 정보의 일부분 또는 추가 정보의 전부는 사용자 입력 시에만, 예컨대 (예를 들어, 제어부를 활성화시키는 것 또는 특정 디스플레이 영역을 호버링하는 것에 의한) 동작을 통한 사용자 요청 시에 디스플레이될 수 있다. 일부 태양들에 따르면, 레벨 1 이미지들 및/또는 레벨 2 이미지들은 정지 방식으로 디스플레이될 수 있다. 전형적으로, 레벨 2 이미지들은, 사용자가 추가 검토를 위해 레벨 1 이미지를 선택할 때에만 디스플레이되지 않는다. 전형적으로, 제2 레벨 이미지들의 세트는 제1 레벨 이미지들로서 포함되지 않거나 디스플레이되지 않는 하나 이상의 이미지들을 포함한다. 스터디 이미지들은 제1 레벨 이미지들과 동일한 뷰에서(예컨대, 동일한 윈도우에 디스플레이될 때), 또는 이들과 상이한 뷰에서(예컨대, 팝업 창에 디스플레이될 때) 디스플레이될 수 있다.

하나 이상의 뷰들에서 사용자의 검토를 위해 스터디가 디스플레이될 수 있다. 각각의 스터디 뷰는 적어도 이미지들의 서브세트의 디스플레이를 포함할 수 있다. 상이한 스터디 뷰들은, 예를 들어 이미지 디스플레이 레이아웃(예컨대, 매트릭스 또는 캐러셀), 이미지 디스플레이 브라우징(예컨대, 정지 방식 또는 비디오), (있다면) 스터디의 어느 추가 정보가 디스플레이되는지 그리고 추가 정보가 디스플레이되는 방식에서 특징지어질 수 있다. 예를 들어, 일부 태양들에 따르면, 2개의 스터디 뷰들이 디스플레이될 수 있다. 하나의 뷰는 추가 정보(예컨대, GIT 세그먼트화 및 세그먼트들의 세정 레벨)와 함께 정지 방식으로 매트릭스 레이아웃으로 이미지들의 서브세트(예컨대, "제1 레벨" 또는 "레벨 1" 이미지들)의 디스플레이를 포함하지만, 이미지들의 서브세트 중의 이미지들에 대응하는 하나 이상의 이미지들(예컨대, "레벨 2" 또는 "제2 레벨" 이미지들)의 디스플레이를 포함하지는 않는다. 제2 뷰는, 제2 레벨 이미지들을 포함한, 스터디에 포함되는 추가 정보의 전부의 디스플레이 및 캐러셀 레이아웃에서의 이미지들의 서브세트의 디스플레이를 포함할 수 있다. 다수의 스터디 뷰들의 경우, 하나의 뷰가 디폴트 스터디 뷰로서 정의될 수 있다. 다른 스터디 뷰들과는 대조적으로, 디폴트 스터디 뷰는 디스플레이를 위해 사용자에 의해 선택되지 않는다. 일단 특정 시술이 스터디 검토를 위해 선택되면, 디폴트 스터디 뷰가 디스플레이될 것이다. 따라서, 디폴트 스터디 뷰는 디스플레이될 제1 스터디 뷰이다. 단일 스터디 뷰의 경우에, 단일 스터디 뷰는 디폴트 스터디 뷰이다.

스터디 뷰는 하나 이상의 뷰들을 포함할 수 있다. 이미지들의 서브세트는 스터디 뷰의 메인 또는 디폴트 뷰에 디스플레이된다. 스터디 뷰의 메인 또는 디폴트 뷰는, GIT를 따른 이미지들의 서브세트 중의 이미지들을 국부화하는 맵, 이미지들의 서브세트 중의 각각의 이미지에 대한 세정 레벨 표시, GIT의 관심 부분의 세그먼트화, 이미지들의 서브세트 중의 이미지들의 캡처 시간 및/또는 관심있는 GIT 부분의 추정된 수송 시간(예컨대, 캡슐 디바이스가 관심있는 GIT 부분을 횡단하는 데 걸리는 시간의 추정치)과 같은 추가 정보의 디스플레이를 추가로 포함할 수 있다. 이미지들의 디스플레이된 서브세트 중의 이미지들에 대응하는 추가적인 하나 이상의 이미지들의 디스플레이와 같이, 사용자 입력의 수신 시에만 다른 추가 정보가 디스플레이될 수 있다. 정보의 그러한 "선택적인" 디스플레이(예컨대, 사용자가 이러한 추가 정보가 디스플레이되는지 또는 아닌지를 결정하기 위한 것)는 메인 뷰에 또는 별개의 뷰에 있을 수 있다. 예를 들어, 이미지들의 서브세트 중의 이미지들에 대응하는 추가적인 하나 이상의 이미지들은 메인 뷰에, 예컨대 이미지들의 서브세트 중의 대응하는 이미지가 디스플레이되는 동일한 이미지 윈도우에 또는 스터디 뷰의 메인 뷰의 상이한 전용 영역에 디스플레이될 수 있다. 다른 예에서, 이미지들의 서브세트 중의 이미지들에 대응하는 추가적인 하나 이상의 이미지들은 별개의 뷰에, 예컨대 팝업 창에 디스플레이될 수 있다.

스터디 디스플레이 또는 뷰는 다수의 특성들을 포함할 수 있다. 스터디 디스플레이 특성은 이미지들의 서브세트를 디스플레이하는 방식, 동시에 디스플레이되는 이미지들의 개수를 포함한, 이미지들의 디스플레이를 위한 레이아웃(예컨대, 캐러셀 또는 매트릭스); 이미지들 사이를 브라우징하는 방식(이미지들의 전부가 동시에 디스플레이되지 않는 경우); 및 추가 정보의 디스플레이를 포함할 수 있다. 예를 들어, 특성은 어느 추가 정보가 특정 디스플레이 또는 뷰에 디스플레이될 수 있는지 그리고 어느 것이 그렇지 않은지를 포함할 수 있다. 추가 정보의 디스플레이를 지칭하는 특성들은 특정 뷰에서 어느 정보가 디폴트로 디스플레이되는지 그리고 사용자 요청 시에만 특정 뷰에서 어느 것이 디스플레이되는지(예컨대, 이미지 내의 특징부에 대한 표시의 디스플레이)를 결정하는 것을 포함할 수 있다. 스터디 디스플레이 특성은 구체적으로, 예컨대 캐러셀 방식으로 또는 비디오 클립으로서, 제1 레벨 이미지와 동일한 윈도우에서 또는 팝업이나 다른 윈도우 또는 스크린에서 제2 레벨 이미지들의 디스플레이의 레이아웃을, 한 번에 하나씩 또는 몇몇 이미지들의 동시적 디스플레이로서 포함할 수 있다. 일부 태양들에 따르면, 디스플레이된 이미지들의 세트 내의 이미지들 사이의 브라우징은 이미지마다(예컨대, 각각의 브라우징 동작은 현재 디스플레이된 하나의 이미지만을 대체함) 또는 페이지나 스크린마다(예컨대, 다수의 이미지들이 동시에 디스플레이되는 경우, 각각의 브라우징 동작은 현재 디스플레이된 이미지들 모두를 대체함), 정지 방식으로(예컨대, 여기서 이미지들 또는 이미지들의 페이지들 사이의 브라우징은 사용자 입력에 따라서만 수행됨) 또는 자동 방식으로(예컨대, 사용자가 브라우징 제어부를 활성화시킬 때, 브라우징은 디스플레이된 이미지들의 세트 중의 페이지들 또는 이미지들 사이에서 자동으로 수행됨)일 수 있다. 일부 태양들에 따르면, 이미지들의 디스플레이, 예컨대 이미지들의 선택된 서브세트는 GIT의 관심 부분의 세그먼트마다 있고 이러한 부분의 세그먼트화에 기초한다. 예를 들어, 스터디 뷰에서, 이미지들의 세트는 세그먼트마다 디스플레이될 수 있는데, 여기서 각각의 세그먼트는 탭을 활성화시킴으로써 디스플레이된다. 일부 태양들에 따르면, 일부 디스플레이 또는 뷰 특성들은 사용자에 의해 미리정의될 수 있거나, 사용자 입력 시 (예컨대, 뷰에서 동시에 디스플레이되는 이미지들의 개수에 따라) 변경될 수 있다. 일부 실시예들에서, 사용자는 제1 레벨 이미지들의 세트들 중의 "페이지들" 사이에서 또는 이미지들 사이에서 디스플레이가 이동하게 하거나 이를 브라우징할 수 있다(예컨대, 디스플레이가 x개의 이미지들을 포함하는 경우, 다음 페이지로의 브라우징은 다음 x개의 이미지들을 제시할 것임). (비디오 디스플레이와 대조적으로) 자동화된 브라우징은 다음 이미지 또는 다음 "페이지"로 자동으로 이동할 수 있다.

일 실시예에서, 제2 레벨 이미지들의 뷰 또는 디스플레이에서, (다수의 제1 레벨 이미지들이 한꺼번에 디스플레이되는 제1 레벨 이미지들과는 대조적으로) 하나의 이미지만이 한 번에 디스플레이된다. 제2 레벨 이미지들은, 예컨대 자동 재생 모드를 사용하여 비디오 클립으로서 디스플레이될 수 있다.

스터디는 시스템에 의해 사용자에게 제공되는 모든 이미지들 및 정보, 예를 들어 이미지 캡처 시간, 이미지들(예컨대, 제1 및 제2 레벨) 및 시스템이 수행할 수 있는 케이스 및/또는 시술에 관련된 데이터의 분석 결과와 같은 추가 데이터를 포함한, 의사에게 제시되는 케이스 또는 시술에 관련된 모든 데이터를 포함할 수 있다. 스터디는 또한 환자 정보(예컨대, 상세 사항들, 배경, 이력)를 포함할 수 있다.

일부 태양들에 따르면, 시스템의 일 실시예는 사용자의 검토를 위해 이미지들의 서브세트를 디스플레이 디바이스(예컨대, 모니터) 상에 디스플레이할 수 있다: 전형적으로, 디스플레이되는 이미지들은 그룹당 하나 이상의 대표 이미지들이고, 따라서 상이한 그룹들 각각은 "제1 레벨" 디스플레이에 디스플레이되는 하나 이상의 대표 이미지들을 가질 수 있다. 제1 레벨 디스플레이는, 예컨대 사용자 입력 또는 선택 없이, 이들 이미지들을 "디폴트"로 디스플레이할 수 있고, 이러한 제1 레벨 디스플레이는 움직이는 이미지들 또는 영화들보다는 오히려 정지 방식으로 이미지들을 디스플레이할 수 있다.

시술에 사용되는 캡슐 디바이스의 단일 이미징 디바이스에 의해 캡처되는 제1 레벨의 이미지들 또는 "대표" 이미지들이 동시에 디스플레이될 수 있다. 예컨대, 제1 레벨의 이미지들의 뷰 또는 디스플레이에서 동시에 디스플레이될 수 있는 이미지들의 개수 또는 이미지들의 최대 개수는 미리정의될 수 있다.

일부 태양들에 따르면, 스터디는 스터디의 디폴트 뷰에 디스플레이되는 제1 레벨 정보를 포함한다. 따라서, 제1 레벨 정보의 디스플레이는 필수적이고, 사용자가 이러한 유형의 정보가 디스플레이되는지 또는 디스플레이되지 않는지를 결정하기 위한 것은 아니다. 일부 태양들에 따르면, 제1 레벨 정보는 캡슐 디바이스로부터 또는 수신 디바이스로부터 수신된 이미지들의 세트 또는 스트림을 표현하는 이미지들의 선택된 서브세트로만 이루어진다. 스터디는 또한 제2 레벨 정보를 포함할 수 있다. 제2 레벨 정보는 사용자 입력 시에만(예컨대, 사용자의 요청에 따라) 디스플레이될 수 있고, 따라서 그의 디스플레이는 선택적일 수 있다. 제2 레벨 정보는 제1 레벨 정보에 추가 정보를 제공할 수 있다. 제2 레벨 정보, 또는 그의 적어도 일부분은 이미지들의 서브세트 중의 이미지들과 연관되거나 그에 대응한다.

시술 관련 정보의 그러한 선택 및 디스플레이는 사용자에 의한 검토 프로세스를 더 효율적으로 만들 수 있게 하고, 검토 시간을 감소시키고 더 좋은 진단으로 이어질 수 있다. 본 방법들 및 시스템들에 따르면, 사용자는 그의 기술 및 선호도들 및/또는 특정 환자, 시술 및/또는 스터디로부터 도출되는 요구에 적합한 방식으로 스터디를 검토할 수 있다. 그러한 방식으로, 개시된 시스템들 및 방법들은 시술 스터디의 개인맞춤형 검토를 허용할 수 있다. 예를 들어, 숙련된 사용자는 초보 사용자보다 진단을 하기 위해 더 적은 정보를 요구할 수 있다. 따라서, 초보 또는 덜 숙련된 사용자는 숙련된 사용자에 대해 요구되지 않는 추가 정보를 디스플레이하고 검토하는 것을 선택할 수 있다. 다른 예로서, 아픈 것으로 믿어지고/믿거나 알려져 있는 대상에 수행된 시술의 스터디의 검토는 건강한 것으로 믿어지고/믿어지거나 알려져 있는 대상에 수행된 시술의 스터디의 검토보다 더 많은 추가 정보의 디스플레이를 수반할 수 있다.

더욱이, CE 시술의 스터디의 프레임 내에서 사용자에게 전형적으로 디스플레이되거나 제공되지 않은 또는 사용자에게 지금까지 디스플레이되거나 제공되지 않았던 추가 정보가 전술된 시스템들 및 방법들의 실시예들에 따라 제공될 수 있다. 그러한 정보는 진단 및/또는 치료 결정들을 행함에 있어서 사용자를 돕고 지원할 수 있으며, 이는 더 빠르고 더 좋은 진단 및 치료로 이어질 수 있다. 추가 정보는, 특히 딥 러닝 기법들과 같은 최신 컴퓨터 보조 결정하기(computer-aided-decision making) 기술들을 채용함으로써 생성되었거나 달성되었던 정보를 포함한다.

일부 태양들에 따르면, 제2 레벨 정보를 디스플레이하기 위해, 사용자는 제1 레벨 디스플레이에서 하나의 이미지를 (예컨대, 그래픽 사용자 인터페이스(Graphical User Interface, GUI)에 사용자 입력을 제공함으로써) 선택할 수 있고, 이미지는 이미지들의 그룹에 대응하고, 따라서 그 그룹 내의 다른, 아직 디스플레이되지 않은 이미지들에 대응할 수 있다. 일부 태양들에 따르면, 그룹 내의 모든 이미지들은 동일한 자동으로 발견되는 관심 특징부를 포함하거나 이를 이미징할 수 있고, 따라서, 제1 레벨에서 디스플레이되는 단일 이미지(제1 레벨 이미지에 대응하는 이미지들) 이외의 그룹 내의 이미지들은 제1 레벨에서 그 그룹에 대해 디스플레이되는 이미지에서 보여지는 동일한 특징부를 보여줄 수 있다. 제1 레벨 이미지에 관한 사용자 입력을 수신할 시에, 시스템은 현재 디스플레이되는 이미지들의 서브세트 중 선택된 제1 레벨 이미지에 대응하는 하나 이상의 이미지들을 디스플레이할 수 있다. 이는 추가 정보의 제2 레벨 디스플레이를 야기할 수 있다. 예를 들어, 선택된 이미지들의 그룹이 정지 방식으로 디스플레이될 수 있거나, 이어서 사용자가 이미지들의 그룹을 스크롤하여, 그룹 내의 이미지들이 순차적으로 디스플레이되게 할 수 있거나, 또는 비디오 클립으로서 이미지들의 그룹을 디스플레이하는 것과 같은 다른 디스플레이 방법이 사용될 수 있다. 이미지들의 디스플레이 동안, 사용자는 디스플레이된 이미지와 관련되는 정보를 추가하거나 주석을 달 수 있다. 사용자가 이미지들을 검토하는 것을 완료한 후에, 시스템은 사용자에 의해 선택되는 디스플레이된 이미지들로부터의 이미지들을 포함하는 보고서를 안출하거나 생성할 수 있고, 다른 이미지들을 안출하거나 생성하지 않는다. 일부 실시예들에서, 보고서는 사용자에 의해 보여지는 이미지들, 및 가능하게는 사용자 입력 정보만을 포함할 수 있고, 생체 내 이미지들의 캡처된 스트림 중의 다른 이미지들을 포함하지 않을 수 있다. 전형적으로, 이미지들의 선택된 서브세트 및 서브세트 내의 이미지들에 대응하는 이미지들만이 보고서에서 사용자의 검토를 위한 디스플레이를 위해 이용가능하다.

일부 태양들에 따르면, 개시된 시스템들 및 방법들에 의해 중간 스터디가 디스플레이되고 선택적으로 생성될 수 있다. 중간 스터디는 캡슐 디바이스로부터 또는 캡슐 디바이스와 통신하는 수신 디바이스로부터 수신된 이미지들의 부분 스트림 또는 세트에 기초하여 생성될 수 있다. 이미지들의 부분 스트림은, 시술의 시작(예컨대, 대상이 캡슐을 삼킴)과 관련하여 소정 시점까지만 또는 GIT의 관심 부분 내의 소정 위치에 캡슐이 도달할 때까지 그리고 시술의 종료 이전에 캡처되었던 이미지들만을 포함할 수 있다. 이미지들의 부분 스트림이 수신되고, 중간 스터디의 생성이 수행되고, 전형적으로 시술 동안 중간 스터디의 검토가 의료 전문가에 의해 행해진다. 일부 태양들에 따르면, 캡슐 디바이스가 GIT의 관심 부분의 끝에 도달하기 전에 중간 스터디가 생성되고 디스플레이된다. 사용자의 검토에 대한 중간 스터디의 생성 및 디스플레이는 필요한 변화들 없이 개시된 방법들에 따라 그리고 개시된 시스템들에 의해 수행될 수 있다. 중간 스터디는 수신된 이미지들의 부분 스트림으로부터 선택된 이미지들의 서브세트를 포함할 수 있다. 중간 스터디는 전형적으로, 완료된 스터디(예컨대, 스터디)와 비교하여 더 적은 추가 정보를 포함할 수 있다. 예를 들어, 일부 실시예들에서, 중간 스터디는 제2 레벨 이미지들을 포함하지 않는다. 이어서, 사용자는 본 명세서에 개시된 시스템들 및 방법들을 사용함으로써 중간 스터디에 기초하여 중간 보고서를 생성할 수 있다. 중간 스터디는, 환자가 당일에 또는 CE 시술이 완료된 직후에 수행될 의료 시술을 거치게 하는 것을 포함하는, 필요한 의료 진단 및 치료를 제공하는 데 사용될 수 있다.

예를 들어, 제거되어야 하는 폴립이 중간 스터디를 검토하는 동안 의료 전문가에 의해 식별되는 경우, 환자는 당일 결장경검사(same day colonoscopy)를 받을 수 있다. 당일 결장경검사는, 환자가 다른 결장 준비를 하지 않아도 되는 것을 포함하는 이점들을 가질 수 있다. 일부 태양들에 따르면, 사용자는 중간 스터디가 생성되는 이미지들의 부분 스트림을 결정하는 GIT의 관심 부분 내의 소정 위치 또는 소정 시점과 같은 파라미터들을 결정할 수 있다. 일부 태양들에 따르면, 사용자는 그가 중간 스터디를 수신할 시간대(time of the day)를 선택할 수 있다.

마지막 이미지가 디스플레이될 수 있다. 마지막 이미지는 캡슐에 의해 캡처된 마지막 이미지 또는 캡슐에 의해 캡처된 마지막 위치에 위치되는 것으로 식별된 이미지일 수 있다(캡슐이 앞뒤로 갈 수 있음에 유의함). 이것은, 예를 들어 캡슐이 어디까지 이미지들을 캡처했는지 그리고 관심 부분들에 도달했는지를 의사에게 알리기 위해 디스플레이될 수 있다. 마지막 이미지는 이미지들의 서브세트의 일부일 수 있거나 또는 추가 정보의 일부일 수 있다.

일부 실시예들에 따르면, 생체 내에서 캡처된 이미지들이 수신될 수 있고, 복수의 이들 이미지들이 디스플레이를 위해 자동으로 (예컨대, 도 1에 도시된 프로세서에 의해) 선택될 수 있다. 일부 실시예들에서, 이들 선택된 이미지들의 서브세트는 자동으로 그리고/또는 사용자에 의해 식별될 수 있고, 이미지들의 식별된 서브세트로부터의 이미지들(예컨대, 서브세트 내의 이미지들 중 하나 이상의 이미지 또는 전부)만을 포함하는 케이스 보고서 또는 보고서가 생성될 수 있다.

디스플레이를 위해 선택된 이미지들은, 예를 들어, 특정 병리들, 이상들 또는 평범하지 않은 것들을 포함하는 것으로 의심되는 이미지들 및/또는 GIT의 소정 부분 또는 GIT의 소정 해부학적 영역을 표현하거나 나타내도록 선택되는 이미지들일 수 있다.

개시된 시스템들, 방법들 및 컴퓨터 프로그램 제품들은, 선택된 이미지들에 그리고/또는 생체 내에서 캡처된 이미지들의 전체 스트림에 그리고/또는 그의 일부분에 대한 액세스를 가질 수 있거나 이들을 수신할 수 있는 하나 이상의 소프트웨어 애플리케이션들을 통해 실현되거나 실행될 수 있다. 그러한 애플리케이션들은, 예를 들어, 선택된 이미지들을 사용자에게 디스플레이하고/하거나, (예컨대, GUI를 통해) 사용자와 상호작용하고/하거나, 사용자에 의한 디스플레이된 이미지들의 분석을 용이하게 하고/하거나, 디스플레이된 이미지들의 자동 분석을 제공하고/하거나 보고서를 생성할 수 있다. 본 발명의 일부 실시예들에 따르면, 그러한 애플리케이션들은 디스플레이될 이미지들의 선택을 수행할 수 있다. 본 발명에 따른 시스템들 및 컴퓨터 프로그램 제품들은 하나 이상의 비일시적 컴퓨터 판독가능 저장 매체들(이는 또한, 이미지들, 이미지들의 스트림 등과 같은 데이터를 저장할 수 있음)을 포함할 수 있다. 본 발명에 따른 시스템들은 하나 이상의 하드웨어 프로세서들, 하나 이상의 디스플레이들, 하나 이상의 I/O 디바이스들 및/또는 하나 이상의 통신 기술들을 이용하는 하나 이상의 통신 디바이스들을 포함할 수 있다. 하나 이상의 소프트웨어 애플리케이션들은, 하나 이상의 비일시적 컴퓨터 판독가능 저장 매체들에 저장되고 하나 이상의 하드웨어 프로세서들에 의해 실행가능한 프로그램 코드를 포함할 수 있다. 이미지들 및/또는 임의의 추가 데이터는 하나 이상의 디스플레이들을 통해 사용자에게 디스플레이될 수 있고, 사용자는 하나 이상의 I/O 디바이스들을 통해 하나 이상의 애플리케이션들과 상호작용할 수 있다. 이미지들의 스트림, 그의 일부분 또는 이미지들의 스트림의 선택된 서브세트는 하나 이상의 통신 디바이스들에 의해 (예컨대, 인터넷을 통해) 수신되거나 원격으로 액세스될 수 있다.

도 1은 본 발명의 실시예들과 함께 사용될 수 있는 예시적인 컴퓨팅 디바이스의 하이레벨 블록도를 보여준다. 컴퓨팅 디바이스(100)는, 예를 들어 하나 이상의 중앙 처리 유닛 프로세서(들)(CPU), 하나 이상의 그래픽 프로세싱 유닛(들)(GPU 또는 GPGPU), 칩 또는 임의의 적합한 컴퓨팅 또는 연산 디바이스일 수 있거나 이들을 포함할 수 있는 제어기 또는 프로세서(105), 운영 체제(115), 메모리(120), 저장소(130), 입력 디바이스들(135) 및 출력 디바이스들(140)을 포함할 수 있다. 경구형 내시경검사 캡슐에 의해 수집된 의료 이미지들을 수집하거나 수신하는 모듈들 또는 장비(예컨대, 환자에게 착용된 수신기) 또는 이들을 디스플레이하거나 디스플레이를 위해 선택하는 모듈들 또는 장비(예컨대, 워크스테이션)는 도 1에 포함된 것과 같은 컴퓨팅 디바이스일 수 있거나 이를 포함할 수 있거나, 또는 이에 의해 실행될 수 있다. 통신 요소(122)는, 예컨대 인터넷 또는 다른 네트워크를 통해, 무선통신장치 등을 통해 원격 디바이스 또는 외부 디바이스와의 통신들을 허용할 수 있다.

운영 체제(115)는, 예를 들어 프로그램들의 실행을 스케줄링하는 컴퓨팅 디바이스(100)의 동작을 조절하거나, 스케줄링하거나, 중재하거나, 통제하거나, 제어하거나 달리 관리하는 것을 수반하는 작업들을 수행하도록 설계되고/되거나 구성되는 임의의 코드 세그먼트일 수 있거나 이를 포함할 수 있다. 메모리(120)는, 예를 들어 RAM(Random Access Memory), ROM(read only memory), DRAM(Dynamic RAM), SD RAM(Synchronous DRAM), DDR(double data rate) 메모리 칩, 플래시 메모리, 휘발성 메모리, 비휘발성 메모리, 캐시 메모리, 버퍼, 단기 메모리 유닛, 장기 메모리 유닛, 또는 다른 적합한 메모리 유닛들 또는 저장 유닛들일 수 있거나 이들을 포함할 수 있다. 메모리(120)는 복수의, 가능하게는 상이한 메모리 유닛들일 수 있거나 이들을 포함할 수 있다. 메모리(120)는 예를 들어 방법을 수행하기 위한 명령어들(예컨대, 코드(125)), 및/또는 사용자 응답들, 중단(interruption)들 등과 같은 데이터를 저장할 수 있다.

실행가능 코드(125)는 임의의 실행가능 코드, 예컨대 애플리케이션, 프로그램, 프로세스, 작업 또는 스크립트일 수 있다. 실행가능 코드(125)는 가능하게는 운영 체제(115)의 제어 하에서 제어기(105)에 의해 실행될 수 있다. 예를 들어, 실행가능 코드(125)는, 실행될 때, 본 명세서에 기술된 바와 같은 의료 이미지들의 디스플레이 또는 디스플레이를 위한 선택을 야기할 수 있다. 일부 실시예들에서, 하나 초과의 컴퓨팅 디바이스(100) 또는 디바이스(100)의 컴포넌트들은 본 명세서에 기술된 다수의 기능들에 대해 사용될 수 있다. 본 명세서에 기술된 다양한 모듈들 및 기능들에 대해, 하나 이상의 컴퓨팅 디바이스들(100) 또는 컴퓨팅 디바이스(100)의 컴포넌트들이 사용될 수 있다. 컴퓨팅 디바이스(100)에 포함된 것들과 유사한 또는 상이한 컴포넌트들을 포함하는 디바이스들이 사용될 수 있고, 네트워크에 접속되어 시스템으로서 사용될 수 있다. 하나 이상의 프로세서(들)(105)는, 예를 들어 소프트웨어 또는 코드를 실행시킴으로써 본 발명의 실시예들을 수행하도록 구성될 수 있다. 저장소(130)는, 예를 들어 하드 디스크 드라이브, 플로피 디스크 드라이브, CD(Compact Disk) 드라이브, CD-R(CD-Recordable) 드라이브, USB(universal serial bus) 디바이스 또는 다른 적합한 제거가능형 및/또는 고정형 저장 유닛일 수 있거나 이들을 포함할 수 있다. 명령어들, 코드, 의료 이미지들, 이미지 스트림들 등과 같은 데이터는 저장소(130)에 저장될 수 있고, 저장소(130)로부터 메모리(120) 내로 로딩될 수 있으며, 여기서 그것은 제어기(105)에 의해 프로세싱될 수 있다. 일부 실시예들에서, 도 1에 도시된 컴포넌트들 중 일부는 생략될 수 있다.

입력 디바이스들(135)은, 예를 들어 마우스, 키보드, 터치 스크린 또는 패드 또는 임의의 적합한 입력 디바이스일 수 있거나 이들을 포함할 수 있다. 임의의 적합한 개수의 입력 디바이스들이 블록(135)에 의해 도시된 바와 같이 컴퓨팅 디바이스(100)에 동작가능하게 접속될 수 있다는 것이 인식될 것이다. 출력 디바이스들(140)은 하나 이상의 모니터들, 스크린들, 디스플레이들, 스피커들 및/또는 임의의 다른 적합한 출력 디바이스들을 포함할 수 있다. 임의의 적합한 개수의 출력 디바이스들이 블록(140)에 의해 도시된 바와 같이 컴퓨팅 디바이스(100)에 동작가능하게 접속될 수 있다는 것이 인식될 것이다. 임의의 적용가능한 입력/출력(I/O) 디바이스들이 컴퓨팅 디바이스(100)에 접속될 수 있는데, 예를 들어 유선 또는 무선 네트워크 인터페이스 카드(network interface card, NIC), 모뎀, 프린터 또는 팩시밀리기, USB 디바이스 또는 외부 하드 드라이브가 입력 디바이스들(135) 및/또는 출력 디바이스들(140)에 포함될 수 있다.

본 발명의 실시예들은, 명령어들, 예컨대 프로세서 또는 제어기에 의해 실행될 때 본 명세서에 개시된 방법들을 수행하는 컴퓨터 실행가능 명령어들을 인코딩하거나, 포함하거나 또는 저장하는 예를 들어, 메모리, 디스크 드라이브, 또는 USB 플래시 메모리와 같은, 컴퓨터 또는 프로세서 비일시적 판독가능 매체, 또는 컴퓨터 또는 프로세서 비일시적 저장 매체와 같은 하나 이상의 물품(들)(예컨대, 메모리(120) 또는 저장소(130))을 포함할 수 있다.

도 1에서와 같은 프로세서들 등을 포함하는 다수의 컴퓨터 시스템들이 사용될 수 있다: 예컨대, 캡슐, 수신기, 클라우드 기반 시스템, 및/또는 이미지들을 디스플레이하기 위한 워크스테이션 또는 휴대용 컴퓨팅 디바이스가 도 1의 컴포넌트들을 포함할 수 있다. 도 1에서와 같은 컴포넌트들을 포함하는 클라우드 플랫폼(예컨대, 원격 서버)은 이미지들 및 메타데이터와 같은 시술 데이터를 수신하고, 프로세싱하고 스터디를 생성할 수 있으며, 또한 의사의 검토를 위해 (예컨대, 워크스테이션 또는 휴대용 컴퓨터 상에서 실행되는 웹 브라우저 상에) 그것을 디스플레이할 수 있다. "온 프레미스(on premise)" 옵션은 이미지들을 저장하고, 프로세싱하고, 디스플레이하기 위해 의료 설비의 로컬 서버 또는 워크스테이션을 사용할 수 있다.

본 발명의 일부 실시예에 따르면, 사용자, 예컨대 의사는, 관심이 있을 수 있는 이미지들로서 예컨대 자동으로, 선택되었던 정지 이미지들(예컨대, 경구형 캡슐에 의해 캡처됨)의 디스플레이를 검토함으로써 그의 또는 그녀의 케이스에 대한 이해를 구축할 수 있다. 케이스는, 예를 들어 환자의 위장관(GIT) 또는 그의 일부(예컨대, 소장 및/또는 결장)를 통한 캡슐 내시경의 통과 동안 캡처된 이미지들일 수 있다. 정지 이미지들은 하나 이상의 스크린들에 디스플레이될 수 있고, 다양한 레이아웃들로(예컨대, 매트릭스로, 행(row)으로, 열(column)로, 그리고/또는 GIT 또는 그의 일부분들의 예시로 또는 그 위에) 배열될 수 있다. 일부 실시예들에 따르면, 정지 이미지들의 디스플레이는 디폴트 스터디 디스플레이 또는 스터디 모드 또는 뷰일 수 있다. 일부 실시예들에 따르면, 이미지들은 (이미지들의 스트림 또는 비디오와는 대조적으로) 정지 방식으로만 디스플레이된다. 사용자는, 예를 들어 하나 이상의 이미지들 사이에서(예컨대, 이미지들의 그룹들 사이에서) 스크롤함으로써 정지 이미지들(예컨대, 정지 방식으로 디스플레이되는 이미지들) 사이에서 브라우징할 수 있다. 일부 실시예들에서, 정지 이미지들은 GIT의 세장형 구조(elongated structure)를 시뮬레이팅하기 위해 수평으로 디스플레이될 수 있다. 그러한 디스플레이는 의사를 위한 검토 작업을 용이하게 할 수 있다. 동시에 디스플레이되는 정지 이미지들의 개수는 사용자에 의해 미리결정되거나 미리선택될 수 있다. 일부 실시예들에서, 동시에 디스플레이되는 이미지들의 개수는 사용자에 의해 변경될 수 있다. 일부 실시예들에서, 동시에 디스플레이되는 이미지들의 개수는 3개 내지 7개의 이미지들일 수 있다.

본 발명의 일부 실시예들에 따르면, 캡처된 이미지들로부터의 상대적으로 적은 수의 이미지들이 케이스당 사용자의 검토를 위해 디스플레이된다. "상대적으로 적은 개수"는, 전형적으로 케이스당 수천 개의 이미지들(예컨대, 대략 6,000개의 이미지들)을 포함하는 이미지들의 비디오 스트림을 디스플레이하는 현재 방법들과는 대조적으로, 최대 또는 최소 평균적으로 수백 개 정도를 의미한다. 일부 실시예들에서, 최대 수백 개의 이미지들만이 사용자의 검토를 위해 디스플레이된다. 일부 실시예들에서, 사용자의 검토를 위해 디스플레이되는 이미지들의 개수는 최대 1,000개 정도(즉, 케이스당 2,000개 미만의 이미지들)이다.

정지 이미지들(예컨대, 정지 방식으로 디스플레이되는 이미지들)을 통해 브라우징하는 것은, 이미지들의 비디오 스트림(예컨대, 영화)을 지켜보거나 검토하는 것과는 대조적으로, 각각의 이미지 및/또는 이미지들의 각각의 그룹(또는 어레이)의 디스플레이의 방식 및 시간을 사용자가 더 제어하게 할 수 있다. 수천 개의 이미지들의 비디오 스트림을 지켜보거나 검토하는 것과는 대조적으로, 상대적으로 소량의 정지 이미지들을 통해 브라우징하는 것은 사용자에 대한 검토 프로세스를 상당히 용이하게 할 수 있고, 케이스당 판독 시간을 감소시킬 수 있고, 더 좋은 진단으로 이어질 수 있다.

케이스 또는 스터디마다 디스플레이 및 검토를 위한 단지 상대적으로 적은 수의 이미지들의 선택은, 특히, 케이스마다 (예컨대, 관심이 없는 이미지들을 식별하는 높은 확률을 제공함으로써) 높은 특별함과 함께 (예컨대, 관심 이미지들을 식별하는 높은 확률을 제공함으로써) 높은 감도를 제공하는 선택 또는 결정하기 방법들을 이용함으로써 인에이블될 수 있다. 일부 실시예들에 따르면, 이미지 선택은 딥 러닝 방법들과 같은 최신 방법들을 이용함으로써 수행될 수 있다.

본 발명에 따른 일부 실시예들에서, (예컨대, 선택된 이미지들을 제외한) 캡슐 내시경검사 시술을 적용받는 추가 정보가 디스플레이될 수 있다. 추가 정보는 디폴트로서 (예컨대, 디폴트 스크린 내에) 디스플레이될 수 있거나, 선택적일 수 있고 사용자의 요청에 따라 또는 사용자의 동작 또는 입력에 따라 디스플레이될 수 있다.

일부 실시예들에서, 추가 정보는 현재 디스플레이되는 이미지 또는 현재 디스플레이되는 이미지들의 그룹을 지칭할 수 있다. 예를 들어, 사용자는 나타내어진 이미지/이미지들을 지칭하는 추가 정보를 수신하도록 현재 디스플레이되는 정지 이미지 또는 복수의 정지 이미지들을 나타낼 수 있다. 추가 정보는, 예를 들어, 나타내어진 이미지/이미지들을 둘러싸는 또는 그에 인접한 하나 이상의 이미지들, 나타내어진 이미지/이미지들 내의 관심 영역의 표시 및/또는 병리/병리들의 유형 및/또는 크기 및/또는 나타내어진 이미지/이미지들이 포함할 것으로 (예컨대, 어느 정도 수준의 확실성으로) 의심되거나 식별되는 임의의 다른 관심 구조 또는 특징부 중 하나 이상을 포함할 수 있다.

일부 실시예들에서, 케이스(예컨대, 환자를 통과하는 캡슐의 한 과정 또는 시술 동안 환자로부터 취해진 이미지들의 세트)의 디스플레이는 2개의 레벨들 또는 카테고리들의 정보를 포함할 수 있는데, 이는 사용자 입력 및 설정들에 따라 별개로 또는 함께 디스플레이될 수 있다: 제1 레벨(예컨대, "레벨 1")은 선택된 정지 이미지들이 사용자의 검토를 위해 디폴트로 디스플레이되는 디폴트 디스플레이(예컨대, 스터디 디폴트 뷰의 메인 뷰)를 포함하고, 제2 선택적 레벨(예컨대, "레벨 2")은 추가 정보의 디스플레이를 포함하고 사용자의 요청에 따라 또는 사용자의 동작 다음에 디스플레이될 수 있다.

(예컨대, 디폴트 스터디 뷰의) 디폴트 또는 제1 또는 메인 스크린 또는 디스플레이는, 관심 이미지들로서 자동으로 선택되었을 수 있는 케이스의 "제1 레벨" 이미지들, 예를 들어 (어느 정도 수준의 확실성을 갖는) 병리를 보여주는 이미지들을 포함할 수 있다. 일부 실시예들에서, 다수의 이미지들이 특정 병리(예컨대, 궤양)를 캡처하는 것으로 식별되면, 이들 이미지들 중 하나의 이미지만이 디폴트 또는 메인 스크린에 제시되도록 선택될 수 있다(예컨대, 제1 레벨 이미지들). 다른 특징부들 또는 구조들이 병리와 별개로 관심 구조(예를 들어, 소정 해부학적 구조 또는 이물질(foreign body), 이형물(anomaly), 이들의 조합 등)로서 식별될 수 있다. 사용자는 제1 레벨로부터 이미지를 선택하고, 그것을 제1 레벨 선택된 이미지와 관련된 제2 레벨의 이미지들을 지켜보도록 "활성화"시킬 수 있다. 예를 들어, 사용자가 제1 레벨 디스플레이로부터 궤양의 이미지를 선택하면(예컨대, 클릭하거나 호버링하거나 달리 나타냄), 제2 레벨에서, 예를 들어 사용자는 이러한 궤양의 다른 이미지들(선택된 이미지에 선행할 수 있고/있거나 선택된 이미지를 뒤따를 수 있음) 사이에서 스크롤할 수 있다.

일부 실시예들에서, (예컨대, 제어부를 통한) 디스플레이에 대한 옵션 또는 초점이 맞는(in-focus) 제1 레벨 이미지(예컨대, 사용자에 의해 선택된 이미지)에 대한 제2 레벨 또는 카테고리 정보의 디스플레이는 별개의 윈도우 또는 스크린(예컨대, 팝업 창)을 통해 수행될 수 있다. 전형적으로, 그러한 별개의 윈도우 또는 스크린은, 사용자의 요청 또는 동작 시에, 예컨대 디스플레이 또는 카테고리의 추가 레벨에 관한 사용자 입력의 수신 시에 나타날 것이다. 일부 실시예들에서, 초점이 맞는 제1 레벨 이미지는 별개의 뷰, 예컨대 별개의 윈도우 또는 스크린에서 그의 연관된 제2 레벨 이미지들과 함께 디스플레이된다. 별개의 윈도우 또는 스크린은 초점이 맞는 이미지 및 그의 연관된 제2 레벨 정보의 디스플레이를 위해 더 많은 스크린 영역을 제공할 수 있다.

일부 실시예들에서, 제2 레벨의 정보 및/또는 제2 레벨 정보를 디스플레이하기 위한 제어부들이 동일한 초기 또는 디폴트 스크린에 제시될 수 있다: 예컨대, GUI 아이템은 사용자 입력이 제2 레벨의 디스플레이를 요청하게 하거나, 그것이 디스플레이된 후에 그 제2 레벨을 제어하게 하는데, 여기서 제2 레벨 디스플레이는, 예컨대 동일한 스크린 또는 디스플레이 영역에 또는 전용 스크린 또는 디스플레이 영역에 제1 레벨의 디스플레이와 함께 나타날 수 있다. 그러한 실시예들에서, 제2 레벨의 정보를 제시하기 위해 어떠한 별개의 윈도우들 또는 스크린들도 요구되거나 디스플레이되지 않는다. 제1 레벨 또는 디폴트 정보를 갖는 동일한 스크린 또는 윈도우에 제2 레벨의 정보를 제공함으로써, 그것은 사용자가 상황에 머무를 수 있게 하고, 따라서 검토 프로세스를 용이하게 하고 더 좋게 할 수 있다.

일부 실시예들에서, 제2 레벨의 정보는 추가 이미지들을 포함할 수 있다. 추가 이미지들은 또한, 수신된 일련의 또는 세트의 캡처된 이미지들로부터 선택될 수 있다. 일부 실시예들에서, 제2 레벨의 정보는, 제1 레벨 상에 디스플레이되고 사용자에 의해 나타내어진 하나 이상의 정지 이미지들을 둘러싸는 복수의 이미지들을 포함할 수 있다. 둘러싸는 이미지들은 나타내어진 이미지(들)의 캡처 시간과 관련되는 그들의 캡처 시간에 따라 그리고/또는 나타내어진 이미지(들)의 위치와 관련하여 이미징된 GIT 부분을 따른 그들의 위치에 따라 선택될 수 있다. 일부 실시예들에서, 제1 레벨로 나타내어진 이미지(들)에 가장 인접한 미리결정된 개수의 이미지들이 제2 레벨에 디스플레이될 수 있다. 일부 실시예들에서, 제2 레벨 디스플레이는 나타내어진 제1 레벨 이미지(들), 및 나타내어진 제1 레벨 이미지(들)를 둘러싸거나 이들의 캡처 시간 주위에서 캡처된 이미지들의 디스플레이를 포함할 수 있다. 일부 실시예들에서, 제2 레벨 디스플레이는, 예컨대 제1 레벨에서의 2개의 이미지들이 이미징된 GIT 부분에 인접하게 위치되는 것으로 추정되는 경우에 제1 레벨의 2개 이상의 이미지들에 대해 조합될 수 있다. 일부 실시예들에서, 추가 이미지들 및 나타내어진 이미지들은 제2 레벨에서 정지 이미지들로서 그리고/또는 움직이는 이미지들로서(예컨대, 비디오 클립, 움직이는 이미지 시퀀스, 또는 영화로서) 디스플레이될 수 있다.

본 발명에 따른 일부 실시예들에서, 정지 이미지들은, 예컨대 GI 관 내의 이미지의 캡처 부위의 위치를 제공하는 위치 정보와 함께, 국부화된 방식으로 디스플레이될 수 있다. 일부 실시예들에서, 디스플레이를 위해 선택된 이미지들 모두는 국부화된 방식으로 디스플레이될 수 있다. 일부 실시예들에서, 이미지들의 국부화는 (예컨대, 제2 레벨의 정보의 일부로서) 단지 사용자의 요청마다 제공될 수 있다. 전형적으로, 사용자 요청, 또는 사용자 선택, 또는 사용자 모드 변화, 또는 다른 입력이 컴퓨팅 디바이스에서 (예컨대, 도 1에 도시된 바와 같이, 입력 디바이스를 통해) 입력으로서 수신된다. 일부 실시예들에서, 관심 이미지들로서 사용자에 의해 선택되는 이미지들, 예컨대 결장 시술에서 폴립들을 묘사하는 것으로서 의사에 의해 식별되는 이미지들만이 국부화된 방식으로 디스플레이된다. 발견부(finding) 또는 병리의 국부화는, 예를 들어 치료 결정 또는 제공된 치료에 영향을 줄 수 있는 중요한 정보를 제공할 수 있다. 따라서, 예를 들어, 식별된 폴립의 위치는 폴립을 제거하기 위해 S상 결장검사(sigmoidoscopy)가 수행되어야 하는지 또는 결장경검사가 수행되어야 하는지를 결정할 수 있고, 그렇게 하는 동안 의사를 안내할 수 있다.

이미징된 GIT 부분은 세그먼트들로 분할될 수 있다. 예를 들어, 소장은, 예를 들어 전체적으로 본 명세서에 참고로 포함되어 있는 미국 특허 공개 제2019/0244351호에 개시된 방법들 또는 다른 알려진 방법들에 따라, 길이가 동일한 3개의 세그먼트들로 분할될 수 있다. 결장은, 예를 들어 5개의 해부학적 세그먼트들, 즉 맹장, 상행 또는 우측 결장, 횡행 결장, 하행 또는 좌측 결장 또는 좌측 S상 결장(left colon-sigmoid) 및 직장으로 분할될 수 있거나, 비장 굴곡(splenic flexure)에 의해 분리된 2개의 해부학적 세그먼트들로 분할될 수 있는데, 이는 예를 들어, 전체적으로 본 명세서에 참고로 통합되어 있는 http://www.cs.technion.ac.il/~cs234313/projects sites/S18/12/site/에 개시된 방법들에 기초한다. 이미지들(예컨대, 제1 레벨 이미지들, 제2 레벨 이미지들 또는 둘 모두)의 디스플레이는, 각각의 이미지가 어느 세그먼트에 위치되는지의 표시를 포함할 수 있다. 일부 실시예들에서, 세그먼트 내의 각각의 이미지의 위치가 나타내어질 수 있다. 일부 실시예들에서, 식별된 관심 영역(예컨대, 이미지 내의 식별된 관심 특징부) 또는 그의 위치(예컨대, 이미지 내의 위치)가 이미지에 나타내어질 수 있다. 예를 들어, 윤곽이 식별된 영역을 제한할 수 있거나, 화살표가 이미지 내의 식별된 영역의 위치를 나타낼 수 있다. 이미징된 GIT 부분을 따르는 이미지들의 위치는 알려진 위치 추정 방법들에 의해 결정될 수 있다. 예를 들어, 이미징된 GIT 부분을 따르는 이미지들의 위치는 대상의 GIT를 통한 캡슐 디바이스 진행의 컴퓨터화된 평가에 기초하여 결정될 수 있다. 그러한 컴퓨터화된 평가는, 예를 들어, 본 출원의 공동 양수인에게 양도되어 있는, 발명의 명칭이 "System and method for detecting motion patterns of in vivo imaging devices"인 Krupnik 등의 미국 특허 제8,792,691호에 개시된 방법들 및 시스템들, 또는 다른 알려진 방법들에 기초할 수 있다.

대체적으로, 해부학적 세그먼트들로의 GIT의 분할은, 예를 들어 상이한 해부학적 세그먼트들 사이의 캡슐 내시경 통로의 식별에 기초하여 수행될 수 있다. 그러한 식별은, 예를 들어 기계 학습 기법들에 기초하여 수행될 수 있다.

일부 실시예들에서, 적어도 전체 이미징된 GIT 부분 또는 그의 일 섹션을 표현하는 맵이 디스플레이될 수 있다. 맵은 선택된 이미지들의(예컨대, 제1 레벨 이미지들 및/또는 제2 레벨 이미지들의) 표시들을 포함할 수 있다. 따라서, 맵은, 의심되는 영역들 또는 관심 대상일 수 있는 영역들, 그들의 정도(예컨대, GIT의 길이를 따른 그들의 발생) 및/또는 그들의 분포와 관련하여, 이미징된 GIT 부분 또는 그의 일 섹션의 개요를 사용자에게 제공할 수 있다. 그 정도는 시스템에 의해 자동으로 추정되거나 생성될 수 있고, 사용자에게 시각적으로(예컨대, 맵 상의 길이의 표시) 또는 수치적으로(예컨대, 백분율에 의한 것과 같은 정도의 치수) 제시될 수 있다. 맵은 선택된 이미지들 사이에서 내비게이팅하기 위해 사용자에 의해 사용될 수 있다. 일부 실시예들에서, 맵은 바의 형태일 수 있거나 또는 GIT의 형태와 유사한 형태일 수 있다. 일부 실시예들에서, 선택된 이미지들의 표시는 히트 맵(heat map), GIT의 전부 또는 일부분의 추상적 표현, 예컨대 선택된 이미지들을, GIT를 따른 그들의 위치에 따라 디스플레이하는 바의 형태일 수 있다. "히트"는 맵 상의 정보를 전달하는 데 사용되는 컬러들, 예컨대 바를 따른 소정 이미지들을 나타내는 선(line)들에 할당된 컬러들을 지칭할 수 있다. 상이한 컬러들은, 예를 들어 제1 또는 제2 레벨의 이미지들과 같은 상이한 유형의 이미지들을 표현할 수 있다. 그러한 히트 맵 또는 바는 Gl 부분의 세그먼트화(예컨대, 상이한 컬러로 착색됨)를 나타내는 선들 등을 포함할 수 있다. 맵의 착색된 섹션들은 이들 섹션들에 관한 소정 정보를 제공할 수 있다. 시스템 또는 GUI는 맵 내의 이미지 표시 또는 포지션의 사용자의 선택을 수신할 수 있고, 이에 응답하여, 사용자 선택된 이미지 또는 포지션 표시에 의해 표현되는 이미지 또는 맵으로 나타내어진 이미지를 지칭하는 추가 정보를 디스플레이할 수 있다.

맵 내의 선택된 이미지들의 표시는 이미징된 GIT 부분을 따른 그들의 추정된 위치에 따를 수 있다. 일부 실시예들에서, 이미징된 GIT 부분의 세그먼트들은 맵에 나타내어질 수 있다. 일부 실시예들에서, 현재 디스플레이된 세그먼트(즉, 현재 디스플레이되는 이미지들이 위치되는 세그먼트)는 (예컨대, 세그먼트를 착색하거나 강조함으로써) 맵에 나타내어질 수 있다. 선택된 이미지들은 그들의 연대순에 기초하여 맵에 나타내어질 수 있다. 일부 실시예들에서, 초점이 맞는 이미지가 맵에 나타내어질 수 있다. 사용자는 디스플레이될 이미지 또는 맵으로부터 초점이 맞춰질 이미지를 선택할 수 있다.

일부 실시예들에서, 맵은, 맵에 의해 표현되는 GIT 부분을 따라 식별된 관심 특징부들 또는 구조들의 유형의 표시들을 포함할 수 있다. 표시들은, 예를 들어 특징부의 유형(예컨대, 출혈, 궤양 또는 폴립)을 표현하는 아이콘들일 수 있다.

일부 실시예들에서, 맵 및/또는 그래픽 표현은 선택된 이미지들 위에 그리고/또는 스크린의 상부 섹션 상에 디스플레이될 수 있다. 그러한 상부 디스플레이는 맵을 통해 선택된 이미지들을 내비게이팅하는 것을 용이하게 할 수 있다(예컨대, 사용자는 맵을 보기 위해 그의 시선을 이동시키도록, 예컨대 그의 시선을 낮추도록 요구되지 않을 것임).

본 발명의 실시예들에 의해 제공되거나 디스플레이될 수 있는 세정 또는 청정 레벨은, 전형적으로 캡슐 내시경검사와 같은 시험 시술들 이전의 "준비" 후에, 내용물, 배설물 및 식품 잔류물과 관련되는 장의 세척 레벨을 설명할 수 있는데, 준비 시술들은 그러한 시각적 이물질들로부터 GI 관을 세척하도록 의도된다. 결장 세정 레벨에 대한 알려진 표준은 4개의 레벨들을 포함한다(다른 개수의 레벨들 또는 표준들이 사용될 수 있음). 소장의 세정을 평가하기 위한 여러 방법들이 또한 존재하며; 일 실시예에서, 결장에 대한 세정 표준이 소장의 세정 레벨을 설명하는 데 사용될 수 있다.

일부 실시예들에서, 추가 정보는 GIT의 이미징된 부분의 세정 레벨의 표시를 제공하는 이미지들의 세정 레벨의 표시 또는 그래픽 표현을 포함할 수 있다. 세정 레벨은, 이미지들의 캡처된 시퀀스의 각각의 이미지에 대해 또는 선택된 이미지들의 각각의 이미지에 대해서만 그리고/또는 이미징된 GIT 부분의 각각의 세그먼트에 대해 그리고/또는 전체 이미징된 GIT 부분에 대해 (예컨대, 도 1에서와 같은 시스템에 의해 자동으로) 추정되거나 결정될 수 있다. 대체적으로, 이미징된 GIT 부분은 내용물과 같은 물질(예컨대, 이미징을 불명료하게 할 수 있는 GIT에서 자연적으로 발생하는 물질) 및/또는 GIT의 조직을 희미하게 할 수 있는 버블들을 포함할 수 있다. 이어서, 이미지들은 그러한 방해 요소들을 검출하기 위해 분석될 수 있다. 이미지에서 검출된 세정 레벨을 나타내는 점수가 각각의 이미지에 할당될 수 있다. 일부 실시예들에서, 세정 레벨은 그래프 또는 바, 예컨대 컬러 바의 형태로 제시될 수 있다. 일부 실시예들에서, 세정 레벨 그래픽 표현은 맵 아래에 또는 맵 위에 그리고 대응하는 방식으로 디스플레이될 수 있다. 일부 실시예들에서, 낮은 세정 레벨, 중간 세정 레벨 및 높은 세정 레벨과 같은 일부 카테고리들이 결정될 수 있고, 이미지들의 세정 레벨이 이들 카테고리들에 따라 결정될 수 있다.

일부 실시예들에서, 점수는 GIT의 이미징된 섹션의 점막 커버리지(예컨대, 결장)를 반영할 수 있는 각각의 이미지 또는 각각의 선택된 이미지 및/또는 세그먼트 및/또는 시술에 대해 자동으로 (예컨대, 도 1에 도시된 바와 같은 시스템에 의해) 결정되고 할당될 수 있다. 이러한 물질에 대한 시술은 특정 시간 사례에서 특정 환자에 의해 일단 삼켜졌던 특정 캡슐에 의해 캡처된 이미지들의 세트일 수 있다. 예를 들어, 그러한 점수는 GIT 섹션의 조직(점막)이 얼마나 많이 (예컨대, 백분율로) 이미지들에 의해 캡처되었는지를 반영할 수 있다. 그러한 점수는, 예를 들어 추정된 또는 결정된 세정 레벨, 내용물, 버블들, 캡슐 수송 시간, 캡슐 속도 및/또는 캡슐 동역학(capsule dynamics)에 기초할 수 있다. 점수는 시술의 적절성과 관련되는 정보를 의사 또는 뷰어에게 제공할 수 있다. 이러한 점수는 세정 레벨에 더하여 또는 그 대신에 제공될 수 있고, 세정 레벨의 디스플레이와 관련하여 전술된 바와 유사한 방식으로 디스플레이될 수 있다. 점수는, 선택된 이미지들의 검토 전에, 이미지들의 검토 동안 및/또는 이미지들의 검토 후에, 디폴트로 또는 요청 시에 사용자에게 제공될 수 있다.

일부 실시예들에서, 추가 정보는 이미징된 GIT 부분의 해부학적 세그먼트들 또는 해부학적 섹션들 사이의 통로를 포함하는 것으로 식별되는 캡처된 일련의 이미지들 내의 이미지들의 시퀀스를 포함할 수 있다. 그러한 통로는, 예를 들어, 위로부터 소장으로의 통로, 소장으로부터 결장으로의 통로 또는 결장으로부터 환자의 신체 외부로의 통로일 수 있다. 일부 실시예들에서, 추가 정보는 이미지들의 그러한 시퀀스의 표현(예컨대, 이미지들의 요약)만을 포함할 수 있다. 일부 실시예들에서, 이미지들의 이러한 통과 시퀀스의 표현은 컬러 바를 포함할 수 있다. 그러한 통로 표현은 사용자가 이미징된 GIT 부분의 상이한 해부학적 섹션들 사이의 통로를 더욱 면밀히 검토하게 할 수 있다. 일부 실시예들에서, 이미지들의 통과 시퀀스 또는 그러한 것의 표현은 사용자의 요청 시에 또는 사용자의 동작, 예컨대 그러한 통로의 표시 위를 호버링한 다음에, 예컨대 이미징된 GIT 부분을 표현하는 맵에 디스플레이될 수 있다. 일부 실시예들에서, 그러한 해부학적 통로는 이미지들의 선택된 서브세트 또는 제1 레벨에서 식별되고 표현될 관심 특징부일 수 있다. 예를 들어, 단일 이미지가 이미지들의 서브세트(예컨대, 제1 레벨 이미지들)에서의 통로를 표현하도록 선택될 수 있고, 이미지들의 서브세트(예컨대, 제2 레벨 이미지들) 중 선택된 이미지와 연관된 하나 이상의 이미지들이 통로를 표현하도록 선택된 추가 이미지들일 수 있다.

일부 실시예들에서, 이미지에서 자동으로 식별되고/되거나 폴립들과 같이 이미지에서 사용자에 의해 나타내어지는 특징부들, 병리들 또는 임의의 다른 발견부의 자동 크기 추정이 제공될 수 있다. 자동 크기 추정은 추가적인 정보, 예컨대 제2 레벨 정보로서, 그리고/또는 디폴트가 아닌 사용자의 요청 시에 제공될 수 있다. 일부 실시예들에서, 관심 영역의 표시 및 그의 크기 추정은 디폴트로 제공될 수 있다. 일부 실시예들에 따르면, 자동 크기 추정은, 예를 들어 사용자 입력에 기초하여 크기 추정을 제공하는 알려진 크기 추정 방법들에 기초할 수 있다. 사용자 입력은, 이미지에 도시된 바와 같이 측정될 특징부의 적어도 하나의 치수, 예컨대, 예를 들어 사용자에 의해 나타내어진 2개 이상의 이미지 픽셀들에 의해 표현되는 길이 또는 직경을 나타낼 수 있다. 그러한 방법들은 전체적으로 본 명세서에 참고로 통합되어 있는 미국 특허들 제9,412,054호 및 제9,911,203호에서 발견될 수 있고; 다른 알려진 방법들이 사용될 수 있다. 완전한 자동 크기 추정을 생성하기 위해, 이어서 사용자 입력의 자동 추정이 생성될 수 있다. 예를 들어, 이미지에서 식별된 관심 특징부를 세그먼트화하고 서로 가장 멀리 있는 세그먼트화된 특징부의 2개의 에지 지점들 또는 2개의 주변 지점들을 선택함으로써. 일부 실시예들에서, 사용자는 자동으로 선택된 2개의 지점들을 보정하거나 대체할 수 있고, 사용자에 의해 제공되는 입력에 기초하여 크기 추정을 수신할 수 있다.

일부 실시예들에서, 자동 중간 보고서는 캡슐 내시경검사 시술 동안에 생성될 수 있다. 그러한 자동 중간 보고서는, 예를 들어, 소정 시간에 이르기까지 캡처된 이미지들에 기초하고/하거나 GIT의 이미징된 부분의 소정의 식별된 해부학적 영역의 이미지들에 기초하고/하거나 특정 발견부, 예컨대 주요 출혈(major bleeding) 또는 제거될 필요가 있는 폴립과 같은 의미있는 발견부의 이미지들에 기초할 수 있다. 중간 보고서는, 예를 들어, 캡슐 내시경검사 디바이스가 환자에 의해 삼켜진 이후로 또는 캡슐 내시경검사 디바이스가 해부학적 랜드마크(예컨대, 소장의 시작점 또는 결장의 시작점)에 도달했다는 것이 식별된 이후로, 미리결정된 기간이 경과한 후에 생성될 수 있다. 다른 예로서, 중간 보고서는 일단 캡슐 내시경검사 디바이스가 소정의 해부학적 랜드마크에 도달하였다고 식별되었다면 또는 일단 출혈 또는 폴립과 같은 소정의 병리 또는 이벤트가 식별되었다면 생성될 수 있다. 이어서, 중간 보고서가 담당 의사에게 제공될 수 있다.

자동 중간 보고서는 수신된 이미지들의 스트림 및/또는 특정 발견부의 세트를 나타내도록 선택된 이미지들을 포함할 수 있다. 일부 실시예에서, 자동 중간 보고서는 또한 본 명세서에 개시된 바와 같은 추가 정보를 포함할 수 있다. 일부 실시예들에서, 자동 중간 보고서는 특정 발견부에 대한 표시 및 진단에 대한 제안 및/또는 치료 또는 치료 행동 방침에 대한 제안 또는 추천을 포함할 수 있다.

일부 실시예들에서, (수술 또는 최소 침습적 시술과 같은) 의료 개입을 필요로 할 수 있는 식별된 병리 또는 임의의 다른 발견부를 실시간으로 나타내는, 상이한 실시예들에 따라 의료 전문가가 검토하기 위한 자동 중간 보고서의 또는 중간 스터디의 생성은, 지연 없이, 예컨대 즉시 또는 캡슐 내시경검사 시술이 종료되자마자 또는 그 직후에 그러한 시술의 수행을 허용할 수 있다. 일부 경우들에서, 예컨대 주요 출혈의 경우에, 즉각적인 의료 개입이 필요할 수 있다. 그러나, 필요한 의료 시술이 긴급하지 않은 경우에도(예컨대, 제거될 필요가 있는 폴립이 식별되는 경우에), 중간 보고서는, 예컨대 당일에 결장경검사를 수행함으로써, 필요한 의료 시술을 위한 캡슐 내시경검사 시술을 위해 환자에 의해 수행되는 금식 및/또는 장 준비를 이용하는 것을 허용할 수 있다. 예를 들어, 두 번의 준비를 거칠 필요가 없을 당일 결장경검사는 환자에게 더 편리하고 덜 어려울 수 있다.

실시간으로 그리고 활성 시술 동안의 중간 스터디 또는 자동 중간 보고서의 생성은, 예를 들어 분산형 컴퓨팅, 비집중형 컴퓨팅 및/또는 클라우드 컴퓨팅과 같은 기술들을 이용함으로써 용이해질 수 있다. 일부 실시예들에서, 자동 중간 보고서 또는 중간 스터디는, 본 명세서에 기술된 바와 같이, 추정된 또는 결정된 세정 레벨을 또는 이러한 스테이지까지의 시술의 적절성을 참조하는 점수를 포함할 수 있다. 그러한 정보는 다음의 의료 시술(예컨대, 당일 결장경검사)을 수행하기로 결정되었던 경우에 준비 및/또는 식단과 관련하여 환자에게 제공되는 지시들을 제공하고/하거나 이를 변경하기 위해 의사에 의해 사용될 수 있다.

실시예들은, 필요한 부분만 약간 수정하여, 정지 이미지들 및/또는 움직이는 이미지들(예컨대, 비디오)의 디스플레이에 적용할 수 있다. 일부 실시예들에서, 본 명세서에 개시된 시스템들 및 방법들에 따른 스터디에 포함된 추가 정보는 진단에 대한 제안 및/또는 치료 또는 치료 행동 방침에 대한 제안 또는 추천을 포함할 수 있다. 그러한 제안들은 본 명세서에 개시된 시스템들 및 방법들에 의해 그리고 그에 따라 수행되는 프로세싱 및 분석에 기초할 수 있고, 관련 케어 표준에 기초할 수 있다.

일 실시예에서, 사용자의 검토를 위해 디스플레이될 관심 이미지들의 선택은 2개의 스테이지들로 수행된다. 제1 스테이지에서, 캡처된 일련의 이미지들로부터의 복수의 관심 이미지들은, 예컨대 매트릭스, 그리드 또는 다른 레이아웃으로 사용자에게 (예컨대, 도 1에서와 같은 컴퓨팅 디바이스에 의해) 자동으로 선택되고 디스플레이된다. 선택된 이미지들은, 예컨대 GIT 내의 이미지의 캡처 부위의 위치를 제공하는 위치 정보와 함께, 국부화된 방식으로 디스플레이될 수 있다. 제2 스테이지에서, 사용자는 선택된 이미지(예컨대, 초점이 맞는 이미지)에 대한 추가 정보의 디스플레이를 수신하기 위해 자동으로 선택된 이미지들로부터 이미지들을 (예컨대, 사용자 입력을 제공함으로써) 선택할 수 있다. 추가 정보는 자동으로 선택된 추가 이미지들을 포함할 수 있다. 이어서, 이미지들의 사용자의 선택은 전체 케이스에 대한 맵 또는 보고서를 생성하거나 채우는 데 사용될 수 있다.

도 2는, 예컨대 스터디의 디폴트 디스플레이의 디폴트 스크린으로서 뷰어 또는 사용자에게 처음에 제시되는 제1 스크린, 예컨대 디폴트 스크린을 보여준다. 뷰어는, 도 2의 예에서 소장의 3개의 삼분위(tertile)들인, 이미징된 GIT 부분의 다양한 영역들 또는 세그먼트들 사이에서 내비게이팅할 수 있다. 각각의 삼분위는 이러한 예시적인 스크린 상에 3개의 탭들(210) 중 하나로서 표현될 수 있다. 예를 들어, 사용자가 도 2에 디스플레이된 GUI에서 각자의 탭(210)을 클릭함으로써 세그먼트 또는 소장 삼분위를 선택할 때, 자동으로 선택되었던 그러한 삼분위에 관련된 이미지들(206)이, 예컨대 스크린의 중심 영역에서 매트릭스 레이아웃(220)으로 사용자에게 디스플레이된다. 이러한 예에서, 각각의 삼분위는 소장을 통한 캡슐의 통과 시간의 1/3을 나타낸다. 일부 실시예들에서, 각각의 삼분위는 소장의 길이의 1/3의 추정을 나타낼 수 있다. 일부 실시예들에서, 삼분위들은 소장을 따른 랜드마크들의 검출에 기초하여 파싱될 수 있다. 버튼(202)은 보고 스크린과 제1 뷰 사이에서 토글링하기 위해 사용자에 의해 클릭되거나 달리 나타내어질 수 있다. 소장 또는 다른 GIT 섹션에 대한 추정된 출입 시간(204)이 디스플레이될 수 있다.

일부 실시예들에서, 사용자는 레벨 1 디스플레이와 레벨 2 디스플레이 사이에서 스위칭할 수 있다. 예를 들어, 레벨 1에 보여지는 이미지를 클릭함으로써 레벨 2 디스플레이로 스위칭할 수 있다. 예를 들어, GUI 상에 디스플레이될 때 사용자가 이미지를 클릭함으로써 특정 이미지를 선택할 때, 그러한 이미지의 더 큰 버전이 스크린의 "추가 정보"(예컨대, 제2 레벨) 영역(230)에 디스플레이된다. 추가 정보 디스플레이의 각각의 이미지는, 예컨대 제1 레벨 이미지에 의해 보여지는 동일한 특징부 또는 병리를 보여줌으로써 디폴트 뷰에서 하나의 그러한 제1 레벨 이미지에 대응할 수 있다. 사용자는 "추가 정보" 또는 제2 레벨 영역 내의 이미지들(206) 중 선택된 이미지에 속하는 추가 정보, 예컨대 선택된 이미지를 둘러싸는 이미지들(예컨대, 그러한 이미지 전의 또는 후의 몇몇 이미지들, 또는 그러한 이미지의 몇 초 전 또는 후에 캡처된 이미지들)을 포함하는 선택된 이미지 또는 짧은 클립(예컨대, 움직이는 이미지 시퀀스 또는 영화) 전에 또는 그 후에 결장경검사가 캡처했던 추가 정지 이미지들을 볼 수 있다. 도 2에서, 제2 레벨 이미지들은 제1 레벨 이미지들의 디스플레이의 동일한 뷰에 디스플레이된다. 사용자는 또한, 선택된 이미지를 관심 이미지로서 식별할 수 있거나, 그렇지 않으면 예컨대 메인 디스플레이 영역 내의 선택된 이미지 상에 위치될 수 있는 전용 체크박스(208)를 체크함으로써 케이스 보고서 내의 포함을 위해 그것을 마킹할 수 있다. 선택된 이미지들에 대한 마킹들을 (예컨대, 사용자가 GUI에 정보를 입력하는 것을 통해) 또는 코멘트들을 추가하기 위한 옵션과 같은 추가적인 기능이 이러한 스크린 상에서 사용자에게 이용가능할 수 있다.

도 2의 예에서와 같은 그러한 스크린 또는 디스플레이는 히트 맵 또는 다른 정보 제시(240)를 포함할 수 있는데, 이는, 예를 들어 세그먼트들 또는 삼분위들 각각의 정보를 그래픽 형태로 디스플레이하는 그래픽 표현을 포함할 수 있다. 사용자가 관심 이미지들을 선택할 때, 각자의 세그먼트의 그래픽 표현 또는 맵 상에 그러한 세그먼트 내의 선택된 이미지의 위치에 대응하는 위치에서 표시(예컨대, 수직선(242))가 추가될 수 있다. 242와 같은 표시들, 및 다른 도면들에 도시된 유사한 표시들은 그들의 위치 또는 GIT 내의 추정된 위치에 따라 이미지들을 표현하는 국부화된 이미지 표시들 또는 마커들일 수 있다. 사용자에 의해 수행되는 이러한 제2 스테이지 선택은 전술된 바와 같이 보고서를 위한 이미지들의 사용자의 선택과는 별개일 수 있거나 그와 통합될 수 있다. 따라서, 일부 실시예들에서, 사용자가 맵을 채우기 위해 이미지들을 선택한 후에, 그는 이어서 보고서에 포함될 이미지들의 다른 선택을 수행할 수 있다. 다른 실시예들에서, 맵을 채우기 위해 사용자에 의해 선택된 이미지들은 또한, 보고서에 포함될 이미지들일 수 있다.

도 2의 예시적인 디스플레이에서, 세그먼트 또는 삼분위에 대한 자동으로 선택된 이미지들의 개수가 중심 디스플레이 영역 내에 피팅되는 이미지들의 개수보다 더 많은 경우, 업 앤 다운(up and down) 스크롤링이 사용자에게 이용가능할 수 있다. 도 2의 예에서, "추가 정보" 영역에 디스플레이하기 위해 사용자에 의해 선택된 이미지는 (예컨대, 청색 프레임에 의해) 강조될 수 있고, 히트 맵 영역 상의 그러한 각자의 마킹이 또한 동시에 강조될 수 있다.

도 3은 예시적인 스크린샷을 보여준다. 일부 실시예들에서, 이미지들의 사용자의 선택에 기초하여 생성된 맵 또는 케이스 맵(310)이, 예컨대 도 3의 예에 도시된 바와 같이 별개의 스크린에 디스플레이될 수 있다. 도 3의 예에서, 케이스 맵(310)은 다양한 마킹들, 시간 마크들, 및 케이스의 대상(예컨대, 캡슐에 의해 GIT가 이미징된 사람)의 GIT를 그래픽 형태로 예시하는 다른 심볼들(312)을 갖는 세장형 바이다. 맵은 전체 이미징된 GIT 부분(이는, 도 3에서, 단지 전체 GIT의 일부분임)을 포함하는, 전체 케이스 또는 실질적으로 전체 케이스의 예시적인 표현을 포함할 수 있다. 도 3의 예에서, 전체 펼쳐진 소장의 그래픽 표현이 디스플레이되지만, 전체 케이스의 다른 예시적인 그래픽 표현들이 가능하다. 일부 실시예들에서, 예시적인 그래픽 표현은 관련 세그먼트의 해부학적 특징부들을 닮거나 암시하는 요소들(314)을 포함할 수 있다. 예를 들어, 도 3의 표현은 위장관을 따른 선행 기관 및 후속 기관의 표시(예컨대, 소장 표현의 각자의 반대편 단부들에 디스플레이된 위 및 결장의 이미지)를 포함한다.

대안적으로, 이러한 스크린은 세그먼트들을 더 개략적으로 나타내는 맵을 디스플레이할 수 있다.

별개의 마킹들은 별개의 세그먼트들, 예컨대 소장의 3개의 삼분위들을 묘사하는 데 사용될 수 있다. 도 3의 예에서, 이들 마킹들은 소장 그래픽 표현의 시작 및 끝에 그리고 이러한 표현을 따라 동일한 거리에 있는 수직 점선들(316)이다.

사용자에 의해 선택된 이미지들은 맵 상의 마킹들에 의해 표현될 수 있다. 여기서, 예를 들어, 이들 마킹은 수직 실선(312)이고, 사용자는, 예를 들어 이들 마킹들을 클릭함으로써 또는 그 위를 호버링함으로써 각자의 이미지들에 액세스할 수 있다.

도 3의 맵 스크린 또는 디스플레이는 또한, 추정된 또는 결정된 세정 레벨의 그래픽 표현, 또는 그의 표시, 예컨대 각자의 세그먼트의 자동으로 측정된 청정 레벨에 대한 점수, 및/또는 그 세그먼트 내의 캡슐 통과 동안의 이미지 품질의 표시를 포함할 수 있다. 세정 레벨의 유사한 표시들은 본 명세서의 다른 도면들에 도시되어 있다. 세정 점수는, 예를 들어, 콘텐츠로 커버되는 또는 달리 각자의 기관의 조직 벽들을 보여주지 않는 이미지 프레임들의 부분 또는 백분율의 자동 추정에 기초하여 계산될 수 있다. 이러한 스크린샷에서, 세정 레벨은 그래프를 포함하는 바(320)로 표현된다. 세정 레벨 바는 수평 파선(322)을 추가로 포함하며, 이는 사용자가 임의의 주어진 지점에서의 세정 레벨이 그 임계값 초과인지 또는 미만인지 여부를 평가하는 데 도움을 줄 수 있는 임계 레벨을 나타낼 수 있다. 임계값은, 예를 들어 적절한 값들에 대한 평균 값 또는 한계일 수 있다.

도 3에 도시된 맵은 (도 2에 도시된 바와 같은) 레벨 1 이미지들의 스크린 또는 디스플레이와는 별개인 스크린에 또는 선택된 이미지들과 함께 디스플레이될 수 있다.

일 실시예에서, 일련의 캡처된 이미지들로부터의 이미지들이 자동으로 선택될 수 있다. 자동으로 선택된 이미지들의 표시들을 포함하는 맵은 사용자에게 또는 디폴트(예컨대, 미리채워진 맵)로 처음에 디스플레이된다. 맵은 이미징된 기관의 자동으로 식별된 영역들 또는 세그먼트들의 마킹들을 포함한다. 이어서, 사용자는 그 또는 그녀가 탐색하기를 원할 수 있는 맵의 영역들의 더 상세한 제시에 액세스할 수 있다.

일 실시예에서, 사용자에게는 전체 케이스의 그래픽 표현(예컨대, 맵), 예컨대 GIT의 전체 관심 부분(예컨대, 전체 SB 또는 전체 결장)이 제시된다. 예를 들어, 사용자에게는, 예컨대 캡슐 내시경의 소장으로의 진입, 소장으로부터의 그것의 빠져나감, 및 그들 사이의 통과 시간의 측정의 자동 식별에 기초하여, 3개의 삼분위들로 분할된 소장의 전체 확산의 그래픽 표현이 제시될 수 있다. 일부 실시예들에서, GIT 부분의 분할은 캡슐 내시경검사 디바이스에 의해 횡단된 길이의 추정에 기초할 수 있다. (예컨대, 수직 실선들 형태의) 그러한 그래픽 표현 상의 마킹들은 자동으로 선택된 이미지들, 예컨대 관심 이미지들일 수 있거나 또는 그럴 가능성이 있는, 이미지들의 선택된 서브세트 중의 이미지들 또는 레벨 1 이미지들을 나타낼 수 있다. 확산성 발견부들(예컨대, 부근의 다수의 관심 이미지들 또는 관심 이미지들의 그룹화들을 포함할 수 있는 기관의 영역들)이 맵 상에서 식별될 수 있다. 그러한 실시예에서, 확산성 발견부들은, 관심 마킹들의 이미지보다 더 밝은 음영을 갖고 이미지 그룹화의 시작점의 각자의 위치로부터 그의 단부의 각자의 위치로 연장되는 바들로서 디스플레이될 수 있다.

도 4는 디스플레이된 추가 정보를 갖는 예시적인 스크린 또는 디스플레이를 보여준다. 동일한 스크린에서, 사용자는, 예컨대 맵(502) 상의 각자의 마킹들(510)을 클릭하거나 그 위를 호버링하는 것에 의해 입력을 제공함으로써, 선택된 이미지들을 볼 수 있다. 사용자가, 예컨대 맵의 디스플레이 영역에 디스플레이되는 각자의 마킹(510) 또는 섬네일(thumbnail)(512)을 클릭함으로써 이미지를 선택할 때, 동일한 이미지의 더 큰 버전(530)이 "추가 정보" 영역(540)에(예컨대, 여기서는, 스크린의 하부 좌측 코너에) 디스플레이될 수 있다. 이어서, 사용자는 선택된 이미지 전에 또는 후에 캡처된 이미지들(예컨대, 선택된 이미지를 둘러싸는 이미지들)을 포함하는 짧은 클립 또는 기관의 각자의 세그먼트로부터의 추가 이미지들을 볼 수 있다. 디스플레이된 이미지에 대한 노트들 또는 마킹들의 추가 또는 보고서 내의 포함을 위한 이미지의 선택과 같은 다른 기능이 사용자에게 이용가능할 수 있다. 기관들을 세그먼트들로 분할하는 것의 마킹들(504)(예컨대, 삼분위 분할 마킹)은 섹션의 그래픽 표현 상의 그들의 각자의 위치들에 디스플레이될 수 있다.

도 5는 줌인 동작 다음의 도 5의 예시적인 스크린을 보여준다. 일부 실시예들에서, 사용자는 커맨드로 "줌"을 입력하여, 시스템, 예컨대 워크스테이션이 전체 맵(502)의 영역 또는 섹션 상에 줌인하게 하여 그 각자의 섹션으로부터의 선택된 이미지들의 그룹들을 보게 할 수 있다. 각자의 섹션의(예컨대, 그에 대응하는) 선택된 이미지들은, 예를 들어, 각자의 영역의 그래픽 표현 상의 섬네일들(522)의 시리즈들, 그리드, 시간에 의해 순서화된 목록(520) 등으로서 디스플레이될 수 있다. 사용자는 또한, 도 5의 예에 도시된 바와 같이, 예를 들어 스크린의 상부 우측 코너에, 맵(540)의 감소된 표현을 사용하여 맵의 섹션들 또는 서브영역들 사이에서 (예컨대, GUI에 입력을 제공함으로써) 내비게이팅할 수 있다.

일부 실시예들에서, 사용자는, 예컨대 사용자가 각자의 이미지가 관심 이미지가 아니라고 결정하는 경우, 예컨대 선택된 이미지들의 마킹들을 제거하는 프로세스를 야기하도록 GUI를 통해 입력을 제공함으로써, 맵을 편집할 수 있다.

검토를 완료한 후, 사용자는 보고서 생성 스크린을 디스플레이하기 위한 프로세스가 진행되게 할 수 있고, 여기서 사용자는 보고서를 위해 선택된 이미지들, 예컨대 사용자에 의해 선택된 이미지들을 관심 이미지들로서 검토할 수 있다.

일 실시예에서, 디폴트 뷰 모드에서, 자동으로 선택된 이미지들은 정지 방식으로 그리고 스크린의 일 측에서 열 레이아웃으로, 예컨대 스크린의 우측에서 수직 열로 디스플레이될 수 있다. 사용자는 이미지 디스플레이 영역에서, 예컨대 스크린의 좌측에서 디스플레이될 이미지를 선택할 수 있다. 각각의 선택된 이미지는, 예컨대 특정 컬러로 관심 영역을 착색함으로써, 이미지 내의 식별된 관심 영역의 표시를 갖고 디스플레이될 수 있다. 디스플레이는 관심 영역의 식별을 지칭하는 체크 박스들을 포함할 수 있다. 이어서, 사용자는 관심 영역을 식별하고, 그에 따라 적절한 체크 박스(예컨대, 출혈, 궤양 또는 기타)를 체크할 수 있다. GIT 또는 그의 섹션의 전체 관심 부분의 맵 또는 히트 맵이 또한, 예를 들어 이미지 디스플레이 영역 아래에 디스플레이될 수 있다. 맵은 선택된 이미지들의 표시들을 포함할 수 있고, 또한 이들 이미지들 사이에서 내비게이팅하기 위해 사용자에 의해 사용될 수 있다.

하나의 예시적인 실시예에서, 이미지들의 검토는 2개의 레벨들의 정보에 기초하여 수행될 수 있다. 제1 레벨의 정보는 디폴트 뷰 모드로 제시될 수 있고, 제2 레벨의 정보는 사용자의 요청(예컨대, 도 1에 도시된 것과 같은 시스템에 의해 실행되는 프로세스로 수신된 GUI로의 사용자 입력) 시에 또는 사용자의 동작 다음에 디스플레이될 수 있다. 디폴트 뷰 모드는 GIT 또는 그의 일부(예컨대, 소장)에서 캡처된 일련의 이미지들로부터 (예컨대, 도 1에 도시된 것과 같은 시스템에 의해) 자동으로 선택된 이미지들의 디스플레이를 포함할 수 있다. GIT의 이미징된 부분은 복수의 세그먼트들로 분할된다(예컨대, SB가 3개의 세그먼트들/삼분위들로 분할되거나 결장이 5개의 해부학적 부분들 또는 세그먼트들로 분할됨). 선택된 이미지들은 정지 방식으로 그리고 그들이 위치되는 세그먼트들에 따라 디스플레이된다. 사용자는 정지 이미지들을 브라우징할 수 있다. 디폴트 뷰 모드는 또한, 세그먼트들 및 선택된 이미지들을 세그먼트들 내의 그들의 추정된 위치에 따라 나타내는 전체 이미징된 GIT 부분의 맵의 디스플레이를 포함할 수 있다. 일부 실시예들에서, 맵의 디폴트 디스플레이는 디스플레이되는 이미지들이 위치되는 세그먼트/세그먼트들만을 포함할 수 있다. 일부 실시예들에서, 사용자는 이미징된 GIT 부분의 섹션을 표현하는 맵의 섹션에 줌인(예컨대, 디스플레이된 이미지들의 크기의 확장)을 야기하도록 프로세스에 입력을 제공할 수 있다.

제2 레벨의 정보는 선택된 이미지들을 둘러싸는 추가 이미지들의 디스플레이를 포함할 수 있고, 제1 레벨 이미지들로부터 (예컨대, 팝업 창 또는 스크린에서) 개별적으로 디스플레이될 수 있다. 디폴트 뷰 또는 디스플레이(예컨대, 제1 레벨의 정보)는 또한 제2 레벨의 정보에 디스플레이되는 이미징된 GIT 부분의 섹션들의 표시를 포함할 수 있다. 디폴트 뷰는 GIT 부분에서 캡처된 일련의 이미지들의 세정 레벨의 표시를 추가로 포함할 수 있다. 제2 레벨의 정보에 디스플레이되는 둘러싸는 이미지들은 정지 방식으로 그리고/또는 비디오 클립, 단편 영화 또는 움직이는 이미지로서 디스플레이될 수 있다.

도 6a 및 도 6b는 소장의 디스플레이된 그리고 분석된 케이스들의 예들을 제공한다.

도 6a는 개시된 실시예들에 따른 디폴트 뷰 모드의 개략도를 보여준다. 도 6b는 일 실시예에 따른, 도 6a의 디폴트 뷰 모드에서의 맵(예컨대, 바)의 개략도이다.

도 6a 및 도 6b에 도시된 실시예에 따르면, 디폴트 뷰(700)는 단지 몇 개의 이미지들(예컨대, 4개의 이미지들)만을 포함하는 한 세트의 정지 이미지들(712)의 동시적 디스플레이를 포함할 수 있고, 따라서 사용자가 디스플레이된 이미지들을 신중하게 그리고 명확하게 검토할 수 있게 한다. 이미지들의 세트는 행 레이아웃(710)으로 디스플레이되고, 따라서 GIT의 레이아웃, 또는 다른 레이아웃을 시뮬레이팅할 수 있다. 이미지들은 실질적으로 뷰의 중심에 디스플레이될 수 있다. 사용자는 이미지들의 디스플레이된 세트 내의 이미지들 사이에서 포커스(예컨대, 주요 또는 최대 디스플레이)를 이동시키거나, 예컨대 사용자 입력을 통해 이미지들의 세트들 사이에서 스크롤할 수 있다. 각각의 세그먼트(예컨대, 각각의 삼분위) 내의 선택된 이미지들은 그러한 이미지들의 세트들로 분할되고 그들의 연대순에 따라(예컨대, 그들의 캡처 시간에 따라) 디스플레이될 수 있다. 현재 디스플레이되는 이미지들의 세트가 속하는 삼분위가 뷰에 나타내어질 수 있다.

디폴트 뷰는 도 6a 및 도 6b에 도시된 예와 같이, 예를 들어 스크린의 하부에 위치된 맵(740)을 포함할 수 있다. 맵(740)은 바 또는 행 또는 선 포맷의 형태일 수 있고, 정보의 유형들, 일례로 도 6b에서 741, 742 및 743으로 표시된 3개의 정보 유형들을 표현하는 서브-행들(예컨대, 3개의 행들)을 포함할 수 있다. 예시적인 맵은 전체 소장의 것이다. 맵은 수직 점선들(747)에 의해 3개의 삼분위들(745)과 같은 섹션들로 분할될 수 있다. 맵은 또한 결장의 일부분을 포함할 수 있다. (예컨대, 청색선(760) 및 커서(762)에 의해) 도 6a 및 도 6b에 도시된 바와 같이, 초점이 맞는 이미지는 상이하게 착색된 수직선(760) 및/또는 커서(762)에 의해 맵에 나타내어질 수 있다. 초점이 맞는 이미지의 프레임은 또한 (예컨대, 도 6a 및 도 6b에 도시된 바와 같이, 청색으로) 상이하게 착색될 수 있다. 사용자는 또한, 프레임이 제2 레벨의 정보에서 이미 검토되었는지 여부의 표시를 수신할 수 있다. 따라서, 예를 들어, 제2 레벨에서 이미 검토되었던 이미지의 프레임은 또한, 그의 컬러를, 예컨대 흑색에서 회색으로 변경할 수 있다.

도 6b의 제1 서브-행(741)은, 여기서 소장을 포함하는, 이미징된 GIT 부분을 따라 위치된 선택된 이미지들을 나타내는 히트 맵을 포함한다. 선택된 이미지들은 특정 컬러(예컨대, 회색)의 수직선들(770)로서 나타내어지고, 소장을 따른 그들의 추정된 위치에 따라 바를 따라 위치된다. 사용자는 이미지를 표현하는 선에 입력(예컨대, 마우스 호버 오버)을 제공하여, 이미지의 섬네일(예컨대, 감소된 이미지)의 디스플레이를 그의 캡처 시간의 표시와 함께 수신할 수 있다. 예를 들어, 도 6a 및 도 6b에 도시된 바와 같이, 바의 부분들은 상이한 컬러들로 착색되어 해부학적 관심 영역들을 나타낼 수 있다(예컨대, 소장의 근위 및 원위 영역의 추정을 나타내는 연한 청색 영역들로서 제공됨). 히트 맵의 끝에서, GIT의 다음 해부학적 부분의 적어도 하나의 이미지, 여기서는 결장이, 특히 전체 소장 또는 관심 GIT 부분이 이미징되고 시술이 완료되었음을 나타내도록 디스플레이될 수 있다. 이미지들의 선 표시들은, 일단 그들이 사용자에 의해 검토되었다면 그들의 컬러를 (예컨대, 오렌지색으로) 변경할 수 있다.

제2 서브-행(742)은 이미징된 GIT 부분의 섹션들, 여기서는 그들의 이미지들이 제2 레벨의 정보에 디스플레이될 소장에 대한 표시들을 포함할 수 있다. 이들 섹션들은 회색 착색된 직사각형들과 같은 표시들(780)에 의해 나타내어질 수 있다. 각각의 직사각형, 예컨대 제2 레벨 섹션은, 도 6a 및 도 6b에서 볼 때, 제1 레벨의 하나 이상의 선택된 이미지들을 포함하고/하거나 그에 관련될 수 있다. 이는 2개 이상의 제1 레벨 선택된 이미지들이 서로에 대해 상대적으로 근접해 있는 경우이다.

제3 서브-행(743)은, 예컨대 소장을 따라 캡처된 이미지들의 세정 레벨을 나타내는 그래프를 포함할 수 있다. 그래프는 레벨 값에 따라 착색될 수 있는데, 예컨대 그것은 값(예컨대, 세정)이 상대적으로 낮을 때 적색으로 착색될 수 있다.

도 6a 및 도 6b에 도시된 바와 같이, 이미징된 GIT 부분의 상이한 해부학적 섹션들 사이의 통로, 예컨대, 위-SB(Gastro-to-SB)(예컨대, 위에서 소장까지) 및/또는 SB-결장(SB-to-Colon)이 또한 나타내어질 수 있다. 통로는 맵 내의 관련 세그먼트들의 표시들(예컨대, 점선들) 위에 나타내어질 수 있고, 통과 시간을 포함할 수 있다. 선택적으로, 식별된 통로 영역에서 캡처된 일련의 이미지들을 표현하는 작은 컬러 바가 관련 세그먼트들의 표시들 위에 디스플레이될 수 있다. 사용자는 컬러 바에 입력(예컨대, 호버)을 제공하고 통로 이미지들을 검토할 수 있다. 컬러 바는 식별된 통로 영역의 이미지들의 샘플만을 표현할 수 있다.

도 6a에 도시된 바와 같은 이미지들은 상이할 수 있고; 예를 들어, 선택된 이미지들은 매트릭스 형태로 디스플레이될 수 있고, 따라서 더 많은 이미지들이 동시에 디스플레이될 수 있다. 사용자는, 예를 들어, 도 6a의 뷰 모드 대신에 다른 디스플레이 뷰 모드들을 사용하도록 요청할 수 있다. 그러한 대안적인 뷰에 따르면, 각각의 삼분위의 이미지들은 별개의 매트릭스로, 예컨대 별개의 탭으로 디스플레이될 수 있다. 사용자는 각각의 삼분위 내의 이미지들 사이에서 스크롤할 수 있다.

도 7은 도 6a에 예시된 디스플레이에 따라 선택된 이미지의 제2 레벨(예컨대, 스터디)의 정보의 디스플레이 또는 뷰의 예시적인 예시를 보여준다.

제2 레벨의 정보는 본 실시예에 따라, 팝업 창(910)에 의해 실현될 수 있으며, 이는 선택된 이미지(912)를 디폴트로 디스플레이한다. 윈도우/디스플레이/뷰는 선택된 이미지를 둘러싸는(예컨대, 선택된 이미지 전 및 후의 여러 개의 이미지들이거나, 선택된 이미지의 몇 초 전 및 후에 캡처되었던) 이미지들의 서브시리즈들을 디스플레이할 수 있다. 사용자는 마우스 스크롤 휠과 같은 입력 디바이스를 사용하여, 정지 방식으로 이미지들을 스크롤(예컨대, 순차적으로 또는 시간적으로 전방 및 후방으로 이동)하기 위한 프로세스를 야기할 수 있거나, 또는 그는 비디오 클립으로서 이미지들의 서브시리즈들을 디스플레이하기 위한 프로세스를 야기할 수 있다. 맵(920)은 이미지들 디스플레이 영역 아래에 디스플레이될 수 있다.

도 7의 예에 따르면, 맵은 제1 레벨에서 디폴트 뷰의 맵의 제1 서브-행의 일부분을 포함할 수 있고, 이는 이미징된 GIT 부분의 관련 세그먼트를 표현한다. 제2 레벨의 이미지들의 서브시리즈들을 표현하는 섹션은 컬러, 예를 들어 오렌지색으로 나타내어질 수 있다. 추가적인 제2 레벨 맵이 제1 레벨 맵의 일부분 위에 제시될 수 있는데, 이는 이미지들의 제2 레벨 서브시리즈들에 포함되는 제1 레벨 디스플레이의 선택된 이미지들의 표시를 포함한다. 그러한 이미지, 예컨대 제1 레벨 선택된 이미지가 이러한 제2 레벨 데이터 팝업 창의 이미지 디스플레이 영역에 디스플레이될 때, 그것은 이러한 제2 레벨 맵에 (예컨대, 정사각형들로; 도시된 예에서, 관련 정사각형은 청색으로 착색되고, 청색 커서는 그 마크 위에 위치됨) 나타내어진다.

제2 레벨 이미지들을 포함하는 섹션을 표현하는 제1 레벨 맵의 일부분이 이미지 디스플레이 영역 아래에 디스플레이될 수 있다. 선택된 이미지들은 이러한 맵에 나타내어지고, 검토 중에 있는 제1 레벨 선택된 이미지는, 예컨대 이미지선 표시를 상이한 컬러로 착색함으로써 나타내어진다.

일 실시예에서, 이미지들을 수평으로(예컨대, 캐러셀 방식으로) 브라우징함으로써 선택된 이미지들의 "파일(pile)" 또는 그룹으로부터 한 번에 하나의 이미지가 선택될 수 있다. 이미징된 GIT 부분을 표현하고 선택된 이미지들을 나타내는 히트 맵이, 예컨대 이미지 디스플레이 영역 위에 디스플레이될 수 있다. 디스플레이된 각각의 이미지는, 예컨대 히트 맵 또는 맵 상의 이미지 및 그의 지점 또는 표현을 연결하는 선에 의해, 히트 맵에서의 그의 표시로 참조될 수 있다.

일 실시예는 선택된 이미지들의 그룹 또는 파일로부터 한 번에 하나의 이미지를 디스플레이할 수 있다. 사용자는 한 번에 하나의 이미지를 선택하기 위해 이미지들을 수직으로 스크롤하게 하도록 GUI에 입력을 제공하기 위해 입력 제어부(예컨대, 마우스, 스크롤 휠 등)를 사용함으로써 단일 이미지를 볼 수 있다. 이미징된 GIT 부분을 표현하고 선택된 이미지들을 나타내는 히트 맵 또는 다른 맵이, 예컨대 이미지 디스플레이 영역 옆에 디스플레이될 수 있다. 디스플레이된 각각의 이미지는, 예를 들어 이미지를 관련 히트 맵 또는 맵 포지션 또는 이미지 표시에 링크하는 연결선에 의해 히트 맵에서의 그의 표시로 참조될 수 있다.

디폴트 뷰 모드, 예컨대 스터디의 디폴트 뷰의 메인 뷰는 이미징된 GIT 부분을 표현하고 선택된 이미지들을 나타내는 히트 맵의 디스플레이를 포함할 수 있다. 이미지들은 이미징된 GIT 부분에서 그들의 추정된 위치에 따라 히트 맵 내에 위치될 수 있다. 선택된 이미지가 이미지 디스플레이 영역에 디스플레이될 수 있다. 선택된 이미지는, 사용자의 요청에 따라 또는 사용자의 동작 다음에 추가적인 관련 이미지들을 포함하는 비디오 클립의 일부로서 또는 정지 방식으로 디스플레이될 수 있다. 사용자는, 예를 들어 이미지의 섬네일 및/또는 정지 디스플레이 및/또는 클립을 수신하기 위해, 예를 들어 히트 맵 상의 이미지 표시 상에서 호버링하거나 이를 클릭할 수 있다.

도 8a는 일 실시예에 따른 선택적 뷰 모드의 스크린샷 또는 디스플레이를 보여준다. 도 8a에 도시된 실시예에서, 이미지들의 선택된 서브세트 중의 이미지들 또는 제1 레벨은 슬라이더 방식 또는 "캐러셀 방식"(1300)으로 디스플레이될 수 있어서, 하나의 이미지(1302)가 중심에 더 두드러지게 디스플레이되게 하며, 이때 다른 이미지들(1304)은 메인 중심 이미지(1302)로부터 거리를 두고 감소하는 크기로 가장자리에 있게 하여, (예컨대, 스크린의 에지에서의 화살표들(1310)로의, 또는 마우스 스크롤 바를 사용하는) 사용자 입력이 "회전"을 야기하게 하여 뷰 내의 다른 이미지들(1304) 중의 다른 이미지가 중심으로 이동되어 중심 이미지(1302)가 되게 한다. 세정 정보(1326)를 갖는 맵(1320) 및 다른 추가 정보가 제1 레벨 이미지 캐러셀 디스플레이(1300)에 (전형적으로 그 위에) 디스플레이될 수 있다.

제2 레벨 이미지들은 제1 레벨의 동일한 윈도우에 디스플레이될 수 있고, 따라서 다른 윈도우를 활성화시킬 필요가 없을 수 있다. 사용자는, 예를 들어 이미지 상에서 호버링하거나 그것을 클릭할 수 있고, 이어서 이미지는 도 8a에 도시된 바와 같이 "활성화"되거나 "초점이 맞게"된다. 예를 들어, 사용자는 레벨 2로 스위칭하기 위해 GUI에 입력을 제공할 수 있고, 중심 이미지(1302)는 레벨 1에서 하나의 중심 이미지에 의해 표현된 특정 사례(예컨대, 제2 레벨 이미지들)에 관련된 또는 이와 연관된 모든 이미지들의, 비디오 또는 이미지 스트림, 또는 정지 방식으로 디스플레이된 이미지들의 "스크롤가능" 시퀀스로서 보여질 수 있다.

이러한 실시예에서, 정지 이미지들(예컨대, 자동으로 미리 선택된 이미지들)은 캐러셀 형태(1300)로 수평으로 디스플레이된다. 도 8a의 특정 예에서, 5개의 이미지들이 동시에 디스플레이된다. 중심 이미지(1302)는 초점이 맞는 이미지이다. 그 다음에, 전형적으로 동시에 디스플레이되는 이미지들의 개수는 전형적으로 홀수 개의 이미지들이다. 일부 실시예들에서, 다양한 홀수 개의 이미지들이 동시에 디스플레이될 수 있다. 이미지들은 캐러셀 방식으로 디스플레이되어, 사용자가 이미지들 사이에서 수평으로 브라우징할 수 있게 하여 어떠한 이미지도 다른 이미지를 가리지 않게 할 수 있다. 이미지들의 크기는 디스플레이 캐러셀(1300)에서의 그들의 포지션에 따라 변화한다. 초점이 맞는 이미지인 중심 이미지(1302)가 가장 크다. 다른 이미지들(1304)의 크기는 중심 이미지에 대한 그들의 근접도에 관련하여 변화한다. 이미지가 중심 이미지(1302)에 더 가까울수록, 그것은 더 커진다. 그러한 레이아웃은 사용자가 하나의 이미지를 면밀히 그리고 더 명확하게 검토하게 할 수 있고, 동시에, 인접한 또는 주변 이미지들에 대한 정보를 검토하고 수신하게 할 수 있다. 그러한 뷰는 초점이 맞는 이미지를 여전히 상세히 디스플레이하면서, 인접한 이미지들 사이의 비교를 허용할 수 있다.

바 또는 맵(1320)(예컨대, 히트 맵)은 전체 이미징된 GIT 부분의 또는 그의 섹션의 표현을 도시할 수 있다. 도 8a에 디스플레이된 예시적인 디스플레이는 소장의 것이다. 맵(1320)은 이미지들의 디스플레이 위에 그리고 스크린의 상부 영역 상에 디스플레이된다. 따라서, 맵은 소장을 표현하고 (예컨대, 수직 점선들(1322)에 의해) 3개의 삼분위들로 분할된다. 맵은 이미징된 GIT 부분을 따른 디스플레이된 이미지들의 위치 및/또는 디스플레이된 이미지들 및/또는 캡처된 이미지들 및/또는 이미징된 GIT 부분의 세정 레벨과 관련되는 정보를 포함할 수 있다. 맵은 상이한 정보를 제시하는 2개 이상의 서브-행들을 포함할 수 있다. 초점이 맞는 이미지는 도 8a에 도시된 바와 같이, 예를 들어 연결선(1324)에 의해 맵에 나타내어질 수 있다. 일부 실시예들에서, 현재 디스플레이되는 모든 이미지들은 (예컨대, 심볼들 또는 선들, 또는 연결선들에 의해) 맵에 나타내어질 수 있다.

본 실시예들에서, 맵(1320)은 2개의 서브-행들(1326, 1328)을 포함한다. 제1 서브-행(1326)은 캡처된 이미지들의 세정 레벨과 관련되는 정보를 포함할 수 있다. 본 실시예에서, 세정 레벨은 그래프의 형태로 제시되며, 컬러 바(도 10에서와 같음)의 형태로 제시될 수도 있다. 상이한 컬러들은 다음과 같은 상이한 세정 레벨 카테고리들을 나타낸다: 낮음, 중간 및 높음. 제2 서브-행(1328)은, 선택된 이미지들이 (예컨대, 수직선들에 의해) 나타내어지고 GIT의 이미징된 부분을 따른 그들의 추정된 위치에 따르는 바를 포함할 수 있다.

더욱이, 본 실시예에 따르면, 제2 레벨의 정보는 동일한 초기 또는 디폴트 스크린(예컨대, 스터디 뷰의 메인 또는 디폴트 스크린)에 제시된다. 초점이 맞는 이미지(예컨대, 중심 이미지(1302))는, 사용자가, 예를 들어 제2 레벨 디스플레이로서 선택된 이미지를 둘러싸는 이미지들 사이에서 스크롤할 수 있게 하는 추가 제어부들(1308)을 갖는 것으로 도시되어 있다. 스크롤 바는 초점이 맞는 이미지에 대한 주변 이미지들의 넘버링을 나타낼 수 있다. 예를 들어, 초점이 맞는 이미지는 "0"으로서, 우측의 다음 이미지는 "1"로서, 우측의 다음 이미지는 "2" 등으로서 나타내어질 수 있다. 초점이 맞는 이미지 이전의 이미지(즉, 좌측의 다음 이미지)는 "-1", 그 전의 이미지는 "-2" 등으로서 나타내어질 수 있다. 따라서, 사용자는 원래의 선택된 이미지(1302)에 대한 (이미지들 및 시간에서의) 거리 및 방향에 관련하여 배향될 수 있다. 더욱이, 텍스트 박스들은 초점이 맞는 이미지 아래에 디스플레이될 수 있는데, 이는 사용자가 병리의 식별된 유형 및 코멘트들과 같은 정보를 입력할 수 있게 한다. 일부 실시예들에서, 제2 레벨 제어부들 및/또는 데이터는, 일단 이미지가 초점이 맞는 이미지로서 선택되면 그리고/또는 일단 사용자가 이미지를 중심 이미지(1302)로서 (예컨대, 스크롤함으로써) 배치하거나 또는 일단 사용자가 초점이 맞는 이미지 위를 호버링하고 그것을 클릭하면, 또는 임의의 다른 사용자 동작 시에 (예컨대, 이미지 아래에) 나타날 수 있다.

도 8b는 도 8a에 도시된 이미지들(1300)의 매트릭스 레이아웃을 도시한다.

도 9a는 본 발명의 일 실시예에 따른 디폴트 뷰 모드의 예시적인 스크린이다. 도 9b는 도 9a의 디스플레이에서 선택된 이미지의 제2 레벨의 정보의 디스플레이 또는 뷰의 예시적인 스크린샷이다.

이러한 실시예에서, 검토를 위해 디스플레이되는 케이스는 결장의 것이다. 디폴트 스크린(예컨대, 스터디 뷰의 디폴트 스크린)에서, 도 9a에 도시된 바와 같이, 시술 동안 캡처된 이미지들의 스트림으로부터 (예컨대, 자동으로, 이미지 선택 프로세스에 의해) 선택된 이미지들이 매트릭스(1400) 형태로 디스플레이된다. 결장은 5개의 해부학적 세그먼트들, 즉 맹장, 상행, 횡행, 하행 S상 결장 및 직장으로 분할될 수 있다. 디스플레이되는 선택된 이미지들은, 5개의 세그먼트들에 따라 국부화될 수 있고(예컨대, 국부화 정보를 갖고 디스플레이됨), 세그먼트마다 디스플레이될 수 있는데, 예컨대 이미지는 특정 위치에 따라서가 아니라, 오히려 5개의 결장 세그먼트들 중 하나 내에, 또는 다른 GIT 세그먼트 또는 카테고리에 있는 것으로 나타내어짐으로써 국부화될 수 있다. 각각의 세그먼트의 이미지들은 전용 디스플레이 영역에 디스플레이될 수 있고, 사용자는 탭들에 의해 세그먼트들의 디스플레이들 사이에서 스위칭할 수 있다. 도 9a에 도시된 특정 스크린은 하행 S상 결장 세그먼트에서 캡처되는 것으로 식별된 이미지들을 보여준다. 보고서에 포함될 이미지들로서 사용자에 의해 선택된 이미지들은, 예를 들어 청색 착색된 프레임들(1410)에 의해 나타내어질 수 있다. 추가 정보(1420)가 사용자에게 디스플레이될 수 있다. 그러한 추가 정보는, 어느 세그먼트가 디스플레이되는지를 나타내는 결장의 예시, 환자 관련 상세 사항들, 시술의 날짜, GIT의 관련 영역들(여기서는 결장 앞(pre-colon) 영역 및 결장)에서의 시술 시간, 및 스터디가 완료되었는지 여부(도시된 예에서, 캡슐이 결장의 끝에 도달했는지 여부)일 수 있다(도 9b). 그러한 시술 시간들 및 완료성 표시는 관련 랜드마크들, 예컨대, 결장으로의 통로 또는 입구 및 신체 출구의 식별에 기초하여 결정될 수 있다.

추가 정보, 예컨대 제2 레벨의 정보가 사용자의 요청에 따라 디스플레이될 수 있다. 예를 들어, 사용자는 디스플레이된 이미지를 클릭하여 팝업 창(1450)을 열 수 있고, 이는 도 9b에 도시된 바와 같이, 이미지를 디폴트로 디스플레이하고 추가 정보의 검토를 허용한다. 본 실시예에 따라 디스플레이되는 또는 (예컨대, 사용자의 요청 시에) 디스플레이될 수 있는 추가 정보는, 캡슐 내시경검사가 하나 초과의 카메라를 포함하는 경우에, 이미지가 캡처되었던 캡슐의 헤드에 의한 또는 이미지 내의 관심 영역, 예컨대 폴립의 자동 표시를 포함할 수 있다. 관심 영역의 표시는, 예를 들어 영역을 세그먼트화하는 것에 의한, 그리고/또는 그러한 영역을 가리키는 화살표에 의한 것일 수 있다. 관심 영역(예컨대, 의심되는 폴립)의 자동 식별 및 표시는 의사에게 안내를 제공하고, 진단, 예컨대 폴립들의 검출을 개선시킬 수 있다.

도 10은 아이콘(1010)에 따른 샘플 디스플레이를 도시한다(일 실시예에서, 아이콘 근처의 숫자 "3"을 갖는 이미지들의 파일의 묘사는 사용자에 의해 선택되는 3개의 이미지들(1032)에 대응함). 선택된 이미지들(1032)은 윈도우 또는 다이얼로그 박스(1030) 내에 포함될 수 있다. 사용자는 아이콘(1010)을 (예컨대, GUI에 입력하기 위해 마우스를 사용하여) 클릭하거나 선택할 수 있고, 시스템은 사용자 체크된 또는 선택된 이미지들을 포함하는 윈도우(1030)가 나타나게 할 수 있다. 이어서, 사용자는 체크된 이미지들(1032)을 인접한 또는 행 방식으로 모두 한꺼번에 검토할 수 있다.

다른 실시예에서, 시스템은 다른 뷰 또는 디스플레이 내에 소정 개수의 가장 관련있거나 의심되는 이미지들(예컨대, "상위 X개의 가장 의심되는 이미지들", 예컨대 5개 또는 10개의 가장 관련있는 이미지들)을 디스플레이할 수 있다. 그러한 뷰는 사용자에 대한 제1 빠른 표시를 제공할 수 있고, 예를 들어, 결장 스크리닝에 유익할 수 있다. 결장 스크리닝 상황에서, 사용자는, 폴립(폴립은 암의 가능성 및 결장경검사에 대한 필요성을 나타낼 수 있음)이 있는지 또는 없는지를 결정하기를 원할 수 있다. 뷰가 다른 탭 또는 윈도우에 추가될 수 있다.

자동 폴립(또는 다른 특징부) 크기 추정 기능은, 사용자의 요청에 응답하여, 폴립의 직경, 길이 또는 다른 크기 추정의 표시를 계산하고 제공할 수 있다. 폴립 또는 특징부의 크기는, 예를 들어 식별된 폴립 주변에서의 2개의 지점들 사이의 최대 거리를 측정함으로써 자동으로 계산될 수 있다. 사용자는 폴립의 크기를 측정하기 위한 다른 지점들을 선택할 수 있고, 프로세스는 사용자의 선택에 따라 크기를 계산할 수 있다. 예를 들어, 특징부 또는 폴립의 디스플레이는 폴립에 대한 바운딩 박스를 포함하여, 폴립이 이러한 박스 내에 위치되게 할 수 있다. 측정된 길이를 나타내는 바운딩 박스 내의 선이 디스플레이될 수 있고, 예컨대 그러한 선 근처에 크기가 디스플레이되거나 제시될 수 있다. 사용자가 자동으로 선택된 지점들이 정확하지 않다고 믿는 경우, 사용자는 선의 2개의 종단 지점들 각각의 위치를 변경할 수 있다. 자동 폴립 크기 추정, 또는 임의의 다른 관심 특징부의 하나의 이점은 표준화이다. 예를 들어, 현재 방법들은 수동 사용자 입력(예컨대, 폴립의 길이를 정의하는 지점들)에 기초하여 또는 수동 추정에 따라 폴립 크기를 결정할 수 있고, 상이한 사용자들 또는 상이한 사용자의 입력이 동일한 폴립에 대해 상이한 크기 추정들을 제공하거나 이를 초래할 수 있다.

일부 실시예들에서, 세정 레벨 또는 다른 데이터가 이미지마다, 세그먼트마다, 및/또는 시술마다 디스플레이될 수 있다.

일부 실시예들에서, 각각의 세그먼트에, (예컨대, 매트릭스 뷰에서) 가장 의심되는 이미지들을 먼저 제시하기 위해, 또는 다른 방법에 의해, 예컨대 별표로 옵션이 제공될 수 있다.

일부 실시예들에서, 맵 내의 관심 GIT 부분의 표현은, 제1 레벨 이미지들만이 아니라, 또한 제2 레벨 이미지들을 나타낼 수 있다. 따라서, 예를 들어, 질병들 및 병리들의 정도가 또한 표현될 수 있다.

일부 실시예들에서, 스터디의 개인화를 제공하기 위해, 스터디의 파라미터들(예컨대, 얼마나 많은 이미지들이 제1/제2 레벨에 포함될 것인지, 얼마나 많은 스터디의 이미지들이 스터디된 GIT 부분의 소정 세그먼트를 표현하기 위해 선택될 것인지, 스터디에 포함될 이미지를 선택하기 위한 임계치들 등)이 환자마다 조정되거나 결정될 수 있다. 일부 실시예들에서, 그러한 조정은, 예컨대 사용자가 시술을 수행하는 것 또는 담당 의사가 데이터를 입력하는 것에 의해 수동으로 수행될 수 있다. 일부 실시예들에서, 그러한 파라미터 선택은, 예컨대 환자의 의료 이력을 비롯한 환자의 정보 또는 상세 사항들에 기초하여 자동적일 수 있거나, 또는 그의 적어도 일부분(예컨대, 결정될 파라미터들 중 일부에 대한 자동 조정)일 수 있다. 자동 조정에서, 자연 언어 처리(natural language processing, NLP) 알고리즘들 또는 기계 학습 기반 도구들, 예컨대 아마존(Amazon)에 의해 제공되는 Comprehend Medical 시스템이 이용될 수 있다. 그러한 도구들은 무료 텍스트(free text)를 상호운용 가능하게 그리고 검색 가능하게 만들 수 있다. 이어서, 시스템은 환자의 의학적 배경을 사용하여 스터디를 조정할 수 있다. 예를 들어, 시스템이 환자(예컨대, 케이스)에 대해, 무료 텍스트에서 환자가 폴립들의 가족력을 갖고 있다는 것을 인식하는 경우, 시스템은 폴립들의 병력이 없는 건강한 환자와 대조적으로 더 많은 이미지들을 갖도록(예컨대, 스터디의 감도를 증가시키도록) 스터디 또는 제시를 수정할 수 있다.

일부 실시예들에서, 스피치 투 텍스트(speech-to-text) 또는 자동 스피치 인식 시스템들(예컨대, 아마존에 의한 "Transcribe")은, 예를 들어, 사용자가 이미지들을 검토하는 동안 스피치 투 텍스트를 사용하여 보고서를 "기입"하기 시작하게 함으로써, 무료 텍스트에 대한 보고 시간을 상당히 감소시키도록 통합될 수 있다. 스피치 투 텍스트의 사용은 클릭들 또는 다른 수동 사용자 입력에 대한 필요성을 감소시킬 수 있다. 예를 들어, 사용자는 "환추(atlas)의 궤양 사진을 보여줘"라고 말하고 이에 기초하여 취해지는 동작을 가질 수 있고; (예컨대, 키 디스크립터들에 의해 검색되고 참조 이미지들과 스터디 이미지들을 비교하기 위한 뷰 지원(viewing aid)으로서 사용될 수 있는 전형적인 질병 이미지들의 환추를 디스플레이하기 위해) 클릭 또는 사용자 수동 입력 없이 시스템에 의해 이러한 동작이 취해지게 할 수 있다. 스피치 투 텍스트는 "챗봇(chatbot)"이 시스템 GUI를 지원할 수 있게 하여, 사용자가 시스템 질문들을 요청하여 "FAQ" 또는 다른 저장소에 유사한 충분한 질문이 있는 경우 시스템 찾기(system find)를 하고, 대답을 제공할 수 있게 한다.

일부 실시예들에서, 시스템은 관심 GIT 부분에서 전이 섹션들을 디스플레이할 수 있다. 예를 들어, 컬러 바 대신에, 각각의 측부로부터의 전이 섹션(예컨대, SB에 대한 결장 및 위)을 나타내는 이미지는 (섹션 사이의) 전이 이미지들을 포함하는 제2 레벨 디스플레이를 갖는, 예컨대 스터디의 제1 레벨 또는 디폴트 뷰에 제시되거나 이용가능할 수 있다(그리고 맵에 나타내어짐). 일부 실시예들에서, 전이 이미지들(예컨대, Gl 섹션들 사이의 전이를 나타내는 이미지들)은 사용자 입력 후에, 예컨대 디스플레이된 맵의 각각의 단부에서 위 또는 결장을 나타내는 아이콘을 사용자가 클릭한 후에 그에 상응하여 디스플레이될 수 있다. 그러한 해부학적 전이 이미지들은 (예컨대, SB로부터 결장으로의) 해부학적 전이에 인접하게 위치되는 것으로 식별되는 다수의 이미지들을 포함할 수 있다. 전이 이미지들의 디스플레이를 위한 하나의 옵션은, 이미지들의 서브세트(예컨대, 제1 레벨 이미지들) 내의 각각의 전이에 대한 하나의 이미지 및 이어서, 하나 이상의 대응하는 이미지들(예컨대, 제2 레벨 이미지들)로서 전이를 표현하는 복수의 이미지들을 포함하는 것일 수 있다. 이어서, 이미지들의 서브세트 중의 이미지들이 관심 부분의 외부에서(예컨대, 양쪽 단부들에서) 맵에 나타날 수 있다. 다른 옵션은 관심 부분의 양 단부들에서 맵 위의 작은 컬러 바에 그러한 이미지들을 표현하거나, 또는 이미지들의 디스플레이를 포함하는 윈도우 또는 스크린을 수신하기 위해 관심 부분의 단부에서 사용자가 아이콘들(예컨대, 결장 스터디에서의 SB 아이콘 및 화장실 아이콘)을 클릭하게 하는 것이다.

일부 실시예들에서, 스터디의 디폴트 뷰는, 사용자가 먼저 제1 레벨 이미지들을 신속하게 검토할 수 있게 하기 위해, 이미지들의 서브세트의 매트릭스 디스플레이를 보여줄 수 있다. 이어서, 사용자는 스터디의 다른 뷰, 예컨대 다른 곳에 기술된 바와 같은 "캐러셀 디스플레이"로 스위칭할 수 있다. 예를 들어, 매트릭스 디스플레이에서 이미지를 클릭하는 것은 이미지들의 서브세트의 캐러셀 디스플레이를 포함하는 다른 스터디 뷰의 디스플레이를 개시할 것이며, 여기서 클릭된 이미지는 캐러셀의 중심 이미지(예컨대, 일종의 줌인 뷰)이다. 이는, 스터디가 상대적으로 더 많은 이미지들(예컨대, 수백 개의 이미지들)을 포함할 때 가장 유익할 수 있다. 일부 실시예들에서, 매트릭스 뷰는 또한 제2 레벨 이미지들 및/또는 다른 추가 정보의 디스플레이를 포함할 수 있다.

일부 실시예들에서, 기계 학습, 인공 지능 또는 AI가 전암성 결장 폴립(precancerous colonic polyp)들, 및 소장 병리들, 또는 다른 특징부들을 자동으로 식별하고, 국부화하고, 크기설정하는 데 사용될 수 있다. 실시예들은 NLH(Nodular Lymphoid Hyperplasia), 궤양, 혈관 확장(angioectasia), 짓무름(erosion), 혈액(blood), 병변(lesion) 또는 염증성 협착(inflammatory stricture)과 같은 소정 특징부들 또는 병리들에 대한 "검출기들" 로서 기능하는 모듈들을 사용하거나 실행시킬 수 있다.

검토 동안의 사용자 입력에 기초하여, 사용자 검토 후에 보고서가 생성될 수 있다.

도 11은 본 발명의 실시예들에 따른 방법의 흐름도를 보여준다. 도 11에서의 동작들은 도 1에 도시된 바와 같은 시스템을 사용할 수 있지만, 다른 시스템들을 사용할 수도 있다.

동작(1100)에서, 대상 또는 환자는, 예를 들어 하나 이상의 이미저들 또는 이미징 디바이스들(예컨대, 디지털 이미저 또는 카메라), 송신기, 및 전원 및 안테나와 같은 다른 유닛들을 포함하는 경구형 캡슐을 삼키거나 섭취할 수 있다.

동작(1110)에서, 캡슐은 대상의 GIT 또는 GIT의 일부분을 (예컨대, 대상의 자연 연동운동에 의해) 횡단하여, 이미지들을 (예컨대, 무선 송신기를 통해) 외부 수신기로 송신할 수 있다.

동작(1120)에서, 캡슐에 의해 송신된 이미지들은 외부 수신기에 의해 수신되고(그러나, 이미지들을 전송하는 다른 방법들이 사용될 수 있음), 기록되고, 프로세싱될 수 있다. 장비의 다양한 조합들이 이미지들을 수신하고 저장하는 데 사용될 수 있다.

동작(1130)에서, 일 실시예에서, 관심 이미지들의 세트는, 예를 들어 제1 선택 방법을 사용하여, 예컨대 하나 이상의 프로세서들에 의해, 자동으로 식별되거나 선택될 수 있다. 각각의 관심 이미지는 자동으로 식별된 상이한 특징부 또는 병리를 보여줄 수 있다. 이미지들의 그룹들이 안출될 수 있고, 각각의 그룹은 관심있는 하나의 제1 레벨 이미지 및 관심있는 제1 레벨에 있지 않은 이미지들의 대응하는 세트를 포함하지만, 그러한 그룹에 대한 하나의 대응하는 제1 레벨 이미지와 동일한 특징부를 보여준다. 각각의 제1 레벨 이미지는 그룹 내의 "가장 대표적인" 이미지로서 식별될 수 있다.

동작(1140)에서, 제1 레벨 이미지들은 정지(예컨대, 비(non)-비디오) 이미지들로서 스터디 디폴트 뷰의 메인 또는 디폴트 뷰에서 (예컨대, 그러한 디스플레이를 시작하는 임의의 사용자 입력 또는 커맨드 없이) 모니터 또는 디스플레이 디바이스 상에 디스플레이될 수 있다. 제1 레벨 이미지들은 생체 내 이미지들의 스트림 중의 이미지들의 서브세트일 수 있다. 사용자는 제1 레벨 이미지들을 검토할 수 있다. 이미지들의 제1 레벨 서브세트는 이미지들의 수신된 스트림을 표현할 수 있다.

동작(1150)에서, 사용자는 제2 레벨 이미지들을 디스플레이하기 위한 입력을 제공할 수 있고, 시스템 또는 GUI는 이를 수신할 수 있는데, 여기서 디스플레이 디바이스 또는 모니터 상에 이미지들의 서브세트 중 현재 디스플레이되는 이미지에 대응하는 하나 이상의 추가 이미지들이 디스플레이될 수 있다. 예를 들어, 선택된 또는 클릭된 제1 레벨 이미지에 대응하는 그룹 내의 이미지들이 디스플레이될 수 있다. 그룹 내의 하나 이상의 추가 이미지들은 제2 선택 방법에 따라 생체 내 이미지들의 수신된 스트림으로부터 자동으로 선택되었을 수 있다. 제2 선택 방법은 생체 내 이미지들의 스트림 중의 이미지들과 현재 디스플레이된 이미지 사이의 관계에 기초할 수 있다.

동작(1160)에서, 일 실시예에서, 사용자는 제2 레벨 이미지들의 디스플레이를 변경할 수 있는데; 예컨대, 이미지들이 움직이는 이미지로서 디스플레이되게 하거나, 예컨대 스크롤 휠을 사용하여 정지 방식으로 이미지들의 그룹을 통해 전방 및 후방으로 이동하게 한다. 스터디는, 예컨대 캐러셀 모드, 매트릭스 모드, 또는 다른 모드로 디스플레이될 수 있다.

동작(1170)에서, 보고서가 생성되거나 사용자에게 디스플레이될 수 있다. 보고서는 사용자에 의해 선택되는 디스플레이된 이미지들로부터의 이미지들, 및 가능하게는 사용자에 의해 삽입된 코멘트들과 같은 다른 정보를 포함할 수 있다.

다른 또는 상이한 동작들이 사용될 수 있다.

실시예들은 캡슐 내시경검사 시술의 기술, 및 스터디, 의료 이미지 디스플레이, 및 특히 의학적 진단의 생성의 기술을 개선시킬 수 있고, 따라서 또한 의료 전문가가 정보를 진단하고 더 좋은 그리고 더 효율적인 치료를 제공하는 능력을 개선시킬 수 있다. 예를 들어, 의료 이미지 프로세싱 및 디스플레이 기술은, 의사가 GIT 내의 관심 영역들을 더 신속하게 찾고, 보고, 분석하게 하는 시스템들을 제공함으로써 개선될 수 있으며, 이는 종래의 의료 기술과 비교할 때 의사들의 결정들을 지원하고 더 잘하게 할 수 있는 자동 분석을 제공한다. 예를 들어, 종래의 GIT 이미징 시스템들에서, 의사는 너무 긴 비디오를 보도록 강요받았을 수 있다. 또한, 관심 특징부들의 어떠한 자동 식별, 국부화 및/또는 크기설정도 제공되지 않는다.

본 발명의 여러 실시예들이 상기 도면들에 도시되어 있지만, 본 발명이 그들에 제한되는 것으로 의도되지 않는데, 이는 본 발명이 당해 기술이 허용하는 범주 내에서 광범위하고 본 명세서도 마찬가지로 판독되도록 의도되기 때문이다. 따라서, 상기 설명은 제한하는 것으로 해석되어서는 안 되며, 단지 특정 실시예들의 예시들로서 해석되어야 한다.

본 발명에 따른 실시예들과 관련하여 전술되고/되거나 도면들에 도시된 대부분의 원리들, 요소들 및 특징부들은 그들이 기술되고/도시되는 것과 연관되는 실시예들에 제한되지 않으며, 당업자에 의해 적절한 것으로 간주되는 임의의 조합으로, 서로 또는 본 발명에 따른 임의의 다른 실시예들에 독립적으로, 필요한 부분만 약간 수정하여 적용될 수 있음이 명확해야 한다.

Claims (55)

1. 사용자의 검토를 위한 캡슐 내시경검사 시술의 스터디(study)를 디스플레이하기 위한 방법으로서,
   상기 캡슐 내시경검사 시술은 대상의 위장관(gastrointestinal tract, GIT)의 적어도 관심 부분의 생체 내 이미지들의 스트림을 캡처하는 것을 포함하고, 상기 방법은, 하나 이상의 하드웨어 프로세서들을 사용하여:
   상기 사용자의 검토를 위한 상기 생체 내 이미지들의 스트림 중의 이미지들의 서브세트를 디스플레이 디바이스 상에 디스플레이하는 단계 - 상기 이미지들의 서브세트는 생체 내 이미지들의 상기 캡처된 스트림을 표현하고, 상기 이미지들의 서브세트는 제1 선택 방법에 따라 상기 생체 내 이미지들의 스트림으로부터 자동으로 선택됨 -;
   사용자 입력을 수신할 시에, 상기 이미지들의 서브세트 중 현재 디스플레이된 이미지에 대응하는 하나 이상의 추가 이미지들을 상기 디스플레이 디바이스 상에 디스플레이하는 단계 - 상기 하나 이상의 추가 이미지들은 제2 선택 방법에 따라 상기 생체 내 이미지들의 스트림으로부터 자동으로 선택되고, 상기 제2 선택 방법은 상기 생체 내 이미지들의 스트림 중의 이미지들과 상기 현재 디스플레이되는 이미지 사이의 관계에 기초함 -; 및
   상기 사용자에 의해 선택되는 상기 디스플레이된 이미지들로부터의 이미지들을 포함하는 보고서를 생성하는 단계를 포함하는, 방법.
2. 제1항에 있어서, 상기 이미지들의 서브세트는 상기 스터디의 디폴트 디스플레이에서 정지 방식으로 디스플레이되는, 방법.
3. 제1항에 있어서, 상기 이미지들의 서브세트를 디스플레이하는 단계는, 상기 서브세트 중의 다수의 이미지들을 동시에 디스플레이하는 단계를 포함하고, 상기 다수의 이미지들은 상기 캡슐 내시경검사 시술에 사용되는 캡슐 디바이스의 단일 이미징 디바이스에 의해 캡처되는, 방법.
4. 제3항에 있어서, 상기 서브세트 중의 상기 동시에 디스플레이되는 다수의 이미지들은 캐러셀(carousel) 또는 매트릭스의 레이아웃으로 디스플레이되는, 방법.
5. 제3항에 있어서, 상기 서브세트 중의 상기 동시에 디스플레이되는 다수의 이미지들은 수평 캐러셀의 레이아웃으로 디스플레이되어, 어떠한 이미지도 다른 이미지를 커버하지 않도록 하는, 방법.
6. 제3항에 있어서, 상기 서브세트 중의 상기 동시에 디스플레이되는 다수의 이미지들은 수평 캐러셀의 레이아웃으로 디스플레이되어, 중심 이미지가 다른 동시에 디스플레이되는 이미지들의 크기들 중 임의의 것보다 더 큰 크기의 것이도록 하는, 방법.
7. 제1항에 있어서, 상기 제2 선택 방법이 기초로 하는 상기 관계는, 동일한 특징부의 적어도 일부분을 포함하는 것으로 식별되는 이미지들, 동일한 유형의 특징부의 적어도 일부분을 포함하는 것으로 식별되는 이미지들, 시간적으로 근접하여 캡처되었던 이미지들, 상기 대상의 GIT의 적어도 일부분을 따라 인접하게 국부화되는 이미지들, 및 이들의 조합들로 이루어진 그룹으로부터 선택되는, 방법.
8. 제7항에 있어서, 상기 특징부는 위장(GI) 관 내의 관심 특징부인, 방법.
9. 제1항에 있어서, 상기 하나 이상의 하드웨어 프로세서를 사용하여:
   상기 제1 선택 방법에 따라 상기 이미지들의 서브세트를 선택하는 단계; 및
   상기 이미지들의 서브세트의 적어도 일부분의 각각의 이미지에 대해, 상기 제2 선택 방법에 따라 상기 생체 내 이미지들의 스트림으로부터 상기 하나 이상의 대응하는 추가 이미지들을 선택하는 단계를 추가로 포함하는, 방법.
10. 제1항에 있어서, 상기 하나 이상의 추가 이미지들은 상기 이미지들의 선택된 서브세트에 포함되지 않는 상기 이미지들의 스트림 중의 적어도 하나의 이미지를 포함하는, 방법.
11. 제1항에 있어서, 상기 하나 이상의 추가 이미지들은 상기 이미지들의 선택된 서브세트에 포함되지 않는 상기 이미지들의 스트림 중의 이미지들만을 포함하는, 방법.
12. 제1항에 있어서, 상기 제2 선택 방법이 기초로 하는 상기 관계는 상기 이미지들의 서브세트 중의 상이한 이미지들에 대한 상이한 대응하는 하나 이상의 추가 이미지들을 생성하는, 방법.
13. 제1항에 있어서, 상기 하나 이상의 추가 이미지들은 상기 스터디의 디폴트 디스플레이에서 정지 방식으로 디스플레이되는, 방법.
14. 제1항에 있어서, 상기 하나 이상의 추가 이미지들은 상기 대응하는 현재 디스플레이되는 이미지와 동일한 윈도우에 디스플레이되는, 방법.
15. 제1항에 있어서, 상기 하나 이상의 하드웨어 프로세서들을 사용하여, 적어도 상기 선택된 이미지들의 서브세트에 대응하고 상기 대상의 GIT의 적어도 상기 관심 부분을 표현하는 맵을 디스플레이하는 단계를 추가로 포함하고, 상기 맵은 상기 대상의 GIT의 상기 적어도 관심 부분을 따른 그들의 추정된 위치에 따라 상기 이미지들의 서브세트 내의 상기 이미지들을 표현하는 국부화된 이미지 표시들을 포함하는, 방법.
16. 제15항에 있어서, 현재 디스플레이되고 초점이 맞는(in-focus) 상기 이미지들의 서브세트 중의 상기 이미지의 표시가 강조되는, 방법.
17. 제15항에 있어서, 상기 하나 이상의 하드웨어 프로세서들을 사용하여:
    상기 맵 내의 이미지 표시의 사용자의 선택을 수신하는 단계; 및
    상기 선택된 이미지 표시에 의해 표현되는 상기 이미지를 디스플레이하는 단계를 추가로 포함하는, 방법.
18. 제1항에 있어서, 상기 이미지들의 서브세트는 상기 스터디의 디폴트 디스플레이에서 매트릭스 레이아웃으로 디스플레이되는, 방법.
19. 제1항에 있어서, 상기 하나 이상의 하드웨어 프로세서들을 사용하여, 사용자 입력 시에, 상기 이미지들의 서브세트로부터 자동으로 선택된 미리정의된 개수의 이미지들을 디스플레이하는 단계를 추가로 포함하고, 상기 미리정의된 개수의 이미지들은 제3 선택 방법에 따라 상기 이미지들의 서브세트로부터 선택되는, 방법.
20. 제19항에 있어서, 상기 제3 선택 방법에 따라, 가장 관심있는 것으로 추정되는 상기 이미지들의 서브세트 중의 이미지들이 선택되는, 방법.
21. 제1항에 있어서, 적어도 상기 제1 선택 방법은 딥 러닝(deep learning) 기법들에 기초하는, 방법.
22. 제1항에 있어서, 상기 하나 이상의 하드웨어 프로세서들을 사용하여, 관심 특징부의 적어도 일부분을 포함할 것으로 의심되는 디스플레이된 이미지 내의 위치의 표시를 디스플레이하는 단계를 추가로 포함하는, 방법.
23. 제1항에 있어서,
    상기 대상의 GIT의 적어도 관심 부분은 세그먼트들로 분할되고;
    상기 이미지들의 서브세트 중의 이미지들은 상기 세그먼트들에 따라 상기 대상의 GIT의 적어도 상기 관심 부분을 따라 국부화되고,
    상기 방법은, 상기 하나 이상의 하드웨어 프로세서들을 사용하여, 상기 이미지들의 서브세트 중 상기 현재 디스플레이되는 이미지들이 위치되는 상기 세그먼트들에 표시를 디스플레이하는 단계를 추가로 포함하는, 방법.
24. 제23항에 있어서, 상기 하나 이상의 하드웨어 프로세서들을 사용하여, 상기 세그먼트들에 따라 상기 이미지들의 세트를 디스플레이하는 단계를 추가로 포함하는, 방법.
25. 제1항에 있어서, 상기 하나 이상의 하드웨어 프로세서들을 사용하여, 상기 이미지들의 캡처된 스트림 중의 이미지들의 추정된 세정(cleansing) 레벨의 표시를 디스플레이하는 단계를 추가로 포함하는, 방법.
26. 제1항에 있어서, 상기 하나 이상의 하드웨어 프로세서를 사용하여:
    디스플레이된 이미지에서 식별된 특징부의 크기를 추정하는 단계; 및
    상기 추정된 크기의 표시를 디스플레이하는 단계를 추가로 포함하는, 방법.
27. 제1항에 있어서, 상기 하나 이상의 하드웨어 프로세서를 사용하여:
    상기 GIT의 상기 적어도 관심 부분을 따라 상기 이미지들의 서브세트에서 식별된 특징부의 정도를 추정하는 단계; 및
    상기 추정된 정도에 대한 표시를 디스플레이하는 단계를 추가로 포함하는, 방법.
28. 제1항에 있어서, 상기 하나 이상의 하드웨어 프로세서를 사용하여, 사용자 입력 시에, 상기 GIT의 적어도 관심 부분의 하나의 해부학적 섹션으로부터 다른 해부학적 섹션으로의 전이를 표현하는 상기 생체 내 이미지들의 스트림으로부터 선택되는 복수의 이미지들을 디스플레이하는 단계를 추가로 포함하는, 방법.
29. 제1항에 있어서, 상기 스터디를 디스플레이하는 단계를 포함하고, 상기 스터디는 상기 이미지들의 서브세트 및 상기 서브세트 내의 이미지들에 대응하는 상기 추가 이미지들 이외에, 상기 생체 내 이미지들의 캡처된 스트림 중의 어떠한 이미지들도 포함하지 않는, 방법.
30. 제1항에 있어서, 상기 하나 이상의 하드웨어 프로세서들을 사용하여, 사용자 입력에 기초하여 상기 이미지들의 서브세트의 디스플레이를 필터링하는 단계를 추가로 포함하는, 방법.
31. 제1항에 있어서, 상기 제1 선택 방법에 따라,
    관심 특징부를 포함하는 것으로 식별된 이미지들이 선택되는, 방법.
32. 제31항에 있어서, 상기 관심 특징부는 병리, 이물질(foriegn body), 이형물(anomaly), 해부학적 특징부 및 이들의 조합으로 이루어진 그룹으로부터 선택되는, 방법.
33. 방법으로서,
    적어도 하나의 하드웨어 프로세서를 사용하여:
    캡슐 내시경검사 시술을 통해 캡처된 대상의 GIT의 적어도 관심 부분의 생체 내 이미지들의 스트림으로부터 자동으로 선택된 이미지들의 서브세트를 수신하는 단계 - 상기 이미지들의 서브세트 중의 이미지들은 제1 선택 방법에 기초하여 선택됨 -;
    상기 자동으로 선택된 이미지들의 서브세트를 정지 방식으로 디스플레이 디바이스 상에 디스플레이하는 단계;
    사용자 입력을 수신할 시에, 현재 디스플레이되는 상기 자동으로 선택된 이미지들의 서브세트 중의 이미지와 관련하여 추가 정보를 디스플레이하는 단계; 및
    상기 사용자에 의해 선택되는 상기 디스플레이된 이미지들로부터의 이미지들을 포함하는 보고서를 생성하는 단계를 포함하는, 방법.
34. 제33항에 있어서, 상기 추가 정보는 상기 생체 내 이미지들의 스트림으로부터 그리고 제2 선택 방법에 따라 자동으로 선택되는 하나 이상의 추가 이미지들을 포함하는, 방법.
35. 제33항에 있어서, 상기 이미지들의 서브세트를 디스플레이하는 단계는 상기 서브세트 중의 다수의 이미지들을 동시에 디스플레이하는 단계를 포함하고, 상기 다수의 이미지들은 상기 캡슐 내시경검사 시술에 사용되는 캡슐 디바이스의 단일 이미징 디바이스에 의해 캡처되는, 방법.
36. 제34항에 있어서, 상기 하나 이상의 추가 이미지들은 상기 이미지들의 선택된 서브세트에 포함되지 않는 상기 이미지들의 스트림 중의 적어도 하나의 이미지를 포함하는, 방법.
37. 제33항에 있어서, 상기 하나 이상의 추가 이미지들은 상기 대응하는 현재 디스플레이되는 이미지와 동일한 윈도우에 디스플레이되는, 방법.
38. 제33항에 있어서, 상기 하나 이상의 하드웨어 프로세서들을 사용하여, 적어도 상기 선택된 이미지들의 서브세트에 대응하고 상기 대상의 GIT의 적어도 상기 관심 부분을 표현하는 맵을 디스플레이하는 단계를 추가로 포함하고, 상기 맵은 상기 대상의 GIT의 상기 적어도 관심 부분을 따른 그들의 추정된 위치에 따라 상기 이미지들의 서브세트 내의 이미지들을 표현하는 국부화된 이미지 표시들을 포함하는, 방법.
39. 제33항에 있어서,
    상기 대상의 GIT의 적어도 관심 부분은 세그먼트들로 분할되고;
    상기 이미지들의 서브세트 중의 이미지들은 상기 세그먼트들에 따라 상기 대상의 GIT의 적어도 상기 관심 부분을 따라 국부화되고,
    상기 방법은, 상기 하나 이상의 하드웨어 프로세서들을 사용하여, 상기 이미지들의 서브세트 중 상기 현재 디스플레이되는 이미지들이 위치되는 상기 세그먼트들에 표시를 디스플레이하는 단계를 추가로 포함하는, 방법.
40. 제33항에 있어서, 상기 하나 이상의 하드웨어 프로세서들을 사용하여, 상기 생체 내 이미지들의 캡처된 스트림 중의 이미지들의 상기 세정 레벨의 표시를 디스플레이하는 단계를 추가로 포함하는, 방법.
41. 제33항에 있어서, 상기 제1 선택 방법에 따라,
    관심 특징부를 포함하는 것으로 식별된 이미지들이 선택되는, 방법.
42. 사용자의 검토를 위한 캡슐 내시경검사 시술의 스터디를 생성하기 위한 방법으로서,
    상기 캡슐 내시경검사 시술은 대상의 GIT의 적어도 관심 부분의 생체 내 이미지들의 스트림을 캡처하는 것을 포함하고, 상기 방법은, 하나 이상의 하드웨어 프로세서들을 사용하여:
    제1 선택 방법에 따라 상기 생체 내 이미지들의 캡처된 스트림으로부터 이미지들의 서브세트를 선택하는 단계 - 상기 이미지들의 선택된 서브세트는 상기 생체 내 이미지들의 캡처된 스트림을 표현함 -;
    상기 이미지들의 서브세트의 적어도 일부분의 각각의 이미지에 대해, 제2 선택 방법에 따라 상기 생체 내 이미지들의 스트림으로부터 하나 이상의 대응하는 추가 이미지들을 선택하는 단계; 및
    상기 캡슐 내시경검사 시술의 스터디를 생성하는 단계를 포함하고, 상기 스터디는 상기 이미지들의 선택된 서브세트 및 추가 정보를 포함하고, 상기 추가 정보는 상기 이미지들의 서브세트의 적어도 일부분의 각각의 이미지에 대응하는 상기 선택된 하나 이상의 추가 이미지들을 포함하는, 방법.
43. 제42항에 있어서, 상기 하나 이상의 하드웨어 프로세서들을 사용하여, 사용자의 검토를 위해 디스플레이 디바이스 상에 상기 스터디를 디스플레이하는 단계를 추가로 포함하는, 방법.
44. 제43항에 있어서, 상기 스터디를 디스플레이하는 단계는:
    상기 이미지들의 선택된 서브세트를 디스플레이 디바이스 상에 디스플레이하는 단계; 및
    사용자 입력 시에, 상기 이미지들의 서브세트 중 현재 디스플레이된 이미지에 대응하는 상기 하나 이상의 추가 이미지들을 상기 디스플레이 디바이스 상에 디스플레이하는 단계를 포함하는, 방법.
45. 제42항에 있어서, 상기 스터디를 생성하는 단계는, 상기 이미지들의 서브세트 중의 이미지들에 대응하는 상기 추가적인 하나 이상의 이미지들에 더하여, 상기 GIT의 적어도 상기 관심 부분의 세그먼트들로의 분할, 상기 GIT의 적어도 상기 관심 부분을 따른 상기 이미지들의 스트림 중의 이미지들의 위치들, 상기 GIT의 적어도 상기 관심 부분을 따른 상기 이미지들의 서브세트 중의 이미지들의 표시들을 포함하는 상기 GIT의 적어도 상기 관심 부분을 표현하는 맵, 제3 선택 방법에 따라 상기 이미지들의 서브세트로부터 선택되는 복수의 이미지들, 이미지들에서의 관심 특징부들의 표시들, 세정 레벨의 표시, 관심 특징부의 추정된 크기의 표시, 관심 특징부의 정도의 표시, 상기 GIT의 적어도 상기 관심 부분의 해부학적 섹션들 사이의 전이를 표현하는 상기 생체 내 이미지들의 스트림 중의 이미지들의 선택, 및 이들의 조합으로 이루어진 그룹으로부터 선택된 추가 정보를 생성하는 단계를 포함하는, 방법.
46. 제42항에 있어서, 상기 제2 선택 방법이 기초로 하는 상기 관계는, 동일한 특징부의 적어도 일부분을 포함하는 것으로 식별되는 이미지들, 동일한 유형의 특징부의 적어도 일부분을 포함하는 것으로 식별되는 이미지들, 시간적으로 근접하여 캡처되었던 이미지들, 상기 대상의 GIT의 적어도 일부분을 따라 인접하게 국부화되는 이미지들, 및 이들의 조합들로 이루어진 그룹으로부터 선택되는, 방법.
47. 제42항에 있어서, 상기 하나 이상의 추가 이미지들은 상기 이미지들의 선택된 서브세트에 포함되지 않는 상기 이미지들의 스트림 중의 적어도 하나의 이미지를 포함하는, 방법.
48. 제42항에 있어서, 상기 하나 이상의 추가 이미지들은 상기 이미지들의 선택된 서브세트에 포함되지 않는 상기 이미지들의 스트림 중의 이미지들만을 포함하는, 방법.
49. 제42항에 있어서, 상기 제2 선택 방법이 기초로 하는 상기 관계는 상기 이미지들의 서브세트 중의 상이한 이미지들에 대한 상이한 대응하는 하나 이상의 추가 이미지들을 생성하는, 방법.
50. 제42항에 있어서, 적어도 상기 제1 선택 방법은 딥 러닝 기법들에 기초하는, 방법.
51. 제42항에 있어서, 상기 제1 선택 방법에 따라,
    관심 특징부를 포함하는 것으로 식별된 이미지들이 선택되는, 방법.
52. 제42항에 있어서, 상기 제1 선택 방법 및 상기 제2 선택 방법은 각각 하나 이상의 선택 규칙들을 포함하는, 방법.
53. 사용자의 검토를 위한 캡슐 내시경 시술의 스터디를 디스플레이하기 위한 시스템으로서,
    상기 캡슐 내시경 시술은 대상의 GIT의 적어도 관심 부분의 생체 내 이미지들의 스트림을 캡처하는 것을 포함하고, 상기 시스템은,
    하나 이상의 프로세서들;
    상기 프로세서에 의해 실행될 때, 상기 프로세서로 하여금 제1항 내지 제41항 중 어느 한 항의 방법들을 실행하게 하는 명령어들이 저장되어 있는 비일시적 저장 디바이스; 및
    상기 스터디를 디스플레이하도록 구성된 디스플레이 디바이스를 포함하는, 시스템.
54. 사용자의 검토를 위한 캡슐 내시경 시술의 스터디를 생성하기 위한 시스템으로서,
    상기 캡슐 내시경 시술은 대상의 GIT의 적어도 관심 부분의 생체 내 이미지들의 스트림을 캡처하는 것을 포함하고, 상기 시스템은,
    하나 이상의 프로세서들; 및
    상기 프로세서에 의해 실행될 때, 상기 프로세서로 하여금 제42항 내지 제52항 중 어느 한 항의 방법들을 실행하게 하는 명령어들이 저장되어 있는 비일시적 저장 디바이스를 포함하는, 시스템.
55. 제54항에 있어서, 상기 캡슐 내시경검사 시술을 수행하기 위해 추가로 구성되고, 상기 시스템은 캡슐 디바이스를 추가로 포함하고, 상기 캡슐 디바이스는 상기 캡슐 디바이스가 환자의 GIT의 적어도 관심 부분을 횡단하는 동안 상기 생체 내 이미지들의 스트림을 캡처하도록 구성된 적어도 하나의 이미징 디바이스를 포함하고, 상기 생체 내 이미지들의 캡처된 스트림은 상기 비일시적 저장 디바이스에 제공되고, 상기 비일시적 저장 디바이스는 상기 제공된 생체 내 이미지들의 스트림을 수신하고 저장하도록 추가로 구성되는, 시스템.

Images