KR101969602B1 - 3d 데이터 해석 장치, 3d 데이터 해석 방법 및 기록 매체 - Google Patents

3d 데이터 해석 장치, 3d 데이터 해석 방법 및 기록 매체 Download PDF

Info

Publication number
KR101969602B1
KR101969602B1 KR1020137013053A KR20137013053A KR101969602B1 KR 101969602 B1 KR101969602 B1 KR 101969602B1 KR 1020137013053 A KR1020137013053 A KR 1020137013053A KR 20137013053 A KR20137013053 A KR 20137013053A KR 101969602 B1 KR101969602 B1 KR 101969602B1
Authority
KR
South Korea
Prior art keywords
stereoscopic image
data
stereoscopic
image
observed
Prior art date
Application number
KR1020137013053A
Other languages
English (en)
Other versions
KR20130136476A (ko
Inventor
?스케 스즈키
아츠오 후지마키
겐지 쇼다
Original Assignee
소니 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 소니 주식회사 filed Critical 소니 주식회사
Publication of KR20130136476A publication Critical patent/KR20130136476A/ko
Application granted granted Critical
Publication of KR101969602B1 publication Critical patent/KR101969602B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N15/00—Investigating characteristics of particles; Investigating permeability, pore-volume, or surface-area of porous materials
    • G01N15/10—Investigating individual particles
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N15/00—Investigating characteristics of particles; Investigating permeability, pore-volume, or surface-area of porous materials
    • G01N15/10—Investigating individual particles
    • G01N15/14—Electro-optical investigation, e.g. flow cytometers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/20—Drawing from basic elements, e.g. lines or circles
    • G06T11/206—Drawing of charts or graphs
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformation in the plane of the image
    • G06T3/40—Scaling the whole image or part thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformation in the plane of the image
    • G06T3/60—Rotation of a whole image or part thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/275—Image signal generators from 3D object models, e.g. computer-generated stereoscopic image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/282—Image signal generators for generating image signals corresponding to three or more geometrical viewpoints, e.g. multi-view systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/302—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
    • H04N13/31—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays using parallax barriers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/332—Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • H04N13/339—Displays for viewing with the aid of special glasses or head-mounted displays [HMD] using spatial multiplexing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/349—Multi-view displays for displaying three or more geometrical viewpoints without viewer tracking
    • H04N13/351—Multi-view displays for displaying three or more geometrical viewpoints without viewer tracking for displaying simultaneously
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N15/00—Investigating characteristics of particles; Investigating permeability, pore-volume, or surface-area of porous materials
    • G01N15/10—Investigating individual particles
    • G01N2015/1006—Investigating individual particles for cytology
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N15/00—Investigating characteristics of particles; Investigating permeability, pore-volume, or surface-area of porous materials
    • G01N15/10—Investigating individual particles
    • G01N15/14—Electro-optical investigation, e.g. flow cytometers
    • G01N2015/1477—Multiparameters
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00—Indexing scheme for image data processing or generation, in general
    • G06T2200/04—Indexing scheme for image data processing or generation, in general involving 3D image data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00—Indexing scheme for image data processing or generation, in general
    • G06T2200/08—Indexing scheme for image data processing or generation, in general involving all processing steps from image acquisition to 3D model generation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2210/00—Indexing scheme for image generation or computer graphics
    • G06T2210/56—Particle system, point based geometry or rendering

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Chemical & Material Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • Analytical Chemistry (AREA)
  • Health & Medical Sciences (AREA)
  • Immunology (AREA)
  • Pathology (AREA)
  • Biochemistry (AREA)
  • Dispersion Chemistry (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Graphics (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Processing Or Creating Images (AREA)
  • Investigating Or Analysing Materials By Optical Means (AREA)
  • Investigating, Analyzing Materials By Fluorescence Or Luminescence (AREA)
  • Image Processing (AREA)
  • Automatic Analysis And Handling Materials Therefor (AREA)

Abstract

본 발명은 다수의 히스토그램 또는 사이토그램을 참조하거나, 3차원 분포도를 상기하거나 하지 않고, 해석 대상으로 하는 미소 입자 및 미소 입자 소집단을 분포도 상에서 용이하게 또한 직감적으로 특정할 수 있는 3D 데이터 해석 장치 및 3D 데이터 해석 방법 및 3D 데이터 해석 프로그램에 관한 것이다. 미소 입자의 측정 데이터를 보존하는 데이터 저장부와, 상기 측정 데이터로부터 독립된 3종의 변수를 선택하는 입력부와, 상기 3종의 변수를 좌표축으로 하는 좌표 공간 내에 있어서의 위치와 도형을 계산하여, 상기 미소 입자의 특성 분포를 나타내는 3D 입체 화상을 작성하는 데이터 처리부와, 상기 3D 입체 화상을 표시하는 표시부를 갖는 3D 데이터 해석 장치를 제공한다.

Description

3D 데이터 해석 장치, 3D 데이터 해석 방법 및 기록 매체{3D DATA ANALYSIS APPARATUS, 3D DATA ANALYSIS METHOD, AND RECORDING MEDIUM}
본 발명은 3D 데이터 해석 장치 및 3D 데이터 해석 방법 및 3D 데이터 해석 프로그램에 관한 것이다. 보다 상세하게는, 미소 입자의 측정 데이터를 3D 입체 화상에 의해 표시하는 3D 데이터 해석 장치 등에 관한 것이다.
세포, 미생물 및 리포솜 등의 생체 관련 입자나, 라텍스 입자, 겔 입자 및 공업용 입자 등의 합성 입자 등의 미소 입자를 해석하기 위하여, 미소 입자의 분산액을 유로(流路) 내에 도입하여, 미소 입자를 광학적, 전기적 또는 자기적으로 측정하는 미소 입자 측정 장치가 사용되고 있다.
일례로서, 합성 입자를 크기나 형상에 따라 판별하는 파티클 애널라이저(particle analyzer)가 있다. 파티클 애널라이저로 측정 가능한 파라미터(변수)에는, 미소 입자의 원소 조성 및 입경 등이 있다.
또한, 생체 관련 입자의 해석에서는, 플로우 사이토미터(flow cytometer)(플로우 사이토메트리(flow cytometry))가 사용되고 있다. 플로우 사이토미터로 측정 가능한 파라미터에는, 미소 입자의 전방 산란광(FS), 측방 산란(SS), 형광(FL) 및 임피던스 등이 있다. 전방 산란광(FS), 측방 산란(SS) 및 형광(FL)은 세포나 미생물(이하, 간단히 「세포」라고 함)의 광학적 특성을 나타내는 파라미터로서, 임피던스는 세포의 전기적 특성을 나타내는 파라미터로서 사용된다.
구체적으로는, 우선, 전방 산란광은, 레이저광의 축에 대하여 전방향의 작은 각도로 산란하는 광이며, 세포의 표면에서 발생하는 레이저광의 산란광이나 회절광, 굴절광을 포함하여 이루어진다. 전방 산란광은, 주로 세포의 크기를 나타내는 파라미터로서 사용되고 있다. 이어서, 측방 산란은, 레이저광의 축에 대하여 약 90도의 각도로 산란하는 광이며, 세포의 내부의 과립이나 핵 등에서 발생하는 레이저광의 산란광이다. 측방 산란은, 주로 세포의 내부 구조를 나타내는 파라미터로서 사용되고 있다. 또한, 형광은, 세포에 표식된 형광 색소로부터 발생하는 광이며, 형광 색소 표지 항체가 인식하는 세포 표면 항원의 유무나 형광 색소가 결합한 핵산의 양 등을 나타내는 파라미터로서 사용되고 있다. 또한, 임피던스는, 전기 저항법에 의해 측정되며, 세포의 용적을 나타내는 파라미터로서 사용되고 있다.
플로우 사이토미터에 있어서의 측정 데이터의 해석을 위해, 이들 측정 파라미터를 축으로 취하고 각 세포의 측정값을 플롯(plot)함으로써, 세포 집단 중에서의 세포의 특성 분포를 도시하는 도면을 작성하여 표시하는 데이터 해석 장치가 사용되고 있다. 측정 파라미터를 1개로 한 1차원 분포도는 히스토그램이라고도 칭해지며, 측정 파라미터를 X축으로 취하고, 세포 수(카운트)를 Y축으로 취한 그래프로서 작성된다. 또한, 측정 파라미터를 2개로 한 2차원 분포도는 사이토그램이라고도 칭해지며, 한쪽 측정 파라미터를 X축으로 하고, 다른 한쪽 측정 파라미터를 Y축으로 한 좌표면 내에, 각 세포를 그 측정값에 기초하여 플롯해 감으로써 작성된다.
샘플로 하는 세포 집단 중에는, 해석의 대상으로 하지 않는 불필요한 세포도 포함되어 있기 때문에, 측정 데이터의 해석은, 샘플로 하는 세포 집단 중에서 해석 대상으로 하는 세포 소집단을 골라낸 후에 행해지고 있다. 해석 대상으로 하는 세포 소집단의 선택은, 히스토그램 상 또는 사이토그램 상에 있어서 상기 세포 소집단이 존재하는 영역을 지정함으로써 행해지고 있다. 이 조작은, 히스토그램 상 또는 사이토그램 상에서 지정하는 영역 내에 목적으로 하는 세포를 에워싸는 점에서, 「게이팅(gating)」이라고 칭해지고 있다.
1개의 측정 파라미터를 축으로 한 히스토그램 상 또는 1개의 조합의 측정 파라미터를 축으로 한 사이토그램 상에 있어서는, 해석 대상으로 하는 세포 소집단과 불필요한 세포가 중첩되는 영역에 존재하고 있는 경우가 있다. 예를 들어, 인간 말초혈을 샘플로 하여 림프구의 해석을 행할 때, 전방 산란광(FS)과 측방 산란(SS)을 축으로 취한 사이토그램 상에서는, 일부의 단구가 림프구와 동일한 영역에 존재하는 경우가 있다. 따라서, 게이팅을 행할 때, 유저는, 단구가 에워싸이지 않도록 하여 림프구만이 존재하는 영역을 지정할 필요가 있다.
불필요한 세포를 에워싸지 않고, 해석 대상으로 하는 세포 소집단만을 에워쌀 수 있도록 영역을 지정하기 위하여, 종래, 유저는 복수의 히스토그램 또는 사이토그램을 참조하면서 게이팅을 행할 필요가 있었다. 플로우 사이토미터의 성능 향상에 따라 측정 가능한 파라미터 수도 증가하고 있어, 유저는 보다 많은 히스토그램 또는 사이토그램을 참조할 필요가 생기고 있었다. 또한, 이때, 유저는, 2개의 사이토그램을 조합한 입체적인 분포도(3차원 분포도)를 상기하면서 게이팅 조작을 행하는 것이 요구되고 있었다.
유저의 게이팅 조작을 지원하기 위하여, 특허문헌 1에는, 「분석물로부터 제1, 제2 및 제3 측정 데이터를 취득하는 측정 데이터 취득 수단과, 상기 제1, 제2 및 제3 측정 데이터를 축으로 하고, 분석물에 포함되는 유형 성분의 분포를 나타내는 3차원 분포도를 작성하는 3차원 분포도 작성 수단과, 상기 3차원 분포도 상에 분획 영역을 변경 가능하게 설정하는 영역 설정 수단과, 상기 영역 설정 수단에 의해 설정된 상기 분획 영역에 속하는 유형 성분에 대해서, 상기 제1 및 제2 측정 데이터를 축으로 하는 2차원 분포도 및 상기 제1 측정 데이터를 축으로 하는 도수 분포도 중 적어도 한쪽을 작성하는 참고용 분포도 작성 수단을 구비하는 분석 장치. 」가 제안되어 있다(당해 문헌 청구항 9 참조). 이 분석 장치에 의하면, 3차원 분포도와 함께 표시되는 2차원 분포도(사이토그램) 및 도수 분포도(히스토그램)를 참조하면서, 3차원 분포도 상에 분획 영역을 설정할 수 있다. 또한, 이 분석 장치의 3차원 분포도는, 디스플레이 상에 평면적으로 표시되는 것이며, 입체시(立體視)되는 것이 아니다.
본 발명에 관련하여, 2안식 스테레오 입체 화상 기술(3D 입체 화상 기술)에 대하여 설명한다. 2안식 스테레오 입체 영상에서는, 우선, 대상물을 우안 및 좌안으로 보았을 때의 2개의 영상을 준비한다. 그리고, 이들 영상을 동시에 표시한 후에, 우안용 영상을 우안에만, 좌안용 영상을 좌안에만 제시한다. 이것에 의해, 3차원 공간에서 대상물을 보고 있을 때 눈에 비치는 영상을 재현하여, 유저에게 대상물을 입체시시킨다.
입체시가 가능한 3D 디스플레이에는, (a) 안경 방식, (b) 나안 방식, (c)뷰어 방식이 주로 채용되고 있다. (a) 안경 방식에는, 또한 애너글리프 방식, 편광 필터 방식, 시분할 방식이 있다. 또한, (b) 나안 방식에는 패럴랙스 배리어 방식, 렌티큘러 방식이 있고, (c) 뷰어 방식에는 스테레오 스코프 방식, 헤드 마운트 방식이 있다.
일본 특허 공개 제2006-17497호 공보
상술한 바와 같이, 종래, 플로우 사이토미터에 사용되고 있는 데이터 해석 장치에서는, 게이팅 시, 유저는 다수의 히스토그램 또는 사이토그램을 참조하거나, 2개의 사이토그램을 조합한 입체적인 분포도(3차원 분포도)를 상기하거나 하여, 분포도 상에 있어서의 해석 대상 세포 소집단의 위치를 특정할 필요가 있었다.
따라서, 본 발명은 다수의 히스토그램 또는 사이토그램을 참조하거나, 3차원 분포도를 상기하거나 하지 않고, 해석 대상으로 하는 미소 입자 및 미소 입자 소집단을 분포도 상에서 용이하게 또한 직감적으로 특정할 수 있는 데이터 해석 장치를 제공하는 것을 주된 목적으로 한다.
상기 과제 해결을 위하여, 본 발명은 미소 입자의 측정 데이터를 보존하는 데이터 저장부와, 상기 측정 데이터로부터 독립된 3종의 변수를 선택하는 입력부와, 상기 3종의 변수를 좌표축으로 하는 좌표 공간 내에 있어서의 위치와 도형을 계산하여, 상기 미소 입자의 특성 분포를 나타내는 3D 입체 화상을 작성하는 데이터 처리부와, 상기 3D 입체 화상을 표시하는 표시부를 갖는 3D 데이터 해석 장치를 제공한다.
이 3D 데이터 해석 장치에 의하면, 임의로 선택한 3종의 파라미터를 좌표축으로 한 3차원 분포도를 입체시하면서 측정 데이터의 해석을 행할 수 있다.
또한, 본 발명은 미소 입자의 측정 데이터로부터 독립된 3종의 변수를 선택하는 수순과, 상기 3종의 변수를 좌표축으로 하는 좌표 공간 내에 있어서의 위치와 도형을 계산하여, 상기 미소 입자의 특성 분포를 나타내는 3D 입체 화상을 작성하는 수순과, 상기 3D 입체 화상을 표시시키는 수순을 포함하는 3D 데이터 해석 방법과, 미소 입자의 측정 데이터로부터 선택되는 3종의 변수를 좌표축으로 하는 좌표 공간 내에 있어서의 위치와 도형을 계산하여, 상기 미소 입자의 특성 분포를 나타내는 3D 입체 화상을 작성하는 스텝과, 상기 3D 입체 화상을 표시하는 스텝을 컴퓨터에 실행시키는 3D 데이터 해석 프로그램도 제공한다.
본 발명에 있어서, 「미소 입자」에는, 세포, 미생물 및 리포솜 등의 생체 관련 입자, 라텍스 입자, 겔 입자, 공업용 입자 등의 합성 입자 등의 미소 입자가 널리 포함되는 것으로 한다.
세포에는, 동물 세포(혈구계 세포 등) 및 식물 세포가 포함된다. 미생물에는, 대장균 등의 세균류, 담배모자이크바이러스 등의 바이러스류, 이스트균 등의 균류 등이 포함된다. 생체 관련 입자에는, 각종 세포를 구성하는 염색체, 리포솜, 미토콘드리아, 오르가넬라(세포 소기관) 등도 포함된다. 또한, 생체 관련 입자에는, 핵산이나 단백질, 이들의 복합체 등의 생체 관련 고분자도 포함될 수 있는 것으로 한다. 공업용 입자는, 유기 또는 무기 고분자 재료, 금속 등이어도 된다. 유기 고분자 재료에는, 폴리스티렌, 스티렌·디비닐벤젠 및 폴리메틸메타크릴레이트 등이 포함된다. 무기 고분자 재료에는, 유리, 실리카 및 자성체 재료 등이 포함된다. 금속에는, 금 콜로이드 및 알루미늄 등이 포함된다. 이들 미소 입자의 형상은, 일반적으로는 구형이지만, 비구형이어도 된다. 또한, 미소 입자의 크기나 질량 등도 특별히 한정되지 않는다.
본 발명에 의해, 다수의 히스토그램 또는 사이토그램을 참조하거나, 3차원 분포도를 상기하거나 하지 않고, 해석 대상으로 하는 미소 입자 및 미소 입자 소집단을 분포도 상에서 용이하게 또한 직감적으로 특정할 수 있는 데이터 해석 장치가 제공된다.
도 1은, 플로우 사이토미터에 연속 설치된 본 발명에 따른 3D 데이터 해석 장치의 구성을 설명하는 블록도이다.
도 2는, 본 발명에 따른 3D 데이터 해석 장치의 기능적 구성을 설명하는 블록도이다.
도 3은, 본 발명에 따른 3D 데이터 해석 장치에 의해 표시되는 3차원 분포도를 설명하는 모식도이다.
도 4는 본 발명에 따른 3D 데이터 해석 장치에 의해 표시되는 2안식 스테레오 입체 화상(3D 입체 화상)을 설명하는 모식도이다.
도 5는 3D 입체 화상 중의 미소 입자에 대응하는 도형의 형상을 설명하는 모식도이다.
도 6은 셰이드 처리된 도형의 입체 관찰상을 설명하는 개념도이다.
도 7은 셰이드 처리의 처리 방법을 설명하는 모식도이다.
도 8은 좌표축의 입체 관찰상을 설명하는 개념도이다.
도 9는 각 좌표축 방향으로부터의 3차원 분포도의 입체 관찰상을 설명하는 개념도이다.
도 10은 미소 입자에 대응하는 도형을 요동시킨 동화상의 입체 관찰상을 설명하는 개념도이다.
이하, 본 발명을 실시하기 위한 적합한 형태에 대하여 도면을 참조하면서 설명한다. 또한, 이하에 설명하는 실시 형태는, 본 발명의 대표적인 실시 형태의 일례를 나타낸 것이며, 이것에 의해 본 발명의 범위가 좁게 해석되는 일은 없다. 또한, 설명은 이하의 순서로 행한다.
1. 3D 데이터 해석 장치의 구성
2. 3D 입체 화상의 표시
3. 3D 입체 화상의 특징
(3-1) 도형의 형상
(3-2) 도형의 셰이드 처리
(3-3) 좌표축
(3-4) 동화상
4. 3D 데이터 해석 프로그램
1. 3D 데이터 해석 장치의 구성
도 1에, 본 발명에 따른 3D 데이터 해석 장치의 장치 구성을 도시한다. 여기서는, 3D 데이터 해석 장치를 미소 입자 측정 장치에 연속 설치하여 미소 입자 해석 시스템으로서 구성한 실시 형태를 나타낸다. 또한, 도 2에, 이 미소 입자 해석 시스템의 기능적 구성을 나타낸다. 이하에서는, 미소 입자 측정 장치로서 플로우 사이토미터를 사용하는 경우를 예로 들어 설명한다.
도면 부호 (1)로 나타내는 3D 데이터 해석 장치는, 통신 케이블(4)에 의해 플로우 사이토미터(2)와 접속되어 미소 입자 해석 시스템(3)을 구성하고 있다. 3D 데이터 해석 장치(1)는 중앙 처리 장치(CPU)(10), 메모리(20), 하드 디스크(30), 사용자 인터페이스 등을 포함하고 있다. 하드 디스크(30)에는, 3D 데이터 해석 프로그램(31), 미소 입자의 측정 데이터(32) 및 오퍼레이팅 시스템(OS)(33) 등이 저장·유지되어 있다. 사용자 인터페이스에는, 유저로부터의 정보의 입력을 접수하는 마우스(41) 및 키보드(42)와, 유저에 대하여 정보를 출력하는 디스플레이(43) 및 프린터(44) 등이 포함된다. 또한, 마우스(41) 및 키보드(42) 대신에, 또는 이들과 함께, 스틱 컨트롤러 및 펜 타블렛 등의 입력 디바이스를 설치해도 된다.
데이터 저장부(130)(하드 디스크(30))는 플로우 사이토미터(2)로부터 출력되는 미소 입자(세포)의 측정 데이터(32)를 보존한다. 플로우 사이토미터(2)의 입출력 인터페이스(250)로부터 출력되는 측정 데이터는, 통신 케이블(4)을 통하여 3D 데이터 해석 장치(1)의 입출력 인터페이스(150)에 입력되고, 데이터 저장부(30)(하드 디스크(30))에 저장된다.
측정 데이터(32)는 데이터 처리부(120)에서 처리된다. 데이터 처리부(120)는 입력부(141)(마우스(41) 또는 키보드(42) 등)로부터의 유저의 입력을 받아 처리를 개시한다. 즉, 데이터 처리부(120)는 유저에 의해 측정 데이터(32)로부터 독립된 3종의 변수(파라미터)가 선택되고 입력되면, 선택된 파라미터를 좌표축으로 하여 미소 입자의 특성 분포를 나타내는 3차원 분포도를 작성한다. 3차원 분포도는, 선택된 파라미터를 좌표축으로 한 좌표 공간 내에 미소 입자를 플롯함으로써 작성된다. 미소 입자의 플롯은, 선택된 파라미터의 측정값으로부터 각 미소 입자의 좌표 공간 내의 위치와 도형을 계산하여, 산출된 위치에 산출된 도형을 묘화함으로써 행된다.
여기서, 「독립된 파라미터」란, 미소 입자의 전방 산란광(FS), 측방 산란(SS), 형광(FL) 및 임피던스 등으로부터 선택되는 서로 다른 파라미터를 의미한다. 형광(FL)은 미소 입자에 표식된 형광 색소의 파장 영역마다 다른 파라미터로서 다룰 수 있으며, FL1, FL2 내지 FLn(n은 3 이상의 정수) 등으로 표기된다. 독립된 3종의 파라미터로서는, 예를 들어 전방 산란광(FS), 측방 산란(SS) 및 형광(FL1)의 조합이나, 전방 산란광(FS), 측방 산란(SS) 및 임피던스의 조합이 예시된다. 이 밖에, 독립된 3종의 파라미터는, 측정 데이터로부터 임의로 선택하여 조합할 수 있다.
데이터 처리부(120)에 의해 작성된 3차원 분포도는, 표시부(142)(디스플레이(43))에 3D 입체 화상으로서 표시된다. 표시부(142)에 표시되는 3D 입체 화상은, 1 또는 2 이상으로 할 수 있다. 2 이상의 3D 입체 화상을 표시하는 경우, 동일한 3차원 분포도에 대하여 복수의 상이한 방향으로부터 관찰한 3D 입체 화상을 표시해도, 선택된 3종의 파라미터 중 적어도 하나를 달리하는 복수의 3차원 분포도의 3D 입체 화상을 표시해도 된다. 이 3D 입체 화상은, 다음에 상세하게 설명하는 2안식 스테레오 입체 화상으로 된다.
또한, 측정 데이터(32)에 복수의 다른 시각(타임 포인트)에서의 측정값이 포함되는 경우에는, 표시부(142)는 복수의 타임 포인트에서의 미소 입자의 특성 분포를 나타내는 3차원 분포도를 3D 입체 화상에 의해 표시해도 된다. 복수의 타임 포인트에서의 측정값을 포함하는 측정 데이터로서는, 예를 들어 세포 표면 분자 복합체의 회합 또는 해리를 형광 공명 에너지 이동(FRET)법을 사용하여 경시적으로 측정한 데이터, 세포막의 변화를 세포막의 전하에 대응하여 형광 파장이 변화하는 형광 색소를 사용하여 경시적으로 측정한 데이터, 또는 세포 표면 분자의 발현 강도를 세포 내 칼슘의 유입 리스펀스와 상관시켜 측정한 데이터 등이 있다.
복수의 타임 포인트에서의 3차원 분포도의 3D 입체 화상은, 배열하여 한 번에 표시시켜도 되고, 또는 전환하면서 하나씩 표시시켜도 된다. 3D 입체 화상의 전환 표시를 행하는 경우, 전환은 자동으로 행해져도 되고, 유저의 입력 신호에 기초하여 행해져도 된다. 복수의 타임 포인트에서의 3차원 분포도의 3D 입체 화상을 표시시킴으로써, 유저가 미소 입자의 특성 분포의 경시적 변화를 확인하면서 데이터 해석을 행할 수 있으며, 3종의 파라미터(좌표축)에 시간(시간축)을 부가한 보다 다원적인 해석이 가능하게 된다.
표시부(142)에의 3D 입체 화상의 표시는, 입력부(141)(마우스(41) 또는 키보드(42) 등)로부터의 유저의 입력 신호에 기초하여 임의로 회전, 확대 또는 축소시켜 행해도 된다. 또한, 입력부(141)로부터의 입력 신호에 기초하여 3차원 분포도의 좌표 공간 내에 게이팅을 위한 분획 영역이 설정되는 경우에는, 3D 입체 화상은, 그 3D 입체 화상 중에 표시된 분획 영역을 나타내는 입체 형상과 함께 회전, 확대 또는 축소된다.
플로우 사이토미터(2)는, 종래 공지된 장치와 마찬가지의 구성 또는 이를 적절히 개변한 구성으로 할 수 있으며, 구체적으로는, 제어부(210), 플로우계(220), 검출계(230), 입출력 인터페이스(250) 등으로 구성된다.
플로우계(220)는 플로우 셀이나 마이크로 칩에 형성된 유로 내에서, 미소 입자를 포함하는 샘플액 층류를 시스액(sheath liquid) 층류의 중심에 흐르게 하고, 층류 중에 미소 입자를 일렬로 배열시킨다. 검출계(230)는 유로를 통류(通流)하는 미소 입자의 특성을 나타내는 파라미터값을 취득한다. 구체적으로는, 광학 검출부(231)는 통류하는 미소 입자에 광을 조사하여, 미소 입자로부터 발생하는 산란광이나 형광 등을 검출하여, 그 강도를 취득한다. 광학 검출부(231)는 레이저 광원, 렌즈, 미러, 필터, CCD 및 CMOS 소자 등의 에리어 촬상 소자 또는 PMT(photo multiplier tube) 등을 포함하여 이루어진다. 또한, 전기 검출부(232)는 통류하는 미소 입자에 대향하여 배치된 전극을 포함하여 이루어지며, 미소 입자의 임피던스, 용량값(캐패시턴스) 및 인덕턴스 등을 취득한다. 플로우 사이토미터(2)는, 해석 결과 원하는 특성을 갖는다고 판정된 미소 입자를 분취하기 위한 분취계(分取係)(240)를 구비하고 있어도 된다. 분취계(240)에는, 예를 들어 미소 입자를 포함하는 액적을 플로우 셀 외의 공간에 토출하고, 액적의 이동 방향을 제어함으로써, 원하는 미소 입자만을 용기에 회수하는 방식을 채용할 수 있다.
검출계(230)에서 검출된 산란광 및 형광 등의 강도의 측정값, 또는 임피던스, 용량값(캐패시턴스) 및 인덕턴스 등의 측정값은, 전기 신호로 변환되어, 측정 데이터로서 입출력 인터페이스(250)로부터 출력된다.
2. 3D 입체 화상의 표시
도 3에, 본 발명에 따른 3D 데이터 해석 장치에 의해 표시되는 3차원 분포도를 모식적으로 도시한다. 이 3차원 분포도는, 표시부(142)에 3D 입체 화상에 의해 표시되어, 유저에 의해 입체적으로 시인될 수 있는 것이다.
3차원 분포도(5)는 유저에 의해 선택된 3종의 파라미터를 좌표축으로 한 좌표 공간(6) 내에 미소 입자의 특성 분포를 나타낸다. 3차원 분포도(5)에서는, 선택된 파라미터의 측정값으로부터 산출되는 위치에 각 미소 입자에 대응하는 도형(7)이 묘화된다.
도면에서는, 3종의 파라미터를, 전방 산란광(FS-Lin: X축), 측방 산란(SS-Lin: Y축) 및 제1 형광(FL1-Lin: Z축)의 조합으로 했을 경우를 예시하였다. 각 좌표축에 취하는 파라미터는, 임의로 선택되는 조합으로 할 수 있다. 예를 들어, X축에 제1 형광(FL1), Y축에 제2 형광(FL2), Z축에 임피던스를 취할 수도 있다.
3차원 분포도(5)의 3D 입체 표시는, 2안식 스테레오 입체 화상에 의해 행해진다. 도 4에, 본 발명에 따른 3D 데이터 해석 장치에 의해 표시되는 2안식 스테레오 입체 화상을 모식적으로 도시한다.
데이터 처리부(120)는 유저에 의해 파라미터가 선택되면 3차원 분포도(5)를 작성하고, 상기 분포도를 좌안으로 보았을 때의 화상(좌안용 화상(5L))과, 우안으로 보았을 때의 화상(우안용 화상(5R))을 작성한다. 표시부(142)(디스플레이(43))는 좌안용 화상(5L) 및 우안용 화상(5R)을 동시에 표시하며, 좌안용 화상(5L)을 좌안에만, 우안용 화상(5R)을 우안에만 분리 제시한다.
분리 제시는, 예를 들어 안경 방식의 하나인 시분할 방식에서는, 좌안용 화상(5L)과 우안용 화상(5R)을 근소한 시간차로 교대로 표시시키고, 이것에 셔터 안경(8)을 동기시킴으로써 행할 수 있다. 이밖에, 분리 제시는, 애너글리프 방식 및 편광 필터 방식 등의 다른 안경 방식, 패럴랙스 배리어 방식 및 렌티큘러 방식 등의 나안 방식, 스테레오 스코프 방식 및 헤드 마운트 방식 등의 뷰어 방식을 채용해도 된다.
디스플레이(43)는 좌안용 화상(5L) 및 우안용 화상(5R)를 분리 제시함으로써, 3차원 공간에서 3차원 분포도를 보고 있을 때 눈에 비치는 영상을 재현하여, 유저에 분포도를 입체시시킨다.
이와 같이, 3D 데이터 해석 장치(1)에서는, 유저는, 임의로 선택한 3종의 파라미터를 좌표축으로 한 3차원 분포도를 입체시하면서 측정 데이터의 해석을 행할 수 있다. 이로 인해, 3D 데이터 해석 장치(1)에서는, 분포도 상에 있어서 해석 대상으로 하는 미소 입자 및 미소 입자 소집단을 용이하게 또한 직감적으로 특정할 수 있어, 종래와 같이 다수의 히스토그램 또는 사이토그램을 참조하거나, 3차원 분포도를 상기하거나 할 필요가 없다. 또한, 좌표축에 사용하는 파라미터를 임의로 조합하여 3차원 분포도를 표시시킴으로써, 1개의 그래프로 미소 입자의 3개의 특성에 관한 정보를 얻을 수 있다. 또한, 동일한 3차원 분포도에 대하여 복수의 상이한 방향으로부터 관찰한 3D 입체 화상을 표시시키거나, 선택된 3종의 파라미터 중 적어도 하나를 달리하는 복수의 3차원 분포도의 3D 입체 화상을 표시시키거나 함으로써, 보다 많은 정보를 얻을 수 있다. 이로 인해, 3D 데이터 해석 장치(1)에서는, 종래의 히스토그램 또는 사이토그램에 의한 표시에 비해, 참조해야할 그래프 수를 저감시켜 효율적인 해석을 행할 수 있다.
3. 3D 입체 화상의 특징
이하, 본 발명에 따른 3D 데이터 해석 장치에 의해 표시되는 3D 입체 화상의 특징에 대하여 순서대로 설명한다.
(3-1) 도형의 형상
도 3 중 도면 부호 (7)로 나타낸 미소 입자에 대응하는 도형은, 소정 형상의 폴리곤의 조합을 포함하여 이루어지는 다면체로서 계산되어, 3D 입체 화상 중에 표시된다. 상기한 바와 같이 데이터 처리부(120)는 유저가 선택한 파라미터의 측정값에 기초하여 각 미소 입자의 좌표 공간 내의 위치와 도형(7)을 계산하여, 3차원 분포도를 작성한다. 이때, 도형(7)을 소정 형상의 폴리곤의 조합을 포함하여 이루어지는 다면체로서 계산함으로써, 데이터 처리부(120)에 있어서의 계산 부하를 경감시킬 수 있다. 또한, 도형(7)을 소정 형상의 폴리곤의 조합을 포함하여 이루어지는 다면체로서 3D 입체 화상 중에 표시함으로써, 입체시했을 때의 화상의 입체감을 증강시킬 수 있다.
소정 형상의 폴리곤의 조합을 포함하여 이루어지는 다면체로서는, 예를 들어 도 5의 (A)에 도시한 바와 같은, 삼각형의 폴리곤이 6개 조합되어 이루어지는 6면체나, 도 5의 (B)에 나타내는 상기 폴리곤이 8개 조합되어 이루어지는 8면체를 채용할 수 있다. 도형(7)의 형상은, 소정 형상의 폴리곤의 조합을 포함하여 이루어지는 다면체인 한 특별히 한정되지 않지만, 계산 부하의 경감과 입체감의 관점에서 6면체 또는 8면체가 바람직하다.
(3-2) 도형의 셰이드 처리
3D 입체 화상에 있어서, 도형(7)은 입체시했을 때 앞쪽에 관찰되는 도형일수록 짙으며, 뒤쪽에 관찰되는 도형일수록 옅게 표시된다. 이와 같이 도형(7)의 농담을 변화시키는 처리를, 이하 「셰이드 처리」라고 칭하기로 한다.
셰이드 처리된 도형(7)의 입체 관찰상(이하 간단히 「입체상」이라고 함)의 개념도를 도 6에 도시하였다. 도면 중 화살표의 방향을 따라, 앞쪽에 관찰되는 도형(7)일수록 짙고, 뒤쪽에 관찰되는 도형(7)일수록 옅어져 있다. 이와 같이, 도형(7)의 셰이드 처리를 행함으로써, 3D 입체 화상의 입체상에 깊이를 부여하여 입체감을 향상시킬 수 있다.
도 7을 참조하여, 셰이드 처리의 처리 방법을 설명한다. 디스플레이(43)에는 좌안용 화상과 우안용 화상이 동시에 표시되며, 입체시했을 때 디스플레이(43)의 화면의 위치에 관찰되는 도형(70)의 좌안용 화상과 우안용 화상은 중첩된 상태로 표시된다(도 7의 (B) 참조).
디스플레이(43)에 표시되는 좌안용 화상이 우안용 화상보다도 우측에 있는 경우(도 7의 (A) 참조), 도형은, 디스플레이(43)의 화면의 위치보다도 앞쪽에 입체시된다. 화면 위치로부터 돌출되어 관찰되는 도형의 입체상을 도면 부호 (71)로 나타내고, 디스플레이(43)에 표시되는 도형(71)의 좌안용 화상을 도면 부호 (71L)로, 우안용 화상을 도면 부호(71R)로 나타낸다. 한편, 디스플레이(43)에 표시되는 좌안용 화상이 우안용 화상보다도 좌측에 있는 경우(도 7의 (C) 참조), 도형은, 디스플레이(43)의 화면의 위치보다도 뒤쪽에 입체시된다. 화면 위치로부터 돌출되어 관찰되는 도형의 입체상을 도면 부호 (72)로 나타내고, 디스플레이(43)에 표시되는 도형(71)의 좌안용 화상을 도면 부호 (72L)로, 우안용 화상을 도면 부호 (72R)로 나타낸다.
셰이드 처리에서는, 앞쪽에 관찰되는 도형(71)의 좌안용 화상(71L) 및 우안용 화상(71R)를 보다 짙고, 뒤쪽에 관찰되는 도형(72)의 좌안용 화상(72L) 및 우안용 화상(72R)를 보다 옅게 표시하도록 한다.
(3-3) 좌표축
3D 입체 화상에 있어서, 좌표축은, 입체시했을 때 앞쪽에 관찰되는 부분일수록 굵고, 뒤쪽에 관찰되는 부분일수록 가늘게 표시된다. 굵기를 변화시킨 좌표축의 입체상의 개념도를 도 8에 도시하였다. 이와 같이, 좌표축의 굵기를 변화시킴으로써, 3D 입체 화상의 입체상에 깊이를 부여하여 입체감을 향상시킬 수 있다.
또한, 도 8에 도시한 바와 같이, 좌표축의 눈금 간격을 입체시했을 때 앞쪽에 관찰되는 부분일수록 넓고, 뒤쪽에 관찰되는 부분일수록 좁게 표시함으로써, 입체상에 더욱 깊이를 부여받는다. 또한, 좌표축명(도면에서는 SS-Lin) 및 눈금 수치(도면에서는 200, 400, 600, 800, 1000)의 문자를 앞쪽일수록 크고, 뒤쪽일수록 작게 표시하거나 함으로써도 마찬가지의 효과가 얻어진다. 또한, 좌표축의 굵기, 눈금 간격 및 문자의 크기를 변화시키는 처리는, 상술한 셰이드 처리를 응용하여 행하는 것이 가능하다.
좌표축은, 선형축(리니어축)과 대수축이 조합된 특성을 갖는 바이익스포넨셜축으로 해도 된다. 이 바이익스포넨셜축의 상세한 것은, 예를 들어 「A New "Logicle" Display Method Avoids Deceptive Effects of Logarithmic Scaling for Low Signals and Compensated Data. Cytometry Part A 69A: 541-551, 2006.」에 기재되어 있다.
바이익스포넨셜축에서는, 좌표축으로서 선택된 파라미터의 측정값이 소정값보다 작은 데이터에 대해서는, 선형 함수를 주된 함수 요소로 하는 함수를 적용하여 미소 입자에 대응하는 도형(7)의 위치가 산출된다. 또한, 측정값이 소정값보다 큰 데이터에 대해서는, 대수 함수를 주된 함수 요소로 하는 함수를 적용하여 도형(7)의 위치를 산출한다. 보다 간편하게는, 바이익스포넨셜축은, 소정값보다도 큰 영역을 대수축, 소정값보다도 작은 영역을 선형축으로 한 것으로 할 수 있다. 3차원 분포도의 좌표축을 바이익스포넨셜축으로 함으로써, 대수축의 특성을 살린 넓은 다이내믹 레인지의 표시가 가능하게 되고, 동시에 선형축의 특성에 의해 음수의 표시도 가능하게 된다. 또한, 3차원 분포도의 좌표축은, 적어도 하나가 바이익스포넨셜축으로 되면 되는 것으로 한다.
(3-4) 동화상
이미 설명한 바와 같이, 표시부(142)(디스플레이(43))에의 3D 입체 화상의 표시는, 입력부(141)(마우스(41) 또는 키보드(42) 등)로부터의 유저의 입력 신호에 기초하여 임의로 회전, 확대 또는 축소시켜 행해도 된다. 3D 입체 화상을 회전시킬 때는, 도 3에 도시한 바와 같이, 좌표 공간(6)을 구성하는 입체 형상(도면에서는 입방체)의 각 변에 좌표축이 표시되어 있는 것이 바람직하다. 이들 좌표축에 의해 좌표 공간(6)의 입체 형상이 명확해지기 때문에, 3D 입체 화상을 회전시켰을 때의 3차원 분포도의 방향의 변화를 인식하기 용이해진다.
디스플레이(43)에 표시되는 3D 입체 화상은, 유저로부터의 입력에 의해 임의로 회전되는 것 외에, 항상 일정 방향 또는 불특정 방향으로 천천히 회전하고 있어도 된다. 3D 입체 화상을 항상 회전하는 동화상에 의해 표시함으로써, 정지 화상에 의한 표시에 비해 입체감이 높아진다.
또한, 디스플레이(43)에 표시되는 3D 입체 화상은, 유저에 의한 회전 조작 중 및 자동 회전 중 임의의 타이밍으로, 유저의 입력 신호에 기초하여, 유저에 의해 선택된 좌표축 방향으로부터의 입체 관찰상을 제공하는 방향으로까지 자동으로 회전된다. 도 9에, 각 좌표축 방향으로부터의 3차원 분포도의 입체 관찰상을 도시한다. 도 9의 (A)는 Z축 방향으로부터의 관찰상, 도 9의 (B)는 X축 방향으로부터의 관찰상, 도 9의 (C)는 Y축 방향으로부터의 관찰상을 나타낸다. 각 좌표축 방향으로부터의 시점의 전환은, 예를 들어 키보드(42)로부터의 Z키의 입력에 의해 화상이 Z축 방향 시점으로 회전하고, X키의 입력에 의해 화상이 Z축 방향 시점으로부터 X축 방향 시점에 회전하도록 하면 된다. 또한, 각 좌표축 방향으로부터의 시점의 전환은, 예를 들어 디스플레이(43)에 표시된 아이콘을 마우스(41)에 의해 클릭함으로써 행해지도록 해도 된다. 이와 같이, 간단한 입력에 의해 각 좌표축 방향으로부터의 시점을 전환하여 3D 입체 화상을 관찰할 수 있도록 함으로써, 3차원 분포도에 있어서의 미소 입자의 특성 분포를 유저가 파악하기 용이해진다.
또한, 디스플레이(43)에 있어서 3D 입체 화상을 항상 회전시켜서 표시하는 경우, 3D 입체 화상은, 3차원 분포도의 상하 방향을 유지하도록 회전되는 것이 바람직하다. 즉, 3D 입체 화상은, 3차원 분포도의 XY 평면, YZ 평면 및 ZX 평면으로부터 선택되는 어느 한쪽 면을 항상 분포도 하방을 향한 상태에서 회전되는 것이 바람직하다. 구체적으로는, 예를 들어 도 9의 (A)에 도시하는 3D 입체 화상을 항상 회전시키는 경우, ZX 평면이 3차원 분포도의 저면에 항상 위치하도록 화상을 회전시킨다. 이때, 3차원 분포도의 회전축을 기울이거나, 기울기 각도를 변화시키거나 하면서, 화상을 회전시켜도 된다. 이와 같이, 3D 입체 화상의 회전 방향에 일정한 제한을 가한 쪽이, 유저가 3차원 분포도에 대한 자신의 시점 방향을 지각하기 용이하여, 3차원 분포도의 방향을 파악할 수 없게 되는 것을 방지할 수 있다.
디스플레이(43)에 표시되는 3D 입체 화상은, 미소 입자에 대응하는 도형이 요동하는 동화상에 의해 표시되어도 된다. 이때, 입체시했을 때 뒤쪽에 관찰되는 도형에 비해 앞쪽에 관찰되는 도형을 크게 요동시켜 표시시킨다. 요동 동작이 부여된 도형의 입체상의 개념도를 도 10에 도시한다. 도형(71, 72)은, 도면 중 화살표에 도시한 바와 같이 좌우로 요동하고, 좌우로의 요동 폭은 앞쪽에 관찰되는 도형(71)에서 크고, 뒤쪽에 관찰되는 도형(72)에서 작게 되어 있다. 이와 같이, 입체시했을 때 뒤쪽에 관찰되는 도형에 비해 앞쪽에 관찰되는 도형을 보다 크게 요동시켜 표시함으로써, 3D 입체 화상의 입체상에 깊이를 부여하여 입체감을 향상시킬 수 있다.
또한, 3D 입체 화상을 동화상에 의해 표시하는 경우, 미소 입자에 대응하는 도형이 점멸하도록 해도 된다. 이때, 입체시했을 때 뒤쪽에 관찰되는 도형에 비해 앞쪽에 관찰되는 도형을 고빈도로 점멸시켜 표시시킴으로써, 3D 입체 화상의 입체감을 더욱 향상시킬 수 있다.
또한, 측정 데이터(32)에 복수의 타임 포인트에서의 측정값이 포함되는 경우에는, 각 타임 포인트에서의 3차원 분포도의 3D 입체 화상을 동화상에 의해 표시시킬 수도 있다. 이것에 의해, 예를 들어 상술한 세포 표면 분자 복합체의 회합 또는 해리를 측정하는 예에 있어서는, 세포 표면 분자 복합체의 회합 등의 경시적 변화를 동화상에 의해 확인할 수 있다.
이상과 같이, 본 발명에 따른 3D 데이터 해석 장치는, 표시되는 3D 입체 화상의 입체감을 향상시키기 위해 고안되었다. 따라서, 점(미소 입자에 대응하는 도형)과 선(좌표축)만을 포함하여 이루어지는 3차원 분포도이어도, 유저는 그 입체상을 양호하게 시인하면서 측정 데이터의 해석을 행할 수 있어, 분포도 상에 있어서 해석 대상으로 하는 미소 입자 및 미소 입자 소집단을 용이하게 또한 직감적으로 특정할 수 있다.
4. 3D 데이터 해석 프로그램
본 발명에 따른 3D 데이터 해석 프로그램은, 미소 입자의 측정 데이터로부터 선택되는 3종의 변수를 좌표축으로 하는 좌표 공간 내에 있어서의 위치와 도형을 계산하여, 미소 입자의 특성 분포를 나타내는 3D 입체 화상을 작성하는 스텝과, 상기 3D 입체 화상을 표시하는 스텝을 컴퓨터에 실행시킨다.
도 1 및 도 2을 다시 참조하여 상술한 실시 형태에 기초하여 설명하면 3D 데이터 해석 프로그램은, 하드 디스크(30)에 저장·유지된다(도면 부호 (31) 참조). 3D 데이터 해석 프로그램은, CPU(10) 및 오퍼레이팅 시스템(OS)(33)의 제어 하에서 메모리(20)에 읽어들여져, 데이터 처리부(120)에 있어서의 3차원 분포도의 3D 입체 화상의 작성 처리와, 표시부(142)에의 3D 입체 화상의 표시 처리를 실행한다.
3D 데이터 해석 프로그램은, 컴퓨터 판독 가능한 기록 매체에 기록된 것으로 할 수 있다. 기록 매체로서는, 컴퓨터 판독 가능한 기록 매체이면 특별히 제한은 없지만, 예를 들어 플렉시블 디스크나 CD-ROM 등의 원반형 기록 매체가 사용된다. 또한, 자기 테이프 등의 테이프형 기록 매체를 사용해도 된다.
본 발명에 따른 3D 데이터 해석 장치에 의하면, 다수의 히스토그램 또는 사이토그램을 참조하거나, 3차원 분포도를 상기하거나 하지 않고, 해석 대상으로 하는 미소 입자 및 미소 입자 소집단을 분포도 상에서 용이하게 또한 직감적으로 특정할 수 있다. 따라서, 본 발명에 따른 3D 데이터 해석 장치는, 예를 들어 플로우 사이토미터와 함께 사용되며, 의료 분야, 공중 위생 분야 또는 창약 분야 등에 있어서, 세포나 미생물의 특성을 용이하게 또한 고정밀도로 해석하기 위하여 사용될 수 있다.
1: 3D 데이터 해석 장치
10: 중앙 처리 장치
110: 제어부
120: 데이터 처리부
130: 데이터 저장부
141: 입력부
142: 표시부
150: 입출력 인터페이스
2: 플로우 사이토미터
210: 제어부
220: 플로우계
230: 검출계
231: 광학 검출부
232: 전기 검출부
240: 분취계
250: 입출력 인터페이스
3: 미소 입자 해석 시스템
30: 하드 디스크
31: 3D 데이터 해석 프로그램
32: 측정 데이터
33: 오퍼레이팅 시스템
4: 통신 케이블
41: 마우스
42: 키보드
43: 디스플레이
44: 프린터
5: 3차원 분포도
6: 좌표 공간
7: 도형
8: 셔터 안경

Claims (14)

  1. 3D 데이터 해석 장치에 있어서,
    미소 입자의 측정 데이터를 보존하는 데이터 저장부와,
    상기 측정 데이터로부터 독립된 3종의 변수를 선택하는 입력부와,
    상기 3종의 변수를 좌표축으로 하는 좌표 공간 내에 있어서의 위치와 도형을 계산하여, 상기 미소 입자의 특성 분포를 나타내는 3D 입체 화상을 작성하는 데이터 처리부와,
    상기 3D 입체 화상을 표시하는 표시부를 갖고,
    상기 입력부에서의 입력 신호에 기초하여, 상기 표시부에 있어서 상기 3D 입체 화상을 회전시켜, 임의로 선택된 좌표축 방향으로부터의 상기 3D 입체 화상의 입체상 관찰을 가능하게 하고,
    상기 3D 입체 화상을 상기 도형이 요동하는 동화상에 의해 표시하고, 상기 동화상의 입체상 관찰 시에 뒤쪽에 관찰되는 상기 도형에 비해 앞쪽에 관찰되는 도형을 보다 크게 요동시켜 표시하는, 3D 데이터 해석 장치.
  2. 제1항에 있어서,
    상기 입력부에서의 입력 신호에 기초하여, 상기 표시부에 있어서 상기 3D 입체 화상을 회전, 확대 및 축소시켜 표시하는, 3D 데이터 해석 장치.
  3. 삭제
  4. 제1항에 있어서,
    상기 도형은, 소정 형상의 폴리곤의 조합을 포함하여 이루어지는 다면체인 3D 데이터 해석 장치.
  5. 제4항에 있어서,
    상기 3D 입체 화상에 있어서, 상기 3D 입체 화상의 입체상 관찰 시에 앞쪽에 관찰되는 상기 도형을 보다 짙게, 뒤쪽에 관찰되는 상기 도형을 보다 옅게 표시하는, 3D 데이터 해석 장치.
  6. 제5항에 있어서,
    상기 3D 입체 화상에 있어서, 상기 좌표 공간을 구성하는 입체 형상의 각 변에 상기 좌표축을 표시하는, 3D 데이터 해석 장치.
  7. 제6항에 있어서,
    상기 3D 입체 화상에 있어서, 상기 좌표축 중, 상기 3D 입체 화상의 입체상 관찰 시에 앞쪽에 관찰되는 부분을 보다 굵게, 뒤쪽에 관찰되는 부분을 보다 가늘게 표시하는, 3D 데이터 해석 장치.
  8. 제7항에 있어서,
    상기 좌표축 중 적어도 1개 이상이 바이익스포넨셜축인, 3D 데이터 해석 장치.
  9. 삭제
  10. 제1항에 있어서,
    상기 3D 입체 화상을 상기 도형이 점멸하는 동화상에 의해 표시하고, 상기 동화상의 입체상 관찰 시에 뒤쪽에 관찰되는 상기 도형에 비해 앞쪽에 관찰되는 도형을 보다 고빈도로 점멸시켜 표시하는, 3D 데이터 해석 장치.
  11. 제10항에 있어서,
    상기 표시부는 디스플레이이고,
    상기 디스플레이에 표시되는 상기 3D 입체 화상을 입체시하기 위한 안경을 구비하는, 3D 데이터 해석 장치.
  12. 제1항 제2항, 제4항 내지 제8항, 제10항 및 제11항 중 어느 한 항에 기재된 3D 데이터 해석 장치와 미소 입자 측정 장치를 연속 설치하여 이루어지는 미소 입자 해석 시스템.
  13. 3D 데이터 해석 방법에 있어서,
    미소 입자의 측정 데이터로부터 독립된 3종의 변수를 선택하는 수순과,
    상기 3종의 변수를 좌표축으로 하는 좌표 공간 내에 있어서의 위치와 도형을 계산하여, 상기 미소 입자의 특성 분포를 나타내는 3D 입체 화상을 작성하는 수순과,
    상기 3D 입체 화상을 표시시키는 수순과,
    입력 신호에 기초하여, 상기 3D 입체 화상을 회전시켜, 임의로 선택된 좌표축 방향으로부터의 상기 3D 입체 화상의 입체상 관찰을 가능하게 하는 수순과,
    상기 3D 입체 화상을 상기 도형이 요동하는 동화상에 의해 표시하고, 상기 동화상의 입체상 관찰 시에 뒤쪽에 관찰되는 상기 도형에 비해 앞쪽에 관찰되는 도형을 보다 크게 요동시켜 표시하는 수순을 포함하는, 3D 데이터 해석 방법.
  14. 3D 데이터 해석 프로그램을 기록한 컴퓨터로 판독가능한 기록 매체에 있어서,
    상기 3D 데이터 해석 프로그램은,
    미소 입자의 측정 데이터로부터 선택되는 독립된 3종의 변수를 좌표축으로 하는 좌표 공간 내에 있어서의 위치와 도형을 계산하여, 상기 미소 입자의 특성 분포를 나타내는 3D 입체 화상을 작성하는 스텝과,
    상기 3D 입체 화상을 표시하는 스텝과,
    입력 신호에 기초하여, 상기 3D 입체 화상을 회전시켜, 임의로 선택된 좌표축 방향으로부터의 상기 3D 입체 화상의 입체상 관찰을 가능하게 하는 스텝과,
    상기 3D 입체 화상을 상기 도형이 요동하는 동화상에 의해 표시하고, 상기 동화상의 입체상 관찰 시에 뒤쪽에 관찰되는 상기 도형에 비해 앞쪽에 관찰되는 도형을 보다 크게 요동시켜 표시하는 스텝을 컴퓨터에 실행시키는, 3D 데이터 해석 프로그램을 기록한 컴퓨터로 판독가능한 기록 매체.
KR1020137013053A 2010-12-03 2011-11-25 3d 데이터 해석 장치, 3d 데이터 해석 방법 및 기록 매체 KR101969602B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JPJP-P-2010-269944 2010-12-03
JP2010269944 2010-12-03
PCT/JP2011/077195 WO2012073824A1 (ja) 2010-12-03 2011-11-25 ３ｄデータ解析装置および３ｄデータ解析方法ならびに３ｄデータ解析プログラム

Publications (2)

Publication Number Publication Date
KR20130136476A KR20130136476A (ko) 2013-12-12
KR101969602B1 true KR101969602B1 (ko) 2019-04-16

Family

ID=46171762

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020137013053A KR101969602B1 (ko) 2010-12-03 2011-11-25 3d 데이터 해석 장치, 3d 데이터 해석 방법 및 기록 매체

Country Status (6)

Country Link
US (2) US20130229412A1 (ko)
EP (1) EP2647976A4 (ko)
JP (2) JP6070192B2 (ko)
KR (1) KR101969602B1 (ko)
CN (1) CN103229041B (ko)
WO (1) WO2012073824A1 (ko)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5817369B2 (ja) 2011-09-13 2015-11-18 ソニー株式会社 スペクトル解析装置及び微小粒子測定装置、並びにスペクトル解析あるいはスペクトルチャート表示のための方法及びプログラム
CN104699235B (zh) * 2013-12-05 2017-12-01 浙江大学 基于超声波的三维空间成像交互方法及系统
US9396586B2 (en) * 2014-03-14 2016-07-19 Matterport, Inc. Processing and/or transmitting 3D data
US9830720B2 (en) * 2015-09-02 2017-11-28 Becton, Dickinson And Company Graphics control during flow cytometry event gating
CN109426302B (zh) * 2017-08-30 2022-05-20 西门子（中国）有限公司 一种数据分析设备和方法
JP7374943B2 (ja) * 2021-02-26 2023-11-07 シスメックス株式会社 表示方法および検体分析装置

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2938502B2 (ja) * 1990-03-01 1999-08-23 株式会社東芝 画像表示装置
JP2853355B2 (ja) * 1991-03-14 1999-02-03 三菱電機株式会社 ３次元図形データ発生装置
US5776709A (en) * 1991-08-28 1998-07-07 Becton Dickinson And Company Method for preparation and analysis of leukocytes in whole blood
US5598164A (en) * 1992-08-10 1997-01-28 Reppas; George S. Vehicle obstacle avoidance system
US5423321A (en) * 1993-02-11 1995-06-13 Fontenot; Mark G. Detection of anatomic passages using infrared emitting catheter
GB9316214D0 (en) * 1993-08-05 1993-09-22 Philips Electronics Uk Ltd Image processing
JPH0991468A (ja) * 1995-09-22 1997-04-04 Nippon Telegr & Teleph Corp <Ntt> ３次元画像表示装置および方法
JPH10318904A (ja) * 1996-06-10 1998-12-04 Toa Medical Electronics Co Ltd 粒子画像分析装置およびその分析用プログラムを記録した記録媒体
JPH10124702A (ja) * 1996-10-25 1998-05-15 Dainippon Printing Co Ltd 炎画像制作装置
US6629065B1 (en) * 1998-09-30 2003-09-30 Wisconsin Alumni Research Foundation Methods and apparata for rapid computer-aided design of objects in virtual reality and other environments
JP2000156875A (ja) * 1998-11-19 2000-06-06 Sony Corp 映像制作装置および映像表示システムおよびグラフィックス制作方法
JP2000268198A (ja) * 1999-03-15 2000-09-29 Sony Corp 立体画像処理装置及びその方法
US6690371B1 (en) * 2000-05-03 2004-02-10 Ge Medical Systems Global Technology, Llc Relevant image data extraction from a medical image data volume
CN1204267C (zh) * 2000-05-05 2005-06-01 朱学军 一种检测细胞内核酸的方法和装置
CN102214410B (zh) * 2002-11-05 2014-01-01 亚洲航测株式会社 倾斜红色化立体图像制作装置
JP4438358B2 (ja) * 2003-09-04 2010-03-24 株式会社サタケ 表示調整機構を具えた粒状物色彩選別機
US8050491B2 (en) * 2003-12-17 2011-11-01 United Technologies Corporation CAD modeling system and method
JP4746285B2 (ja) * 2004-06-30 2011-08-10 シスメックス株式会社 血液分析装置、分析プログラム、分画領域設定方法
US7113266B1 (en) * 2005-03-30 2006-09-26 Beckman Coulter, Inc. Flow cytometer for differentiating small particles in suspension
JP4267598B2 (ja) * 2005-07-11 2009-05-27 ザイオソフト株式会社 画像融合処理方法、画像融合処理プログラム、画像融合処理装置
EP1969523B1 (en) * 2005-12-16 2011-04-27 Technion Research and Development of Foundation, Ltd. Method and apparatus for determining similarity between surfaces
JP4568357B2 (ja) * 2008-06-30 2010-10-27 インターナショナル・ビジネス・マシーンズ・コーポレーション 動画データから検索対象である動画コンテンツを含むシーンを検索するためのコンピュータ・システム、並びにその方法及びコンピュータ・プログラム
US8581927B2 (en) * 2008-11-04 2013-11-12 Beckman Coulter, Inc. Multidimensional particle analysis data cluster reconstruction
US20110109617A1 (en) * 2009-11-12 2011-05-12 Microsoft Corporation Visualizing Depth

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
Hanane Azzag et al, "VRMiner: A Tool for Multimedia Database Mining with Virtual Reality", Processing and Managing Complex Data for Decision Support, 2006-01-31*
Jacob Frelinger et al, "Flow: Statistics, visualization and informatics for flow cytometry", Source Code for Biology and Medicine, 2008-06-17*

Also Published As

Publication number Publication date
US20150371427A1 (en) 2015-12-24
KR20130136476A (ko) 2013-12-12
JP6269808B2 (ja) 2018-01-31
EP2647976A4 (en) 2017-08-09
US20130229412A1 (en) 2013-09-05
US9542768B2 (en) 2017-01-10
JP6070192B2 (ja) 2017-02-01
WO2012073824A1 (ja) 2012-06-07
CN103229041A (zh) 2013-07-31
JP2017111155A (ja) 2017-06-22
JPWO2012073824A1 (ja) 2014-05-19
CN103229041B (zh) 2016-03-02
EP2647976A1 (en) 2013-10-09

Similar Documents

Publication Publication Date Title
US9710953B2 (en) Apparatus, method, and program for 3D data analysis, and fine particle analysis system
JP6269808B2 (ja) ３ｄデータ解析装置および３ｄデータ解析方法ならびに３ｄデータ解析プログラム
JP5707904B2 (ja) ３ｄデータ解析装置および３ｄデータ解析方法
US9959450B2 (en) Apparatus, method and program for 3D data analysis, and microparticle analysis system
JP5691452B2 (ja) ３ｄデータ解析装置および３ｄデータ解析方法ならびに３ｄデータ解析プログラム
JP2013088167A5 (ko)
WO2014123859A1 (en) Digital holographic microscopy apparatus and method for clinical diagnostic hematology
JP2014134524A (ja) 理化学装置および画像処理方法

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant