JP2009515459A - イメージ処理方法及び装置 - Google Patents
イメージ処理方法及び装置 Download PDFInfo
- Publication number
- JP2009515459A JP2009515459A JP2008539906A JP2008539906A JP2009515459A JP 2009515459 A JP2009515459 A JP 2009515459A JP 2008539906 A JP2008539906 A JP 2008539906A JP 2008539906 A JP2008539906 A JP 2008539906A JP 2009515459 A JP2009515459 A JP 2009515459A
- Authority
- JP
- Japan
- Prior art keywords
- image
- clock rate
- data
- processing
- output
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 17
- 238000012545 processing Methods 0.000 claims abstract description 146
- 238000003384 imaging method Methods 0.000 claims description 30
- 238000012544 monitoring process Methods 0.000 claims description 9
- 230000005540 biological transmission Effects 0.000 claims description 8
- 230000003247 decreasing effect Effects 0.000 claims description 5
- 230000007423 decrease Effects 0.000 claims description 4
- 230000004044 response Effects 0.000 claims description 2
- 238000000034 method Methods 0.000 description 65
- 230000008569 process Effects 0.000 description 34
- 238000010586 diagram Methods 0.000 description 26
- 238000007781 pre-processing Methods 0.000 description 21
- 230000000694 effects Effects 0.000 description 14
- 230000003139 buffering effect Effects 0.000 description 5
- 230000006835 compression Effects 0.000 description 5
- 238000007906 compression Methods 0.000 description 5
- 239000003550 marker Substances 0.000 description 5
- 230000009467 reduction Effects 0.000 description 5
- 230000006870 function Effects 0.000 description 4
- 238000013461 design Methods 0.000 description 3
- 238000013139 quantization Methods 0.000 description 3
- 239000000470 constituent Substances 0.000 description 2
- 230000000630 rising effect Effects 0.000 description 2
- 101000969688 Homo sapiens Macrophage-expressed gene 1 protein Proteins 0.000 description 1
- 102100021285 Macrophage-expressed gene 1 protein Human genes 0.000 description 1
- 238000009825 accumulation Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 239000012141 concentrate Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 230000001131 transforming effect Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Studio Devices (AREA)
- Image Input (AREA)
- Color Television Systems (AREA)
- Color Television Image Signal Generators (AREA)
Abstract
本発明の実施形態に係るイメージシグナルプロセッサは、プレビューモードのための処理クロックレート又は出力クロックレートと、キャプチャーモードのための処理クロックレート又は出力クロックレートとを異なって適用し、キャプチャーモードの遂行時に、処理クロックレートが、出力クロックレート以上になるように制御できる。本発明により、イメージの処理時、遅延現状が減少できる。
Description
120 イメージシグナルプロセッサ
130 バックエンドチップ
140 ベースバンドチップ
150 表示部
220 量子化器
230 エントロピーエンコーダ
310 クロック発生器
320 サブISP
330 エンコーディング部
340 データ出力部
410 前処理部
415 YUV出力部
420 出力制御部
425 JPEGエンコーダ
430 バッファーメモリ
435 バッファー管理部
450 センサー制御部
445 制御ユニット
Claims (20)
- イメージセンサー、イメージシグナルプロセッサ及び受信段を含む撮像装置において、
外部映像に相応する電気信号を生成して出力するイメージセンサーと;
エンコーダを備え、前記電気信号に相応するYUVデータ又は前記エンコーダを用いて、エンコーディングされたデータを生成して前記受信段に出力するイメージシグナルプロセッサと;を含み、
前記エンコーディングされたデータを生成するための第2の処理クロックレートは、前記YUVデータを生成するための第1の処理クロックレートを超過することを特徴とする撮像装置。 - 前記第1の処理クロックレートは、前記YUVデータ及び前記エンコーディングされたデータを出力するための出力クロックレート以下であり、前記第2の処理クロックレートは、前記出力クロックレート以上であることを特徴とする請求項1に記載の撮像装置。
- 前記第1の処理クロックレートと前記第2の処理クロックレートとの比は、一つのフレームに相応する前記YUVデータの大きさと、エンコーディングされるべきデータの大きさとの比であることを特徴とする請求項1に記載の撮像装置。
- 前記大きさは、面積、横長さ、縦長さ、対角線長さのいずれかであることを特徴とする請求項3に記載の撮像装置。
- 前記イメージセンサーは、前記イメージシグナルプロセッサから、前記第1の処理クロックレート、あるいは、前記第2の処理クロックレートに相応して入力されたクロック信号に符合するように、前記電気信号を生成して出力することを特徴とする請求項1に記載の撮像装置。
- 前記第1の処理クロックレートは、プレビュー状態のクロックレートであり、前記第2の処理クロックレートは、前記受信段から入力されたキャプチャー命令に相応するフレームを処理するためのクロックレートであることを特徴とする請求項1に記載の撮像装置。
- 前記キャプチャー命令に相応するk(自然数)番目のフレームを処理する途中で、k+1番目のフレームの入力が開始されることを意味する垂直同期信号(V_sync)が、前記イメージセンサーから入力される場合、前記イメージシグナルプロセッサは、前記イメージセンサーにスキップ命令を伝送し、前記イメージセンサーは、前記k+1番目のフレームに相応する電気信号を出力しないことを特徴とする請求項6に記載の撮像装置。
- 前記キャプチャー命令に相応するk(自然数)番目のフレームを処理する途中で、k+1番目のフレームの入力が開始されることを意味する垂直同期信号(V_sync)が、前記イメージセンサーから入力される場合、前記イメージシグナルプロセッサは、前記イメージセンサーから入力される電気信号の処理をスキップすることを特徴とする請求項6に記載の撮像装置。
- 前記イメージシグナルプロセッサは、前記エンコーディングされたデータを前記受信段に伝送するために臨時に格納するバッファーメモリを含み、
前記バッファーメモリに格納されたエンコーディングされたデータの量が、予め指定された大きさ以上である場合、前記第2の処理クロックレートを減少させることを特徴とする請求項1に記載の撮像装置。 - 前記キャプチャー命令に相応するk(自然数)番目のフレームを処理する途中で、k+1番目のフレームの入力が遅延入力されるように前記イメージセンサーに指示することを特徴とする請求項6に記載の撮像装置。
- イメージシグナルプロセッサにおいて、
処理クロックレートに相応するクロック信号を出力するクロック発生器と;
キャプチャー命令が入力されると、前記クロック発生器が増加された処理クロックレートに相応するクロック信号を出力するように制御する制御ユニットと;
前記クロック信号に応じて、イメージセンサーから入力される電気信号を用いてYUVデータを生成するサブISPと;
前記クロック信号に応じて、前記YUVデータを用いてエンコーディングされたイメージデータを生成するエンコーディング部と;
前記エンコーディングされたイメージデータを蓄積するメモリと;
前記制御ユニットの制御により、前記蓄積されたエンコーディングされたイメージデータを、予め指定された時点ごとに受信段に出力する出力部と;を含むイメージシグナルプロセッサ。 - 前記メモリに蓄積されたエンコーディングされたイメージデータの量をモニターリングし、モニターリング情報を生成するバッファー管理部を更に含み、
前記制御ユニットは、前記モニターリング情報を用いて、前記処理クロックレートを増減することを特徴とする請求項11に記載のイメージシグナルプロセッサ。 - 前記キャプチャー命令が入力される前には、前記出力部は、前記サブISPにより出力される前記YUVデータを前記受信段に出力することを特徴とする請求項11に記載のイメージシグナルプロセッサ。
- 前記キャプチャー命令に相応するk(自然数)番目のフレームを処理する途中で、k+1番目のフレームの入力が開始されることを意味する垂直同期信号(V_sync)が、前記イメージセンサーから入力される場合、前記制御ユニットは、前記イメージセンサーにスキップ命令を伝送し、前記イメージセンサーは、前記k+1番目のフレームに相応する電気信号を出力しないことを特徴とする請求項11に記載のイメージシグナルプロセッサ。
- 前記キャプチャー命令に相応するk(自然数)番目のフレームを処理する途中で、k+1番目のフレームの入力が開始されることを意味する垂直同期信号(V_sync)が、前記イメージセンサーから入力される場合、前記制御ユニットは、前記サブISPにスキップ命令を伝送し、前記サブISPは、前記k+1番目のフレームに相応するYUVデータ生成をスキップすることを特徴とする請求項11に記載のイメージシグナルプロセッサ。
- 前記キャプチャー命令に相応するk(自然数)番目のフレームを処理する途中で、k+1番目のフレームの入力が遅延入力されるように前記イメージセンサーに指示することを特徴とする請求項11に記載のイメージシグナルプロセッサ。
- イメージセンサー、イメージシグナルプロセッサ及び受信段を含む撮像装置の前記イメージシグナルプロセッサで行われるイメージ処理方法において、
(a)第1の処理クロックレートに従って、前記イメージセンサーから入力される電気信号に相応するYUVデータを生成し、第1の出力クロックレートに従って、前記YUVデータを前記受信段に出力する段階と;
(b)前記受信段からキャプチャー命令を入力される段階と;
(c)前記第1の処理クロックレートを超過する第2の処理クロックレートに従って、前記イメージセンサーから入力される電気信号に相応するエンコーディングされたデータを生成し、第2の出力クロックレートに従って、前記エンコーディングされたデータを前記受信段に出力する段階と;を含み、
前記イメージシグナルプロセッサは、エンコーダを備えることを特徴とするイメージ処理方法。 - 前記イメージセンサーは、前記イメージシグナルプロセッサから、前記第1の処理クロックレート、あるいは、前記第2の処理クロックレートに相応して入力されたクロック信号に符合するように、前記電気信号を生成して出力することを特徴とする請求項17に記載のイメージ処理方法。
- 前記第1の処理クロックレートは、プレビュー状態のクロックレートであり、前記第2の処理クロックレートは、前記受信段から入力されたキャプチャー命令に相応するフレームを処理するためのクロックレートであることを特徴とする請求項17に記載のイメージ処理方法。
- 前記段階(c)は、
前記第2の処理クロックレートに従って、前記イメージセンサーから入力される電気信号に相応するエンコーディングされたデータを生成する段階と;
前記エンコーディングされたデータをバッファーメモリに格納する段階と;
予め指定された条件に符合する期間の間に、前記バッファーメモリに格納された前記エンコーディングされたデータを、予め指定された時点ごとに、前記第2の出力クロックレートに従って前記前記受信段に出力する段階と;を含み、
前記バッファーメモリに格納されたエンコーディングされたデータの量が、予め指定された大きさ以上である場合、前記第2クロックレートを減少させることを特徴とする請求項17に記載のイメージ処理方法。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR10-2005-0108257 | 2005-11-11 | ||
KR1020050108257A KR100591796B1 (ko) | 2005-11-11 | 2005-11-11 | 이미지 처리 방법 및 장치 |
PCT/KR2006/002055 WO2007055450A1 (en) | 2005-11-11 | 2006-05-29 | Image processing method and device |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2009515459A true JP2009515459A (ja) | 2009-04-09 |
JP4932846B2 JP4932846B2 (ja) | 2012-05-16 |
Family
ID=37183077
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008539906A Active JP4932846B2 (ja) | 2005-11-11 | 2006-05-29 | イメージ処理方法及び装置 |
Country Status (5)
Country | Link |
---|---|
US (1) | US8018499B2 (ja) |
JP (1) | JP4932846B2 (ja) |
KR (1) | KR100591796B1 (ja) |
CN (1) | CN101305619B (ja) |
WO (1) | WO2007055450A1 (ja) |
Families Citing this family (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100674474B1 (ko) * | 2005-11-02 | 2007-01-25 | 엠텍비젼 주식회사 | 수직 동기 신호 지연 출력 방법 및 그 방법을 수행하는이미지 시그널 프로세서 |
KR100827680B1 (ko) | 2006-07-13 | 2008-05-07 | 엠텍비젼 주식회사 | 썸네일 데이터 전송 방법 및 장치 |
US20090167888A1 (en) * | 2007-12-28 | 2009-07-02 | Yo-Hwan Noh | Methods of processing imaging signal and signal processing devices performing the same |
KR101661574B1 (ko) * | 2009-11-10 | 2016-10-14 | 삼성전자주식회사 | 셔터-딜레이를 줄이기 위한 카메라 모듈 |
US20110268427A1 (en) * | 2010-04-30 | 2011-11-03 | Brelay Herve | Methods and apparatuses for a projected pvr experience |
US8543724B2 (en) | 2010-04-30 | 2013-09-24 | Digital Keystone, Inc. | Methods and apparatuses for a projected PVR experience |
CN102289143A (zh) * | 2010-06-18 | 2011-12-21 | 上海三旗通信科技有限公司 | 低端手机平台可以挂载高像素摄像头的实现方法 |
US9883116B2 (en) * | 2010-12-02 | 2018-01-30 | Bby Solutions, Inc. | Video rotation system and method |
JP5808485B2 (ja) * | 2011-06-23 | 2015-11-10 | ▲華▼▲為▼終端有限公司Huawei Device Co., Ltd. | 移動端末の録画方法、関連装置及びシステム |
TWI459814B (zh) * | 2011-09-28 | 2014-11-01 | Altek Corp | 可自動切換記憶體時脈之影像擷取裝置及其控制方法 |
US9313378B2 (en) * | 2012-04-16 | 2016-04-12 | Samsung Electronics Co., Ltd. | Image processing apparatus and method of camera |
US9911174B2 (en) * | 2015-08-26 | 2018-03-06 | Apple Inc. | Multi-rate processing for image data in an image processing pipeline |
US11570479B2 (en) | 2020-04-24 | 2023-01-31 | Samsung Electronics Co., Ltd. | Camera module, image processing device and image compression method |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005167489A (ja) * | 2003-12-01 | 2005-06-23 | Sony Corp | 記録装置および方法、再生装置および方法、ならびに、記録再生装置および方法 |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5206730A (en) * | 1989-11-10 | 1993-04-27 | Konica Corporation | Still video camera having one-shot and serial shot modes |
JPH03154487A (ja) * | 1989-11-10 | 1991-07-02 | Konica Corp | ディジタルスチルビデオカメラ |
JPH099251A (ja) * | 1995-06-20 | 1997-01-10 | Hitachi Ltd | 並列画像符号化方法およびその装置 |
JPH10233947A (ja) | 1997-02-19 | 1998-09-02 | Hitachi Ltd | 撮像装置 |
JP3296780B2 (ja) * | 1998-05-11 | 2002-07-02 | 三洋電機株式会社 | ディジタルカメラ |
JP2000032332A (ja) * | 1998-07-07 | 2000-01-28 | Casio Comput Co Ltd | 電子カメラ |
US7424207B2 (en) * | 2000-02-18 | 2008-09-09 | Sanyo Electric Co., Ltd. | Digital camera |
JP2001292347A (ja) | 2000-04-06 | 2001-10-19 | Sony Corp | ワイヤレス・ビデオカメラ |
KR100377108B1 (ko) | 2000-12-11 | 2003-03-26 | 주식회사 테라벨류테크놀로지 | 라스터-블록변환 데이터 처리장치 |
JP4570837B2 (ja) * | 2002-05-20 | 2010-10-27 | 富士フイルム株式会社 | 撮像装置 |
US20060174303A1 (en) * | 2003-04-15 | 2006-08-03 | Kanazawa University Technology Licensing Organization Ltd. | Moving picture encoding or decoding processing system and mobin g picture encoding or decoding processing method |
JP4054917B2 (ja) * | 2003-09-17 | 2008-03-05 | カシオ計算機株式会社 | 撮像装置、及びその動画撮影方法、プログラム |
KR100605935B1 (ko) * | 2003-10-31 | 2006-08-02 | 삼성전자주식회사 | 동영상 촬영 방법 |
-
2005
- 2005-11-11 KR KR1020050108257A patent/KR100591796B1/ko active IP Right Grant
-
2006
- 2006-05-29 JP JP2008539906A patent/JP4932846B2/ja active Active
- 2006-05-29 US US12/092,941 patent/US8018499B2/en active Active
- 2006-05-29 CN CN2006800420957A patent/CN101305619B/zh active Active
- 2006-05-29 WO PCT/KR2006/002055 patent/WO2007055450A1/en active Application Filing
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005167489A (ja) * | 2003-12-01 | 2005-06-23 | Sony Corp | 記録装置および方法、再生装置および方法、ならびに、記録再生装置および方法 |
Also Published As
Publication number | Publication date |
---|---|
US8018499B2 (en) | 2011-09-13 |
KR100591796B1 (ko) | 2006-06-26 |
CN101305619A (zh) | 2008-11-12 |
CN101305619B (zh) | 2010-05-19 |
WO2007055450A1 (en) | 2007-05-18 |
JP4932846B2 (ja) | 2012-05-16 |
US20090015701A1 (en) | 2009-01-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4932846B2 (ja) | イメージ処理方法及び装置 | |
JP4641892B2 (ja) | 動画像符号化装置、方法、及びプログラム | |
US7948527B2 (en) | Image signal processor and method for outputting deferred vertical synchronous signal | |
US8179452B2 (en) | Method and apparatus for generating compressed file, and terminal comprising the apparatus | |
KR100664550B1 (ko) | 인코딩된 데이터 전달 방법 및 그 방법을 수행하는 촬상장치 | |
KR100685300B1 (ko) | 인코딩된 데이터 전달 방법 및 그 방법을 수행하는 촬상장치 | |
KR100788983B1 (ko) | 인코딩된 데이터 전달 방법 및 그 방법을 수행하는 촬상장치 | |
KR100935541B1 (ko) | 이미지 신호의 처리 방법 및 이를 수행하는 신호 처리 장치 | |
US8154749B2 (en) | Image signal processor and deferred vertical synchronous signal outputting method | |
KR100664554B1 (ko) | 인코딩된 데이터 전달 방법 및 그 방법을 수행하는 촬상장치 | |
KR20070047729A (ko) | 수직 동기 신호 지연 출력 방법 및 그 방법을 수행하는이미지 시그널 프로세서 | |
US20130057719A1 (en) | Image pickup apparatus | |
KR100854724B1 (ko) | 인코딩된 데이터 전달 방법 및 그 방법을 수행하는 촬상장치 | |
KR20070047730A (ko) | 인코딩된 데이터 전달 방법 및 그 방법을 수행하는 촬상장치 | |
KR100907465B1 (ko) | 이미지 신호의 처리 방법 및 이를 수행하는 신호 처리 장치 | |
KR100902420B1 (ko) | 캡쳐 영상을 시간 지연 없이 표시할 수 있는 영상 처리장치, 방법 및 상기 방법을 프로그램화하여 수록한컴퓨터로 읽을 수 있는 기록매체 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20110221 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110405 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110421 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20120207 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20120215 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4932846 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150224 Year of fee payment: 3 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |