KR100824089B1 - 신호 처리 장치 및 방법, 카메라 - Google Patents
신호 처리 장치 및 방법, 카메라 Download PDFInfo
- Publication number
- KR100824089B1 KR100824089B1 KR1020027002611A KR20027002611A KR100824089B1 KR 100824089 B1 KR100824089 B1 KR 100824089B1 KR 1020027002611 A KR1020027002611 A KR 1020027002611A KR 20027002611 A KR20027002611 A KR 20027002611A KR 100824089 B1 KR100824089 B1 KR 100824089B1
- Authority
- KR
- South Korea
- Prior art keywords
- signal
- clipping
- color
- sensor
- signal processing
- Prior art date
Links
- 238000006243 chemical reaction Methods 0.000 claims abstract description 6
- 239000003086 colorant Substances 0.000 claims abstract description 5
- 238000000034 method Methods 0.000 claims description 11
- 230000035945 sensitivity Effects 0.000 claims description 8
- 230000000875 corresponding effect Effects 0.000 claims description 4
- 238000003672 processing method Methods 0.000 claims description 3
- 238000005070 sampling Methods 0.000 claims description 3
- 230000002596 correlated effect Effects 0.000 claims description 2
- 230000002093 peripheral effect Effects 0.000 claims description 2
- 230000006978 adaptation Effects 0.000 description 4
- 238000001514 detection method Methods 0.000 description 3
- FYZYXYLPBWLLGI-AUOPOVQUSA-N Genipin 1-beta-gentiobioside Chemical compound C([C@H]1O[C@H]([C@@H]([C@@H](O)[C@@H]1O)O)O[C@@H]1OC=C([C@@H]2[C@H]1C(=CC2)CO)C(=O)OC)O[C@@H]1O[C@H](CO)[C@@H](O)[C@H](O)[C@H]1O FYZYXYLPBWLLGI-AUOPOVQUSA-N 0.000 description 2
- 239000008186 active pharmaceutical agent Substances 0.000 description 2
- 238000003491 array Methods 0.000 description 2
- 230000001419 dependent effect Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 210000003127 knee Anatomy 0.000 description 2
- 238000007781 pre-processing Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/64—Circuits for processing colour signals
- H04N9/73—Colour balance circuits, e.g. white balance circuits or colour temperature control
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
- H04N25/44—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by partially reading an SSIS array
- H04N25/447—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by partially reading an SSIS array by preserving the colour pattern with or without loss of information
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Color Television Image Signal Generators (AREA)
Abstract
본 발명은 복수개의 컬러를 갖는 컬러 마스크 패턴에 의해 커버되는 센서로부터 센서 출력 신호를 위한 신호 처리 장치에 관한 것으로서, 신호 처리 장치는 센서 출력 신호로부터 각각의 픽셀에 대한 복수개의 컬러 신호 값(R, G, B)을 생성하는 재구성 유닛(5)과 센서 출력 신호 또는 복수개의 컬러 신호 값(R, G, B)을 클리핑하는 클리핑 장치(8)를 포함한다. 바람직하게, 신호 처리 장치는 복수개의 컬러 신호 값(R, G, V)으로부터 휘도 신호(Y) 및 색차 신호(U, V)를 생성하는 변환 유닛(6)과 클리핑이 수행될 때, 색차 신호(U, V)를 제로 컬러 차로 선택적으로 설정하는 조정 유닛(10)을 더 포함한다. 유리하게도, 클리핑 장치(8)는 센서(3)와 재구성 유닛(5) 사이에 배치되고, 신호 처리 장치는 조정 유닛을 위한 스위치 신호를 생성하는 단일 비트 백색 클립 지연 유닛(11)을 더 포함하며, 스위치 신호는 클리핑이 발생하였음을 나타내는 클리핑 장치(8)로부터의 신호(SS)로부터의 또는 적어도 그 신호(SS)에 응답하여 적어도 2 x 2 비트 어레이를 포함한다.
Description
본 발명은 센서 출력 신호를 처리하는 방법 및 장치와, 그러한 장치를 포함하는 카메라에 관한 것이다.
센서 출력 신호를 처리하는 공지된 신호 처리 장치 및 방법에서, 가령 센서의 최대 전자 전하 용량(maximum electron charge capacity)과 같은 센서의 최대 감도(maximum sensitivity)가 초과되도록 사용되는 센서, 예를 들어 RGB 베이어 센서(Bayer sensor)가 과노출(overexpose)되는 경우 컬러 정보의 손실에 기인하는 바람직하지 못한 아티팩트(artifacts)가 발생할 수 있다. 그때, 원래의 컬러, 특히 백색을 재구성하는 것은 불가능하여, 바람직하지 못한 아티팩트를 초래할 것이다. 이는 컬러 신호를 재구성 시, 주변 또는 인접 픽셀과 관련된 임의의 픽셀 정보가 사용될 때 더 문제가 된다. 그렇게 되면, 재구성된 컬러 신호 값은 센서 감도가 초과되고 재구성된 컬러 신호 값으로부터 변환된 휘도 및 색차(chrominance) 신호로부터 구성된 이미지 내에 아티팩트가 생성되는 불연속부를 초래할 수 있다.
발명의 개요
본 발명의 목적은 특히 개선된 센서 출력 신호 처리를 제공하는 것이다. 이를 위해, 본 발명은 독립항에 규정된 것과 같은 센서 출력 신호 처리를 제공한다. 바람직한 실시예는 종속항에서 규정된다.
본 발명에 따르면, 바람직하지 못한 아티팩트가 효율적으로 차단된다. 특정 컬러에 대한 어떠한 컬러 정보도 손실되지 않고, 불연속부뿐만 아니라 그에 따른 이미지 내의 아티팩트도 효율적으로 막을 수 있다.
바람직한 실시예에서, 전처리기(a pre-processor)는 센서와 재구성 유닛 사이에 배치되고, 전처리기 유닛은 센서 출력 신호의 진폭의 동적 범위를 제한하는 부가적인 클리핑 장치를 포함하는데, 클리핑 장치의 클리핑 레벨은 전처리기 내의 부가적인 클리핑 장치의 클리핑 레벨보다 더 낮다. 이러한 바람직한 실시예에 따른 장치에서, 후속하는 신호의 디지털화(dizitization)는 결과적 이미지의 정보 또는 품질을 손실시킴이 없이도 단순화된다.
다른 바람직한 실시예에서, 클리핑 장치는 1 비트 백색 클립 지연 유닛(a single bit white clip delay unit)에 접속되는데, 이 유닛은 클리핑이 발생하였음을 나타내는 클리핑 장치로부터의 신호로부터 또는 적어도 그 신호에 응답하여, 적어도 2 x 2 비트 픽셀 어레이를 포함하는 스위치 신호(a switch signal)를 생성한다. 본 발명의 그러한 실시예에서, 스위치 신호는 클리핑이 발생하였을 때 색차 신호가 제로 컬러 차(zero color difference)로 설정될 것이며, 또한 완전 백색 픽셀 신호로 그러한 컬러 차 신호(color difference signal)를 대신할 수도 있다는 나타낸다. 그에 따라, 백색 클리핑은 컬러 신호 값들 중 하나가 클리핑 레벨을 초과하는 경우 어레이의 범위에 걸처 보장된다. 그러한 단일 비트 백색 클립 지연 유닛은 컬러 마스크 패턴 내의 픽셀에 대응하는 원하는 어레이 범위를 얻기 위해 적어도 1 비트 지연 유닛과 1 비트 행(row) 지연 유닛을 포함할 수 있다.
또한, 지연 적응 회로(a delay adaptation circuit)가 1 비트 백색 클립 지연 유닛으로부터의 스위치 신호를 휘도 및 색차 신호와 동기화시키기 위해 1 비트 백색 클립 지연 유닛에 접속될 수 있다. 휘도 및 색차 신호는 종종 후속 처리로부터 유도되기 때문에, 클리핑이 달성된 후, 지연 적응 회로는 1 비트 백색 클립 지연 유닛에 의해 생성된 신호 및 색차 신호의 삽입을 보장하게 된다.
또한, 재구성 유닛은 윤곽 처리기(a contour processor)를 포함할 수 있는데, 이 처리기는 특정 픽셀의 재구성 시, 주변 픽셀을 포함하고, 단일 비트 백색 클립 지연 유닛은 N x M 단일 비트 윤곽 오프 생성기(an N x M single bit contour off generator)를 포함한다. 이러한 방법으로, 특정 픽셀에 대한 신호를 재구성하면, 특정 컬러 신호에 대한 값이 클리핑 레벨보다 높지 않게 될 수 있고, 따라서 또 다시 바람직하지 못한 아티팩트가 생성될 수 있고, 이 아티팩트도 효율적으로 차단되어야 한다. 다른 이점은 윤곽 처리기 오프 신호를 제공하기 위해 단일 비트 백색 클립 지연 유닛을 확장함으로써, 백색 클립된 에지(white clipped edge)에서의 원하지 않는 첨예화(sharpening)를 막을 수 있고, 그에 따라 화질이 개선될 것이라는 것이다.
또 다른 바람직한 실시예에서, 클리핑 장치는 후속 처리 또는 전처리에 앞서, 센서로부터 후속하는 아날로그 대 디지털 변환기(ADC)로의 아날로그 경로 내에 배치된다. 그러한 구성은 상당히 유리하다. 이러한 방식으로, 아날로그 대 디지털 변환에 앞서, 감마(gamma) 또는 니(knee)와 같은 비선형 처리 방법을 가능하게 하는 아날로그 백색 밸런스 제어가 달성되어, 아날로그 대 디지털 변환기가 변환할 비트의 양이 상당히 줄어든다. 또한, 녹색 신호와, 백색 보정된 적색 및 청색 신호가 사용될 수 있는 휘도 기반 재구성 방법(a luminance based reconstruction method)이 제공될 수 있다.
본 발명의 이들 및 다른 측면은 이하 기술되는 실시예로부터 명백해지고 그 실시예를 참조하여 설명될 것이다.
도 1은 본 발명에 따른 장치의 개략도,
도 2는 본 발명에 따른 또 다른 장치의 개략도,
도 3은 본 발명에 따른 장치의 또 다른 실시예의 개략도,
도 4는 도 3의 단일 비트 백색 클립 지연 유닛의 개략도.
상이한 도면에서, 동일한 또는 유사한 구성 요소는 동일한 참조 번호로 식별된다.
도면에 대한 설명을 하기에 앞서, 본 명세서에 도시되고 기술된 모든 실시예에서 RGB 베이어 센서가 사용되지만, 본 발명이 이에 한정되는 것은 아니라는 것을 유의해야 한다. RGB 베이어 센서는 다음의 RGB 컬러 마스크 패턴(RGB color mask pattern)을 포함한다.
RGRGRGRGRGRGRGRG
GBGBGBGBGBGBGBGB
RGRGRGRGRGRGRGRG
GBGBGBGBGBGBGBGB
그러므로, 이러한 컬러 마스크 패턴에서 다음의 기본 패턴이 각각의 픽셀에 대해 반복된다.
RG
GB
그러한 단위는 RGB 베이어 센서의 가장 작은 휘도 픽셀이다. 본 발명에 따라, 센서 출력 신호 또는 재구성된 복수개의 컬러 신호 값은 베이어 센서의 최대 감도보다 더 높은 레벨을 갖는 신호가 결과적 이미지 내에 아티팩트를 생성하는 것을 막기 위해 클리핑 장치에 의해 클리핑된다.
예를 들어, 녹색을 나타내는 G 신호가 센서의 최대 감도를 초과하면, 컬러 밸런스가 손실될 뿐만 아니라 G 신호가 밀접하게 연관된 많은 휘도 정보도 영향을 받게된다. 본 발명은 그로부터 초래되는 그러한 바람직하지 못한 아티팩트를 막기 위한 것이다.
도 1에 도시된 장치(1)는 렌즈(2) 및 센서(3)를 이용하여 이미지가 포착되는 신호 처리 장치이며, 센서(3)는 센서 출력 신호를 생성한다. 센서(3)는 복수개의 컬러를 갖는 컬러 마스크 패턴에 의해 커버된다. 센서로(3)부터의 센서 출력 신호는 전처리기(4)로 송신되는데, 전처리기(4)는 예를 들어 노이즈를 줄이기 위한 상관 이중 샘플링(a correlated double sampling : CDS) 회로, 저광량 조건에 대한 자동 이득 회로 및 아날로그 대 디지털 변환기(analog-to-digital converter: ADC)를 포함한다. 전처리기(4) 내에서 전처리된 후에, 센서 출력 신호는 RGB 재구성을 위해 재구성 유닛(5)으로 송신되어, 전처리된 센서 출력 신호로부터 각각의 픽셀에 대한 컬러 신호 값을 얻는다. 각각의 픽셀에 대한 컬러 신호 값은 각각의 픽셀에 대한 컬러 신호 값으로부터 회로(7)를 통해 휘도 및 색차 신호(Y; U, V)를 생성하는 변환 유닛(6)으로 출력되는데, 컬러 신호 값(R, G, B)은 선택에 따라 감마 처리와 같은 매트릭스 백색 밸런스 처리 및/또는 비선형 처리를 받게된다.
3 개의 클리핑 장치(8)는 컬러 신호 값(R, G, B)의 각각에 대해 재구성 유닛(5) 및 회로(7) 사이에 배치된다. 클리핑 장치는 각각의 재구성된 컬러 신호 값이 도 1에 Rw, Gw, Bw로 표시된 사전결정된 임계값 또는 클립 레벨을 초과하는지 여부를 검출한다. 컬러 신호 값 R, G, B 중 임의의 하나가 대응 클립 레벨 Rw, Gw, Bw를 초과한다면, 클리핑 장치가 활성화되어 그 출력 신호를 클립 레벨로 제한할 것이다. 클립 레벨은 센서의 최대 감도보다 작게, 바람직하게는 약간 작도록 사전결정되는데, 이 최대 감도는 RGB 베이어 센서의 경우, 그 최대 전하 용량이다. 그러므로, 신호 처리 장치(1)에서, 클리핑 장치(8)는 센서(3)의 최대 감도가 컬러 신호 값 중 임의의 하나에 대해 초과되었는지 여부와 그에 따라 이들 컬러 신호 값 중 임의의 하나에서의 정보가 손실되었는지를 결정할 수 있다. 이러한 현상은 색차 및 휘도 신호(U, V; Y)를 이용하여 재구성된 이미지 내에 아티팩트를 초래할 수 있다. 그러한 아티팩트를 막기 위해, 클리핑 장치는 검출 신호 DS를 OR 회로(9)로 보내는데, 이 OR 회로(9)는 입력된 컬러 신호 값의 결과가 사전결정된 클립 레벨 Rw, Gw, Bw를 초과하여 관련 클리핑 장치(8) 중 적어도 하나가 활성화되었음을 클리핑 장치(8)로부터의 검출 신호 중 적어도 하나가 나타내는 경우 검출 신호 DS로부터 스위치 신호 SS를 생성한다.
OR 회로(9)는 이러한 스위치 신호를 조정 유닛(10)으로 보내는데, 이 조정 유닛(10)에서 색차 신호(U, V)는 컬러 신호 값 중 임의의 하나가 클리핑 되는 경우, 즉 클리핑 장치(8) 중 하나가 활성화되었을 때(이는 스위치 신호 SS에 의해 나타남), 0으로 스위칭된다.
클리핑 장치(8)는 재구성 유닛(5)에 의한 RGB 재구성 이후의 신호 경로 내에 배치된다. 재구성 유닛(5)은 특정 픽셀에 대한 값에 대한 컬러 신호 값을 재구성할 때 주변 픽셀로부터의 신호를 고려하여 구현될 수 있다. 따라서, 주변 픽셀을 이용한 재구성은 컬러 신호 값에 불연속부를 초래할 수 있다. 이들 불연속부는 클리핑 장치가 신호 경로 내의 재구성 유닛(5) 앞에 위치할 경우, 클리핑 장치의 클립 레벨보다 더 높은 컬러 신호 값을 초래할 수 있다. 컬러 신호 값 R, G, B의 각각에 대해 재구성 유닛(5)에 의한 RGB 재구성 이후에 클리핑 장치를 위치시킴으로써, 그러한 불연속부는 효과적으로 검출되고 따라서 아티팩트가 색차 신호 및 휘도 신호(U, V; Y)로부터 생성된 이미지 내에 야기되는 것을 막을 수 있다.
여기서 전처리기(4)는 도 1의 실시예의 선택사양으로서 부가적인 클리핑 장치를 더 포함한다는 것을 유의해야 한다. 본 발명의 그러한 실시에에서, 센서 출력 신호의 진폭의 동적 범위는 제한될 수 있는데, 본 기술 분야의 당업자라면 알 수 있는 바와 같이, 센서 출력 신호의 추가의 처리, 특히 코딩 처리, 아날로그 대 디지털 변환, RGB 재구성 등과 관련한 이점을 갖는다. 전처리기(4) 내에 부가적인 클리핑 장치를 갖는 그러한 실시예에서, 재구성 유닛(5)에 의한 RGB 재구성 이후의 경로 내의 클리핑 장치(8)의 클립 레벨은 주변 픽셀로부터 RGB 재구성에 의해 아티팩트가 생성되는 것을 막기 위해 전처리기(4) 내의 부가적 클리핑 장치의 클립 레벨보다 더 낮아야 할 것이다.
도 2의 실시예에서, 단일 클리핑 장치(8)는 전처리기(4) 및 재구성 유닛(5) 사이에 배치된다. 재구성 유닛(5)은 컬러 신호 값 R, G, B를 재구성할 때, N x M 픽셀 영역을 고려한다. 컬러 신호 값을 재구성할 때 주변 픽셀 신호를 포함한 결과로서 컬러 신호 값 R, G, B의 불연속부으로부터 초래되는 아티팩트가 색차 및 휘도 신호(U, V; Y)로부터 생성된 이미지 내에 발생하는 것을 막기 위해, 다음과 같은 조치가 취해진다.
클리핑 장치(8)가 센서(3)로부터의 센서 출력 신호를 클리핑하도록 활성화되고 전처리기(4)에 의해 전처리된 것을 나타내는 스위치 신호 SS를 생성할 때, 이 스위치 신호 SS는 단일 비트 백색 클립 지연 유닛(11) 내에서 2 x 2 스위치 신호를 생성하는 데 사용되는데, 이 2 x 2 스위치 신호는 지연 적응 회로(12)로 송신되어 조정 유닛(10)을 제어하는 2 x 2 스위치 신호 SS2 x 2를 얻는다. 단일 비트 백색 클립 지연 유닛(11)은 1 비트 지연부(11a)와, 1 비트 지연부(11a)의 입력 및 출력을 가산하여 2 픽셀 폭 스위치 신호를 달성하는 가산기(11b)와, 1 비트 행 지연부(11c)와 1 비트 행 지연부(11c)의 입력 및 출력을 가산하는 가산기(11d)를 포함한다. 그에 따라, 단일 펄스 SS는 2 픽셀 폭의, 2 행 높이의 백색 클립 스위치 신호를 형성하는 2 x 2 정방형 펄스(a 2 x 2 square of pulse)로 변형된다. RGB 베이어 센서와 같은 센서의 가장 작은 휘도 신호가 2 x 2 RG/GB 어레이이기 때문에, 2 x 2 어레이는 백색 클립 아티팩트를 막기에 충분하다. 따라서, 단일 비트 백색 클립 지연 유닛(11)은 R, G 또는 B 픽셀 중 적어도 하나가 백색 클립 레벨을 초과할 때, 2 x 2 픽셀 어레이에 걸쳐 백색 클립을 보증한다. 지연 적응 회로(12)에서의 지연은 클리핑 장치(8)에 후속하는 여러 구성 요소에 의한 처리와 상응한다.
재구성 유닛(5)은 윤곽 처리(contour processing)를 더 실현하고, 그 결과 윤곽 신호 C는 휘도 신호 Y 내에 포함된다. 전술한 구성의 결과로서, 바람직하지 못한 영역의 에지(edge)에서의 첨예화를 피하는 것이 가능하게 되었는데, 이는 클리핑 장치(8)의 기인한 것이다. 그에 따라 화질이 개선된다.
또한, 클리핑 장치(8)를 전처리기(4) 내의 아날로그 대 디지털 변환기 앞에 배치하여 클리핑 장치가 아날로그 도메인(analog domain) 내에 배치될 수 있다는 것을 유의해야 한다. 이러한 방식으로, 예컨대, 아날로그 대 디지털 변환에 앞서 실행되는 아날로그 백색 밸런스 제어(white balance control) 및 '감마(gamma)' 또는 '니(knee)'와 같은 비선형 처리 방법을 구현하는 것이 가능한데, 이는 아날로그 대 디지털 변환기가 변환할 비트의 양을 줄일 수 있게 한다. 또한, G 및 화이트 레벨에서는 보정된 R 및 B 신호가 사용될 수 있는 휘도 기반 재구성 방법이 고안될 수 있다.
도 3 및 도 4는 신호 처리 장치(13)의 실시에를 도시하는데, 여기서 윤곽 처리의 효과를 제한하는 전술한 옵션이 더 설명된다. 본 명세서에서 재구성 유닛(5)은 전술한 바와 같이 특정 픽셀을 재구성할 때 주변 픽셀을 포함하는 윤곽 처리기를 포함한다. 이러한 윤곽 처리기를 디스에이블하게 하기 위해, 도 2의 단일 비트 백색 클립 지연 유닛(11)은 도 4에 자세하게 도시된 바와 같이 N x M 단일 비트 윤곽 처리기 오프 신호를 더 포함하는 단일 비트 백색 클립 지연 유닛(14)으로 대체된다. N x M 단일 비트 윤곽 처리기 오프 신호 생성기는 윤곽 처리기 오프 신호 Coff를 생성하는데, 이 오프 신호 Coff는 클리핑 장치(8)가 활성화된 그 픽셀을 둘러싸는 6 x 6 픽셀 어레이에 대해 윤곽 처리기를 저지한다. 여기서 5 x 5 또는 5 x 3(수평 X 수직) 어레이와 같은 다른 어레이 또는 그 밖의 다른 임의의 어레이가 사용될 수 있음을 유의해야한다. 이는 도 4에 도시된 구성에의 대응 조정을 필요로 할 수 있다. 예를 들어, 5 x 5 어레이의 경우 오른 쪽으로 마지막 '1 비트 행'이 삭제될 수 있지만, 윤곽 처리기 오프 신호는 마지막 '1 비트 픽셀(one bit pix)' 지연 없이 획득될 수 있고 그 구성의 나머지는 유지될 수 있다. 윤곽 처리기 오프 신호가 대응할 수 있는 다른 임의의 어레이는 도 4의 구성에 대한 유사한 변형을 필요로 할 것이다.
도 3에서, 재구성 유닛(5)은 RGB 컬러 신호 값 이외에도 윤곽 신호를 출력하는데, 윤곽 신호는 도 2와 관련하여 기술한 것과 같은 방식으로 휘도 신호 Y 내로 통합된다. 윤곽이 재구성 유닛(5) 내에서 고려되는 것을 막음으로써, 원하지 않는 영역의 에지에서의 첨예화 - 이는 클리핑 장치(8)에 의한 클리핑 처리를 받게됨 -를 효과적으로 막을 수 있어, 화질이 개선된다.
상세하게 전술된 것 외에도 본 발명의 몇몇 다른 실시예는 당업자에게 자명할 것이다. 예컨대 윤곽 처리기 오프 신호가 생성기(14)에 의해 생성되는 어레이는 획득된 이미지의 필요한 첨예도에 따라 변경될 수 있다. 또한 도면에 도시되고 전술한 RGB 베이어 센서(3)는 복수개의 컬러에 대해 컬러 마스크 패턴을 갖는 임의의 다른 센서로 대체될 수 있는데, 패턴의 특정 부분 내 및 특정 컬러에 대한 센서 감도는 최대값을 가지며 또한 초과될 수도 있다. 또한 모든 구성 요소는 아닐지라도 하드웨어 구성 요소라 상술되었던 구성 요소 대부분은 본 발명의 범주를 벗어나지 않고 선택적인 것으로서 또는 부가적으로 소프트웨어로 구현될 수 있다. 그러므로, 본 발명에 대한 보호 범위는 소정의 하나의 특정 실시예에 한정되어서는 안되지만, 첨부된 청구항에 따른 본 발명의 정의에 의해서만 한정된다. 청구항에서, 괄호 사이에 위치한 소정의 참조 부호는 청구항을 한정하는 것으로 해석되어서는 안될 것이다. "포함한다"는 단어는 청구항에 나열된 요소 또는 단계 이외의 요소 또는 단계의 존재를 배제하지 않는다. 단수의 요소는 복수개의 그러한 요소의 존재를 배제하지 않는다. 본 발명은 몇몇 구분된 요소를 포함하는 하드웨어 및 적절하게 프로그래밍된 컴퓨터에 의해 구현될 수 있다. 몇몇 수단을 열거하는 장치 청구항에서, 이들 수단의 몇몇은 하나의 또는 동일한 하드웨어의 아이템에 의해 구현될 수 있다. 어떤 수단이 서로 상이한 종속항에 언급된다는 사실만으로, 이들 수단의 조합이 유리하게 사용될 수 없다는 것을 나타내지 않는다.
Claims (10)
- 복수의 컬러를 갖는 컬러 마스크 패턴에 의해 커버된 센서로부터의 센서 출력 신호(a sensor output signal)에 대한 신호 처리 장치에 있어서,상기 센서 출력 신호로부터 각각의 픽셀에 대한 복수의 컬러 신호 값(R, G, B)을 생성하는 재구성 유닛(a reconstruction unit)(5)과,상기 센서 출력 신호 또는 상기 복수의 컬러 신호 값(R, G, B)을 클리핑(clipping)하는 클리핑 장치(a clipping unit)(8)와,상기 복수의 컬러 신호 값(R, G, B)으로부터 휘도 신호(luminance signals)(Y) 및 색차 신호(chrominance signals)(U, V)를 생성하는 변환 유닛(a conversion unit)(6)과,클리핑이 수행될 때 상기 색차 신호(U, V)를 제로 컬러 차(a zero color difference)로 선택적으로 설정하는 조정 유닛(a adjustment unit)(10)을 포함하는신호 처리 장치.
- 삭제
- 제 1 항에 있어서,상기 클리핑 장치(8)는 상기 센서(3)와 상기 재구성 유닛(5) 사이에 배치되고, 상기 신호 처리 장치는 상기 조정 유닛(10)용 스위치 신호를 생성하는 단일 비트 백색 클립 지연 유닛(a single bit white clip delay unit)(11)을 더 포함하되,상기 스위치 신호는 클리핑이 발생했다는 것을 나타내는 상기 클리핑 장치(8)로부터의 신호(SS)로부터 또는 적어도 상기 신호(SS)에 응답하여 적어도 2 x 2 비트 어레이를 포함하는신호 처리 장치.
- 제 3 항에 있어서,상기 재구성 유닛(5)은 특정 픽셀의 재구성 시 주변 픽셀을 포함하는 윤곽 처리기(a contour processor)를 포함하고,상기 단일 비트 백색 클립 지연 유닛(11)은 N x M 단일 비트 윤곽 처리기 오프 신호 생성기(N x M single bit contour processor off signal generator)를 포함하는신호 처리 장치.
- 제 1 항에 있어서,전처리기(a preprocessor)(4)가 상기 센서(3)와 상기 재구성 유닛(5) 사이에 배치되고, 상기 전처리기(4)는 상기 센서 출력 신호의 진폭의 동적 범위를 제한하는 부가적인 클리핑 장치를 포함하며, 상기 클리핑 장치(8)의 클리핑 레벨은 상기 전처리기(4) 내의 상기 부가적인 클리핑 장치의 클리핑 레벨보다 더 낮은신호 처리 장치.
- 제 5 항에 있어서,상기 전처리기(4)는 저광량 조건을 위한 자동 이득 제어 회로(an automatic gain circuit), 아날로그 대 디지털 변환기, 샘플링 회로 및 센서 잡음 감소를 위한 상관 이중 샘플링 회로(a correlated double sampling circuit)를 포함하는 그룹으로부터 적어도 하나를 더 포함하는신호 처리 장치.
- 제 1 항에 있어서,상기 클리핑 장치(8)는 상기 센서(3)로부터 후속하는 아날로그 대 디지털 변환기(ADC)로의 아날로그 경로 내에 배치되는신호 처리 장치.
- 제 1 항에 있어서,상기 클리핑 장치(8)는 상기 센서 출력 또는 상기 복수의 컬러 신호 값(R, G, B)이 최대 전하 용량과 같은 상기 센서(3)의 최대 감도에 대응하는 사전결정된 클리핑 레벨을 초과할 때 선택적 클리핑을 수행하는신호 처리 장치.
- 복수의 컬러를 갖는 컬러 마스크 패턴에 의해 커버되는 센서(3)로부터의 센서 출력 신호를 처리하는 방법에 있어서,상기 센서 출력 신호로부터 각각의 픽셀에 대한 복수의 컬러 신호 값을 재구성하는 단계(5)와,상기 센서 출력 신호 또는 상기 복수개의 컬러 신호 값을 클리핑하는 단계(8)와,상기 복수의 컬러 신호 값(R, G, B)으로부터 휘도 신호(luminance signals)(Y) 및 색차 신호(chrominance signals)(U, V)를 생성하는 단계(6)와,클리핑이 수행될 때(8) 상기 색차 신호(U, V)를 제로 컬러 차(a zero color difference)로 선택적으로 설정하는 단계(10)를 포함하는신호 처리 방법.
- 센서(3)와,청구항 1 항에 따른 신호 처리 장치를 포함하는카메라.
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP00202262 | 2000-06-29 | ||
EP00202262.2 | 2000-06-29 |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20020028225A KR20020028225A (ko) | 2002-04-16 |
KR100824089B1 true KR100824089B1 (ko) | 2008-04-21 |
Family
ID=8171712
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020027002611A KR100824089B1 (ko) | 2000-06-29 | 2001-06-25 | 신호 처리 장치 및 방법, 카메라 |
Country Status (6)
Country | Link |
---|---|
US (1) | US7123297B2 (ko) |
EP (1) | EP1300026B1 (ko) |
JP (1) | JP4639031B2 (ko) |
KR (1) | KR100824089B1 (ko) |
AT (1) | ATE553596T1 (ko) |
WO (1) | WO2002003711A1 (ko) |
Families Citing this family (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1367839A1 (en) * | 2002-05-28 | 2003-12-03 | Thomson Licensing S.A. | Method for processing signals representing colour pictures |
US7477781B1 (en) | 2002-10-10 | 2009-01-13 | Dalsa Corporation | Method and apparatus for adaptive pixel correction of multi-color matrix |
EP2877077B1 (en) | 2012-07-26 | 2021-05-26 | DePuy Synthes Products, Inc. | Continuous video in a light deficient environment |
CA2878514A1 (en) | 2012-07-26 | 2014-01-30 | Olive Medical Corporation | Ycbcr pulsed illumination scheme in a light deficient environment |
AU2014233193B2 (en) | 2013-03-15 | 2018-11-01 | DePuy Synthes Products, Inc. | Controlling the integral light energy of a laser pulse |
AU2014233515B2 (en) | 2013-03-15 | 2018-11-01 | DePuy Synthes Products, Inc. | Super resolution and color motion artifact correction in a pulsed color imaging system |
US10251530B2 (en) | 2013-03-15 | 2019-04-09 | DePuy Synthes Products, Inc. | Scope sensing in a light controlled environment |
JP6399749B2 (ja) * | 2013-12-19 | 2018-10-03 | キヤノン株式会社 | 撮像装置および撮像システム |
EP3119265B1 (en) | 2014-03-21 | 2019-09-11 | DePuy Synthes Products, Inc. | Card edge connector for an imaging sensor |
US11470295B2 (en) | 2018-02-26 | 2022-10-11 | Sony Corporation | Signal processing device, signal processing method, and imaging device |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0686312A (ja) * | 1992-03-31 | 1994-03-25 | Matsushita Electric Ind Co Ltd | 色信号クリッピングまたはリミッティング装置 |
JPH07184097A (ja) * | 1993-12-24 | 1995-07-21 | Canon Inc | 撮像装置 |
JPH09327033A (ja) * | 1996-06-05 | 1997-12-16 | Matsushita Electric Ind Co Ltd | 撮像装置 |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4697208A (en) | 1985-06-13 | 1987-09-29 | Olympus Optical Co., Ltd. | Color image pickup device with complementary color type mosaic filter and gamma compensation means |
JP2789588B2 (ja) * | 1988-01-30 | 1998-08-20 | ソニー株式会社 | カラー固体撮像装置 |
JPH04262678A (ja) | 1991-02-15 | 1992-09-18 | Nec Ic Microcomput Syst Ltd | 固体撮像装置 |
JP3937458B2 (ja) * | 1993-03-05 | 2007-06-27 | キヤノン株式会社 | 撮像装置 |
JP2931520B2 (ja) * | 1993-08-31 | 1999-08-09 | 三洋電機株式会社 | 単板式カラービデオカメラの色分離回路 |
JPH08256344A (ja) | 1995-03-17 | 1996-10-01 | Olympus Optical Co Ltd | 映像信号処理装置 |
US6266087B1 (en) | 1995-03-27 | 2001-07-24 | Texas Instruments Incorporated | Circuit and technique for smear subtraction in CCD image sensors |
JPH09187023A (ja) * | 1995-12-30 | 1997-07-15 | Sony Corp | カラー撮像装置及びビデオカメラ装置 |
JPH09200621A (ja) * | 1996-01-17 | 1997-07-31 | Nec Corp | 固体撮像装置 |
KR100574185B1 (ko) | 1997-07-15 | 2006-04-27 | 코닌클리케 필립스 일렉트로닉스 엔.브이. | 컬러 샘플 보간방법 및 보간장치 |
JP3490888B2 (ja) * | 1998-03-10 | 2004-01-26 | 三洋電機株式会社 | 色抑圧回路 |
JP3943719B2 (ja) * | 1998-06-23 | 2007-07-11 | オリンパス株式会社 | カラー撮像装置 |
-
2001
- 2001-06-25 KR KR1020027002611A patent/KR100824089B1/ko not_active IP Right Cessation
- 2001-06-25 EP EP01967087A patent/EP1300026B1/en not_active Expired - Lifetime
- 2001-06-25 JP JP2002506986A patent/JP4639031B2/ja not_active Expired - Fee Related
- 2001-06-25 AT AT01967087T patent/ATE553596T1/de active
- 2001-06-25 WO PCT/EP2001/007183 patent/WO2002003711A1/en active Application Filing
- 2001-06-28 US US09/894,085 patent/US7123297B2/en not_active Expired - Fee Related
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0686312A (ja) * | 1992-03-31 | 1994-03-25 | Matsushita Electric Ind Co Ltd | 色信号クリッピングまたはリミッティング装置 |
JPH07184097A (ja) * | 1993-12-24 | 1995-07-21 | Canon Inc | 撮像装置 |
JPH09327033A (ja) * | 1996-06-05 | 1997-12-16 | Matsushita Electric Ind Co Ltd | 撮像装置 |
Also Published As
Publication number | Publication date |
---|---|
JP4639031B2 (ja) | 2011-02-23 |
US7123297B2 (en) | 2006-10-17 |
KR20020028225A (ko) | 2002-04-16 |
EP1300026B1 (en) | 2012-04-11 |
ATE553596T1 (de) | 2012-04-15 |
WO2002003711A1 (en) | 2002-01-10 |
EP1300026A1 (en) | 2003-04-09 |
US20020054219A1 (en) | 2002-05-09 |
JP2004502386A (ja) | 2004-01-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR100711671B1 (ko) | 화상 신호 처리 장치 | |
US8953056B2 (en) | Method, apparatus and system for dynamic range estimation of imaged scenes | |
US6118547A (en) | Image processing method and apparatus | |
KR100824089B1 (ko) | 신호 처리 장치 및 방법, 카메라 | |
JP4243427B2 (ja) | デジタルピクセル出力信号の処理方法および装置 | |
JP3477871B2 (ja) | 映像信号処理装置 | |
JPH10214339A (ja) | 画像の濾波方法 | |
JP2004297701A (ja) | 映像処理装置および撮像システム | |
US7639287B2 (en) | Video imaging apparatus having non-linear input-output characteristic for improved image contrast control | |
US7643177B2 (en) | System with a random number generator used to remove contouring in CMOS imager data having an extended dynamic range | |
JP4320720B2 (ja) | 撮像装置 | |
US7233705B2 (en) | Method and apparatus for reducing inaccuracies when processing color data with a tone map | |
JPH1132201A (ja) | 画像処理装置 | |
JP2698404B2 (ja) | 輝度信号処理装置 | |
JP3244405B2 (ja) | 画像処理装置 | |
JP2848568B2 (ja) | 画像処理装置 | |
JPH0773312A (ja) | 画像読み取り装置 | |
JP2016096403A (ja) | 撮像装置および撮像方法 | |
JPS60128777A (ja) | 画像処理方式 | |
KR100639155B1 (ko) | 영상 시스템의 동적 범위를 확장하기 위한 시스템 및 방법 | |
JP3244406B2 (ja) | 画像処理装置 | |
JP2004228733A (ja) | 画像信号処理装置、カメラシステムおよび画像信号処理プログラム | |
JPS63132571A (ja) | 画像読取り処理装置 | |
JPS63214074A (ja) | 画像処理方法 | |
JPH03147481A (ja) | 画像処理装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20120413 Year of fee payment: 5 |
|
LAPS | Lapse due to unpaid annual fee |