色彩在影像處理中扮演什麼角色？

要用彩色相機產生彩色資訊，並不容易：以最簡單的形式來說，一般的彩色相機需要 2x2 畫素的資訊，以所謂的 Bayer 圖樣來計算一個畫素的色彩值；這稱為 2x2 debayering。因為這是一個插值，因此 2x2 矩陣的結果相對比較差。更常使用的是 3x3 或以上的矩陣。黑白相機以更為線性的方式，自其每個畫素取得資訊，即 1:1 取自其畫素陣列。

但肉眼的設計是當作通用工具。我們並不是時時需要用到色彩視力；有時只需要感知物體的亮度值就夠了。這就和影像處理很相似。

在許多案例中，利用彩色相機來進行彩色描繪是沒有入要的；當仔細分析應用需求後，就可以避免隨之而來的技術困難。

許多應用在影像處理時可以完全免去色彩資訊。在其他情形下，可以使用彩色光源或彩色濾鏡以及黑白相機，來選擇產生某類型的色彩資訊；例如紅色物體上的綠色區域，使用紅光照射時會顯現為黑色。