机器视觉中彩色成像必须考虑的十个问题

来源:Imagination Tech

在为你的产品开发最适合的机器视觉系统时,需要考虑很多因素,以下列出开发过程中需要考虑的一些问题:

颜色准确性/差异化

首先要考虑的是应用程序所需的颜色精度和差异程度。在某些应用中,机器视觉相机必须区分检测到的颜色和目标值之间的距离。在这一领域,高精度机器视觉用户需要比能够接受较低精度和差异化水平的用户更先进的相机。

如前所述,插值和低灵敏度是提高颜色精度和差异化水平的两个主要障碍。插值可能导致颜色检测的细微差异,因为它需要周围像素的平均值来确定每个像素的颜色值。因此,当机器视觉系统试图区分细微的颜色差异时,您可能不知道颜色的阴影实际上是不同的,或者它们只是拜耳插值中的变化。

色彩串扰

高度的色彩串扰会影响机器视觉相机产生的颜色的精度。高阶串扰是由拜耳滤波器或二向色棱镜涂层定义的红、蓝、绿通道的光谱响应之间相当大的重叠造成的。当通道之间有大量重叠时,某些颜色系列,尤其是黄或蓝绿色系列,会有很大的不确定性。

▲棱镜相机中使用的二向色涂层比拜耳滤光片产生更陡的光谱曲线,以最大限度地减少由色彩串扰引起的不确定性。

当您的机器视觉系统需要区分这些颜色的不同色调时,这可能是非常有问题的。因此,在开发彩色机器视觉系统时,必须考虑哪些颜色系列对您的分析至关重要,以及机器视觉系统中可接受的颜色串扰水平。

光照水平和灵敏度

根据您的应用,您的机器视觉系统需要特定级别的感光度。拜耳、三线和棱镜相机以不同的方式传输光,所以光的灵敏度是不同的。

例如,拜耳滤波器不仅由比光学棱镜中使用的高级玻璃具有更低透射率的材料制成,而且镶嵌方法也使得每个像素仅对三分之一的波长敏感。它落在上面了。根据给定像素的确切颜色,这可能会导致超过一半的光照在滤光片上,并且无法到达传感器。

根据系统的亮度级别和可容忍的增益/噪声级别,您可以根据应用程序选择最合适的相机。

▲在拜耳相机中,每个像素上的滤波器阻挡了三分之二的光谱波长,大大减少了从场景中捕获的实际光量。通过三个独立的传感器,棱镜相机捕获与每个像素相关的100%的光。

白平衡和噪音

每一个使用颜色的机器视觉应用程序都需要白平衡。如果没有根据系统使用的照明光谱调整清晰的基线,则无法准确捕获真实的颜色值。根据所选机器视觉相机的类型,可以使用不同的白平衡方法。

例如,拜耳和三线相机只能通过在三个颜色通道中的两个通道上添加增益(放大)来平衡白色,以匹配响应最高的通道。然而,增加增益不仅会使信号倍增,还会使图像中的噪声倍增。然后,由于整体低光条件所需的任何额外增益将添加到基线。如果需要超低噪声,则可能需要通过增加可用光的数量或切换到不同的相机类型来解决此问题。

相比之下,棱镜相机可以独立控制每个传感器,包括快门速度和增益。因此,您可以选择使用快门速度进行白平衡-通过延长两个通道的曝光时间来减少响应,或者缩短响应时间最长的两个通道的曝光时间。如果暴露时间较长,噪声可能会略微增加,但增加的幅度比增益小得多。在某些应用中,降噪可能是使用棱镜相机技术的几个原因之一。

▲彩色摄像机必须是白平衡的,以避免因照明类型和色温而变色。典型的基于增益的白平衡会增加图像噪声。棱镜相机中可用的基于曝光的方法对图像噪声的影响要小得多。

颜色伪像

颜色伪像是图像缺陷 - 通常是错误着色的像素或图案 - 由图像的颜色信息的导出方式引起。使用估计或插值来计算颜色的相机最有可能表现出颜色伪影。

然而,即使是产生独立的R,G和B值(非插值)的三线性相机,也会由于梯形失真效应,不平整表面或轻微的时序变化引起的空间偏移而产生颜色伪影。由于棱镜相机具有三个独立的传感器并使用单个光学平面来捕获图像,因此使用棱镜相机产生颜色伪影的风险非常低。

最常见的颜色工件类型是:

颜色混叠

颜色混叠是指当具有特定颜色的对象的线条或边缘(例如,深蓝色对角线)显示不同的颜色时的情况,例如当在像素级别检查图像时沿其边缘的红色或黄色像素。

这个问题在拜耳相机中最常见,因为用于为每个像素分配RGB值的插值技术使用周围像素的混合,这些像素可能具有与线或边缘本身完全不同的颜色。

▲当插值沿着线和边缘产生错误着色的像素时,会发生颜色混叠。

莫尔图案

除了在捕获单个边缘或线时引起问题时,当图像包含精细重复图案时,大规模混叠可导致莫尔图案的出现。虽然任何需要捕获更高空间频率的相机都会出现这种效果,但拜耳相机 - 再次因为插值技术 - 更容易出现这种情况。

▲具有重复颜色混叠的区域中的人造颜色图案可以出现在拜耳图像中。

对分辨率的影响

与单色系统相比,在确定彩色机器视觉系统所需的分辨率水平时需要特别小心。这是因为拜耳插值等色彩技术大大降低了相机的有效分辨率。虽然拜耳相机可能有500万像素(5百万像素),但插值过程会“平均”许多小细节,使有效分辨率达到整个像素数的三分之一左右。

根据应用程序必须能够检测/分析的最小特征大小以及必须涵盖的视野大小,有两种可能的操作过程:

① 您可以选择分辨率远高于类似单色系统的拜耳相机。当然,这通常带有更高的价格标签,更昂贵的光学器件以及主机上更高的处理负荷。

② 您可以选择具有与在单色系统上使用的基本分辨率大致相同的棱镜相机。一个320万像素的棱镜相机实际上是一个3×320万像素的摄像头,带有三个独立的图像传感器,总计9.6百万像素。因此,它可以产生24位,320万像素的输出,而不会像拜耳相机那样损失分辨率。如上所述,棱镜相机比拜耳相机贵。但与使用900万像素拜耳相机的所有相关成本相比,整体比较变得更加接近。

以上信息仅适用于区域扫描分辨率。在线扫描系统的情况下,三线性和棱镜相机都不依赖于插值,因此这两种技术的有效分辨率都没有显着降低。但是,线扫描相机章节中讨论的一些问题可能会影响三线性相机区分小细节以及棱镜相机的单个光学平面的能力。

色彩空间和色彩空间转换

在开发机器视觉系统时,您需要确定哪种颜色空间最适合您的特定应用。确切的颜色空间取决于应用程序的用途以及如何分析颜色信息。

例如,简单地在屏幕上显示对象的应用程序自然会使用标准RGB颜色空间,因为这是所有监视器构造其像素颜色的方式。但是,如果您正在处理印刷材料,像Adobe RGB这样的色彩空间可能是更好的选择,因为它提供了更广泛的颜色选择,适合数字印刷。

其他颜色空间如HSI(色调,饱和度,强度)和CIE XYZ或CIE L * a * b *颜色空间使用数学坐标来描述颜色,以便某些应用程序更容易计算颜色匹配和颜色差异在程度和方向上。

在大多数应用程序中,您将使用主机上的算法和处理资源将来自摄像机的RGB数据转换为最适合您应用的色彩空间。但是,在某些情况下,您可能希望相机在主机处理资源专注于其他任务时执行此转换。对于这些情况,值得选择具有内置色彩空间转换功能的相机。

色彩增强和色彩优化

在某些情况下,您可能会发现有意改变颜色的准确性很有价值。如果是这样,在开发机器视觉系统时,值得考虑色彩增强和优化功能。

例如,如果要检测图像中的特定偏差或将两个对象彼此区分开来,有时可以帮助增强图像中的特定颜色。例如,当图像中的红色增强时,可以更容易地区分血细胞和组织。

使用主机上的算法捕获图像后,可以增强图像中的颜色。然而,后处理增强可能受到原始图像的饱和度或对比度的限制。有些相机配备了色彩优化功能,允许用户增强特定的主色或互补色,其真实价值高达200%(2倍)。系统构建者应该考虑这样的功能是否可以为其应用程序增加价值,或者有助于将其与竞争系统区分开来。

▲颜色增强功能可以强调图像中的特定颜色。

未来智能实验室的主要工作包括:建立AI智能系统智商评测体系,开展世界人工智能智商评测;开展互联网(城市)云脑研究计划,构建互联网(城市)云脑技术和企业图谱,为提升企业,行业与城市的智能水平服务。

  如果您对实验室的研究感兴趣,欢迎加入未来智能实验室线上平台。扫描以下二维码或点击本文左下角“阅读原文”

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/486140.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

嫦娥“挖土”归来有多难?看看中国首颗返回式卫星的故事

本文转载自“科技日报(kjrbwx)”,原标题《嫦娥“挖土”归来有多难?看看中国首颗返回式卫星的故事》,作者 | 吕炳宏 付毅飞2020年11月30日,嫦娥五号探测器在环月轨道上,成功实施着陆器上升器组合…

重磅,2020年度第十届吴文俊人工智能科学技术奖获奖名单公示

来源:科奖圈根据《吴文俊人工智能科学技术奖励条例》和《吴文俊人工智能科学技术奖励实施细则》相关规定,经全国各地方人工智能学会、协会及联盟,各高校及科研(院)所,学会各专业委员会及工作委会&#xff0…

理解 %IOWAIT (%WIO)

%iowait 是 “sar -u” 等工具检查CPU使用率时显示的一个指标,在Linux上显示为 %iowait,在有的Unix版本上显示为 %wio,含义都是一样的。这个指标常常被误读,很多人把它当作I/O问题的征兆,我自己每隔一段时间就会遇到对…

自由意志不存在?神经科学能证明不?

来源: 神经现实本文经授权摘自《认知科学对当代哲学的挑战》作者:李恒威神经科学能说明自由意志不存在吗?里贝特是人类意识和自由意志的实验研究领域的先驱性神经科学家,但驱使他开展意识的实证研究的根本动因是回应意识科学研究中的本体论问…

MySQL数据库order by 奇慢无比

今天遇到个奇葩的问题, sql 数据量很大 有where 和order by,不加order by 速度很快,加了就很慢 一、首先我们对这条sql执行查询计划: explain select t.order_id from book_order t ORDER BY t.order_id desc explain select t.…

PNAS “深度学习的科学”论文合集导读

来源:混沌巡洋舰今天的科学家对于机器可以学习做什么的想法与我们10年前完全不同。在图像处理、语音和视频处理、机器视觉、自然语言处理和经典的双人游戏中,特别是在过去的十年中,随着在一系列公共组织的挑战问题(例如围棋&#…

s3c6410 jpeg编码 linux,S3C6410 裸机硬件JPEG解码

主函数的部分代码/**************************************************************************************************************************函数 : static PIC_ERROR OpenPictureFile(const char *FileName,u8 *buff,u32 FileMaxSize)*功能 : 打开一张…

注解原理

学习spring时,大量使用了注解,但一直对其底层实现机制不得其解: ref:http://www.cnblogs.com/Johness/archive/2013/04/17/3026689.html ref:https://www.jianshu.com/p/28edf5352b63 ref:http://www.cnblo…

C语言中关于字符数组输入,scanf没执行

问题&#xff1a;有时C语言中关于字符数组输入&#xff0c;有的scanf语句没执行。 未执行scanf的代码&#xff1a; #include<stdio.h> int main() {int n;int t0;scanf("%d",&n);char arr[n];int i;for(i0;i<n;i){scanf("%c",&arr[i]);…

清华微电子副所长尹首一:中国AI芯片的技术路线最全面

大数据文摘出品整理&#xff1a;牛婉杨12月1日&#xff0c;GTIC 2020 AI芯片创新峰会在京举办&#xff0c;本次峰会聚集了AI芯片以及各个细分赛道的产、学、研精英人士&#xff0c;共议AI芯片在中国半导体黄金时代的创新与未来。2020年对于AI芯片来说&#xff0c;是充满坎坷的一…

linux socket资源耗尽,TCP的socket资源被耗尽的问题

一、 故障现象部分机顶盒用户出现大面积登录APP时&#xff0c;界面停留在登陆页面&#xff0c;无反应。二、现象初步分析本次问题出现时&#xff0c;所有AAA出现了异常流量波动&#xff0c;在AAA异常流量段期间接到用户故障报障。此时主要表现在LVS集群显示真实的EPG 服务器不停…

演讲实录丨CAAI名誉副理事长杨强教授:人工智能的金融实践

杨强CAAI 名誉副理事长、微众银行首席人工智能官AAAI/ACM/IEEE/CAAI/AAAS Fellow转自中国人工智能学会CAAI原创 丨 作者杨强教授以下是杨强教授的演讲实录&#xff1a;今天的报告主要讲两个内容&#xff0c;一个是人工智能发展&#xff1b;另一个是如何在金融领域落地。刚才已经…

玩转python(2)多线程的历史2

线程这个概念早在多核CPU出现之前就提出来了&#xff0c;单核时代的多线程主要是为了让CPU尽量不处于空闲状态&#xff0c;使其计算能力始终能得到利用。但本质上讲&#xff0c;在任意时刻只有一个线程在执行。 尽管任意时刻只有一个线程在执行&#xff0c;但是依然有些问题需要…

2020年第五届中国通用人工智能年会

来源&#xff1a;知乎-刘凯-AGI现阶段&#xff0c;人工智能热正迅速“退烧”而回归理性&#xff0c;主流人工智能学界急切寻觅新的突破口。通用人工智能再次获得关注&#xff0c;并被期待成为下一轮技术引爆点。中国通用人工智能年会已成功举办四届&#xff0c;涉及计算机科学、…

post发送byte数组_KAFKA消息发送

消息发送的整体架构RecordAccumulator 主要用来缓存消息以便 Sender 线程可以批量发送&#xff0c;进而减少网络传输的资源消耗以提升性能。RecordAccumulator 缓存的大小可以通过生产者客户端参数 buffer.memory 配置&#xff0c;默认值为 33554432B&#xff0c;即32MB。如果生…

未来的趋势发展 802.11v网络协议解析

目前的无线网络中&#xff0c;一个基站通常与拥有最强信号的接入点联系在一起。但是&#xff0c;这个接入点也许过载了。在802.11v标准中&#xff0c;包括了一个指令&#xff0c;接入点能够使用这个指令要求一个基站报告它支持的无线电信道、传输的功率范围、数据速率和支持的身…

从特斯拉到爱因斯坦,物理学家为何钟情于猫

牛顿和猫洞的故事&#xff0c;图片来自3milliondogs.com来源&#xff1a;数学中国尽管我们看到了大量的猫被用作实验对象。面对科学发展过程中这黑暗一面&#xff0c;我有必要强调一下&#xff0c;纵观历史&#xff0c;许多物理学家与他们的猫的关系要友好得多&#xff0c;猫成…

win10远程桌面连接凭据怎么设置_想在家办公,只需打开win10远程桌面连接就可以了,还犹豫什么...

远程桌面连接是一种使用户能够坐在一台计算机前连接到其他位置的“远程计算机”的技术。例如&#xff0c;用户可以从家庭计算机连接到工作计算机&#xff0c;并访问所有程序、文件和网络资源&#xff0c;就好像坐在工作计算机前一样。另外&#xff0c;用户可以让程序在工作计算…

Java的加载与执行

Java的运行包含两个特别重要的阶段&#xff1a;编译阶段&#xff0c;运行阶段。 编译阶段&#xff1a;编译阶段的主要任务是检查Java源程序是否符合Java语法。 符合Java语法则能够生成正常的字节码文件&#xff08;xxxx.class&#xff09; 不符合Java语法规则则无法生成字节码…

费曼:所有的科学知识都是不确定的

编辑 ∑Gemini来源:设计与哲学一、不存在决定什么是好概念的权威 观察是一个概念是否含有真理的判官&#xff0c;但这个概念从何而来的呢&#xff1f;科学的快速进步和发展要求人类发明出一些东西用以检验。在中世纪&#xff0c;人们认为只要多做观察&#xff0c;观察结果本身就…