更快更清晰更简单,工业机器视觉将迎来新一轮进化
速度更快、性能更好的机器视觉是迈向下一代工业自动化、无人驾驶汽车和智能城市管理的支撑技术。更好的图像质量、更快速的图像捕获以及更低的设备成本和复杂性是自动化设备、检测系统和机器人等领域设计人员的主要目标,其最终目的是加强质量保证并提高生产率。
同样,先进的机器视觉能够识别标牌、道路标记和前方的潜在危险,因此对自动驾驶车辆至关重要。在这项应用里,重点是缩短系统响应时间,提高图像识别准确度。就智能城市应用而言,提高城市中心闭路电视图像清晰度,有助于执法机构通过预测骚乱和提高识别能力来保护公民。
此外,高性能机器视觉的新兴市场机会也开始出现,其中包括用于协助车辆引导和数据收集的无人机载机器视觉,可用于勘察农田或建筑工地等应用。
要在较短时间内从捕获的图像中提取更多信息,需要更好的图像质量和更强的信号处理性能。为此,一些重要的创新正在陆续出现,它们适用于摄像头和图像传感器,而且由于机器学习技术的商业化,图像处理技术也在得到广泛应用。
下一代镜头增强聚焦和视觉性能
在整个系统的前端,摄像头镜头一直是某些大的创新工程的主题,通过采用单摄像头或单组镜头可执行多个任务,能够提高系统灵活性、缩短工作周期时间,并简化设备系统设计。
其中,液体镜头(如图1所示)是一种新兴的光学器件,它扩展了传统镜头的景深,而无需传统电动对焦系统的高成本和复杂性。电动对焦也相对较慢,因此避免这些将有助于增加应用中的工作循环时间,例如涉及不同距离物体的工业检测等应用。
图1:液体镜头只需几μm的形状变化,即可实现焦距调整。
引入液体镜头能够使工作中的标准光学系统在几个ms内调整对焦 - 从无穷大到小于100mm,具体取决于间距要求。液体镜头由一种密封在柔性膜内的光学液体构成。通过移动膜或调整光学液体的体积,将镜头半径改变仅仅几个μm,其效果相当于使用传统电动对焦系统将镜头移动几个cm。除了更快的对焦和更简单的构造(移动部件更少,因此操作故障的可能性也更小),液体镜头系统还受益于较低的惯性和更低的功耗。
同样, 360 度图像采集能够使机器视觉系统在固定位置通过单个摄像头即可捕获目标的详细信息,这样可以避免多摄像头检测系统以及相关图像处理和存储子系统的高成本和复杂性,多个存储子系统也会导致系统性能限制。如果部采用360 度图像采集,可能需要一种机制来多次调整位置或旋转摄像头,或需要旋转要检查的物体,这种方式在食品包装检查或空中测量时比较常见,同样会增加系统的总体成本和复杂性。
对于需要进行从各个角度进行目标检测的系统(例如包装厂中粘贴到瓶子上的标签),可以使用位于物体自身正上方的超中心(hyper-centric)或近中心(peri-centric)镜头来实现360度视觉功能。超中心镜头能够捕获光线,就好似它们是从位于镜头前面一定距离某个点发出的一样。光线汇聚点和镜头的周边形成了视锥(viewing cone)。将物体放置在此视锥内,直接位于向下镜头的下方,可以使来自物体顶面和垂直侧面的光线同时进入镜头。将光线聚焦在传感器上可以在单帧中捕获整个影像。利用该原理,摄像头可以捕获一个孔内或腔内的360度视图,但无需在其中插入任何光学探头。其他技术也可通过单帧捕获物体多个影像,它是将超中心镜头与一组镜面阵列整合,从而能够有效地同时看到物体的每一面。
传感器:物理原理与构造
提高CMOS图像传感器的分辨率是捕获更精细图像的关键,然而由于降低了信噪比(SNR),如果只减小像素尺寸可能导致较差的图像质量。要获得更高分辨率,就需要在技术上进行改进,以便在不影响传感器性能前提下减小像素尺寸。这些可通过多个方方面面实现,其中一种是优化像素间距和感光面积与总面积之比(也称为像素填充因子)。在像素的物理层面进行更多根本性改变可以改善诸如增益、效率和动态范围等参数。传感器制造商还改进了从像素读取数据的技术,从而实现更高的信噪比、帧速率和线性度等更高的性能。
在过去十年左右时间里,驱动传感器性能改进的最重要技术之一是使用背照式(BSI)技术,它是通过上表面和下表面吸收光线,实现了像素小型化,而不会降低关键性能参数(如阱容量、量子效率、暗电流等)。这种技术的后续进展是对传感器和图像处理芯片的三维(3D)堆叠,能够实现更小外形尺寸。随后,包括氧化硅和金属焊盘的3D混合堆叠消除了硅通孔(TSV),从而更有利于两个芯片之间实现有效且直接的连接。最近,业界又开发出顺序整合,可以制造单片式图像传感器,其中每个图像传感器都集成有光电晶体阵列、3D可堆叠像素读出逻辑和存储器等,并通过集成式高密度I/O连接。
全局快门增强移动物体成像效果
在高速工业自动化以及汽车和无人机等应用中,需要捕获快速运动物体的清晰图像。这对于传统卷帘式(rolling-shutter)图像传感器性能构成巨大挑战,主要原因是传统卷帘式图像传感器每一次将从传感器像素读取仅仅一列数据,并发送到帧缓冲器。如果物体正在运动,则从读取一列图像到读取下一列之间的时间位置变化可能会导致失真,出现图像模糊或弯曲等问题。
当拍摄快速运动物体或将摄像头安装在运动车辆上时,全局快门(Global shuttering)可提高图像清晰度。这项技术首先在高端静态摄像头中得到应用,现在已经扩展到工业和汽车视觉系统以提供更高性能。在全局快门中,将所有像素电荷值同时储存到一个小的像素内存储器中,然后像以前一样逐行依次读取到帧缓冲器。这样可以得到更清晰图像,但没有卷帘式快门的失真。
通常像素内存储器会占用一定空间,从而显着地减少用于光子吸收的像素面积。目前业界已经克服了一些技术挑战以便能够创建具备更高SNR和更高动态范围的全局快门图像传感器,但不会增加像素尺寸,这样可以弥补像素内存储器占用空间。此类图像传感器的一个例证是1Mpixel、1/4英寸格式的安森美半导体的 ARO144。
图2:来自安森半导体的ARO144图像传感器。
全局快门像素具有高量子效率,可确保快速充电,同时又对与图像无关的充电(如由电子扩散引起的串扰)不敏感。另外,其光学屏蔽非常靠近传感器,可以排除像素表面杂散光影响。
图像处理中的人工智能技术
在信号处理链路中,机器学习(利用深度神经网路)可用于摄像头光学组件和传感器之后,其商业化应用使构建图像和随后从中提取信息的方式发生根本性变革。这里有一个例证,从中可以看到采用人工智能技术使低光照性能得到显着改善,从而可以在近暗(near-dark)条件下拍摄高品质图像。
在低光照条件下,捕获的原始数据对于传统信号处理链路构成很大挑战。以电子方式提高传感器感亮度(ISO值)会在图像上增添明显噪声,从而导致图像品质变差,对图像进行降噪处理效果也很有限。其他改进图像品质的技术包括延长曝光时间,而这些在工业应用或车载摄像头中通常不切实际。
最近,业界开发了一种非常巧妙的技术,它利用机器学习来极大地减小基于原始弱光数据构建图像中的可检测噪声。使用包含原始短曝光时间、低光照图像和相应的长曝光时间参考图像的系列数据可以训练深度神经网路。在对网路进行充分培训后,可以通过直接处理原始短时间曝光数据来创建高品质图像。这项技术已在市场中顶级智能手机中得到应用,可以提供更美观图片。它还可适用于工业和安全等领域,例如可用于生产线检查或监控系统,能够捕获更好图像。
结论
从系统前端的摄像头镜头到系统后面的图像感测和图像处理设备,整个现代图像处理系统中有许多技术改进正在开发。所有这些技术的合力效果预期将推动工业视觉系统应用范围的不断扩展,并进一步提高系统性能基准。
Senta O无人机具4K双镜头万向接头上天下地尽摄无遗
商用无人机前景看俏,各大厂商均争相抢占此市场。集软件、感光元件和无人机开发于一身的科技公司Sentera,早前发布全新的Sentera Omni四轴无人机,外观看似平平无奇,但却装配4K双镜头模组和万向接头,能够捕捉上天下地的环境图像,执行全方位的空中测绘和环境勘察任务。
4K双镜头摄制3D图像
Sentera Omni无人机主要由Omni四旋翼飞行器及Sentera 4K双镜头视觉感测模块两个部分组合而成,适用于空中测绘、环境勘察和基建检查。其4K双镜头模块备两级变焦能力,能够同时捕捉广角和近摄的视野,又可摄制3D图像。
Sentera Omni无人机采用万向接头(万向节)来连接4K双镜头模块,让镜头能任意摆动,捕捉上下左右的环境数据。
Sentera Omni无人机的4K双镜头模块体积小巧,机身长度约为两枚硬币的直径。
Sentera Omni无人机又可同步记录RGB彩色图像、近红外线(Near-Infrared,NIR)图像、归一化植被指数(Normalized Difference Vegetation Index,NDVI)图像,并可直接将图像存入内置的64GB储存空间中。
Sentera Omni无人机能够同时记录高分辨率RGB彩色图像、NIR近红外线图像、以及NDVI归一化植被指数图像,适用于精准农业和地形测量。
万向接头助拍不同角度
厂方特别替Sentera Omni装上万向接头(万向节)来连接双镜头模块,换言之,镜头能任意指向不同方位,而图像仍在保持着稳定的水平状态。
当无人机飞抵桥梁下方的桥墩或高架信号发射塔的顶部,飞行器本身可于不同位置悬停以进行检查,又可藉由调整镜头的拍摄角度,仔细观察微细组件的表面状态。
Sentera Omni无人机可代替人类,检查建在高架设施上的行动通信基地塔,免去工业意外的发生机会。
Sentera Omni无人机的4K双镜头可同一时间各自捕捉广角和近摄的视野。
Sentera Omni无人机的机身重量仅有3.6公斤,大概比DJI Inspire 1略重一点。它可提供25分钟的连续飞行时间,续航力跟现时的消费级无人机相若。
毕竟Sentera Omni乃工业用无人机,故此定价不菲:其套服售价为13,210美元(约10.2万港元/ 42.2万/ 5.8万令吉),当中包括4K双镜头模块、两块电池、以及硬壳收纳盒。
Sentera Omni套服包含无人机、4K双镜头模块、两块电池、耐用的硬身收纳盒。
早前另一以拍摄性能作卖点的工业用无人机Kespry Drone 2.0,虽没有双镜头模,但却可装配由Sony出品的航拍相机UMC-R10C,能够在400尺的高空,一次过拍摄达150亩的地表面积。
相关问答
【求from…to…的用法.】作业帮[回答]from…to…类介词结构用法归纳一、from…to…类结构的用法1.主要意思(1)表示“从……至……”“从……到……”.如:Howfarisitfromyouroffi...
【littleboyblue这部电影讲的是什么啊?】作业帮[回答]住在德州西部农村家庭功能:一个虐待的,战争的退伍军人的父亲,射线(JohnSavage约翰野蛮),acompliantwife,Kate(),一个兼容的妻子凯特,(Nastass...
微信各种图标的意思-ZOL问答一、NearMeNearMe软件商店总下载量已经接近2亿次!新一代的NearMe云为Find5带来了全新云相册和网盘,我们为每位用户提供了高达30G的免费空间。手机照片、个人...
3Dmax中的摄像机怎么用呢? - a2JOT6HU8Sm 的回答 - 懂得首先确定你要表现的3个或者2个面,然后再顶视图里拉一个目标摄像机,目标放在你要看的方向上,在侧视图把摄像机和目标一起选中,把高度调整到坐姿视点...
3Dmax中的摄像机怎么用呢? - 小红薯DF0C528D 的回答 - 懂得使用方法:目标摄像机的创建目标相机有两个对象组成:相机和相机目标。相机代表你的眼睛,目标指示的是你要观察的点。你可以独立地变换相机和目标,但...
mate60系列发布日期-ZOL问答华为Mate60将搭载“星闪”黑科技,这是华为首次采用近距离无线连接技术(NearLin...以及一颗5000万像素的超广角镜头和一颗5000万像素的潜望式长焦镜头,拍照效果非...
vivo带nfc功能手机?感谢邀请vivo带nfc功能手机?笔者第一个想到的就是vivo的iQOO,NFC用起来还是很不错,平时刷公交车或者是地铁都可以,不过不是经常会去使用一个功能,vivo带有N...
3DMAX怎么创建摄像机 - n7D0Z3cpO 的回答 - 懂得1、目标摄像机的创建目标相机有两个对象组成:相机和相机目标。相机代表你的眼睛,目标指示的是你要观察的点。你可以独立地变换相机和目标,但是相机...
朋友们 求了解!石家庄正规的医用摄像机价格,医用摄像机够...[回答]每个公司都在说这好那好的、个人觉得还是北京埃威豪科技有限责任公司的不错变暗的具体情况是什么样的,有没有图片通常摄像机不会出现变暗的情况,影...
为何IPhone手机图片要连接网络-ZOL问答2017年11月,苹果公司在中国台湾申请了一项近红外成像(near-infraredimaging)广角镜头专利,从而让iPhone相机具备夜视功能。iOS(原名iPhoneOS)是由苹果公司为...