机器视觉软件和深度学习

HALCON机器视觉软件的第18.11版将于11月底发布,它将带来两个主要的深度学习功能,即图像分类,以及图像的识别和定位,用于对象检测和语义分割。

我们将深度学习视为各种现有机器视觉软件工具中的一项附加技术,”Hiltner说。“凭借我们新的深度学习功能,我们现在拥有全套工具,因为我们涵盖了分类,检测和分割。”然而,他补充道,“仅靠深度学习并不足以解决复杂的应用问题。为此,我们在机器视觉软件解决方案中提供了一个大型工具集,以便能够部署完整的成像应用程序。”

根据Hiltner的说法,MVTec的新功能和重要性在于其HALCON软件现在可以作为HALCON Progress使用,该软件以六个月的周期发布。

常务董事Olaf Munkelt博士评论说:“开发周期通常大约每两年一次。在此期间,工程师喜欢使用最新的工具。这个发布周期将使他们能够这样做调整而不是专业。”

即将发布的MERLIC版本4.2(2019年2月)也是一个讨论话题,HALCON的一些新功能也是如此。这些功能包括改进的数据代码读取,对通信协议的额外支持以及对各种接口的额外支持。

Matrox Imaging是另一家发布深度学习工具的公司。以前,Matrox成像库(MIL)中已经发布了深度学习功能,但现在,它们可以在Matrox设计助手(DA)设计助手X的最新版本中获得。这里,代码从MIL改编为DA,这将是在Matrox Imaging的基于流程图的软件中为用户提供深度学习图像分类工具。

产品管理总监Pierantonio Boriero评论了深度学习工具以及一些其他新功能。

“对于设计助理来说,最大的挑战是实现客户等待很长时间的东西,这是同时运行多个独立项目的能力。此外,我们很高兴能为DA中的3D成像提供原生支持,使得技术更容易获得,这是我们的最终目标。”他继续说道,“在深入学习其他技术之前,我们首先采用了首先获得图像分类部分的策略。这里的挑战是协调用户期望和技术可以做什么。我们的工作是为了弥合这两者。”

从软件转向硬件,FLIR Systems展示了其全新的用于深度学习的Firefly相机,该相机采用了英特尔Movidius Myriad 2视觉处理单元(VPU),使用户能够将经过训练的神经网络直接部署到相机上并在边缘进行推理。该相机采用单色1.58 MPixel Sony IMX296 CMOS图像传感器,通过USB 3.1 Gen 1接口提供3.45μm像素尺寸和高达60 fps的帧速率。

此外,售价不到300美元,相机仅重20克,不到标准“冰块”相机体积的一半。在成像和执行推理时,它还消耗仅1.5W的功率。

工程副总裁Damian Nesbitt评论道:“深度学习是我们一生中最大的变化。它破坏机器视觉只是时间问题.Overfly相机是我们为客户提供深度学习的方式。我们选择Movidius VPU具有无与伦比的性价比,体积小,功耗低。”

偏振成像和其他热成像主题

正如许多人现在所知,极化成像最近已成为机器视觉的主题。由于许多公司现在已经发布了偏振相机,因此很大程度上反映在展会现场。一家这样的公司,也许是当前趋势最负责的公司,是索尼。在索尼欧洲图像传感解决方案展台,我们研究的第一项技术是偏振成像。由于索尼IMX250MZR / MYR全局快门CMOS图像传感器的开发,这是一款具有四向偏振滤光器设计的5.1万像素单色/彩色传感器,许多相机公司现在都提供偏振相机,包括索尼本身。

“这是一种需要探索的新机器视觉技术,”索尼图像传感解决方案欧洲高级销售和业务开发经理StéphaneClauss建议道。“在发布传感器本身之后,我们就可以区别于新推出的其他一些新型偏振相机。为此,我们在软件方面进一步采用了这种方式。”

使用Sony的软件开发工具包(SDK),用户可以快速开发新的应用程序。功能包括值的计算,压力测量,反射管理和表面检查。

索尼展台上还展示了他们的最新版本,包括机器视觉相机系列和块相机系列,包括嵌入式视觉设置,利用12 MPixel相机和Camera Link接口,可以13 fps采集图像。索尼还在展会上展示了一个有趣的增强现实设置。其4K Mitene产品完全可用并部署在日本的许多零售商店,具有深度传感器和4K相机,可以开发交互式客户互动设置。

“然而,这不仅仅是为了娱乐,因为它还会出于营销目的收集客户数据”,Clauss说。“目前在日本销售,但我们正在开发欧洲和北美的销售渠道。”

LUCID Vision Labs是机器视觉市场中第一个在其相机中部署索尼偏振图像传感器的公司,是我周三访问过的另一家公司。除了他们的凤凰偏振相机,该公司展示了其新的3D Time of Flight相机Helios的原型。据报道,这款相机也是第一款部署索尼全新DepthSense IMX556PLR背照式飞行时间图像传感器的相机,将于2019年夏季推出。

3D嵌入式视觉和新兴的图像传感器公司

IDS成像开发公司,一家20多年来开发机器视觉相机的公司,最近推出了IDS NXT相机系列,该产品线正在展出。据IDS技术作家Heiko Seitz称,这是未来相机的全新平台,该公司希望重新定义工业相机

这些基于应用程序的传感器相机使客户能够在相机上执行自己的应用程序。

“这些相机具有多种功能,可以让用户更有创意地使用他们的解决方案,”Seitz说。它们可以用作标准的机器视觉相机,也可以通过图像处理引擎单独使用。

相机系列的一个新功能是能够通过相机的片上系统(SoC)在相机上运行预训练神经网络,用于深度学习应用。相机的其他功能包括在同一台相机上同时运行多个应用程序的功能。罗马和力拓的新车型的处理能力是之前推出的拉斯维加斯车型的两倍。(罗马与力拓相同,但提供IP65保护。)NXT系列的未来计划包括带有新型图像传感器的型号,以及对软件方面的关注,使客户能够为相机开发自己的应用程序根据北美销售总监Jeremy Bergh的说法,通过SDK

IDS展台还展出了该公司的10GigE相机及其Ensenso XR 3D相机,该相机提供板载处理,使用户能够输出3D点云并提供通过Wi-Fi进行通信的能力。

 

3D成像专家LMI Technologies是我有机会在周三访问的另一个展台。在这里,该公司重点展示了其最新产品,包括Gocator 2510和2520 3D激光线轮廓仪以及基于立体视觉的3D摄像机Gocator 3504智能3D快照传感器。根据市场经理Kassandra Sison的说法,所有这些产品都是为消费电子和小零件检测应用而设计的。