0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

如何克服边缘视觉的带宽限制?

控制工程中文版 ? 来源:控制工程中文版 ? 2023-05-19 11:08 ? 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

把一个相机连接到一台边缘计算机/嵌入式计算机上,然后在云端进行数据处理或存储——这就是“边缘视觉”的概念。近年来,边缘视觉正被广泛应用于自动化产线质检、汽车图像采集和智能工厂等场景中。

伴随着人们对图像质量的要求提高,以及视觉传感器技术突飞猛进的发展,现场产生海量和庞大数据,也给视觉数据的边缘传输和上云带来了严峻挑战。

01

亟待攻克的带限制瓶颈

在工业视觉领域,整个行业都在追求更多像素、更高帧率、更高的空间以及时间分辨率。然而,很多用户会反馈1 GigE相机的一个输出已经不够用,只能连接到PLC,急需相机有更多输出通道,以便将图像数据传输到云服务器。

90901de2-f5ef-11ed-90ce-dac502259ad0.png

如上图所示,棕色的点是图像传感器,点连接的线代表行业中常见的典型接口(如PCIe 3.0是蓝线,CoaXPress v2 x4是红线)。可以发现,当图像传感器高于某条线时,该接口的带宽就已经不够去传输该图像传感器的数据了。

现如今,图像传感器取得了巨大进步,市面上有很多图像传感器,带宽速度比10GigE、CoaXPress v1快很多,甚至比100千兆接口更快,能提供一万帧、1亿或更多像素和速度远高于150GB/s的带宽。虽然接口取得了一些进步,带宽速度越来越快,但挑战仍然存在——即使有链接聚合也很难能跟上传感器的发展速度,电脑GPUCPU性能也远远落后于其他领域。

909b4aa0-f5ef-11ed-90ce-dac502259ad0.png

想要解决这个问题,如果用高分辨率的高速传感器,也将面临很多瓶颈。比如摄像头接口、GPU和CPU的桥接接口、CPU的负载或处理能力,以及计算机上送云端的带宽,往往在最好的情况下才能达到1G。

90bb75f0-f5ef-11ed-90ce-dac502259ad0.png

此外,如果现场有多个摄像头,情况会变得更糟。假如有多个10GigE相机、CoaXPress或100 GigE相机,以100 GigE相机为例,速度大概是96千兆比特乘每秒以摄像机的数量。但大多数情况下,用户电脑的最大带宽接口PCIe 3.0,其带宽也只有48千兆比特每秒,远远无法满足需求。

02

用图像采集卡压缩预处理

面对这个困境,用户常见的解决方案是在多摄像头和CPU架构之间放置一个图像采集卡,用于压缩以及预处理。例如从图像提取一定区域的ROI,即可减少总数据带宽。

9100ff12-f5ef-11ed-90ce-dac502259ad0.png

然而,在实际应用中,用户对图像采集卡的需求还有许多:

通常需要高带宽的相机接口、多相机接口、超高精度的同步,以及可定制的IOs来控制外围设备;

在处理过程中,需要能够实时并行处理,并且需要低延迟、有一个大的DRAM,从而计算复杂的算法,需要很多个千兆比特每秒的内存访问带宽;

对系统开发人员而言,图像采集卡需要满足灵活、易于使用的要求。为保障开发便捷性,开放的FPGA也必不可少,可以将一些特定IP放在图像采集卡上,通过集成开发环境实现快速的算法和方案开发;

与此同时,用户对于系统集成的紧凑设计和被动冷却性能,也提出了更严苛的要求...

03

可靠的一体化边缘视觉解决方案

能否能将图像采集卡和计算机很好地合二为一?虹科的HK-Gidel FantoVision 40给出了答案。

这是一款开创性的小型计算机,可与高达4 x 10GigE Vision或 4 X CoaXPress 2.0相机连接进行图像采集和处理。创新架构将高端图像采集与实时图像处理和/或压缩相结合,使用Nvidia Jetson 嵌入式计算机,并在Intel Arria 10 FPGA上进行可选的预处理/压缩。

HK-Gidel FantoVision的另一个显著特点,是其开放式体系结构支持GPU和FPGA上的嵌入式AI/图像处理。软件工程师可以使用CUDA C/C++和NVIDIA的库,在GPU上编写算法。此外,使用新颖的ProcVision套件,在FPGA上开发和部署可选的预处理块,既简单又快速。

该产品的多个HK-Gidel FantoVision单元可以相互连接,可提供独特且可扩展的拓扑结构。使用InfiniVision 开放式框架抓取器流程,100多个传感器可同步处理

现如今,HK-Gidel FantoVision为高带宽、低延迟应用的新型紧凑、经济高效、可扩展的视觉和成像解决方案开辟了道路。尤其适用于需要高分辨率、高速度的交通监测、面板检测等场景。

例如交通检测应用中有多个摄像机在拍摄高分辨率图像,HK-Gidel FantoVision 可以通过图像采集卡提取ROI区域甚至是车牌,在GPU上布署算法做车牌识别,最后将识别的车牌号码传到云端上,从而不需要很多带宽。





审核编辑:刘清

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 嵌入式
    +关注

    关注

    5161

    文章

    19783

    浏览量

    319614
  • plc
    plc
    +关注

    关注

    5037

    文章

    14087

    浏览量

    476580
  • 图像传感器
    +关注

    关注

    68

    文章

    1987

    浏览量

    130950
  • 视觉传感器
    +关注

    关注

    3

    文章

    269

    浏览量

    23412

原文标题:如何克服边缘视觉的带宽限制?

文章出处:【微信号:控制工程中文版,微信公众号:控制工程中文版】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    边缘智能网关在水务行业中的应用—龙兴物联

    海量实时数据的上云带宽需求。 保障供水安全:? 快速响应突发污染,最大限度减少影响范围。 管网泄漏监测与定位? 应用:? 在供水管网部署压力、流量、声波振动传感器,边缘网关实时分析数据流。 优势
    发表于 08-02 18:28

    使用示波器的自定义滤波器功能助力电源纹波测试

    经常使用示波器测试的工程师都知道,示波器一般是具备带宽限制功能,即低通滤波设置,可以将一台大带宽示波器变为小带宽,减小宽带噪声影响,用以测试评估低频信号情况。
    的头像 发表于 06-19 11:29 ?753次阅读
    使用示波器的自定义滤波器功能助力电源纹波测试

    基础篇-Buck电路纹波测试方法(实用)

    ,一种比较精确的说法就是:纹波就是直流成分中叠加的交流成分。 2 纹波测试方法 2.1 带宽限制 带宽限制:开启20MHz带宽。 纹波电压的频率等同于芯片开关频率,为了防止探头拾取到环境中的高频
    发表于 04-17 11:16

    记忆示波器设置有哪些常见错误?

    测信号通道一致。 触发电平设置不当 错误:触发电平设置在信号噪声范围内,导致误触发。 解决方案: 调整触发电平至信号稳定区域,或使用触发电平锁定功能。 四、带宽限制错误 未启用示波器带宽限制 错误
    发表于 04-14 15:29

    英飞凌边缘AI平台通过Ultralytics YOLO模型增加对计算机视觉的支持

    对计算机视觉的支持,扩大了当前对音频、雷达和其他时间序列信号数据的支持范围。在增加这项支持后,该平台将能够用于开发低功耗、低内存的边缘AI视觉模型。这将给诸多应用领域的机器学习开发人员带来极大的便利,例如工厂可以借此实现对零件的
    的头像 发表于 03-11 15:11 ?454次阅读
    英飞凌<b class='flag-5'>边缘</b>AI平台通过Ultralytics YOLO模型增加对计算机<b class='flag-5'>视觉</b>的支持

    AI赋能边缘网关:开启智能时代的新蓝海

    。这一变革不仅带来了技术架构的革新,更为产业发展开辟了新的增长空间。 传统边缘网关受限于计算能力和算法支持,往往只能完成数据采集和简单处理,大量原始数据需要回传云端处理,导致响应延迟和带宽压力。AI技术
    发表于 02-15 11:41

    开源项目 ! 利用边缘计算打造便携式视觉识别系统

    景而言,边缘计算是一项变革性的技术。 边缘计算助力视觉识别的原因: 实时响应 数据在本地处理,消除了与云服务相关的延迟问题。 减少带宽使用 仅传输已处理的数据,降低了
    发表于 12-16 16:31

    AI模型部署边缘设备的奇妙之旅:如何在边缘端部署OpenCV

    图像的质量,使得图像更适合人类观察或者为后续的分析做准备。 方法:通常涉及像素级别的操作,比如调整亮度、对比度、颜色校正、滤波(如高斯模糊、中值滤波去噪)、边缘检测、形态学变换(膨胀、腐蚀)等。 计算机视觉
    发表于 12-14 09:31

    固定带宽与动态带宽的区别

    在现代通信网络中,带宽是一个关键的资源,它决定了数据传输的速度和效率。带宽管理是网络管理员和IT专业人员必须面对的一个重要任务。带宽可以以两种主要方式分配:固定带宽和动态
    的头像 发表于 12-06 17:07 ?1447次阅读

    边缘计算的技术挑战与解决方案

    它们在处理大规模数据或复杂计算任务时的能力。 网络带宽和延迟 边缘节点通常位于网络边缘,网络带宽和延迟可能限制了从
    的头像 发表于 10-24 14:36 ?2087次阅读

    使用 ADI 的 MAX78002 MCU 开发边缘 AI 应用

    科技巨头之间为实现生成式人工智能 (GenAI) 商业化而进行的金融军备竞赛在某种程度上掩盖了其他重要的 AI 工作,尤其是在网络边缘,供应商渴望 AI 应用程序能够在通常受有限内存、带宽和功率限制
    的头像 发表于 10-17 11:39 ?2187次阅读
    使用 ADI 的 MAX78002 MCU 开发<b class='flag-5'>边缘</b> AI 应用

    放大电路的带宽与什么有关

    直接影响。例如,运算放大器(Op-Amp)通常具有较宽的带宽,而晶体管放大器的带宽则受到晶体管特性的限制。 1.2 反馈网络 负反馈可以扩展放大器的带宽,因为它降低了增益,从而减少了相
    的头像 发表于 09-23 10:55 ?2342次阅读

    初创公司SEA.AI利用NVIDIA边缘AI和计算机视觉技术变革航海安全系统

    总部位于奥地利林茨的初创公司正在利用 NVIDIA 边缘 AI 和计算机视觉技术变革航海安全系统,让每一次出海变得更安全。
    的头像 发表于 09-09 09:32 ?986次阅读

    如何设计具有放大器带宽限制的MFB滤波器

    电子发烧友网站提供《如何设计具有放大器带宽限制的MFB滤波器.pdf》资料免费下载
    发表于 08-28 11:09 ?0次下载
    如何设计具有放大器<b class='flag-5'>带宽限制</b>的MFB滤波器