0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

将机器学习转移到网络边缘变得引人注目

璟琰乀 ? 来源:贸泽电子设计圈 ? 作者:贸泽电子设计圈 ? 2020-12-01 18:03 ? 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

离网络边缘更近一步

机器学习介绍

机器学习是大多数AI应用的核心,负责教计算机学会识别数据中的模式。更具体地来说,其目标就是创建训练有素的模型。这可以通过监督学习来完成,这种学习方式向计算机提供学习实例。另外,这个过程也可以不受监督——计算机只是在数据中寻找其关心的模式。还有涉及连续学习或持续学习的技术,这些技术可以使计算机从错误中吸取教训,但这些不在本文讨论范围之内。

运行您的ML模型

一旦建成了ML模型,便可以将其应用于手头的工作。 模型可用于预测未来事件、识别异常,以及进行图像或语音识别。 几乎在所有情况下,模型都依赖于大型深层树状结构,并且需要大量的算力才能运行。 对于通常基于人工神经网络进行图像和语音识别的模型而言尤其如此。 神经网络创建稠密网格,因此需要在高度并行化的硬件(通常基于GPU)上运行。 直到最近,也只有AWS或Azure等云服务提供商才有实力提供此类功能。

为了让您对所需的算力有个概念,表1列示了AWS P3实例的规格,这是一个针对ML应用进行了优化的处理平台:

表1:AWS P3实例规格

这些都是顶配机型。它们具备大容量RAM,以及极快的网络和存储访问权限。最重要的是,它们具有强大的CPU和GPU处理能力,正是这一要求使ML模型在网络边缘运行成为了真正的挑战。

集中式AI的缺点

目前为止,由于ML模型难以在网络边缘运行,因此大多数最著名的AI应用都依赖于云。但是,这种对云计算的依赖给AI的使用带来了一些限制。下面列出了集中式AI在运行方面的一些缺陷。

有些应用无法在云端运行

为了在云端运行AI,需要有容量足够的可靠网络连接。如果没有这种条件,则可能由于缺乏基础设施,有些AI应用不得不在本地运行。换言之,只有能够在边缘运行ML模型,这些应用才能正常工作。

自动驾驶汽车为例。它需要完成许多依赖于机器学习的任务。这些任务中最重要的是探测和规避物体。这要求ML模型要有相当大的算力。但是,即使是联网汽车也只有较低的连接带宽,这些连接还并不一致(尽管5G可能会改善这一点)。

在为采矿和其他重工业创建智能物联网监控系统时,同样存在这种限制。通常在本地会有快速网络,但是互联网连接可能会依赖于卫星上行链路。

延迟是关键

许多ML应用需要实时工作。上面提到的自动驾驶汽车就是此类应用,另外还有实时面部识别等应用。它们可以用于门禁系统或安保措施。例如,警察经常使用这项技术监视体育赛事和其他活动中的人群,以找出已知的闹事者。

AI也越来越多地用于打造智能医疗设备。其中一些需要实时工作才能发挥真正的作用,但是连接到数据中心的平均往返时间约在10到100毫秒之间。因此,如果不将ML模型转移到网络边缘,就很难实现实时应用。

安全性可能会成为问题

许多ML应用会处理安全数据或敏感数据。显然,这类数据可以通过网络发送,并被安全存储到云端。但是,当地政策通常禁止这样做。健康数据尤其敏感,许多国家对发送到云服务器这一做法有着严格的法规要求。总之,确保仅连接到本地网络的设备的安全性永远更加容易。

成本

订购ML优化的云实例可能会非常昂贵—表1中所示的最低规格实例每小时花费约3美元。许多云提供商会收取额外的费用,例如用于存储和网络访问的费用,这笔费用也要考虑在内。实际上,运行一个AI应用每月可能要花费高达3,000美元。

结论

实现成功的机器学习通常需要具有强大算力的基于云或服务器的资源。但是,随着应用的发展和新用例的出现,将机器学习转移到网络边缘变得更加引人注目,尤其是在需要优先考虑延迟、安全性和实现成本等因素的情况下。

责任编辑:haq

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • AI
    AI
    +关注

    关注

    88

    文章

    35916

    浏览量

    283119
  • ML
    ML
    +关注

    关注

    0

    文章

    153

    浏览量

    35163
  • 机器学习
    +关注

    关注

    66

    文章

    8517

    浏览量

    135157
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    超小型Neuton机器学习模型, 在任何系统级芯片(SoC)上解锁边缘人工智能应用.

    Neuton 是一家边缘AI 公司,致力于让机器 学习模型更易于使用。它创建的模型比竞争对手的框架小10 倍,速度也快10 倍,甚至可以在最先进的边缘设备上进行人工智能处理。在这篇博文
    发表于 07-31 11:38

    贸泽电子2025边缘AI与机器学习技术创新论坛回顾(上)

    2025年,随着人工智能技术的快速发展,边缘AI与机器学习市场迎来飞速增长,据Gartner预计,2025年至2030年,边缘AI市场保持
    的头像 发表于 07-21 11:08 ?675次阅读
    贸泽电子2025<b class='flag-5'>边缘</b>AI与<b class='flag-5'>机器</b><b class='flag-5'>学习</b>技术创新论坛回顾(上)

    边缘计算中的机器学习:基于 Linux 系统的实时推理模型部署与工业集成!

    你好,旅行者!欢迎来到Medium的这一角落。在本文中,我们将把一个机器学习模型(神经网络)部署到边缘设备上,利用从ModbusTCP寄存器获取的实时数据来预测一台复古音频放大器的当前
    的头像 发表于 06-11 17:22 ?439次阅读
    <b class='flag-5'>边缘</b>计算中的<b class='flag-5'>机器</b><b class='flag-5'>学习</b>:基于 Linux 系统的实时推理模型部署与工业集成!

    使用AD7616时,转换完成发送一次写指令0x00就能将所有通道的数据转移到SPIFIFO吗?

    我在使用AD7616时,转换完成发送一次写指令0x00就能将所有通道的数据转移到SPIFIFO吗?DMA又是怎么配置,我是读取的SPIFIFO吗?转换两次读进fifo的时,第二次是接着第一个还是直接覆盖了第一次的?
    发表于 04-24 06:02

    边缘计算网关产品的应用场景

    边缘计算网关是一种云端计算和本地计算结合起来的技术,它可以数据处理和分析的任务从云端转移到本地,从而提高数据处理的效率和响应速度。那边缘
    的头像 发表于 04-20 16:26 ?362次阅读
    <b class='flag-5'>边缘</b>计算网关产品的应用场景

    AI边缘计算爆发增长,紫光国芯LPDDR助力低延迟应用创新 | 贞光科技代理品牌

    引言近年来,随着物联网(IoT)设备的激增和人工智能(AI)的广泛应用,边缘计算作为一种新兴的计算模式,正迅速崛起。它将数据处理从中央服务器转移到更接近数据源的边缘设备上,从而实现更快的响应
    的头像 发表于 03-10 17:12 ?739次阅读
    AI<b class='flag-5'>边缘</b>计算爆发增长,紫光国芯LPDDR助力低延迟应用创新 | 贞光科技代理品牌

    是否可以使用OpenVINO?部署管理器在部署机器上运行Python应用程序?

    使用 OpenVINO?部署管理器创建运行时软件包。 运行时包转移到部署机器中。 无法确定是否可以在部署机器上运行 Python 应用程序,而无需安装OpenVINO? Toolk
    发表于 03-05 08:16

    嵌入式机器学习的应用特性与软件开发环境

    设备和智能传感器)上,这些设备通常具有有限的计算能力、存储空间和功耗。本文您介绍嵌入式机器学习的应用特性,以及常见的机器学习开发软件与开发
    的头像 发表于 01-25 17:05 ?783次阅读
    嵌入式<b class='flag-5'>机器</b><b class='flag-5'>学习</b>的应用特性与软件开发环境

    边缘设备上设计和部署深度神经网络的实用框架

    ???? 机器学习和深度学习应用程序正越来越多地从云端转移到靠近数据源头的嵌入式设备。随着边缘计算市场的快速扩张,多种因素正在推动
    的头像 发表于 12-20 11:28 ?1009次阅读

    使用机器学习和NVIDIA Jetson边缘AI和机器人平台打造机器人导盲犬

    Selin Alara Ornek 是一名富有远见的高中生。她使用机器学习和 NVIDIA Jetson 边缘 AI 和机器人平台,为视障人士打造了
    的头像 发表于 11-08 10:05 ?880次阅读

    CSP LED切割前如何转移到UV膜上

    倒装芯片底部与高温胶膜接触,封装后如何芯片底部与高温膜分离,然后转移到UV膜上?
    发表于 10-29 23:23

    物联网边缘计算的概念

    )应运而生,它通过在网络边缘进行数据处理,为物联网带来了革命性的变化。 什么是物联网边缘计算? 物联网边缘计算是一种网络拓扑结构,它将计算、
    的头像 发表于 10-29 11:30 ?968次阅读

    Orin芯片与边缘计算结合

    随着人工智能技术的飞速发展,边缘计算作为一项关键技术,正在逐渐改变我们的生活和工作方式。边缘计算的核心思想是数据处理和分析任务从云端转移到离数据源更近的地方,以减少延迟、提高效率并降
    的头像 发表于 10-27 16:51 ?1471次阅读

    边缘计算对网络延迟的影响

    的延迟。而边缘计算则将计算能力“边缘化”,即将数据处理和分析的任务从云端迁移到网络边缘,即用户设备或靠近用户的
    的头像 发表于 10-24 14:25 ?1514次阅读

    今日看点丨谷歌明年将把Tensor G5生产转移到台积电;京东方推出新型OLED面板原型

    1. 传三星3 纳米良率20% 谷歌明年将把Tensor G5 生产转移到台积电 ? 据业内人士9月13日透露,谷歌明年移动应用处理器的生产从三星电子转向台积电的可能性越来越大。明年发布的谷歌
    发表于 09-14 11:10 ?651次阅读