0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

边缘AI实现的核心环节:硬件选择和模型部署

颖脉Imgtec ? 2025-06-19 12:19 ? 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

电子发烧友网综合报道



边缘AI的实现原理是将人工智能算法和模型部署到靠近数据源的边缘设备上,使这些设备能够在本地进行数据处理、分析和决策,而无需将数据传输到远程的云端服务器。边缘AI的实现旨在将人工智能能力下沉到边缘设备。


边缘AI的实现原理和核心环节

边缘AI采用分布式计算架构,将计算任务从中心化的云端分散到各个边缘设备。边缘设备可以是智能手机智能摄像头、工业传感器智能家居设备等。这些设备具备一定的计算能力,能够在本地对采集到的数据进行处理,减少了对云端计算资源的依赖。边缘设备在本地完成数据的采集、预处理、分析和决策。数据在产生源头附近就被处理,避免了大量数据传输到云端所带来的网络延迟和带宽压力。例如,在智能安防监控中,摄像头可以直接在本地对视频图像进行分析,识别异常行为,一旦发现可疑情况立即发出警报,而无需将视频数据全部上传到云端。

模型轻量化:由于边缘设备的计算资源、存储容量和功耗有限,传统的复杂AI模型无法直接在边缘设备上高效运行。因此,需要对AI模型进行轻量化处理,如模型压缩、剪枝、量化等。模型压缩可以减少模型的参数数量,降低模型的存储空间和计算复杂度;模型剪枝则是去除模型中不重要的神经元或连接,提高模型的运行效率;模型量化将模型中的浮点数参数转换为低精度的定点数,减少计算量和内存占用。


边缘设备部署:将轻量化后的AI模型部署到边缘设备上。这需要考虑边缘设备的硬件架构、操作系统和开发环境等因素。不同的边缘设备可能具有不同的处理器架构(如ARM、x86等),需要针对不同的架构对模型进行优化和适配,以确保模型能够在设备上高效运行。同时,还需要开发相应的应用程序或软件框架,方便在边缘设备上调用和管理AI模型。


数据采集与预处理:边缘设备通过各种传感器(如摄像头、麦克风、温度传感器、加速度传感器等)采集数据。采集到的原始数据往往存在噪声、冗余和不一致性等问题,需要进行预处理。数据预处理包括数据清洗、特征提取、数据归一化等操作。数据清洗可以去除噪声数据和异常值;特征提取是从原始数据中提取出对AI模型有用的特征信息,减少数据的维度;数据归一化则是将数据映射到特定的范围,提高模型的收敛速度和准确性。


实时推理与决策:经过预处理的数据被输入到部署在边缘设备上的AI模型中进行实时推理。AI模型根据输入的数据进行分析和判断,输出相应的结果。边缘设备根据推理结果做出决策,并执行相应的操作。例如,在自动驾驶汽车中,边缘设备(如车载计算平台)实时处理来自摄像头、雷达和激光雷达等传感器的数据,通过AI模型进行环境感知、目标检测和路径规划,然后根据推理结果控制车辆的行驶速度、方向和制动等。


云端协同与更新:虽然边缘AI强调本地处理,但在某些情况下,边缘设备仍然需要与云端进行协同工作。例如,当边缘设备遇到复杂的问题或需要处理大量数据时,可以将部分数据上传到云端进行进一步的分析和处理;云端可以将更新后的AI模型、算法和知识库推送到边缘设备,实现对边缘设备的远程更新和优化,提高边缘AI系统的性能和适应性。



边缘AI硬件设备

边缘AI的实现依赖于多种边缘设备,这些设备具备不同的特性和功能,以适应多样化的应用场景。常见的边缘AI所需边缘设备类型有很多。

智能终端类如智能手机、智能摄像头、智能可穿戴设备等。智能手机,具备强大的计算能力、丰富的传感器(如摄像头、麦克风、加速度计、陀螺仪等)和良好的通信能力(支持Wi-Fi4G/5G等)。可用于图像识别(如拍照翻译、扫码识别)、语音交互(如智能语音助手)、实时健康监测(结合传感器数据)等边缘AI应用。例如,用户在旅游时使用手机拍照识别景点信息,就是利用了手机上的边缘AI功能。

智能摄像头内置图像传感器和一定的计算能力,能够实时采集图像数据并进行本地处理。广泛应用于安防监控、智能交通等领域。在安防监控中,智能摄像头可以通过边缘AI实现人脸识别、行为分析(如检测异常奔跑、徘徊等行为),及时发出警报;在智能交通中,可用于车辆识别、交通流量统计等。

智能可穿戴设备如智能手表、智能手环等,具有小巧便携、贴近人体的特点,通常配备多种传感器(如心率传感器、睡眠监测传感器等)和低功耗处理器。主要用于健康监测和运动追踪。例如,智能手表可以实时监测用户的心率、血压、睡眠质量等数据,并通过边缘AI算法进行初步分析,为用户提供健康建议。

工业设备类如工业传感器、工业网关、工业机器人控制器等。工业传感器,能够实时采集工业生产过程中的各种参数,如温度、压力、流量、振动等,部分工业传感器具备一定的数据处理能力。在工业自动化生产中,工业传感器可以将采集到的数据通过边缘AI进行分析,实现对设备状态的实时监测和故障预警。例如,通过分析设备的振动数据,提前发现设备可能存在的故障隐患,避免设备停机造成的生产损失。

工业网关作为工业现场设备与云端之间的桥梁,工业网关具备一定的计算能力和通信能力,能够连接多种工业协议的设备,并对采集到的数据进行预处理和边缘计算。可以将不同工业设备采集到的数据进行整合和分析,实现设备的远程监控和管理。例如,在工厂中,工业网关可以收集来自各个生产线的设备数据,通过边缘AI算法进行数据分析,优化生产流程,提高生产效率。

工业机器人控制器负责控制工业机器人的运动和操作,具有较高的计算性能和实时性要求。结合边缘AI技术,工业机器人控制器可以使机器人具备更智能的感知和决策能力。例如,在装配线上,机器人可以通过边缘AI识别零件的形状和位置,自动调整装配动作,提高装配的准确性和效率。

智能家居类智能音箱、智能家电。智能音箱,集成了麦克风阵列、扬声器和语音识别芯片,具备语音交互能力,能够通过边缘AI实现语音指令的识别和处理。用户可以通过语音指令控制智能家居设备,如打开灯光、调节空调温度等。同时,智能音箱还可以提供音乐播放、新闻资讯等服务。

智能家电如智能冰箱、智能空调、智能洗衣机等,内置传感器和微处理器,能够实时监测设备运行状态和环境信息。通过边缘AI技术,智能家电可以实现智能控制和优化运行。例如,智能冰箱可以根据内部食物的存储情况,为用户提供购物清单建议;智能空调可以根据室内外温度和人员活动情况,自动调节运行模式和温度。

智能交通类如车载计算平台、智能路侧设备。车载计算平台,具备高性能的计算能力和低延迟的通信能力,能够满足自动驾驶等复杂应用的需求。在自动驾驶汽车中,车载计算平台通过边缘AI对摄像头、雷达、激光雷达等传感器采集到的数据进行实时处理和分析,实现环境感知、目标检测、路径规划和决策控制等功能,确保车辆的安全行驶。

智能路侧设备安装在道路两侧,如智能信号灯、路侧单元(RSU)等,能够采集交通流量、车辆速度等信息,并与车辆进行通信。通过边缘AI技术,智能路侧设备可以实现对交通流量的实时监测和优化控制。例如,根据实时交通流量调整信号灯的时长,提高道路的通行效率;同时,还可以向车辆发送路况信息,引导车辆选择最佳行驶路线。


边缘AI设备环境搭建及模型部署

硬件设备选择:根据模型的大小和计算需求,选择合适的边缘设备硬件。例如,对于计算资源要求较高的模型,可以选择配备高性能处理器(如GPU、TPU)的边缘计算盒子;对于一些简单的任务,普通的嵌入式处理器(如ARM Cortex系列)可能就足够了。操作系统与开发环境配置:在边缘设备上安装合适的操作系统,如LinuxAndroid等,并配置相应的开发环境,包括编译器、调试工具等。同时,安装支持AI模型推理的框架,如TensorFlow Lite、PyTorch Mobile、ONNX Runtime等,这些框架能够将训练好的模型部署到边缘设备上并进行高效推理。模型转换:将训练好的模型转换为边缘设备支持的格式。例如,如果使用TensorFlow训练模型,可以使用TensorFlow Lite Converter将模型转换为.tflite格式,以便在TensorFlow Lite框架上运行。模型部署:将转换后的模型部署到边缘设备上。可以通过有线(如USB以太网)或无线(如Wi-Fi、蓝牙)方式将模型文件传输到边缘设备的存储单元中。系统集成:将部署好的模型与边缘设备上的其他软件模块进行集成,实现数据的采集、预处理、模型推理和结果输出的完整流程。例如,编写数据采集程序,将传感器采集到的数据实时传输给模型进行推理,并根据推理结果控制相应的执行机构。

声明:本文由电子发烧友综合报道,转载请注明以上来源。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 硬件
    +关注

    关注

    11

    文章

    3491

    浏览量

    67614
  • 人工智能
    +关注

    关注

    1809

    文章

    49151

    浏览量

    250608
  • 边缘AI
    +关注

    关注

    0

    文章

    169

    浏览量

    5492
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    边缘AI应用越来越普遍,AI模型边缘端如何部署

    模型在端侧的部署也成了业界关注的焦点。 ? 如何把AI 模型边缘部署 ? 首先得软
    的头像 发表于 07-04 00:11 ?3579次阅读
    <b class='flag-5'>边缘</b><b class='flag-5'>AI</b>应用越来越普遍,<b class='flag-5'>AI</b><b class='flag-5'>模型</b>在<b class='flag-5'>边缘</b>端如何<b class='flag-5'>部署</b>?

    边缘部署模型优势多!模型量化解决边缘设备资源限制问题

    电子发烧友网报道(文/李弯弯)大模型边缘部署是将大模型部署边缘设备上,以
    的头像 发表于 01-05 00:06 ?5284次阅读

    边缘AI实现核心环节硬件选择模型部署

    电子发烧友网综合报道 边缘AI实现原理是将人工智能算法和模型部署到靠近数据源的边缘设备上,使这
    发表于 05-26 07:09 ?964次阅读

    AI模型部署边缘设备的奇妙之旅:如何实现手写数字识别

    和计算成本。 对于某些应用,可以通过剪枝实现更高的效率,尤其是在硬件加速器上。 挑战: 剪枝可能会导致模型性能下降,因此需要仔细选择剪枝策略并进行适当的再训练。 高度非线性的问题中,简
    发表于 12-06 17:20

    AI模型部署边缘设备的奇妙之旅:目标检测模型

    并非易事,它涉及到从选择合适的算法架构到针对特定硬件平台进行优化等一系列复杂的工作。 接下来,我们将详细介绍如何在资源受限的边缘设备上成功部署目标检测
    发表于 12-19 14:33

    添越智创基于 RK3588 开发板部署测试 DeepSeek 模型全攻略

    DeepSeek 模型部署与测试,开启这场充满挑战与惊喜的技术探索之旅。 RK3588 开发板:AI 性能担当 RK3588 开发板基于先进的 8nm LP 制程工艺精心打造,其硬件
    发表于 02-14 17:42

    Deepseek海思SD3403边缘计算AI产品系统

    海思SD3403边缘计算AI框架,提供了一套开放式AI训练产品工具包,解决客户低成本AI系统,针对差异化AI 应用场景,自己采集样本数据,进
    发表于 04-28 11:05

    STM32F769是否可以部署边缘AI

    STM32F769是否可以部署边缘AI
    发表于 06-17 06:44

    硬件帮助将AI移动到边缘

    统。有关AI超出语音和愿景的硬件,实施和影响的进一步见解,请查看特殊项目中的其他文章。将 AI推向边缘的创新 AI将允许开发人员
    发表于 05-29 10:38

    EdgeBoard FZ5 边缘AI计算盒及计算卡

    智能分析。为批量化AI项目落地提供卓越选择!2 根植百度大脑强大生态体系,拥有丰富AI能力搭载百度PaddlePaddle框架,衔接百度大脑开放能力,可提供海量且不断迭代的模型库轻松
    发表于 08-31 14:12

    【HarmonyOS HiSpark AI Camera】边缘计算安全监控系统

    打火机)就报警的模型实现边缘测的相关检测和报警的业务逻辑。中期,完成传感器数据和视频推流到云端,实现远程监控。后期,各个环节的丰富和优化,
    发表于 09-25 10:11

    介绍在STM32cubeIDE上部署AI模型的系列教程

    介绍在STM32cubeIDE上部署AI模型的系列教程,开发板型号STM32H747I-disco,值得一看。MCUAI原文链接:【嵌入式AI开发】篇四|
    发表于 12-14 09:05

    MLU220-M.2边缘端智能加速卡支持相关资料介绍

    。可以轻松实现终端设备和边缘段设备的AI赋能方案。MLU220-M.2加速卡用于离线模型部署,离线模型
    发表于 08-08 17:37

    嵌入式边缘AI应用开发指南

    保驾护航。下面让我们来了解如何不借助手动工具或手动编程来选择模型、随时随地训练模型并将其无缝部署到TI处理器上,从而实现
    发表于 11-03 06:53

    研华边缘AI Box MIC-ATL3S部署Deepseek R1模型

    随着深度求索(DeepSeek)大模型的发布引发行业热议,研华科技基于昇腾Atlas平台边缘AI Box MIC-ATL3S正式发布与Deepseek R1模型
    的头像 发表于 02-14 16:08 ?1487次阅读
    研华<b class='flag-5'>边缘</b><b class='flag-5'>AI</b> Box MIC-ATL3S<b class='flag-5'>部署</b>Deepseek R1<b class='flag-5'>模型</b>