0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

在数据量巨大的环境中,AI加速器等硬件系统占据舞台中心

新思科技 ? 来源:新思科技 ? 作者:新思科技 ? 2021-04-02 09:33 ? 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

软件一直是智能应用领域的创新助推器,而硬件正迅速成为人工智能AI)领域的核心引擎。人脸识别、自动驾驶、虚拟辅助,以及众多其他应用都要依赖AI硬件。预计到2025年,AI的市场规模将达到650亿美元。

神经网络等并行计算系统对于能够处理海量数据并执行自我迭代训练有着巨大的需求,硬件也因此成为这一领域的主导力量。在这个数据量巨大的环境中,AI加速器等硬件系统占据了舞台中心

AI加速器具有如下众多优势:

● 能效相较于通用型计算设备显著提高

● 降低计算延迟以支持实时应用

● 具备可扩展性,能够取得性能速度改善,其程度甚至能与所用的内核数达成线性扩展

● 异构架构支持系统容纳多个专用处理器以执行特定任务

AI加速器支持数据中心和边缘

AI加速器主要在两大领域发挥作用:数据中心和边缘。现在的数据中心需要大规模的可拓展计算架构,尤其是那些可支持多达数千台物理服务器和数百万台虚拟机的超大规模数据中心,对大规模可扩展计算架构的需求极为迫切,这一市场需求使得一些企业凭借加速AI工作负载这一业务发展壮大。例如,Cerebras为Cerebras CS-1深度学习系统创造了晶圆级引擎(WSE)。WSE面积为46,225mm?,拥有1.2 万亿个晶体管和40万个经过AI优化的内核,是迄今为止最大的芯片。WSE可提供更大的算力、存储和通信带宽,能够支持AI研究达到前所未有的速度和规模。与之相对的是硬件基板面有限且节能至为关键的边缘应用。如果边缘SoC内部集成了AI加速器IP ,则它可以快速提供必要的智能功能从而支持各种应用,例如智能手机或自动化工厂机器人中运行的交互式程序。对于在边缘提供智能应用,支持它们的 AI加速器必须经过优化,以具备诸如实时计算延迟、超高能效、失效安全运行以及高度可靠性等特征。

并不是所有AI应用都需要像WSE这么大的芯片,例如以下类型的硬件AI加速器:

● 能够执行时间神经网络处理的图形处理单元 (GPU

● Google张量处理单元 (TPU) 等空间加速器

● Sambanova的DataScale等粗粒度可重构计算架构 (CGRA)

● 经过向量处理扩展的大规模多核标量处理器

所有此类芯片均可以几十个或几百个组合使用,形成更大的系统,处理更大型的神经网络。比如说,如果将Google的TPU合并到pod配置中,那么可以带来超过100 petaFLOPS的处理能力来训练神经网络模型。NVIDIA旗下应用深度学习研究团队推出的Megatron创造了一个带有83亿参数转换器的语言模型,可提供8路模型并行和64路数据并行功能用于自然语言处理。要执行这一模型,就必须开发出具有 312 teraFLOP FP16计算能力的NVIDIA A100 GPU。另一种新兴的硬件类型是 CGRA,它能在编程不同网络时,在性能、能效与灵活性方面巧妙地实现权衡。

在这场关于AI硬件的讨论中,软件栈是不容忽视的存在,因为它能实现系统级性能表现,并确保充分利用硬件。TensorFlow等开源软件平台为开发人员提供各类工具、库和其他资源,帮助他们轻松构建和部署机器学习应用。Facebook Glow等机器学习编译器不断涌现,有助于促成高级软件框架与各种AI加速器的连接。

种类全面的AI设计产品组合

硬件已经成为AI应用的关键组件,但此类组件仍然面临特有的设计难题,在云和边缘应用想要突破当前硅技术的功耗、性能和面积(PPA)极限时尤其如此。对数据中心来说,件设计呈现多级物理分层、局部同步和全局异步架构、尺寸庞大和布局分散等特征。在边缘应用中, AI设计必须能够处理数以百计的设计角,以满足超低功耗要求,实现异构集成并具备超乎寻常的多变性。

新思科技能够为AI硬件设计人员提供业内最为全面的AI设计产品组合,帮助他们攻克此类难题。我们的产品,以边缘设备IP、Zebu Server 4仿真系统,全面辐射整个范围,并能快速将载复杂的工作负载引入到Fusion Design Platform,实现全流程的、且经AI改进结果质量(QoR)和结果转化时间(TTR)的IC设计

新思科技还推出DSO.ai(设计空间优化AI),这是业内首款针对芯片设计的自主AI应用。DSO.ai 在非常大的芯片设计解决方案范围内寻找优化目标。它减少了设计工作流中自动执行的间接决策,从而大幅加快了专用AI加速器的设计进度。

随着AI应用更加深入地融入我们的生活,AI加速器等硬件将会继续发挥关键作用,实现实时响应,为智能设备和系统创造更大价值。

原文标题:AI加速器,实现人工智能创新的核心引擎

文章出处:【微信公众号:新思科技】欢迎添加关注!文章转载请注明出处。

责任编辑:haq

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 加速器
    +关注

    关注

    2

    文章

    828

    浏览量

    39200
  • AI
    AI
    +关注

    关注

    88

    文章

    35476

    浏览量

    281289
  • 人工智能
    +关注

    关注

    1809

    文章

    49152

    浏览量

    250653

原文标题:AI加速器,实现人工智能创新的核心引擎

文章出处:【微信号:Synopsys_CN,微信公众号:新思科技】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    PCIe协议分析仪在数据中心中有何作用?

    PCIe协议分析仪在数据中心中扮演着至关重要的角色,它通过深度解析PCIe总线的物理层、链路层、事务层及应用层协议,帮助运维人员、硬件工程师和系统架构师优化性能、诊断故障、验证设计合规性,并提
    发表于 07-29 15:02

    PCIe协议分析仪能测试哪些设备?

    /ASIC加速器 测试场景:分析专用AI推理加速器与主系统的PCIe通信,优化数据传输和指令下发效率。 应用价值:提高推理吞吐
    发表于 07-25 14:09

    粒子加速器?——?科技前沿的核心装置

    粒子加速器全称“荷电粒子加速器”,是一种利用电磁场在高真空环境对带电粒子(如电子、质子、离子)进行加速和控制,使其获得高能量的特种装置。粒
    的头像 发表于 06-19 12:05 ?820次阅读
    粒子<b class='flag-5'>加速器</b>?——?科技前沿的核心装置

    是德科技推出AI数据中心构建

    的工作负载模拟功能将大型语言模型(LLM)和其他人工智能(AI)模型训练工作负载集成到AI基础设施组件的设计和验证——包括网络、主机和加速器。该解决方案实现了
    的头像 发表于 04-07 11:06 ?538次阅读

    适用于数据中心AI时代的800G网络

    100Gbps,整体速率高达800Gbps。这意味着在AI模型训练过程,服务之间的数据传输速率更快,显著提升训练效率。相比NRZ,PAM4在相同频谱范围内可以承载双倍
    发表于 03-25 17:35

    小型加速器中子源监测系统解决方案

    小型加速器中子源是一种基于先进加速器技术的中子产生装置,凭借体积小、成本低、安全性高的优势,在医学、工业、科研、安全、能源多个领域展现出巨大的应用潜力和价值。无论是用于医学领域的精准
    的头像 发表于 03-13 11:19 ?708次阅读
    小型<b class='flag-5'>加速器</b>中子源监测<b class='flag-5'>系统</b>解决方案

    FPGA+AI王炸组合如何重塑未来世界:看看DeepSeek东方神秘力量如何预测......

    。? AI加速器的开发:FPGA被广泛用于开发专为AI算法优化的加速器,例如深度学习推理加速器。这种定制化的
    发表于 03-03 11:21

    当我问DeepSeek AI爆发时代的FPGA是否重要?答案是......

    ,这为AI的持续创新提供了有力支持。 6.数据中心与云计算加速 ? 在云计算和数据中心中,FPGA被用作AI计算
    发表于 02-19 13:55

    数据中心中的FPGA硬件加速器

    ? 再来看一篇FPGA的综述,我们都知道微软包括国内的云厂商其实都在数据中心的服务中部署了FPGA,所以这篇论文就以数据中心的视角,来看下FPGA这个硬件加速器。 还是一样,想要论文
    的头像 发表于 01-14 10:29 ?707次阅读
    <b class='flag-5'>数据中心</b>中的FPGA<b class='flag-5'>硬件加速器</b>

    从版本控制到全流程支持:揭秘Helix Core如何成为您的创意加速器

    加速器
    龙智DevSecOps
    发布于 :2024年11月26日 13:42:47

    PCIe加速卡在数据中心的应用

    随着数据中心的快速发展,对计算能力的需求也在不断增长。PCIe(Peripheral Component Interconnect Express)加速卡作为一种高性能的计算设备,已经在数据中心
    的头像 发表于 11-06 09:32 ?1864次阅读

    EPSON差分晶振SG3225VEN频点312.5mhz应用于AI加速

    AI加速卡,通常也被称为AI算力卡,是一种专为加速人工智能(AI)应用和算法而设计的硬件设备。
    发表于 09-10 14:56 ?0次下载

    适用于数据中心应用硬件加速器的直流/直流转换解决方案

    电子发烧友网站提供《适用于数据中心应用硬件加速器的直流/直流转换解决方案.pdf》资料免费下载
    发表于 08-26 09:38 ?0次下载
    适用于<b class='flag-5'>数据中心</b>应用<b class='flag-5'>中</b>的<b class='flag-5'>硬件加速器</b>的直流/直流转换<b class='flag-5'>器</b>解决方案

    半导体存储在数据中心中的应用

    半导体存储在数据中心中的应用是极其重要且广泛的,它们不仅是数据中心存储系统的核心组件,还直接关系到数据处理的效率、可靠性和安全性。以下将详细阐述半导体存储
    的头像 发表于 08-20 10:17 ?1341次阅读

    下一代高功能新一代AI加速器(DRP-AI3):10x在高级AI系统高级AI更快的嵌入处理

    电子发烧友网站提供《下一代高功能新一代AI加速器(DRP-AI3):10x在高级AI系统高级AI
    发表于 08-15 11:06 ?0次下载
    下一代高功能新一代<b class='flag-5'>AI</b><b class='flag-5'>加速器</b>(DRP-<b class='flag-5'>AI</b>3):10x在高级<b class='flag-5'>AI</b><b class='flag-5'>系统</b>高级<b class='flag-5'>AI</b><b class='flag-5'>中</b>更快的嵌入处理