0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

激光封装技术在人工智能发展中的作用

半导体芯科技SiSC ? 来源:逍遥科技 逍遥设计自动化 ? 作者:逍遥科技 逍遥设计 ? 2024-08-20 16:42 ? 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

来源:逍遥科技 逍遥设计自动化

简介

随着人工智能AI)应用的迅速发展,对大带宽、高效率数据传输解决方案的需求日益突出。目前用于AI训练和推理的成千上万个GPU正面临传统数据中心网络互联方案所带来的性能瓶颈。这些传统方案增加了功耗和成本,凸显了创新解决方案的迫切需求。
光I/O和光电共封装(CPO)解决方案是最有前途的技术进展之一。通过优化数据吞吐量和系统性能,促进了大型互联AI集群的发展。这些光学I/O和光电共封装解决方案需要创新和高度先进的激光封装策略,以提高系统的性能、可扩展性和可靠性,这对于当前盈利的AI基础设施部署非常重要。

wKgaombEVu-AYMvjAABUUhzoDpE645.jpg

硅基光电子中的激光封装硅基光电子通过使用光信号而非电信号,改变了逻辑芯片和存储芯片内部及之间的数据传输方式。这一技术对针对生成式AI的部署变得越来越重要。传统的基于铜的解决方案日益限制了这些系统的数据流,制约了计算设备和存储容量的集群规模和数据速率。
可插拔光模块一直是将电信号转换为光信号(反之亦然)的最常见方法。CPO技术成功地将I/O模块从面板上移开,将模块组件与计算或交换芯片集成到一个封装中。协同封装将可插拔收发器的功能直接集成到应用专用集成电路ASIC)旁边,减少了高带宽下铜链路的信号损失。
光I/O为分布式计算系统(如需要高带宽密度、低能耗和低互连延迟的AI集群)提供了一种更集成、更节能的解决方案。这是通过将单个电光芯片与计算ASIC封装在一起来实现的,该芯片执行由分立模块构建的收发器的发送、接收和数据转换功能。

CPO和光学I/O解决方案可以使用集成或远程光源为其协同封装模块或芯片提供光学输入。让我们来研究这两种选择,并探讨它们的优势和权衡。
集成光源集成光源指的是光源与CPO模块或光I/O芯片共同定位,靠近GPU或其他计算ASIC的方法。这可以通过将激光器单独制造并与光电子集成芯片(PIC)共同封装,或者与PIC单片集成制造来实现。另一方面,远程光源(也称为分离式或外部激光器)是独立封装的,与CPO模块、光I/O芯片和ASIC物理分离。
现代AI系统需要非常高功耗的GPU或ASIC芯片,这会导致其周围环境温度很高。由于物理接近,集成光源会经历这些非常高的温度,而使用远程光源的系统可以设计为经历更好的热环境。
激光器,特别是在先进数据速率所需的高输出功率下,是光连接解决方案中在高温下最容易失效的组件,可能会导致整个链路失效。远程光源的优势在于其所处的热环境要求较低,延长了其使用寿命,大大降低了故障率和系统停机时间。
此外,远程激光器可以轻松移除、维修或更换,而不会干扰其他系统组件,如协同封装的GPU和CPO或光I/O芯片。集成光源可能无法维修,或需要对昂贵的ASIC封装进行重大修改,从而增加成本和系统停机时间。
业界已经制定了外部激光器小型可插拔(ELSFP)规范,认识到了外部激光器的重要性。这种通用外形因子利用了可插拔模块的可维修性、可更换性和易部署性优势,以及CPO解决方案的成本、延迟和信道损耗优势,同时将供应商和客户生态系统统一到一个单一的外形因子上。

wKgZombEVvGAHNGzAACdSKpa5vk959.jpg

需要考虑的因素从成本和可靠性的角度来看,光源通常是光连接解决方案中最敏感的组件。设计师和架构师应优先考虑多样化的供应商和标准化的波长网格,如使用了二十多年的O波段LR4网格。这种方法确保了低设计和供应风险,并建立了一个具有吸引力的大批量成本结构,这对于成功部署光学I/O重要。
连续波波分复用多源协议(CW-WDM MSA)汇集了广泛的行业利益相关者,包括激光器供应商、收发器制造商、CPO和光学I/O连接供应商等,以促进解决方案之间的互操作性,减少对任何单一供应商或技术的依赖。这种标准化努力对于支持AI、HPC和其他高价值、大批量应用的解决方案重要。
远程光源的作用AI技术的进步和大型语言模型(LLM)的指数级增长,要求在计算和存储元素之间有新的数据传输解决方案,来适应模型规模和令牌数量的指数级增长。远程光源是解决这些瓶颈的光学I/O解决方案的关键使能技术。
传统的网络系统在大型系统内部的连接高度依赖交换机,这会引入延迟并限制高带宽域的大小。光学I/O解决方案中通常具有的多波长、多端口功能使得在多个设备之间提供直接、低延迟、高带宽的连接成为可能。这种方法通过消除交换机简化了系统架构,提高了网络中数据交换的速度和可扩展性,从而增加了高带宽域的大小。
AI架构中最大的挑战之一是"内存墙",即快速增加的内存与计算比率导致操作效率受到与处理器芯片一起封装的高带宽内存(HBM)数量的限制。当远程光源作为光I/O解决方案的一部分时,通过启用通过超低延迟、高带宽链路连接到GPU的分离式内存集群,缓解了这一瓶颈。
激光封装技术现在是克服阻碍AI潜力发挥的瓶颈的关键构建块。远程光源在这一进程中发挥着重要作用,为未来AI系统的发展提供了强有力的支持。
参考来源
https://www.lightwaveonline.com/home/article/55131827/the-role-of-laser-packaging-in-advancing-ai-technologies?utm_content=303385105&utm_medium=social&utm_source=linkedin&hss_channel=lcp-6627049

【近期会议】

10月30-31日,由宽禁带半导体国家工程研究中心主办的“化合物半导体先进技术及应用大会”将首次与大家在江苏·常州相见,邀您齐聚常州新城希尔顿酒店,解耦产业链市场布局!https://w.lwc.cn/s/uueAru

11月28-29日,“第二届半导体先进封测产业技术创新大会”将再次与各位相见于厦门,秉承“延续去年,创新今年”的思想,仍将由云天半导体与厦门大学联合主办,雅时国际商讯承办,邀您齐聚厦门·海沧融信华邑酒店共探行业发展!诚邀您报名参会:https://w.lwc.cn/s/n6FFne

声明:本网站部分文章转载自网络,转发仅为更大范围传播。 转载文章版权归原作者所有,如有异议,请联系我们修改或删除。联系邮箱:viviz@actintl.com.hk, 电话:0755-25988573

审核编辑 黄宇

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 激光
    +关注

    关注

    20

    文章

    3492

    浏览量

    67753
  • 封装
    +关注

    关注

    128

    文章

    8845

    浏览量

    145956
  • 人工智能
    +关注

    关注

    1810

    文章

    49224

    浏览量

    251642
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    挖到宝了!人工智能综合实验箱,高校新工科的宝藏神器

    技术自主可控 如今这个科技竞争激烈的时代,国产化硬件的重要性不言而喻。比邻星人工智能综合实验箱就做到了这一点,采用国产化硬件,积极推进全行业产业链上下游环节的国产化进程,把国产自主可控的软硬件平台
    发表于 08-07 14:30

    挖到宝了!比邻星人工智能综合实验箱,高校新工科的宝藏神器!

    技术自主可控 如今这个科技竞争激烈的时代,国产化硬件的重要性不言而喻。比邻星人工智能综合实验箱就做到了这一点,采用国产化硬件,积极推进全行业产业链上下游环节的国产化进程,把国产自主可控的软硬件平台
    发表于 08-07 14:23

    最新人工智能硬件培训AI 基础入门学习课程参考2025版(大模型篇)

    人工智能大模型重塑教育与社会发展的当下,无论是探索未来职业方向,还是更新技术储备,掌握大模型知识都已成为新时代的必修课。从职场上辅助工作的智能
    发表于 07-04 11:10

    奥迪威入围 2024 广州人工智能创新发展榜单

    近日,2024 广州人工智能创新发展榜单正式揭晓,广东奥迪威传感科技股份有限公司凭借人工智能领域的卓越表现成功入围。这一荣誉不仅是对奥迪威多年来
    的头像 发表于 02-27 16:01 ?573次阅读
    奥迪威入围 2024 广州<b class='flag-5'>人工智能</b>创新<b class='flag-5'>发展</b>榜单

    编程语言人工智能的使用

    。编程语言AI的发展中扮演着至关重要的角色,它们为开发人员提供了构建和实现智能系统的工具和框架。 1. Python Python是人工智能领域最受欢迎的编程语言之一,原因有以下几点
    的头像 发表于 11-15 09:34 ?1099次阅读

    嵌入式和人工智能究竟是什么关系?

    人工智能的结合,无疑是科技发展中的一场革命。人工智能硬件加速,嵌入式系统以其独特的优势和重要性,发挥着不可或缺的
    发表于 11-14 16:39

    soc人工智能的创新应用

    社会计算(Social Computing, SOC)是一个跨学科领域,它结合了社会科学、计算机科学和人工智能,以理解和设计社会互动技术系统。随着人工智能(AI)
    的头像 发表于 11-10 09:30 ?1083次阅读

    LLM技术人工智能发展的影响

    。 一、LLM技术人工智能领域的应用 自然语言处理(NLP) LLM技术自然语言处理领域发挥着重要
    的头像 发表于 11-08 09:28 ?1997次阅读

    智慧城市可持续发展中的应用

    智慧城市可持续发展中的应用体现在多个方面,它利用大数据、人工智能、物联网等先进技术,实现城市资源的高效利用、环境的保护、社会的包容性和经济的可持续
    的头像 发表于 10-24 15:25 ?1592次阅读

    《AI for Science:人工智能驱动科学创新》第6章人AI与能源科学读后感

    不仅提高了能源的生产效率和管理水平,还为未来的可持续发展提供了有力保障。随着技术的不断进步和应用场景的不断拓展,人工智能将在能源科学领域发挥更加重要的作用。 总结 《AI for Sc
    发表于 10-14 09:27

    AI for Science:人工智能驱动科学创新》第4章-AI与生命科学读后感

    。 4. 对未来生命科学发展的展望 阅读这一章后,我对未来生命科学的发展充满了期待。我相信,人工智能技术的推动下,生命科学将取得更加显著
    发表于 10-14 09:21

    《AI for Science:人工智能驱动科学创新》第二章AI for Science的技术支撑学习心得

    ,推动科学研究的深入发展。 总结 通过阅读《AI for Science:人工智能驱动科学创新》第二章,我对AI for Science的技术支撑有了更加全面和深入的理解。我深刻认识到AI
    发表于 10-14 09:16

    《AI for Science:人工智能驱动科学创新》第一章人工智能驱动的科学创新学习心得

    ,无疑为读者铺设了一条探索人工智能(AI)如何深刻影响并推动科学创新的道路。阅读这一章后,我深刻感受到了人工智能技术科学领域的广泛应用潜力以及其带来的革命性变化,以下是我个人的学习
    发表于 10-14 09:12

    risc-v人工智能图像处理应用前景分析

    、RISC-V人工智能图像处理的应用案例 目前,已有多个案例展示了RISC-V人工智能图像处理
    发表于 09-28 11:00

    名单公布!【书籍评测活动NO.44】AI for Science:人工智能驱动科学创新

    大力发展AI for Science的原因。 第2章从科学研究底层的理论模式与主要困境,以及人工智能三要素(数据、算法、算力)出发,对AI for Science的技术支撑进行解读。 第3章介绍了
    发表于 09-09 13:54