0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

意法半导体STM32N6赋能AR眼镜开启人机交互新范式

意法半导体中国 ? 来源:意法半导体中国 ? 2025-01-02 16:42 ? 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

你对AR眼镜有了解吗?

那种有3D显示功能的头盔眼镜?

不是头盔形态或头显形态的眼镜,是超轻量级AR眼镜,兼顾AR显示功能与眼镜轻便形态,具有显示、虚实融合、轻便等特征。

你是说外观形态类似普通眼镜的AR类产品,佩戴时不仅能够享受全场景的智能体验,还有全天候的舒适感,普通眼镜重量,续航还长…… 这么酷!

AR(Augmented Reality,增强现实)是指借助计算机图形技术产生物理世界中不存在的虚拟对象,并通过光学透视(OST)原理将虚拟对象叠加在物理世界中,带来感知效果更丰富的视觉体验。AR可以将额外的数字视觉信息或者内容叠加到现实环境中,增强虚拟与现实世界的融合与交互。

AR眼镜需具备与实体眼镜类似的轻巧外形,强调用户的佩戴舒适度和可佩戴时长。以创新为支点的AR眼镜产品,应具备屏幕显示、声学、摄像头、AIGC等功能。相较于现有消费电子产品,AR眼镜能够摆脱物理屏幕的限制,让人们能够随时随地地沉浸在一个移动屏幕当中;给人们带来第一视角感知环境的体验,结合摄像头与AI工具,目之所及,可鉴万物;随着端侧AI性能逐渐强大,AR眼镜已可实时采集反馈环境内事物信息,交互也更趋简捷自然。

AR眼镜有望破局成为现象级产品,开启人机交互新范式

科技飞速发展的当下,AR眼镜作为一种新兴的可穿戴设备,正在走入我们的生活,成为科技新贵。在经历了数年的行业探索期,以及先锋厂商为AR眼镜产品形态、使用场景所做的有意义的试水和经验积累,AR眼镜的产品定义逐渐收敛,软硬件不断迭代升级,完成了从最初的“头盔”向更轻便的“眼镜”转变。

2024年,AR眼镜作为智能手机的配件补充,目前年销量约为几十万台。但据艾瑞咨询预测,AR眼镜在融入更多AI功能后,将以随身智友(AI Assistant)的形态开启人机交互新范式,有望再造一个智能手机市场,预测至2030年,全球AR眼镜出货量将以亿为单位。驱动AR眼镜快速发展的飞轮是AI+AR赋能信息提示类场景的消费需求激发,如智能提示、悬浮导航、智能翻译、语音助理、眼镜题词等;而办公场景下的多屏协作、移动办公、工作助理、AR互动会议室等功能也必将提升用户对AR眼镜的接受度和使用率。同时,AR眼镜的轻量化发展路线和外观多样化的衔接,将时尚概念引入AR圈。这些均标志着AR行业从最初的探索阶段成功过渡到被主流消费者广泛接受的阶段。

那么,AR眼镜有什么痛点?日常使用方面,应用少,生态拓展慢,交互繁琐且准确率低;硬件痛点更为突出,表现在算力和发热的冲突、续航和重量的冲突。

如何解决这些痛点?答案一是AI+AR赋能更多应用,简化交互过程;二是找到一款能够平衡算力、低功耗、占板面积小的芯片作为硬件支撑。

STM32N6赋慧源,AR眼镜融虚实

未来AR眼镜或将有三种形态:

第一种是没有显示屏的眼镜,眼镜与AI结合,能捕捉音频内容,能实现的功能包括听有声读物和音乐、接打电话等;

第二种是带有小屏显示的眼镜,显示屏是小型抬头显示器,显示功能会带来大量用例,用户可以接收通知、与人或AI互动、结合路况的导航、实时翻译、摄像头采集环境画面后音频化场景等功能;

第三种是带有全视野显示屏的眼镜,显示功能强劲,用户可以以全息影像形式互动、游戏、创作内容等。 莫界科技是小屏显示AR眼镜的代表,在超轻消费级AR眼镜领域的开创性成绩斐然。莫界最新一代带有摄像头的超轻量级AR眼镜采用STM32N6作为主控芯片。

刚刚官宣上市的STM32N6兼具算力、低功耗并集成多项先进性能,以通用MCU的功耗和成本为莫界新品带来了MPU级的AI性能,集成了机器视觉处理能力和ST自研的Neural-ART硬件加速器;它的图形和多媒体性能非常优异,还具备专用图像信号处理器(ISP),可以保证莫界AR眼镜具备超轻的重量、紧凑的外形、持久的续航,以及丰富炫酷的AR功能。

STM32N6作为ST首款MCU+NPU架构的开山之作,算力强劲,处理能力高达600GOPS,为拓宽AR+AI的应用范围提供了硬件支撑;在运行AI模型时,不需要任何散热装置。STM32N6不仅从硬件性能维度,令AR眼镜的算力、续航与用户舒适佩戴实现完美均衡;还以更小的芯片体积、更低的功耗,在一定程度上缓解了AR眼镜续航和重量的冲突。

STM32N6还将ISP创新性地集成到MCU中,可大幅简化计算机视觉用例,显著降低CPU在多任务场景中的工作负载,可应对MCU上计算机视觉的大部分挑战,为AR眼镜的更多视觉应用保驾护航。 而ST提供的边缘AI开发套件(ST Edge AI Suite)可在产品开发的每个阶段为设计人员提供相应的解决方案,快速将先进算法部署到产品中,缩短产品开发周期。

莫界科技联合创始人周兴博士这样总结:“STM32N6与莫界孜孜以求的轻量化AR眼镜特点高度匹配。我们相信STM32将不断为我们的产品创新赋能,意法半导体的全方位支持确保了开发过程的顺利进行,对于像莫界这样希望通过尖端人工智能和图形功能实现可穿戴设备技术上的突破,是非常宝贵的。”

在超轻消费级AR眼镜领域,莫界科技持续领跑

面向消费者场景的AR眼镜,可再细分为观影显示类和信息提示类两条路线。

莫界科技沿着信息显示类路线,在推动超轻消费级AR眼镜的发展路径上持续领跑,凭借其全球首创树脂衍射光波导技术实现技术领跑;追求极致轻量化,基于STM32N6的最新一代AR眼镜重量仅为35克,是目前全球最轻的双目AR眼镜,满足全天候佩戴需求,续航时间大于8小时;且具备摄像头,能够实现AI场景识别交互等多种应用,打造全场景智能体验,重新定义下一代信息显示和交互平台。

关于莫界科技

莫界科技成立于2021年11月23日,是一家致力于联通虚拟与现实、让用户享受个性化生活的高科技公司,目前已在深圳、珠海两地运营,拥有超过10,000平米的研发办公和高端制造基地。

公司创始团队持续多年专注于AR领域,并掌握光显示、感知交互等多项核心技术。公司研发人员占比近七成,核心技术团队硕博占比近八成,已累计申报超七百项核心发明专利与软件著作权。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 意法半导体
    +关注

    关注

    31

    文章

    3271

    浏览量

    110096
  • AI
    AI
    +关注

    关注

    88

    文章

    35476

    浏览量

    281265
  • AR眼镜
    +关注

    关注

    4

    文章

    576

    浏览量

    24423

原文标题:AI+AR,STM32N6 为 AR 眼镜开启“芯”视界

文章出处:【微信号:STMChina,微信公众号:意法半导体中国】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    STM32N6的CSI接收mipi信号时,进入数据线错误控制中断,为什么?

    使用模拟高清解码器芯片XS9950,向stm32n6传输CSI信号的时候,stm32n6发生CSI的Error control on data line中断。此根据参考手册,此中断指示了
    发表于 07-28 06:36

    基于半导体STM32N6和VD66GY的机器视觉方案

    基于STM32N6主控平台和ST VD66GY图像传感器的创新方案,提供高效人体姿态监控解决方案。STM32N6搭载强大的Arm Cortex-M55处理器和嵌入式神经单元,结合VD66GY传感器的高灵敏度图像采集能力,可实现复杂的图像识别与处理任务,如姿态估计、行为分析
    的头像 发表于 07-03 11:01 ?2296次阅读
    基于<b class='flag-5'>意</b><b class='flag-5'>法</b><b class='flag-5'>半导体</b><b class='flag-5'>STM32N6</b>和VD66GY的机器视觉方案

    请问STM32N6 cubeAI部署时用的内存是在内部还是外部?

    STM32N6用cube AI部署模型的时候,用n6-allmems-O3之后analyse得到了RAM和FLASH的内存占用,这里展示的内存占用都是指的是芯片内部的存储器吗
    发表于 06-09 06:19

    请问STM32N6 cubeAI部署时用的内存是在内部还是外部?

    STM32N6用cube AI部署模型的时候,用n6-allmems-O3之后analyse得到了RAM和FLASH的内存占用,这里展示的内存占用都是指的是芯片内部的存储器吗
    发表于 06-03 12:13

    半导体携手华虹打造STM32全流程本地化供应链

    ????????在全球半导体产业加速变革的今天,供应链的稳定性与本地化能力成为企业竞争力的核心要素。在刚刚结束的STM32峰会上,半导体
    的头像 发表于 05-26 09:51 ?554次阅读

    边缘AI应用爆火!STM32N6芯片凭何领跑AI眼镜和机器人赛道?

    在意半导体展台,记者看到了基于STM32N6STM32MP257 PLC的手势识别与跟随系统等展品。此外,重量仅35克的莫界AR
    的头像 发表于 04-29 13:52 ?3698次阅读
    边缘AI应用爆火!<b class='flag-5'>STM32N6</b>芯片凭何领跑AI<b class='flag-5'>眼镜</b>和机器人赛道?

    请问STM32N6 cubeAI部署时用的内存是在内部还是外部?

    STM32N6用cube AI部署模型的时候,用n6-allmems-O3之后analyse得到了RAM和FLASH的内存占用,这里展示的内存占用都是指的是芯片内部的存储器吗
    发表于 04-28 08:25

    半导体推出STM32WBA6系列MCU新品

    ??????最近,半导体(ST)重磅升级STM32WBA产品系列,推出STM32WBA6系列新品,能够在单芯片上同时支持蓝牙低功耗(Bl
    的头像 发表于 03-21 09:40 ?1174次阅读
    <b class='flag-5'>意</b><b class='flag-5'>法</b><b class='flag-5'>半导体</b>推出<b class='flag-5'>STM32WBA6</b>系列MCU新品

    半导体微控制器助力莫界AR眼镜变革

    试想一下,当你戴上一副轻若无物的AR眼镜,你几乎会忘记它的存在。这就是莫界在2025年CES上推出的AR眼镜的魅力所在。虽然莫界并非首家涉足全天候佩戴
    的头像 发表于 02-21 09:09 ?814次阅读

    半导体推出250W MasterGaN参考设计

    为了加快效和功率密度都很出色的氮化镓(GaN)电源(PSU)的设计,半导体推出了EVL250WMG1L基于MasterGaN1L系统级封装(SiP)的谐振转换器参考设计。
    的头像 发表于 02-06 11:31 ?722次阅读

    SEGGER工具全面支持STM32N6微控制器开发

    2024年12月,SEGGER宣布全面支持ST首款带有神经处理单元(NPU)的微控制器STM32N6
    的头像 发表于 12-18 11:05 ?835次阅读

    半导体和ENGIE签订长期购电协议

    半导体(简称ST)宣布与BKH Solar Sdn Bhd太阳发电公司签订为期21年的购电协议(PPA)。
    的头像 发表于 12-12 14:39 ?934次阅读

    半导体史上最强MCU发布

    作为半导体首个集成机器学习(ML)加速器的新系列微控制器,STM32N6让嵌入式人工智能(AI)真正地发挥作用,让注重成本和功耗的消费电子和工业产品能够运行计算机视觉、音频处理、声
    的头像 发表于 12-12 14:36 ?1058次阅读

    新的人机交互入口?大模型加持、AI眼镜赛道开启百镜大战

    电子发烧友网报道(文/莫婷婷)随着智能眼镜的出现,加之AI技术的应用,AI智能眼镜被认为是下一代人机交互的入口。在今年,不少品牌厂商都推出了AI智能眼镜新品,包括李未可推出的Meta
    的头像 发表于 11-21 00:57 ?4043次阅读
    新的<b class='flag-5'>人机交互</b>入口?大模型加持、AI<b class='flag-5'>眼镜</b>赛道<b class='flag-5'>开启</b>百镜大战

    第六届半导体工业峰会2024

    ▌2024ST工业峰会简介 第六届半导体工业峰会2024 即将启程!在为期一整天的活动中,您将探索
    发表于 10-16 17:18