0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

AI算法和推理正日益依赖于终端进行的原因

4dD0_chinacmos ? 来源:未知 ? 作者:李倩 ? 2018-05-03 16:10 ? 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

数据预测,从2017年到2021年,5年时间,全球的IOT通过4G或者5G网络连在一起的设备会达到200亿台。在此情景之下,作为能够使得智能终端产品更加智能的AI也成为时下热词。万物互联大幕的逐渐拉起,也使得AI产业吸引了众多上下游企业的参与,尤其是随着芯片厂商以及终端品牌等的加入,AI在产品形态上已经呈现出多种多样。可以说,AI正给消费者和整个行业带来巨大可能性。

尽管在AI技术领域各家企业发力的方向有所区别,但是总体上他们对于AI的未来都已达成共识,即由于在巨大的万物互联时代,各个设备不仅仅是要联结在一起,而且会变得越来越智能,因此AI正以其发展的无限可能性给整个产业链带来巨大的机会。

正如高通产品总监刘学徽在4月26日由手机报在线举办的AI手机产业峰会上所表示,传统意义上的AI在云上面可以做模型培训,也可以做模型的推理。但是现在有一种趋势,即AI的运算能力,尤其是推理的过程,正慢慢变得大多数是依赖终端在运行的。这种趋势不管是对做模组还是做算法的厂家来讲,都是非常大的机会。

高通产品总监刘学徽

至于AI算法和推理正日益依赖于终端进行的原因,主要有三点:一是隐私性。刘学徽表示,不管是手机还是各种可穿戴设备都是人在使用,而现在人对隐私的意识正越来越强。而传统各种AI的算法、推理都是在云上做,这势必就会将所有的数据都上传到云上。相反,现在在终端做算法和推理,则可以避免将信息上传至云端的过程,用户也就可以相对放心。

二是低延时。刘学徽介绍到,不管AI怎么做,它都需要用户的体验,而一旦用户体验差,这个产品或者性能就没法推广开。例如,现在非常流行的手机人脸解锁、人脸开机就是典型的在端上使用人工智能的案例。而如果说开机的过程要把人脸信息采集传到云端,云端算完再传下来,这种延时性用户是很难接受的。因此终端运算和推理能够很好地解决用户对于延时性的反感问题。

三是可靠性和经济性。因为设备在端和云,端到端连接的过程会产生大量数据的交换,如果所有的AI能力都用云来做,势必对带宽的负载,包括中间通讯的可靠性等带来很大的挑战因此在终端的运作上会在可靠性和经济成本上占更大的优势。

在介绍了端上实现AI的三个优势之后,刘学徽还重点强调了高效的硬件、算法、软件工具以及端上AI计算和推理的重要性。其中,运算AI的硬件能力非常关键,需要轻薄,且对低功耗是强需求,算法也不能太庞大,而是要适合终端设备商运行,此外,软件工具也至关重要。

在所有AI终端设备方面,就目前而言,不得不提的就是手机终端了。可以说,手机由于其便携性,智能性,几乎是被公认的IOT的核心,它甚至可以变成各种各样IOT的设备。

另外,在手机上的AI的方向大概有几类。其中基于计算机视觉的应用是当下的主流,它包括摄像头各种各样的应用场景,比如背景虚化、照片处理、场景识别与分类等。例如,vivoX21手机的个人助理应用场景落地就是一个体现,它能够让手机里面有一个算法感知到用户是在车上、运动行走中、开车还是在地铁里等各种场景,从而根据场景来给用户提供对应的便利服务。

此外,AI的运用方向还涵盖了设备的厂家功耗,包括资源的管理、用户交互体验方面的语音交互、手势识别以及目前出现的采用人工智能方法来识别病毒或者是来防范设备端到端的安全等。

作为在全球芯片制造领域都具有领先优势的高通来说,刘学徽还介绍了高通在AI方面的产品布局。主要包含三大类:硬件、软件及框架。

其中,硬件包含INT8网络、FP32及FP16网络、FP32及INT88位网络,软件是硬件和应用之间的桥梁,高通软件包括一套SNPE的开发工具,以及支持Android和Hexagon NN的库。框架有CaffeCaffe2、TensorFlowTensorFlowLite、ONNX。以上就构成了AI E的产品系列。

此外,刘学会还强调,做最终的产品和最终的应用,需要和业内各方面领先的企业进行合作,例如,在国内高通与商汤、Face ++、腾讯、百度有合作,国际上和Google在TensorFlow方面有深度合作。值得一提的是,骁龙芯片,AI产品还是TensorFlow第一个终端上的商用芯片。

总体来说,终端AI是非常庞大的生态系统,没有一家公司可以把所有事情做掉,类似高通这种实力型的企业,其AI生态系统在支持多种框架和多种操作系统的同时,也仍然在积极开展与领先的AI算法公司、云服务商以及互联网厂家的深度合作,追求提供多样的应用场景的技术来与终端设备厂家进行配合。

可想而知的是,只有如此通力合作,整个AI手机产业链才能最终为消费者提供更加丰富的应用场景,为终端产品增加更多的价值。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 高通
    +关注

    关注

    78

    文章

    7637

    浏览量

    193739
  • 万物互联
    +关注

    关注

    1

    文章

    232

    浏览量

    14601
  • ai技术
    +关注

    关注

    1

    文章

    1308

    浏览量

    25268

原文标题:高通:物联设备5年将达200亿台,终端AI大势所趋

文章出处:【微信号:chinacmos,微信公众号:摄像头观察】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    华为破解HBM依赖AI推理黑科技UCM上线,9月正式开源

    8月12日,在2025金融AI推理应用落地与发展论坛上,华为公司副总裁、数据存储产品线总裁周越峰宣布,华为此次和银联联合创新,推出AI推理创新技术UCM(
    的头像 发表于 08-13 08:58 ?5800次阅读
    华为破解HBM<b class='flag-5'>依赖</b>!<b class='flag-5'>AI</b><b class='flag-5'>推理</b>黑科技UCM上线,9月正式开源

    AI推理的存储,看好SRAM?

    电子发烧友网报道(文/黄晶晶)近几年,生成式AI引领行业变革,AI训练率先崛起,带动高带宽内存HBM一飞冲天。但我们知道AI推理的广泛应用才能推动A
    的头像 发表于 03-03 08:51 ?1834次阅读
    <b class='flag-5'>AI</b><b class='flag-5'>推理</b>的存储,看好SRAM?

    华为亮相2025金融AI推理应用落地与发展论坛

    近日,2025金融AI推理应用落地与发展论坛在上海举行。中国银联执行副总裁涂晓军、华为数字金融军团CEO曹冲出席本次论坛并发表致辞。论坛上,华为公司副总裁、数据存储产品线总裁周跃峰博士发布AI
    的头像 发表于 08-15 09:45 ?140次阅读

    今日看点丨华为发布AI推理创新技术UCM;比亚迪汽车出口暴增130%

    ? ? 降低HBM依赖,华为发布AI推理创新技术UCM ? 日前,华为正式发布AI推理创新技术UCM(
    发表于 08-13 09:45 ?1568次阅读

    【新品炸场】中科华创双机齐发,重新定义智能推理终端想象边界!

    引擎”重磅登场,用国产化硬核实力,为AI推理按下加速键!嵌入式高能效智能推理终端机M101:把超级大脑装进方寸之间如果说AI是未来世界的神经
    的头像 发表于 08-11 16:47 ?544次阅读
    【新品炸场】中科华创双机齐发,重新定义智能<b class='flag-5'>推理</b><b class='flag-5'>终端</b>想象边界!

    一次消谐器核心功能依赖于其非线性电阻材料

    一次消谐器在电力系统中发挥着至关重要的作用,今天我们来看看它的主要构成材料: 1. 核心材料:非线性电阻的“灵魂” 一次消谐器的核心功能依赖于其非线性电阻材料,主要分为两类:碳化硅(SiC)基:早期
    的头像 发表于 08-02 06:20 ?314次阅读
    一次消谐器核心功能<b class='flag-5'>依赖于</b>其非线性电阻材料

    信而泰×DeepSeek:AI推理引擎驱动网络智能诊断迈向 “自愈”时代

    故障)”的自动化推理链条。3.预测性防御:智能基线洞察,防患于未然l 基于先进的时序分解算法,为每个关键业务终端/链路动态构建多维性能基线(吞吐量、时延、丢包率)。l 主动预警潜在风险,如带宽瓶颈
    发表于 07-16 15:29

    RAKsmart服务器如何赋能AI开发与部署

    AI开发与部署的复杂性不仅体现在算法设计层面,更依赖于底层基础设施的支撑能力。RAKsmart服务器凭借其高性能硬件架构、灵活的资源调度能力以及面向AI场景的深度优化,正在成为企业突破
    的头像 发表于 04-30 09:22 ?362次阅读

    高通推动终端AI释放全新价值

    通过蒸馏技术将百亿参数模型压缩至端侧设备可运行的创新,让AI推理成本大幅下降,为终端AI的爆发按下加速键。低成本、高灵活性的特性引发了行业对这一技术突破的深度思考,也验证了
    的头像 发表于 03-21 09:28 ?621次阅读
    高通推动<b class='flag-5'>终端</b>侧<b class='flag-5'>AI</b>释放全新价值

    使用OpenVINO?进行推理时的内存泄漏怎么解决?

    使用 OpenVINO? 进行推理时,内存会随着时间的推移而增加,并导致程序崩溃。
    发表于 03-06 08:29

    稳定性建设之依赖设计

    作者:京东物流 冯志文 背景 随着分布式微服务的发展,一个普通的应用可能会依赖于许多其他服务,这给系统的限流降级、优化改造等操作带来了困难。在没有明确强弱依赖关系的情况下,我们很难有效地进行这些操作
    的头像 发表于 02-21 09:49 ?454次阅读
    稳定性建设之<b class='flag-5'>依赖</b>设计

    AI变革正在推动终端推理创新

    尖端AI推理模型DeepSeek R1一经问世,便在整个科技行业引起波澜。因其性能能够媲美甚至超越先进的同类模型,颠覆了关于AI发展的传统认知。
    的头像 发表于 02-20 10:54 ?631次阅读

    使用NVIDIA推理平台提高AI推理性能

    NVIDIA推理平台提高了 AI 推理性能,为零售、电信等行业节省了数百万美元。
    的头像 发表于 02-08 09:59 ?843次阅读
    使用NVIDIA<b class='flag-5'>推理</b>平台提高<b class='flag-5'>AI</b><b class='flag-5'>推理</b>性能

    苏茨克维预测:推理AI将带来不可预测性

    OpenAI的联合创始人、前首席科学家伊尔亚·苏茨克维在近日于温哥华举办的神经信息处理系统大会(NeurIPS)上发表了重要观点。他指出,当前依赖于大量算力的“预训练”人工智能时代终将迎来终结,而
    的头像 发表于 12-17 09:55 ?628次阅读

    AI for Science:人工智能驱动科学创新》第二章AI for Science的技术支撑学习心得

    。 4. 物理与AI的融合 在阅读过程中,我对于物理与AI的融合有了更加深入的认识。AI for Science不仅依赖于数据,还需要结合物理定律和原理来确保模型的准确性和可解释性。这
    发表于 10-14 09:16