0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

谷歌AI预测服务已正式启动

我快闭嘴 ? 来源:TechWeb ? 作者:TechWeb ? 2020-09-29 14:50 ? 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

谷歌宣布其人工智能平台的一个关键组成部分——人工智能预测服务已正式全面启动。该服务支持托管在主流的机器学习框架,包括TensorFlow、XGBoost和Scikit-Learn中。

AI Prediction服务充当机器学习管道的最后阶段。它在云中托管经过训练的机器学习模型,以推断新数据的目标值。部署在AI预测服务中的经过训练的模型作为REST端点公开,可以从任何支持HTTP的标准客户端调用这些端点。

AI平台预测服务基于Google Kubernetes Engine(GKE)后端,旨在通过新的硬件选项(如Google计算引擎机器类型和NVIDIA GPU)提高可靠性和灵活性。

虽然该服务基于googlekubernetes引擎,但AI预测服务隐藏了集群的供应、管理和扩展的复杂性。数据科学家和工程师可以专注于业务问题,而不是管理基础设施。

在一般可用性下,AI预测服务支持高内存和高cpu机器类型上的XGBoost和Scikit学习模型。在后台,服务根据流量和请求自动扩展和收缩基础设施。

该服务与Google云控制台和Stackdriver紧密集成,以跟踪和可视化资源指标。与模型的GPU、CPU、RAM和网络利用率相关的性能指标可以深入了解性能特征。

客户可以选择通过AI Prediction服务在特定区域部署机器学习模型。Google在三个区域(us-central1、euro-west4和asia-east1)中引入了新的端点,并通过区域隔离来提高可靠性。部署在区域端点上的模型位于指定区域内,为客户提供数据局部性和所有权。

通过增加对VPC控件的支持,客户可以定义安全范围并部署仅可访问该范围内或另一个桥接范围内的资源和服务的在线预测模型。由于预测服务端点是VPC专用的,因此数据保留在专用网络内,而不必遍历公共互联网。

通过AI Prediction服务部署和公开的模型支持在线和批处理推理。在线预测经过优化,可最大程度地减少服务预测的延迟,而批处理预测,则可以优化处理作业中的大量实例。与立即发送结果的在线预测不同,批处理预测将推理输出写入存储在Google Cloud Storage存储桶中的文件中。

谷歌一直在大力投资人工智能平台即服务(PaaS)产品。它整合和扩充了包括cloudml引擎在内的各种服务。通过与GKE和Kubeflow的紧密集成,该服务已经发展成为一个支持数据准备、转换、培训、模型管理、部署和推理的端到端平台。
责任编辑:tzh

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • gpu
    gpu
    +关注

    关注

    28

    文章

    4980

    浏览量

    132098
  • AI
    AI
    +关注

    关注

    88

    文章

    35758

    浏览量

    282451
  • 人工智能
    +关注

    关注

    1810

    文章

    49221

    浏览量

    251533
  • 机器学习
    +关注

    关注

    66

    文章

    8513

    浏览量

    135102
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    RAKsmart服务器如何重塑AI高并发算力格局

    AI大模型参数量突破万亿级、实时推理需求激增的当下,传统服务器架构的并发处理能力逼近物理极限。RAKsmart通过“硬件重构+软件定义”的双引擎创新,推出新一代AI
    的头像 发表于 04-03 10:37 ?378次阅读

    请问是否可以在模型服务器中使用REST请求OpenVINO?预测

    是否可以在模型服务器中使用 REST 请求OpenVINO?预测
    发表于 03-05 08:06

    FPGA+AI王炸组合如何重塑未来世界:看看DeepSeek东方神秘力量如何预测......

    、关于FPGA的未来——“无限可能的未来世界” AI时代的FPGA未来前景如何?FPGA+AI如何重塑未来芯片生态? 看看大聪明DeepSeek如何预测FPGA的前景......1. FPGA技术演进
    发表于 03-03 11:21

    HarmonyOS NEXT 原生应用/元服务-ArkTS代码调试attach启动调试

    ,然后再启动调试,或者直接启动设备上安装的应用/元服务进行调试;而Debug是直接运行应用/元服务后立即
    发表于 02-28 14:59

    村田预测AI服务器MLCC需求翻倍

    近日,全球积层陶瓷电容(MLCC)行业的领军企业——日本村田制作所社长中岛规巨,在最新一季的财报会议上透露了关于MLCC市场需求的积极预测。他指出,随着人工智能(AI)技术的蓬勃发展,被动元件产业正迎来新的增长机遇。预计在未来一年,AI
    的头像 发表于 02-08 15:51 ?717次阅读

    谷歌Gemini AI目标年底用户达5亿

    近日,谷歌CEO桑达尔·皮查伊在内部会议上向员工透露,他对公司自主研发的Gemini AI技术充满信心,认为其能力已经超越了当前的竞争对手。这一表态不仅彰显了谷歌AI领域的雄心壮志,
    的头像 发表于 01-18 11:30 ?983次阅读

    谷歌加速AI部门整合:AI Studio团队并入DeepMind

    近日,谷歌正紧锣密鼓地推进其人工智能(AI)部门的整合工作。据谷歌AI Studio主管Logan Kilpatrick在领英页面上的透露,谷歌
    的头像 发表于 01-13 14:40 ?821次阅读

    鸿海董事长预测:2025年AI服务器出货量将超2024年

    近日,据媒体援引鸿海集团董事长刘扬伟的言论报道称,鸿海集团对未来人工智能(AI)服务器市场充满信心,并预测2025年的AI服务器出货量将超过
    的头像 发表于 12-30 14:13 ?752次阅读

    AI眼镜形态席卷可穿戴市场!谷歌眼镜几次“流产”,将靠AI翻盘

    ? 电子发烧友网报道(文/莫婷婷)在ChatGPT进化史上,绕不开的一家厂商是谷歌。2024年12月,谷歌发布 Gemini 2.0,该产品被称为登顶AI巅峰、秒杀ChatGPT O1。始终走在
    的头像 发表于 12-26 00:12 ?3720次阅读

    AI按需服务是什么意思

    AI按需服务是指用户根据自己的需求,通过云计算平台购买并获取相应的AI服务。下面,AI部落小编为大家详细介绍
    的头像 发表于 12-01 23:04 ?794次阅读

    NVIDIA与谷歌量子AI部门达成合作

    NVIDIA CUDA-Q 平台使谷歌量子 AI 研究人员能够为其量子计算机创建大规模的数字模型,以解决设计中面临的各种挑战
    的头像 发表于 11-20 09:39 ?795次阅读

    谷歌为全球AI教育设立1.2亿美元基金

    在联合国未来峰会上,谷歌CEO桑达尔·皮查伊发表了一场激动人心的演讲,他将人工智能(AI)誉为“迄今为止最具变革性的技术”,并承诺将这一力量用于推动全球教育进步。为此,谷歌宣布设立一项规模庞大的“全球
    的头像 发表于 09-25 14:32 ?672次阅读

    谷歌发布革命性AI游戏引擎GameNGen

    谷歌近期震撼推出全球首款完全由人工智能驱动的游戏引擎——GameNGen,这一创新技术标志着游戏开发领域的新纪元。GameNGen凭借其强大的计算能力,能够在单个TPU上实现每秒20帧的实时游戏生成,每一帧画面均源自精密的扩散模型预测,展现了
    的头像 发表于 08-29 18:07 ?1182次阅读

    谷歌任命原Character.AI首席执行官为Gemini联合技术负责人

    近日,谷歌宣布了一项重要人事任命,原Character.AI的联合创始人兼首席执行官诺姆·沙泽尔(Noam Shazeer)重返谷歌,并将担任其人工智能新项目“Gemini”的联合技
    的头像 发表于 08-26 11:06 ?868次阅读

    谷歌展示AI新功能,古尔曼表示苹果落后至少2到3年

    8月19日,据报道,谷歌在本月初的新品发布会上推出全新AI技术的Pixel 9系列智能手机,引来媒体热议。彭博社记者马克·古尔曼观展后,发表了“不经意的感叹声”:看完谷歌新科技,人们不禁会怀疑苹果在
    的头像 发表于 08-19 15:39 ?879次阅读