0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

探秘浪潮智能化存储管理平台InView的极致管理能力

lhl545545 ? 来源:浪潮存储 ? 作者:浪潮存储 ? 2020-06-10 10:13 ? 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

“新基建”正在成为业界关注的热点,5G、大数据中心人工智能、工业互联网等新型基础设施建设正在加速推进。“新基建”主要包含 5G 基建、特高压、城际高速铁路和城际轨道交通、新能源汽车充电桩、大数据中心、人工智能、工业互联网等七大领域的建设,涉及到通信、电力、交通、数字等多个社会民生重点行业。

在新基建中,尤其引人注目的是大数据中心。IT从业者都知道,大数据中心是承载海量数据的平台,新兴产业的未来发展将大量依赖于数字世界,从国家治理、政务服务到各个产业 ,建好数据中心将有助于促进行业转型和发展数字经济。

大数据中心的最重要的特征是数据量和规模的高速增长:到2025年全球新创建的数据将达到175ZB;企业对实时数据需求增加,到2023年实时数据占全球数据圈24.5%的份额;核心数据中心的数据存储容量占比将超过50%。

随着数据量和数据中心规模的扩大,以及各种新存储介质和技术的应用,存储系统变得越来越复杂。用户需要的存储专业知识越来越多,而用好存储对用户来说越来越难。

AI智能化技术可以解决存储系统使用的复杂性问题。AI系统会不断地从存储及其运行环境中采集存储的各种状态信息和性能数据,用机器学习算法分析,学习用户的存储使用情况,进而自动化的调整并优化存储系统,使存储服务能更好地适应用户的需求。

比如:智能化的把数据保存在合适的区域;自动的完成数据均衡;预测未来的需求;预防潜在的问题;智能调优等。有AI加持的智能化存储可以增强系统的可靠性,降低存储的复杂性和维护成本。因此,“新基建”需要智能化的“新存储”。

1

客户的未来,从智能化新存储开始

IDC在2018年6月完成了一项全球存储客户的智能化特性调查,客户对使用AI / ML算法推动存储系统的改进抱以积极的态度,如下图,

IDC调研:客户对AI智能化存储的需求同时,IDC还调研了已经使用了智能化存储的客户,询问他们从中得到了哪些好处。下图展示了客户目前最关心的五项智能服务。其中,排名第一的是改善系统的整体可用性;其次是加快问题解决速度及提高性能容量规划,预测性地识别任何即将发生的故障,监视与存储相关的其他IT基础架构也被客户重点关注。

IDC调研:用户最希望使用的智能化存储特性

2

智能化存储的关键技术

一个完整的智能化存储框架包括下图所示的5个过程:

存储的AIOps框架

1) 监控:系统首先通过日志、SNMP、RestAPI等技术手段抓取并保存存储系统中的运行状态、性能和故障报错数据,这为AI自优化系统创造了数据基础。

2) 学习:在长时间、海量的监控数据基础上,AI会不断分析用户的IO模型和系统状态信息,学习最佳的应用实践,并自动分析问题根因和发现异常行为。

3) 预测:对于新发现的问题,AI算法都可以自动学习并提取可重复的模式,并将新的算法模型应用到其他尚未发现该问题的设备上,从而准确预测风险和故障。

4) 推荐:除了智能化预测新问题外,AI还会学习出解决和优化问题的具体建议。如修改内外部配置参数、更换部件、系统软件升级等。

5) 实施:AI系统可以自动运行优化措施并解决问题。如果处于安全考虑,也可以停止自动优化系统,人工操作来解决现场问题。

学术界也非常关注智能化存储技术。国外的存储和系统领域的顶级会议FAST、ATC、SRE、KDD有很多相关文章,清华大学、中科院、华中科技大学等国内科研机构也在故障预测、根因分析、异常检测、自动调优等方面有优秀的科研成果。

清华大学在《计算机学会通讯》上系统地阐述了智能化存储的关键技术。文中把存储的智能化归纳为历史事件、当前事件、未来事件三类应用场景。

历史事件场景中瓶颈分析指的是制约存储或系统服务的硬件或软件瓶颈;热点分析指的是自动挖掘出大于正常阈值性能指标;KPI聚类是对类似的指标曲线进行聚类;KPI曲线关联挖掘是针对两条曲线的关联关系进行挖掘;全链路模块调用分析能分析出模块间的调用关系;异常事件关联挖掘是指对异常事件之间的关系进行关联分析;故障传播关系图融合了以上四种技术,推断出异常事件之间的故障传播关系。

当前事件场景主要是根据当前的日志和告警、快速检测和定位异常,并完成故障的根因分析,最终实现快速止损,控制故障的影响范围。

未来事件场景的技术原理都是通过AI技术自动挖掘故障发生前的日志、性能参数指标,找到故障前可重复的模式,从而在今后出现类似的日志模式时,提前预测故障、性能容量变化趋势以及系统可能的热点瓶颈。根据IDC的客户调查来看,针对未来事件的预测场景是存储用户关注的重点。

存储智能化的关键场景和技术

3

智能化存储的实践应用

在存储产业界中,Nimble Storage在2010年推出了智能化的存储软件Infosight,提供了预测性分析、端到端的故障定位、性能洞察等一系列的智能化功能。帮助用户分析复杂应用环境下从虚拟机到后端存储端到端的性能瓶颈,确定影响性能瓶颈的主要因素,并最终给出可行的优化或解决问题的建议。

全球存储厂商Netapp、IBM、DELL EMC也在2017年以后推出了自己的智能化产品ActiveIQ、StorageInsights和CloudIQ。

作为新数据时代下“新存储”的引领者,浪潮存储也推出了领先且独具特色的智能化存储管理平台InView,实现了磁盘故障预测、性能容量预测的智能化功能,帮助客户预判硬件故障,规避硬件故障带来的风险和损失,并给出具体的扩容建议,为客户提供更好的存储服务。
责任编辑:pj

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 人工智能
    +关注

    关注

    1810

    文章

    49221

    浏览量

    251538
  • 大数据
    +关注

    关注

    64

    文章

    8966

    浏览量

    140843
  • 工业互联网
    +关注

    关注

    28

    文章

    4367

    浏览量

    95240
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    鲲云科技助力油田行业智能化安全管理

    随着国家对安全生产要求的不断加强,油田行业的安全管理亟待实现智能化和高效。在油田智能化升级的浪潮中,众多 AI 转型方案涌现,鲲云以“算力
    的头像 发表于 07-25 15:04 ?387次阅读

    英泰斯特通过数据管理能力成熟度三级认证

    近日,中国电子信息行业联合会公布评估结果,英泰斯特成功通过数据管理能力成熟度(DCMM三级)等级认证。标志着英泰斯特的数据管理能力得到权威认可,数据成熟度达到了行业先进水平。
    的头像 发表于 05-29 18:06 ?625次阅读

    企业数字能碳管理方案如何提升企业节能降碳管理能力

    ) 《指南》是对工业企业和园区开展数字能碳管理中心建设的指导性文件,包括四部分内容。 一是建设目标。通过数字能碳管理中心的建设运行,实现对能耗和碳排放的精准
    的头像 发表于 04-02 09:52 ?347次阅读
    企业数字<b class='flag-5'>化</b>能碳<b class='flag-5'>管理</b>方案如何提升企业节能降碳<b class='flag-5'>管理能力</b>

    智能化集成管理系统的核心特点与发展趋势

    通过统一的技术平台,将原本分散独立的各专业子系统有机整合,实现数据共享、功能协同和集中管控,为建筑、园区乃至城市提供全方位的智能化管理服务。随着物联网、大数据、人工智能等新一代信息技术
    的头像 发表于 03-26 14:46 ?462次阅读

    三品PDM产品数据管理系统:驱动企业高效协同与数字转型的核心引擎

    智能制造与数字浪潮中,产品数据已成为企业的核心资产。然而,数据分散、协同低效、安全风险等问题严重制约企业创新速度与运营效率。三品PDM产品数据管理系统,凭借其
    的头像 发表于 02-26 16:01 ?371次阅读
    三品PDM产品数据<b class='flag-5'>管理</b>系统:驱动企业高效协同与数字<b class='flag-5'>化</b>转型的核心引擎

    智能化管理系统的特点

    智能化管理系统作为现代信息技术与管理需求的结合体,具备一系列显著的特点。这些特点使其能够高效、精准地应对复杂的管理任务,并为各行业带来革命性的变革。以下是
    的头像 发表于 02-26 14:06 ?530次阅读

    智能化管理系统在不同领域的应用

    在信息技术飞速发展的今天, 智能化管理系统 已成为各行各业提升效率、优化资源配置、增强竞争力的重要工具。智能化管理系统通过集成物联网、大数据、人工
    的头像 发表于 02-26 13:57 ?600次阅读

    光伏电站智能化管理系统:光伏场站智能化管理的引擎

    ?????? 光伏电站智能化管理系统:光伏场站智能化管理的引擎 ?????? 在全球能源结构加速转型的背景下,光伏发电作为清洁能源的核心力量,正迎来规模
    的头像 发表于 02-23 17:46 ?718次阅读
    光伏电站<b class='flag-5'>智能化</b><b class='flag-5'>管理</b>系统:光伏场站<b class='flag-5'>智能化</b><b class='flag-5'>管理</b>的引擎

    应急车辆智能管理平台物联网解决方案

    随着信息智能化技术的不断发展,应急车辆管理已成为现代城市应急响应系统的重要组成部分。为了提升应急车辆的管理效率和应急响应能力,应急车辆
    的头像 发表于 02-19 13:41 ?357次阅读

    智能化管理系统:驱动未来管理与效率革命

    随着人工智能、物联网、大数据等技术的快速发展,智能化管理系统正在成为各行各业转型升级的核心驱动力。无论是智慧园区、智慧城市,还是智能制造、智慧医疗,
    的头像 发表于 02-18 14:25 ?595次阅读

    消防物证管理系统 DW-S404实现消防物证智能化管理

    一、系统概述 智慧消防物证管理系统DW-S404系统旨在借助现代信息技术,达成消防物证管理的高效、安全智能化
    的头像 发表于 12-07 17:45 ?559次阅读
    消防物证<b class='flag-5'>管理</b>系统 DW-S404实现消防物证<b class='flag-5'>智能化</b><b class='flag-5'>管理</b>

    凌科获授基于ISO56005的《创新与知识产权管理能力》证书

    近日,凌科电气获授基于ISO56005的《创新与知识产权管理能力》一级证书。这表明凌科在建立健全创新与知识产权管理体系,构建创新与知识产权管理能力方面迈上了一个全新的高度。凌科电气获授《创新
    的头像 发表于 11-30 01:03 ?476次阅读
    凌科获授基于ISO56005的《创新与知识产权<b class='flag-5'>管理能力</b>》证书

    设备运维管理平台的组成及功能

    在快速发展的工业数字浪潮中,设备的高效运维与智能化管理是企业持续进步的强大引擎。数之能设备运维管理平台
    的头像 发表于 11-26 17:24 ?975次阅读

    物联网技术推动灌区智能化管理

    物联网技术,作为信息技术革命的重要组成部分,正深刻地改变着传统行业的运作模式,其中在农业灌溉领域的应用尤为显著,为灌区的智能化管理开辟了新径。这一技术通过将传感器、智能网关、大数据分析与云平台
    的头像 发表于 09-05 16:32 ?654次阅读
    物联网技术推动灌区<b class='flag-5'>智能化</b><b class='flag-5'>管理</b>

    智能化医院管理系统的全方位应用与前景展望

    智慧医院是指利用信息技术和智能化设备,将各个环节进行数字、网络智能化管理,实现医疗资源的高效利用和服务质量的不断提升。在智慧医院中,
    的头像 发表于 08-30 14:56 ?665次阅读