怎么样用好数据?华为云“智能数据湖”处理之道

以人工智能为代表的创新ICT技术的衰亡与使用,正减速各财产数字化转型与晋级,进入智能时代:交通+智能,最知道你的路;医疗+智能,最知道你的痛;制造+智能,最知道你所需……

尽管数据价值潜力宏大,但企业消费活动发生的数据只有不到2%被保留,失掉剖析应用的缺乏10%,数据的价值还远远没有释放。在7月2日举行的“成都·抉择非凡 华为云都市峰会”上,华为云EI 智能数据办事域总经理丁响明剖析了实现数据价值面临的挑战,并给出了华为云“智能数据湖”的处理之道。

1

丁响明暗示:“人类曾经进入了数字经济时代,数据成为数字经济的重要原料,云计算和 AI 比如是炼油厂,对数据开采、传输、并将其‘智能熔炼’,停止数据‘提纯’,猎取商业&社会价值,进而对源头发生了更多的数据需求循环往复,如此的循环将是智能世界的根本运转规律。但怎么样用好数据是需求探讨的话题。”

  数据价值实现面临三大挑战

  来自华为全球财产瞻望(GIV)陈述显示,到2025年,全球企业使用云化率将达 85%,AI 应用率达86%,数据应用率将剧增至80%,全球年数据增量将疾速增长到2025年的180ZB,全球数字经济GDP将达23万亿美金。

  数据成为重生产材料,智能成为重生产力,要充沛挖掘数据经济价值,企业需求构建抢先的数据根底设备,从而打通数据供给全流程,使能数据与业务全衔接,提升业务矫捷性。

  对数据的加工处置通常包罗“采-存-算-管-用”全生命周期办理才能,让数据存得下、流得动、算得快、用得好,帮忙客户将数据资源转变成数据资产。尽管各行各业都曾经公认数据中隐藏的宏大价值,但在实现进程中,面临多重挑战:

  挑战1:数据预备难花24小时收集数据、花3小时转换数据做ETL入库、花1小时预备训练数据、最后来只花了半小时训练+推理,失掉需求的决策数据…

  挑战2:数据交融剖析难,传统的烟囱式企业ICT建立难以打通数据: 技术栈多、接口不统一,开发周期长;数据类型多,构造化/半构造化/非构造化;数据剖析链路长,多系统集成难度大。

  挑战3:数据消费难,某企业IT系统,数据源130+万张表,要从海量表中寻觅目的数据,耗时30天摆布,犹如易如反掌;接着将目的数据加工成业务可使用数据,烟囱多、步调多,扑朔迷离,又耗时7天。招致找数难、取数难。

  华为云智能数据湖,以交融架构实现数据交融剖析

 

2

针对多样性的业务、多样性的系统、多样性的数据带来数据价值变现的挑战,华为云打造了“智能数据湖”处理方案——面向数据收集、存储、计算、剖析的数据生命周期,提供了包罗数据集成、数据开发、数据建模、数据治理、数据开放的一站式可视化数据办理才能,帮忙企业疾速构建本身的数据中台,减速数据价值发觉。

  华为云“智能数据湖”处理方案通过数据统一存储、数据交融剖析(DLI)、数据运营使能(DAYU)等关键才能,消弭客户使用数据的懊恼、提升实时数据办事才能,拥抱行业数字化。

  应对一:数据交融架构,大幅缩短数据预备时刻:

  1、以往数据等候1天,如今数据实时入湖,直截了当基于原始数据实时剖析;

  2、以往数据计算要4小时,如今存算解耦,弹性伸缩,3倍资源,半小时完成计算。

  3、以往T+1剖析,如今采取增量式剖析,一次一小批继续剖析。

  应对二:数据交融剖析,打通数据,增加数据搬场:

  1、CarbonData应对多品种型数据格式统一存储,实现大数据&AI使用同一份数据。

  2、数据湖洞察通过联邦计算支持多种数据类型跨源剖析。

  应对三:以数据名目为中心,一站式数据运营,更易数据消费

  1、以数据名目为中心,疾速找到最适宜的数据源。

  2、一站式数据运营,源头在哪,目的地在哪,数据血缘了如指掌 。

  3、拖拽式开发,E2E数据链路编排监控,行业模型算子使治理更高效。

3

此外,通过在软硬件结合上做出更多努力,华为云智能数据湖具有超高性价比:

1、大数据和数据仓库办事片面支持鲲鹏芯片的自研根底设备,同等条件下功能提升20%,本钱落低30%;

2、华为云大数据+OBS垂直优化,同等配置状况下SparkSQL功能是客户自建集群的2倍以上。

截至目前,华为云智能数据湖处理方案及办事普遍使用于金融、医学、物流、互联网、汽车、政府、大企业等行业。面向将来,华为云将与协作同伴和客户携手创新,用智能数据湖方案帮忙企业构建抢先的数据根底平台,让企业用户更便利快捷的用好数据,掘金数字经济。

 

文章来源:中国IDC圈 (文章来源于互联网,目的在于传递更多信息,并不代表本网赞同其观点和对其真实性负责

文章均转载自其它媒体:金蝶财务会计 » 怎么样用好数据?华为云“智能数据湖”处理之道

赞 (0)