数字时代,每天的数据量都在极速增长。据预测,2025年移动终端设备将达到400亿部,IoT设备将达到25万亿个。全球每天产生的数据量更将从2018年的33ZB快速增长到2025年的180ZB。但是,产生的数据中仅有不到2%被保存,而被保存的数据中仅有不到10%被应用,如何有效释放数据价值,使政企数据助力业务增长,已经成为了当前数据领域的重要课题。
5月15日,华为云举行了政企战略暨新品发布会,FusionInsight智能数据湖聚势升级,其基于华为云PaaS、IaaS资源,实现大数据资源弹性发放、集约建设、集中运维、使能数据协同,为政企客户提供存得下、流得动、用得好的智能数据湖,助力政企客户数字化转型。
痛点1:DT时代如何解决取数难、找数难、用数难首要问题?
DT时代,大型政企每天产生海量数据,在数据使用过程中却避不开以下几点:
取数难:跨源分析需要数据搬迁,效率不佳。找数难:数据分散,管理复杂,流动性差。用数难:组件多,语言多,投入大,门槛高。
针对以上问题,华为云EI智能数据湖FusionInsight提供华为创新的HetuEngine+CarbonData技术,实现多引擎、多数据源、多集群间的数据协同计算,在数据湖中实现统一入口使用,客户轻松用数;统一目录查询,全局数据可视;全局一份数据,减少数据搬迁冗余,分析效率提升10倍+。在政企客户数据服务中更好的释放数据价值,解决数据协同分析问题。
例如在某银行,其通过引入华为云EI智能数据湖FusionInsight 提供的MRS+DWS云服务,建立2000+节点,汇集融合总行+各分行30PB+数据量,实现金融数据湖,承载数据仓库、信息库的集约建设,支撑日常银行BI、AI、数据挖掘分析等业务;通过华为MRS和DWS产品提供的组件将主流的数据处理引擎集成在大数据服务云平台中;再将这些数据服务以租户渠道方式作为接口开放,例如“数据集市”;最后用户通过自助或者固定的应用服务渠道来获得大数据服务,如“分析师工作台”。最终让数据应用更简单,让业务更敏捷。
痛点2:业务急速增长,数据成倍增加,如何解决存数的性价比问题?
5G应用快速落地,促使数据增长更为迅猛。政企客户若使用Hadoop原生架构存储数据,其计算和存储资源是耦合关系,需同步一体化扩容,存在存储利用率或CPU利用率不高现象,使得存数成本居高不下。
华为云EI智能数据湖FusionInsight采用华为自研存算分离方案,替代Hadoop的本地HDFS,软硬解耦扩容,让数据每bit成本更优。具体优势如下:
计算和存储资源按需独立扩展,避免一体化扩展带来的资源浪费,资源利用率提高100%。通过华为独有的弹性EC替代传统HDFS的三副本,数据存储周期提高2倍。各系统统一存储资源池存储,避免重复建设,消除数据孤岛,降低数据共享难度,减少数据冗余。
痛点3:大数据上云已是业界趋势,如何解决资源成本问题
近几年来,大数据、云计算、AI、5G、物联网等技术飞速发展,在企业数据中心基础设施上已屡见不鲜。业界主流云厂家利用大数据提高客户粘性,而大数据厂家也在积极使用云技术打造云化大数据、数据湖。但在数据量激增的当下,资源利用率低、大数据交付周期长、本地运维排障慢、版本升级不及时等问题依然未能有效解决,造成运维成本的居高不下。而云能提供源源不断的新动能,为大数据高效运转提供基础设施。
针对以上问题和趋势,华为云EI智能数据湖FusionInsight提供企业数据集约云化建设,提供全面云化的数据服务,支持大数据所需资源的弹性伸缩,集约共建,降低运维成本,帮助企业节约宝贵的资源和人力成本,同时带来以下好处:
1.资源共享,弹性发放。资源池化,弹性伸缩,资源申请周期从30天->1小时。
2.集约建设,性价比更优。传统孤岛式建设系统,数据冗余,成本居高不下;集约建设,全局可共享。
3.提升运维效率。传统部署更新不及时,被动运维,问题驱动;现在可以主动运维,5分钟内及时响应排障。
例如在某企业云化大数据系统中,数据分析的任务量随着人的活动而变化,分析任务在闲时的资源利用率为90%,晚高峰19点触达资源使用极限,此时仅需弹性发放成本较优的ECS,为数据分析计算提供CPU、内存等资源,无需全天部署上线,按需伸缩,有效节约资源,轻松应对业务高峰。
综上所述, 华为云EI智能数据湖FusionInsight聚势升级,立足解决政企客户用数痛点,融合分析、存算分离、全面云化等新改变助力政企客户释放数据价值。
十多年来FusionInsight 致力于让全球60+国家地区、3000+政企客户构建企业级智能数据湖,结合平台+生态战略,与800+商业合作伙伴 ,广泛应用于金融、运营商、政府、能源、医疗、制造、交通等多个行业,在政企数字化转型中,释放数据价值,助力政企客户业务高速增长!