5月15日,星环科技容器云平台Transwarp Data Cloud(以下简称“TDC”)发布2.2版本,新特性“联邦云”亮相,打造多云多数据中心的统一数据视图,提供一套“1+3”全栈数据云平台,满足企业数字化转型中的各类诉求,给企业体用平台化、生态化的数字化转型解决方案。
企业数字化转型已成为企业IT发展过程中的共识。建设一套符合企业发展现状并满足企业长期发展需求的企业数字化基础设施,需要很多专业知识和成功经验。需解决企业不同发展阶段采用的不同技术架构引入的IT基础设施、数据平台和应用系统之间的协同,要能支持企业数据统一化、资产化、业务化和生态化的长期演进。
随着企业业务的快速发展和规模的发展壮大,企业IT的现状大致可概括如下:不同阶段积采用不同供应商的产品及解决方案,建设了大量异构IT基础设施;不同时期开发和部署了众多的业务应用系统;企业发展的过程累了大量的数据,分布在不同地域、甚至不同国家的数据中心。分散存放的数据、大量的应用、异构IT基础资源的统一管理是企业进一步发展亟需解决的问题。如何对跨组织海量数据价值进行挖掘,跨组织间共享数据,形成应用与数据之间的协同,对打造良好、完善的企业IT生态系统具有现实意义。
TDC—— 企业级全栈数据云平台
星环科技全栈数据云平台TDC由一个基于容器的数据中心云操作系统和三大PaaS平台服务(Database PaaS、Analytical PaaS和Application PaaS)组成,帮助企业构建从底层IT基础设施,到数据服务化和应用化的企业级IT基础设施能力平台,主要包括:
TDC数据中心云操作系统TCOS
星环科技容器云平台是一套数据中心级的云操作系统,支撑整个企业IT基础设施上的三大PaaS平台服务。纳管各类异构基础设施资源,包括物理机、IaaS平台、公有云等各类异构基础设施,形成统一的企业级IT基础设施底座。
TDC数据平台服务Database PaaS
星环科技的Database PaaS拥有完整的数据处理工具链,支持企业级一站式数据开发。
数据平台服务Database PaaS拥有五大核心能力:
自助服务,大数据能力开放
弹性伸缩,灵活响应业务负载变化
多租户隔离,提高系统稳定性
完善的数据接入,集中数据资产管理与共享
组件级别计量计费,支持租赁模式
TDC分析PaaS:BI + AI 平台服务
TDC分析PaaS平台集成BI 及AI能力,与DBPaaS无缝结合,打通从数据存储到数据分析和数据建模的通路。当用户进行数据分析和建模时,可按需、一键启动、分钟级部署完成并提供服务。星环科技分析PaaS将数据处理、模型加工、线上监控以及数据分析集成为一体。
TDC应用PaaS
TDC应用PaaS平台以应用为中心,提供应用全生命周期管理能力。TDC应用PaaS包括应用市场和应用开发平台两大部分。
在应用开发平台上,用户可开发基于容器的微服务,以图形化的方式进行应用的编排,通过提供SpringCloud微服务框架,实现微服务应用的快速开发和部署。
通过应用市场,TDC为企业用户提供企业常见的、基本的应用服务。同时企业可通过应用开发平台编排和上架自主开发的应用,打造属于企业自己的应用市场。企业内不同用户通过应用市场一键部署所需应用,并提供应用的统一管理、监控、弹性伸缩、熔断等运维能力。
TDC通过一套统一的数据中心云操作系统TCOS,提供数据PaaS、分析PaaS和应用PaaS,三大PaaS平台无缝对接、相互融合,从而为企业提供了数据中台、AI中台和应用中台服务,实现企业的数据共享、模型共享和应用共享。能一站式满足企业数字化云平台、企业级和行业级数据中台、工业互联网和城市级大数据平台等场景需求。
TDC联邦云的内涵
TDC联邦云解决方案通过将跨多个数据中心甚至公有云的数据、应用和基础设施资源进行统一管理,协同管理企业内部已有的资源和数据,从而构建一套完整、统一、互联互通的数字化基础设施。TDC联邦云以打通企业数据与应用,构建数字化应用为主要目标,满足各种数据管理规范要求,兼顾业务灾备等需求,致力于通过一套TDC联邦数据云平台支撑企业数字化转型和数字化战略的长期演进。
TDC联邦云主要技术栈:
应用统管:通过统一的企业应用市场来统一管理、发布、部署、监控、备份不同部署模式下的各类企业应用,保证业务的连续性
联邦学习:通过联邦学习,在不同的数据中心或云内做模型的训练与迭代,无需跨数据中心进行大量数据迁移
联邦计算:支持企业内不同实例、不同区域的数据库之间的统一计算
数据联邦:通过统一的数据资源目录,自动化管理企业内部数据,支持数据的融合互通
资源联邦:支持企业私有云和公有云资源的统一协同调度与监控,提供完善的业务弹性能力
TDC联邦云:资源联邦
基于Docker容器技术打造的数据中心操作系统TCOS,能够管理各种异构硬件或操作系统,支撑各类应用开发和部署。同时,通过TDC多云互联技术实现对远端云资源的有效协同,可根据业务负载动态的跨数据中心或公有云弹性伸缩资源,并形成统一的资源视图。
TDC联邦云:数据联邦
TDC联邦云提供统一的数据开发、管理与使用视图,包括统一的数据访问接口、统一的数据指标体系,从而支持关联融合计算。
TDC联邦云基于数据资产与指标能力平台来统一管理各个数据中心或不同云内的数据资产,提供统一的数据目录,进行统一的数据治理,构建一体化的数据指标与标签管理系统,从而拉通数据孤岛,实现数据共享与互通,实现数据服务管理的中心化。TDC联邦云基于星环数据平台,可提供自助式的数据开发和分析服务,支持构建实时计算平台、数据仓库、数据集市、数据科学平台等PaaS服务,从而实现企业数据通、管、用的全面覆盖,并通过TDC数据云平台提供的多租户能力,将数据能力按需开放给各个租户或组织,实现数据能力的自助服务化。
TDC联邦云:联邦计算
TDC联邦云通过星环跨域数据互联和安全通信技术,打通全局视图与各数据库之间的交互协同。计算联邦管理层通过提供全局优化器、全局数据字典,实现SQL任务的最优化分发,进而通过统一的SQL开发IDE对接企业内部各类数据库,实现数据不移动情况下的联邦计算。TDC联邦计算减少了数据在不同数据中心的流动,一方面,提高了业务分析效率,另一方面,更保证了数据的本地化和数据安全性。
TDC联邦云统一的SQL开发IDE还提供了SQL的审核管理能力,避免非优化或不合规SQL的提交影响数据库的性能或资源消耗。在海量数据模型下,能够做到SQL建模的智能提示,推荐数据库对象或维度字段等,提高开发效率和开发的便利性。
TDC联邦云:联邦学习
TDC联邦云通过星环的云互联技术与自研的同态加密算法等安全加密技术实现安全的元数据通信链路,并提高通信效率,在满足数据安全合规的基础上,拉通企业自有、甚至第三方的数据,基于星环Sophon建模平台提供的FederatedAveraging优化算法,能够对模型选择横向或纵向联邦,对各个数据中心或云上的数据进行建模调参。TDC联邦学习方案保障本地数据不出域,实现不同数据属主间的数据安全共享与合作,能极大释放数据的价值。
TDC联邦云支持同类机构针对某一场景、某一机构各下属机构、不同类型的机构针对某一场景以及多设备间的联邦学习,进行联合建模。
TDC联邦云:应用统管
TDC联邦云支持在企业内部资源池上构建统一的应用开发平台,开发后的应用可发布至公有云或边缘设备,基于多云和多数据中心构建的高可用业务系统,借助公有云实现业务弹性以应对业务突发。另外,可基于TDC应用PaaS平台实现应用的统一管理,包括统一管理微服务、web中间件应用和大数据应用,并能进行统一的应用配置、统一的监控和安全管控。
TDC联邦云相对于混合云和多云,在业务流量突发场景下的弹性能力、业务云灾备、业务异地多活、跨多数据中心的企业私有数据云、跨地域的企业数据中台、跨组织的数据共享与建模、支持不用IaaS资源的应用开发管理平台上对比如下,在跨地域和跨数据中心的企业数据中台、数据共享与建模、资源和应用统管上具有较大优势。