TDC 2.4 发布:集数据 PaaS、分析 PaaS、应用 PaaS 于一体的数据云
近几年,随着数字化转型的深入,企业的应用、数据和基础设施的结合越来越紧密,原本以资源为中心的传统云已经不能满足现阶段企业数字化转型的需求,而以数据为中心的数据云正在成为企业数字化基础设施建设的新方法。数据、应用和智能是数字化的三大核心生产资料,数据云在一个 PaaS 平台上提供包括数据仓库/数据湖、数据治理、数据智能与分析、数据交易与共享等在内的完整的数据解决方案以及应用生命周期管理能力,实现数据驱动,快速迭代,从而赋能企业持续创新。
数据云是星环 科技 这几年大力布局的方向,早在 2015 年,星环科技就发布了基于云原生技术的云操作系统 Transwarp Cloud Operating System (以下简称TCOS),奠定了星环科技在数据云领域的行业地位。2018 年,星环科技基于 TCOS 发布了数据云 Transwarp Data Cloud 的 1.0 版本 (以下简称TDC) ,成为国内最早推出数据云产品和解决方案的企业,经过五个大版本的迭代 , 为众多客户数字化转型提供安全、便捷的、完整的数字化建设解决方案。
星环 TDC 主要面向企业私有化场景,以数据为中心,打通了数据 PaaS、分析 PaaS、应用 PaaS 三类 PaaS 能力,底层统一基于容器云平台构建,可帮助企业解决协作数据分析、数据管理混乱、规范应用开发流程、存量应用治理、资源冲突与效率管理的困难与问题。除此之外,星环 TDC 基于云原生技术实现了分布式计算与存储的解耦合,实现计算单元和存储单元的独立弹性伸缩,更好支撑有状态的工作负载,也更能满足企业与日俱增的数据处理与管理需求。今天星环 TDC 正式发布了 2.4 版本, 新版本也迎来了令人期待的五大核心特性:
第一大特性:统一支持多种业务类型的工作负载
TDC 2.4 对包括分布式的文件系统,搜索引擎、数据仓库、图数据库,关系数据库,数据科学家计算、知识图谱在内的有状态工作负载都可以提供非常出色的支持,同时对无状态的微服务应用和有状态的容器化应用也提供支持。星环 TDC 的租户隔离技术也能让这一特性得到更优秀的发挥。租户在计算、网络、存储层实现了隔离,同时对于租户间的数据则可以通过中心数据湖实现数据共享。对于不同的有状态的工作负载和无状态的工作负载,TDC 借助自研的调度器实现统一调度。
第二大特性:云原生调度实现数据与计算局部性
在传统的 MPP 数据库架构中,计算和存储都在同一个进程中,无法做到根据不同场景做独立扩缩容,导致弹性能力不足。而另一种存算分离架构,因为计算集群和存储集群分布在不同的物理节点,虽然可以做到独立的弹性扩缩容,但性能受制于网络的传输效率,往往需要专门的硬件设备来保证性能。为了兼顾弹性和性能,星环 TDC 把分布式计算层和存储层统一在一个集群中,根据计算对存储节点的计算局部性需求,将它们调度到同一个物理节点上,完成高效计算。当存储节点计算资源不足时,也可以使用远程的计算单元。这种架构兼顾了性能和弹性需求的平衡,同时可极大地提升资源利用率。
第三大特性:分布式计算执行单元场景化扩缩容
以潮汐计算为例,星环 TDC 可以根据业务的特点,从时间的维度来做扩缩容方案,白天交易型计算需求增多的时段开始自动扩容 OLTP 服务,晚上分析型计算需求增多的时候开始扩容 OLAP 服务,从而有效利用集群资源,完成不同时间段的需求。另外,星环 TDC 还可以基于负载做扩缩容,当相应的计算负载增加时,对计算单元做扩容,当计算负载减少时缩容,从而轻松应对业务波峰波谷场景。
第四大特性:支持GPU 多租户共享调度
企业的 GPU资源, 在多租户共享调度实现之前,只能整块使用,造成了资源的极大浪费。TDC 2.4 本次升级实现了支持 GPU 多租户共享调度,让 GPU 资源利用更合理。星环 TDC 可以支持单机多 GPU,多机多 GPU 的统一管理、高效的分配以及合理的规划和使用。对于应用而言,星环 TDC 可以支持 GPU 的独占,保证在模型训练场景中对GPU的高使用要求,同时也支持单块 GPU 的共享,以提升GPU资源的利用率。
第五大特性:支持异构 CPU 和操作系统混合部署
随着企业国产意识的逐步升级,国产 CPU 和操作系统市场占有率正在逐步上升,底层异构基础设施的统一管理将成为行业的刚需。星环数据云 TDC 2.4 基于统一的云原生操作系统 TCOS,支持 X86、ARM 等多种主流 CPU 架构以及 Linux / Windows / 国产操作系统,可以更好实现企业不同场景的需求,满足企业软硬件国产化的需求。
目前,星环科技新一代智能大数据云平台Transwarp Data Cloud(TDC)已经在众多行业有成熟的全方位解决方案落地,满足了各种数据处理场景的需求,实现了企业数据与应用的生态化建设。未来星环将在数据云领域持续深耕,助力企业不断释放提升大数据能力,引领企业数字化转型升级浪潮。