发布时间:2023-09-04 | 阅读:
Gartner《2023中国数据库管理系统市场指南》认为,中国DBMS整体上云的势头依然强劲,更为多样化的数据管理环境也在形成,包括DBMS基于中国公有云的部署、国有供应商/私有云的部署及非中国公有云的部署,以及多云/云间/混合云的部署;DBMS云间技术能力的重要性更为凸显。
强化数据库/数据仓库的云能力,已经成为数据库厂商未来发展的关键命题。柏睿数据以柏睿云能平台和柏睿实时云数仓交出了优异的答卷。本文将介绍柏睿数据如何构建生于云、长于云的数据仓库。
柏睿实时云数仓基于柏睿云能平台,可实现国内外公有云、私有云、混合云及服务器自动化部署和统一管理,具备极速性能、跨云跨库、安全可靠、弹性伸缩、智能管理等优势特性,且总体拥有成本更低,全面满足企业在大数据云时代的全场景数据仓库/数据库需求。
柏睿云能平台(Rapids Data Cloud)是依托柏睿数据自研产品体系、适配云端运行环境特点打造的多云自动化部署与统一管理平台。底层采用统一的技术架构,由云管理平台、全内存数据库和数据库管理Portal三部分组成。
柏睿云管理平台是整个平台的系统管理层,负责与云厂商API对接,实现数据库集群建立、删除等功能所需的云资源调度。
底层基于柏睿数据全内存分布式数据库,由数据库网关(Master)和计算节点(LEAF)组成。通过Master为用户程序提供兼容MySQL协议的数据库服务。
每个集群都有独立的数据库管理Portal,实现管理与业务分离。
柏睿实时云数仓(RapidsDB Cloud Data Warehouse,简称Rapidsdb DWS)是基于柏睿数据自研新一代全内存分布式数据库打造,可为用户提供云原生的数据仓库服务,主要采用大规模并行处理(MPP)、云原生、库内人工智能、数据联邦等技术实现。 集群性能随着节点规模的增加而增加,优化云计算运行环境,提升性能。 采用责任共担模型,三方共同保障系统安全;基于云厂商的高可用运行环境,每个数据库集群都独立部署于云主机中,运行资源完全隔离;优化数据库存储能力,支持云存储备份与恢复数据。 采用微服务架构,可根据业务实现后端各类资源的快速、动态、自动的扩缩容,促进集群性能提升和成本优化;实现类容器的Image功能,将每个云主机节点通过云存储技术做成镜像,以快速统一部署数据库集群。 全内存分布式数据存储,支持行存、列存和混合存储,且无需ETL操作;支持自动分区平衡,采用自适应下推、动态查询优化等技术,提高查询效率和性能。 通过可插拔的自有连接器MOXE和其他内置的各类连接器,接入20+数据源的结构化、半结构化和非结构化数据;基于SQL标准的统一接口,实现多源异构数据的实时聚合、查询和分析。