数据库GaussDB_华为高斯数据库率先进行512节点测试,称“非常简单”

最近,在中国信息通信研究所和数据中心联盟发起的分布式分析数据库测试中,华为高斯数据库(Huawei GaussDB)分析数据库首次通过了512节点集群规模能力评估。与此同时,中国一家世界级银行已经完全用华为高斯数据库(Huawei GaussDB)分布式分析数据库取代了国外顶级数据仓库产品。在正式亮相后不久,华为高斯数据库(huawei GaussDB)就相继展示了自己的硬实力。

数据库GaussDB

数据中心联盟证书

从过去的默默无闻到今天的强势崛起,华为高仕数据库的厚积薄发不仅显示了其绝对实力,也显示了大数据时代本土数据库品牌引领数据分析和价值挖掘的新趋势。“尽善尽美”

在此次ICOM测试中,华为的高斯数据库分析数据库完成了512节点集群规模下51个测试项目的能力测试要求,包括基本能力、运维能力、兼容性、安全性、高可用性和扩展能力六项指标。

“高斯数据库分析数据库很容易通过这个测试。事实上,高斯数据库的集群规模可以扩展到2048个节点,而业界很少有数据库产品具备这种能力。”这是华为GaussDB数据库工程师所说的。

华为高斯数据库成立于2011年。这是一个分布式企业级数据库,具有领先的架构,由华为数据库研发团队结合数据库理论和六年来的技术发展趋势构建而成。华为高斯数据库包括交易(OLTP)数据库、分析(OLAP)数据库和混合负载(HTAP)数据库。

华为高斯数据库(Huawei GaussDB)作为企业级大规模并行处理关系数据库,采用MPP(海量并行处理)+无共享架构。众所周知,基于MPP的数据仓库具有高性能、高可用性和高可扩展性、极高的横向扩展能力和高数据可用性保证机制等特点。基于标准化硬件,还可以大大降低硬件成本,在新的数据仓库和数据分析领域,已经成为金融、电信等大客户的最佳选择。

然而,基于MPP架构的数据仓库面临的最大挑战是集群规模。“该行业的大多数产品是由大约100个节点组成的集群,其中很少能达到512个或更多节点。”工程师透露,MPP数据仓库采用不共享、完全并行和完全等价的体系结构。随着集群规模的增大,资源占用和通信连接占用也将呈指数级增长,导致各种资源的占用和浪费,从而造成集群规模的瓶颈。集群大规模通信是一个大问题。

数据库GaussDB

华为高斯数据库

为了解决这个问题,华为GaussDB研发团队从操作系统入手。“原SCTP多流库在Linux下建成后,集群规模上升,其稳定性和性能仍然远远不够。为此,我们重写了一个多流SCTP通信库,并采用了包合并和异步接收技术,以提高大规模通信的通信性能和流水线效率。”华为数据库工程师表示。

在这位工程师看来,高斯数据库的优势在于华为开放所有堆栈技术的能力。从中央处理器和存储等硬件到操作系统和数据库等软件,华为可以形成一种集成能力,从而让高斯数据库(GaussDB)带给用户极致的扩展能力和极致的性能。“现在我们不能仅仅依靠一种产品来竞争,而是软硬一体化的综合实力的竞争力。通过加强每个核心环节和核心组件,我们可以为产品提供终极能力。”

事实上,除了性能之外,华为高斯数据库(Huawei GaussDB)在可靠性方面也做了很大努力:集群的协调节点和数据节点等所有逻辑组件都是用高可用性设计的,以确保没有单个节点出现故障。此外,高斯数据库(GaussDB)与ANSI SQL 2003兼容,提供甲骨文和Teradata语法迁移工具,并集成了Hadoop和Spark等数据技术。对于公共云用户,华为云提供基于高斯数据库的DWS服务,支持多租户、跨数据源访问、在线扩展、在线升级和按需灵活扩展资源。“关注客户”

我们正处于数据爆炸的时代。在中国市场,互联网和移动互联网的快速发展带来了数据的爆炸性增长。随着中国率先应用5G和物联网,中国各行业的数字化进程必将加快,带来更多的数据洪流。国际数据中心在“2025年数据时代”白皮书中预测,中国将成为未来数据增长和数据量最大的国家。

特别是对于行业而言,国内金融、电信运营商、政府等机构已经积累了丰富的海量数据,并且已经从单一的数据源转移到对数据分析和决策有更强需求的多元化数据源。“由于历史规划,许多国内企业已经明显地将业务拆分。数据共享和使用是巨大的挑战。”这位工程师认为,数据的开放、流动和共享是大数据分析的先决条件。然而,现实是目前大部分数据仓库集群的规模难以实现,导致许多大型企业规划各种小型数据仓库集群,数据共享和使用是当前面临的难题。

数据库GaussDB

因此,大数据时代的新数据仓库需要帮助用户解决业务碎片化带来的数据共享和使用问题,并通过强大的扩展能力和性能支持越来越大的数据规模和实时数据分析需求——GaussDB分布式分析数据库的价值也在此。

高斯数据库(GaussDB)作为一种建立了6年多的新型数据仓库,为各行业提供PB级领先的海量数据分析解决方案,在金融、电信、政府等行业有着深厚的积累。

例如,中国的一家世界级银行已经将过去在各种外国品牌的一体机上运行的所有业务迁移到华为的高斯数据库集群(GaussDB cluster),高斯数据库集群所承载的业务规模是以前的15倍。据华为的数据库工程师称,该行的集群主要用于数据集市,到今年年底将扩展到480个节点。此外,许多大银行也加入了高斯数据库的测试和使用队列。

除了金融、电信、政府和其他行业的用户之外,华为高仕数据库还在华为的消费云业务中部署了数千个节点来支持各种业务。正是多年的行业积累造就了华为GaussDB数据库的强大实力。“建立一个通用数据库并不容易。除了性能,易用性、可靠性和可恢复性是隐藏的功能。这不可能一夜之间完成。”据悉,华为高斯数据库(Huawei GaussDB)未来将进一步改善其异构计算环境,增强其实时分析和交互式场景分析能力。

长期以来,在数据仓库领域,尤其是在金融、电信等大用户的场景中,大部分都是国际品牌,很少有中国数据库品牌出现。华为高斯数据库(Huawei GaussDB)厚积累薄发展、强势崛起,意味着中国的数据库产品已经逐渐在技术和架构上处于领先地位,能够为大数据时代的用户数据分析和业务决策带来更安全可控的解决方案,更贴近业务需求。

大家都在看

相关专题