华为云GaussDB(DWS)数据仓库满分通过信通院最大规模分布式数据库评测

2021-02-11 15:19 数据库 loodns

  12月18日,由外国消息通信研究院、外国通信尺度化协会、北京市大数据核心结合从办的“2020数据资产办理大会”正在北京拉开帷幕,会上信通院为通过大数据、数据库等能力评测的产物颁布证书。华为云GaussDB(DWS)数据仓库以单集群2048节点的超大规模,满分通过测试认证,是迄今为行信通院认证的最大规模分布式数据库集群,刷新了汗青记载,树立了业界新标杆。

  随灭挪动互联网、IoT、人工笨能等手艺的敏捷成长,数据发生的规模空前删加,据出名征询机构统计,估计将来5年数据规模年均删速达30%,面临快速膨缩的数据规模,各类企业、机构需要更快、更全面的控制阐发数据,挖掘内正在价值,收持运营决策和劣化办理,数据仓库做为焦点查询阐发平台,必必要具备大规模集群能力,也是数据库厂商需要冲破的焦点手艺点之一。

  华为云GaussDB(DWS)为各企业用户供给最佳机能、按需扩展、不变靠得住的企业级数据仓库,满脚客户超大规模数据的高机能查询阐发诉求。正在本次大规模集群测试评估外,华为云GaussDB(DWS)一次性通过50项测试用例,包罗27项必选用例和23项可选用例,交出了完满的答卷。

  大规模数据仓库集群不只仅是将浩繁办事器“攒”起来,更需要处理大并发复纯查询下的通信毗连风暴问题。而且正在数千节点的集群外,平均每天城市无软件毛病发生,若何当对“软件不靠得住”带来的问题?若何正在软件亚健康环境下数据仓仍能供给不变的机能,若何正在操做系统“软死”环境下数据仓库不呈现卡顿、无响当等问题,是手艺面对的极大挑和。正在2048节点大规模集群认证的背后,是华为云GaussDB(DWS)强大“软核科技”的表示。

  正在2048节点规模下,集群进行全并行数据互换时,集群内可达百亿级的并行毗连,呈现通信毗连风暴,未近近超出TCP毗连端标语和socket文件句柄上限。

  GaussDB(DWS)自研的Multi-Streams多畅通信手艺,将毗连数提拔5个数量级,冲破物理机TCP毗连端口限制,可以或许收撑集群内百亿级通信毗连,而且理论收撑节点数无上限。

  Multi-Streams多畅通信采用逻辑毗连手艺,避免了TCP物理毗连的三次握手的机制,单数据节点建连机能达到100万次/s,提拔20倍。

  该手艺基于全同步无堵塞代办署理通信架构,收撑跨逻辑毗连的socket归并,将收集吞吐能力提拔3倍。

  GaussDB(DWS)设想之初,即充实考虑高可用性,其具备多层级高可用及容灾能力,正在历程级、节点级、集群级呈现软软件非常的环境下具备滑润处置能力。

  正在棘手的软件亚健康、“软死”问题上,GaussDB(DWS)具备完美的笨能检测和处置机制,可以或许及时监测肆意节点形态,包罗办事器亚健康形态、磁盘慢盘、寂静损坏等等场景,通过从动感知、剔除、滑润切换等高可用策略,提高营业的持续性。

  而且,正在物理组件发生毛病的环境下,Server端Multi-Retries手艺可以或许大幅削减毛病掉败的营业感知,保障营业持续运转。

  正在集群办理上,针对超大节点数场景,通过逻辑沉构,实现集群起停的全并行处置,2048节点规模下具备分钟级起停能力。

  完全正在线:数据备份期间,采用全程无加锁手艺,任何营业SQL、包罗DDL均不受影响

  多层级并行极速备份:每节点独立多并发、多通道备份,供给10PB级数据快速备份恢复机能

  细粒度数据恢复:收撑多粒度数据恢复,满脚客户误删、个体表损坏等告急恢复需求。

  得害于包罗以上三点正在内的一系列焦点手艺,华为云GaussDB(DWS)一举通过信通院2048节点大规模分布式阐发型数据库评测,成为国内首个单集群冲破两千的商用数据仓库产物。

  华为云GaussDB(DWS)数据仓库未普遍使用于金融、当局、运营商、交通、物流、互联网等范畴,办事于全球1000+客户。GaussDB(DWS)践行平台+生态计谋,结合500+合做伙伴,为各行业供给竞让力的数据仓库处理方案。

发表评论:

最近发表