openGauss向量驅(qū)動(dòng)新智能,RAC多寫破局,內(nèi)核升級(jí)再啟航

近日,openGauss Developer Day 在北京香格里拉飯店順利舉辦,大會(huì)邀請(qǐng)到了產(chǎn)、學(xué)、研、用的眾多行業(yè)專家,以及行業(yè)開發(fā)者參與。大會(huì)通過(guò)主題發(fā)言、SIG Gathering 等方式,共同探討了數(shù)據(jù)庫(kù)技術(shù)的當(dāng)下發(fā)展及未來(lái)趨勢(shì),充分展現(xiàn)了 openGauss7.0.0 創(chuàng)新版的技術(shù)特性。主論壇上,openGauss 技術(shù)委員會(huì)委員、2012 實(shí)驗(yàn)室高斯部首席架構(gòu)師王磊,openGauss 技術(shù)委員會(huì)委員闕鳴健,openGauss 社區(qū) Maintainer 曹宇做了題為《向量驅(qū)動(dòng)新智能,RAC 多寫破局,內(nèi)核升級(jí)再啟航》的主題發(fā)言,全面展示了 openGauss7.0.0 創(chuàng)新版的技術(shù)特性、openGauss 在內(nèi)核、AI 和四高(高性能、高可用、高智能、高安全)能力上的最新技術(shù)成果,以及下一個(gè)版本的技術(shù)演進(jìn)方向。

openGauss向量驅(qū)動(dòng)新智能,RAC多寫破局,內(nèi)核升級(jí)再啟航

主論壇上,openGauss 技術(shù)委員會(huì)委員、2012 實(shí)驗(yàn)室高斯部首席架構(gòu)師王磊,詳細(xì)講解了混合交易的應(yīng)用訴求,介紹了 AI 技術(shù)發(fā)展正在加速驅(qū)動(dòng)數(shù)據(jù)庫(kù)演進(jìn)的新趨勢(shì),講解了 openGauss 7.0.0 創(chuàng)新版在高性能方面的技術(shù)優(yōu)勢(shì),介紹了 HTAP 架構(gòu)一體化升級(jí)的技術(shù)進(jìn)展,以及鯤鵬多核擴(kuò)展能力持續(xù)增強(qiáng)的新特性。

大會(huì)上,闕鳴健介紹了 openGauss DataVec 與業(yè)界主流開源向量數(shù)據(jù)庫(kù)的性能對(duì)比數(shù)據(jù),充分論證了 openGauss 向量檢索性能領(lǐng)先 30%。

2012實(shí)驗(yàn)室研發(fā)專家王天元進(jìn)行了 GaussMaster 智能運(yùn)維相關(guān)的技術(shù)演示,在第一個(gè)慢 SQL 場(chǎng)景中,GaussMaster 實(shí)現(xiàn)了從發(fā)現(xiàn)、診斷到優(yōu)化的全流程慢 SQL 調(diào)優(yōu)能力,顯著提升慢 SQL 性能。

openGauss向量驅(qū)動(dòng)新智能,RAC多寫破局,內(nèi)核升級(jí)再啟航

openGauss 社區(qū)研發(fā)專家王天元現(xiàn)場(chǎng)演示

在第二個(gè) CPU 飆高場(chǎng)景中,GaussMaster 可以在后端實(shí)時(shí)監(jiān)控業(yè)務(wù)數(shù)據(jù)庫(kù)狀態(tài),發(fā)現(xiàn)告警,提供一鍵式的故障診斷能力,輸出根因分析報(bào)告,幫助 DBA 快速定位解決問題。

DataVec 向量化能力增強(qiáng),助力 AI 智能應(yīng)用

openGauss DataVec 向量數(shù)據(jù)庫(kù)結(jié)合鯤鵬 RAG 一體機(jī)解決方案,通過(guò)量化加速、向標(biāo)融合等技術(shù),解決大模型“知識(shí)幻覺”問題,提升 LLM 大語(yǔ)言模型在回答問題的實(shí)時(shí)性和準(zhǔn)確性。

openGauss向量驅(qū)動(dòng)新智能,RAC多寫破局,內(nèi)核升級(jí)再啟航

● openGauss 向量檢索,檢索性能領(lǐng)先 30%

● RAG 獨(dú)立部署,量化加速、向標(biāo)融合減少對(duì)推理資源占用,高并發(fā)下減少 40%-80%推理時(shí)延影響,提升吐字效率

● 通過(guò)指令集對(duì)熱點(diǎn)距離計(jì)算函數(shù)進(jìn)行 SIMD 加速,充分利用算力,同時(shí)減少指令數(shù)量,降低訪存次數(shù),速度提升 20%

● 結(jié)合 SQL 語(yǔ)義、全文檢索、知識(shí)圖譜、向量檢索提供四庫(kù)合一能力,實(shí)現(xiàn)數(shù)據(jù)庫(kù)部署歸一、開發(fā)接口歸一、運(yùn)維歸一

● MCP 協(xié)議接入:實(shí)現(xiàn) LLM 標(biāo)準(zhǔn)化接口對(duì)接及數(shù)據(jù)庫(kù)安全交互,提供數(shù)據(jù)庫(kù)運(yùn)維、監(jiān)控、管理等服務(wù)

openGauss向量驅(qū)動(dòng)新智能,RAC多寫破局,內(nèi)核升級(jí)再啟航

openGauss 技術(shù)委員會(huì)委員闕鳴健

曹宇對(duì)新發(fā)布的 openGauss oGRAC 多寫架構(gòu)進(jìn)行了詳細(xì)解讀,他表示多寫技術(shù)是當(dāng)前數(shù)據(jù)庫(kù)行業(yè)的技術(shù)高峰,介紹了 openGauss 要走向多主的原因,未來(lái)的多讀多寫架構(gòu)將極大提高業(yè)務(wù)可靠性、性能以及資源利用率。

openGauss向量驅(qū)動(dòng)新智能,RAC多寫破局,內(nèi)核升級(jí)再啟航

openGauss 社區(qū) Maintainer 曹宇

oGRAC 多寫架構(gòu),全面提升性能和可靠性

以 oGEngine 為基礎(chǔ),融合全閃存存儲(chǔ)OceanStor Dorado作為數(shù)據(jù)底座,構(gòu)建了資源池化可插拔的多寫架構(gòu),實(shí)現(xiàn)基于 CBO 的物理優(yōu)化、邏輯優(yōu)化等,支持多讀多寫落地,具備 POC 能力,滿足架構(gòu)演進(jìn)訴求和客戶運(yùn)維管理需求,多寫 TPCC 性能領(lǐng)先 5%。

● 存算分離架構(gòu):基于企業(yè)級(jí)全閃存存儲(chǔ)高性能、高可靠能力,實(shí)現(xiàn)可靠性提升至99.9999%,數(shù)據(jù)空間可靈活擴(kuò)展

● oGEngine 增強(qiáng):堆表/索引支持 PCR,減少跨節(jié)點(diǎn)交互,索引空間節(jié)省 20%

● 段頁(yè)式優(yōu)化:段頁(yè)式管理頁(yè)面,擴(kuò)表 0 等待,性能提升超過(guò) 10%

● 事務(wù)機(jī)制優(yōu)化:csn 簡(jiǎn)化事務(wù)可見性判斷,csn 推進(jìn)去除單一節(jié)點(diǎn)瓶頸,全局事務(wù)表管理事務(wù)狀態(tài),性能提升超過(guò) 30%

● 可靠性增強(qiáng):全局日志管理,環(huán)形按需回放,RTO<8s

openGauss向量驅(qū)動(dòng)新智能,RAC多寫破局,內(nèi)核升級(jí)再啟航

內(nèi)核升級(jí),企業(yè)級(jí)特性增強(qiáng)

openGauss7.0.0-RC1 創(chuàng)新版全面升級(jí)內(nèi)核四高能力,傳統(tǒng)主備部署模式下支持行列轉(zhuǎn)換功能,備機(jī)支持列存查詢,整體性能對(duì)比原始行存方式平均提升 5 倍,支持智能慢 SQL 查詢?cè)\斷,快速定位慢 SQL 根因,運(yùn)維效率倍數(shù)提升。

●行存壓縮功能增強(qiáng):對(duì)行存表的數(shù)據(jù)和索引頁(yè)面,openGauss 提供基于通用壓縮算法的透明頁(yè)壓縮功能,降低磁盤空間占用的同時(shí)保持 OLTP 場(chǎng)景下的高性能;支持頁(yè)式存儲(chǔ)和段頁(yè)式存儲(chǔ)兩種模式

●SQL 功能增強(qiáng):支持 CROSS/OUTER APPLY JOIN 語(yǔ)法,用于返回左側(cè)表達(dá)式的每一行和右側(cè)表達(dá)式的匹配行。CUME_DIST、DENSE_RANK、PERCENT_RANK、RANK 函數(shù)支持任意類型的任意多個(gè)入?yún)?,在函?shù)內(nèi)的入?yún)?shù)據(jù)類型和 ORDER BY 的數(shù)據(jù)類型不一致時(shí)也支持執(zhí)行。支持 JSON_EXISTS、 JSON_TEXTCONTAINS 表達(dá)式。支持修改/刪除視圖引用的對(duì)象(如表、列、函數(shù)、視圖等)后,將視圖置為無(wú)效狀態(tài)

●存儲(chǔ)過(guò)程功能增強(qiáng):支持自定義 subtype 語(yǔ)法;支持 EXCEPTION FOR 自定義異常;支持在函數(shù)或者過(guò)程中創(chuàng)建過(guò)程

●其他增強(qiáng):支持多個(gè)會(huì)話并發(fā)插入 interval 分區(qū)時(shí),如果多個(gè)會(huì)話都涉及分區(qū)自動(dòng)擴(kuò)展動(dòng)作,不會(huì)發(fā)生卡死問題。新增用于詞法語(yǔ)法分析的 openGauss SQL 審計(jì)工具 libog_query,支持離線審計(jì)分析 SQL 語(yǔ)句在 openGauss 中的語(yǔ)法合法性。CM/OM/DATAKIT 工具中用到的 SSH SCP 等相關(guān)通信工具支持用戶自定義端口,避免部分環(huán)境無(wú)法使用默認(rèn) 22 端口的問題,OM 工具支持記錄升級(jí)歷史記錄

openGauss 作為國(guó)內(nèi)極具創(chuàng)新力的開源數(shù)據(jù)庫(kù)社區(qū),未來(lái)將在內(nèi)核能力、DataVec 向量化能力、Datapod 三層資源池化架構(gòu)、DataKit 數(shù)據(jù)全生命周期管理平臺(tái)、生態(tài)兼容性等方面持續(xù)進(jìn)行技術(shù)創(chuàng)新。希望攜手各位伙伴、開源與標(biāo)準(zhǔn)化組織、以及廣大開發(fā)者一起,共同推動(dòng)數(shù)據(jù)庫(kù)技術(shù)的高質(zhì)量發(fā)展。

本文轉(zhuǎn)載自:,不代表科技訊之立場(chǎng)。原文鏈接:http://news.cnmtpt.com/?Sid=12410380_3925W653798286

陳晨陳晨管理團(tuán)隊(duì)

相關(guān)推薦

發(fā)表回復(fù)

登錄后才能評(píng)論