首頁 > 技術(shù) > 正文

環(huán)球播報(bào):甲骨文宣布推出MySQL HeatWave Lakehouse

2022-10-20 15:51:01來源:中關(guān)村在線  

北京時(shí)間10月20日消息,甲骨文公司宣布推出 MySQL HeatWave Lakehouse,這款產(chǎn)品能夠幫助客戶處理和查詢對象存儲(chǔ)中數(shù)百 TB 量級的數(shù)據(jù),支持各種文件格式,包括 CSV、Parquet 以及 Aurora 和 Redshift 備份格式。MySQL HeatWave Lakehouse 是 MySQL HeatWave 產(chǎn)品組合的新產(chǎn)品,能夠?qū)⑹聞?wù)處理、分析、機(jī)器學(xué)習(xí)和基于機(jī)器學(xué)習(xí)的自動(dòng)化結(jié)合在單一 MySQL 數(shù)據(jù)庫中。

MySQL HeatWave Lakehouse 可擴(kuò)展至 512 個(gè)節(jié)點(diǎn),能夠處理對象存儲(chǔ)中多種文件格式的數(shù)百 TB 數(shù)據(jù),包括 Aurora 和 Redshift 備份格式

MySQL HeatWave Lakehouse 采用大規(guī)模并行橫向擴(kuò)展 MySQL HeatWave 架構(gòu),根據(jù)行業(yè)標(biāo)準(zhǔn)基準(zhǔn)測試的結(jié)果,在運(yùn)行查詢和加載數(shù)據(jù)性能方面表現(xiàn)出色。此外,客戶可以通過單個(gè)查詢在 MySQL 數(shù)據(jù)庫中查詢事務(wù)處理數(shù)據(jù),并使用標(biāo)準(zhǔn) MySQL 語法將其與對象存儲(chǔ)中的數(shù)據(jù)組合。甲骨文還宣布推出新的 MySQL Autopilot 功能,可提高性能并讓 MySQL HeatWave Lakehouse 方便易用。MySQL HeatWave 現(xiàn)推出了 Lakehouse 的 Beta 版供客戶試用,正式版將于 2023 上半年發(fā)布。


【資料圖】

客戶從AWS、Google 和本地環(huán)境遷移到 MySQLHeatWave 之后,已經(jīng)在各種場景中使用該產(chǎn)品,包括營銷分析,特別是廣告營銷活動(dòng)效果的實(shí)時(shí)分析與客戶數(shù)據(jù)分析,從而構(gòu)建有效的營銷活動(dòng)。還有其他一些客戶也從 AWS 遷移到這款產(chǎn)品上,包括汽車、電信、零售、高科技和醫(yī)療保健行業(yè)的佼佼者。

甲骨文公司首席企業(yè)架構(gòu)師 Edward Screven 表示:“MySQL HeatWave 是多年研究和開發(fā)的成果,我們正在將其轉(zhuǎn)化為突破性創(chuàng)新,以應(yīng)對MySQL 客戶面臨的更大挑戰(zhàn)。事實(shí)上,MySQL HeatWave Lakehouse是我們今年就 MySQL HeatWave 的第三個(gè)重大發(fā)布。存儲(chǔ)在數(shù)據(jù)庫之外的數(shù)據(jù)急劇增長,借助 MySQL HeatWave Lakehouse,客戶可以利用 HeatWave 在各方面的優(yōu)勢,處理駐留在對象存儲(chǔ)中的數(shù)據(jù)。MySQL HeatWave 目前在多個(gè)云平臺(tái)上提供一項(xiàng)集成服務(wù),用于事務(wù)處理、跨數(shù)據(jù)倉庫和數(shù)據(jù)湖的分析以及無需數(shù)據(jù)倉庫技術(shù) (ETL) 的機(jī)器學(xué)習(xí)。這樣的組合有助于在性能、自動(dòng)化和成本方面實(shí)現(xiàn)大幅度改進(jìn),因此進(jìn)一步加大了 MySQL HeatWave 相較于其他云端數(shù)據(jù)庫服務(wù)的優(yōu)勢?!?/p>

AMD 首席技術(shù)官兼執(zhí)行副總裁 Mark Papermaster 表示:“我們很高興能夠繼續(xù)與甲骨文開展合作,并將合作范圍延伸到支持其新的 MySQL HeatWave Lakehouse 產(chǎn)品,該產(chǎn)品經(jīng)過優(yōu)化,可充分利用我們處理器的各類創(chuàng)新,在由 AMD EPYC 驅(qū)動(dòng)的 Oracle 云實(shí)例上運(yùn)行。AMD 和甲骨文工程團(tuán)隊(duì)攜手努力,打造出令人印象深刻的 MySQL 解決方案,它能在單個(gè) MySQL 數(shù)據(jù)庫中為事務(wù)處理、分析、機(jī)器學(xué)習(xí)和基于機(jī)器學(xué)習(xí)的自動(dòng)化提供出色的可擴(kuò)展性和性能?!?/p>

甲骨文公司還發(fā)布了新的 Lakehouse 基準(zhǔn)測試,并為 MySQL HeatWave Lakehouse 和 MySQL Autopilot 引入了多項(xiàng)創(chuàng)新功能。

Futurum Research 高級分析師兼研究總監(jiān) Ron Westfall 表示:“MySQL HeatWave Lakehouse 以驚人的速度在以往未曾涉足的 400 TB 云端數(shù)據(jù)庫基準(zhǔn)領(lǐng)域開辟出了自己的道路,讓這一領(lǐng)域的競爭比以往更加激烈。從處理能力和計(jì)算能力來看,MySQL HeatWave Lakehouse 堪稱 HeatWave 的一次重大飛躍:從 32 TB 和 64 個(gè)節(jié)點(diǎn)提升到 400 TB 和 512 個(gè)節(jié)點(diǎn)。”

MySQL HeatWave Lakehouse 的創(chuàng)新功能

· 更大數(shù)據(jù)量,標(biāo)準(zhǔn) MySQL 語法:客戶可以通過 MySQL HeatWave Lakehouse 查詢多達(dá) 400 TB 的數(shù)據(jù),HeatWave 集群可擴(kuò)展到 512 個(gè)節(jié)點(diǎn)。客戶可使用標(biāo)準(zhǔn) MySQL 語法查詢數(shù)據(jù)。

· 穩(wěn)定的性能和壓縮表現(xiàn):MySQL HeatWave 為存儲(chǔ)在 MySQL 數(shù)據(jù)庫或?qū)ο蟠鎯?chǔ)中的數(shù)據(jù)提供相同的查詢性能,10 TB 和 30 TB TPC-H 基準(zhǔn)測試結(jié)果印證了這一點(diǎn)。此外,在這兩種情況下,它所實(shí)現(xiàn)的壓縮量和每個(gè)節(jié)點(diǎn)可以處理的數(shù)據(jù)量都是相同的。

· 支持多種文件格式:使用 MySQL HeatWave Lakehouse,客戶可以加載和處理以各種文件格式存儲(chǔ)的數(shù)據(jù),例如 CSV 和 Parquet,以及 AWS 的 Aurora 和 Redshift 備份格式。因此,即便客戶的數(shù)據(jù)并未存儲(chǔ)在 MySQL 數(shù)據(jù)庫內(nèi),他們也能從 MySQL HeatWave 的優(yōu)勢中獲益。無論數(shù)據(jù)使用何種文件格式存儲(chǔ),客戶始終可獲得穩(wěn)定的查詢性能。

· 支持查詢 MySQL 中的數(shù)據(jù)并將其與對象存儲(chǔ)中的數(shù)據(jù)組合:使用 MySQL HeatWave Lakehouse, 客戶可以查詢存儲(chǔ)在 MySQL 數(shù)據(jù)庫中聯(lián)機(jī)事務(wù)處理過程 (OLTP) 數(shù)據(jù),并將其與存儲(chǔ)在對象存儲(chǔ)中的數(shù)據(jù)組合。對 OLTP 數(shù)據(jù)所做的任何更改都會(huì)實(shí)時(shí)更新,并體現(xiàn)在查詢結(jié)果中。

面向 MySQL HeatWave Lakehouse 的新 MySQLAutopilot 功能

MySQL Autopilot 為 MySQL HeatWave 提供基于機(jī)器學(xué)習(xí)的自動(dòng)化功能。多項(xiàng)現(xiàn)有 MySQL Autopilot 功能(如自動(dòng)預(yù)配和自動(dòng)查詢計(jì)劃改進(jìn))針對MySQL HeatWave Lakehouse 進(jìn)行了增強(qiáng),從而進(jìn)一步降低數(shù)據(jù)庫管理開銷并提高性能。此外,我們?nèi)缃襁€為 MySQL HeatWave Lakehouse 提供了諸多MySQL Autopilot 新功能。

· 自動(dòng)模式推斷:Autopilot 可自動(dòng)推斷文件數(shù)據(jù)到數(shù)據(jù)庫中數(shù)據(jù)類型的映射。因此,客戶無需手動(dòng)為要由 MySQL HeatWaveLakehouse 查詢的每一個(gè)新文件指定映射,從而節(jié)省時(shí)間和精力。

· 自適應(yīng)數(shù)據(jù)采樣:Autopilot 可智能地對于對象存儲(chǔ)中的文件進(jìn)行抽樣,從而在盡可能減少數(shù)據(jù)訪問量的情況下收集準(zhǔn)確的統(tǒng)計(jì)信息。MySQL HeatWave 將這些統(tǒng)計(jì)信息用于生成和改進(jìn)查詢計(jì)劃、確定適宜模式映射以及其他用途。

· 自動(dòng)加載:Autopilot 會(huì)分析數(shù)據(jù)以預(yù)測將其加載到 MySQL HeatWave 中所需的時(shí)間、確定數(shù)據(jù)類型映射,并自動(dòng)生成加載腳本。用戶不必手動(dòng)指定文件到數(shù)據(jù)庫模式和表的映射。

· 自適應(yīng)數(shù)據(jù)流:MySQL HeatWave Lakehouse 可動(dòng)態(tài)適應(yīng)底層對象存儲(chǔ)的性能。因此,MySQL HeatWave 可充分發(fā)掘底層云基礎(chǔ)設(shè)施的性能,進(jìn)而提高整體性能、性價(jià)比和可用性。

MySQL HeatWave 的其他增強(qiáng)功能

甲骨文公司宣布推出MySQL HeatWave多項(xiàng)其他增強(qiáng)功能,覆蓋機(jī)器學(xué)習(xí)到 VS 代碼插件。MySQL HeatWave 的數(shù)據(jù)庫內(nèi)機(jī)器學(xué)習(xí)功能也已得到進(jìn)一步增強(qiáng),添加了對于預(yù)測模型的支持。其中添加了新的機(jī)器學(xué)習(xí)解釋技術(shù),并且專門針對 MySQL HeatWave 進(jìn)行了優(yōu)化。數(shù)據(jù)科學(xué)家現(xiàn)在可以影響自動(dòng)化 HeatWave ML 訓(xùn)練管道的各個(gè)階段,包括算法選擇、特征選擇、評分指標(biāo)和解釋技術(shù)。HeatWave 機(jī)器學(xué)習(xí)還經(jīng)過增強(qiáng),讓客戶可以將機(jī)器學(xué)習(xí)模型導(dǎo)入 HeatWave。

新的多引擎 Hypergraph 查詢優(yōu)化程序可進(jìn)一步提高復(fù)雜查詢的性能,并且不再需要指定聯(lián)接順序。新增區(qū)域映射,可使用 MySQL HeatWave 為更廣泛的查詢加速。MySQL 的 VS 代碼插件經(jīng)過增強(qiáng),可為 MySQL HeatWave 功能提供支持。

適用于分布式云技術(shù)

MySQL HeatWave 支持多種云平臺(tái),包括Oracle 云基礎(chǔ)設(shè)施 (Oracle Cloud Infrastructure,OCI) 、AWS 和 Microsoft Azure。對于不愿將數(shù)據(jù)庫工作負(fù)載遷移到公有云的企業(yè),MySQL HeatWave 可作為 Oracle 專用區(qū)域的一部分進(jìn)行本地部署??蛻暨€可以將數(shù)據(jù)從本地 MySQL OLTP 應(yīng)用復(fù)制到 MySQL HeatWave,以實(shí)現(xiàn)近乎實(shí)時(shí)的分析。MySQL HeatWave 始終基于新版本的 MySQL 數(shù)據(jù)庫。

超聚變2288H V5 2U12盤位機(jī)架式服務(wù)器主機(jī)工作站 銀牌1*4210R 10核2.4G/32G內(nèi)存/2*4T SATA/單電/SR150

[經(jīng)銷商]京東商城

[產(chǎn)品售價(jià)]¥19999元

進(jìn)入購買

浪潮(INSPUR)NF5280M5機(jī)架式服務(wù)器(2*4210 10核 2.2GHz/64G/4T*3 SATA/雙千兆*1/RAID卡/雙電550W/3年服務(wù))

[經(jīng)銷商]京東商城

[產(chǎn)品售價(jià)]¥32300元

進(jìn)入購買

標(biāo)簽:

相關(guān)閱讀

精彩推薦

相關(guān)詞

推薦閱讀