12月3日消息，NAS2024大會(huì)公布了今年會(huì)議論文的收錄情況。騰訊云存儲(chǔ)就加速對(duì)象存儲(chǔ)訪問提出技術(shù)方案的論文《GooseFS:分布式緩存服務(wù)以提高云對(duì)象存儲(chǔ)性能》入選。

NAS（網(wǎng)絡(luò)、架構(gòu)和存儲(chǔ)）大會(huì) 由 IEEE TCDP 和 IEEE 計(jì)算機(jī)學(xué)會(huì)共同贊助，是基礎(chǔ)技術(shù)領(lǐng)域最頂級(jí)的行業(yè)大會(huì)之一。會(huì)議為網(wǎng)絡(luò)、架構(gòu)、存儲(chǔ)等基礎(chǔ)技術(shù)領(lǐng)域提供大量高質(zhì)量的研究論文和研究成果，具有重要的學(xué)術(shù)價(jià)值和行業(yè)引導(dǎo)意義。今年的NAS大會(huì)（NAS2024）于11 月 29 日至 12 月 1 日在廣州舉行。

對(duì)象存儲(chǔ)由于具備高水平擴(kuò)展性和低成本等特征，目前已經(jīng)成了用戶首選的海量數(shù)據(jù)存儲(chǔ)解決方案。但隨著大數(shù)據(jù)分析、AIGC等涉及海量數(shù)據(jù)計(jì)算的場(chǎng)景快速發(fā)展，對(duì)象存儲(chǔ)由于其數(shù)據(jù)組織和實(shí)現(xiàn)方式限制，以及其存儲(chǔ)介質(zhì)時(shí)延和吞吐性能的制約，在應(yīng)對(duì)這類工作負(fù)載時(shí)，面臨著嚴(yán)重的性能挑戰(zhàn)。

在論文中，騰訊云提出基于對(duì)象存儲(chǔ)搭建分布式高性能文件系統(tǒng)GooseFS，引入三個(gè)關(guān)鍵設(shè)計(jì)，來實(shí)現(xiàn)在存算分離架構(gòu)下對(duì)對(duì)象存儲(chǔ)的加速訪問，從而解決上述問題。

具體而言，在計(jì)算端，GooseFS將離計(jì)算資源更近的本地盤作為緩存介質(zhì)存放部分對(duì)象存儲(chǔ)數(shù)據(jù)，實(shí)現(xiàn)計(jì)算對(duì)數(shù)據(jù)的就近訪問，降低延遲，同時(shí)通過多級(jí)粒度緩存管理和短路讀機(jī)制降低了隨機(jī)小IO下的數(shù)據(jù)訪問時(shí)延。

在存儲(chǔ)端，GooseFS構(gòu)建了高性能SSD緩存池，為計(jì)算節(jié)點(diǎn)提供存儲(chǔ)端的緩存支持，以提高面對(duì)順序IO時(shí)的吞吐率，解決了對(duì)象存儲(chǔ)介質(zhì)性能不足的問題。

同時(shí)，GooseFS自研了一套高性能元數(shù)據(jù)引擎，通過元數(shù)據(jù)分級(jí)管理、強(qiáng)一致性緩存和平行擴(kuò)展等技術(shù)手段來提升元數(shù)據(jù)讀寫性能，并將元數(shù)據(jù)持久化到底層的企業(yè)級(jí)數(shù)據(jù)庫(kù)中，以此大幅提升了元數(shù)據(jù)處理的效率。

實(shí)驗(yàn)結(jié)果表明，相比原生對(duì)象存儲(chǔ)，GooseFS的吞吐量提升了8~10倍，同時(shí)降低了90%的存儲(chǔ)帶寬消耗，滿足了多種工作負(fù)載對(duì)高性能要求。

目前，GooseFS 已經(jīng)服務(wù)了蔚來、博世、百川、高途、燃數(shù)、酷狗等一大批客戶。