欧美日韩啪啪,最新精品在线,国产ts一区二区,色亚洲一区二区,草草影院国产,久久国产99,欧美日韩四区

數(shù)據(jù)管理方法、裝置、設(shè)備及介質(zhì)與流程

文檔序號:42327279發(fā)布日期:2025-07-01 19:47閱讀:13來源:國知局

本申請涉及數(shù)據(jù)壓縮,尤其涉及數(shù)據(jù)管理方法、裝置、設(shè)備及介質(zhì)。


背景技術(shù):

1、目前全閃存儲成本較高,且存在擦寫次數(shù)有限的問題,通過壓縮技術(shù),可以減少數(shù)據(jù)占用空間,節(jié)省存儲成本,提高存儲效率,且通過壓縮后使得落盤數(shù)據(jù)更少,能夠有效減少io(input/output,輸入/輸出)操作,降低寫放大,提升整體吞吐量,大幅度減少了相同體量的數(shù)據(jù)在落盤時的擦寫次數(shù),從而減少閃存磨損,延長ssd(solid?state?drive,固態(tài)硬盤)的使用壽命。

2、相關(guān)技術(shù)中,通過外插qat(quick?assist?technology,快速輔助技術(shù))壓縮卡實現(xiàn)壓縮功能,這種借助于壓縮卡的壓縮,通常通過在存儲系統(tǒng)的主機io路徑上增加一個特定模塊,用于與壓縮卡進行交互,例如,存儲系統(tǒng)在接收到主機下發(fā)的寫io后,經(jīng)過一系列處理到達(dá)與壓縮卡交互的模塊,由該模塊提交給壓縮卡,等待io被壓縮卡處理完,再返回到存儲系統(tǒng)的主機io流程,進行后續(xù)處理,直至數(shù)據(jù)落盤,然而,這種方式對壓縮卡的依賴性極強,屬于實時壓縮,一旦壓縮卡發(fā)生故障,則無法進行數(shù)據(jù)壓縮。

3、因此,如何在數(shù)據(jù)壓縮過程中降低存儲設(shè)備對硬件壓縮卡的依賴是當(dāng)前亟需解決的問題。


技術(shù)實現(xiàn)思路

1、本申請?zhí)峁┝艘环N數(shù)據(jù)管理方法、裝置、設(shè)備及介質(zhì),以至少解決相關(guān)技術(shù)中在數(shù)據(jù)壓縮過程中降低存儲設(shè)備對硬件壓縮卡的依賴的問題。

2、本申請?zhí)峁┝艘环N數(shù)據(jù)管理方法,所述方法包括:

3、響應(yīng)于主機發(fā)送的數(shù)據(jù)寫入請求,判斷所述數(shù)據(jù)寫入請求的待寫入數(shù)據(jù)是否符合在線壓縮條件;

4、若所述待寫入數(shù)據(jù)符合在線壓縮條件,則對所述待寫入數(shù)據(jù)進行在線壓縮處理,獲取第一壓縮數(shù)據(jù),并將所述第一壓縮數(shù)據(jù)寫入磁盤;

5、若所述待寫入數(shù)據(jù)不符合在線壓縮條件,則將所述待寫入數(shù)據(jù)寫入磁盤,以及當(dāng)觸發(fā)后臺數(shù)據(jù)壓縮時,對所述待寫入數(shù)據(jù)進行后臺壓縮處理,獲取第二壓縮數(shù)據(jù),將所述待寫入數(shù)據(jù)更新為第二壓縮數(shù)據(jù)。

6、本申請還提供了一種數(shù)據(jù)管理裝置,所述裝置包括:

7、條件判斷模塊,用于響應(yīng)于主機發(fā)送的數(shù)據(jù)寫入請求,判斷所述數(shù)據(jù)寫入請求的待寫入數(shù)據(jù)是否符合在線壓縮條件;

8、在線壓縮模塊,用于若所述待寫入數(shù)據(jù)符合在線壓縮條件,則對所述待寫入數(shù)據(jù)進行在線壓縮處理,獲取第一壓縮數(shù)據(jù),并將所述第一壓縮數(shù)據(jù)寫入磁盤;

9、后臺壓縮模塊,用于若所述待寫入數(shù)據(jù)不符合在線壓縮條件,則將所述待寫入數(shù)據(jù)寫入磁盤,以及當(dāng)觸發(fā)后臺數(shù)據(jù)壓縮時,對所述待寫入數(shù)據(jù)進行后臺壓縮處理,獲取第二壓縮數(shù)據(jù),將所述待寫入數(shù)據(jù)更新為第二壓縮數(shù)據(jù)。

10、本申請還提供了一種電子設(shè)備,包括:存儲器,用于存儲計算機程序;處理器,用于執(zhí)行計算機程序時實現(xiàn)上述任一種數(shù)據(jù)管理方法的步驟。

11、本申請還提供了一種計算機可讀存儲介質(zhì),計算機可讀存儲介質(zhì)中存儲有計算機程序,其中,計算機程序被處理器執(zhí)行時實現(xiàn)上述任一種數(shù)據(jù)管理方法的步驟。

12、本申請還提供了一種計算機程序產(chǎn)品,包括計算機程序,計算機程序被處理器執(zhí)行時實現(xiàn)上述任一種數(shù)據(jù)管理方法的步驟。

13、通過本申請,通過判斷待寫入數(shù)據(jù)是否符合在線壓縮條件,對于符合壓縮條件的數(shù)據(jù),進行在線壓縮處理,對于不符合壓縮條件的數(shù)據(jù),直接將該數(shù)據(jù)寫入磁盤,并在后臺進行壓縮處理,可以避免在線壓縮帶來的額外延遲。通過在線壓縮和后臺壓縮的結(jié)合,使得存儲設(shè)備能夠在實時性能和存儲效率之間取得動態(tài)平衡,且,通過在線壓縮和后臺壓縮相配合的方式,將壓縮功能與主機io流程的耦合關(guān)系進行弱化,消除了對硬件壓縮卡的依賴。



技術(shù)特征:

1.一種數(shù)據(jù)管理方法,其特征在于,所述方法包括:

2.根據(jù)權(quán)利要求1所述的數(shù)據(jù)管理方法,其特征在于,所述方法還包括:

3.根據(jù)權(quán)利要求2所述的數(shù)據(jù)管理方法,其特征在于,所述當(dāng)觸發(fā)后臺數(shù)據(jù)壓縮時,對所述待寫入數(shù)據(jù)進行后臺壓縮處理,包括:

4.根據(jù)權(quán)利要求1所述的數(shù)據(jù)管理方法,其特征在于,所述對所述待寫入數(shù)據(jù)進行后臺壓縮處理,獲取第二壓縮數(shù)據(jù),包括:

5.根據(jù)權(quán)利要求1所述的數(shù)據(jù)管理方法,其特征在于,所述判斷所述數(shù)據(jù)寫入請求的待寫入數(shù)據(jù)是否符合在線壓縮條件,包括:

6.根據(jù)權(quán)利要求1所述的數(shù)據(jù)管理方法,其特征在于,所述方法還包括:

7.根據(jù)權(quán)利要求6所述的數(shù)據(jù)管理方法,其特征在于,所述對所述待讀取數(shù)據(jù)進行解壓縮處理,包括:

8.一種數(shù)據(jù)管理裝置,其特征在于,所述裝置包括:

9.一種電子設(shè)備,其特征在于,包括:

10.一種計算機可讀存儲介質(zhì),其特征在于,所述計算機可讀存儲介質(zhì)中存儲有計算機程序,其中,所述計算機程序被處理器執(zhí)行時實現(xiàn)如權(quán)利要求1至7任一項所述數(shù)據(jù)管理方法的步驟。


技術(shù)總結(jié)
本申請公開了一種數(shù)據(jù)管理方法、裝置、設(shè)備及介質(zhì),通過判斷待寫入數(shù)據(jù)是否符合在線壓縮條件,對于符合壓縮條件的數(shù)據(jù),進行在線壓縮處理,對于不符合壓縮條件的數(shù)據(jù),直接將該數(shù)據(jù)寫入磁盤,并在后臺進行壓縮處理,可以避免在線壓縮帶來的額外延遲。通過在線壓縮和后臺壓縮的結(jié)合,使得存儲設(shè)備能夠在實時性能和存儲效率之間取得動態(tài)平衡,且,通過在線壓縮和后臺壓縮相配合的方式,將壓縮功能與主機IO流程的耦合關(guān)系進行弱化,消除了對硬件壓縮卡的依賴。

技術(shù)研發(fā)人員:芮健德
受保護的技術(shù)使用者:蘇州元腦智能科技有限公司
技術(shù)研發(fā)日:
技術(shù)公布日:2025/6/30
網(wǎng)友詢問留言 已有0條留言
  • 還沒有人留言評論。精彩留言會獲得點贊!
1