更新時間:2022-08-16 來源:黑馬程序員 瀏覽量:
接下來介紹 TiDB 如何讀取歷史版本數(shù)據(jù),包括具體的操作流程以及歷史數(shù)據(jù)的保存策略。
TiDB 實現(xiàn)了通過標準 SQL 接口讀取歷史數(shù)據(jù)功能,無需特殊的 client 或者 driver。當數(shù)據(jù)被更新、刪除后,依然可以通過 SQL 接口將更新/刪除前的數(shù)據(jù)讀取出來。
另外即使在更新數(shù)據(jù)之后,表結構發(fā)生了變化,TiDB 依舊能用舊的表結構將數(shù)據(jù)讀取出來。
為支持讀取歷史版本數(shù)據(jù), 引入了一個新的 system variable: tidb_snapshot ,這個變量是 Session 范圍有效,可以通過標準的 Set 語句修改其值。其值為文本,能夠存儲 TSO 和日期時間。TSO 即是全局授時的時間戳,是從 PD 端獲取的; 日期時間的格式可以為: “2020-10-08 16:45:26.999”,一般來說可以只寫到秒,比如”2020-10-08 16:45:26”。 當這個變量被設置時,TiDB 會用這個時間戳建立 Snapshot(沒有開銷,只是創(chuàng)建數(shù)據(jù)結構),隨后所有的 Select 操作都會在這個 Snapshot 上讀取數(shù)據(jù)。
注意:
TiDB 的事務是通過 PD 進行全局授時,所以存儲的數(shù)據(jù)版本也是以 PD 所授時間戳作為版本號。在生成 Snapshot 時,是以 tidb_snapshot 變量的值作為版本號,如果 TiDB Server 所在機器和 PD Server 所在機器的本地時間相差較大,需要以 PD 的時間為準。
當讀取歷史版本操作結束后,可以結束當前 Session 或者是通過 Set 語句將 tidb_snapshot 變量的值設為 “",即可讀取最新版本的數(shù)據(jù)。
TiDB 使用 MVCC 管理版本,當更新/刪除數(shù)據(jù)時,不會做真正的數(shù)據(jù)刪除,只會添加一個新版本數(shù)據(jù),所以可以保留歷史數(shù)據(jù)。歷史數(shù)據(jù)不會全部保留,超過一定時間的歷史數(shù)據(jù)會被徹底刪除,以減小空間占用以及避免歷史版本過多引入的性能開銷。
TiDB 使用周期性運行的 GC(Garbage Collection,垃圾回收)來進行清理,關于 GC 的詳細介紹參見 TiDB 垃圾回收 (GC)。
這里需要重點關注的是 tikv_gc_life_time 和 tikv_gc_safe_point 這條。tikv_gc_life_time 用于配置歷史版本保留時間,可以手動修改;tikv_gc_safe_point 記錄了當前的 safePoint,用戶可以安全地使用大于 safePoint 的時間戳創(chuàng)建 snapshot 讀取歷史版本。safePoint 在每次 GC 開始運行時自動更新。
操作示例:
①初始化階段,創(chuàng)建一個表,并插入幾行數(shù)據(jù):
create table t (c int); insert into t values (1), (2), (3);
②查看表中的數(shù)據(jù):
select * from t; +------+ | c | +------+ | 1 | | 2 | | 3 | +------+
③查看當前時間:
select now(); +---------------------+ | now() | +---------------------+ | 2020-02-02 16:45:26 | +---------------------+
④更新某一行數(shù)據(jù):
update t set c=22 where c=2;
⑤確認數(shù)據(jù)已經(jīng)被更新:
select * from t; +------+ | c | +------+ | 1 | | 22 | | 3 | +------+
⑥設置一個特殊的環(huán)境變量,這個是一個 session scope 的變量,其意義為讀取這個時間之前的最新的一個版本。
set @@tidb_snapshot="2020-02-02 16:45:26";
注意:
這里的時間設置的是 update 語句之前的那個時間。
在 tidb_snapshot 前須使用 @@ 而非 @,因為 @@ 表示系統(tǒng)變量,@ 表示用戶變量。
⑦這里讀取到的內容即為 update 之前的內容,也就是歷史版本:
select * from t; +------+ | c | +------+ | 1 | | 2 | | 3 | +------+
⑧清空這個變量后,即可讀取最新版本數(shù)據(jù):
set @@tidb_snapshot=""; select * from t; +------+ | c | +------+ | 1 | | 22 | | 3 | +------+
注意:
在 tidb_snapshot 前須使用 @@ 而非 @,因為 @@ 表示系統(tǒng)變量,@ 表示用戶變量。