Google宣布推出了資料驗(yàn)證工具（DVT），這是一個(gè)開(kāi)源的Python命令列工具，可以跨不同環(huán)境進(jìn)行自動(dòng)化資料驗(yàn)證。

　　Google提到，資料驗(yàn)證是資料倉(cāng)儲(chǔ)、資料庫(kù)和資料湖搬遷的關(guān)鍵步驟，工作包括比較來(lái)源和目標(biāo)表格的結(jié)構(gòu)化和半結(jié)構(gòu)化資料，并在每個(gè)搬遷步驟，像是SQL腳本轉(zhuǎn)換、資料和架構(gòu)搬遷以及ETL搬遷等，驗(yàn)證這些步驟是否正確完成。

　　跨平臺(tái)驗(yàn)證資料雖然重要但是卻非常耗時(shí)，用戶可能必須要建構(gòu)和維護(hù)自定義解決方案，才能完成這項(xiàng)工作，而DVT提供了一個(gè)標(biāo)準(zhǔn)化的解決方案，可供用戶根據(jù)本地端系統(tǒng)中的資料，驗(yàn)證Google云端中心搬遷的資料，DVT能夠與現(xiàn)有企業(yè)基礎(chǔ)設(shè)施和ETL工作管線整合，進(jìn)行無(wú)縫且自動(dòng)化的驗(yàn)證。

　　DVT使用Ibis框架來(lái)連接到大量資料來(lái)源，Ibis則是一個(gè)Python框架，能夠用標(biāo)準(zhǔn)方式存取資料，并且對(duì)不同來(lái)源的資料進(jìn)行分析運(yùn)算，簡(jiǎn)單來(lái)說(shuō)，Ibis供用戶方便地使用Python編寫(xiě)SQL，但在存取資料外，其重點(diǎn)在於分析，除了可用於SQL資料庫(kù)，還支援後端各種資料儲(chǔ)存系統(tǒng)。

　　有了Ibis的支援，DVT能夠連接到大量的資料源上，包括BigQuery、AWS S3、MySQL、Oracle、Spanner、SQL Server以及Teradata等。DVT能執(zhí)行多層資料驗(yàn)證，從各種表格層級(jí)的驗(yàn)證到列驗(yàn)證。