工具与效率
Google发布用于企业数据仓库搬迁的资料验证工具
阅读提示
费用、政策与平台规则可能调整，实际操作请以官方现行规定为准。
问题 1：DVT 是什么？
DVT 是 Google 宣布推出的资料验证工具，它是一个开源的 Python 命令行工具，可跨不同环境进行自动化资料验证，能连接到大量的资料源，执行多层资料验证，如各种表格层级的验证到列验证等，并且能够与现有企业基础设施和 ETL 工作管线集成，进行无缝且自动化的验证。
问题 2：资料验证在哪些方面是关键步骤？- 资料验证在数据仓库、数据库和资料湖搬迁方面是关键步骤，其工作包括比较来源和目标表格的结构化和半结构化资料，在 SQL 脚本转换、资料和架构搬迁以及 ETL 搬迁等每个搬迁步骤中，验证这些步骤是否正确完成。
跨平台验证资料重要是因为它对于确保数据的准确性和一致性至关重要，在不同环境和系统之间迁移数据时必须进行严格验证。但却非常耗时是因为用户可能必需自己构建和维护自定义解决方案来完成这项工作，这需要投入大量的时间和精力。
问题 4：DVT 有什么优势？- DVT 提供了一个标准化的解决方案，可供用户根据本地端系统中的资料，验证 Google 云计算中心搬迁的资料，能与现有企业基础设施和 ETL 工作管线集成，实现无缝且自动化的验证。同时它使用 Ibis 框架能连接到大量数据源，具有很强的通用性和扩展性。
Ibis 框架是一个 Python 框架，能够用标准方式访问资料并且对不同来源的资料进行分析运算，它可供用户方便地使用 Python 编写 SQL，重点在于分析，除了可用于 SQL 数据库，还支持后端各种资料存储系统，这使得 DVT 能够借助 Ibis 连接到众多的资料源。