DWH 和大数据测试工具

Posted 2023-03-29

【中文标题】DWH 和大数据测试工具

【英文标题】：DWH and Bigdata testing tools

【发布时间】：2014-09-25 13:00:52

【问题描述】：

我正在为市场上的数据仓库/大数据工具及其功能寻找好的测试工具。我必须验证源数据和目标数据、逻辑等，并减少测试工作。

【参考方案1】：

您可以使用 Querysurge、Informatica DQM。

【参考方案2】：

我建议使用 CI/AT（持续集成/自动化测试）系统，在测试方面，您可以构建各种类型的源和目标提取，并将它们存储在一个协调数据库中，该数据库运行自动化测试每次加载后。

所以它的美妙之处在于，一旦设置好，就可以为您遇到的每个“测试用例”添加新脚本。这个想法是，每天晚上，在所有开发人员都将他们的代码提交到 TFS/GIT/etc. 之后，然后从代码存储库自动部署到测试盒，然后通过系统端到端加载一组测试数据。最后，从逻辑数据的角度来看，充分执行加载过程和数据库。任何故障都会在第二天看到，而不是等待下一个部署周期。

我知道我的建议涉及大量工作，但是一旦设置好，它就具有可扩展性并且非常强大。这同样适用于 SQL 和 NoSQL 环境。