请教高手:
我在做完ETL之后,现在要编写一个数据校验设计文档
我想请问一下,数据校验总共包含哪些方面的校验,每一方面包含哪些内容,谢谢!!
------解决方案--------------------
ETL,本身这个动作就要做数据筛选,数据清理,数据校验,业务逻辑转换等,你怎么说在这个流程完了,再做校验?
你的意思是校验整个etl流程?
通过业务和技术手段,2方面考虑,看你etl处理的是否得当
------解决方案--------------------
所谓数据校验,就是通过ETL过程的辅助逻辑,来判断抽取的数据是否符合业务规范、数据规范等。一般有2种方案,一是将不符合规范的数据拒绝掉,单独放一个地方,一种是不拒绝也不屏蔽,只是在数据仓库中对这类数据做一个标识。处理方法根据实际情况而定。
------解决方案--------------------
这个哪有规范的.
都是看你的业务要求需要什么样的数据.