大数据

建设数据质量检核工具

2018-05-02 11:23:47　|　来源：中培企业IT培训网

2．建设数据质量检核工具，完善全流程的数据质量管理制度评价数据质量高低，必然要从一致性、唯一性、完整性等几个角度对数据进行分析。由于目前银行业务高度复杂，一些重要数据通常涉及多个系统。比如对公客户的信息，通常在柜面业务系统、信贷系统、对公客户信息系统、国际业务系统等中都存在，部分数据项出现重叠，有些数据项会不一致。由于银行系统中无论是数据项还是数据量都庞杂无比，靠人工对其质量进行筛查及检核是不可能的，必须建设功能强大的数据检核工具。数据检核工具的主体内容是数据检核规则，这些规则要体现不同的数据质量要求，比如根据合规性要求，数据口径必须符合监管要求，就要将监管要求的数据口径转化为检核规则，再运用这些规则对各系统中的数据进行检核。另外，根据唯一性原则，需要对一些重要信息进行跨系统检核，判断其是否唯一。从各银行的具体情况来看，部门林立、系统众多、规模庞大、业务繁杂是当前中资银行的基本特点。在这种格局中，开展数据质量管理工作必须有完善的制度作为保证。从全行管理的角度讲，要有各部门的分工、职责等制度；从基础制度讲，要有关于数据标准、数据口径、名词解释的制度；从具体操作看，要有查询、上报、纠正、考核等制度；从系统开发与运作看，要有需求讨论、系统开发、标准落地、维护升级等制度。这些制度有些偏业务，有些偏技术，有些需要两者紧密结合。总之，只有通过建立健全这些制度，才能形成一个有利于进行数据质量管理的制度环境。

标签：数据质量管理