數(shù)據(jù)質(zhì)量管理平臺(tái)(DQMP)
發(fā)現(xiàn)并處理低質(zhì)量數(shù)據(jù)
在企業(yè)數(shù)據(jù)標(biāo)準(zhǔn)化過(guò)程中,期望通過(guò)數(shù)據(jù)標(biāo)準(zhǔn)化管理反饋價(jià)值至業(yè)務(wù),數(shù)據(jù)質(zhì)量的重要性無(wú)論如何強(qiáng)調(diào)都是不過(guò)分的。在這個(gè)過(guò)程中,低質(zhì)量數(shù)據(jù)的產(chǎn)生是不可避免的,大批量的數(shù)據(jù)初始化、未處理歷史數(shù)據(jù)帶來(lái)的問(wèn)題擴(kuò)散、緊急業(yè)務(wù)產(chǎn)生的低質(zhì)量數(shù)據(jù),都將影響數(shù)據(jù)標(biāo)準(zhǔn)編碼庫(kù)的質(zhì)量??刂频唾|(zhì)量數(shù)據(jù)的產(chǎn)生幾率和及時(shí)發(fā)現(xiàn)低質(zhì)量數(shù)據(jù)并進(jìn)行有效的處理,是企業(yè)能夠組織開(kāi)展的舉措。因此,對(duì)企業(yè)數(shù)據(jù)質(zhì)量管理的正確理解,并非是不產(chǎn)生低質(zhì)量數(shù)據(jù),而是通過(guò)科學(xué)、有效、專(zhuān)業(yè)的管理和技術(shù)支持,減低并控制低質(zhì)量數(shù)據(jù)的產(chǎn)生率和存在率,及時(shí)發(fā)現(xiàn)低質(zhì)量數(shù)據(jù)并進(jìn)行有效的處理,控制標(biāo)準(zhǔn)編碼庫(kù)的高健康度。
數(shù)據(jù)質(zhì)量管理平臺(tái)(Data Quality Management Platform,DQMP)是三維天地信息標(biāo)準(zhǔn)化管理一體化平臺(tái)解決方案(6P+2E+Mobile)中的核心標(biāo)準(zhǔn)組件。它保證企業(yè)數(shù)據(jù)標(biāo)準(zhǔn)庫(kù)的數(shù)據(jù)質(zhì)量,實(shí)現(xiàn)對(duì)標(biāo)準(zhǔn)數(shù)據(jù)編碼庫(kù)的透明可視分析。但由于數(shù)據(jù)編碼庫(kù)的數(shù)據(jù)量龐大、數(shù)據(jù)信息復(fù)雜性、專(zhuān)業(yè)要求高等因素,人工進(jìn)行質(zhì)量保障存在難度,需通過(guò)專(zhuān)業(yè)的質(zhì)量管理工具對(duì)標(biāo)準(zhǔn)數(shù)據(jù)編碼庫(kù)進(jìn)行檢測(cè),發(fā)現(xiàn)需處理的不完整數(shù)據(jù)、需去除的重復(fù)數(shù)據(jù)、需去除的噪聲數(shù)據(jù)、需處理的異常(但真實(shí))的數(shù)據(jù),通過(guò)專(zhuān)業(yè)化的數(shù)據(jù)質(zhì)量管理平臺(tái)提供數(shù)據(jù)健康度分析,為數(shù)據(jù)清洗和治理提供依據(jù),再使用數(shù)據(jù)清洗平臺(tái)進(jìn)行數(shù)據(jù)清洗治理,從而保證數(shù)據(jù)的唯一性、完整性和一致性,提升數(shù)據(jù)質(zhì)量。