數(shù)據(jù)質(zhì)量管理平臺(DQMP)
發(fā)現(xiàn)并處理低質(zhì)量數(shù)據(jù)
在企業(yè)數(shù)據(jù)標(biāo)準(zhǔn)化過程中,期望通過數(shù)據(jù)標(biāo)準(zhǔn)化管理反饋價值至業(yè)務(wù),數(shù)據(jù)質(zhì)量的重要性無論如何強調(diào)都是不過分的。在這個過程中,低質(zhì)量數(shù)據(jù)的產(chǎn)生是不可避免的,大批量的數(shù)據(jù)初始化、未處理歷史數(shù)據(jù)帶來的問題擴散、緊急業(yè)務(wù)產(chǎn)生的低質(zhì)量數(shù)據(jù),都將影響數(shù)據(jù)標(biāo)準(zhǔn)編碼庫的質(zhì)量。控制低質(zhì)量數(shù)據(jù)的產(chǎn)生幾率和及時發(fā)現(xiàn)低質(zhì)量數(shù)據(jù)并進行有效的處理,是企業(yè)能夠組織開展的舉措。因此,對企業(yè)數(shù)據(jù)質(zhì)量管理的正確理解,并非是不產(chǎn)生低質(zhì)量數(shù)據(jù),而是通過科學(xué)、有效、專業(yè)的管理和技術(shù)支持,減低并控制低質(zhì)量數(shù)據(jù)的產(chǎn)生率和存在率,及時發(fā)現(xiàn)低質(zhì)量數(shù)據(jù)并進行有效的處理,控制標(biāo)準(zhǔn)編碼庫的高健康度。
數(shù)據(jù)質(zhì)量管理平臺(Data Quality Management Platform,DQMP)是三維天地信息標(biāo)準(zhǔn)化管理一體化平臺解決方案(6P+2E+Mobile)中的核心標(biāo)準(zhǔn)組件。它保證企業(yè)數(shù)據(jù)標(biāo)準(zhǔn)庫的數(shù)據(jù)質(zhì)量,實現(xiàn)對標(biāo)準(zhǔn)數(shù)據(jù)編碼庫的透明可視分析。但由于數(shù)據(jù)編碼庫的數(shù)據(jù)量龐大、數(shù)據(jù)信息復(fù)雜性、專業(yè)要求高等因素,人工進行質(zhì)量保障存在難度,需通過專業(yè)的質(zhì)量管理工具對標(biāo)準(zhǔn)數(shù)據(jù)編碼庫進行檢測,發(fā)現(xiàn)需處理的不完整數(shù)據(jù)、需去除的重復(fù)數(shù)據(jù)、需去除的噪聲數(shù)據(jù)、需處理的異常(但真實)的數(shù)據(jù),通過專業(yè)化的數(shù)據(jù)質(zhì)量管理平臺提供數(shù)據(jù)健康度分析,為數(shù)據(jù)清洗和治理提供依據(jù),再使用數(shù)據(jù)清洗平臺進行數(shù)據(jù)清洗治理,從而保證數(shù)據(jù)的唯一性、完整性和一致性,提升數(shù)據(jù)質(zhì)量。