資源描述:
《《數(shù)據(jù)管控總結(jié)》ppt課件》由會(huì)員上傳分享,免費(fèi)在線閱讀,更多相關(guān)內(nèi)容在教育資源-天天文庫(kù)。
1、數(shù)據(jù)管控交流Agenda數(shù)據(jù)管控元數(shù)據(jù)管理數(shù)據(jù)質(zhì)量管理數(shù)據(jù)標(biāo)準(zhǔn)我們通常提到數(shù)據(jù)管控—數(shù)據(jù)綜合治理能夠想到的數(shù)據(jù)質(zhì)量問題源系統(tǒng)業(yè)務(wù)人員錄入正確性問題。工行案例:企業(yè)財(cái)務(wù)報(bào)表錄入日期源系統(tǒng)多系統(tǒng)之間數(shù)據(jù)不一致的問題。工行案例:對(duì)公企業(yè)行業(yè)分類問題光大案例:客戶證件類別操作性業(yè)務(wù)系統(tǒng)規(guī)范對(duì)后臺(tái)分析系統(tǒng)的影響。工行案例:增量完整性浦發(fā)案例:前臺(tái)系統(tǒng)的數(shù)據(jù)質(zhì)量建議方案業(yè)務(wù)統(tǒng)計(jì)口徑不一致的問題。信用卡案例:睡眠卡的定義解決這些數(shù)據(jù)問題的手段我們需要有一個(gè)尺度作為判斷的依據(jù)來衡量數(shù)據(jù)標(biāo)準(zhǔn)我們需要有一個(gè)偵測(cè)、報(bào)告、協(xié)助分析治理數(shù)據(jù)問題的平臺(tái):數(shù)據(jù)質(zhì)量管理我們需要對(duì)數(shù)據(jù)問題影響進(jìn)行分析,我們需要
2、對(duì)數(shù)據(jù)進(jìn)行統(tǒng)一的版本管理和規(guī)范管理控制。元數(shù)據(jù)管理我們需要數(shù)據(jù)治理是一個(gè)工程。我們需要有偵測(cè)、分析、解決方案評(píng)估、執(zhí)行的完整流程。我們需要有以下人員的參與:科技部門業(yè)務(wù)系統(tǒng)的開發(fā)人員數(shù)據(jù)治理的專職人員分析系統(tǒng)的開發(fā)人員業(yè)務(wù)部門解決這些數(shù)據(jù)問題的手段Governance=People,Processes,Technology針對(duì)數(shù)據(jù)管控我們還能想到什么?時(shí)效性問題?數(shù)據(jù)的安全?隱私問題?數(shù)據(jù)的生命周期管理問題?。。。。。數(shù)據(jù)管控機(jī)制的建立數(shù)據(jù)管控的定義管控結(jié)構(gòu)組成部分1.管控任務(wù)和指導(dǎo)原則2.管控的組織結(jié)構(gòu)3.業(yè)務(wù)改善和結(jié)果追蹤4.數(shù)據(jù)管理的落地功能5.用戶的支持和參與6.SLA
3、有效的管控6個(gè)組件每個(gè)階段的執(zhí)行情況覆蓋了所有的開發(fā)周期PlanAnalyzeDesignBuildImplementManageGovernanceProgramStructureUserSupport&InvolvementDataCertification&ManagementServiceLevelAgreementsMission,Policies,GuidingPrinciplesIncrementalProjectPlanning&ImplementationOpportunityScoping&ResultsTracking建立數(shù)據(jù)管控的考核指標(biāo)和落地功能數(shù)據(jù)質(zhì)
4、量管理元數(shù)據(jù)/數(shù)據(jù)標(biāo)準(zhǔn)數(shù)據(jù)模型數(shù)據(jù)分布/生命周期管理數(shù)據(jù)層次/數(shù)據(jù)流數(shù)據(jù)安全/數(shù)據(jù)隱私管理數(shù)據(jù)安全性數(shù)據(jù)冗余度數(shù)據(jù)質(zhì)量數(shù)據(jù)規(guī)范性數(shù)據(jù)時(shí)效性數(shù)據(jù)整合度數(shù)據(jù)DG-KPIDG-KPI載體或工具三大功能和相互關(guān)系管控體系中的數(shù)據(jù)標(biāo)準(zhǔn)、數(shù)據(jù)質(zhì)量和元數(shù)據(jù)之間有著緊密的關(guān)系,三者的關(guān)系如下:數(shù)據(jù)標(biāo)準(zhǔn)向元數(shù)據(jù)提供業(yè)務(wù)元數(shù)據(jù)的標(biāo)準(zhǔn)定義,并可以通過元數(shù)據(jù)平臺(tái)進(jìn)行維護(hù);數(shù)據(jù)標(biāo)準(zhǔn)定義了符合進(jìn)倉(cāng)數(shù)據(jù)的標(biāo)準(zhǔn)和依據(jù),指導(dǎo)數(shù)據(jù)質(zhì)量進(jìn)行有效的質(zhì)量監(jiān)測(cè)和檢查;另一方面,通過數(shù)據(jù)質(zhì)量具體的操作來促進(jìn)數(shù)據(jù)標(biāo)準(zhǔn)的執(zhí)行情況;元數(shù)據(jù)作為數(shù)據(jù)質(zhì)量的數(shù)據(jù)提供者,向數(shù)據(jù)質(zhì)量提供包括表、字段、代碼等元數(shù)據(jù)對(duì)象及其屬性定義,能夠幫助
5、倉(cāng)庫(kù)的使用者更好的發(fā)現(xiàn)數(shù)據(jù)的質(zhì)量問題;數(shù)據(jù)管控應(yīng)用框架0數(shù)據(jù)治理組織架構(gòu)與崗位職責(zé)數(shù)據(jù)治理模板(流程、定義、發(fā)布)數(shù)據(jù)治理認(rèn)責(zé)與考核辦法數(shù)據(jù)標(biāo)準(zhǔn)管理元數(shù)據(jù)管理數(shù)據(jù)質(zhì)量管理數(shù)據(jù)安全管理數(shù)據(jù)標(biāo)準(zhǔn)需求管理流程數(shù)據(jù)標(biāo)準(zhǔn)制訂流程數(shù)據(jù)標(biāo)準(zhǔn)執(zhí)行流程數(shù)據(jù)標(biāo)準(zhǔn)維護(hù)流程數(shù)據(jù)質(zhì)量問題處理流程數(shù)據(jù)質(zhì)量需求管理流程元數(shù)據(jù)變更管控流程元數(shù)據(jù)需求管理流程數(shù)據(jù)訪問安全數(shù)據(jù)質(zhì)量檢核規(guī)則制訂流程元數(shù)據(jù)調(diào)研分析流程元數(shù)據(jù)維護(hù)管理流程數(shù)據(jù)質(zhì)量問題排查流程數(shù)據(jù)維護(hù)安全數(shù)據(jù)備份安全元數(shù)據(jù)分類模式及屬性舉例屬性名稱必填項(xiàng)注釋說明標(biāo)識(shí)號(hào)M業(yè)務(wù)屬性的唯一標(biāo)識(shí)名稱M縮寫M縮寫或業(yè)務(wù)屬性名稱的簡(jiǎn)要寫法同義詞代表同一含義的不同術(shù)語名
6、詞別名其他部門的術(shù)語或通俗的講法定義M該術(shù)語屬性的詳細(xì)定義標(biāo)準(zhǔn)標(biāo)志元數(shù)據(jù)規(guī)范的范圍,如全企業(yè)通用、部門級(jí)別、獨(dú)立使用等。必填標(biāo)志M必填、可選、有條件的填寫缺省值限制規(guī)則取值范圍的限制條件是否個(gè)人信息是否個(gè)人隱私信息,如客戶名稱、住址、國(guó)籍、生日、信用卡信息等保密等級(jí)高中低等重要程度是否是對(duì)運(yùn)營(yíng)、決策等影響重大的關(guān)鍵信息,是否是數(shù)據(jù)質(zhì)量檢查點(diǎn)元數(shù)據(jù)創(chuàng)建人M元數(shù)據(jù)創(chuàng)建日期M最近修改人最近修改日期質(zhì)量評(píng)分根據(jù)數(shù)據(jù)質(zhì)量評(píng)估模型給出的評(píng)分最近評(píng)定日期元數(shù)據(jù)分類業(yè)務(wù)元數(shù)據(jù)結(jié)構(gòu)化技術(shù)元數(shù)據(jù)關(guān)聯(lián)類技術(shù)元數(shù)據(jù)操作型元數(shù)據(jù)業(yè)務(wù)模型主題域業(yè)務(wù)實(shí)體業(yè)務(wù)屬性數(shù)據(jù)質(zhì)量業(yè)務(wù)規(guī)則數(shù)據(jù)庫(kù)/文件服務(wù)器表/視圖/文
7、件列/字段數(shù)據(jù)集成應(yīng)用數(shù)據(jù)集成邏輯模型數(shù)據(jù)集成物理模型數(shù)據(jù)質(zhì)量控制規(guī)則數(shù)據(jù)處理應(yīng)用數(shù)據(jù)處理作業(yè)……分類屬性元數(shù)據(jù)管理的架構(gòu)元數(shù)據(jù)的基礎(chǔ)功能元數(shù)據(jù)查詢?yōu)g覽:側(cè)重于對(duì)元數(shù)據(jù)的內(nèi)容展現(xiàn)和查詢方式支持元數(shù)據(jù)數(shù)據(jù)分析:側(cè)重于基于元數(shù)據(jù)的分析功能,從數(shù)據(jù)中提取對(duì)技術(shù)、業(yè)務(wù)用戶有用的信息元數(shù)據(jù)管理:元數(shù)據(jù)平臺(tái)的管理功能BI元數(shù)據(jù)和企業(yè)級(jí)元數(shù)據(jù)的互動(dòng):企業(yè)級(jí)元數(shù)據(jù)經(jīng)ETL平臺(tái)加工整理進(jìn)入倉(cāng)庫(kù),形成BI元數(shù)據(jù),可通過血緣分析和影響分析功能查看兩者的互動(dòng)關(guān)系;歷史對(duì)象元數(shù)據(jù)瀏覽的靈活性元數(shù)據(jù)對(duì)象關(guān)系呈立體網(wǎng)狀看