EDA數(shù)據(jù)質(zhì)量工作匯報--江西電信

數(shù)據(jù)質(zhì)量工作匯報 江西電信企業(yè)信息化部 2010年 7月 目 錄 數(shù)據(jù)組織 數(shù)據(jù)管理 系統(tǒng)支撐 運(yùn)營效果 經(jīng)驗體會 2 江西電信企業(yè)信息化部 江西電信企業(yè)信息化部 3 數(shù)據(jù)質(zhì)量管理歷程 ( 2007年 5月 2007年 10月 2008年 10月 2009年 12月 2010年 6月 數(shù)據(jù)質(zhì)量歷程 企業(yè)數(shù)據(jù)管理 江西電信企業(yè)信息化部 4 數(shù)據(jù)考核 江西電信企業(yè)信息化部 5 目 錄 數(shù)據(jù)組織 數(shù)據(jù)管理 系統(tǒng)支撐 運(yùn)營效果 經(jīng)驗體會 6 江西電信企業(yè)信息化部 數(shù)據(jù)管理的五大內(nèi)容 江西電信企業(yè)信息化部 7 按照集團(tuán)規(guī)范，對 費(fèi)等系統(tǒng)的信息完整性進(jìn)行分析和整改。 數(shù)據(jù)完整性 使用系統(tǒng)功能對關(guān)鍵客戶信息進(jìn)行稽核并發(fā)分公司進(jìn)行清理。 在各主要系統(tǒng)開展數(shù)據(jù)提速工作。 根據(jù)比對結(jié)果處理方案對每月比對出的差異數(shù)據(jù)進(jìn)行清理，提高各系統(tǒng)數(shù)據(jù)一致性。 制定工號權(quán)限管理細(xì)則，對工號進(jìn)行審核和清理 進(jìn)行操作日志自查，完善系統(tǒng)日志功能 數(shù)據(jù)準(zhǔn)確性 數(shù)據(jù)及時性 數(shù)據(jù)一致性 數(shù)據(jù)安全性 將端到端收入稽核融入江西電信數(shù)據(jù) 大提升工作的推進(jìn)力度 圍繞 “ 五性 ” 開展工作，構(gòu)筑數(shù)據(jù)應(yīng)用完整體系。 主產(chǎn)品 提升數(shù)據(jù)一致性 關(guān)鍵指標(biāo) 江西電信企業(yè)信息化部 8 固網(wǎng)與平臺 窄 帶 寬帶 率 彩 鈴 預(yù) 付 費(fèi) 移動與平臺 與 與 與 與 鈴 與綜合 產(chǎn)品 屬性 主產(chǎn)品 附屬 產(chǎn)品 產(chǎn)品 相關(guān) 根據(jù)數(shù)據(jù)的重要程度以及流程中可能存在的問題定位出影響數(shù)據(jù)一致性的關(guān)鍵指標(biāo)。 城鄉(xiāng)標(biāo)識 用 戶屬 性 產(chǎn) 品 標(biāo) 志 付 費(fèi) 模式 來顯 彩 鈴 銷售品 定價 提升數(shù)據(jù)一致性 業(yè)務(wù)流程 江西電信企業(yè)信息化部 9 1號 網(wǎng)支網(wǎng)優(yōu)將源文件送達(dá)指定的 4號 省業(yè)務(wù)支撐中心通過系統(tǒng)任務(wù)完成核心資料一致性比對工作。 5號 省業(yè)務(wù)支撐中心下發(fā)差異給分公司。 10號 分公司層面提出數(shù)據(jù)核查需求。 15號 省業(yè)務(wù)支撐中心、網(wǎng)支、網(wǎng)優(yōu)對分公司提出的問題進(jìn)行核查。 20號 分公司層面根據(jù)數(shù)據(jù)比對結(jié)果處理方案提出數(shù)據(jù)修改工單。 28號 省業(yè)務(wù)支撐中心、網(wǎng)支、網(wǎng)優(yōu)根據(jù)工單對數(shù)據(jù)進(jìn)行修改及同步。 省公司信息化部牽頭 、 推動工作完成 提升數(shù)據(jù)一致性 數(shù)據(jù)修改工單流程 以清理彩鈴平臺數(shù)據(jù)為例描述工單流轉(zhuǎn)過程。 江西電信企業(yè)信息化部 10 需求人提需求 接口人送審批 網(wǎng)支審批 接口人派單 彩鈴平臺修改數(shù)據(jù) 接口人確認(rèn) 需求人驗收 結(jié)束工單 接口人判斷是否送審批，送哪個部門審批。 接口人根據(jù)需求內(nèi)容將工單派發(fā)給相關(guān)系統(tǒng)或平臺。 驗收不通過 主管部門對工單內(nèi)容進(jìn)行審批。 提升數(shù)據(jù)一致性 相關(guān)文件 江西電信企業(yè)信息化部 11 數(shù)據(jù)比對結(jié)果處理方案 按照集團(tuán)公司關(guān)于開展移動業(yè)務(wù)用戶數(shù)據(jù)比對工作的文件要求，結(jié)合本省前期開展的數(shù)據(jù)比對工作的進(jìn)展情況，特制訂我省移動業(yè)務(wù)用戶數(shù)據(jù)比對處理方案。 一、工作范圍 本次用戶數(shù)據(jù)比對工作，主要針對基礎(chǔ)語音業(yè)務(wù)、無線寬帶、短信、彩信、智能網(wǎng)、彩鈴六大類業(yè)務(wù)。在此基礎(chǔ)之上，逐步開展其他業(yè)務(wù)的用戶數(shù)據(jù)的比對工作。 二、工作原則 鑒于數(shù)據(jù)比對工作涉及到對用戶數(shù)據(jù)的修正，一旦出現(xiàn)差錯，會直接影響用戶業(yè)務(wù)的使用，對用戶感知產(chǎn)生不好的影響，因此我省計劃采用先試點(diǎn)、再推廣的原則推進(jìn)該項工作。 三、工作目標(biāo) 提高移動業(yè)務(wù)一次自動開通成功率指標(biāo)，指標(biāo)逐步達(dá)到并超過 99 。 四 、 工作內(nèi)容 1 、基礎(chǔ)語音業(yè)務(wù) 中國電信江西公司 數(shù)據(jù) 一致性 清理流程 為了進(jìn)一步提高公司 統(tǒng)間數(shù)據(jù)一致性，達(dá)到“數(shù)據(jù)應(yīng)用能力提升” 目的考核目標(biāo)，特對數(shù)據(jù)清理流程進(jìn)行進(jìn)一步的明確：一、 工作方式與流程 1 、工作方式 根據(jù)“數(shù)據(jù)應(yīng)用能力提升” T O P 項目的要求和工作現(xiàn)狀，省信息化部對數(shù)據(jù)清理的流程進(jìn)行優(yōu)化調(diào)整，將每月通報所有差異改為每月通報存量差異1，但是年中（ 6 月），年底（ 12 月）按照所有差異進(jìn)行考核。分公司每月應(yīng)針對存量差異進(jìn)行清理修改，針對新量差異進(jìn)行問題核查 并 提出解決建議，省公司根據(jù)這兩部分的工作情況綜合對分公司進(jìn)行評價。 2 、 清理流程 1 ） 每 月 1 日 各業(yè)務(wù)平臺數(shù)據(jù)源、 計費(fèi)數(shù)據(jù)源按既定格式準(zhǔn)時 把源文件送達(dá)指定 務(wù)器 ，具體文件格式、時間點(diǎn)、 F T 。 2 ） 每月 4 日 18 點(diǎn) 前，完成核心資料一致性比對工作 ，封網(wǎng)期間可不進(jìn)行相應(yīng)數(shù)據(jù)比對任務(wù) ； 5 日 18 點(diǎn) 前下發(fā)差異清單給分公司，通知分公司數(shù)據(jù)質(zhì)量負(fù)責(zé)同志開始核查 。 3 ） 分公司在 10 日前將數(shù)據(jù)協(xié)查需求提交省網(wǎng)支、網(wǎng)優(yōu)、業(yè)務(wù)中心、 心，省公司各單位要在 15 日前配合分公司完成差異 數(shù)1存量差異指上月比對出來的、但在當(dāng)月清單中還存在的差異，新量差異指在上月清單中不存在、但在當(dāng)月清單中存在的差異。對存量差異進(jìn)行通報能夠體現(xiàn)出分公司數(shù)據(jù)清理的進(jìn)度，對分公司新量差異的原因核查能夠避免影響數(shù)據(jù)一致性問題的持續(xù)出現(xiàn)，從根本上保證數(shù)據(jù)質(zhì)量，避免前清后亂。 規(guī)范化的流程管理保證了數(shù)據(jù)一致性清理工作有條不紊的進(jìn)行。 比對結(jié)果處理方案中明確了對差異結(jié)果數(shù)據(jù)的清理方法，有效指導(dǎo)實際操作。 目 錄 數(shù)據(jù)組織 數(shù)據(jù)管理 系統(tǒng)支撐 運(yùn)營效果 經(jīng)驗體會 12 江西電信企業(yè)信息化部 企業(yè)數(shù)據(jù)質(zhì)量管理系統(tǒng) 功能框架 任務(wù)配置定義 質(zhì)量分析報告 數(shù)據(jù)采集 稽核過程管控 數(shù)據(jù)同步 稽核計劃管理 同步處理 同步規(guī)則 稽核結(jié)果報告 創(chuàng)建計劃 待審核計劃 數(shù)據(jù)采集管控 數(shù)據(jù)預(yù)處理管控 數(shù)據(jù)比對管控 規(guī)則比對稽核 命令腳本稽核 存儲過程稽核 異常數(shù)據(jù)報告 數(shù)據(jù)修正考核 在執(zhí)行計劃 13 江西電信企業(yè)信息化部 已完成計劃 數(shù)據(jù)同步管控 數(shù)據(jù)同步報告 數(shù)據(jù)預(yù)處理 預(yù)處理規(guī)則 差異確認(rèn) 一致性 準(zhǔn)確性 完整性 系統(tǒng)管理 用戶管理 日志管理 統(tǒng)計分析 監(jiān)控告警 數(shù)據(jù)比對 數(shù)據(jù)校驗 采集計劃 數(shù)據(jù)提取 解析、過濾 校驗、規(guī)整 合并 比對方式 比對周期 稽核計劃管理 江西電信企業(yè)信息化部 14 一致性準(zhǔn)確性完整性 稽核計劃管理 數(shù)據(jù)采集 數(shù)據(jù)預(yù)處理 數(shù)據(jù)比對 數(shù)據(jù)同步 稽核過程管控 數(shù)據(jù)采集 江西電信企業(yè)信息化部 15 稽核計劃管理 數(shù)據(jù)采集 數(shù)據(jù)預(yù)處理 數(shù)據(jù)比對 數(shù)據(jù)同步 稽核過程管控 采集計劃管理 采集計劃管理是把采集請求的信息如采集的范圍、時間等進(jìn)行管理。 數(shù)據(jù)提取是根據(jù)采集的范圍以及時間向 批量采集和單個采集。 數(shù)據(jù)校驗 數(shù)據(jù)校驗是對從 件大小、采集點(diǎn)等完整性的校驗。 數(shù)據(jù)提取 文件 實時接口查詢 人工取數(shù)輸入 數(shù)據(jù)采集根據(jù)采集請求，向 數(shù)據(jù)的完整性校驗。 數(shù)據(jù)預(yù)處理 江西電信企業(yè)信息化部 16 稽核計劃管理 數(shù)據(jù)采集 數(shù)據(jù)預(yù)處理 數(shù)據(jù)比對 數(shù)據(jù)同步 稽核過程管控 數(shù)據(jù)解析 提取原始數(shù)據(jù)集中的有效信息，并根據(jù)編碼規(guī)則對其統(tǒng)一編碼，經(jīng)過解析后的數(shù)據(jù)為標(biāo)準(zhǔn)格式數(shù)據(jù) 。 數(shù)據(jù)過濾 過濾是刪除標(biāo)準(zhǔn)格式數(shù)據(jù)中無用或重復(fù)的數(shù)據(jù) 。 數(shù)據(jù)校驗 數(shù)據(jù)歸整 對經(jīng)過過濾、校驗的數(shù)據(jù)進(jìn)行歸整，輸出為標(biāo)準(zhǔn)數(shù)據(jù)。 根據(jù)校驗規(guī)則對數(shù)據(jù)的有效性進(jìn)行判斷 數(shù)據(jù)合并 數(shù)據(jù)合并是對經(jīng)過檢驗、歸整的不同網(wǎng)元平臺或 出為可比對的標(biāo)準(zhǔn)格式數(shù)據(jù) 數(shù)據(jù)預(yù)處理是對采集到的原始數(shù)據(jù)集進(jìn)行解析、過濾、校驗以及修復(fù)等處理的過程，處理后的數(shù)據(jù)為符合編碼規(guī)則、可直接用于數(shù)據(jù)比對的標(biāo)準(zhǔn)格式數(shù)據(jù)。 數(shù)據(jù)比對 江西電信企業(yè)信息化部 17 稽核計劃管理 數(shù)據(jù)采集 數(shù)據(jù)預(yù)處理 數(shù)據(jù)比對 數(shù)據(jù)同步 稽核過程管控 采用規(guī)則庫配置，實現(xiàn)數(shù)據(jù)比對 比對方式 定義規(guī)則庫 存儲過程 命令腳本 數(shù)據(jù)比對根據(jù)比對方式和比對周期，對提供的標(biāo)準(zhǔn)化數(shù)據(jù)進(jìn)行兩兩比對 ,查找數(shù)據(jù)雙方的差異。 比對周期 即時比對 定時比對 周期性比對 采用存儲過程，實現(xiàn)數(shù)據(jù)比對 采用命令腳本，實現(xiàn)數(shù)據(jù)比對 立即開始數(shù)據(jù)比對 設(shè)定某個時間，進(jìn)行數(shù)據(jù)比對 設(shè)定某個周期性時間點(diǎn)，如每月 1號，進(jìn)行數(shù)據(jù)比對 數(shù)據(jù)同步 西電信企業(yè)信息化部 18 稽核計劃管理 數(shù)據(jù)采集 數(shù)據(jù)預(yù)處理 數(shù)據(jù)比對 數(shù)據(jù)同步 稽核過程管控 數(shù)據(jù)同步 西電信企業(yè)信息化部 19 稽核計劃管理 數(shù)據(jù)采集 數(shù)據(jù)預(yù)處理 數(shù)據(jù)比對 數(shù)據(jù)同步 稽核過程管控 以 用數(shù)據(jù)質(zhì)量管理系統(tǒng)的數(shù)據(jù)同步功能進(jìn)行同步，同步目標(biāo)包括計費(fèi)等外圍 務(wù)平臺以及網(wǎng)元，無則增加，有則覆蓋。 交由人工干預(yù)，如果確認(rèn)需要 除、修改，則利用數(shù)據(jù)質(zhì)量管理系統(tǒng)的數(shù)據(jù)同步功能進(jìn)行同步，同步包括計費(fèi)等外圍務(wù)平臺及網(wǎng)元。 數(shù)據(jù)一致性 數(shù)據(jù)一致性范圍 江西電信企業(yè)信息化部 20 比對項目 源系統(tǒng) 周期 范圍 數(shù)據(jù)抽取方式 月 1號 全量 網(wǎng)用戶鑒權(quán)數(shù)據(jù) 月 1號 全量 網(wǎng)彩鈴用戶數(shù)據(jù) 鈴 每月 1號 全量 鈴文件 網(wǎng)預(yù)付費(fèi)用戶數(shù)據(jù) 月 1號 全量 合 月 1號 全量 合 月 1號 全量 端管理系統(tǒng) 即時比對 全量 端管理系統(tǒng)接口表方式 源管理系統(tǒng) 即時比對 全量 源管理系統(tǒng)接口表方式 鈴 每日 增量 鈴 目 錄 數(shù)據(jù)組織 數(shù)據(jù)管理 系統(tǒng)支撐 運(yùn)營效果 經(jīng)驗體會 21 江西電信企業(yè)信息化部 運(yùn)營效果 移動業(yè)務(wù)一次性開通 江西電信企業(yè)信息化部 22 2009年 6月統(tǒng)計數(shù)據(jù)（系統(tǒng)上線使用 3個月） 運(yùn)營效果 - 收入挽回與服務(wù)提升 江西電信企業(yè)信息化部 23 收入挽回數(shù)量 寬帶拆機(jī) 1863 彩鈴拆除 47055 寬帶速率下調(diào) 1227 計費(fèi)補(bǔ)錄 1505 144 32 避免投訴數(shù)量 彩鈴等業(yè)務(wù)平臺補(bǔ)錄 4815 移動網(wǎng)元補(bǔ)錄 5232 寬帶速率提高 5381 計費(fèi)拆機(jī) 189 預(yù)付費(fèi)補(bǔ)錄 351 本地網(wǎng) 預(yù)計年效益（元） 避免投訴數(shù) 南昌 883760 3769 九江 166323 6337 上饒 284040 1081 撫州 170628 738 宜春 687960 730 吉安 526272 2267 贛州 497628 415 景德鎮(zhèn) 189321 1452 萍鄉(xiāng) 107430 1094 新余 71840 887 鷹潭 57444 182 全省 3642646 18952 目 錄 數(shù)據(jù)組織 數(shù)據(jù)管理 系統(tǒng)支撐 運(yùn)營效果 經(jīng)驗體會 24 江西電信企業(yè)信息化部 形成長效工作機(jī)制的保證 江西電信企業(yè)信息化部 25 收入挽回、服務(wù)提升 基礎(chǔ)管理 支撐隊伍： 形成省、市兩級互動，專崗支撐的數(shù)據(jù)質(zhì)量稽核、清理隊伍 。 管理流程： 建立數(shù)據(jù)比對規(guī)則、處理流程、問題收集、通報機(jī)制 系統(tǒng)支撐： 以 領(lǐng)導(dǎo)重視 省公司領(lǐng)導(dǎo)重視： 省公司領(lǐng)導(dǎo)高度重視， 2009年成立數(shù)據(jù)管理能力提升2010年成立數(shù)據(jù)應(yīng)用能力提升 納入分公司領(lǐng)導(dǎo)考核：數(shù)據(jù)管理納入分公司領(lǐng)導(dǎo)助實現(xiàn)長效推進(jìn)。 集團(tuán)要求 收入保障： 以集團(tuán)收入保障數(shù)據(jù)稽核實施規(guī)范為指引，系統(tǒng)建設(shè)、業(yè)務(wù)運(yùn)營規(guī)范化； 進(jìn)一步強(qiáng)化省公司數(shù)據(jù)質(zhì)量工作 系統(tǒng)支撐力度不斷提升 江西電信企業(yè)信息化部 26 實現(xiàn)固網(wǎng)比對，及費(fèi)數(shù)據(jù)質(zhì)量管理 實現(xiàn) 括所有 為快速響應(yīng)全業(yè)務(wù)支撐的需要，獨(dú)立建設(shè) 數(shù)據(jù)質(zhì)量管理系統(tǒng) 實現(xiàn) 元、業(yè)務(wù)平臺的一致性、準(zhǔn)確性、完整性、及時性、安全性的全面數(shù)據(jù)質(zhì)量管理 演進(jìn)成融合所有數(shù)據(jù)質(zhì)量管理的 企業(yè)數(shù)據(jù)質(zhì)量管理系統(tǒng) 數(shù)據(jù)質(zhì)量管理系統(tǒng) 企業(yè)數(shù)據(jù)質(zhì)量管理系統(tǒng)