政務(wù)大數(shù)據(jù)交換共享平臺(tái)建設(shè)方案.doc
《政務(wù)大數(shù)據(jù)交換共享平臺(tái)建設(shè)方案.doc》由會(huì)員分享,可在線閱讀,更多相關(guān)《政務(wù)大數(shù)據(jù)交換共享平臺(tái)建設(shè)方案.doc(145頁(yè)珍藏版)》請(qǐng)?jiān)谘b配圖網(wǎng)上搜索。
**政務(wù)大數(shù)據(jù)交換共享平臺(tái)建設(shè)方案 目 錄 第一章 需求分析和項(xiàng)目建設(shè)的必要性 ...........................................4 1.1 項(xiàng)目建設(shè)目標(biāo)、內(nèi)容..........................................................................4 1.1.1 項(xiàng)目建設(shè)目標(biāo).........................................................................4 1.1.2 項(xiàng)目建設(shè)內(nèi)容.........................................................................4 1.2 編制依據(jù) ...........................................................................................5 1.3 與政務(wù)職能相關(guān)的社會(huì)問(wèn)題和政務(wù)目標(biāo)分析......................................6 1.3.1 社會(huì)問(wèn)題分析.........................................................................6 1.3.2 政務(wù)目標(biāo)分析.........................................................................8 1.4 業(yè)務(wù)功能、業(yè)務(wù)流程和業(yè)務(wù)量分析 ..................................................11 1.4.1 用戶(hù)角色分析.......................................................................11 1.4.2 業(yè)務(wù)功能分析.......................................................................12 1.4.3 業(yè)務(wù)流程 ..............................................................................14 1.4.4 業(yè)務(wù)量分析...........................................................................14 1.5 信息量分析和預(yù)測(cè) ...........................................................................15 1.5.1 存儲(chǔ)量分析...........................................................................15 1.5.2 處理量分析...........................................................................19 1.5.3 網(wǎng)絡(luò)流量分析.......................................................................20 1.6 系統(tǒng)功能和性能需求分析 ................................................................20 1.6.1 系統(tǒng)功能指標(biāo).......................................................................20 1.6.2 系統(tǒng)性能指標(biāo).......................................................................22 1.7 信息系統(tǒng)裝備和應(yīng)用現(xiàn)狀與差距......................................................22 1.7.1 現(xiàn)狀 .....................................................................................22 1.7.2 差距 .....................................................................................23 1.8 項(xiàng)目建設(shè)的必要性 ...........................................................................23 第二章 總體建設(shè)方案 .................................................................. 26 2.1 建設(shè)原則 .........................................................................................26 2.1.1 統(tǒng)一性原則...........................................................................26 2.1.2 可靠性原則...........................................................................26 2.1.3 可伸縮和可擴(kuò)展性原則.........................................................26 2.1.4 開(kāi)放性原則...........................................................................27 2.1.5 安全性原則...........................................................................27 2.1.6 高效性原則...........................................................................27 2.1.7 友好性原則...........................................................................27 2.1.8 可管理易維護(hù)性 ...................................................................28 -I- **政務(wù)大數(shù)據(jù)交換共享平臺(tái)建設(shè)方案 2.2 總體目標(biāo)與分期目標(biāo)........................................................................28 2.3 總體建設(shè)任務(wù)與分期建設(shè)內(nèi)容 .........................................................29 2.4 總體設(shè)計(jì)方案 ..................................................................................30 2.4.1 基礎(chǔ)設(shè)施層...........................................................................32 2.4.2 信息資源層...........................................................................33 2.4.3 應(yīng)用支撐層...........................................................................34 2.4.4 應(yīng)用層..................................................................................34 2.4.5 服務(wù)層..................................................................................34 2.4.6 安全保障體系.......................................................................34 2.4.7 標(biāo)準(zhǔn)規(guī)范體系.......................................................................35 第三章 項(xiàng)目建設(shè)方案 .................................................................. 36 3.1 標(biāo)準(zhǔn)規(guī)范建設(shè) ..................................................................................36 3.1.1 管理制度建設(shè).......................................................................36 3.1.2 標(biāo)準(zhǔn)規(guī)范建設(shè).......................................................................40 3.1.3 數(shù)據(jù)標(biāo)準(zhǔn)建設(shè).......................................................................43 3.1.4 標(biāo)準(zhǔn)規(guī)范索引.......................................................................46 3.2 信息資源規(guī)劃和數(shù)據(jù)庫(kù)設(shè)計(jì).............................................................47 3.2.1 信息資源規(guī)劃.......................................................................47 3.2.2 數(shù)據(jù)中心建設(shè).......................................................................53 3.3 門(mén)戶(hù)系統(tǒng)建設(shè) ..................................................................................69 3.3.1 信息資源政務(wù)門(mén)戶(hù)................................................................69 3.3.2 信息資源開(kāi)放門(mén)戶(hù)................................................................73 3.4 應(yīng)用系統(tǒng)建設(shè) ..................................................................................74 3.4.1 數(shù)據(jù)匯聚平臺(tái).......................................................................74 3.4.2 數(shù)據(jù)治理平臺(tái).......................................................................89 3.4.3 數(shù)據(jù)運(yùn)營(yíng)平臺(tái).....................................................................102 3.4.4 數(shù)據(jù)應(yīng)用平臺(tái).....................................................................104 3.5 四大基礎(chǔ)數(shù)據(jù)庫(kù)管理平臺(tái) ..............................................................108 3.5.1 人口庫(kù)................................................................................108 3.5.2 法人庫(kù)................................................................................ 111 3.5.3 經(jīng)濟(jì)庫(kù)................................................................................ 114 3.5.4 地理庫(kù)................................................................................ 115 3.6 應(yīng)用支撐系統(tǒng)設(shè)計(jì) ......................................................................... 116 3.6.1 統(tǒng)一用戶(hù)管理..................................................................... 116 3.6.2 統(tǒng)一應(yīng)用管理.....................................................................120 3.6.3 統(tǒng)一服務(wù)管理.....................................................................121 3.6.4 統(tǒng)一消息服務(wù).....................................................................123 3.6.5 統(tǒng)一日志服務(wù).....................................................................124 -II- **政務(wù)大數(shù)據(jù)交換共享平臺(tái)建設(shè)方案 3.7 安全保障體系建設(shè) .........................................................................124 3.7.1 建設(shè)目標(biāo) ............................................................................124 3.7.2 安全體系架構(gòu).....................................................................125 3.7.3 安全防護(hù)體系建設(shè)..............................................................125 3.7.4 安全管理體系建設(shè)..............................................................133 3.8 主要軟硬件選型原則和詳細(xì)軟硬件配置清單..................................136 3.8.1 主要軟硬件選型原則 ..........................................................136 3.8.2 詳細(xì)軟硬件配置清單 ..........................................................137 第四章 效益分析 ....................................................................... 138 4.1 經(jīng)濟(jì)效益 .......................................................................................138 4.2 社會(huì)效益 .......................................................................................140 第五章 項(xiàng)目風(fēng)險(xiǎn)與風(fēng)險(xiǎn)管理 ..................................................... 142 5.1 風(fēng)險(xiǎn)識(shí)別和分析.............................................................................142 5.1.1 組織風(fēng)險(xiǎn) ............................................................................142 5.1.2 管理風(fēng)險(xiǎn) ............................................................................142 5.1.3 業(yè)務(wù)風(fēng)險(xiǎn) ............................................................................142 5.1.4 技術(shù)風(fēng)險(xiǎn) ............................................................................142 5.2 風(fēng)險(xiǎn)對(duì)策和管理.............................................................................143 5.2.1 組織風(fēng)險(xiǎn)防范對(duì)策..............................................................143 5.2.2 管理風(fēng)險(xiǎn)防范對(duì)策..............................................................143 5.2.3 業(yè)務(wù)風(fēng)險(xiǎn)防范對(duì)策..............................................................144 5.2.4 技術(shù)風(fēng)險(xiǎn)防范對(duì)策..............................................................144 -III- **政務(wù)大數(shù)據(jù)交換共享平臺(tái)建設(shè)方案 第一章 需求分析和項(xiàng)目建設(shè)的必要性 1.1 項(xiàng)目建設(shè)目標(biāo)、內(nèi)容 1.1.1 項(xiàng)目建設(shè)目標(biāo) 電子政務(wù)公共數(shù)據(jù)開(kāi)放共享平臺(tái)項(xiàng)目建設(shè)目標(biāo)是,依托統(tǒng)一的 “云”數(shù)據(jù)中心建設(shè)統(tǒng)一的公共數(shù)據(jù)開(kāi)放共享平臺(tái)。集中機(jī)關(guān)各部 門(mén)業(yè)務(wù)應(yīng)用進(jìn)行,制定相關(guān)的數(shù)據(jù)規(guī)范和信息交換標(biāo)準(zhǔn),使機(jī)關(guān)各 部門(mén)業(yè)務(wù)系統(tǒng)依托統(tǒng)一的開(kāi)放平臺(tái)進(jìn)行開(kāi)發(fā)建設(shè)。確保部門(mén)之間系 統(tǒng)之間的互聯(lián)互通、數(shù)據(jù)共享,為大數(shù)據(jù)分析提供數(shù)據(jù)依據(jù)。 1.1.2 項(xiàng)目建設(shè)內(nèi)容 電子政務(wù)公共數(shù)據(jù)開(kāi)放共享平臺(tái)項(xiàng)目建設(shè)內(nèi)容包含:一套標(biāo)準(zhǔn) 規(guī)范、兩個(gè)數(shù)據(jù)門(mén)戶(hù)、四大應(yīng)用平臺(tái)、四大基礎(chǔ)數(shù)據(jù)庫(kù)和一個(gè)應(yīng)用 支撐平臺(tái)。 具體建設(shè)內(nèi)容包括: 1、一個(gè)應(yīng)用支撐平臺(tái) 為了對(duì)需要調(diào)用電子政務(wù)公共數(shù)據(jù)開(kāi)放共享平臺(tái)信息資源的政 府部門(mén)應(yīng)用系統(tǒng)進(jìn)行有效管理,面向各類(lèi)電子政務(wù)應(yīng)用,規(guī)劃建設(shè) 統(tǒng)一的應(yīng)用支撐平臺(tái),統(tǒng)一標(biāo)準(zhǔn)規(guī)范,通過(guò)用戶(hù)管理、應(yīng)用管理、 服務(wù)管理等核心組件,可以對(duì)接入系統(tǒng)有效管理、實(shí)現(xiàn)統(tǒng)一認(rèn)證及 單點(diǎn)登錄、統(tǒng)一消息服務(wù)。 -4- **政務(wù)大數(shù)據(jù)交換共享平臺(tái)建設(shè)方案 2、兩個(gè)數(shù)據(jù)門(mén)戶(hù) 針對(duì)政府部門(mén)用戶(hù)建設(shè)信息資源政務(wù)門(mén)戶(hù),針對(duì)企業(yè)、公眾用 戶(hù)建設(shè)信息資源開(kāi)放門(mén)戶(hù)。 3、四大應(yīng)用系統(tǒng) 建設(shè)承載電子政務(wù)公共數(shù)據(jù)匯聚平臺(tái)、數(shù)據(jù)治理平臺(tái)、數(shù)據(jù)運(yùn) 營(yíng)平臺(tái)和數(shù)據(jù)應(yīng)用平臺(tái)。 4、四大基礎(chǔ)數(shù)據(jù)庫(kù) 通過(guò)電子政務(wù)信息資源梳理,制定四大基礎(chǔ)數(shù)據(jù)庫(kù)的建庫(kù)、入 庫(kù)和管理規(guī)則,建立四大基礎(chǔ)數(shù)據(jù)庫(kù)管理平臺(tái),提供基礎(chǔ)庫(kù)內(nèi)容管 理、數(shù)據(jù)處理、共享和應(yīng)用功能。 四大基礎(chǔ)數(shù)據(jù)庫(kù)包括人口庫(kù)、法人庫(kù)、經(jīng)濟(jì)庫(kù)和地理庫(kù)。 5、一套標(biāo)準(zhǔn)規(guī)范 形成標(biāo)準(zhǔn)規(guī)范體系,包括管理制度、標(biāo)準(zhǔn)規(guī)范、數(shù)據(jù)標(biāo)準(zhǔn)等。 1.2 編制依據(jù) 1、中辦、國(guó)辦《2006-2020年國(guó)家信息化發(fā)展戰(zhàn)略》; 2、國(guó)辦《關(guān)于促進(jìn)電子政務(wù)協(xié)調(diào)發(fā)展的指導(dǎo)意見(jiàn)》; 3、國(guó)務(wù)院《促進(jìn)大數(shù)據(jù)發(fā)展行動(dòng)綱要》; 4、《國(guó)家電子政務(wù)總體框架》; 5、《國(guó)家電子政務(wù)“十二五”規(guī)劃》(工信部規(guī)〔2011〕567號(hào)); 6、《關(guān)于印發(fā)“十二五”國(guó)家政務(wù)信息化工程建設(shè)規(guī)劃的通知》 (發(fā)改高技〔2012〕1202號(hào)); -5- **政務(wù)大數(shù)據(jù)交換共享平臺(tái)建設(shè)方案 7、《GB/T 21063-2007 政務(wù)信息資源目錄體系》 8、《GB/T 21062-2007 政務(wù)信息資源交換體系》 9、《國(guó)家電子政務(wù)工程建設(shè)項(xiàng)目管理暫行辦法》 10、《政府信息公開(kāi)條例》 1.3 社會(huì)問(wèn)題和政務(wù)目標(biāo)分析 1.3.1 社會(huì)問(wèn)題分析 作為世界人口大國(guó),理論上我國(guó)數(shù)據(jù)資源儲(chǔ)量極為豐富,但大 部分政府?dāng)?shù)據(jù)(例如:交通、社保、稅收等),屬于結(jié)構(gòu)化數(shù)據(jù),距 離海量(volume)、速度(velocity)和多樣性(variety)的 3V屬性還 有一定距離,但從戰(zhàn)略角度而言差距并不大。 從數(shù)據(jù)規(guī)模來(lái)說(shuō),政府擁有國(guó)內(nèi)最為龐大的數(shù)據(jù)儲(chǔ)量。政府?dāng)?shù) 據(jù)廣泛存儲(chǔ)于各地、各級(jí)政府機(jī)關(guān)院所等不同單位、不同部門(mén)、不 同系統(tǒng)甚至不同網(wǎng)絡(luò)環(huán)境中,海量超脫于地理空間的政府?dāng)?shù)據(jù)亟待 存儲(chǔ)與處理。 從數(shù)據(jù)來(lái)源來(lái)說(shuō),由于各行業(yè)、各地采用的法律法規(guī)和標(biāo)準(zhǔn)并 不統(tǒng)一。傳統(tǒng)的電子政務(wù)信息系統(tǒng),僅為滿足特定功能而生,數(shù)據(jù) 結(jié)構(gòu)差異性大,大量數(shù)據(jù)存放于歷史遺留應(yīng)用中,委辦局間碎片化、 零散化、低效率的數(shù)據(jù)交互和分析普遍存在,導(dǎo)致政府?dāng)?shù)據(jù)來(lái)源極 為復(fù)雜。 從數(shù)據(jù)質(zhì)量和價(jià)值來(lái)說(shuō),企業(yè)的數(shù)據(jù)種類(lèi)單一化程度較高,而 政府?dāng)?shù)據(jù)涉及工商、稅務(wù)、交通、醫(yī)療、教育等領(lǐng)域,數(shù)據(jù)種類(lèi)繁 -6- **政務(wù)大數(shù)據(jù)交換共享平臺(tái)建設(shè)方案 多,事關(guān)百姓生活的方方面面,數(shù)據(jù)質(zhì)量較高,數(shù)據(jù)的潛在價(jià)值十 分可觀。 如上所述,政府?dāng)?shù)據(jù)的特點(diǎn)可以概括為:數(shù)據(jù)規(guī)模大、數(shù)據(jù)來(lái) 源和結(jié)構(gòu)復(fù)雜、數(shù)據(jù)價(jià)值高但利用率低。 政府收集了大量有價(jià)值的數(shù)據(jù),通過(guò)這些數(shù)據(jù),可以更好地了 解國(guó)家資源使用情況,政府開(kāi)支情況,土地交易和管理情況,這些 將不僅強(qiáng)化政府責(zé)任,提升治理能力,還能提高資金支出效率,為 人民提供更多更好的服務(wù)選擇。 1、政府?dāng)?shù)據(jù)體量越來(lái)越大 截至 2014 年,中國(guó)共有 664 個(gè)城市,2852 個(gè)行政縣,40446 個(gè)行政鄉(xiāng)。當(dāng)前,中國(guó)中央和省級(jí)政務(wù)部門(mén)主要業(yè)務(wù)電子政務(wù)覆蓋 率已經(jīng)達(dá)到 70%。據(jù)粗略估算,全國(guó)政府大數(shù)據(jù)加起來(lái)相當(dāng)于數(shù)百 個(gè)阿里巴巴的體量。而隨著硬件技術(shù)的進(jìn)步,對(duì)于數(shù)據(jù)采集精度、 采集頻率、數(shù)據(jù)存儲(chǔ)等能力在增強(qiáng),使得數(shù)據(jù)規(guī)模仍有提升空間, 近幾年數(shù)據(jù)中心的新建和擴(kuò)容呈現(xiàn)井噴式的發(fā)展,這是以硬件基礎(chǔ) 設(shè)施帶動(dòng)的變革,促使軟件技術(shù)也得到了快速發(fā)展。 隨著數(shù)據(jù)體量的增長(zhǎng),大數(shù)據(jù)處理、大數(shù)據(jù)應(yīng)用分析的門(mén)檻將 會(huì)逐漸提高。 2、多部門(mén)協(xié)作成為常態(tài)化 復(fù)雜的城市治理問(wèn)題,對(duì)跨部門(mén)的協(xié)作提出了更高的要求,過(guò) 去個(gè)別部門(mén)間存在的職責(zé)交叉分散、協(xié)調(diào)運(yùn)行不暢等問(wèn)題。隨著“大 部制”完善,建立健全了部門(mén)間協(xié)同運(yùn)行機(jī)制,逐步實(shí)現(xiàn)“多個(gè)部 -7- **政務(wù)大數(shù)據(jù)交換共享平臺(tái)建設(shè)方案 門(mén)、一個(gè)政府”目標(biāo)。隨著部門(mén)與部門(mén)的邊界越來(lái)越模糊,政府?dāng)?shù) 據(jù)跨部門(mén)共享共用已不再是亮點(diǎn)和創(chuàng)新,建立常態(tài)化共享機(jī)制成為 政府大數(shù)據(jù)建設(shè)的入門(mén)。 3、國(guó)家治理不能僅僅依靠政府 由于時(shí)間和技術(shù)的局限性,以往國(guó)家治理基本是政府下達(dá)指令、 向下逐層執(zhí)行的“開(kāi)環(huán)過(guò)程”。如今隨著互聯(lián)網(wǎng)發(fā)展,人民對(duì)于政 府的期望越來(lái)越高,國(guó)家不僅要在政策出臺(tái)前廣泛征求、準(zhǔn)確把握 民意;出臺(tái)后還需要獲得執(zhí)行反饋,并適時(shí)調(diào)整,政府治理變?yōu)橄? 達(dá)指令—執(zhí)行—反饋的“閉環(huán)過(guò)程”,需要借助社會(huì)各方面力量參 與到國(guó)家治理過(guò)程之中。無(wú)論是社會(huì)自治還是合作共建,政府?dāng)?shù)據(jù) 共享開(kāi)放都是大前提。 4、社會(huì)普遍開(kāi)始重視數(shù)據(jù)安全和隱私 數(shù)據(jù)如同一把雙刃劍,在帶來(lái)便利的同時(shí)也帶來(lái)了很多安全隱 患,隨著全球各地用戶(hù)信息安全事件頻出,讓人們開(kāi)始感受到“數(shù) 據(jù)”與生活接觸如此緊密,數(shù)據(jù)泄露可以對(duì)個(gè)人的生活質(zhì)量造成極 大的威脅。數(shù)據(jù)安全和隱私保護(hù)不僅是公民個(gè)人的責(zé)任,對(duì)采集數(shù) 據(jù)和共享數(shù)據(jù)的政府單位,也有義務(wù)保障數(shù)據(jù)的安全和隱私,此過(guò) 程中,政策、技術(shù)、意識(shí)缺一不可。需嚴(yán)格依照相關(guān)規(guī)范文件,將 安全運(yùn)營(yíng)意識(shí)滲透到政府?dāng)?shù)據(jù)開(kāi)放中。 1.3.2 政務(wù)目標(biāo)分析 1、實(shí)現(xiàn)政務(wù)公開(kāi),打造透明政府 -8- **政務(wù)大數(shù)據(jù)交換共享平臺(tái)建設(shè)方案 電子政務(wù)公共數(shù)據(jù)開(kāi)放共享促進(jìn)政府和公眾互動(dòng),讓政務(wù)透明, 幫助政府進(jìn)行社會(huì)管理和解決社會(huì)難題,大數(shù)據(jù)時(shí)代下,政府是整 合開(kāi)放的平臺(tái),是一個(gè)大數(shù)據(jù)共享平臺(tái), 它建立了公眾與政府間的 溝通渠道,越來(lái)越多的國(guó)家和組織利用其開(kāi)展民意調(diào)查,通過(guò)在線 交互讓民眾成為政務(wù)流程的節(jié)點(diǎn),透明政務(wù),讓公眾參與到政策制 定與執(zhí) 行、效果評(píng)估和監(jiān)督之中,使民眾參政議政成為可能。大數(shù) 據(jù)推進(jìn)政府信息資源進(jìn)一步開(kāi)放,政府信息開(kāi)發(fā)利用效率倍增,促 進(jìn)經(jīng)濟(jì)社會(huì)快速發(fā)展。 2、實(shí)現(xiàn)數(shù)據(jù)融合,打造智慧政府 電子政務(wù)公共數(shù)據(jù)開(kāi)放共享真正跨越了政府內(nèi)部協(xié)同的鴻溝, 大大提高工作效率,降低政府運(yùn)行成本。其一,政府內(nèi)部協(xié)同除思 想理念上的障礙外,技術(shù)上也存在一定障礙,隨著大數(shù)據(jù)技術(shù)發(fā)展, 跨越系統(tǒng)、跨越平臺(tái)、跨越數(shù)據(jù)結(jié)構(gòu)的政府將在技術(shù)上使政府內(nèi)部 縱向、橫向部門(mén)得以流暢協(xié)同。其二,由于利用大數(shù)據(jù)技術(shù),數(shù)據(jù) 獲取、處理及分析響應(yīng)時(shí)間大幅減少,工作效率明顯提高,同時(shí)降 低了政府開(kāi)支。例如,政府利用大數(shù)據(jù)對(duì)社會(huì)人群進(jìn)行細(xì)分,對(duì)不 同人群進(jìn)行針對(duì)性服務(wù)和政策施行。 3、實(shí)現(xiàn)科學(xué)決策,打造責(zé)任政府 電子政務(wù)公共數(shù)據(jù)開(kāi)放共享提高政府決策的科學(xué)性和精準(zhǔn)性, 提高政府預(yù)測(cè)預(yù)警能力以及應(yīng)急響應(yīng)能力,越來(lái)越多的政府?dāng)P棄經(jīng) 驗(yàn)和直覺(jué),依賴(lài)電子政務(wù)的數(shù)據(jù)和分析進(jìn)行決策?,F(xiàn)在大數(shù)據(jù)又超 越了傳統(tǒng)的數(shù)據(jù)分析方法,不但是對(duì)大數(shù)據(jù)分析挖掘,對(duì)言論、圖 -9- **政務(wù)大數(shù)據(jù)交換共享平臺(tái)建設(shè)方案 表等都可以進(jìn)行深度挖掘、人工智能。大數(shù)據(jù)的深入及廣泛應(yīng)用會(huì) 給政府帶來(lái)科學(xué)和精準(zhǔn)的決策支持。 4、為**電子政務(wù)提供一個(gè)安全可靠的信息資源存儲(chǔ)中心 對(duì)各部門(mén)的共享交換的數(shù)據(jù)資源進(jìn)行統(tǒng)一的規(guī)劃管理和應(yīng)用, 建設(shè)集約化的數(shù)據(jù)資源存儲(chǔ)中心,從而避免了各部門(mén)重復(fù)建設(shè)工作; 同時(shí)提高數(shù)據(jù)安全方面的建設(shè),從硬件設(shè)備、網(wǎng)絡(luò)、信息資源、應(yīng) 用系統(tǒng)、管理平臺(tái)、數(shù)據(jù)庫(kù)等方面的全面保證數(shù)據(jù)的安全性,并根 據(jù)用戶(hù)的不同訪問(wèn)需求、防止惡意入侵、病毒防護(hù)、分區(qū)域的安全 設(shè)計(jì),并在應(yīng)用服務(wù)上提供安全檢測(cè)服務(wù)。 5、為**電子政務(wù)提供一個(gè)高效的應(yīng)用服務(wù)平臺(tái) **電子政務(wù)公共數(shù)據(jù)開(kāi)放共享平臺(tái)的建設(shè),為政府應(yīng)用系統(tǒng)和 信息資源的高效管理和服務(wù)提供手段,通過(guò)對(duì)相關(guān)的基礎(chǔ)信息、業(yè) 務(wù)信息、服務(wù)信息進(jìn)行管理,實(shí)現(xiàn)**電子政務(wù)公共數(shù)據(jù)開(kāi)放共享平 臺(tái)的信息管理和服務(wù)功能。城市級(jí)交換共享平臺(tái)則對(duì)各部門(mén)的信息 資源提供交換共享支撐,以提高信息資源的綜合利用水平。通過(guò)整 合各部門(mén)數(shù)據(jù)信息,建設(shè)基礎(chǔ)信息庫(kù),并提供對(duì)外服務(wù),實(shí)現(xiàn)**電 子政務(wù)公共數(shù)據(jù)開(kāi)放共享平臺(tái)的服務(wù)功能。 6、為**電子政務(wù)提供一個(gè)長(zhǎng)效和可維護(hù)的信息服務(wù)體系 **電子政務(wù)公共數(shù)據(jù)開(kāi)放共享平臺(tái)的建設(shè)要對(duì)**電子政務(wù)體系 提供長(zhǎng)久的服務(wù),因此在管理和運(yùn)維上必需配備相應(yīng)的支撐。這一 方面取決于管理制度的完善、管理手段的完備和對(duì)管理本身的技術(shù) 支撐,另一方面,也取決于人員的配備和運(yùn)維體系的建立。 -10- **政務(wù)大數(shù)據(jù)交換共享平臺(tái)建設(shè)方案 1.4 業(yè)務(wù)功能、業(yè)務(wù)流程和業(yè)務(wù)量分析 1.4.1 用戶(hù)角色分析 **電子政務(wù)公共數(shù)據(jù)開(kāi)放共享平臺(tái)的用戶(hù)分為:領(lǐng)導(dǎo)、各部門(mén)、 企業(yè)單位及社會(huì)公眾。 1.4.1.1 政府領(lǐng)導(dǎo) **電子政務(wù)公共數(shù)據(jù)開(kāi)放共享平臺(tái)有價(jià)值的數(shù)據(jù)、行政地圖、 決策方法和應(yīng)急進(jìn)行融合,采用大數(shù)據(jù)分析技術(shù),有利于各級(jí)領(lǐng)導(dǎo)、 管理決策人員方便、直觀、形象地進(jìn)行各種分析,從而使統(tǒng)計(jì)決策 的科學(xué)化、人性化、智能化管理走上一個(gè)新臺(tái)階。 1.4.1.2 政府部門(mén) 可以向**電子政務(wù)公共數(shù)據(jù)開(kāi)放共享平臺(tái)提供數(shù)據(jù)或使用平臺(tái) 提供的數(shù)據(jù);業(yè)務(wù)部門(mén)之間可以通過(guò)系統(tǒng)平臺(tái)交換共享數(shù)據(jù);遵循 標(biāo)準(zhǔn)規(guī)范進(jìn)行業(yè)務(wù)系統(tǒng)的建造和改進(jìn),可實(shí)現(xiàn)業(yè)務(wù)系統(tǒng)和數(shù)據(jù)開(kāi)放 共享平臺(tái)的對(duì)接。 1.4.1.3 社會(huì)公眾 可以依托**電子政務(wù)公共數(shù)據(jù)開(kāi)放共享平臺(tái)提供的應(yīng)用服務(wù)對(duì) 公眾需求做出快速反應(yīng),公眾可以更直接廣泛的獲得政府提供的服 務(wù),如證照協(xié)同、社保電子傳遞等。 1.4.1.4 企業(yè)單位 通過(guò)**電子政務(wù)公共數(shù)據(jù)開(kāi)放共享平臺(tái)提供的應(yīng)用服務(wù)可以方 -11- **政務(wù)大數(shù)據(jù)交換共享平臺(tái)建設(shè)方案 便企業(yè)進(jìn)行業(yè)務(wù)級(jí)信息查詢(xún),并可通過(guò)業(yè)務(wù)協(xié)同對(duì)企業(yè)提供事項(xiàng)審 批、信息推送服務(wù)。 1.4.2 業(yè)務(wù)功能分析 1.4.2.1 數(shù)據(jù)共享 在政府部門(mén)內(nèi)部強(qiáng)調(diào)的是共享共用。先把政府部門(mén)內(nèi)部及部門(mén) 之間數(shù)據(jù)共享的工作做起來(lái)。各級(jí)政府都以數(shù)據(jù)應(yīng)用為導(dǎo)向,需要 什么數(shù)據(jù)就共享什么數(shù)據(jù)。 部門(mén)間的信息共享,綜合考慮管理難度和技術(shù)難度建議分為三 個(gè)階段:“條線內(nèi)部門(mén)共享”、“平級(jí)跨部門(mén)共享”、“跨層級(jí)和跨區(qū)域 的共享”,通過(guò)統(tǒng)一規(guī)劃,逐步推進(jìn)的策略,打造部門(mén)間信息資源共 享共用的新格局。 1.4.2.2 數(shù)據(jù)開(kāi)放 對(duì)社會(huì)的數(shù)據(jù)開(kāi)放,先從方便百姓生活又不是很敏感的數(shù)據(jù)開(kāi) 始。特別是涉及公共安全、公共利益的數(shù)據(jù),提供公共服務(wù)的機(jī)構(gòu) 或企業(yè)有義務(wù)在一定前提條件下開(kāi)放,這樣一些可以預(yù)警、預(yù)防的 群體性事件就能夠避免。 按照社會(huì)關(guān)注程度、數(shù)據(jù)量大小和具體實(shí)施難度,數(shù)據(jù)開(kāi)放建 議分為三個(gè)階段:“業(yè)務(wù)統(tǒng)計(jì)數(shù)據(jù)”、“少量高頻數(shù)據(jù)”、“重點(diǎn)業(yè)務(wù)數(shù) 據(jù)”。通過(guò)以安全為前提,重點(diǎn)關(guān)注優(yōu)先試點(diǎn),逐步擴(kuò)大范圍為原則, 穩(wěn)步推行數(shù)據(jù)服務(wù)開(kāi)放。 -12- **政務(wù)大數(shù)據(jù)交換共享平臺(tái)建設(shè)方案 1.4.2.3 數(shù)據(jù)融合 政務(wù)大數(shù)據(jù)歸根結(jié)底,還是要面向行業(yè)應(yīng)用的,需要基于不同 的業(yè)務(wù)部門(mén)開(kāi)展,并和現(xiàn)有平臺(tái)建立聯(lián)系。 融合應(yīng)用可以分為“數(shù)據(jù)融合”、“業(yè)務(wù)融合”、“產(chǎn)業(yè)融合”三個(gè)層 次:其中,數(shù)據(jù)融合是把本單位數(shù)據(jù)、從其他單位共享的數(shù)據(jù),以 及互聯(lián)網(wǎng)等社會(huì)相關(guān)的數(shù)據(jù),相互融合,相互比對(duì),建立融合數(shù)據(jù) 資源中心,統(tǒng)一數(shù)據(jù)標(biāo)準(zhǔn)和口徑。 業(yè)務(wù)融合主要圍繞各行業(yè)的特定業(yè)務(wù)場(chǎng)景,比如交通出行、醫(yī) 療保障、民生服務(wù)等領(lǐng)域,建設(shè)智慧應(yīng)用,形成行業(yè)業(yè)務(wù)的決策分 析體系,支撐城市運(yùn)行和城市治理的方方面面。 產(chǎn)業(yè)融合,隨著一大批大數(shù)據(jù)處理、大數(shù)據(jù)分析、大數(shù)據(jù)運(yùn)營(yíng) 企業(yè)的興起,政府?dāng)?shù)據(jù)將不單單是自建自用,通過(guò)建設(shè)數(shù)據(jù)運(yùn)營(yíng)平 臺(tái),數(shù)據(jù)交易平臺(tái)等形式,引入社會(huì)資本共同參與城市建設(shè)和社會(huì) 治理,實(shí)現(xiàn)向集約型、服務(wù)型、智慧型政府的轉(zhuǎn)變。 -13- **政務(wù)大數(shù)據(jù)交換共享平臺(tái)建設(shè)方案 1.4.3 業(yè)務(wù)流程 開(kāi) 始 從 緩 沖 區(qū) 增 量 數(shù) 據(jù) 表 中 獲 取 人 口 增 量 數(shù) 據(jù) 根 據(jù) 證 件 類(lèi) 型 判 斷 證 件 號(hào) 是 否 符 合 規(guī) 范 否 通 過(guò) 證 件 號(hào) 判 斷 該 人 是 否 存 在 于 人 口 主 表 中 將 該 條 增 量 數(shù) 據(jù) 插 入 異 常 表 中 否 是 將 人 口 庫(kù) 【 人 口 增 量 數(shù) 據(jù) 表 】 中 該 人 口 記 錄 刪 除 通 過(guò) 【 部 門(mén) 業(yè) 務(wù) 系 統(tǒng) 提 供 字 段 配 置 表 】 得 到 該 業(yè) 務(wù) 系 統(tǒng) 需 采 集 的 字 段 且 循 環(huán) 這 些 字 段 判 斷 人 口 庫(kù) 該 字 段 值 的 來(lái) 源 是 否 是 該 業(yè) 務(wù) 系 統(tǒng) 將 該 人 口 記 錄 插 入 到 【 人 口 基 礎(chǔ) 信 息 表 】 及 【 專(zhuān) 題 表 】 是 是 否 根 據(jù) 證 件 號(hào) 碼 和 類(lèi) 型 更 新 【 人 口 基 礎(chǔ) 信 息 表 】 及 【 專(zhuān) 題 表 】 的 字 段 否 判 斷 新 采 集 的 字 段 值 是 否 為 空 否 將 該 人 口 記 錄 字 段 來(lái) 源 插 入 到 【 字 段 來(lái) 源 表 】 判 斷 人 口 庫(kù) 庫(kù) 該 字 段 值 是 否 為 空 否 否 判 斷 該 業(yè) 務(wù) 系 統(tǒng) 的 數(shù) 據(jù) 是 是 否 是 業(yè) 務(wù) 上 的 新 增 ? 否 是 根 據(jù) 證 件 號(hào) 碼 和 類(lèi) 型 更 新 【 人 口 基 礎(chǔ) 信 息 表 】 及 【 專(zhuān) 題 表 】 的 字 段 值 是 判 斷 該 業(yè) 務(wù) 系 統(tǒng) 是 否 為 該 字 段 的 權(quán) 威 來(lái) 源 更 新 【 字 段 來(lái) 源 表 】 中 該 字 段 的 來(lái) 源 循 環(huán) 人 口 庫(kù) 需 采 集 該 業(yè) 務(wù) 系 統(tǒng) 的 字 段 是 否 結(jié) 束 將 人 口 庫(kù) 【 人 口 增 量 數(shù) 據(jù) 表 】 中 該 人 口 記 錄 刪 除 結(jié) 束 1.4.4 業(yè)務(wù)量分析 業(yè)務(wù)量分析可以從平臺(tái)交互量、每天總用戶(hù)數(shù)(個(gè))、每天每個(gè) 用戶(hù)平均執(zhí)行操作數(shù)、高峰時(shí)段交互量占全天交互量的百分比、高 峰時(shí)段持續(xù)時(shí)間(小時(shí))、高峰時(shí)段在線用戶(hù)數(shù)(個(gè))等方面指標(biāo)進(jìn) 行綜合估算。**互聯(lián)網(wǎng)大數(shù)據(jù)分析平臺(tái)的業(yè)務(wù)量估算如下表所示: 表 3-1 業(yè)務(wù)量估算 序號(hào) 數(shù)據(jù)名稱(chēng) 平臺(tái)交互量 數(shù)據(jù)量 200(日均) 100 1 2 3 每天總用戶(hù)數(shù)(個(gè)) 每天每個(gè)用戶(hù)平均執(zhí)行操作數(shù) 高峰時(shí)段交互量占全天交互量的 百分比 1000 4 60% -14- **政務(wù)大數(shù)據(jù)交換共享平臺(tái)建設(shè)方案 序號(hào) 數(shù)據(jù)名稱(chēng) 數(shù)據(jù)量 4(9:00-11:00,15:00-17:00) 60(日均) 5 6 高峰時(shí)段持續(xù)時(shí)間(小時(shí)) 高峰時(shí)段在線用戶(hù)數(shù)(個(gè)) 1.5 信息量分析和預(yù)測(cè) 1.5.1 存儲(chǔ)量分析 本項(xiàng)目中存儲(chǔ)的數(shù)據(jù)主要包括兩大部分:系統(tǒng)網(wǎng)站群的在線行 為數(shù)據(jù)和國(guó)內(nèi)外互聯(lián)網(wǎng)重點(diǎn)渠道、信息源以及政府網(wǎng)站群的在線內(nèi) 容數(shù)據(jù)。在線用戶(hù)行為數(shù)據(jù)以符合 W3C格式標(biāo)準(zhǔn)的日志形式進(jìn)行存 儲(chǔ)。網(wǎng)站內(nèi)容更新數(shù)據(jù)直接存到關(guān)系型數(shù)據(jù)庫(kù)或其他非關(guān)系型數(shù)據(jù) 庫(kù)中。 1、在線行為數(shù)據(jù)存儲(chǔ)量 網(wǎng)站群的在線行為數(shù)據(jù)存儲(chǔ)主要分為三部分: (1)接收數(shù)據(jù),是系統(tǒng)儲(chǔ)存的原始數(shù)據(jù)。 (2)結(jié)構(gòu)化數(shù)據(jù),將原始數(shù)據(jù)進(jìn)行數(shù)據(jù)清洗和去重后進(jìn)行結(jié)構(gòu) 化后存儲(chǔ)。 (3)分析數(shù)據(jù)庫(kù),將結(jié)構(gòu)化的數(shù)據(jù)進(jìn)行分析預(yù)計(jì)算后存儲(chǔ)。 按照本項(xiàng)目需要涵蓋**系統(tǒng)網(wǎng)站群的 500個(gè)網(wǎng)站,每個(gè)網(wǎng)站的 日平均訪問(wèn)按照 10000個(gè) PV計(jì)算,預(yù)計(jì)每日需要處理的總的 PV數(shù) 為 500萬(wàn)。 n 接收數(shù)據(jù)的測(cè)算依據(jù)及結(jié)論 其中接收數(shù)據(jù)庫(kù)的主要條目占用空間,如下表所示: 單個(gè) PV所要儲(chǔ)存的信息 空間大?。ㄗ止?jié)) 訪問(wèn)路徑信息 1600 -15- **政務(wù)大數(shù)據(jù)交換共享平臺(tái)建設(shè)方案 來(lái)源路徑信息 1120 其他信息(會(huì)話標(biāo)識(shí)、Cookie標(biāo)識(shí)、時(shí)間信息等) 256 匯總 2976 單個(gè) Session所要儲(chǔ)存的信息(1個(gè) Session大約產(chǎn)生 4PV) 訪問(wèn)路徑信息 512 1120 128 來(lái)源路徑信息 客戶(hù)端信息(IP、瀏覽器等) 其他信息(會(huì)話標(biāo)識(shí)、Cookie標(biāo)識(shí)、時(shí)間信息等) 256 匯總 2016 單個(gè) Cookie所要儲(chǔ)存的信息(1個(gè) Cookie大約產(chǎn)生 1.25Session) 訪問(wèn)路徑信息 512 256 768 其他信息(Cookie標(biāo)識(shí)、時(shí)間信息等) 匯總 例如: 按照其他同類(lèi)項(xiàng)目的數(shù)據(jù)估算,PV和 Session數(shù)量比為 4:1, Session和 Cookie的數(shù)量比為 1.25:1。則 500萬(wàn)的 PV會(huì)產(chǎn)生 125 萬(wàn) 的 Session 以 及 產(chǎn) 生 100 萬(wàn) 的 Cookie, 總 占 據(jù) 空 間 為 5000000*2976+1250000*2016+1000000*768=18G,包括索引以及其他 表占用的空間之后,約為 20G。原始日志存儲(chǔ)到 SQL Server中會(huì)采 用壓縮技術(shù),大小將降為 5G。 結(jié)論:對(duì)于接收數(shù)據(jù)庫(kù),采用了壓縮和優(yōu)化技術(shù)后,每 500 萬(wàn) PV 至少需要 25G 的儲(chǔ)存空間。 n 結(jié)構(gòu)化數(shù)據(jù)的測(cè)算依據(jù)及結(jié)論 **系統(tǒng)政府網(wǎng)站群監(jiān)測(cè)分析調(diào)度系統(tǒng)的結(jié)構(gòu)化數(shù)據(jù)庫(kù)和原始數(shù) 據(jù)庫(kù)存儲(chǔ)的數(shù)據(jù)一致,但是經(jīng)過(guò)對(duì)原始數(shù)據(jù)庫(kù)的數(shù)據(jù)去冗余以及結(jié) 構(gòu)化,用外鍵壓縮了原來(lái)直接存儲(chǔ)在各表里的信息,大小會(huì)變?yōu)樵? 始數(shù)據(jù)的一半,也就是 2.5G。 -16- **政務(wù)大數(shù)據(jù)交換共享平臺(tái)建設(shè)方案 結(jié)論:對(duì)于結(jié)構(gòu)化數(shù)據(jù)庫(kù),采用了壓縮和優(yōu)化技術(shù)后,每 500 萬(wàn) PV至少需要 2.5GB的儲(chǔ)存空間。 n 分析數(shù)據(jù)的測(cè)算依據(jù)及結(jié)論 **系統(tǒng)政府網(wǎng)站群監(jiān)測(cè)分析調(diào)度系統(tǒng)的分析數(shù)據(jù)庫(kù)內(nèi)容基本是 結(jié)構(gòu)化數(shù)據(jù)庫(kù)的拷貝,大小與結(jié)構(gòu)化數(shù)據(jù)庫(kù)基本一致,也為 2.5G。 結(jié)論:對(duì)于“決策支持系統(tǒng)”的分析數(shù)據(jù)庫(kù),采用了壓縮和優(yōu) 化技術(shù)后,每 500萬(wàn) PV至少需要 2.5GB的儲(chǔ)存空間。 綜上所述,在不做任何備份的情況下,每 500萬(wàn)的 PV,需要文 件存儲(chǔ)空間為:25GB + 2.5GB + 2.5GB=30G。 到 2015年底的存儲(chǔ)量為 10.5T,到 2019年底的存儲(chǔ)量為 52.5T, 具體測(cè)算如下表所示: 接收日志 明細(xì) 匯總數(shù)據(jù) 合計(jì) 875G 單月數(shù)據(jù)量(G) 保留周期(月) 25*30=750 2.5*30=62.5 2.5*30=62.5 60 60 60 60 一年內(nèi)需要存儲(chǔ) 五年內(nèi)需要存儲(chǔ) 9000 45000 750 750 10.5T 52.5T 3750 3750 2、在線內(nèi)容數(shù)據(jù)存儲(chǔ)量 n 國(guó)內(nèi)外互聯(lián)網(wǎng)重點(diǎn)渠道和信息源 按照本項(xiàng)目需要面向國(guó)內(nèi)外互聯(lián)網(wǎng)重點(diǎn)渠道和信息源進(jìn)行在線 內(nèi)容采集爬取,按照覆蓋包括主流媒體在內(nèi)的 200個(gè)信息源,每個(gè) 信息源爬取 3級(jí)計(jì)算,平均每天可以爬取更新的總的頁(yè)面數(shù)約為 30 萬(wàn) 個(gè) , 每 個(gè) 頁(yè) 面 按 照 100KB 計(jì) 算 , 共 需 要 占 用 的 空 間 為 30W*1000KB=30G。 -17- **政務(wù)大數(shù)據(jù)交換共享平臺(tái)建設(shè)方案 到 2015年底的存儲(chǔ)量為 10.8T,到 2019年底的存儲(chǔ)量為 54T, 具體測(cè)算如下表所示: 國(guó)內(nèi)外互聯(lián)網(wǎng)重點(diǎn)渠道和信息源 單月數(shù)據(jù)量(G) 一年內(nèi)需要存儲(chǔ) 五年內(nèi)需要存儲(chǔ) 30萬(wàn)*30=900G 10.8T 54T n **級(jí)以上政府網(wǎng)站群 **級(jí)以上政府網(wǎng)站群網(wǎng)站內(nèi)容更新數(shù)據(jù)主要包括以下三部分: 網(wǎng)站更新頁(yè)面、網(wǎng)站更新的入口,網(wǎng)站更新的白名單。 按照本項(xiàng)目需要涵蓋**系統(tǒng)網(wǎng)站群及**各級(jí)政府網(wǎng)站群的 6500個(gè)網(wǎng)站,平均每個(gè)網(wǎng)站每天更新 10個(gè)頁(yè)面,就是 6.5萬(wàn)個(gè)。 如果每天爬取 10次,就是 106500=6.5 萬(wàn)個(gè)入口,每個(gè)網(wǎng)站 算 10個(gè)白名單,那就是 10650010=65 萬(wàn)個(gè)白名單。 總共是 6.5萬(wàn)+6.5萬(wàn)+65萬(wàn)=78萬(wàn),共需要占用的空間為 78萬(wàn) 頁(yè)*100KB/頁(yè)=78G。 到 2015 年底的存儲(chǔ)量為 28.08T,到 2019 年底的存儲(chǔ)量為 140.4T,具體測(cè)算如下表所示: 更新頁(yè)面數(shù)據(jù) 6.5*30=195 2.34T 網(wǎng)站入口數(shù)據(jù) 白名單數(shù)據(jù) 合計(jì) 單月數(shù)據(jù)量(G) 一年內(nèi)需要存儲(chǔ) 五年內(nèi)需要存儲(chǔ) 6.5*30=195 65*30=1950 2340G 2.34T 11.7T 23.4T 117T 28.08T 140.4T 11.7T 綜上所述,系統(tǒng)的數(shù)據(jù)存儲(chǔ)總量如下表所示: 表 3-2 數(shù)據(jù)量估算表 序號(hào) 數(shù)據(jù)名稱(chēng) 初始量 10.5T 5年內(nèi)的增量 1 2 在線行為數(shù)據(jù) 52.5T 54T 互聯(lián)網(wǎng)重點(diǎn)渠道和信息源 **團(tuán)以上政府網(wǎng)站群 10.8T 3 28.08T 49.38T 140.4T 246.9T 合計(jì) -18- **政務(wù)大數(shù)據(jù)交換共享平臺(tái)建設(shè)方案 1.5.2 處理量分析 (1)網(wǎng)站群用戶(hù)訪問(wèn)行為數(shù)據(jù)處理量分析 以每天 725萬(wàn)個(gè)客戶(hù)端訪問(wèn)(包括 500萬(wàn) PV、100萬(wàn) Session、 125萬(wàn) Cookie)并發(fā)計(jì)算,結(jié)合在線行為數(shù)據(jù)的接收主要集中在工 作時(shí)間,7250000/8小時(shí)/60分鐘/60秒=251個(gè)/秒,日志接收服務(wù) 器接受每秒鐘接收日志請(qǐng)求 251個(gè),遠(yuǎn)遠(yuǎn)低于系統(tǒng)的每秒接收到的 正常數(shù)(該值通常為 7000-9000)。 根據(jù)日志接收每秒鐘的并發(fā)量為 251,因此系統(tǒng)的數(shù)據(jù)接收只 需要再用兩臺(tái)服務(wù)器做負(fù)載均衡即可。但是為了防止數(shù)據(jù)接收網(wǎng)站 的域名出現(xiàn)單點(diǎn)故障,因此系統(tǒng)的數(shù)據(jù)接收采用雙域名備份,即每 個(gè)域名對(duì)應(yīng)兩臺(tái)數(shù)據(jù)接收服務(wù)器,一共四臺(tái)。 根據(jù)系統(tǒng)需要滿足**政府網(wǎng)站智能分析系統(tǒng)診斷的需要,目前 系統(tǒng)的單臺(tái)服務(wù)器的數(shù)據(jù)處理能力為 400家左右,因此需要 4臺(tái)數(shù) 據(jù)庫(kù)服務(wù)器,另外需要兩臺(tái)相同配置的數(shù)據(jù)庫(kù)服務(wù)器作為備份。 (2)其他在線內(nèi)容數(shù)據(jù)處理量分析 一是系統(tǒng)需要支持對(duì)不少于 108萬(wàn)個(gè)數(shù)據(jù)采集點(diǎn)每天至少一次 輪詢(xún)抓取,同時(shí)對(duì)抓取回的數(shù)據(jù)進(jìn)行數(shù)據(jù)預(yù)處理和清洗入庫(kù)工作, 二是需要實(shí)現(xiàn)對(duì)存量數(shù)據(jù)和增量數(shù)據(jù)的指標(biāo)自動(dòng)抽取和更新工作, 三是需要支持前臺(tái)交互系統(tǒng)的交互分析挖掘需求。 結(jié)合以上幾部分需求,預(yù)計(jì)所需的內(nèi)容數(shù)據(jù)處理服務(wù)器約 50 臺(tái)。其中較高性能處理服務(wù)器(單機(jī) 20 核服務(wù)器 CPU:2660*2 MEM:144G DISK:SSD 480G*2+SAS 4T*6,萬(wàn)兆網(wǎng)卡,遠(yuǎn)程管理,雙電 -19- **政務(wù)大數(shù)據(jù)交換共享平臺(tái)建設(shè)方案 源)10 臺(tái),中等性能處理服務(wù)器(單機(jī) 12 核服務(wù)器,CPU:2620*2 MEM:32G DISK:4T*10,萬(wàn)兆網(wǎng)卡,遠(yuǎn)程管理,雙電源)10臺(tái)。較低 性能服務(wù)器(單機(jī) 12 核服務(wù)器,CPU:2620*2 MEM:72G DISK:SSD 480G*2+SAS 600G*4,萬(wàn)兆網(wǎng)卡,遠(yuǎn)程管理,雙電源)30臺(tái)。 1.5.3 網(wǎng)絡(luò)流量分析 按每天處理 725萬(wàn)在線行為數(shù)據(jù),每條數(shù)據(jù)為 10KB大小,108 萬(wàn)條在線內(nèi)容數(shù)據(jù),每條 100KB計(jì)算,需要的平均帶寬為 17Mbps, 高峰時(shí)期按 3倍帶寬需求計(jì)算為:51Mbps,GE鏈路接入可以滿足需 求,出于冗余考慮,建議使用雙 GE鏈路(主備)進(jìn)行接入。 1.6 系統(tǒng)功能和性能需求分析 1.6.1 系統(tǒng)功能指標(biāo) 1.6.1.1 數(shù)據(jù)存儲(chǔ)功能 政府?dāng)?shù)據(jù)量很大,海量數(shù)據(jù)的處理與傳統(tǒng)架構(gòu)完全不同,原有 小型機(jī)加商業(yè)數(shù)據(jù)庫(kù)的方式已不能完全勝任,部分領(lǐng)域數(shù)據(jù)需要引 入新架構(gòu)。大數(shù)據(jù)存儲(chǔ)于處理架構(gòu)包括分布式存儲(chǔ)、分布式資源管 理及分布式文件架構(gòu)。 1.6.1.2 數(shù)據(jù)匯聚功能 數(shù)據(jù)匯聚功能要求實(shí)現(xiàn)將各部門(mén)相關(guān)的信息資源統(tǒng)一采集交換 到數(shù)據(jù)中心前置庫(kù)中,滿足多種采集方式,能夠滿足不同的網(wǎng)絡(luò)環(huán) 境、不同的數(shù)據(jù)類(lèi)型等情況下進(jìn)行數(shù)據(jù)的采集,并對(duì)采集的數(shù)據(jù)進(jìn) -20- **政務(wù)大數(shù)據(jù)交換共享平臺(tái)建設(shè)方案 行處理,進(jìn)入中心庫(kù)保存。**電子政務(wù)公共數(shù)據(jù)開(kāi)放共享平臺(tái)的數(shù) 據(jù)匯聚功能包含數(shù)據(jù)采集、數(shù)據(jù)交換、數(shù)據(jù)處理等功能。 1.6.1.3 數(shù)據(jù)治理功能 政府?dāng)?shù)據(jù)在共享共用、開(kāi)放運(yùn)營(yíng)及行業(yè)應(yīng)用過(guò)程中,數(shù)據(jù)來(lái)源 于各個(gè)業(yè)務(wù)系統(tǒng),只有建立對(duì)數(shù)據(jù)質(zhì)量的信任,才能放心地進(jìn)行使 用。所以數(shù)據(jù)治理和質(zhì)量保障在政府?dāng)?shù)據(jù)開(kāi)放共享平臺(tái)建設(shè)中顯得 由為重要,數(shù)據(jù)開(kāi)放共享平臺(tái)數(shù)據(jù)治理功能主要包括信息資源目錄 管理、元數(shù)據(jù)管理和數(shù)據(jù)質(zhì)量管里等內(nèi)容。 1.6.1.4 數(shù)據(jù)運(yùn)營(yíng)功能 數(shù)據(jù)運(yùn)營(yíng)功能聚焦對(duì)數(shù)據(jù)共享、開(kāi)放、融合的提供,對(duì)提供服 務(wù)授權(quán)、認(rèn)證、過(guò)程進(jìn)行統(tǒng)一管理,并提供數(shù)據(jù)開(kāi)放共享平臺(tái)運(yùn)行 過(guò)程的全程監(jiān)控。數(shù)據(jù)開(kāi)放共享平臺(tái)數(shù)據(jù)運(yùn)營(yíng)功能主要包含服務(wù)管 理、基于服務(wù)管理的數(shù)據(jù)開(kāi)放、以及運(yùn)行監(jiān)控等內(nèi)容。 1.6.1.5 數(shù)據(jù)應(yīng)用功能 數(shù)據(jù)共享、開(kāi)放的最終目標(biāo)都是為了要?jiǎng)?chuàng)造價(jià)值,數(shù)據(jù)的價(jià)值 主要通過(guò)應(yīng)用進(jìn)行體現(xiàn)。數(shù)據(jù)開(kāi)放共享平臺(tái)數(shù)據(jù)應(yīng)用主要是政務(wù)數(shù) 據(jù)分析功能,主要包括數(shù)據(jù)采集、數(shù)據(jù)分析、結(jié)果發(fā)布三個(gè)組成部 分,能夠?qū)崿F(xiàn)實(shí)時(shí)、批處理、交互分析,最終通過(guò)報(bào)表、儀表盤(pán)、 API等形式展示結(jié)果。 -21- **政務(wù)大數(shù)據(jù)交換共享平臺(tái)建設(shè)方案 1.6.2 系統(tǒng)性能指標(biāo) 基本性能:(1)在 100M 局域網(wǎng)環(huán)境下進(jìn)行增、刪、改業(yè)務(wù)(不 含大對(duì)象數(shù)據(jù)類(lèi)型)響應(yīng)時(shí)間在 3 秒以?xún)?nèi)。(2)在 100M 局域網(wǎng)環(huán) 境下查詢(xún)操作的響應(yīng)時(shí)間要求在 3 秒以?xún)?nèi)。 (3)系統(tǒng)支持同時(shí)在 線數(shù)大于 200,并發(fā)用戶(hù)數(shù)大于 50。 數(shù)據(jù)交換:(1)批量數(shù)據(jù)交換中,平均單條記錄數(shù)據(jù)交換的時(shí) 間不大于 20 毫秒。 (2)非并發(fā)大批量數(shù)據(jù)交換(百萬(wàn)條)的時(shí) 間不大于 5,000 秒。(3)批量數(shù)據(jù)交換中,平均單條記錄入庫(kù)的響 應(yīng)時(shí)間不大于 20ms。 數(shù)據(jù)查詢(xún):(1)查詢(xún)基礎(chǔ)數(shù)據(jù)(精確匹配)的響應(yīng)時(shí)間不大于 3 秒。 (2)查詢(xún)單個(gè)數(shù)據(jù)主題(百萬(wàn)級(jí))的響應(yīng)時(shí)間不大于 3 秒。 (3)目錄檢索的響應(yīng)時(shí)間不大于 2 秒。(4)查詢(xún)統(tǒng)計(jì)報(bào)表(非實(shí) 時(shí)統(tǒng)計(jì))的響應(yīng)時(shí)間不大于 3 秒。 1.7 信息系統(tǒng)裝備和應(yīng)用現(xiàn)狀與差距 1.7.1 現(xiàn)狀 政府?dāng)?shù)據(jù)碎片化嚴(yán)重。我國(guó)電子政務(wù)取得了較快發(fā)- 1.請(qǐng)仔細(xì)閱讀文檔,確保文檔完整性,對(duì)于不預(yù)覽、不比對(duì)內(nèi)容而直接下載帶來(lái)的問(wèn)題本站不予受理。
- 2.下載的文檔,不會(huì)出現(xiàn)我們的網(wǎng)址水印。
- 3、該文檔所得收入(下載+內(nèi)容+預(yù)覽)歸上傳者、原創(chuàng)作者;如果您是本文檔原作者,請(qǐng)點(diǎn)此認(rèn)領(lǐng)!既往收益都?xì)w您。
下載文檔到電腦,查找使用更方便
14.9 積分
下載 |
- 配套講稿:
如PPT文件的首頁(yè)顯示word圖標(biāo),表示該P(yáng)PT已包含配套word講稿。雙擊word圖標(biāo)可打開(kāi)word文檔。
- 特殊限制:
部分文檔作品中含有的國(guó)旗、國(guó)徽等圖片,僅作為作品整體效果示例展示,禁止商用。設(shè)計(jì)者僅對(duì)作品中獨(dú)創(chuàng)性部分享有著作權(quán)。
- 關(guān) 鍵 詞:
- 政務(wù) 數(shù)據(jù) 交換 共享 平臺(tái) 建設(shè) 方案
鏈接地址:http://www.3dchina-expo.com/p-6570328.html