1 緒論

 

1.1 研究背景

隨著信息技術(shù)的發(fā)展，大數(shù)據(jù)時(shí)代的到來(lái)，以云計(jì)算、物聯(lián)網(wǎng)等技術(shù)為關(guān)鍵核心技術(shù)的政府采購(gòu)電子交易模式正在顛覆傳統(tǒng)的采購(gòu)模式，把政府采購(gòu)人、采購(gòu)代理機(jī)構(gòu)、采購(gòu)管理部門(mén)、采購(gòu)審批機(jī)構(gòu)、評(píng)審專(zhuān)家、供應(yīng)商、電子交易平臺(tái)等多個(gè)角色同時(shí)有效的聯(lián)系在一起，實(shí)現(xiàn)政府網(wǎng)上采購(gòu)交易信息的互聯(lián)互通。這將在很大程度上降低采購(gòu)的成本，提高采購(gòu)效率，從而實(shí)現(xiàn)對(duì)政府采購(gòu)的監(jiān)督達(dá)到公開(kāi)透明、公正公平的目的，對(duì)政府采購(gòu)來(lái)說(shuō)，這是一種全新理念和改革創(chuàng)新，促使了傳統(tǒng)政府采購(gòu)模式走上一次徹底的變革，也將變成未來(lái)政府采購(gòu)最主要的發(fā)展趨勢(shì)。目前，我國(guó)政府采購(gòu)網(wǎng)上交易模式的探索時(shí)間尚短，在網(wǎng)上采購(gòu)協(xié)議商品模式順利運(yùn)行的同時(shí)也呈現(xiàn)出很多缺點(diǎn)。隨著政府網(wǎng)上采購(gòu)協(xié)議商品類(lèi)別的增加以及采購(gòu)方式的不斷變化，政府采購(gòu)業(yè)務(wù)處理系統(tǒng)中積累了大量有價(jià)值的數(shù)據(jù)，但只有少部分被政府采購(gòu)相關(guān)者用于基本統(tǒng)計(jì)分析[1]。隨著數(shù)據(jù)倉(cāng)庫(kù)技術(shù)和數(shù)據(jù)挖掘技術(shù)的不斷成熟，給政府采購(gòu)網(wǎng)上交易資金大數(shù)據(jù)分析帶來(lái)了機(jī)會(huì)。政府采購(gòu)數(shù)據(jù)倉(cāng)庫(kù)是獨(dú)立于業(yè)務(wù)處理系統(tǒng)的數(shù)據(jù)庫(kù)，無(wú)論政府采購(gòu)業(yè)務(wù)處理系統(tǒng)是升級(jí)還是更替，都不影響建立的政府采購(gòu)數(shù)據(jù)倉(cāng)庫(kù)里存儲(chǔ)的數(shù)據(jù)。而政府采購(gòu)資金數(shù)據(jù)挖掘能為政府網(wǎng)上采購(gòu)的政策制定和監(jiān)督管理提供有依據(jù)的數(shù)據(jù)支持，即它是對(duì)大量采購(gòu)資金相關(guān)數(shù)據(jù)進(jìn)行挖掘、分析、綜合和推理，力圖發(fā)現(xiàn)各政府網(wǎng)上采購(gòu)因素間的關(guān)聯(lián)性，力圖解決網(wǎng)上采購(gòu)相關(guān)實(shí)際應(yīng)用問(wèn)題。本研究是站在重慶市政府采購(gòu)管理部門(mén)的角度，基于協(xié)議供貨商品對(duì)?。ㄊ校┘案飨聦賲^(qū)縣的政府采購(gòu)網(wǎng)上交易資金數(shù)據(jù)進(jìn)行挖掘與分析，基于數(shù)據(jù)倉(cāng)庫(kù)和數(shù)據(jù)挖掘技術(shù)，在政府采購(gòu)協(xié)議商品網(wǎng)上交易模式的應(yīng)用需求基礎(chǔ)上，建立政府采購(gòu)數(shù)據(jù)倉(cāng)庫(kù)和從屬數(shù)據(jù)集市，進(jìn)而對(duì)網(wǎng)上采購(gòu)協(xié)議商品的交易資金數(shù)據(jù)進(jìn)行挖掘與分析。

..........

 

1.2 研究意義

大數(shù)據(jù)時(shí)代，政府網(wǎng)上采購(gòu)已成為必然趨勢(shì)。隨著采購(gòu)規(guī)模壯大，上級(jí)監(jiān)管部門(mén)也需要加強(qiáng)政府網(wǎng)上采購(gòu)合理化和規(guī)范化管理，但政府采購(gòu)相關(guān)者很多，針對(duì)全方位監(jiān)督，當(dāng)前信息化水平遠(yuǎn)遠(yuǎn)不夠，需要增大各方監(jiān)管力度。本研究集中對(duì)重慶市政府采購(gòu)網(wǎng)上交易資金的歷史數(shù)據(jù)轉(zhuǎn)換成有價(jià)值的采購(gòu)知識(shí)，多角度指導(dǎo)政府網(wǎng)上采購(gòu)相關(guān)策略，并分析該決策如何為政府采購(gòu)管理部門(mén)加大采購(gòu)資金監(jiān)管工作力度并幫助采購(gòu)人提供采購(gòu)便利。現(xiàn)今政府采購(gòu)監(jiān)管部門(mén)主要通過(guò)政府采購(gòu)業(yè)務(wù)處理系統(tǒng)來(lái)實(shí)現(xiàn)統(tǒng)計(jì)分析并以此為監(jiān)督參考，一旦政府采購(gòu)業(yè)務(wù)系統(tǒng)發(fā)生變化，歷史數(shù)據(jù)將無(wú)法再利用，統(tǒng)計(jì)分析也將不能持續(xù)。此外，某些區(qū)縣使用的政府采購(gòu)管理系統(tǒng)與省市級(jí)使用的系統(tǒng)不同，監(jiān)管部門(mén)不能對(duì)區(qū)縣政府網(wǎng)上采購(gòu)的實(shí)現(xiàn)監(jiān)管。政府采購(gòu)監(jiān)管部門(mén)無(wú)論是制定政策還是監(jiān)督管理都需要有效數(shù)據(jù)參考。自重慶市政府采購(gòu)電子交易平臺(tái)建成以來(lái)，年采購(gòu)資金交易額從 2012 年網(wǎng)上交易平臺(tái)建立的 0.4 億增長(zhǎng)至 2017 年 12 億之多，政府采購(gòu)網(wǎng)上交易日數(shù)據(jù)量也從零逐漸向幾十萬(wàn)、幾百萬(wàn)甚至幾千萬(wàn)變化，目前日平均產(chǎn)生的采購(gòu)數(shù)據(jù)大小達(dá) 800 M以上。面對(duì)如此多的政府采購(gòu)數(shù)據(jù)，監(jiān)管部門(mén)只統(tǒng)計(jì)了較少數(shù)據(jù)，不知道如何實(shí)現(xiàn)網(wǎng)上交易資金數(shù)據(jù)更多的價(jià)值，將不能發(fā)現(xiàn)政府網(wǎng)上采購(gòu)中存在的有用規(guī)律和問(wèn)題。大數(shù)據(jù)時(shí)代，隨著網(wǎng)上采購(gòu)數(shù)據(jù)的增加，政府采購(gòu)相關(guān)者的需求也從基本統(tǒng)計(jì)分析轉(zhuǎn)變?yōu)檎少?gòu)大數(shù)據(jù)分析（數(shù)據(jù)之間的關(guān)聯(lián)性等），因此傳統(tǒng)分析方法已不能滿足需要，數(shù)據(jù)倉(cāng)庫(kù)技術(shù)和數(shù)據(jù)挖掘技術(shù)與之契合。政府采購(gòu)數(shù)據(jù)倉(cāng)庫(kù)的建立將實(shí)現(xiàn)政府采購(gòu)數(shù)據(jù)結(jié)構(gòu)的一致性，改善監(jiān)管部門(mén)因數(shù)據(jù)結(jié)構(gòu)不同而無(wú)法獲取各區(qū)域的采購(gòu)數(shù)據(jù)問(wèn)題，即使各區(qū)域政府采購(gòu)管理系統(tǒng)被替換，政府監(jiān)管部門(mén)也能實(shí)現(xiàn)對(duì)各區(qū)域的采購(gòu)監(jiān)管。數(shù)據(jù)挖掘技術(shù)應(yīng)用于政府采購(gòu)數(shù)據(jù)不僅能區(qū)別于傳統(tǒng)統(tǒng)計(jì)分析進(jìn)行多維分析，還能深層次挖掘網(wǎng)上交易資金數(shù)據(jù)的價(jià)值，政府采購(gòu)管理部門(mén)也可根據(jù)應(yīng)用需求去監(jiān)管政府采購(gòu)相關(guān)者和采購(gòu)行為本身，比如從反腐倡廉的角度利用關(guān)聯(lián)規(guī)則挖掘幫助監(jiān)管部門(mén)發(fā)現(xiàn)采購(gòu)人與供應(yīng)商之間的關(guān)系，從歷史成交資金角度根據(jù)實(shí)時(shí)動(dòng)態(tài)時(shí)序圖把控采購(gòu)商品的價(jià)格變化等。此外，政府采購(gòu)數(shù)據(jù)倉(cāng)庫(kù)的建立解決了數(shù)據(jù)挖掘的數(shù)據(jù)預(yù)處理過(guò)程，提高了挖掘工作效率。

.........

 

2 理論基礎(chǔ)和技術(shù)綜述

 

2.1 政府網(wǎng)上采購(gòu)協(xié)議商品的相關(guān)理論

2.1.1 政府網(wǎng)上采購(gòu)協(xié)議商品概述

根據(jù)中華人民共和國(guó)頒布的《政府采購(gòu)法》，政府采購(gòu)的定義是指各個(gè)級(jí)別的國(guó)家機(jī)關(guān)單位、事業(yè)單位以及團(tuán)體組織，使用財(cái)政性資金采購(gòu)的依法制定集中采購(gòu)目錄范圍內(nèi)或者采購(gòu)限額標(biāo)準(zhǔn)范圍以上的工程、貨物和服務(wù)行為[18]。政府采購(gòu)網(wǎng)上交易模式近年隨著信息化水平不斷發(fā)展和采購(gòu)模式不斷變化而誕生，目前還沒(méi)有標(biāo)準(zhǔn)一致的定義。中國(guó)政府就政府采購(gòu)電子化的含義指出，它是將政府采購(gòu)基礎(chǔ)設(shè)施融合信息技術(shù)產(chǎn)生的在線管理、執(zhí)行與報(bào)告等過(guò)程的應(yīng)用[19]。專(zhuān)著《政府采購(gòu)電子化理論探索與實(shí)踐》一書(shū)中闡明政府采購(gòu)電子化是指政府部門(mén)采用順應(yīng)時(shí)代的信息技術(shù)，確認(rèn)各個(gè)部門(mén)采購(gòu)工程、貨物和服務(wù)的一種政府采購(gòu)形式，其沖出時(shí)間與空間的障礙，增強(qiáng)政府采購(gòu)信息的透明度，幫助政府采購(gòu)相關(guān)活動(dòng)尋找捷徑[20]。政府網(wǎng)上采購(gòu)的主體主要包括采購(gòu)人、供應(yīng)商和廠商、采購(gòu)代理機(jī)構(gòu)、政府采購(gòu)的監(jiān)督管理部門(mén)、平臺(tái)代理機(jī)構(gòu)和第三方價(jià)格管理等，其中，采購(gòu)人、采購(gòu)代理機(jī)構(gòu)、供應(yīng)商與廠商在政府采購(gòu)網(wǎng)上交易活動(dòng)中享有相應(yīng)的權(quán)利并承擔(dān)其義務(wù)，即政府采購(gòu)當(dāng)事人。政府網(wǎng)上采購(gòu)協(xié)議商品主要是完成采購(gòu)人與供應(yīng)商網(wǎng)上交流并最終完成采購(gòu)交易的過(guò)程。

.........

 

2.2 數(shù)據(jù)倉(cāng)庫(kù)技術(shù)

數(shù)據(jù)倉(cāng)庫(kù)的概念是在 20 世紀(jì) 80 年代由“數(shù)據(jù)倉(cāng)庫(kù)之父”William. H. Inmon在“Building The Data Warehouse”（《建立數(shù)據(jù)倉(cāng)庫(kù)》）一書(shū)中首次提出的，并被廣泛接受。他解釋的政府采購(gòu)數(shù)據(jù)倉(cāng)庫(kù)是一個(gè)面向應(yīng)用主題的、相較穩(wěn)定的、可以集成的、反映歷史數(shù)據(jù)變化的數(shù)據(jù)集，集中用于支持應(yīng)用管理決策[22]。數(shù)據(jù)倉(cāng)庫(kù)主要是將政府網(wǎng)上采購(gòu)長(zhǎng)期積累的海量采購(gòu)數(shù)據(jù)，進(jìn)行系統(tǒng)的分析整理，然后利用各分析方法進(jìn)行復(fù)雜數(shù)據(jù)分析，幫助政府采購(gòu)相關(guān)者從大量的采購(gòu)信息中，快速有效地分析出有價(jià)值的采購(gòu)知識(shí)，從而有利于相關(guān)政府采購(gòu)決策者擬定并快速回應(yīng)外在環(huán)境的變動(dòng)[23]。

.........

 

3 搭建政府采購(gòu)數(shù)據(jù)倉(cāng)庫(kù)......21

3.1 搭建政府采購(gòu)數(shù)據(jù)倉(cāng)庫(kù)的目的...........21

3.2 政府采購(gòu)網(wǎng)上交易資金數(shù)據(jù)來(lái)源.......22

3.3 政府采購(gòu)網(wǎng)上交易資金數(shù)據(jù)結(jié)構(gòu)分析.......22

3.4 政府采購(gòu)數(shù)據(jù)倉(cāng)庫(kù)的主題確定...........22

3.5 政府采購(gòu)數(shù)據(jù)倉(cāng)庫(kù)模型設(shè)計(jì).......24

3.6 清洗、轉(zhuǎn)換和加載過(guò)程.......35

3.7 創(chuàng)建從屬數(shù)據(jù)集市.......37

4 政府網(wǎng)上采購(gòu)交易資金數(shù)據(jù)挖掘分析......41

4.1 基于協(xié)議商品的政府網(wǎng)上采購(gòu)需求分析...........41

4.2 政府網(wǎng)上采購(gòu)交易資金挖掘概述.......45

4.3 基于文本挖掘的政府采購(gòu)文本分析...........47

4.4 基于關(guān)聯(lián)規(guī)則算法的政府采購(gòu)行為分析...........53

4.5 基于時(shí)間序列算法的網(wǎng)上交易資金預(yù)測(cè)分析...........62

4.6 本章小結(jié).......69

5 結(jié)論與研究展望..........71

 

4 政府網(wǎng)上采購(gòu)交易資金數(shù)據(jù)挖掘分析

 

數(shù)據(jù)挖掘方法眾多，不同應(yīng)用對(duì)應(yīng)不同方法。本節(jié)結(jié)合政府網(wǎng)上采購(gòu)需求，從政府網(wǎng)上采購(gòu)的四個(gè)階段系統(tǒng)概述網(wǎng)上交易資金數(shù)據(jù)挖掘方法和分析維度，但由于數(shù)據(jù)有限性和保密性，本節(jié)僅采用文本挖掘、關(guān)聯(lián)規(guī)則挖掘和時(shí)間序列算法這三種具體方法分別闡述文本信息、采購(gòu)行為和交易規(guī)模的挖掘流程。

 

4.1 基于協(xié)議商品的政府網(wǎng)上采購(gòu)需求分析

本節(jié)基于政府網(wǎng)上直接采購(gòu)協(xié)議商品和詢價(jià)采購(gòu)商品的交易流程及對(duì)政府網(wǎng)上采購(gòu)現(xiàn)狀的調(diào)查分析，提出將對(duì)政府網(wǎng)上采購(gòu)交易資金進(jìn)行數(shù)據(jù)挖掘的分析需求。

 

4.1.1 政府網(wǎng)上采購(gòu)協(xié)議商品的業(yè)務(wù)流程

政府采購(gòu)電子交易平臺(tái)涉及到的主要角色包括采購(gòu)人、供應(yīng)商以及財(cái)政監(jiān)督管理部門(mén)，通過(guò)該平臺(tái)完成商品的在線查找、網(wǎng)上訂單、網(wǎng)上合同，同時(shí)數(shù)據(jù)來(lái)源與合同結(jié)果、政府采購(gòu)業(yè)務(wù)系統(tǒng)（網(wǎng)上申報(bào)系統(tǒng)）進(jìn)行有效對(duì)接，實(shí)現(xiàn)政府采購(gòu)數(shù)據(jù)信息共享。在整個(gè)政府網(wǎng)上采購(gòu)協(xié)議商品業(yè)務(wù)流程中，首先政府采購(gòu)人通過(guò)需求提交網(wǎng)上采購(gòu)申請(qǐng)并由主管部門(mén)匯總審核采購(gòu)申請(qǐng)，然后由財(cái)政業(yè)務(wù)科室審核申請(qǐng)的網(wǎng)上采購(gòu)財(cái)政資金，再由政府采購(gòu)科確定申請(qǐng)的采購(gòu)方式和采購(gòu)組織形式，最后由政府采購(gòu)科根據(jù)政府采購(gòu)人申請(qǐng)的具體網(wǎng)上采購(gòu)內(nèi)容下達(dá)網(wǎng)上采購(gòu)計(jì)劃，并由國(guó)庫(kù)科據(jù)此網(wǎng)上采購(gòu)資金申請(qǐng)生成網(wǎng)上采購(gòu)用款計(jì)劃，待采購(gòu)合同生成審核成功之后劃撥財(cái)政網(wǎng)上采購(gòu)資金。政府網(wǎng)上采購(gòu)協(xié)議商品的業(yè)務(wù)流程如圖 4.1 所示。由于政府采購(gòu)網(wǎng)上交易模式分為直接采購(gòu)和詢價(jià)采購(gòu)，直接采購(gòu)業(yè)務(wù)流程直接執(zhí)行采購(gòu)計(jì)劃即可，而詢價(jià)采購(gòu)業(yè)務(wù)流程需要進(jìn)行詢價(jià)信息發(fā)布、審核、開(kāi)標(biāo)、供應(yīng)商報(bào)價(jià)、中標(biāo)信息發(fā)布和生成訂單等采購(gòu)步驟，相對(duì)比較復(fù)雜。政府網(wǎng)上詢價(jià)采購(gòu)業(yè)務(wù)流程如圖 4.2 所示。

.......

 

結(jié)論

 

本研究根據(jù)數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)挖掘技術(shù)的理論方法與實(shí)踐操作相結(jié)合，初步完成了數(shù)據(jù)挖掘技術(shù)在政府采購(gòu)網(wǎng)上交易模式的應(yīng)用探索。本文主要開(kāi)展了以下工作：（1）根據(jù)數(shù)據(jù)倉(cāng)庫(kù)的設(shè)計(jì)方法，設(shè)計(jì)了政府采購(gòu)數(shù)據(jù)倉(cāng)庫(kù)的概念模型、邏輯模型、物理模型，建立了政府采購(gòu)數(shù)據(jù)倉(cāng)庫(kù)；（2）基于搭建的政府采購(gòu)數(shù)據(jù)倉(cāng)庫(kù)，根據(jù)應(yīng)用分析建立了從屬數(shù)據(jù)集市；（3）分析了政府網(wǎng)上采購(gòu)業(yè)務(wù)流程，根據(jù)網(wǎng)上交易流程中存在的實(shí)際應(yīng)用問(wèn)題，提出了政府網(wǎng)上采購(gòu)資金數(shù)據(jù)挖掘的分析需求；（4）基于政府采購(gòu)數(shù)據(jù)倉(cāng)庫(kù)，應(yīng)用文本挖掘、關(guān)聯(lián)規(guī)則挖掘和時(shí)間序列算法分別對(duì)政府采購(gòu)文本數(shù)據(jù)、采購(gòu)行為和資金交易規(guī)模進(jìn)行了挖掘分析，并提出應(yīng)用和相關(guān)建議。本研究?jī)H對(duì)數(shù)據(jù)挖掘在政府采購(gòu)網(wǎng)上交易模式中做了應(yīng)用初探，對(duì)政府網(wǎng)上的分析需求還不夠深入，還需要后期深入調(diào)研，進(jìn)一步提出更有價(jià)值的采購(gòu)需求。對(duì)于數(shù)據(jù)挖掘方面的研究，還要付出更多的努力，以完成對(duì)數(shù)據(jù)挖掘分析的深入研究，在這方面，還需不斷的實(shí)踐和努力。

..........

參考文獻(xiàn)（略）