高校采購數(shù)據(jù)采集分析及應用

前言：想要寫出一篇引人入勝的文章？我們特意為您整理了高校采購數(shù)據(jù)采集分析及應用范文，希望能給你帶來靈感和參考，敬請閱讀。

摘要傳統(tǒng)的高校政府采購數(shù)據(jù)處理方法忽略了項目數(shù)據(jù)的分析對比。針對該問題，本文研究了運用和優(yōu)化對比分析算法進行政府采購數(shù)據(jù)的采集和分析，并開發(fā)了一款采購數(shù)據(jù)管理系統(tǒng)。首先用網(wǎng)絡爬蟲程序爬取政府采購和高校采購信息網(wǎng)站的數(shù)據(jù)內容，然后對所采集的數(shù)據(jù)進行處理與分析，最后形成可視化圖表。實驗結果表明，系統(tǒng)可有效地對公開的采購數(shù)據(jù)資源進行分析研究與應用。

關鍵詞政府采購；網(wǎng)絡爬蟲；數(shù)據(jù)分析；數(shù)據(jù)可視化

1引言

當前，大數(shù)據(jù)、云計算等新技術的高速發(fā)展推動了信息技術在各行各業(yè)的深度運用，特別是在政府管理信息化方面發(fā)揮了重要的決策參考作用。在國家“放、管、服”背景下的高校政府采購事業(yè)在新的數(shù)據(jù)技術方面較傳統(tǒng)簡單的統(tǒng)計分析有了很大的創(chuàng)新。技術人員借助大數(shù)據(jù)手段處理海量網(wǎng)絡數(shù)據(jù)成為常態(tài)，運用大數(shù)據(jù)分析算法進行學習研究的案例不勝枚舉[1]。我國高等院校各項事業(yè)處于欣欣向榮的發(fā)展時期，在政府采購網(wǎng)站、院校采購網(wǎng)站上積攢大量的采購數(shù)據(jù)信息。高校采購過程終涉及采購申請部門、歸口管理部門、招標代理機構和投標單位等多個主體。采購資料包含招標公告、招標文件、中標公告、經濟合同和驗收記錄等多個資料要素。以上各要素又包含了豐富的屬性數(shù)據(jù)，數(shù)據(jù)之間存在著各種關聯(lián)關系。本文研究運用和優(yōu)化對比分析算法等大數(shù)據(jù)研究算法來進行政府采購數(shù)據(jù)的采集和分析，為招投標采購提供可視化數(shù)據(jù)分析支撐。

2研究內容

收集和整理采購數(shù)據(jù)信息的效率低下問題和采購要素關聯(lián)分析的算法優(yōu)化問題。申購部門在進行采購立項審批環(huán)節(jié)對可行性研究、需求論證、調研報告等申購材料存在編制不科學性和不規(guī)范性問題。學院各部門由于不了解國家采購法律法規(guī)、學院采購管理辦法，存在對采購流程的不熟悉、不理解的問題。本文選取對社會公共服務影響較大的政府招投標采購網(wǎng)進行數(shù)據(jù)采集，如江蘇省政府采購網(wǎng)和蘇州市政府采購網(wǎng)。同時，選取省內政府采購工作業(yè)績成效顯著的高校采購信息網(wǎng)站作為同類數(shù)據(jù)對比分析素材的主要來源。通過編寫Python爬蟲程序[2]，將各大采購信息網(wǎng)站上常年積累的項目采購公示數(shù)據(jù)進行集采與整理，對各關鍵指標數(shù)據(jù)進行挖掘分析，便于將不同的優(yōu)化方案應用于今后的采購活動中。由于采購數(shù)據(jù)因項目差異形成龐大的數(shù)據(jù)量，采購傳統(tǒng)的人工或半自動統(tǒng)計分類會造成巨大的人力成本，因此先使用網(wǎng)絡爬蟲爬取定位院校的采購信息網(wǎng)數(shù)據(jù)，再用數(shù)據(jù)挖掘算法結合大數(shù)據(jù)工具進行處理，使用數(shù)據(jù)采集工作得到事半功倍的效果。對采購數(shù)據(jù)進行搜集、分析和處理，為學院采購工作提供可參考的數(shù)據(jù)分析報告，為領導決策提供參考。開發(fā)應用軟件，應用于學院招標采購工作中，簡化后勤服務流程，方便學院各部門學習采購政策解讀，共享調研論證報告模板，保障采購資料的規(guī)范[3]。將研究報告中的案例素材作為學習資料推廣到學校各部門，可以有效提高采購辦的咨詢服務效率。

3數(shù)據(jù)分析算法

Apriori算法利用逐層搜索的迭代方法找出數(shù)據(jù)庫中項集的關系[4]，以形成規(guī)則，屬于第一個關聯(lián)規(guī)則的經典挖掘算法。通過數(shù)據(jù)挖掘技術對采購數(shù)據(jù)信息進行各要素之間的關聯(lián)度分析，并進行可視化展示，已經成為當前后勤招投標管理領域比較新穎的研究課題。該研究課題首先利用互聯(lián)網(wǎng)爬蟲技術，編寫爬蟲程序爬取采購數(shù)據(jù)[5]，并保存到數(shù)據(jù)庫中。然后對采購數(shù)據(jù)進行清洗，并將清洗后的數(shù)據(jù)轉化為可以使用算法處理的數(shù)據(jù)。接著使用算法對轉換后的數(shù)據(jù)進行處理，并對兩種算法的處理時間進行分析對比，確定算法對數(shù)據(jù)的處理所消耗時間要少于算法。最后對數(shù)據(jù)的處理結果進行可視化展示，并進行研究分析。研究如何采用互聯(lián)網(wǎng)爬蟲技術對各雙高院校長期積累的采購信息數(shù)據(jù)進行搜集整理，通過大數(shù)據(jù)分析算法將采購各要素關聯(lián)起來，總結雙高院校采購方案設計和編寫的經驗，為指導學院采購工作提供參考?；诤笄诓少徴型稑斯ぷ鳎诰蛟擃悢?shù)據(jù)的價值，通過大數(shù)據(jù)算法發(fā)掘出招標文件中各種主體之間的聯(lián)系，為制定采購方案和招標文件提供了豐富的參考資源[6]。研究數(shù)據(jù)挖掘算法，通過關聯(lián)規(guī)則算法來找出采購數(shù)據(jù)中的限價標準、公告時點、技術偏離和付款方式等，找出后勤高質量服務的特征點，作為績效考核指標依據(jù)。通過大數(shù)據(jù)研究算法來進行數(shù)據(jù)的梳理，以便將數(shù)據(jù)可視化處理后形成相關的圖表資料為高校后勤建設規(guī)劃和采購管理提供參考依據(jù)[7]。

4程序設計與開發(fā)

通過WXML標記語言和樣式語言WXSS，基于JavaScript的邏輯層框架，結合指定組件開發(fā)一款高校采購招投標信息管理的微信小程序。該系統(tǒng)使用B/S架構，分為存儲層、邏輯處理層和展示層，使用關系型數(shù)據(jù)庫管理系統(tǒng)MySQL。小程序端可以通過手機微信直接訪問，管理系統(tǒng)則通過瀏覽器進行訪問。小程序前端使用微信開發(fā)者工具進行開發(fā)，后端采用IDEA進行開發(fā)。系統(tǒng)主界面分四個區(qū)域：（1）標題區(qū)域。該區(qū)域主要用來顯示系統(tǒng)名稱以及進入的功能標題。（2）輪播圖區(qū)域。該區(qū)域主要用來輪流顯示采購工作的最新通知、公告、新聞、法律法規(guī)和數(shù)據(jù)統(tǒng)計等常用的信息內容，在主界面上方的顯眼位置進行輪番播放，起到及時提醒用戶的作用。（3）功能模塊區(qū)域。該區(qū)域包含16個子功能模塊，分別是招標信息、采購計劃、項目清單、需求公示、調研論證、公告文件、評標情況、專家費用、合同管理、采購日歷、法律法規(guī)、檢索目錄、投標簽到、數(shù)據(jù)報送、代理機構、咨詢服務。該區(qū)域是采購招投標管理工作中提供給用戶的主要輔助功能，也是用戶與系統(tǒng)進行數(shù)據(jù)交互的通道。（4）底部導航區(qū)域。該區(qū)域包括首頁、關注、答疑和我的四個導航，便于用戶在不同的分頁間做切換。用于高校采購、后勤、資產等部門進行招投標采購工作，提供從采購計劃、需求公示、采購審批、招標公告到合同流轉等一系列采購流程中的信息管理服務。該系統(tǒng)技術設計方案的優(yōu)點是在視圖層與邏輯層間提供數(shù)據(jù)傳輸和事件系統(tǒng)，方便聚焦于數(shù)據(jù)和邏輯上。該系統(tǒng)解決了長期困擾負責學校招投標采購工作的教師對于采購全流程管理中的信息有序管理問題，做到了信息的實時更新和整理，便于可控可追溯，有利于提高采購流程數(shù)據(jù)可視化管理的效率[8]。它為招投標采購工作中采購計劃、采購公告、專家評審費統(tǒng)計、合同管理等帶來了便利，具有一定的實用價值。

5數(shù)據(jù)處理與分析

以蘇州某高校2021年政府采購數(shù)據(jù)為例，通過政府采購網(wǎng)站、校內招標信息網(wǎng)站和手機APP招投標管理系統(tǒng)的數(shù)據(jù)，經過數(shù)據(jù)處理后形成可視化數(shù)據(jù)圖表[9]。學院2021年度采購金額總計5020萬，政府集中采購金額和節(jié)約預算金額分別比2020年增長12.4%和65.6%。2021年與2020年相比，在論證及驗收會議參與量增長42%，提供咨詢、培訓時間增長150%，質疑投訴有效處理量提高50%。招標文件編制審核時間下降40%；流標次數(shù)下降20%。網(wǎng)上商城和網(wǎng)上競價采購工作效率也有大幅提升。同時，在信息推廣和制度宣傳解讀方面，學院采購人員利用晨學時間送服務到基層[10]，根據(jù)申購部門對于采購需求提出的問題，將政府采購實務案例進行講解，答疑解惑，解讀政府采購相關政策。并且將隱性數(shù)據(jù)也統(tǒng)計在列，提升采購招投標管理的軟服務。通過數(shù)據(jù)分析，在采購項目進度計劃方面，為采購項目設計和定制項目采購進度計劃橫道圖，明確重點責任分工和關鍵時間節(jié)點，保證采購各流程順利通暢，按時保質保量完成項目任務，以“好、快、省”為采購項目化任務考核目標[11]。例如，學院機房改造工程項目演變而來的采購進度計劃橫道圖模板。該模板將采購流程的各個環(huán)節(jié)分解，為后續(xù)時間緊、任務重的采購項目提供進度參考依據(jù)，將各部門之間的協(xié)同配合通過數(shù)據(jù)表現(xiàn)出來，在項目化考核中具有直觀比較的依據(jù)，提高采購效率。

6結束語

本文研究了網(wǎng)絡爬蟲程序爬取政府采購數(shù)據(jù)的方法，基于利用優(yōu)化改進的Apriori算法，通過數(shù)據(jù)挖掘技術對政府采購數(shù)據(jù)信息進行采集、歸類、對比分析，形成可視化圖表。同時開發(fā)了輔助實驗系統(tǒng)，并取得軟件著作權登記，利用實驗數(shù)據(jù)驗證了該方法的可靠性。將方法運用與實際工作中，生成了多個典型的采購招投標數(shù)據(jù)模型和圖表。這對于高校政府采購信息化管理和數(shù)據(jù)分析具有一定的借鑒意義。

作者:吳健 單位:蘇州經貿職業(yè)技術學院