高校采购数据采集分析及应用

前言：想要写出一篇引人入胜的文章？我们特意为您整理了高校采购数据采集分析及应用范文，希望能给你带来灵感和参考，敬请阅读。

摘要传统的高校政府采购数据处理方法忽略了项目数据的分析对比。针对该问题，本文研究了运用和优化对比分析算法进行政府采购数据的采集和分析，并开发了一款采购数据管理系统。首先用网络爬虫程序爬取政府采购和高校采购信息网站的数据内容，然后对所采集的数据进行处理与分析，最后形成可视化图表。实验结果表明，系统可有效地对公开的采购数据资源进行分析研究与应用。

关键词政府采购；网络爬虫；数据分析；数据可视化

1引言

当前，大数据、云计算等新技术的高速发展推动了信息技术在各行各业的深度运用，特别是在政府管理信息化方面发挥了重要的决策参考作用。在国家“放、管、服”背景下的高校政府采购事业在新的数据技术方面较传统简单的统计分析有了很大的创新。技术人员借助大数据手段处理海量网络数据成为常态，运用大数据分析算法进行学习研究的案例不胜枚举[1]。我国高等院校各项事业处于欣欣向荣的发展时期，在政府采购网站、院校采购网站上积攒大量的采购数据信息。高校采购过程终涉及采购申请部门、归口管理部门、招标代理机构和投标单位等多个主体。采购资料包含招标公告、招标文件、中标公告、经济合同和验收记录等多个资料要素。以上各要素又包含了丰富的属性数据，数据之间存在着各种关联关系。本文研究运用和优化对比分析算法等大数据研究算法来进行政府采购数据的采集和分析，为招投标采购提供可视化数据分析支撑。

2研究内容

收集和整理采购数据信息的效率低下问题和采购要素关联分析的算法优化问题。申购部门在进行采购立项审批环节对可行性研究、需求论证、调研报告等申购材料存在编制不科学性和不规范性问题。学院各部门由于不了解国家采购法律法规、学院采购管理办法，存在对采购流程的不熟悉、不理解的问题。本文选取对社会公共服务影响较大的政府招投标采购网进行数据采集，如江苏省政府采购网和苏州市政府采购网。同时，选取省内政府采购工作业绩成效显著的高校采购信息网站作为同类数据对比分析素材的主要来源。通过编写Python爬虫程序[2]，将各大采购信息网站上常年积累的项目采购公示数据进行集采与整理，对各关键指标数据进行挖掘分析，便于将不同的优化方案应用于今后的采购活动中。由于采购数据因项目差异形成庞大的数据量，采购传统的人工或半自动统计分类会造成巨大的人力成本，因此先使用网络爬虫爬取定位院校的采购信息网数据，再用数据挖掘算法结合大数据工具进行处理，使用数据采集工作得到事半功倍的效果。对采购数据进行搜集、分析和处理，为学院采购工作提供可参考的数据分析报告，为领导决策提供参考。开发应用软件，应用于学院招标采购工作中，简化后勤服务流程，方便学院各部门学习采购政策解读，共享调研论证报告模板，保障采购资料的规范[3]。将研究报告中的案例素材作为学习资料推广到学校各部门，可以有效提高采购办的咨询服务效率。

3数据分析算法

Apriori算法利用逐层搜索的迭代方法找出数据库中项集的关系[4]，以形成规则，属于第一个关联规则的经典挖掘算法。通过数据挖掘技术对采购数据信息进行各要素之间的关联度分析，并进行可视化展示，已经成为当前后勤招投标管理领域比较新颖的研究课题。该研究课题首先利用互联网爬虫技术，编写爬虫程序爬取采购数据[5]，并保存到数据库中。然后对采购数据进行清洗，并将清洗后的数据转化为可以使用算法处理的数据。接着使用算法对转换后的数据进行处理，并对两种算法的处理时间进行分析对比，确定算法对数据的处理所消耗时间要少于算法。最后对数据的处理结果进行可视化展示，并进行研究分析。研究如何采用互联网爬虫技术对各双高院校长期积累的采购信息数据进行搜集整理，通过大数据分析算法将采购各要素关联起来，总结双高院校采购方案设计和编写的经验，为指导学院采购工作提供参考。基于后勤采购招投标工作，挖掘该类数据的价值，通过大数据算法发掘出招标文件中各种主体之间的联系，为制定采购方案和招标文件提供了丰富的参考资源[6]。研究数据挖掘算法，通过关联规则算法来找出采购数据中的限价标准、公告时点、技术偏离和付款方式等，找出后勤高质量服务的特征点，作为绩效考核指标依据。通过大数据研究算法来进行数据的梳理，以便将数据可视化处理后形成相关的图表资料为高校后勤建设规划和采购管理提供参考依据[7]。

4程序设计与开发

通过WXML标记语言和样式语言WXSS，基于JavaScript的逻辑层框架，结合指定组件开发一款高校采购招投标信息管理的微信小程序。该系统使用B/S架构，分为存储层、逻辑处理层和展示层，使用关系型数据库管理系统MySQL。小程序端可以通过手机微信直接访问，管理系统则通过浏览器进行访问。小程序前端使用微信开发者工具进行开发，后端采用IDEA进行开发。系统主界面分四个区域：（1）标题区域。该区域主要用来显示系统名称以及进入的功能标题。（2）轮播图区域。该区域主要用来轮流显示采购工作的最新通知、公告、新闻、法律法规和数据统计等常用的信息内容，在主界面上方的显眼位置进行轮番播放，起到及时提醒用户的作用。（3）功能模块区域。该区域包含16个子功能模块，分别是招标信息、采购计划、项目清单、需求公示、调研论证、公告文件、评标情况、专家费用、合同管理、采购日历、法律法规、检索目录、投标签到、数据报送、代理机构、咨询服务。该区域是采购招投标管理工作中提供给用户的主要辅助功能，也是用户与系统进行数据交互的通道。（4）底部导航区域。该区域包括首页、关注、答疑和我的四个导航，便于用户在不同的分页间做切换。用于高校采购、后勤、资产等部门进行招投标采购工作，提供从采购计划、需求公示、采购审批、招标公告到合同流转等一系列采购流程中的信息管理服务。该系统技术设计方案的优点是在视图层与逻辑层间提供数据传输和事件系统，方便聚焦于数据和逻辑上。该系统解决了长期困扰负责学校招投标采购工作的教师对于采购全流程管理中的信息有序管理问题，做到了信息的实时更新和整理，便于可控可追溯，有利于提高采购流程数据可视化管理的效率[8]。它为招投标采购工作中采购计划、采购公告、专家评审费统计、合同管理等带来了便利，具有一定的实用价值。

5数据处理与分析

以苏州某高校2021年政府采购数据为例，通过政府采购网站、校内招标信息网站和手机APP招投标管理系统的数据，经过数据处理后形成可视化数据图表[9]。学院2021年度采购金额总计5020万，政府集中采购金额和节约预算金额分别比2020年增长12.4%和65.6%。2021年与2020年相比，在论证及验收会议参与量增长42%，提供咨询、培训时间增长150%，质疑投诉有效处理量提高50%。招标文件编制审核时间下降40%；流标次数下降20%。网上商城和网上竞价采购工作效率也有大幅提升。同时，在信息推广和制度宣传解读方面，学院采购人员利用晨学时间送服务到基层[10]，根据申购部门对于采购需求提出的问题，将政府采购实务案例进行讲解，答疑解惑，解读政府采购相关政策。并且将隐性数据也统计在列，提升采购招投标管理的软服务。通过数据分析，在采购项目进度计划方面，为采购项目设计和定制项目采购进度计划横道图，明确重点责任分工和关键时间节点，保证采购各流程顺利通畅，按时保质保量完成项目任务，以“好、快、省”为采购项目化任务考核目标[11]。例如，学院机房改造工程项目演变而来的采购进度计划横道图模板。该模板将采购流程的各个环节分解，为后续时间紧、任务重的采购项目提供进度参考依据，将各部门之间的协同配合通过数据表现出来，在项目化考核中具有直观比较的依据，提高采购效率。

6结束语

本文研究了网络爬虫程序爬取政府采购数据的方法，基于利用优化改进的Apriori算法，通过数据挖掘技术对政府采购数据信息进行采集、归类、对比分析，形成可视化图表。同时开发了辅助实验系统，并取得软件著作权登记，利用实验数据验证了该方法的可靠性。将方法运用与实际工作中，生成了多个典型的采购招投标数据模型和图表。这对于高校政府采购信息化管理和数据分析具有一定的借鉴意义。

作者:吴健 单位:苏州经贸职业技术学院