爬虫程序

爬虫程序是每天自动抓取新公布的政策数据（默认为凌晨0点和中午12点各抓取一次），目前已实现自动抓取的网站有：
1、北京市商务局：
https://sw.beijing.gov.cn/zwxx/tzgg/index.html
2、北京市科学技术委员会、中关村科技园区管理委员会：
https://kw.beijing.gov.cn/col/col736/index.html
3、北京市经济和信息化局：
https://jxj.beijing.gov.cn/jxdt/tzgg/index.html
4、北京市顺义区人民政府：
https://www.bjshy.gov.cn/eportal/ui?pageId=533805&moduleId=4f79de108e9b4ce5b43e13aa60277edd&staticRequest=yes&currentPage=1

注意：切勿随意修改此页面的自动抓取配置项，否则将导致自动抓取程序失效。可以执行查看任务详细和调度日志的操作。