新版本在这里:https://rstata.duanshu.com/#/course/28ac1ad7df3b4a43a1692adcf96a1919
今天给大家分享一份爬取自国家金融监管总局网站的国家金融监管总局、省局、分局行政处罚数据:
![]()
包含三种类型的行政处罚:总局、省局、分局。
该数据的爬取处理分为三步。第一步是获取所有处罚信息的链接,例如总局的:
![]()
该步骤会遇到反爬的问题,需要使用代理 IP,关于代理 IP 的使用,可以学习这个课程:
在 R 语言中使用代理 IP 进行多线程网络数据爬取:https://rstata.duanshu.com/#/brief/course/97f6f7d62b9340cd9a7fd50b3e160d01
爬取之后可以得到 国家金融监管总局、省局、分局行政处罚信息详情链接(截止2024年3月10日).dta 数据了:
![]()
其中各年的数据量如下:
![]()
这些行政处罚信息包含多种形式的,大体上是处罚决定书和处罚信息公开表,由于处罚决定书的内容比较混乱,难以整理成表格数据,所以就没有再整理,处罚信息公开表的内容大体是下面这样的(其实也有很多形式,整理起来巨头疼):
![]()
经过一番艰难的整理,一共得到了 4.86 万条处罚信息公开表数据:
![]()
其中各年的数据量如下:
![]()
包含如下变量:
年份、处罚决定书文号、主要违法违规事实或案由、处罚依据、处罚决定、作出处罚决定的机关名称、作出处罚决定的日期、个人姓名、单位名称、法定代表人或主要负责人姓名、文档ID、类别、发布时间、文档文件链接、pdf文件链接、标题
点击这里跳转到 RStata 短书平台获取附件:旧版本|国家金融监管总局、省局、分局行政处罚数据(截止2024年3月10日)
评论