只有两个作品，第三个作品还必须要填的话，只好乱填才能达到要求了。 只有两个作品，第三个作品还必须要填的话，只好乱填才能达到要求了。 只有两个作品，第三个作品还必须要填的话，只好乱填才能达到要求了。 只有两个作品，第三个作品还必须要填的话，只好乱填才能达到要求了。 只有两个作品，第三个作品还必须要填的话，只好乱填才能达到要求了。

该项目是提供一个web系统给法务人员向*法务发起违法证据的调取，前端页面分为申请端和审批端，只有一个后端，*侧则分为个人账号和公众号。后端收到前端申请端的申请后，根据前端传来的的参数是公众号还是个人账号，再调用*侧的API请求具体的证据内容。本人主要负责开发个人账号后端的开发以及后期整个后端的维护任务

项目主要分为爬虫抓取，模型判断，数据清洗，业务系统4个部分，本人在其中主要负责数据清洗和推送数据到业务系统部分。数据清洗用了大数据平台hive，在hive清洗完成后经过网络传输送到深圳市监局，再由入库程序将数据插入到业务数据库中。业务数据库主要用到了clickhouse和mysql两种数据库。数据清洗、数据推送、数据入库这三部分程序都由本人一个人完成。数据清洗主要用到hive QL 和pyspark，数据推送和数据入库用Python完成。