自动采集数据(【废水企业历史数据】Python采集数据源,自动生成Excel报表)
优采云 发布时间: 2022-02-24 04:16自动采集数据(【废水企业历史数据】Python采集数据源,自动生成Excel报表)
内容
的
的
的
的
的
的
的
的
的
的
的
的
的
一、背景
某生态环境管理公司定期从各个官方网站获取数据,对环境污染指数进行评估。
目前的方法是手动复制,效率低,浪费资源。
领导者重视效率,并要求促进自动化流程以避免人为浪费并提高效率。
解决方法:Python采集数据源,自动生成Excel报表。
二、采集数据源
网站: 省控以上重点污染源数据发布
1、采集两类数据【废水】和【污水厂】
2、采集【氮和氨】数据
3、采集[COD化学需氧量]数据
4、采集【总氮】数据
三、输出Excel内容样式1、输出文件命名格式
每天生成一个Excel文件,用当天的【年月日】标记。
2、文件内容格式详细信息
[废水]和[污水厂]各使用一张
四、解决方案1、获取分析【废水企业名单】
这仅用于可行性分析,共有1680家公司。
2、获取解析【污水企业历史数据】
这仅用于可行性分析:
24日青州造纸厂12.1-12.排放总量氨氮值:
3、输出到Excel文件的sheet栏【废水】
4、保证数据完整性
有时目标网站的响应超时,需要检查响应码:如果响应不正确,需要重试以保证数据的完整性。