python抓取动态网页 Stata、Python & ArcGIS 视频教学
优采云 发布时间: 2022-05-26 13:54python抓取动态网页 Stata、Python & ArcGIS 视频教学
视频教学主要覆盖三部分内容。 Stata编程基础与爬虫、Python 爬虫、 ArcGIS 应用。旨在让学员熟练掌握 Stata 数据的读取、数据的清洗和处理、网络数据读写;掌握 Python 爬虫,并能独立编写爬虫程序,使用 ArcGIS 进行地理信息数据管理、展示与数据分析等实用技术。
我们将采取实例教学,让大家将所学技巧与科研过程中遇到的实际问题相结合,学了就能用!助您成为数据获得、数据分析、数据管理和数据展示的达人!
课程讲授者
彭文威
创建并维护小花经济学术微信公众号,以助研身份参与多个实证研究项目,熟悉 Stata 编程、 Python 爬虫与 ArcGIS 数据可视化与数据分析处理。
陈宇健
擅长 Python 编程、Stata 编程,熟悉 Python 与 ArcGIS 交互 ,具有丰富的程序设计经验,负责业界公司多个百万级爬虫项目,参与多个实证研究项目,完成过多项高难度爬虫任务,经验丰富。
培训内容
第一部分、Stata
Stata 基础
Stata 常用函数
Stata 数据清洗、整理
Stata 文本处理与正则表达式
Stata 宏与循环
Stata 读写网络数据
-获取已知地址的经纬度信息、百度地图 API
-抓取十八大以来落马官员的数据
-抓取和讯网上市公司社会责任报告数据
-抓取百度新闻搜索量
-抓取全国城市空气质量日指数(AQI)
-抓取中国土地市场网数据()
-抓取知网期刊数据()
Stata Debugging
第二部分、Python
对于高效完成*敏*感*词*爬虫项目而言,Python是比Stata更为合适的编程语言。通过这部分的学习,你将了解到:Python的安装和基础语法;如何解析纷繁复杂的各类静态、动态网站;如何利用多进程的优势爬取数据并与数据库交互;如何导入各类型本地数据,爬取网址对应所需数据,并保存为本地数据(Stata dta 、csv 等);如何解决基本的反爬虫问题。学习Python,也有利于你进一步学习对大数据进行数值运算,统计分析,机器学习。
Anaconda 环境配置及IDE安装
Python 语法及数据结构入门
网页结构分析(HTML、CSS选择器、Xpath定位)
网站协议,发送请求,解析网站
【实战】:静态网页爬虫
数据处理及存取(正则表达式、Pandas)
Python 与 MySQL 数据库交互
处理基本反爬虫
【实战】:多进程爬虫
Selenium 模拟浏览器爬虫
【实战】:动态网页爬虫
代码稳健、json 数据处理
post方法与一般网站爬取思路
第三部分、ArcGIS
地图数据展示(基本画图展示)
地理信息数据管理、分析
Python 与 ArcGIS 交互
利用 OpenStreetMapAPI 获取全球任意地点最新行政边界底图
已知地址获取经纬度、已知经纬度获取地址、交通路线查询等
报名咨询微信群
或扫描以下二维码添加课程客服为好友,由客服拉你进群。
费用
教学视频、课件、数据和代码等资料共:
原价: 2333元/人
优惠:按以下方式转发可减至 1888元 / 人
转发方式:在不同日期,不分组转发至个人朋友圈三次,并将有评论或点赞的三张朋友圈截图发送至课程客服。
优惠期(8月17日24:00之前)付款可享受以下优惠:
总价:1988元/人
转发价为:1588元/人
如果您想分开购买,价格分别为:
Stata 988,按要求转发后价格 888
Python 988,按要求转发后价格 888
ArcGIS 399,按要求转发后 299
可提供培*敏*感*词*哦!
视频、资料和代码发放
扫描上方二维码,添加课程客服为好友并微信转账,附上个人邮箱信息。确认付款成功之后,所有资料付款后一次性发送,更多疑问请加群资讯。
视频样本试看链接:,
样本内容为 Stata 抓取 Landchina 结果公告的code运行效果展示(非正式讲解视频)。Stata 常用文本函数的前15分钟、 Python 课程大纲以及安装的前 3 分钟。
特别提醒
为保护知识产权,我们的视频会被加密。购买的视频只能在一台电脑上观看,相信这也能够满足大家的学习需求。