python抓取动态网页 Stata、Python & ArcGIS 视频教学

优采云 发布时间: 2022-05-26 13:54

  python抓取动态网页 Stata、Python & ArcGIS 视频教学

  视频教学主要覆盖三部分内容。 Stata编程基础与爬虫、Python 爬虫、 ArcGIS 应用。旨在让学员熟练掌握 Stata 数据的读取、数据的清洗和处理、网络数据读写;掌握 Python 爬虫,并能独立编写爬虫程序,使用 ArcGIS 进行地理信息数据管理、展示与数据分析等实用技术。

  我们将采取实例教学,让大家将所学技巧与科研过程中遇到的实际问题相结合,学了就能用!助您成为数据获得、数据分析、数据管理和数据展示的达人!

  课程讲授者

  彭文威

  创建并维护小花经济学术微信公众号,以助研身份参与多个实证研究项目,熟悉 Stata 编程、 Python 爬虫与 ArcGIS 数据可视化与数据分析处理。

  陈宇健

  擅长 Python 编程、Stata 编程,熟悉 Python 与 ArcGIS 交互 ,具有丰富的程序设计经验,负责业界公司多个百万级爬虫项目,参与多个实证研究项目,完成过多项高难度爬虫任务,经验丰富。

  培训内容

  第一部分、Stata

  Stata 基础

  Stata 常用函数

  Stata 数据清洗、整理

  Stata 文本处理与正则表达式

  Stata 宏与循环

  Stata 读写网络数据

  -获取已知地址的经纬度信息、百度地图 API

  -抓取十八大以来落马官员的数据

  -抓取和讯网上市公司社会责任报告数据

  -抓取百度新闻搜索量

  -抓取全国城市空气质量日指数(AQI)

  -抓取中国土地市场网数据()

  -抓取知网期刊数据()

  Stata Debugging

  第二部分、Python

  对于高效完成*敏*感*词*爬虫项目而言,Python是比Stata更为合适的编程语言。通过这部分的学习,你将了解到:Python的安装和基础语法;如何解析纷繁复杂的各类静态、动态网站;如何利用多进程的优势爬取数据并与数据库交互;如何导入各类型本地数据,爬取网址对应所需数据,并保存为本地数据(Stata dta 、csv 等);如何解决基本的反爬虫问题。学习Python,也有利于你进一步学习对大数据进行数值运算,统计分析,机器学习。

  Anaconda 环境配置及IDE安装

  Python 语法及数据结构入门

  网页结构分析(HTML、CSS选择器、Xpath定位)

  网站协议,发送请求,解析网站

  【实战】:静态网页爬虫

  数据处理及存取(正则表达式、Pandas)

  Python 与 MySQL 数据库交互

  处理基本反爬虫

  【实战】:多进程爬虫

  Selenium 模拟浏览器爬虫

  【实战】:动态网页爬虫

  代码稳健、json 数据处理

  post方法与一般网站爬取思路

  第三部分、ArcGIS

  地图数据展示(基本画图展示)

  地理信息数据管理、分析

  Python 与 ArcGIS 交互

  利用 OpenStreetMapAPI 获取全球任意地点最新行政边界底图

  已知地址获取经纬度、已知经纬度获取地址、交通路线查询等

  报名咨询微信群

  或扫描以下二维码添加课程客服为好友,由客服拉你进群。

  

  费用

  教学视频、课件、数据和代码等资料共:

  原价: 2333元/人

  优惠:按以下方式转发可减至 1888元 / 人

  转发方式:在不同日期,不分组转发至个人朋友圈三次,并将有评论或点赞的三张朋友圈截图发送至课程客服。

  优惠期(8月17日24:00之前)付款可享受以下优惠:

  总价:1988元/人

  转发价为:1588元/人

  如果您想分开购买,价格分别为:

  Stata 988,按要求转发后价格 888

  Python 988,按要求转发后价格 888

  ArcGIS 399,按要求转发后 299

  可提供培*敏*感*词*哦!

  视频、资料和代码发放

  扫描上方二维码,添加课程客服为好友并微信转账,附上个人邮箱信息。确认付款成功之后,所有资料付款后一次性发送,更多疑问请加群资讯。

  视频样本试看链接:,

  样本内容为 Stata 抓取 Landchina 结果公告的code运行效果展示(非正式讲解视频)。Stata 常用文本函数的前15分钟、 Python 课程大纲以及安装的前 3 分钟。

  特别提醒

  为保护知识产权,我们的视频会被加密。购买的视频只能在一台电脑上观看,相信这也能够满足大家的学习需求。

0 个评论

要回复文章请先登录注册


官方客服QQ群

微信人工客服

QQ人工客服


线