R语言网络数据抓取的又一个难题,终于攻破了!

优采云 发布时间: 2022-06-01 22:20

  R语言网络数据抓取的又一个难题,终于攻破了!

  

  要知道如今web前端中,使用json作为数据包返回的api是在是太普遍了,这个问题一直困扰着我,甚至一度认为RCurl包的POST方法不支持上传json参数(可是RCurl是直接对接liburl这个通用的爬虫C语言库的,urllib也是,httr底层是用了RCurl的,httr能做到的RCurl自然不在话下)。

  一定是作者把上传json参数的方式隐藏了起来,或者是还没有来得及封装成高级函数,放在了底层,否则解释不通。直到今天,浏览了linkedlin上面的一个大神写的小品文,突然灵光乍现,赶紧一试,果然成功了!验证了之前的想法,可能RCurl刚出道的时候,json还没有成主流吧,所以json传参没有明显的放在style这个POST方法的参数里。而httr包则很讨巧的把所有POST参数的编码方式都声明了(哈德利大神就是快人一步,造福人类)。

  以下是写作本篇推送的目地,把利用RCurl包构造POST请求,以及提交json字符串参数的案例及代码分享给大家。RCurl库与httr相比,偏底层,函数多且繁琐,httr更灵巧、轻便、简洁。这种关系,像极了Python中的urllib和request。

  构建报头和查询参数: <p>library("RCurl")<br />library("jsonlite")<br />library("magrittr")

headers

0 个评论

要回复文章请先登录注册


官方客服QQ群

微信人工客服

QQ人工客服


线