采集亚马逊热搜关键词,竟这么简单!!!
优采云 发布时间: 2020-08-09 16:37在我们日常使用搜索引擎的时侯,大多数搜索引擎还会为了使用户更快速的输入自己想要的相关问题,而基于已输入的字符智能匹配出许多相关的关键字推荐给用户。
当用户输入一个字符,碰到提示的候选词好多的时侯,如何抉择,哪些展示在上面,哪些展示在前面?
这就是一个搜索热度的问题。
用户在让搜索框搜索相关问题时,会输入大量的关键字,每一次输入就是对关键字的一次投票。那么关键字被输入的次数越多,它对应的查询就比较热门,所以须要把查询的关键字记录出来,并且统计出每位关键字的频度,方便提示结果根据频度排序。
而在亚马逊中的搜索也是这么。如下图,在输入一个”A”后会手动联想出“amazon gift cards”、“airpods”、“aa batteries”等词。
那么怎么批量的依据自己设置的关键词去采集亚马逊推荐的热搜词呢?
So Easy!
用Python只需4步即可实现!
1、打开浏览器访问亚马逊,在亚马逊主页按下“F12”,并切换到“Network”。
2、在搜索框中输入任意字符,并抓包剖析数据。
这时候我们会听到控制台中出现了“suggestions?.....”的恳求。点击并切换到Response选项卡中,可以清楚的看见亚马逊返回的数据。我们将数据拷贝(Ctrl+A在Ctrl+C)出来,美化一下仔细瞧瞧究竟返回了些哪些。访问:将数据拷贝进去,一探究竟。
在返回的数据是一个标准的json数据,在数据中”Value”这个键下对应的值就是亚马逊的热搜关键字!
如此一来我们只须要带上关键字模拟恳求这个插口,即可领到亚马逊返回的热搜关键字。是不是So Easy?!
3、复制Curl,生成代码。
还是用优采云方法给你们演示,首先在“suggestions?.....”的恳求上键盘右键选择Copy→Copy as cURL。
然后访问,将复制的cURL填进去即可手动生成Python代码。再将生成的代码复制下来,在PyCharm中复制进去。
4、修改代码,实现复用。
在测试当中,我将一些不必要的参数删掉最终只需三个参数、几行代码即可实现。
import requests
keyword = str(input('请输入关键字:'))
headers = {
'Accept': 'application/json, text/javascript, */*; q=0.01',
'Referer': '#39;,
'Origin': '#39;,
'User-Agent': 'Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/73.0.3683.103 Safari/537.36',}
params = (
('mid', 'ATVPDKIKX0DER'),
('alias', 'aps'),
('prefix',keyword),)
response = requests.get('#39;, headers=headers, params=params)
suggestions = response.json()['suggestions']
for i in suggestions:
value = i['value']
print(value)
当然这几行代码只能实现单个关键词热搜词的采集,我们可以将关键字批量的写入之后逐个的恳求即可实现批量采集的目的。
在这里技术小妹妹早已将这个功能封装为一个小工具,只需将关键字写入到表格当中即可批量采集!