下载优采云关键字URL采集器的人也下载了它
优采云 发布时间: 2020-08-07 21:491. 为什么一段时间后无法采集?
这可能受到搜索引擎的限制. 通常,您可以通过更改IP(例如使用VPN更改IP)来继续采集. 如果您没有更改,则只能等待搜索引擎取消阻止,然后再继续采集. 百度的屏蔽时间通常为半小时到几个小时.
但是,即使验证码被阻止,该软件也会弹出手动输入的验证码(百度,Google)
2. 为什么在不同批次的关键字的结果中某些URL重复?
尤其是仅引用#domain#或#top-level domain#之后,这种部分URL重复更为常见. 这也是正常现象,因为每个网站的内部页面可能收录许多主题,并且可能在网站的不同内部页面上采集了不同的关键字. 引用域名时,同一网站不同内部页面的域名结果自然是相同的.
此*敏*感*词*内. 如果两个集合的结果中有一些重复的URL,则可以将它们合并在一起,然后使用该软件删除重复的URL(优采云·Text Deduplication Scrambler).
3. 为什么采集的URL的主题与关键字不匹配?
因为在引用#domain#或#top-level domain#后,将采用域名部分. 域名打开了网站的主页,采集的原创URL可能不是主页,而是网站的文章. 内部页面的内部页面收录关键字主题,因此收录在搜索引擎,软件中可以采集它. 但是,在获取域名后,您打开的域名的首页可能不收录关键字.
为了比较采集是否正确,您可以输入保存的模板: #标题#
,将其另存为htm文件,您可以打开文件以查看采集后的比较结果.