关键词采集词(关键词网址采集器绿色版批次关键词采集结果为什么会引用部分网址重复)
优采云 发布时间: 2021-09-01 07:00关键词采集词(关键词网址采集器绿色版批次关键词采集结果为什么会引用部分网址重复)
关键词URL采集器绿版是一款可以帮助用户关注关键词采集网站的软件。在本软件中,用户可以快速采集指定的关键词网站,减少其他网页的出现。
总体介绍
输入关键字采集各个搜索引擎的网址、域名、标题、描述等信息,支持百度、搜狗、谷歌、必应、雅虎、360等。每个关键词600到800、采集比如关键词可以带搜索引擎参数,就像在网页中输入关键词搜索一样,比如百度搜索结果URL必须收录bbs的关键词,然后输入“关键词inurl: bbs。”
数据参考
#URL#:采集 的原创网址
#Title#:URL 对应的网页标题
#domain#:原创网址的域名部分,如“”中的“”
#Top-level domain#:取原网址的顶级域名部分,如“”中的“”
#Description#:页面标题下方的一段描述性文字
常见问题
1.为什么采集一段时间后不能采集?
这可能是采集被搜索引擎限制了。重启软件继续采集。如果不改,只能在搜索引擎解封后继续采集。百度的屏蔽时间一般是半小时到几个小时。
但是,即使验证码被屏蔽,软件也会弹出手动输入的验证码(百度、谷歌)
2.不同批次关键词采集为什么会有一些重复的网址?
特别是在只引用#domain#或#top-level domain#之后,这种部分URL重复的情况更为常见。这也是正常的,因为每个网站内页可能收录很多主题,而不同的关键词可能是采集到网站的不同内页,当引用域名时,相同的网站不同内页页面的域名结果自然是一样的。
另*敏*感*词*内。如果两个采集的结果中有重复的网址,可以合并在一起,用软件去重(优采云·text deduplication scrambler)。
3.为什么采集返回的URL主题与关键词不匹配?
因为在引用#domain#或#top-level domain#后,取的是域名部分。域名打开网站的首页,采集的原网址可能不是首页,而是网站的文章内页的一篇文章,内页收录关键词主题,所以可以通过搜索引擎收录获取,软件可以采集。但是取域名后,您打开的域名首页可能没有关键词。
为了对比采集是否正确,可以在保存模板中输入:,保存为htm文件,采集后可以自己打开文件查看对比。
更新日志
1.转型支持OEM代理
2. 添加了 Bing 和 Yahoo采集;多处变化
3. 将 Bing、Yahoo、Google 更改为 https 请求,以避免在某些情况下 采集 失败。
4.添加百度新闻采集。
5.一些更新。
6. 添加了关键词 分割线选项。
7. 修复了百度最新更改不能为采集的问题。
8. 修复 Bing change采集 失败问题;修复部分电脑无法使用xmlhttps的问题(涉及Google、Bing、Yahoo)。