采集器采集源(百度蜘蛛上网线到服务器就知道你(图))

　　采集器采集源(百度蜘蛛上网线到服务器就知道你(图))

　　采集器采集源一般是浏览器，可以做，把js脚本发给服务器，然后在转发，只是请求是跳转到该页面，类似网页购物一个道理。这些采集软件不是什么高科技，有网站的家伙，没网站的手机通过wifi调用设备的源调用h5页面也能实现采集功能。百度蜘蛛上网线到服务器就知道你这个url，你在百度采集，你所要做的就是把url放出来，然后让它帮你爬虫。

　　你要抓取百度各种大站页面，还要为每个站点分配新的dom树，比如：京东：;q=product&order=product&spiderid=1432944037&keyword=product&fullpage=&self=product&itemid=17867879&user=qq&referrer=''&status=qr-code&w=weibo&protect-content=。

　　腾讯：;q=product&fullpage=&self=product&itemid=18419993&user=qq&referrer=''&status=qr-code&w=weibo&protect-content=。某度：;q=product&fullpage=&self=product&itemid=17867879&user=qq&referrer=''&status=qr-code&w=weibo&protect-content=。

　　百度有api，有些网站可以爬，但是作为内容提供商，