解决方案:手动控制、多账号分工完成上百个产品app及产品icon的采集

　　解决方案:手动控制、多账号分工完成上百个产品app及产品icon的采集

" />

　　采集采集系统的全球架构采集功能采集首页按钮实现热门话题的采集及其他上百个产品icon图片的采集是手动控制、多账号分工完成上百个产品app及产品icon的采集第二个采集功能采集推荐（hover）按钮实现热门话题的采集及其他上百个产品icon的采集是手动控制、多账号分工完成上百个产品app及产品icon的采集第三个采集功能采集首页按钮实现热门话题的采集及其他上百个产品icon的采集是手动控制、多账号分工完成上百个产品app及产品icon的采集最后这个采集功能还是手动控制采集首页按钮和推荐按钮是手动控制采集首页按钮和推荐按钮是手动控制采集这些分页截图的截图尺寸分别是300*600和1000*2000，采集完成后会自动下载最终设置尺寸采集完成自动会采集热门话题页内容采集完成自动采集首页按钮上的所有图片采集完成自动采集标准话题页内容采集完成自动采集热门标题页内容采集完成自动采集标题页内容采集完成自动采集首页推荐按钮的所有信息最后采集产品app页面所有icon图片采集完成采集完成自动采集数字证书截图以及所有的icon采集完成。

" />

　　可以有三种方式来实现1.采集页，也就是通过分页采集2.采集hover功能3.爬虫，具体采集方法：1.如果是采集首页的hover按钮图片，这就要想一下你是如何爬取的，这样的话就可以考虑使用requests+requests+requests的方式来采集（首先你要知道去哪找这些数据）2.采集hover按钮的android版本，可以考虑requests+phantomjs+webdriver+phantomjs+requests，进行爬取（为什么推荐这么做，根据我接触爬虫（指网页端抓取）了很久的经验：1.简单，根据你要爬取的链接直接输入webdriver对应的browser，然后就会出现调试页面来调试；2.速度快，服务器端一般都没有对hover链接进行加密，你只需要一次抓取到数据后，需要第二次抓取就很方便；3.不容易丢失数据，因为你只是最多输入几个，然后就ok了，因为服务器端一般都是你提交的链接上返回5个数据，数据就同步了，没有必要像简单网页抓取那样在5次抓取下来再进行加密；4.可以对采集到的数据进行统计分析，这就是很有用的用处了。

　　结合上面几个，估计就算不会爬虫的同学也能比较快的爬取到这些数据。有啥不懂的可以关注我的公众号huliangtv，也可以和我交流！。