解决方案:算法自动采集列表信息的模板很多，题主加定位

　　解决方案:算法自动采集列表信息的模板很多，题主加定位

　　算法自动采集列表信息的模板很多，题主加定位，地点和类型。选定一个模板之后可以在网站首页看到推荐的分页列表，点击后可查看详情。这是个rank模式的爬虫，采集目标是你感兴趣的网站列表页。前端每个页面的抓取开销比较大，可以考虑采用分布式、redis等设备保存数据。

　　scrapygallery

　　去阿里定向搜索某几个列表，然后在某个列表中搜索关键词，

　　爬虫么。

　　用js抓网页源码保存到数据库中。

　　我用github-foxmylengger/scrapy-webdriver:webdriver:compiledandbuiltwithreact-nativeforreact。jsprogramming。focusingoncreatingconsole。js,advancingreactwebdevelopmenttoenhanceandadvanceyourwebbrowserserver。

　　从哪儿抓数据，

　　我个人觉得和某一需求有关，如果有需求就去抓、如果没有需求你有空要做的工作那么多，你的兴趣点在哪里就去哪儿抓，如果你有一堆需求并没有那么多兴趣在哪个领域，那么肯定去什么分类找某一个，

　　爬虫么？

　　先说你的需求，要是这样要计算的话，就得把所有的需求要具体说一下了，比如你要干什么？确定好这个再去看就好了啊，到底一个大数据库要多少内存，多少带宽。而且好多例子要具体说的，比如规模，好多都不太清楚。