采集器的自动识别算法很重要，可以是一些固定数据库

　　采集器的自动识别算法很重要，可以是一些固定数据库

　　采集器的自动识别算法很重要，可以是一些固定数据库（u2c、api）的数据，可以去试试代码，数据量多的情况下数据库size和实际算法没有必然联系。有条件的话可以考虑去全球各地采样，我们的采样库是由北京在法定节假日做了大量的调查样本得来的，差不多覆盖了节假日全部时段。而我们家的基础数据库大概1万多份。

　　有源数据要搜索方法简单，直接上前台抓相应数据并清洗干净然后重新在后台建模去重即可。现在还有一种方法是直接去各网站上去抓。

　　建议去爬虫类的公司。一般都会提供相应的开源程序。可以去github上看看。不仅仅是数据爬取，更多的是数据可视化，数据分析，对你都会有帮助的。当然，如果你不想花那么多钱的话，就直接在线建模，去重。

　　最简单的就是爬谷歌的爬虫。在谷歌搜一下手机型号，基本就能搜出手机在哪里买的。然后再爬微博等渠道，找同款相同型号手机，然后一个个去实体店去找对应的手机。如果，还想要详细一点，请看下图。直接下载当然也可以爬除了国内的所有网站。前提是你要懂点爬虫。如果做好，后面还可以自己去做数据可视化。

　　各大电商网站每天都有各种抽奖活动，

　　根据你要做的产品特点和市场需求来进行尝试，