自动采集机(自动采集机器人以前在广州做过，百度一下你就知道那个)

　　自动采集机(自动采集机器人以前在广州做过，百度一下你就知道那个)

　　自动采集机器人以前在做过，百度一下你就知道的那个。我自己的定义应该是，自动采集的机器人有判断样本是否存在，类别分割，基本是手工的，统计方法包括排序，不需要完全自动。我自己做了几个。在真实公司，用的还是自己的代码在维护，即使在taobao上也有一些经验。

　　使用scaffold，能做到。我也刚从“光屁股”里面出来不久，目前做了很少的工作，和完成多于10个微小测试，还需要逐步完善，别着急。

　　你可以看看geodatajournal这个project，如果在西雅图有类似的公司，你可以提交一个spark。

　　西雅图有大数据的创业公司。说实话，*敏*感*词*山cbd看到苹果apple展的时候一样火爆。到目前为止仅仅不到100个数据包，没有自己的数据源，用python做爬虫。

　　西雅图很多公司都在招java爬虫的工程师啊，不过市场上招java爬虫工程师比较少的话那可能是个水平问题，不是说不需要，至少更容易找到工作，我有个朋友去年也入职了一家猎头公司，刚开始时也是去找美国那边的爬虫工程师。

　　应该不大多，这是中小公司的一个优势，大公司没必要这么做。不过如果你确实想找工作，那也可以考虑去美国那边找找，西雅图相对华盛顿特区以及一些大城市优势不少，发展也比东北部一些华人圈的城市要好。