解决办法:docker虚拟机+virtualenv利用第三方工具的调试工具自己找

优采云 发布时间: 2022-10-04 08:10

  解决办法:docker虚拟机+virtualenv利用第三方工具的调试工具自己找

  采集工具自己找如果自己有经验能联系上领导的话可以找工会和公司做这个比较简单如果没经验就只能找公司了可以多找几家不同类型公司谈谈感觉自己对方接受度还高的就ok了

  你可以考虑前端页面,

  

  一般做爬虫平台也就是我们所说的爬虫,主要是做集群,几个人通过scrapy进行集群爬取,也可以把其他人分成一个个小组,一个个采集,相对而言就简单的多,前提就是爬取速度有保证,采集效率必须提高,具体方法就是淘宝/美团/饿了么等大站后台都提供了规则,你去逐条分析即可完成。

  应该上各种清洗工具比如去重系统去重有excel提取

  

  关键是动手能力。还有如果你没经验可以找公司,如果你有经验当然直接找一个外包。另外尽量接受比较成熟,有开发经验的人的合作,前端后端都*敏*感*词*,否则一年后,很难说他不懂后端一些东西。

  docker虚拟机+virtualenv利用第三方工具如vnware等

  hyper-v虚拟主机,或者使用sunjava应用中心提供的sunpi、sunextendedproxy之类的。简单的说,你把配置文件或命令全部写到solaris系统中去,程序会自动把其他ide/eclipse代码首先转换一遍(前者是一个工具,后者是一个集群,借助于sdl/bsp+hypervisor),之后使用sun应用中心提供的gdb、git等调试工具进行抓取和修改。

0 个评论

要回复文章请先登录注册


官方客服QQ群

微信人工客服

QQ人工客服


线