关键词采集工具(开发的关键词采集工具,再自己做点小站)
优采云 发布时间: 2021-09-21 06:02关键词采集工具,爬虫,抓包分析,再自己做点小站。
你学习下开源项目也行啊,集合别人的开源项目,
之前参加网易云音乐评论风波就是因为评论人工智能引擎faithfulljs的开源。
好像最近有niuniu团队正在做mysql评论引擎
玩玩oraclespark很多的
javascript打造的刷票小程序
现在刷评论的业务,使用api经常会出问题,需要python开发者分析,利用api。但是python开发实在太笨重了,比如,分析一个500万评论,然后存到mysql数据库里,虽然java也可以处理,但是需要写很多代码。反而python比较轻松,比如,bootstrap可以用,还可以很方便的改进加载爬虫。
之前做了一个接口处理,大概10m的资源,python只要1行java要200行,效率比nodejs高出来非常多。
值得,那是你需要写脚本写业务逻辑而不是刷评论。不过前提是你要用的到,不然写多了也是糟心。比如说某个大神刚开始刷评论玩玩,发现评论还要支持多语言,他第一想法是,大不了我再写个英文评论实现不就得了。然后一片混乱:上日志?写报告?回滚?重构?同步?异步?应用监控?取数取字段?带宽监控?资源监控?感觉都用不到,后来他大概就没继续刷评论了。