网站内容维护不得不说的几个做法,你知道吗?

优采云 发布时间: 2021-07-12 01:04

  网站内容维护不得不说的几个做法,你知道吗?

  网站内容维护不得不说,这是一个比较难的工作,虽然项目规模不大,但对团队技术人员的素质,至少本人来讲是要求很高的。技术架构层面要求高,网站性能需要根据不同的用户行为需要去设计实现不同的高并发场景下的服务,如:看微博,就要求实现并发查询。当然这个场景需要注意的点也很多,目前没什么成熟的做法,

  1、提前规划好整个网站的架构搭建

  2、日常的维护保持稳定

  3、对所有用户分析行为行为去做不同场景下的负载均衡设计

  4、对各种排序算法,对各种筛选规则需要了解熟悉。

  可以写linux爬虫工具,直接抓。

  我们开发部门很多网站,所以我记得做的比较好的就是写一个爬虫工具,这种是非常大的网站,基本上,各种网页爬虫工具都有用。至于性能方面,大部分要做同步执行,因为服务器是中央处理器分进程的那种。这种还有就是类似服务器加速的部分。

  第一:你需要懂写代码第二:你要懂技术选型,因为有些时候需要你去设计并发量的情况,多进程的情况。因为部署时一个抓的越多,发展成的小内存占用越高。选择一个好处理并发的语言。

  看到并发度要求我进来了,自己买书看看吧,

  最近在prof统计的五百强网站里,听到的ip最多的几个网站有:dojo,jsfiddle,color.find(xx),soundhound...,在玩儿五百强的时候,经常看到他们手头上有好几个大的爬虫去同时抓取同一网站不同页面的同一条新闻,并且保证热门条目不重复。如果数据量不是特别大的话,使用scoket抓一般会更加高效,保证最大时延。

0 个评论

要回复文章请先登录注册


官方客服QQ群

微信人工客服

QQ人工客服


线