抓取网页数据违法吗(网页代码里面注释的内容会被抓取吗？百度工程师是如何回答的)

　　抓取网页数据违法吗(网页代码里面注释的内容会被抓取吗？百度工程师是如何回答的)

　　很多站长都知道，网页代码中有评论代码。形式是HTML中的注释内容出现在网页的源代码中，用户在浏览网页时看不到。因为源码中显示的注解内容不会影响页面的内容，很多人认为蜘蛛会抓取注解信息参与网页的分析和排名，所以添加了大量的注解内容到网页，甚至直接堆在注解关键词中。

　　那么网页上的评论内容会被抓取吗？我们来看看百度工程师是如何回答的：

　　Q：被注释掉的内容会被百度抓取分析吗？

　　百度工程师：在提取文本的过程中会忽略html中的评论内容。注释的代码虽然不会被爬取，但也会造成代码的繁琐，所以可以尽量少。

　　显然，搜索引擎蜘蛛非常聪明。他们可以在网络爬行过程中识别注释信息并直接忽略它们。因此，注释内容不会被抓取，也不会参与网页内容的分析。试想如果蜘蛛可以抓取评论，而这个评论代码就相当于一种隐藏的文字，那么网站的主要内容可以被JS代码调用，仅供用户浏览，而蜘蛛抓取的内容想要抓取的就是全部 把它放在大量的注释信息中，让网页给蜘蛛和用户展示不同的内容。如果你是灰色行业网站，那么你可以给搜索引擎一个完全正规的内容展示，摆脱搜索引擎的束缚，搜索引擎会不会正式允许你作弊？所以不管有多少关键词

　　那么，评论中关键词的填充会影响排名吗？不会是因为搜索引擎直接忽略了评论，而是很多内容怎么注释，反而会影响网页的风格，影响网页的加载速度。所以如果注释没有用，尽量删除它们，并尽可能保持代码简单。我们经常讲网站代码减肥。简化标注信息是减肥的方法之一。优化注解信息有利于网站瘦身。

　　当然，很多程序员和网页设计师都习惯于在网页中添加注释信息。这是一个好习惯。合理的标注信息可以减少查找信息的时间，方便查询和修改代码。因此，推荐使用在线页面 只需添加注释信息，如网页各部分的头尾注释，重要内容部分注释等，离线备份网页可以添加每个部分的注释信息。部分更详细，方便技术人员浏览和修改。有利于网页减肥，不影响以后的网页修改。

　　作者：木木SEO文章 来自：欢迎关注微信公众号：mumuseo。