抓取网页数据违法吗(
网站通过Robots协议告诉爬虫哪些页面可以抓取文件?
)Protocol),网站通过Robots协议告诉爬虫哪些页面可以抓取,哪些页面不能抓取。爬虫作为一种计算机技术就决定了它的中立性,因此爬虫本身在法律上并不被禁止,但是利用爬虫技术获取数据这一行为是具有违法甚至是*敏*感*词*的风险的。爬虫抓取了受到法律保护的特定类型的数据或信息。常见错误观点:认为爬虫就是用来抓取个人信息的,与信用基础数据相关的。但是你利用技术爬取别人隐私、商业数据,那你就是蔑视法律了!
继续阅读 »