甲鱼网络舆情监测软件解析爬网络公开数据是否合法?
记得小编在去年还是前年就发表过爬网络公开数据是否合法的文章,由于小编当年年轻气盛,误解了广大网友,在这里,小编要说的是爬网络公开数据不违法,但是你爬到了数据,你如何处理这些数据就违法了。没有几个爬数据的会说她们爬数据就是玩玩,不用于任何商业用途,可能吗?你是学生吗?程序员测试吗?绝对不是,爬数据的都是一些大数据类的公司,她们爬数据后对数据进行分析、存储、甚至兜售给第三方无爬数据能力的公司,从而盈利。
那么问题来了,很多人又会问,那么百度、360、搜狗等搜索引擎的爬虫去爬数据呢?他们的爬虫去爬数据违法吗?在这里,小编要说的是不违法,肯定不违法。他们去爬那些网站的数据是经过网站授权允许的,有些甚至是网站方邀请他们去爬的,每个网站站长都可以设置robot.txt文件,这个文件可以允许搜索引擎爬他们的数据,也可以禁止搜索引擎爬他们的数据,而且搜索引擎也是非常懂规矩的,不会乱来。但是舆情监测软件厂商用的爬虫就是暴力爬虫法了,只要可以爬到数据,用IP池,各种方法去爬,哪怕侵权他们也去爬,最主要的是爬了他们还存储这些数据,这些侵犯了网站方的版权。你说这样违法不违法?