最近小编看到几个试用小编家公司的网络营销类公司也开始做起了网络舆情监测软件，小编比较好奇，为什么营销类公司会看上网络舆情监测这块大饼呢？难道他们真的可以从中分到一杯羹吗？还是他们觉得几万块一年从甲方网络舆情监测公司买的软件无法满足他们对甲方的需求？还是他们想要扩大扩宽市场，进军政府行业的网络舆情监测业务？ 小编来跟大家分析一下吧，目前网络舆情监测软件主要掌握在一些大的网络舆情监测软件厂商手里，例如红麦、新浪、人民网、鹰犬舆情监测等网络舆情监测软件厂商手中，当然也有一些小的网络舆情监测厂商，就拿那些做了几年的网络舆情监测软件的大佬们来说吧，他们对目前的网络舆情监测软件的功能，数据各方面都还有很多的欠缺，他们对他们自己的系统还不是很满意，而且目前市面上所有的客户基本上在这些软件厂商手里。大部分客户都是政府类部门，这些客户有钱，而且每年都要买网络舆情监测软件，而且他们不缺钱，每年买软件的费用都会增加，还有一些是企业类客户，这类客户钱少，要求高，而且运营不稳定，有可能今年买了你们家的系统，明年就不买了，或者金额不够，不用系统了。 网络营销类公司的大部分客户都是企业，也许有很多上市公司，他们对营销的需求比较高，但是对于网络舆情监测的需求并不是很高，而且就算有这方面的需求，他们大部分都是自己来监测或者请第三方专业的网络舆情监测软件厂商来监测。他们请人开发一套系统，加上设备那些费用，至少得几百万一年的运营成本，他们这一个舆情监测项目一年可以搞到那么多的钱吗？这绝对是一个亏本挣吆喝的买卖。

小编做了多年的python工程师，爬取了很多网站的数据，每天都在跟网站的站长做博弈，小编发现了一个原理，网站越好打开，网站的数据越好爬取，网站不断的在变化，打开速度越慢，那么他们的反爬虫技术越厉害，小编今天来跟大家分享一下小编在做爬网络上面的数据的时候，遇到的一些反对舆情监测软件去爬数据的方法，下面来跟大家分享一下： 1、网站做了访问限制，来限制网络舆情监测软件的爬虫来爬数据，例如，你访问一个网页必须要输入验证码才可以登录访问，这样的情况就算是再厉害的爬虫，也需要破解网站的访问的验证码，这样才可以访问网站。这种反爬虫技术是目前没有哪个爬虫可以爬到的，因为这样涉及到网站的隐私，爬到的话涉及到违法的行为。但是这种方法不利于网站的优化排名，会影响网站的客户体验。 2、网站数据全部迁移到APP，没有域名，那么这种情况网络舆情监测软件根本没有办法去爬，就算爬到了他们也不知道怎么用展示给客户看，目前这一块做得比较好的是小红书网站，不过小红书还是有域名的。 3、网站不断的更换域名，网站内部结构，做了一些反爬虫语言，这种方法对网站的权重很不好，不利于网站的推广。不过说实在话，网站权重越高，被爬的概率越高。 4、网站做限制IP的访问，如果同一个IP不断的访问爬取网站的数据，网站的服务器会做出反应，限制爬虫去访问，如果爬虫都访问不了网站，怎么可以打开呢。 5、网站做了用户行为分析反爬虫手段，这种方法可以分析出哪些是爬虫，哪些不是爬虫来限制爬虫访问速度。

最近，小编就一直在想一个这样的问题，到底是舆情监测行业从业人数更多一点，还是有舆情监测系统采购需求的人更多一点呢？小编就比较疑惑，然后就做了一个关于网络舆情监测行业相关的网站。做了一项这样的调查，发现网络上面咨询网络舆情监测这个行业的人大部分是网络舆情监测行业的同行，然而实际的顾客可能每个月就那么几个人，到底是一个什么情况才会导致这样的情况呢?小编觉得主要有如下这么多人主要在搜索网络上面每天的网络舆情情况。 第一类人：网络舆情监测行业的从业者，目前网络舆情监测这个关键词网络指数大概在200左右每天，但是实际搜索的人150以上的次数是同行在搜索这个关键词。还有50个以内是想要了解这个行业，还有一些代理商。真正的客户搜索这个关键词的不会超过10个，所以收网络舆情监测这个行业大部分是网络舆情监测行业的从业者在做，在把这个行业给夸大，但是实际上这个行业还是有那么多的需求，每个省市县就有几十个这样的客户。小编做了一个这样的调查研究，发现大部分人都有网络舆情监测软件的需求，主要是没有钱，就拿学生这个群体来说吧，每年多少学生需要用这个软件来做调研来做报告，还有就是那些需要数据的人，他们通过手工去搜索的话得花很长的时间跟精力，如果用网络舆情监测软件来做这个事情，就可以事半功倍。还有就是政府单位，那些单位都需要网络舆情监测系统来做事情。