搭建教育类网络舆情监测项目的项目总体设计

结合客户的实际需求，提供以数据服务+舆情本地化为平台的搭建方案：
1.部署本地化教育舆情全流程监测系统，舆情系统所有应用功能模块部署在客户的本地机房，后台数据处理模块部署在甲鱼的数据中心，甲鱼数据中心将处理后的数据推送到用户本地机房，最后在客户机房的WEB前端应用上进行数据可视化展示。
2.数据推送服务，根据客户配置的关键词和客户的具体需求，按年提供所需要的全网互联网数据，以数据API推送的方式对接到客户本地的数据中心，用于展现在舆情监测系统中。
本章节将分别从系统平台的总体架构及主要功能重点介绍本建设方案。

系统总体架构
教育舆情全流程监测平台需要以基础硬件为支撑，以海量互联网数据源为自采集对象，结合甲鱼数据平台数据，以标准、规范和安全体系为保障，提供互联网舆情信息的分析、展示、预警、数据管理于一体的舆情管理控制平台。

系统总体框架由硬件支撑层、数据存储层、数据处理层和公共安全应用层组成。采用面向服务的思想，利用松散耦合的分层方式将系统整体上分为四个层次和两个体系，各层间的界限清晰，功能明确而不交叉，具有较高的可配置性和伸缩性。

硬件支撑层
硬件支撑层所需设备主要由服务器（若干）、存储设备、路由器、网络、安全基础设备等构成，一般放置在信息中心的机房中，也可托管于运营商机房，为整个系统提供基础的硬件支撑。

数据存储层
数据存储层用于对数据中心的导入数据、采购数据、元搜索自采数据的存储和检索，包括结构化数据、非结构化数据和半结构化数据，涵盖了包括新闻、社交网站、论坛等全部数据类型，支持PB级的大规模数据进行存储，同时支持最少5000用户的请求并发。

数据处理层
数据处理层是整个后台工作的核心，包括了对数据的清洗，对数据的过滤机制的制定和策略，数据URL去重处理，数据高效降噪处理，以及其他清洗处理配置。同时可以进行数据处理策略的配置操作，包括智能任务分发，弹性处理配置，高效统一去重配置和数据交换配置等。

舆情应用层
舆情应用层是整个系统的核心，采用面向服务的思想，为用户输出舆情监测结果和用户对信息的查询、管理等任务。应用层由五大应用平台组成，包括舆情搜索展示平台、舆情管理工作台、应急导控处置平台、用户管理平台和通讯平台，利用Web Services技术为系统升级服务或为其他外部系统提供基于SOAP的远程方法调用接口，用以完成异构系统之间的数据交换和同步。

安全保障体系
从技术安全、运行安全和管理安全三方面构建安全防范体系，切实保护系统的可用行、机密性、完整性、抗抵赖性、可审计性、可控性。
本系统中安全保障措施包括：
指定保密协议和安全管理制度，项目组定期进行学习、培训和检查。
采用强大、稳定、可靠的Linux核心服务器。
采用VPN安全网络连接方式。各个系统用户与服务器连接均需采用VPN通道，首先保证系统连接安全。
应用系统的访问采用HTTPS加密传输协议。HTTPS在用户客户端和服务器间建立了一个信息安全通道，保证数据传输的安全，防止数据在中途被窃取，维护数据的完整性，确保数据在传输过程中不被改变。
用户采用认证登录的方式确保账号密码安全。只有输入正确的用户名、密码方可登陆。
系统保存详细操作日志，保证每一步操作皆有日志可查；同时保留操作内容，操作终端MAC、IP、操作账号、操作时间、在线时间等信息，做到万事皆有可查。
系统采用超时登录机制，一旦登录终端长时间（一般设定为15分钟）不对系统进行操作，则自动退出系统。
系统采用帐号（用户名）唯一登陆机制，同一个用户名在同一时间只能登陆一次，如果用户已登陆至系统，使用其他设备登陆时，已登陆系统将自动跳出。
使用防火墙、入侵监测设备、互联网行为管控设备等进行硬件层的安全防护，定期扫描服务器漏洞，安全配置等服务。