热门标签 | HotTags
当前位置:  开发笔记 > 数据库 > 正文

linux网络监控系统的开发及其应用

文章标题:linux网络监控系统的开发及其应用。Linux是中国IT实验室的一个技术频道。包含桌面应用,Linux系统管理,内核研究,嵌入式系统和开源等一些基本分类

  基于嵌入式Linux视频的网络监控系统设计, 随着计算机技术及网络技术的迅猛发展,公安、安防行业的发展趋势必然是全面数字化、网络化。linux 网络监控系统的开发及其应用尤为重要,现在就让我们一起关注linux 网络监控系统的开发和成长。

  项目背景

  易思博公司作为国内着名的专业软件开发商,凭借多年网络计费系统的开发经验,在原有的代理服务器、专线和网关计费系统的基础上,针对XX市公安局计算机安全监察处对公共网络流量进行监控的要求,提出网络安全监控审计系统。

  通过本系统,一方面,提供网络接入的部门可以方便地管理上网用户,保证网络资源有效的使用;另一方面,政府部门可以实时监控本区域内Internet的使用情况,为信息安全的执法提供依据。

  方案构成

  下图是linux 网络监控系统的逻辑模型,linux 网络监控系统由一台或多台数据采集服务器负责从代理服务器或者路由器采集网络的流量信息,并保存到数据库服务器中。计费服务器通过访问数据库服务器,与用户管理协调来统计和控制内部用户的上网行为。安全审计服务对采集来的流量数据进行实时监视,一旦发现非法的数据,立即通过通讯服务将数据通知给控制中心。

  1.数据采集

  数据采集服务负责为整个linux 网络监控系统提供用户上网的数据,是综合网络管理平台的重要部分,也是整个linux 网络监控系统的基础。

  数据采集服务能够采集代理服务器、路由器、以及E*Linux网关上的流量数据,并且通过扩充新的模块,可以在短时间内迅速支持新的上网方式。网络管理员或者控制中心可以通过灵活定制采集规则,来控制流量数据采集的方式,以更有效地收集数据。同时,为了满足大型网络数据流量大、以及拓扑结构复杂的要求,数据采集服务既可以分布在一个局域网内部的多台服务器之上,也可以分布在不同地点的多台服务器之上,监控中心可以通过采集规则和数据同步来有效地控制所有的采集服务器。

  针对通过路由器接入到互联网的情况,数据采集服务可以采用SNMP、RMON或者IP Accouting的方式来取得路由器上记录的流量信息,支持市面上主流的路由器。

  另外,BroadenGate还有自己的网关产品E*Linux,E*Linux已经可以与数据采集服务最紧密地结合,收集到流入和流出网络的各个协议数据包的详情。

  数据库服务器可以采用市面上主流的大型数据库管理系统,如Oracle,SQL Server,DB2等等,综合网络管理平台可以通过BroadenGate数据访问接口来无缝地连接这些数据库系统。同时,通过数据库复制来实现数据库的分布和同步,以使安全监控系统具备可扩展的数据处理能力,保证在网络流量日益增大的情况下系统可以可靠地运行。

  2.计费系统实现

  计费系统的功能是对内部用户上网的情况进行统计分析,并对用户的上网行为进行控制。计费系统的数据来源于数据采集服务。无论用户网络采用代理服务器上网、还是采用专线上网、或者是用E*Linux网关上网,计费系统都会以统一的接口和灵活的方式来反映出每个内部用户的上网行为。

  另外,通过E*Linux网关,计费系统还可以实时控制内部用户的上网。

  3.监控系统实现

  监控系统是安全审计系统的核心,它负责实时监视进出网络的流量,发现非法数据后,能够迅速定位数据包的来源,并能够还原出会话过程,并能够及时将这些信息通知给监控中心。下面分布就各部分的功能进行描述。

  实时审计

  实时审计的实现基于预先定义的审计规则以及数据库系统的触发器机制。审计规则可以灵活定义,结合用户名称、IP地址、网卡MAC地址,访问目标的域名、IP地址、端口,以及敏感字句等等要素。

  实时审计分为两个级别,称为低敏感级和高敏感级。

  处于低敏感级别时,系统只关心流过网关的域名或IP地址是否符合规则的要求,当一个新的IP包被捕获以后,数据采集服务会将这个IP包的详细信息,包括源地址、源端口、目的地址、目的端口,记录到数据库中,通过触发器的设定,数据库系统会自动启动一个规则比对的过程,发现问题后及时处理。

  系统处于高敏感级别时,除了关心IP地址的合法性之外,还关心流过的数据包中的内容是否合法,是否含有敏感字句。由于数据采集服务采集到的是单个的IP包的序列,要得到数据包中内容,必须对TCP的会话过程进行再现,也就是说,必须将会话中涉及到的全部IP包进行重新组装,并得到一个可以理解的TCP过程。TCP会话的还原过程由实时审计系统内部的模拟TCP/IP栈来实现。

  通过TCP/IP栈的模拟,并结合应用协议的分析,所有的TCP应用协议,如TELNET、HTTP、FTP、SMTP、POP3、IMAP,以及基于UDP的ICQ、OICQ等等都可以在实时审计系统面前一览无遗。

  最后,规则控制模块对协议的会话内容进行检查,完成实时审计过程。如果发现非法情况,通知数据库服务记录下给定时间段某个用户的数据流,为日后的动作回放做准备。同时,以告警灯、告警声音、告警级别(从颜色上反映)、以及告警分析等方式通知监控中心。

  动作回放

  动作回放是实时审计的查看工具,也就是说,实时审计发现了问题,监控中心得到了报警信息,通过动作回放,就可以更加直观地显示出被报警用户的使用网络的全过程,为执法人员提供可信的证据。

  动作回放功能是在网络控制中心由监控人员来使用。为了执行一个回放,首先,监控中心需要与远程的通讯服务联系,通过数据库服务,取得一个报警所涉及的全部IP包。监控中心得到了全部IP包之后,与实时审计一样,需要启动一个模拟的TCP栈,还原出TCP的会话过程,最后按照协议的不同,在不同的环境下重现用户使用网络的过程。例如,某个远程的用户通过WEB浏览器访问了非法站点,并发布了非法信息,监控中心得到了告警之后,得到了该用户的HTTP的会话过程,其中包含了URL的请求,服务器的返回等等,在监控中心的模拟环境中,就可以重现URL请求和服务器返回的详细情况。

  下图是回放一个HTTP请求和回应的简单示意。

  屏幕监控

  监控中心通过屏幕监控系统可以实时监控每个上网用户的屏幕变化。在用户通过用户管理登记到BroadenGate系统上来的时候,系统在客户端安装一个小型的不可见的插件,这个插件作为屏幕监控的客户端,实时截取用户屏幕数据,转换成特定的格式,并通过高性能的数据压缩和数据加密,传输给监控中心。

  监控中心的屏幕监控服务器可以同时监控多个工作站,记录工作站显示屏的画面,回放已记录的画面。另外,屏幕监控服务器还可以报告工作站和系统的其它使用情况、锁定工作站、并传送实时信息给工作站。

  监控中心

  监控中心系统负责控制本区域范围内的BroadenGate安全审计系统,定制监控策略,并发送到每个远程的被控对象,控制它们的数据采集和审计行为,并可以实时显示各被控对象的状态。远程的被控对象在发现非法情况时,在监控终端上可以实时反映告警的各种信息,并可以通过调用动作回放和屏幕监控系统得到进一步的告警信息。

  4.用户管理系统的实现

  用户管理系统由用户及用户组管理、动态地址分配组成。

  用户和用户组管理记录用户的基本信息,并按照用户组对用户进行组合,以一种树状的方式来灵活地管理本区域范围内的全部用户。

  动态地址分配是BroadenGate在DHCP基础之上实现的IP地址分配系统,结合用户所在机器的网卡MAC地址、用户名、用户密码等信息给内部用户分配一个唯一的内部IP地址,并设定IP地址的租用期限。通过动态地址分配,可以有效地避免用户名和用户地址变动的情况下用户管理的难度,能够在局域网内部通过IP地址唯一地定位每个用户,并且可以有效地防止IP地址盗用的问题。

  技术成果

  目前系统正处于试运行期间,基本功能都已基本具备。面向的用户包括XX市公安局计算机安全监察处及XX市的小区、学校、网吧、酒店及部分企事业单位。

  网络安全监控审计系统将作为BroadenGate网络监控系统的系列产品发布。


推荐阅读
  • 本文介绍了Python高级网络编程及TCP/IP协议簇的OSI七层模型。首先简单介绍了七层模型的各层及其封装解封装过程。然后讨论了程序开发中涉及到的网络通信内容,主要包括TCP协议、UDP协议和IPV4协议。最后还介绍了socket编程、聊天socket实现、远程执行命令、上传文件、socketserver及其源码分析等相关内容。 ... [详细]
  • Centos7.6安装Gitlab教程及注意事项
    本文介绍了在Centos7.6系统下安装Gitlab的详细教程,并提供了一些注意事项。教程包括查看系统版本、安装必要的软件包、配置防火墙等步骤。同时,还强调了使用阿里云服务器时的特殊配置需求,以及建议至少4GB的可用RAM来运行GitLab。 ... [详细]
  • 图解redis的持久化存储机制RDB和AOF的原理和优缺点
    本文通过图解的方式介绍了redis的持久化存储机制RDB和AOF的原理和优缺点。RDB是将redis内存中的数据保存为快照文件,恢复速度较快但不支持拉链式快照。AOF是将操作日志保存到磁盘,实时存储数据但恢复速度较慢。文章详细分析了两种机制的优缺点,帮助读者更好地理解redis的持久化存储策略。 ... [详细]
  • 如何在服务器主机上实现文件共享的方法和工具
    本文介绍了在服务器主机上实现文件共享的方法和工具,包括Linux主机和Windows主机的文件传输方式,Web运维和FTP/SFTP客户端运维两种方式,以及使用WinSCP工具将文件上传至Linux云服务器的操作方法。此外,还介绍了在迁移过程中需要安装迁移Agent并输入目的端服务器所在华为云的AK/SK,以及主机迁移服务会收集的源端服务器信息。 ... [详细]
  • CentOS 7部署KVM虚拟化环境之一架构介绍
    本文介绍了CentOS 7部署KVM虚拟化环境的架构,详细解释了虚拟化技术的概念和原理,包括全虚拟化和半虚拟化。同时介绍了虚拟机的概念和虚拟化软件的作用。 ... [详细]
  • POCOCLibraies属于功能广泛、轻量级别的开源框架库,它拥有媲美Boost库的功能以及较小的体积广泛应用在物联网平台、工业自动化等领域。POCOCLibrai ... [详细]
  • Linux防火墙配置—允许转发
    nsitionalENhttp:www.w3.orgTRxhtml1DTDxhtml1-transitional.dtd ... [详细]
  • UDP千兆以太网FPGA_verilog实现(四、代码前期准备UDP和IP协议构建)
    UDP:userDatagramprotocol用户数据报协议无连接的传输层协议,提供面向事务的简单不可靠信息传送服务,IETFRFC76 ... [详细]
  • 基于PgpoolII的PostgreSQL集群安装与配置教程
    本文介绍了基于PgpoolII的PostgreSQL集群的安装与配置教程。Pgpool-II是一个位于PostgreSQL服务器和PostgreSQL数据库客户端之间的中间件,提供了连接池、复制、负载均衡、缓存、看门狗、限制链接等功能,可以用于搭建高可用的PostgreSQL集群。文章详细介绍了通过yum安装Pgpool-II的步骤,并提供了相关的官方参考地址。 ... [详细]
  • 本文详细介绍了SQL日志收缩的方法,包括截断日志和删除不需要的旧日志记录。通过备份日志和使用DBCC SHRINKFILE命令可以实现日志的收缩。同时,还介绍了截断日志的原理和注意事项,包括不能截断事务日志的活动部分和MinLSN的确定方法。通过本文的方法,可以有效减小逻辑日志的大小,提高数据库的性能。 ... [详细]
  • Linux服务器密码过期策略、登录次数限制、私钥登录等配置方法
    本文介绍了在Linux服务器上进行密码过期策略、登录次数限制、私钥登录等配置的方法。通过修改配置文件中的参数,可以设置密码的有效期、最小间隔时间、最小长度,并在密码过期前进行提示。同时还介绍了如何进行公钥登录和修改默认账户用户名的操作。详细步骤和注意事项可参考本文内容。 ... [详细]
  • 本文介绍了在开发Android新闻App时,搭建本地服务器的步骤。通过使用XAMPP软件,可以一键式搭建起开发环境,包括Apache、MySQL、PHP、PERL。在本地服务器上新建数据库和表,并设置相应的属性。最后,给出了创建new表的SQL语句。这个教程适合初学者参考。 ... [详细]
  • 这是原文链接:sendingformdata许多情况下,我们使用表单发送数据到服务器。服务器处理数据并返回响应给用户。这看起来很简单,但是 ... [详细]
  • 本文介绍了如何使用php限制数据库插入的条数并显示每次插入数据库之间的数据数目,以及避免重复提交的方法。同时还介绍了如何限制某一个数据库用户的并发连接数,以及设置数据库的连接数和连接超时时间的方法。最后提供了一些关于浏览器在线用户数和数据库连接数量比例的参考值。 ... [详细]
  • 篇首语:本文由编程笔记#小编为大家整理,主要介绍了VoLTE端到端业务详解|VoLTE用户注册流程相关的知识,希望对你有一定的参考价值。书籍来源:艾怀丽 ... [详细]
author-avatar
呵呵傻乎乎宝宝
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有