作业可分割的数据采集系统

  • 摘要: 随着网络规模的增长和IPv6协议的发展,用户增强对大规模网络系统进行数据信息的采集和监控的需求.现有网络性能管理系统主要采用一个工作节点进行网元性能数据采集,获取大量小任务后通过SNMP协议直接执行,出现响应时间长、网络带宽占用大的问题.针对此问题,在兼容IPv4/IPv6的网络环境中,提出了作业可分割的数据采集系统:系统采用集群模式克服单节点执行效率瓶颈,并针对大量小作业,采用基于采集节点动态反馈负载权重,通过负载权重分析当前不同采集机的任务执行能力,进行任务的重组、封装成新的任务,并将新任务发送到相应的采集节点上.实验结果证明,改进的数据采集系统能够提高作业流的处理能力,降低响应时间,减少对网络带宽的占用.

     

/

返回文章
返回