Ntop性能提升方案-低调大师

Ntop性能提升方案

2016-06-28 676

Ntop性能提升方案

Ntop是一款Linux下常见的开源监控软件，它可以监测的数据包括：网络流量、使用协议、系统负载、端口情况、数据包发送时间等。正常情况下它工作的时候就像一部被动声纳，默默的接收看来自网络的各种信息，通过对这些数据的分析，网络管理员可以深入了解网络当前的运行状况，不过一旦超过Ntop数据包的处理能力，Ntop随即出现性能问题，从而导致Ntop无法准确分析网络流量和各种数据，对网络管理造成影响。下文介绍了一种提高Ntop性能的方法。

通常Ntop的抓包分析功能，是通过Ntop自己完成，但它们都是通过libpcap来实现抓包，且速度不能超过100M，分析一下libpcap的流程我们明白，首先数据包通过路径为网卡硬中断→软中断→内核协议栈→系统调用→socket→->libpcap接口→用户应用程序，在这个流程中，可以看出数据的copy比较多，所以在高速率下libpcap 抓包丢包严重也不用感到奇怪了。

对于千兆的网络就需要采用PF_RING技术来接受数据包了，PF_Ring运行于Linux的内核层，体系结构图如下图所示，它采用类类似零拷贝技术，而且PF_Ring从网卡获取的数据的速度比libpcap有成倍的提高，而且在千兆环境下几乎不丢包。

对于内核必须熟悉的可以用下面的方法，首先给内核源码打补丁(以下内容需要读者具备Linux内核编译基础)。

1）.zcat linux-2.6.25-1-686-smp-PF_RING.patch.gz | patch -p0

2）.在/usr/src/目录下的linux-2.6.25目录中，编辑Makefile 在这个地方加上一个自定义的后缀（比如-PF_RING）：

EXTRAVERSION = -PF_RING

3）.make menuconfig

这里按y选上PF_RING，然后保存修改到.config退出。然后就开始编译内核

#make

#make modules 安装编译好的modules

#make install

注意：将bzImage添加到grub中，以便用新内核启动（注意，新添加的内核不是默认启动项）

（用 make install 可以免去手动复制bzImage并生成initrd的繁琐过程）

进入libpcap-1.1.1-ring目录下，修改源码，将pf_ring的内核ring缓冲区设为2M，默认0.5M，然后修改MakeFile，将安装目录指向usr/,默认指向usr/local。接着编译make,然后make install；这样，就将libpfring.so ,pfring_e1000e_dna.h,pfring.h,libpfring.a拷贝到了usr/include或usr/lib下，同时用libpcap-1.1.1-ring的库文件替换了原来的libpcap库文件；

如果大家觉得这种修改内核的方法比较复杂，下面给大家推荐一个简单的方法到www.ntop.org,下载PF_RING-5.1.0.tar.gz包，解开PF_RING 以独立模块运行就成了，没有必要打 patch 到内核后直接make就可以。

#insmod ./pf_ring.ko 加载模块

# dmesg | grep RING

[PF_RING] Welcome to PF_RING 3.9.3 # 这一部分是PF_RING初始化时输出的

[PF_RING] Ring slots 4096

[PF_RING] Slot version 9

[PF_RING] Capture TX Yes [RX+TX]

[PF_RING] IP Defragment No

[PF_RING] Initialized correctly

[PF_RING] registered /proc/net/pf_ring/

[PF_RING] successfully allocated 815104 bytes at 0xd0ad4000 # 以后每次运行PF_RING程序，会输出这样的调试信息

[PF_RING] allocated 4115 slots [slot_len=198][tot_mem=815104]

[PF_RING] removed /proc/net/pf_ring/2849-eth0.0

注意，刚启动机器时，ls /proc/net/pf_ring/ 是看不到这个目录的，只有当需要PF_RING的程序第一次运行时，才会生成这个目录以及一个info文件

安装完成后在shell下输入:

#dmesg |grep PF_RING即可验证是否配置成功，参见图4。

当你看到如图4所示的输出后就预示着这次对Ntop的性能提上改造成功，这时你的Ntop系统在数据包捕获性能上就比先前有所提高，能够适应更加大流量的网络环境。

51CTO学院优秀讲师评选中，我期待您的宝贵一票！

http://edu.51cto.com/lecturer/user_id-350944.html

微信关注我们

原文链接：https://blog.51cto.com/chenguang/1793524

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

企业级的开源备份工具Bacula之配置

一、Bacula配置 Bacula备份的主要配置项目存放在bacula-dir.conf文件中，该文件中的配置项包含以下内容。 Jobdefs：默认执行任务 Job：自定义一个备份或恢复任务 Fileset：定义备份那些数据，不备份那些数据 Schedule：定义备份时间策略 Pool：定义供Job使用的池属性 Client：定义要备份的主机地址 Storange：定义数据的存储方式 Messages：定义发送日子报告和记录日志的位置各项目定义的名称会相互关联，如下图所示。 3.1bacula-dir.conf配置主控端的Director项： 1、Name和Console端Director项的Name一致； 2、Name要和介质端Director项的Name一致； 3、Name要和客户端Director项的Name一致； 4、Password项要和Console端的Password项的密码一致；主控端的Storage项： 1、Device要和介质端Device项的Name一致； 2、MediaType要和介质端Device项的MediaType一致； 3、Pa...

2016-06-28

711

先装好rhel6.5 配置好实验环境关掉NetworkManager，并停止掉开机自启动 [root@duwensql~]#serviceNetworkManagerstop [root@duwensql~]#chkconfig--listNetworkManager [root@duwensql~]#chkconfigNetworkManageroff 关掉iptables [root@duwensql~]#iptables-F [root@duwensql~]#serviceiptablessave iptables￡o·àe1ò±￡′μ/etc/sysconfig/iptables￡o[è·¨] [root@duwensql~]#chkconfigiptablesoff 关掉selinux [root@duwensql~]#getenforce Enforcing [root@duwensql~]#setenforce usage:setenforce[Enforcing|Permissive|1|0] [root@duwensql~]#setenforce0 [root@du...

2016-06-28

639

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。