topic Re: R80.20 Managing R80.10 Gateway - CPU Increase in General Topics

R80.20 Managing R80.10 Gateway - CPU Increase

Jason_Carrillo — Fri, 02 Nov 2018 14:51:22 GMT

After upgrading our MDS and MLM to R80.20, we are seeing average CPU increases across all of clusters after pushing policy to the gateways. It has become very apparent on one of our firewalls that is licensed for four cores. The four gateways I am seeing this on are open hardware. I do have a pair of appliance based clusters that do not seem to have any increase in CPU. All gateways running 80.10.

I've opened a ticket with Check Point, but they haven't heard about anything like this and frankly, didn't seem too interested in getting to the bottom of it.

Has anyone else seen this out there?

Re: R80.20 Managing R80.10 Gateway - CPU Increase

Kaspars_Zibarts — Fri, 02 Nov 2018 19:14:22 GMT

Very interesting! Keep us updated! That is very important for rest of us think of upgrades..

Re: R80.20 Managing R80.10 Gateway - CPU Increase

Timothy_Hall — Sat, 03 Nov 2018 02:48:56 GMT

Sounds like you may have some kind of license "core crunch" (as I call it in my book) on your open hardware, where numerous Firewall Worker instances stomp each other competing for the same physical core. What does "fw ctl affinity -l -r" show?

The other possibility is that with the revamp of SecureXL in R80.20, the SND/IRQ cores that typically handle SecureXL operations may be trying to do much more processing than they were before and are hitting max utilization. What does the CPU utilization look like on cores designated SND/IRQ vs. Firewall Worker under R80.20? You may need to adjust your core split...

--
Second Edition of my "Max Power" Firewall Book
Now Available at http://www.maxpowerfirewalls.com

Re: R80.20 Managing R80.10 Gateway - CPU Increase

PhoneBoy — Sat, 03 Nov 2018 04:50:43 GMT

The SecureXL changes in R80.20 shouldn't impact the gateways since they're still on R80.10 (management on R80.20).

Re: R80.20 Managing R80.10 Gateway - CPU Increase

Timothy_Hall — Sat, 03 Nov 2018 13:46:07 GMT

Missed that point, thanks Dameon. License core crunch should not be occurring either with only a change in management version. Would be interested to see output of enabled_blades on the R80.10 firewalls experiencing higher CPU under R80.20 management; can't see how a management version change only would significantly alter how the gateway uses CPU although there are quite a few Threat Prevention enhancements in R80.20. Seeing what blades are enabled would be a good start as well as the output from the "Super Seven" commands...

--
Second Edition of my "Max Power" Firewall Book
Now Available at http://www.maxpowerfirewalls.com

Re: R80.20 Managing R80.10 Gateway - CPU Increase

Jason_Carrillo — Sat, 03 Nov 2018 14:56:33 GMT

Thanks for the input Dameon and Tim.

We are only running FW, VPN, Identity and Monitor blades.

I know it does sound odd, and while I will be the first person to tell someone correlation does not equals causation, the upgrade and subsequently policy pushes matches on all four firewalls.

We have reverted though and while CPU is better, it still seems a bit higher than normal.

What are these seven commands you speak of?

Sent via the Samsung Galaxy S7, an AT&T 4G LTE smartphone

Re: R80.20 Managing R80.10 Gateway - CPU Increase

Timothy_Hall — Sat, 03 Nov 2018 15:16:39 GMT

See here:

TechTalk: Security Gateway Performance Optimization with Tim Hall

The "Super Seven" are:

fwaccel stat
fwaccel stats -s
grep -c ^processor /proc/cpuinfo (and maybe /sbin/cpuinfo too)
fw ctl affinity -l -r
netstat -ni (and possibly sar -n EDEV)
fw ctl multik stat
cpstat os -f multi_cpu -o 1 (and maybe free -m)

With the output of those commands, generally I can determine about 90% of the time where the bottleneck is located; the presentation shares some tips about how to interpret them yourself, as well as some real-world Case Studies.

--
Second Edition of my "Max Power" Firewall Book
Now Available at http://www.maxpowerfirewalls.com

Re: R80.20 Managing R80.10 Gateway - CPU Increase

_Val_ — Sat, 03 Nov 2018 15:24:48 GMT

Very peculiar. The compilation code on R80.20 MGMT for GW on R80.10 should not change. Without any policy changes it is supposed to be exactly the same policy hence the same performance parameters.

Considering you are saying it is still "higher than normal" event after rollback, could it be just a case of an unlucky coincidence?

Re: R80.20 Managing R80.10 Gateway - CPU Increase

RickHoppe — Sat, 03 Nov 2018 18:22:50 GMT

Perhaps you can use s7pac. It’s based on Tim Hall’s presentation on the Super Seven.

Re: R80.20 Managing R80.10 Gateway - CPU Increase

SantiagoPlatero — Mon, 05 Nov 2018 12:58:35 GMT

Hi all, I'm facing a similar scenario: virtual R80.20 managing a R80.10 (Take 121) open server gateway (a Dell R710 but with only 2 core licensed), but the issue came across when I use the unified policy feature and inline layers (that is, security and application rulebase in one access control rulebase + TP + QoS). The high CPU usage is so problematic that the gateway's LAN interface responds with 2000+ ms delay, when it doesn't respond at all.

So, as the LAN interface packet losses, I've to do a "fw unloadlocal" ('cause SIC fails) and push the old, lookalike pre-R80 rulebase: security rulebase in one layer, application rulebase in another one + TP + QoS. Now the gateway works just fine, with the same rules, same IPS/TP activations, but a different approach on rule matching (ye olde one).

I have almost all blades enabled (only have disabled Policy Server for VPN and DLP), NGTX is enabled but not used on the TP rulebase. Threat Emulation is done in the CP's cloud and only applies for MTA traffic.

In the unified policy scenario I have some rules with standard old fashion TCP/UDP ports and application objects in the service/application column, I think I read some SK regarding this scenario and high CPU usage?

Also, the only rulebases I didn't consolidate in the unified policy where the Mobile Access rulebase (still using the old legacy one) and, of course, the HTTPS inspection rulebase (is activated but bypassed for general internet browsing for functionality issues).

I've opened a ticket to my partner as I've collaborative support contract (and can't contact TAC directly myself), but maybe the OP problem has something to do with my issue?

Thanks dudes.

Re: R80.20 Managing R80.10 Gateway - CPU Increase

Ilya_Yusupov — Mon, 05 Nov 2018 12:58:50 GMT

Hi Jason,

We would like to assist here but we will need you to provide the following:

- in clish output of show asset all

- cat /proc/interrupts

- output of fw ctl multik stat

- output of fwaccel stats -s

- output of fw ctl affinity -l -r

You may send me an email with all those outputs to iliay@checkpoint.com

Re: R80.20 Managing R80.10 Gateway - CPU Increase

Timothy_Hall — Mon, 05 Nov 2018 13:37:06 GMT

The common thread here seems to be an open hardware gateway that is licensed for less cores than physical cores, which generally can't happen on a Check Point gateway appliance since they are always licensed for the number of actual physical cores. Don't see how a policy install from a R80.20 SMS could change the number or physical core distribution of Firewall Workers and cause a "core crunch" as described in my book.

There were quite a few changes in SecureXL for R80.20, but generally the SMS is not really SecureXL-aware so it is hard to see how a policy installation could impact the SND/IRQ side of things on an R80.10 gateway in this situation. Perhaps that has changed in R80.20 but I doubt it, and I would find it even more doubtful that even if something was changed in this area it would end up being pushed/propagated to an older R80.10 gateway by the SMS.

My gut tells me it is probably higher CPU on the Firewall Workers or some kind of load-balancing issue there (Dynamic Dispatcher perhaps?) due to something in the pushed policy. Santiago's report of ~2000 ms response times for pings would seem to track with this theory, since ICMP is never accelerated by SecureXL and must be handled by the Firewall Workers.

Until we start seeing some "Super Seven" outputs though I'm not going to speculate further.

--
Second Edition of my "Max Power" Firewall Book
Now Available at http://www.maxpowerfirewalls.com

Re: R80.20 Managing R80.10 Gateway - CPU Increase

SantiagoPlatero — Mon, 05 Nov 2018 13:50:02 GMT

Hi Timothy, thanks for your feedback. Do you need the "Super Seven" be executed when the issue is in place right? That be, for my scenario, with the unified policy package pushed to the problematic gateway?

Just FYI, I don't have SecureXL enabled (I asked in another topic cause the output of fwaccel stat is there is no license for SecureXL and far as I know there isn't need for a specific license for it), but I have CoreXL enabled for two licensed cores.

Re: R80.20 Managing R80.10 Gateway - CPU Increase

Timothy_Hall — Mon, 05 Nov 2018 14:55:24 GMT

Yes the issue should be in place before running the Super Seven.

Not sure why you don't have a license for SecureXL, all reasonably modern licenses should have it (although maybe that only applies to Check Point appliances, can't remember). Might just need to regenerate your license in the User Center to obtain SecureXL functionality.

Jason Carrillo‌ is SecureXL enabled on your open hardware firewalls?

--
Second Edition of my "Max Power" Firewall Book
Now Available at http://www.maxpowerfirewalls.com

Re: R80.20 Managing R80.10 Gateway - CPU Increase

Jason_Carrillo — Mon, 05 Nov 2018 15:17:47 GMT

Yep, though it did turn off on one after the upgrade to management and policy push. Not sure if it flapped on its own or if it was a result of the push though. The spike in CPU definitely correlated with the push though.?

Re: R80.20 Managing R80.10 Gateway - CPU Increase

SantiagoPlatero — Mon, 05 Nov 2018 18:16:49 GMT

Hi Timothy Hall‌, below you will find the super seven's output:

1. fwaccel stat:

# fwaccel stat

Accelerator Status : no license for SecureXL

Accelerator Features : Accounting, NAT, Cryptography, QOS, HasClock,
                       Templates, Synchronous, IdleDetection,
                       Sequencing, TcpStateDetect, AutoExpire,
                       DelayedNotif, TcpStateDetectV2, WireMode,
                       DropTemplates, NatTemplates, Streaming,
                       AntiSpoofing, Nac, ViolationStats, AsychronicNotif,
                       ERDOS, NMR, NMT, NAT64, GTPAcceleration,
                       SCTPAcceleration
Cryptography Features : Tunnel, UDPEncapsulation, MD5, SHA1, NULL,
                        3DES, DES, CAST, CAST-40, AES-128, AES-256,
                        ESP, LinkSelection, DynamicVPN, NatTraversal,
                        EncRouting, AES-XCBC, SHA256‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍

2. fwaccel stats -s

# fwaccel stats -s

No statistics given‍‍‍

3. grep -c ^processor /proc/cpuinfo (and maybe /sbin/cpuinfo too)

# grep -c ^processor /proc/cpuinfo 

4

# sbin/cpuinfo

HyperThreading=disabled‍‍‍‍‍‍‍

4. fw ctl affinity -l -r

# fw ctl affinity -l -r

CPU 0:  eth0 eth1 eth2 eth3
        fw_1
CPU 1:  fw_0
CPU 2:
CPU 3:
All:    pdpd fgd50 pepd in.emaild.mta usrchkd lpd in.acapd fwpushd scrub_cp_file_convertd fwucd rtmd fwd vpnd rad scanengine_b mpdaemon scrubd cp_file_convertd in.emaild.smtp cpd cprid
The current license permits the use of CPUs 0, 1 only.
‍‍‍‍‍‍‍‍‍

5. netstat -ni (and possibly sar -n EDEV)

# netstat -ni 
Kernel Interface table
Iface       MTU Met    RX-OK RX-ERR RX-DRP RX-OVR    TX-OK TX-ERR TX-DRP TX-OVR Flg
eth0       1500   0 153112258    138  23877      0 133773526      0      0      0 BMRU
eth1       1500   0   805181      0      0      0   824074      0      0      0 BMRU
eth2       1500   0 91527294      0   1329      0 96134009      0      0      0 BMRU
eth3       1500   0 45153840      0 149064      0 35913655      0      0      0 BMRU
eth3.2     1500   0        0      0      0      0        0      0      0      0 BMRU
lo        16436   0  2179030      0      0      0  2179030      0      0      0 LRU
‍‍‍‍‍‍‍‍‍

# sar -n EDEV
Linux 2.6.18-92cpx86_64 (<truncated>)        11/05/18

00:00:01        IFACE   rxerr/s   txerr/s    coll/s  rxdrop/s  txdrop/s  txcarr/s  rxfram/s  rxfifo/s  txfifo/s
00:10:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
00:10:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
00:10:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
00:10:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
00:10:01         eth3      0.00      0.00      0.00      0.18      0.00      0.00      0.00      0.00      0.00
00:10:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
00:20:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
00:20:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
00:20:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
00:20:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
00:20:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
00:20:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
00:30:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
00:30:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
00:30:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
00:30:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
00:30:01         eth3      0.00      0.00      0.00      0.05      0.00      0.00      0.00      0.00      0.00
00:30:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
00:40:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
00:40:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
00:40:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
00:40:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
00:40:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
00:40:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
00:50:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
00:50:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
00:50:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
00:50:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
00:50:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
00:50:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
01:00:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
01:00:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
01:00:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
01:00:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
01:00:01         eth3      0.00      0.00      0.00      0.62      0.00      0.00      0.00      0.00      0.00
01:00:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
01:10:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
01:10:01         eth0      0.00      0.00      0.00      0.20      0.00      0.00      0.00      0.00      0.00
01:10:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
01:10:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
01:10:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
01:10:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
01:20:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
01:20:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
01:20:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
01:20:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
01:20:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
01:20:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
01:30:02           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
01:30:02         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
01:30:02         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
01:30:02         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
01:30:02         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
01:30:02       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
01:40:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
01:40:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
01:40:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
01:40:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
01:40:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
01:40:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
01:50:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
01:50:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
01:50:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
01:50:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
01:50:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
01:50:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
02:00:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
02:00:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
02:00:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
02:00:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
02:00:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
02:00:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
02:10:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
02:10:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
02:10:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
02:10:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
02:10:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
02:10:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
02:20:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
02:20:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
02:20:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
02:20:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
02:20:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
02:20:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
02:30:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
02:30:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
02:30:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
02:30:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
02:30:01         eth3      0.00      0.00      0.00      0.37      0.00      0.00      0.00      0.00      0.00
02:30:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
02:40:02           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
02:40:02         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
02:40:02         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
02:40:02         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
02:40:02         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
02:40:02       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
02:50:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
02:50:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
02:50:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
02:50:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
02:50:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
02:50:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
03:00:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
03:00:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
03:00:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
03:00:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
03:00:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
03:00:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
03:10:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
03:10:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
03:10:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
03:10:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
03:10:01         eth3      0.00      0.00      0.00      0.91      0.00      0.00      0.00      0.00      0.00
03:10:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
03:20:02           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
03:20:02         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
03:20:02         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
03:20:02         eth2      0.00      0.00      0.00      0.20      0.00      0.00      0.00      0.00      0.00
03:20:02         eth3      0.00      0.00      0.00     11.17      0.00      0.00      0.00      0.00      0.00
03:20:02       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
03:30:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
03:30:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
03:30:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
03:30:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
03:30:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
03:30:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
03:40:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
03:40:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
03:40:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
03:40:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
03:40:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
03:40:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
03:50:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
03:50:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
03:50:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
03:50:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
03:50:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
03:50:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
04:00:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
04:00:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
04:00:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
04:00:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
04:00:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
04:00:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
04:10:02           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
04:10:02         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
04:10:02         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
04:10:02         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
04:10:02         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
04:10:02       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
04:20:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
04:20:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
04:20:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
04:20:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
04:20:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
04:20:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
04:30:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
04:30:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
04:30:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
04:30:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
04:30:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
04:30:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
04:40:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
04:40:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
04:40:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
04:40:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
04:40:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
04:40:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
04:50:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
04:50:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
04:50:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
04:50:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
04:50:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
04:50:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
05:00:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
05:00:01         eth0      0.01      0.00      0.00      0.00      0.00      0.00      0.01      0.00      0.00
05:00:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
05:00:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
05:00:01         eth3      0.00      0.00      0.00      0.23      0.00      0.00      0.00      0.00      0.00
05:00:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
05:10:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
05:10:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
05:10:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
05:10:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
05:10:01         eth3      0.00      0.00      0.00      0.33      0.00      0.00      0.00      0.00      0.00
05:10:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
05:20:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
05:20:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
05:20:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
05:20:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
05:20:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
05:20:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
05:30:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
05:30:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
05:30:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
05:30:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
05:30:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
05:30:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
05:40:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
05:40:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
05:40:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
05:40:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
05:40:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
05:40:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
05:50:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
05:50:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
05:50:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
05:50:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
05:50:01         eth3      0.00      0.00      0.00      0.04      0.00      0.00      0.00      0.00      0.00
05:50:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
06:00:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
06:00:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
06:00:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
06:00:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
06:00:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
06:00:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
06:10:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
06:10:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
06:10:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
06:10:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
06:10:01         eth3      0.00      0.00      0.00      0.03      0.00      0.00      0.00      0.00      0.00
06:10:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
06:20:03           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
06:20:03         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
06:20:03         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
06:20:03         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
06:20:03         eth3      0.00      0.00      0.00      1.06      0.00      0.00      0.00      0.00      0.00
06:20:03       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
06:30:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
06:30:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
06:30:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
06:30:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
06:30:01         eth3      0.00      0.00      0.00      0.56      0.00      0.00      0.00      0.00      0.00
06:30:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
06:40:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
06:40:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
06:40:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
06:40:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
06:40:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
06:40:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
06:50:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
06:50:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
06:50:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
06:50:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
06:50:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
06:50:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
07:00:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
07:00:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
07:00:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
07:00:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
07:00:01         eth3      0.00      0.00      0.00      0.18      0.00      0.00      0.00      0.00      0.00
07:00:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
07:10:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
07:10:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
07:10:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
07:10:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
07:10:01         eth3      0.00      0.00      0.00      0.19      0.00      0.00      0.00      0.00      0.00
07:10:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
07:20:05           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
07:20:05         eth0      0.00      0.00      0.00      0.02      0.00      0.00      0.00      0.00      0.00
07:20:05         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
07:20:05         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
07:20:05         eth3      0.00      0.00      0.00      0.16      0.00      0.00      0.00      0.00      0.00
07:20:05       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
07:30:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
07:30:01         eth0      0.00      0.00      0.00      0.24      0.00      0.00      0.00      0.00      0.00
07:30:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
07:30:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
07:30:01         eth3      0.00      0.00      0.00      0.06      0.00      0.00      0.00      0.00      0.00
07:30:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
07:40:02           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
07:40:02         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
07:40:02         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
07:40:02         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
07:40:02         eth3      0.00      0.00      0.00      0.56      0.00      0.00      0.00      0.00      0.00
07:40:02       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
07:50:03           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
07:50:03         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
07:50:03         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
07:50:03         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
07:50:03         eth3      0.00      0.00      0.00      0.15      0.00      0.00      0.00      0.00      0.00
07:50:03       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
08:00:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
08:00:01         eth0      0.00      0.00      0.00      0.16      0.00      0.00      0.00      0.00      0.00
08:00:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
08:00:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
08:00:01         eth3      0.00      0.00      0.00      0.88      0.00      0.00      0.00      0.00      0.00
08:00:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
08:10:50           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
08:10:50         eth0      0.00      0.00      0.00      4.67      0.00      0.00      0.00      0.00      0.00
08:10:50         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
08:10:50         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
08:10:50         eth3      0.00      0.00      0.00      6.54      0.00      0.00      0.00      0.00      0.00
08:10:50       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
08:20:57           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
08:20:57         eth0      0.00      0.00      0.00      9.09      0.00      0.00      0.00      0.00      0.00
08:20:57         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
08:20:57         eth2      0.00      0.00      0.00      1.25      0.00      0.00      0.00      0.00      0.00
08:20:57         eth3      0.00      0.00      0.00     10.78      0.00      0.00      0.00      0.00      0.00
08:20:57       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
08:30:10           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
08:30:10         eth0      0.00      0.00      0.00      6.06      0.00      0.00      0.00      0.00      0.00
08:30:10         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
08:30:10         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
08:30:10         eth3      0.00      0.00      0.00      6.43      0.00      0.00      0.00      0.00      0.00
08:30:10       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
08:50:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
08:50:01         eth0      0.00      0.00      0.00      2.12      0.00      0.00      0.00      0.00      0.00
08:50:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
08:50:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
08:50:01         eth3      0.00      0.00      0.00      2.13      0.00      0.00      0.00      0.00      0.00
08:50:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
09:00:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
09:00:01         eth0      0.00      0.00      0.00      9.56      0.00      0.00      0.00      0.00      0.00
09:00:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
09:00:01         eth2      0.00      0.00      0.00      0.49      0.00      0.00      0.00      0.00      0.00
09:00:01         eth3      0.00      0.00      0.00     11.05      0.00      0.00      0.00      0.00      0.00
09:00:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
09:10:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
09:10:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
09:10:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
09:10:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
09:10:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
09:10:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
09:20:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
09:20:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
09:20:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
09:20:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
09:20:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
09:20:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
09:30:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
09:30:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
09:30:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
09:30:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
09:30:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
09:30:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
09:40:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
09:40:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
09:40:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
09:40:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
09:40:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
09:40:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
09:50:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
09:50:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
09:50:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
09:50:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
09:50:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
09:50:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
10:00:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
10:00:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
10:00:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
10:00:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
10:00:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
10:00:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
10:10:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
10:10:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
10:10:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
10:10:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
10:10:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
10:10:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
10:20:02           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
10:20:02         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
10:20:02         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
10:20:02         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
10:20:02         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
10:20:02       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
10:30:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
10:30:01         eth0      0.01      0.00      0.00      0.00      0.00      0.00      0.01      0.00      0.00
10:30:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
10:30:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
10:30:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
10:30:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
10:40:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
10:40:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
10:40:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
10:40:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
10:40:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
10:40:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
10:50:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
10:50:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
10:50:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
10:50:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
10:50:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
10:50:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
11:00:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
11:00:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
11:00:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
11:00:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
11:00:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
11:00:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
11:10:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
11:10:01         eth0      0.00      0.00      0.00      0.09      0.00      0.00      0.00      0.00      0.00
11:10:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
11:10:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
11:10:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
11:10:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
11:20:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
11:20:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
11:20:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
11:20:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
11:20:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
11:20:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
11:30:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
11:30:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
11:30:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
11:30:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
11:30:01         eth3      0.00      0.00      0.00      0.37      0.00      0.00      0.00      0.00      0.00
11:30:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
11:40:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
11:40:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
11:40:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
11:40:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
11:40:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
11:40:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
11:50:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
11:50:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
11:50:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
11:50:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
11:50:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
11:50:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
12:00:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
12:00:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
12:00:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
12:00:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
12:00:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
12:00:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
12:10:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
12:10:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
12:10:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
12:10:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
12:10:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
12:10:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
12:20:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
12:20:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
12:20:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
12:20:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
12:20:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
12:20:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
12:30:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
12:30:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
12:30:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
12:30:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
12:30:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
12:30:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
12:40:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
12:40:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
12:40:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
12:40:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
12:40:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
12:40:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
12:50:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
12:50:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
12:50:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
12:50:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
12:50:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
12:50:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
13:00:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
13:00:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
13:00:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
13:00:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
13:00:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
13:00:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
13:10:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
13:10:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
13:10:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
13:10:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
13:10:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
13:10:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
13:20:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
13:20:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
13:20:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
13:20:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
13:20:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
13:20:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
13:30:01           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
13:30:01         eth0      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
13:30:01         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
13:30:01         eth2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
13:30:01         eth3      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
13:30:01       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
13:40:52           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
13:40:52         eth0      0.00      0.00      0.00      3.25      0.00      0.00      0.00      0.00      0.00
13:40:52         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
13:40:52         eth2      0.00      0.00      0.00      0.08      0.00      0.00      0.00      0.00      0.00
13:40:52         eth3      0.00      0.00      0.00      2.52      0.00      0.00      0.00      0.00      0.00
13:40:52       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
Average:           lo      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
Average:         eth0      0.00      0.00      0.00      0.46      0.00      0.00      0.00      0.00      0.00
Average:         eth1      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
Average:         eth2      0.00      0.00      0.00      0.02      0.00      0.00      0.00      0.00      0.00
Average:         eth3      0.00      0.00      0.00      0.73      0.00      0.00      0.00      0.00      0.00
Average:       eth3.2      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00      0.00
‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍

6. fw ctl multik stat

# fw ctl multik stat
ID | Active  | CPU    | Connections | Peak
----------------------------------------------
 0 | Yes     | 1      |        2078 |     2893
 1 | Yes     | 0      |        1966 |     2979‍‍‍‍‍

Aaaand 7. cpstat os -f multi_cpu -o 1 (and maybe free -m)

# cpstat os -f multi_cpu -o 1 



Processors load
---------------------------------------------------------------------------------
|CPU#|User Time(%)|System Time(%)|Idle Time(%)|Usage(%)|Run queue|Interrupts/sec|
---------------------------------------------------------------------------------
|   1|           1|            93|           6|      94|        ?|          1627|
|   2|           0|            93|           7|      93|        ?|          1627|
|   3|           2|            77|          21|      79|        ?|          1627|
|   4|           4|            41|          55|      45|        ?|          1627|
---------------------------------------------------------------------------------





Processors load
---------------------------------------------------------------------------------
|CPU#|User Time(%)|System Time(%)|Idle Time(%)|Usage(%)|Run queue|Interrupts/sec|
---------------------------------------------------------------------------------
|   1|           1|            93|           6|      94|        ?|          5219|
|   2|           1|            55|          44|      56|        ?|          5220|
|   3|           7|            27|          66|      34|        ?|          5220|
|   4|           6|             2|          92|       8|        ?|          5221|
---------------------------------------------------------------------------------





Processors load
---------------------------------------------------------------------------------
|CPU#|User Time(%)|System Time(%)|Idle Time(%)|Usage(%)|Run queue|Interrupts/sec|
---------------------------------------------------------------------------------
|   1|           0|           100|           0|     100|        ?|          2131|
|   2|           0|            61|          39|      61|        ?|          2131|
|   3|           1|            45|          54|      46|        ?|          2131|
|   4|           2|            24|          74|      26|        ?|          2131|
---------------------------------------------------------------------------------





Processors load
---------------------------------------------------------------------------------
|CPU#|User Time(%)|System Time(%)|Idle Time(%)|Usage(%)|Run queue|Interrupts/sec|
---------------------------------------------------------------------------------
|   1|           0|           100|           0|     100|        ?|          2131|
|   2|           0|            61|          39|      61|        ?|          2131|
|   3|           1|            45|          54|      46|        ?|          2131|
|   4|           2|            24|          74|      26|        ?|          2131|
---------------------------------------------------------------------------------





Processors load
---------------------------------------------------------------------------------
|CPU#|User Time(%)|System Time(%)|Idle Time(%)|Usage(%)|Run queue|Interrupts/sec|
---------------------------------------------------------------------------------
|   1|           0|           100|           0|     100|        ?|          1251|
|   2|           0|            98|           2|      98|        ?|          1251|
|   3|           1|            87|          11|      89|        ?|          1251|
|   4|           0|            50|          49|      51|        ?|          1251|
---------------------------------------------------------------------------------





Processors load
---------------------------------------------------------------------------------
|CPU#|User Time(%)|System Time(%)|Idle Time(%)|Usage(%)|Run queue|Interrupts/sec|
---------------------------------------------------------------------------------
|   1|           0|           100|           0|     100|        ?|          1251|
|   2|           0|            98|           2|      98|        ?|          1251|
|   3|           1|            87|          11|      89|        ?|          1251|
|   4|           0|            50|          49|      51|        ?|          1251|
---------------------------------------------------------------------------------‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍

# free -m

             total       used       free     shared    buffers     cached
Mem:      16289576    8228732    8060844          0     402668    4027332
-/+ buffers/cache:    3798732   12490844
Swap:     17575100          0   17575100
‍‍‍‍‍‍

Hope you find it useful, thanks a lot!

Re: R80.20 Managing R80.10 Gateway - CPU Increase

Timothy_Hall — Mon, 05 Nov 2018 19:23:27 GMT

Based on those outputs: due to the licensing restrictions there is no SecureXL; both cores are serving both SND/IRQ and Firewall Worker functions while core 1 is just a Firewall Worker (I think - core 1 may also be trying to act as a SND/IRQ too but without automatic interface affinity provided by SecureXL no interfaces can ever be assigned to it for handling). Both of them are getting hammered about the same as far as low idle times, which would seem to indicate that it is indeed an issue on the Firewall Worker side of things as I was guessing earlier. Hard to tell though because there is no SecureXL here and everything is forced F2F (which causes more CPU utilization), and interface SoftIRQs can only be handled on core 0 at all times (no automatic interface affinity) which is causing 0.33% RX-DRPs on eth3. Dynamic Dispatcher seems to be working OK and your firewall has plenty of RAM.

Would be interesting to apply an eval license and then enable SecureXL (with no reboot), but still keep CoreXL with 2 instances on 2 cores and see if things improve substantially. If not then try setting 3 CoreXL instances and rebooting the system into the default 1/3 split for a 4-core system (with the eval license and SecureXL turned on of course), then test again. The lack of SecureXL is really muddying the water here.

--
Second Edition of my "Max Power" Firewall Book
Now Available at http://www.maxpowerfirewalls.com

Re: R80.20 Managing R80.10 Gateway - CPU Increase

SantiagoPlatero — Mon, 05 Nov 2018 19:42:52 GMT

Thanks a lot! I also believe is something regarding SecureXL, but the weird thing about it is the problem is presented only when I push a classic unified policy. I think (or maybe read it somewhere, dunno) the UP feature maybe works closely with SecureXL and CoreXL ones.

In other thread, regarding the SecureXL licensing issue, I asked this and also I want to ask it here (in case I've no answer there): does anyone knows from which blade/license/subscription is SecureXL tied to? I can't find documentation regarding to this. I believe it must be ADN (Advanced Networking), which I have licensed in this gateway ('cause if I haven't it I won't be able to use QoS) so, theoretically, I should be able to enable SecureXL.

I'm creating an evaluation license to enable SecureXL and give it a try as you suggest, keep you on the loop.

Thanks again!

Re: R80.20 Managing R80.10 Gateway - CPU Increase

Timothy_Hall — Mon, 05 Nov 2018 20:11:58 GMT

There should be a CPU spike when policy is pushed to any gateway, then it settles back down once complete. I find it interesting that both you and Santiago Platero‌ have SecureXL disabled on an open hardware firewall that is licensed for less cores than physically present, and are experiencing excessive CPU usage when managing your R80.10 gateways from R80.20. SecureXL was overhauled significantly in R80.20 gateway, although I don't see how that change would impact a R80.10 gateway being managed by R80.20.

SecureXL can't really be "switched off" completely in R80.20 the way it could be in R80.10 earlier; that is probably just a coincidence here but interesting nonetheless.

--
Second Edition of my "Max Power" Firewall Book
Now Available at http://www.maxpowerfirewalls.com

Re: R80.20 Managing R80.10 Gateway - CPU Increase

Ilya_Yusupov — Tue, 06 Nov 2018 07:14:55 GMT

Hi all,

We checked the SXL license issue in our lab and indeed once we have Open Server with License that limit cores SXL is disabled with No license.

i'm taking it with local RnD and update once we will have a fix.