You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-04-02 - 04:11

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rackcslot3s.osadl.org (updated Wed Apr 02, 2025 00:43:53)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
168822321308,4sleep20-21swapper/219:09:242
166742316308,5sleep30-21swapper/319:06:403
165782315302,10sleep00-21swapper/019:05:250
151002313306,5sleep10-21swapper/119:05:101
17194993100,307cyclictest27518-21kworker/u16:3+efi_rts_wq23:10:091
17195993060,305cyclictest7305-21kworker/u16:2+efi_rts_wq21:55:142
17194993060,305cyclictest7305-21kworker/u16:2+efi_rts_wq21:05:141
17194993040,303cyclictest7305-21kworker/u16:2+efi_rts_wq22:35:131
17193993040,303cyclictest7305-21kworker/u16:2+efi_rts_wq19:15:130
17196993010,300cyclictest7305-21kworker/u16:2+efi_rts_wq21:30:133
17194993010,300cyclictest28635-21kworker/u16:1+efi_rts_wq20:55:141
17195993000,299cyclictest18967-21kworker/u16:2+efi_rts_wq00:00:142
17194993000,299cyclictest7305-21kworker/u16:2+efi_rts_wq20:15:141
17195992990,298cyclictest11685-21kworker/u16:1+efi_rts_wq00:20:142
17193992990,298cyclictest28635-21kworker/u16:1+efi_rts_wq19:50:190
17196992970,296cyclictest11685-21kworker/u16:1+efi_rts_wq23:15:133
17194992930,292cyclictest28635-21kworker/u16:1+efi_rts_wq19:55:131
17195992920,291cyclictest7305-21kworker/u16:2+efi_rts_wq21:10:152
17194992920,291cyclictest28635-21kworker/u16:1+efi_rts_wq19:50:191
17195992910,290cyclictest7305-21kworker/u16:2+efi_rts_wq20:15:142
17196992880,287cyclictest28635-21kworker/u16:1+efi_rts_wq21:40:133
17194992860,285cyclictest28635-21kworker/u16:1+efi_rts_wq21:00:131
17193992860,285cyclictest18967-21kworker/u16:2+efi_rts_wq23:40:110
17193992860,284cyclictest28635-21kworker/u16:1+efi_rts_wq22:50:090
17196992850,284cyclictest7305-21kworker/u16:2+efi_rts_wq19:15:013
17193992830,282cyclictest7305-21kworker/u16:2+efi_rts_wq19:30:160
17196992820,281cyclictest28635-21kworker/u16:1+efi_rts_wq20:35:133
17194992820,281cyclictest28635-21kworker/u16:1+efi_rts_wq20:00:141
17194992810,280cyclictest7305-21kworker/u16:2+efi_rts_wq21:10:161
17194992790,278cyclictest7305-21kworker/u16:2+efi_rts_wq19:25:131
17194992780,277cyclictest28635-21kworker/u16:1+efi_rts_wq19:45:131
17193992740,273cyclictest11685-21kworker/u16:1+efi_rts_wq23:50:090
17196992710,270cyclictest11685-21kworker/u16:1+efi_rts_wq23:20:163
17193992690,268cyclictest11685-21kworker/u16:1+efi_rts_wq00:20:130
17193992680,267cyclictest28635-21kworker/u16:1+efi_rts_wq20:10:110
17195992660,265cyclictest7305-21kworker/u16:2+efi_rts_wq19:35:132
17193992660,265cyclictest28635-21kworker/u16:1+efi_rts_wq22:20:130
17195992620,261cyclictest7305-21kworker/u16:2+efi_rts_wq21:05:142
17195992620,261cyclictest7305-21kworker/u16:2+efi_rts_wq19:20:142
17194992570,256cyclictest28635-21kworker/u16:1+efi_rts_wq21:40:131
17194992520,251cyclictest7305-21kworker/u16:2+efi_rts_wq20:30:091
17194992510,250cyclictest28635-21kworker/u16:1+efi_rts_wq21:35:141
17194992510,250cyclictest11685-21kworker/u16:1+efi_rts_wq23:35:151
17196992440,243cyclictest28635-21kworker/u16:1+efi_rts_wq23:00:133
17193992440,243cyclictest7305-21kworker/u16:2+efi_rts_wq21:15:130
17194992420,241cyclictest28635-21kworker/u16:1+efi_rts_wq22:15:121
17194992400,239cyclictest28635-21kworker/u16:1+efi_rts_wq20:10:111
17193992400,236cyclictest11685-21kworker/u16:1+efi_rts_wq23:20:160
17194992390,238cyclictest7305-21kworker/u16:2+efi_rts_wq19:10:141
17195992370,236cyclictest18967-21kworker/u16:2+efi_rts_wq00:15:152
17194992350,234cyclictest11685-21kworker/u16:1+efi_rts_wq00:10:091
17194992340,233cyclictest28635-21kworker/u16:1+efi_rts_wq21:50:081
17195992310,230cyclictest7305-21kworker/u16:2+efi_rts_wq22:10:092
17195992300,229cyclictest28635-21kworker/u16:1+efi_rts_wq19:55:132
17194992300,229cyclictest7305-21kworker/u16:2+efi_rts_wq20:20:131
17194992290,228cyclictest18967-21kworker/u16:2+efi_rts_wq00:15:151
17195992270,226cyclictest11685-21kworker/u16:1+efi_rts_wq00:30:132
17193992270,224cyclictest7305-21kworker/u16:2+efi_rts_wq19:35:130
17196992260,225cyclictest7305-21kworker/u16:2+efi_rts_wq19:40:143
17196992240,223cyclictest18967-21kworker/u16:2+efi_rts_wq23:40:113
17195992200,219cyclictest18967-21kworker/u16:2+efi_rts_wq23:55:132
17193992200,219cyclictest28635-21kworker/u16:1+efi_rts_wq20:45:140
17195992190,218cyclictest7305-21kworker/u16:2+efi_rts_wq22:30:092
17195992190,218cyclictest28635-21kworker/u16:1+efi_rts_wq22:00:112
17193992170,216cyclictest18967-21kworker/u16:2+efi_rts_wq23:55:130
17193992170,214cyclictest28635-21kworker/u16:1+efi_rts_wq20:35:140
17194992140,213cyclictest11685-21kworker/u16:1+efi_rts_wq23:30:081
17194992130,212cyclictest7305-21kworker/u16:2+efi_rts_wq21:20:141
17193992070,206cyclictest7305-21kworker/u16:2+efi_rts_wq20:20:130
17195992060,205cyclictest7305-21kworker/u16:2+efi_rts_wq20:30:092
17195992060,205cyclictest7305-21kworker/u16:2+efi_rts_wq19:40:142
17196992040,203cyclictest7305-21kworker/u16:2+efi_rts_wq21:15:133
17196992040,203cyclictest11685-21kworker/u16:1+efi_rts_wq00:35:143
17193992040,203cyclictest28635-21kworker/u16:1+efi_rts_wq22:15:120
17195992030,202cyclictest7305-21kworker/u16:2+efi_rts_wq21:20:142
17194992010,200cyclictest28635-21kworker/u16:1+efi_rts_wq20:50:201
17195991990,198cyclictest28635-21kworker/u16:1+efi_rts_wq22:20:142
17196991920,191cyclictest28635-21kworker/u16:1+efi_rts_wq22:50:093
17194991920,191cyclictest27518-21kworker/u16:3+efi_rts_wq22:40:131
17193991890,188cyclictest14342-21kworker/u16:0+efi_rts_wq23:30:080
17194991880,187cyclictest28635-21kworker/u16:1+efi_rts_wq20:40:141
17196991870,186cyclictest28635-21kworker/u16:1+efi_rts_wq22:55:143
17196991810,180cyclictest7305-21kworker/u16:2+efi_rts_wq22:35:123
17195991800,179cyclictest28635-21kworker/u16:1+efi_rts_wq21:50:082
17195991770,176cyclictest28635-21kworker/u16:1+efi_rts_wq22:55:132
17196991760,175cyclictest7305-21kworker/u16:2+efi_rts_wq22:30:103
17193991710,169cyclictest27518-21kworker/u16:3+efi_rts_wq22:40:130
17195991700,169cyclictest7305-21kworker/u16:2+efi_rts_wq19:30:162
17194991630,162cyclictest11685-21kworker/u16:1+efi_rts_wq23:15:141
17195991530,152cyclictest14342-21kworker/u16:0+efi_rts_wq23:30:082
17194991510,150cyclictest28635-21kworker/u16:1+efi_rts_wq22:55:131
17193991480,145cyclictest28635-21kworker/u16:1+efi_rts_wq21:00:130
17193991430,140cyclictest28635-21kworker/u16:1+efi_rts_wq19:45:130
17193991410,140cyclictest11685-21kworker/u16:1+efi_rts_wq23:15:140
17194991380,137cyclictest11685-21kworker/u16:1+efi_rts_wq00:35:141
17194991350,134cyclictest7305-21kworker/u16:2+efi_rts_wq19:15:131
17195991230,122cyclictest7305-21kworker/u16:2+efi_rts_wq19:25:132
17195991190,118cyclictest11685-21kworker/u16:1+efi_rts_wq23:35:152
17196991160,115cyclictest28635-21kworker/u16:1+efi_rts_wq20:40:143
17195993330,2cyclictest808-21snmpd23:42:122
17195993330,2cyclictest808-21snmpd21:26:562
17193993330,2cyclictest808-21snmpd20:25:540
17196993230,2cyclictest808-21snmpd23:38:503
17196993229,2cyclictest808-21snmpd22:07:333
17196993229,2cyclictest808-21snmpd21:09:523
17195993230,2cyclictest808-21snmpd23:20:022
17195993230,2cyclictest808-21snmpd20:49:252
17196993130,1cyclictest808-21snmpd21:55:543
17196993130,1cyclictest808-21snmpd21:10:163
17196993129,2cyclictest808-21snmpd23:51:213
17196993129,2cyclictest808-21snmpd19:22:043
17196993128,2cyclictest808-21snmpd22:03:123
17196993128,2cyclictest808-21snmpd20:59:583
17195993130,1cyclictest808-21snmpd20:09:062
17195993130,1cyclictest808-21snmpd20:09:052
17195993129,2cyclictest808-21snmpd22:05:512
17194993129,2cyclictest808-21snmpd23:43:241
17194993129,2cyclictest808-21snmpd21:27:381
17194993129,2cyclictest808-21snmpd20:48:041
17194993129,2cyclictest808-21snmpd19:44:341
17194993128,2cyclictest808-21snmpd23:27:381
17194993128,2cyclictest808-21snmpd20:06:051
17194993128,2cyclictest808-21snmpd20:06:051
17194993128,2cyclictest808-21snmpd19:37:581
17193993129,2cyclictest808-21snmpd21:35:230
17196993029,1cyclictest808-21snmpd22:23:513
17196993029,1cyclictest808-21snmpd20:14:203
17196993029,1cyclictest808-21snmpd00:14:453
17196993028,2cyclictest808-21snmpd21:52:183
17196993028,2cyclictest808-21snmpd21:29:353
17196993028,2cyclictest808-21snmpd20:47:373
17195993029,1cyclictest808-21snmpd21:43:532
17195993028,2cyclictest808-21snmpd23:15:362
17195993028,2cyclictest808-21snmpd22:40:132
17195993028,2cyclictest808-21snmpd20:40:302
17195993028,2cyclictest808-21snmpd20:01:472
17194993029,1cyclictest808-21snmpd22:10:271
17194993029,1cyclictest808-21snmpd00:08:031
17194993028,2cyclictest808-21snmpd22:01:071
17194993028,2cyclictest808-21snmpd00:21:161
17194993028,1cyclictest808-21snmpd23:49:511
17193993029,1cyclictest808-21snmpd20:19:390
17193993029,1cyclictest2192-21kworker/0:3+events22:45:490
17193993028,2cyclictest11879-21cat21:40:160
17196992928,1cyclictest808-21snmpd22:11:573
17196992928,1cyclictest808-21snmpd20:28:513
17196992928,1cyclictest808-21snmpd20:24:133
17196992928,1cyclictest808-21snmpd20:19:203
17196992928,1cyclictest808-21snmpd20:08:023
17196992928,1cyclictest808-21snmpd20:08:023
17196992928,1cyclictest808-21snmpd19:47:263
17196992928,1cyclictest808-21snmpd00:21:493
17196992928,1cyclictest808-21snmpd00:15:223
17196992927,2cyclictest808-21snmpd21:01:583
17196992926,2cyclictest808-21snmpd20:53:193
17196992926,2cyclictest808-21snmpd00:08:543
17195992928,1cyclictest808-21snmpd22:52:222
17195992928,1cyclictest808-21snmpd22:27:182
17195992928,1cyclictest808-21snmpd21:45:052
17195992928,1cyclictest808-21snmpd20:51:072
17195992928,1cyclictest808-21snmpd20:21:092
17195992928,1cyclictest808-21snmpd19:53:232
17195992928,1cyclictest808-21snmpd00:29:552
17195992927,2cyclictest808-21snmpd23:51:272
17195992926,2cyclictest808-21snmpd19:46:562
17194992928,1cyclictest808-21snmpd21:47:321
17194992928,1cyclictest808-21snmpd19:20:191
17194992928,1cyclictest808-21snmpd00:29:581
17194992928,1cyclictest808-21snmpd00:04:511
17193992929,0cyclictest3523-21kworker/0:1+events22:58:370
17193992929,0cyclictest10517-21kworker/0:2+events23:03:090
17193992928,1cyclictest808-21snmpd23:46:150
17193992928,1cyclictest808-21snmpd21:58:390
17193992928,1cyclictest808-21snmpd21:11:220
17193992928,1cyclictest808-21snmpd19:41:220
17193992928,1cyclictest808-21snmpd19:24:460
17193992927,2cyclictest808-21snmpd23:39:290
17193992925,3cyclictest808-21snmpd23:12:590
17196992828,0cyclictest27518-21kworker/u16:3+atlantic23:09:413
17196992827,1cyclictest808-21snmpd23:47:243
17196992827,1cyclictest808-21snmpd23:30:323
17196992827,1cyclictest808-21snmpd21:48:173
17196992827,1cyclictest808-21snmpd00:02:273
17195992827,1cyclictest808-21snmpd23:04:322
17195992827,1cyclictest808-21snmpd22:15:542
17195992827,1cyclictest808-21snmpd21:34:292
17195992827,1cyclictest808-21snmpd19:18:312
17195992826,2cyclictest808-21snmpd00:36:072
17194992828,0cyclictest74950irq/132-enp1s022:54:191
17194992827,1cyclictest808-21snmpd23:09:421
17194992826,1cyclictest808-21snmpd23:00:581
17194992825,3cyclictest808-21snmpd22:49:251
17194992825,2cyclictest808-21snmpd21:58:451
17193992828,0cyclictest23399-21kworker/0:0+events21:50:130
17193992827,1cyclictest808-21snmpd22:30:040
17193992827,1cyclictest808-21snmpd21:46:170
17193992827,1cyclictest808-21snmpd00:03:450
17193992826,2cyclictest808-21snmpd22:25:300
17193992826,2cyclictest808-21snmpd19:26:250
17196992726,1cyclictest808-21snmpd20:30:183
17196992725,2cyclictest808-21snmpd00:34:553
17195992726,1cyclictest818-21lldpd00:07:322
17195992726,1cyclictest808-21snmpd23:10:502
17195992725,2cyclictest808-21snmpd20:37:512
17195992724,2cyclictest808-21snmpd19:13:532
17194992727,0cyclictest7305-21kworker/u16:2+atlantic19:30:391
17194992727,0cyclictest18967-21kworker/u16:2+atlantic23:51:391
17194992726,1cyclictest808-21snmpd22:05:151
17193992726,1cyclictest3132-21cat00:10:100
17196992625,1cyclictest808-21snmpd23:58:183
17196992625,1cyclictest808-21snmpd22:17:123
17196992625,1cyclictest808-21snmpd21:21:113
17195992625,1cyclictest808-21snmpd23:46:332
17195992625,1cyclictest808-21snmpd22:47:162
17195992624,2cyclictest808-21snmpd23:27:292
17194992626,0cyclictest7305-21kworker/u16:2+atlantic22:27:431
17194992625,1cyclictest808-21snmpd23:58:001
17193992625,1cyclictest808-21snmpd22:37:220
17193992625,1cyclictest808-21snmpd21:05:040
17193992625,1cyclictest808-21snmpd00:08:330
17196992524,1cyclictest808-21snmpd21:37:083
17195992524,1cyclictest808-21snmpd22:39:162
17195992524,1cyclictest808-21snmpd21:00:042
17194992525,0cyclictest7305-21kworker/u16:2+atlantic22:22:031
17194992525,0cyclictest7305-21kworker/u16:2+atlantic21:30:071
17194992523,2cyclictest808-21snmpd23:22:201
17194992523,2cyclictest808-21snmpd21:19:501
17193992523,2cyclictest26796-21cat20:55:150
17196992423,1cyclictest808-21snmpd22:29:373
17195992423,1cyclictest808-21snmpd20:12:052
17194992423,1cyclictest808-21snmpd20:36:181
17193992422,2cyclictest808-21snmpd23:05:560
17193992422,2cyclictest808-21snmpd22:10:120
17193992422,2cyclictest808-21snmpd21:20:170
17195992322,1cyclictest808-21snmpd23:07:202
17195992322,1cyclictest808-21snmpd21:37:352
17194992320,2cyclictest808-21snmpd00:30:281
17193992322,1cyclictest808-21snmpd00:39:490
17193992322,1cyclictest808-21snmpd00:16:010
17196992220,2cyclictest808-21snmpd23:25:203
17193992222,0cyclictest7957-21kworker/0:0+events23:26:470
17193992221,1cyclictest808-21snmpd19:12:580
17196992119,2cyclictest808-21snmpd19:30:493
17196992119,2cyclictest808-21snmpd19:25:163
17196991919,0cyclictest808-21snmpd22:46:283
17196991918,1cyclictest808-21snmpd22:42:523
17195991917,2cyclictest808-21snmpd21:15:492
17196991817,1cyclictest808-21snmpd00:25:403
17196991715,2cyclictest808-21snmpd23:11:263
17193991716,1cyclictest808-21snmpd20:30:510
17193991615,1cyclictest808-21snmpd21:30:530
17196991513,2cyclictest815-21ntpd19:13:413
17194991515,0cyclictest74950irq/132-enp1s022:34:311
17195991413,1cyclictest19267-21kworker/2:0+events_freezable_pwr_efficient20:25:162
17196991312,1cyclictest808-21snmpd19:39:493
17195991010,0cyclictest11685-21kworker/u16:1+atlantic00:10:092
171939998,1cyclictest808-21snmpd20:50:460
171939988,0cyclictest23399-21kworker/0:0+events20:40:210
171969976,1cyclictest3370-21sensors19:50:263
171959977,0cyclictest19267-21kworker/2:0+events_freezable_pwr_efficient20:58:132
171939970,7cyclictest0-21swapper/000:30:030
171969965,1cyclictest6591-21ls20:00:143
171939966,0cyclictest0-21swapper/020:09:580
171939966,0cyclictest0-21swapper/020:09:580
171939965,1cyclictest79942sleep020:02:220
171939965,1cyclictest4477-21grep19:55:130
171969954,1cyclictest4292-21sort19:55:123
171949954,1cyclictest15250-21sshd20:25:231
171939954,1cyclictest9048-21taskset00:29:300
171939954,1cyclictest6820-21chrt21:29:390
171939954,1cyclictest18311-21expr22:00:110
171939943,1cyclictest808-21snmpd22:07:120
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional