You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-04-11 - 22:17

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rackcslot3s.osadl.org (updated Fri Apr 11, 2025 12:43:55)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
200362324316,5sleep00-21swapper/007:06:420
199752317310,5sleep20-21swapper/207:05:552
200642315309,4sleep30-21swapper/307:07:043
200822313299,4sleep10-21swapper/107:07:181
20558993100,307cyclictest5951-21kworker/u16:2+efi_rts_wq10:40:143
20556993060,304cyclictest1494-21kworker/u16:3+efi_rts_wq12:00:141
20557993050,303cyclictest18615-21kworker/u16:3+efi_rts_wq11:20:132
20558993040,303cyclictest1505-21kworker/u16:2+efi_rts_wq08:55:133
20557993030,302cyclictest1505-21kworker/u16:2+efi_rts_wq09:10:192
20557993020,299cyclictest1505-21kworker/u16:2+efi_rts_wq07:15:132
20558993010,300cyclictest9547-21kworker/u16:0+efi_rts_wq12:15:123
20558993010,300cyclictest21928-21kworker/u16:3+efi_rts_wq08:00:103
20556993010,300cyclictest1505-21kworker/u16:2+efi_rts_wq07:45:121
20556993010,300cyclictest1505-21kworker/u16:2+efi_rts_wq07:45:111
20557992950,294cyclictest1505-21kworker/u16:2+efi_rts_wq08:45:162
20558992940,293cyclictest21928-21kworker/u16:3+efi_rts_wq10:55:133
20557992940,293cyclictest21928-21kworker/u16:3+efi_rts_wq08:30:162
20558992930,292cyclictest1505-21kworker/u16:2+efi_rts_wq10:10:093
20556992910,290cyclictest1505-21kworker/u16:2+efi_rts_wq09:40:201
20558992900,289cyclictest1505-21kworker/u16:2+efi_rts_wq10:00:123
20556992900,289cyclictest1505-21kworker/u16:2+efi_rts_wq07:50:161
20556992880,287cyclictest21928-21kworker/u16:3+efi_rts_wq08:20:131
20555992850,284cyclictest1505-21kworker/u16:2+efi_rts_wq09:05:120
20557992840,283cyclictest1505-21kworker/u16:2+efi_rts_wq08:55:122
20556992830,282cyclictest9547-21kworker/u16:0+efi_rts_wq11:40:131
20555992830,282cyclictest21928-21kworker/u16:3+efi_rts_wq07:20:100
20558992820,281cyclictest1505-21kworker/u16:2+efi_rts_wq10:30:093
20557992820,281cyclictest1505-21kworker/u16:2+efi_rts_wq09:15:122
20556992820,281cyclictest1505-21kworker/u16:2+efi_rts_wq09:35:141
20558992810,280cyclictest21928-21kworker/u16:3+efi_rts_wq07:35:133
20558992780,277cyclictest9547-21kworker/u16:0+efi_rts_wq11:35:143
20557992780,277cyclictest21928-21kworker/u16:3+efi_rts_wq10:55:142
20557992780,277cyclictest1505-21kworker/u16:2+efi_rts_wq09:30:152
20556992780,277cyclictest1505-21kworker/u16:2+efi_rts_wq08:40:141
20556992770,276cyclictest21928-21kworker/u16:3+efi_rts_wq08:05:131
20558992760,275cyclictest1505-21kworker/u16:2+efi_rts_wq10:20:133
20557992750,274cyclictest9547-21kworker/u16:0+efi_rts_wq12:30:092
20557992750,274cyclictest1494-21kworker/u16:3+efi_rts_wq11:55:162
20555992730,272cyclictest21928-21kworker/u16:3+efi_rts_wq08:15:130
20555992720,271cyclictest21131-21kworker/u16:2+efi_rts_wq11:15:130
20557992710,270cyclictest5951-21kworker/u16:2+efi_rts_wq10:40:122
20556992680,267cyclictest21928-21kworker/u16:3+efi_rts_wq10:50:091
20556992620,261cyclictest1505-21kworker/u16:2+efi_rts_wq09:00:111
20555992620,261cyclictest1505-21kworker/u16:2+efi_rts_wq08:50:160
20555992610,260cyclictest9547-21kworker/u16:0+efi_rts_wq11:40:120
20555992580,257cyclictest21928-21kworker/u16:3+efi_rts_wq08:10:160
20558992560,255cyclictest1505-21kworker/u16:2+efi_rts_wq10:15:143
20556992560,255cyclictest21928-21kworker/u16:3+efi_rts_wq07:25:141
20558992540,253cyclictest21928-21kworker/u16:3+efi_rts_wq09:50:103
20557992510,250cyclictest9547-21kworker/u16:0+efi_rts_wq11:35:142
20557992460,245cyclictest1505-21kworker/u16:2+efi_rts_wq08:35:152
20555992460,245cyclictest1505-21kworker/u16:2+efi_rts_wq10:30:090
20557992450,244cyclictest31558-21kworker/u16:0+efi_rts_wq10:35:162
20557992440,243cyclictest9547-21kworker/u16:0+efi_rts_wq11:10:152
20557992430,242cyclictest21928-21kworker/u16:3+efi_rts_wq08:15:142
20558992410,240cyclictest1494-21kworker/u16:3+efi_rts_wq12:35:153
20557992400,239cyclictest1505-21kworker/u16:2+efi_rts_wq10:15:142
20556992400,239cyclictest21928-21kworker/u16:3+efi_rts_wq07:55:141
20555992360,235cyclictest1505-21kworker/u16:2+efi_rts_wq07:40:140
20555992360,235cyclictest1505-21kworker/u16:2+efi_rts_wq07:40:130
20558992350,234cyclictest1505-21kworker/u16:2+efi_rts_wq09:30:153
20556992330,232cyclictest21928-21kworker/u16:3+efi_rts_wq07:10:141
20557992320,231cyclictest21928-21kworker/u16:3+efi_rts_wq07:35:142
20555992300,227cyclictest21928-21kworker/u16:3+efi_rts_wq09:55:110
20557992220,221cyclictest21928-21kworker/u16:3+efi_rts_wq07:25:122
20556992210,220cyclictest21928-21kworker/u16:3+efi_rts_wq11:00:141
20557992200,219cyclictest1494-21kworker/u16:3+efi_rts_wq12:00:142
20555992170,216cyclictest18615-21kworker/u16:3+efi_rts_wq11:20:130
20558992150,214cyclictest9547-21kworker/u16:0+efi_rts_wq11:10:163
20555992110,210cyclictest9547-21kworker/u16:0+efi_rts_wq12:10:200
20557992100,209cyclictest1505-21kworker/u16:2+efi_rts_wq08:40:142
20556992100,209cyclictest21928-21kworker/u16:3+efi_rts_wq09:55:111
20558992090,208cyclictest21131-21kworker/u16:2+efi_rts_wq11:30:143
20557992070,206cyclictest1505-21kworker/u16:2+efi_rts_wq07:45:132
20557992070,206cyclictest1505-21kworker/u16:2+efi_rts_wq07:45:122
20557992060,205cyclictest21928-21kworker/u16:3+efi_rts_wq08:25:142
20556992040,203cyclictest21131-21kworker/u16:2+efi_rts_wq11:15:131
20557992020,201cyclictest9547-21kworker/u16:0+efi_rts_wq12:15:132
20558991980,197cyclictest9547-21kworker/u16:0+efi_rts_wq12:10:183
20555991980,197cyclictest21131-21kworker/u16:2+efi_rts_wq11:30:140
20557991970,196cyclictest1505-21kworker/u16:2+efi_rts_wq09:20:142
20558991960,195cyclictest21928-21kworker/u16:3+efi_rts_wq08:10:163
20557991910,190cyclictest1505-21kworker/u16:2+efi_rts_wq10:20:132
20557991860,185cyclictest9547-21kworker/u16:0+efi_rts_wq12:10:182
20555991780,177cyclictest21928-21kworker/u16:3+efi_rts_wq08:25:130
20556991770,176cyclictest1505-21kworker/u16:2+efi_rts_wq09:10:191
20557991760,175cyclictest9547-21kworker/u16:0+efi_rts_wq12:20:162
20556991720,171cyclictest1505-21kworker/u16:2+efi_rts_wq07:40:141
20556991720,171cyclictest1505-21kworker/u16:2+efi_rts_wq07:40:131
20555991720,171cyclictest21928-21kworker/u16:3+efi_rts_wq08:00:100
20556991710,170cyclictest1505-21kworker/u16:2+efi_rts_wq07:15:141
20555991710,170cyclictest1505-21kworker/u16:2+efi_rts_wq09:15:120
20556991700,169cyclictest9547-21kworker/u16:0+efi_rts_wq12:20:161
20557991690,168cyclictest21928-21kworker/u16:3+efi_rts_wq10:50:082
20556991690,168cyclictest21131-21kworker/u16:2+efi_rts_wq11:50:081
20557991600,159cyclictest21928-21kworker/u16:3+efi_rts_wq11:00:142
20555991560,153cyclictest1505-21kworker/u16:2+efi_rts_wq10:00:110
20555991490,148cyclictest1505-21kworker/u16:2+efi_rts_wq08:35:140
20555991470,144cyclictest21928-21kworker/u16:3+efi_rts_wq07:30:160
20558991460,145cyclictest21928-21kworker/u16:3+efi_rts_wq08:05:133
20555991350,134cyclictest1505-21kworker/u16:2+efi_rts_wq09:40:190
20558991310,130cyclictest21131-21kworker/u16:2+efi_rts_wq11:50:093
20556991290,128cyclictest21928-21kworker/u16:3+efi_rts_wq07:30:161
20555991260,125cyclictest1494-21kworker/u16:3+efi_rts_wq12:35:140
20557991250,124cyclictest1505-21kworker/u16:2+efi_rts_wq07:50:162
20557991180,117cyclictest21928-21kworker/u16:3+efi_rts_wq09:50:092
87302480,0sleep00-21swapper/012:04:210
20556993330,2cyclictest808-21snmpd12:28:521
20555993329,4cyclictest808-21snmpd09:35:540
20558993230,2cyclictest808-21snmpd11:40:543
20558993229,3cyclictest808-21snmpd09:23:553
20558993228,4cyclictest808-21snmpd07:52:423
20556993230,2cyclictest808-21snmpd10:56:271
20555993229,3cyclictest808-21snmpd11:55:240
20555993229,3cyclictest808-21snmpd10:17:230
20555993229,3cyclictest808-21snmpd08:31:530
20555993229,3cyclictest808-21snmpd07:15:240
20555993229,2cyclictest808-21snmpd08:43:110
20555993228,4cyclictest808-21snmpd07:55:190
20555993227,4cyclictest808-21snmpd10:11:160
20558993130,1cyclictest808-21snmpd12:26:323
20558993130,1cyclictest808-21snmpd11:18:453
20558993130,1cyclictest808-21snmpd07:28:323
20558993129,2cyclictest808-21snmpd12:31:523
20558993129,2cyclictest808-21snmpd09:18:323
20558993128,3cyclictest808-21snmpd08:34:133
20558993128,2cyclictest808-21snmpd09:26:123
20558993127,4cyclictest808-21snmpd10:39:043
20557993129,2cyclictest808-21snmpd10:12:052
20557993129,2cyclictest808-21snmpd09:03:122
20557993129,2cyclictest808-21snmpd07:23:112
20557993128,2cyclictest808-21snmpd11:29:252
20556993130,1cyclictest808-21snmpd12:39:221
20556993130,1cyclictest808-21snmpd09:30:251
20556993129,2cyclictest808-21snmpd10:20:491
20556993129,2cyclictest808-21snmpd09:17:231
20555993130,1cyclictest808-21snmpd07:11:440
20555993129,2cyclictest808-21snmpd10:49:000
20555993129,2cyclictest808-21snmpd09:28:240
20555993129,2cyclictest808-21snmpd08:22:170
20555993128,2cyclictest808-21snmpd12:16:550
20555993128,2cyclictest808-21snmpd07:36:270
20558993030,0cyclictest14566-21kworker/u16:2+atlantic11:05:483
20558993029,1cyclictest808-21snmpd11:26:403
20558993029,1cyclictest808-21snmpd11:02:323
20558993029,1cyclictest808-21snmpd10:29:133
20558993029,1cyclictest808-21snmpd09:55:183
20558993029,1cyclictest808-21snmpd08:53:563
20558993029,1cyclictest808-21snmpd07:46:493
20558993029,1cyclictest808-21snmpd07:46:483
20558993028,2cyclictest808-21snmpd12:20:433
20558993027,2cyclictest808-21snmpd08:15:383
20557993029,1cyclictest808-21snmpd10:09:372
20557993029,1cyclictest808-21snmpd09:43:012
20557993029,1cyclictest808-21snmpd08:53:442
20557993029,1cyclictest808-21snmpd07:42:072
20557993029,1cyclictest808-21snmpd07:42:062
20557993028,2cyclictest808-21snmpd08:23:282
20556993030,0cyclictest808-21snmpd10:46:301
20556993030,0cyclictest16886-21kworker/1:1+events11:05:111
20556993029,1cyclictest808-21snmpd11:22:331
20556993029,1cyclictest808-21snmpd08:25:191
20556993029,1cyclictest808-21snmpd08:16:501
20556993029,1cyclictest808-21snmpd08:13:311
20556993029,1cyclictest808-21snmpd08:01:091
20556993029,1cyclictest3427-21kworker/1:2+events10:31:201
20556993028,2cyclictest808-21snmpd10:35:201
20556993028,2cyclictest808-21snmpd09:49:241
20556993028,2cyclictest32146-21cat07:35:161
20555993029,1cyclictest9547-21kworker/u16:0+atlantic10:53:420
20555993029,1cyclictest808-21snmpd12:09:310
20555993029,1cyclictest808-21snmpd09:23:490
20555993029,1cyclictest808-21snmpd08:45:460
20555993029,1cyclictest808-21snmpd08:07:570
20555993028,2cyclictest808-21snmpd10:23:370
20555993028,2cyclictest808-21snmpd07:51:510
20555993027,3cyclictest808-21snmpd12:28:010
20555993027,3cyclictest808-21snmpd07:47:100
20555993027,3cyclictest808-21snmpd07:47:090
20555993027,2cyclictest808-21snmpd09:30:370
20555993025,5cyclictest808-21snmpd10:44:290
20555993025,4cyclictest808-21snmpd10:09:470
20558992928,1cyclictest808-21snmpd09:47:393
20558992928,1cyclictest808-21snmpd07:30:513
20557992929,0cyclictest808-21snmpd11:08:302
20557992928,1cyclictest808-21snmpd10:01:042
20557992928,1cyclictest808-21snmpd08:13:522
20557992928,1cyclictest808-21snmpd07:58:552
20557992927,2cyclictest808-21snmpd11:50:392
20557992926,2cyclictest808-21snmpd10:27:492
20556992929,0cyclictest25369-21kworker/1:1+events11:45:211
20556992929,0cyclictest18344-21kworker/1:0+events11:13:341
20556992928,1cyclictest808-21snmpd12:08:461
20556992928,1cyclictest808-21snmpd11:56:061
20556992928,1cyclictest808-21snmpd11:29:191
20556992928,1cyclictest808-21snmpd09:54:221
20556992928,1cyclictest3427-21kworker/1:2+events11:38:011
20556992928,1cyclictest3427-21kworker/1:2+events11:30:121
20556992928,1cyclictest3427-21kworker/1:2+events10:40:421
20556992927,2cyclictest808-21snmpd10:19:461
20555992928,1cyclictest808-21snmpd11:54:340
20555992928,1cyclictest808-21snmpd09:53:120
20555992927,2cyclictest808-21snmpd11:39:510
20555992926,3cyclictest808-21snmpd10:59:420
20558992827,1cyclictest808-21snmpd11:58:403
20558992827,1cyclictest808-21snmpd09:01:323
20558992827,1cyclictest808-21snmpd08:43:163
20558992826,2cyclictest20548-21cat08:25:163
20558992825,3cyclictest808-21snmpd07:19:323
20557992827,1cyclictest808-21snmpd12:25:012
20557992827,1cyclictest808-21snmpd11:32:542
20557992827,1cyclictest808-21snmpd09:35:002
20557992827,1cyclictest808-21snmpd07:10:302
20556992827,1cyclictest808-21snmpd12:16:311
20556992826,2cyclictest808-21snmpd12:10:161
20555992828,0cyclictest74950irq/132-enp1s011:03:060
20555992826,2cyclictest808-21snmpd09:13:060
20558992726,1cyclictest75150irq/134-enp1s010:51:303
20558992722,4cyclictest808-21snmpd07:40:273
20558992722,4cyclictest808-21snmpd07:40:273
20557992727,0cyclictest9547-21kworker/u16:0+atlantic12:05:332
20557992727,0cyclictest21928-21kworker/u16:3+atlantic08:06:372
20557992726,1cyclictest808-21snmpd11:48:222
20557992725,2cyclictest10221-21cat08:00:122
20556992726,1cyclictest808-21snmpd10:13:561
20556992726,1cyclictest808-21snmpd10:01:161
20556992725,2cyclictest808-21snmpd12:31:291
20556992725,2cyclictest808-21snmpd09:05:021
20556992724,2cyclictest808-21snmpd10:06:251
20556992724,2cyclictest808-21snmpd09:25:061
20555992725,2cyclictest808-21snmpd11:46:300
20558992625,1cyclictest808-21snmpd11:47:223
20558992625,1cyclictest808-21snmpd07:56:073
20557992623,2cyclictest808-21snmpd09:47:122
20556992626,0cyclictest808-21snmpd10:26:341
20556992625,1cyclictest808-21snmpd08:34:521
20556992624,2cyclictest808-21snmpd07:23:471
20555992624,2cyclictest808-21snmpd11:05:210
20558992525,0cyclictest75150irq/134-enp1s012:03:063
20558992524,1cyclictest808-21snmpd09:38:573
20558992524,1cyclictest808-21snmpd09:11:143
20558992522,2cyclictest808-21snmpd09:09:533
20557992525,0cyclictest74850irq/131-enp1s010:30:502
20557992523,2cyclictest808-21snmpd11:16:512
20557992523,2cyclictest30059-21cat07:30:172
20556992525,0cyclictest22633-21kworker/1:0+events08:55:401
20555992522,2cyclictest808-21snmpd10:28:290
20558992423,1cyclictest808-21snmpd08:46:443
20558992422,2cyclictest808-21snmpd11:24:483
20557992424,0cyclictest21928-21kworker/u16:3+atlantic09:55:242
20557992423,1cyclictest808-21snmpd12:35:372
20556992424,0cyclictest22633-21kworker/1:0+events08:46:241
20555992423,1cyclictest808-21snmpd10:35:080
20558992321,2cyclictest21199-21cat07:10:173
20558992320,2cyclictest808-21snmpd10:05:463
20556992323,0cyclictest22633-21kworker/1:0+events09:24:491
20556992323,0cyclictest22633-21kworker/1:0+events08:53:331
20555992322,1cyclictest808-21snmpd11:29:480
20558992222,0cyclictest808-21snmpd10:47:263
20558992221,1cyclictest808-21snmpd09:41:283
20558992119,2cyclictest808-21snmpd08:36:323
20556992120,1cyclictest22633-21kworker/1:0+events08:38:221
20558992019,1cyclictest808-21snmpd08:23:163
20558992018,2cyclictest808-21snmpd07:22:213
20557992019,1cyclictest808-21snmpd10:47:112
20555992019,1cyclictest808-21snmpd11:10:500
20557991919,0cyclictest75050irq/133-enp1s011:40:362
20555991817,1cyclictest808-21snmpd09:00:180
20555991814,4cyclictest808-21snmpd07:29:540
20555991614,2cyclictest476-21cat08:55:140
20557991414,0cyclictest1505-21kworker/u16:2+atlantic09:06:202
20557991313,0cyclictest1505-21kworker/u16:2+atlantic09:27:402
205589995,3cyclictest9200-21chrt12:07:373
205559995,4cyclictest14328-21cat12:20:180
205559993,3cyclictest17161-21cat12:30:110
205559973,4cyclictest19907-21date09:49:590
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional