You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-04-02 - 04:24

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #0, slot #0

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System r0s0s.osadl.org (updated Wed Apr 02, 2025 00:46:32)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2757752300291,6sleep60-21swapper/619:07:226
2757542294255,13sleep50-21swapper/519:07:055
2759572290270,13sleep10-21swapper/119:09:581
2759482290269,13sleep20-21swapper/219:09:512
2757312290256,26sleep00-21swapper/019:06:430
2759442287266,13sleep70-21swapper/719:09:477
2757072285265,13sleep30-21swapper/319:06:233
2758852280261,12sleep40-21swapper/419:08:564
276438993636,0cyclictest0-21swapper/721:04:227
276437993634,1cyclictest277565-21kworker/u16:2+events_unbound19:20:016
276437993330,3cyclictest833-21snmpd20:00:006
276437993330,3cyclictest833-21snmpd19:59:596
276437993330,2cyclictest833-21snmpd23:30:076
276437993330,2cyclictest833-21snmpd22:44:306
276437993329,3cyclictest833-21snmpd23:04:486
276436993330,2cyclictest833-21snmpd22:28:235
276436993330,2cyclictest833-21snmpd20:09:395
276436993323,10cyclictest0-21swapper/523:00:275
27643599330,1cyclictest0-21swapper/420:42:074
276434993330,2cyclictest833-21snmpd23:27:523
276434993330,2cyclictest833-21snmpd22:53:383
276434993330,2cyclictest833-21snmpd22:27:013
276434993330,2cyclictest833-21snmpd00:22:113
276434993330,2cyclictest412945-21cat00:30:163
27643499330,30cyclictest0-21swapper/319:36:463
276432993330,2cyclictest833-21snmpd21:09:281
27643299330,30cyclictest0-21swapper/123:10:191
27643299330,30cyclictest0-21swapper/120:55:291
276431993330,3cyclictest277089-21cat19:10:170
276431993330,2cyclictest833-21snmpd20:10:360
27643199330,30cyclictest0-21swapper/021:19:500
276438993230,2cyclictest833-21snmpd22:31:587
276438993230,2cyclictest833-21snmpd21:19:537
276438993230,1cyclictest833-21snmpd22:13:297
27643899320,29cyclictest0-21swapper/722:45:127
27643899320,29cyclictest0-21swapper/721:44:307
276437993230,2cyclictest833-21snmpd19:46:006
276437993229,2cyclictest833-21snmpd20:31:096
276437993229,2cyclictest833-21snmpd00:08:216
27643799320,31cyclictest797-21mta-sts-daemon20:10:146
27643799320,31cyclictest0-21swapper/622:20:156
276435993230,1cyclictest833-21snmpd20:52:464
276435993230,1cyclictest833-21snmpd19:51:264
276435993230,1cyclictest833-21snmpd19:30:134
276435993229,2cyclictest833-21snmpd21:06:434
27643599320,31cyclictest0-21swapper/420:56:084
276434993230,1cyclictest833-21snmpd21:53:583
276434993230,1cyclictest833-21snmpd21:53:573
276434993230,1cyclictest833-21snmpd21:03:013
276434993230,1cyclictest833-21snmpd20:58:053
276434993230,1cyclictest833-21snmpd20:15:373
276434993230,1cyclictest833-21snmpd19:52:113
276434993229,2cyclictest833-21snmpd23:45:563
276434993229,2cyclictest833-21snmpd23:16:393
276434993229,2cyclictest833-21snmpd21:42:043
276434993229,2cyclictest833-21snmpd20:09:573
276434993229,2cyclictest833-21snmpd19:23:053
27643499320,31cyclictest0-21swapper/323:20:183
27643499320,30cyclictest0-21swapper/322:37:203
276433993230,2cyclictest833-21snmpd23:03:492
276433993230,2cyclictest833-21snmpd20:17:272
276433993230,2cyclictest833-21snmpd19:33:132
276432993229,2cyclictest833-21snmpd23:27:011
276432993229,2cyclictest833-21snmpd19:56:181
276432993229,2cyclictest833-21snmpd19:56:171
27643299320,31cyclictest0-21swapper/122:25:581
27643299320,31cyclictest0-21swapper/121:52:191
27643299320,31cyclictest0-21swapper/121:52:181
27643299320,29cyclictest0-21swapper/122:46:301
276431993230,2cyclictest833-21snmpd19:35:310
276431993230,2cyclictest833-21snmpd19:19:430
276431993229,2cyclictest833-21snmpd22:06:210
276431993229,2cyclictest833-21snmpd21:32:030
27643199320,30cyclictest0-21swapper/023:22:180
27643199320,30cyclictest0-21swapper/021:22:300
276438993130,1cyclictest833-21snmpd23:47:257
276438993130,1cyclictest833-21snmpd22:54:537
276438993130,1cyclictest833-21snmpd21:57:067
276438993130,1cyclictest833-21snmpd20:24:067
276438993130,1cyclictest833-21snmpd19:55:297
276438993130,1cyclictest833-21snmpd19:55:297
276438993129,1cyclictest833-21snmpd22:08:107
276438993128,2cyclictest833-21snmpd23:08:277
276438993128,2cyclictest833-21snmpd19:37:417
27643899310,31cyclictest0-21swapper/723:37:137
27643899310,31cyclictest0-21swapper/723:37:137
27643899310,31cyclictest0-21swapper/721:51:407
27643899310,31cyclictest0-21swapper/721:51:397
27643899310,31cyclictest0-21swapper/720:31:437
27643899310,30cyclictest0-21swapper/723:15:217
27643899310,30cyclictest0-21swapper/722:35:097
27643899310,30cyclictest0-21swapper/721:48:197
27643899310,30cyclictest0-21swapper/721:39:337
27643899310,30cyclictest0-21swapper/721:24:007
27643899310,30cyclictest0-21swapper/720:08:377
27643899310,30cyclictest0-21swapper/700:34:067
27643899310,30cyclictest0-21swapper/700:22:277
27643899310,1cyclictest0-21swapper/723:28:377
27643899310,1cyclictest0-21swapper/720:13:037
27643899310,1cyclictest0-21swapper/719:33:107
27643899310,1cyclictest0-21swapper/700:25:517
27643899310,1cyclictest0-21swapper/700:04:187
276437993130,1cyclictest833-21snmpd20:02:456
276437993130,1cyclictest833-21snmpd19:38:446
276437993129,2cyclictest833-21snmpd19:21:566
27643799310,30cyclictest0-21swapper/623:09:406
27643799310,30cyclictest0-21swapper/621:08:326
27643799310,30cyclictest0-21swapper/620:50:566
27643799310,1cyclictest0-21swapper/623:58:086
27643799310,1cyclictest0-21swapper/621:27:506
276436993130,1cyclictest833-21snmpd21:16:065
276436993129,2cyclictest833-21snmpd23:24:215
276436993129,2cyclictest833-21snmpd22:45:205
276436993129,1cyclictest833-21snmpd23:29:325
276436993128,2cyclictest415312-21cat00:35:165
276436993110,21cyclictest0-21swapper/522:35:265
27643699310,30cyclictest0-21swapper/522:51:035
27643699310,30cyclictest0-21swapper/521:50:335
27643699310,30cyclictest0-21swapper/521:50:335
27643699310,30cyclictest0-21swapper/521:47:215
27643699310,30cyclictest0-21swapper/521:26:005
276435993129,1cyclictest833-21snmpd22:13:444
276435993128,2cyclictest833-21snmpd21:14:424
27643599310,30cyclictest0-21swapper/423:42:384
27643599310,30cyclictest0-21swapper/423:42:374
27643599310,30cyclictest0-21swapper/400:05:384
27643599310,29cyclictest0-21swapper/420:21:034
27643599310,1cyclictest0-21swapper/423:58:414
276434993130,1cyclictest833-21snmpd19:49:333
276434993129,2cyclictest833-21snmpd23:35:473
276434993129,2cyclictest833-21snmpd23:35:463
276434993129,1cyclictest833-21snmpd23:00:033
276434993129,1cyclictest833-21snmpd21:21:503
276434993129,1cyclictest833-21snmpd20:52:103
276434993129,1cyclictest833-21snmpd19:32:473
276434993129,1cyclictest833-21snmpd00:17:263
276434993128,2cyclictest833-21snmpd20:46:523
27643499310,30cyclictest0-21swapper/322:40:113
27643499310,30cyclictest0-21swapper/321:19:473
27643499310,1cyclictest0-21swapper/319:10:433
276433993130,1cyclictest833-21snmpd21:08:282
276433993129,2cyclictest833-21snmpd22:40:152
276433993129,2cyclictest833-21snmpd00:28:312
27643399310,31cyclictest0-21swapper/220:05:022
27643399310,30cyclictest0-21swapper/220:29:542
276432993130,1cyclictest833-21snmpd22:51:591
276432993130,1cyclictest833-21snmpd19:40:291
276432993129,2cyclictest833-21snmpd20:35:391
276432993129,1cyclictest833-21snmpd22:31:191
276432993128,2cyclictest833-21snmpd20:34:281
27643299310,30cyclictest0-21swapper/123:56:281
27643299310,30cyclictest0-21swapper/123:31:041
27643299310,30cyclictest0-21swapper/121:03:161
27643299310,30cyclictest0-21swapper/100:00:391
27643299310,28cyclictest0-21swapper/119:49:511
27643299310,28cyclictest0-21swapper/119:30:011
27643299310,1cyclictest0-21swapper/100:14:571
276431993130,1cyclictest833-21snmpd23:40:370
276431993130,1cyclictest833-21snmpd23:40:370
276431993128,2cyclictest833-21snmpd23:02:450
27643199310,30cyclictest0-21swapper/022:35:500
27643199310,30cyclictest0-21swapper/022:10:190
27643199310,30cyclictest0-21swapper/000:34:340
27643199310,30cyclictest0-21swapper/000:16:590
27643199310,28cyclictest0-21swapper/019:51:230
27643199310,1cyclictest0-21swapper/020:06:470
27643899300,30cyclictest0-21swapper/719:23:087
27643899300,29cyclictest0-21swapper/720:29:007
27643899300,29cyclictest0-21swapper/700:16:177
27643899300,1cyclictest0-21swapper/720:00:417
276437993028,1cyclictest833-21snmpd20:19:316
27643799300,30cyclictest0-21swapper/621:30:546
27643799300,29cyclictest0-21swapper/622:34:456
27643799300,1cyclictest0-21swapper/619:33:146
276436993029,1cyclictest833-21snmpd23:10:185
276436993029,1cyclictest833-21snmpd22:01:485
276436993029,1cyclictest833-21snmpd19:50:275
276436993029,1cyclictest833-21snmpd00:00:565
276436993029,1cyclictest0-21swapper/521:05:225
276436993028,2cyclictest833-21snmpd22:30:315
276436993028,2cyclictest833-21snmpd21:04:415
276436993028,2cyclictest833-21snmpd20:31:275
276436993027,2cyclictest412970-21cat00:30:155
27643699300,30cyclictest0-21swapper/522:42:425
27643699300,30cyclictest0-21swapper/522:18:175
27643699300,30cyclictest0-21swapper/521:56:035
27643699300,30cyclictest0-21swapper/521:43:065
276435993029,1cyclictest833-21snmpd21:50:194
276435993029,1cyclictest833-21snmpd21:50:184
276435993028,1cyclictest833-21snmpd19:48:304
276435993027,2cyclictest833-21snmpd22:45:094
276435993027,2cyclictest833-21snmpd00:29:154
276435993027,2cyclictest342389-21cat21:35:164
27643599300,30cyclictest0-21swapper/423:46:314
27643599300,30cyclictest0-21swapper/423:37:494
27643599300,30cyclictest0-21swapper/423:37:494
27643599300,30cyclictest0-21swapper/421:58:424
27643599300,29cyclictest0-21swapper/423:05:244
27643599300,29cyclictest0-21swapper/400:03:004
27643599300,28cyclictest0-21swapper/420:16:164
27643599300,1cyclictest0-21swapper/421:31:504
276434993029,1cyclictest833-21snmpd20:13:543
276434993028,1cyclictest833-21snmpd23:10:213
276434993028,1cyclictest833-21snmpd19:44:513
276434993027,2cyclictest833-21snmpd23:50:073
276434993027,2cyclictest833-21snmpd20:44:563
276434993027,2cyclictest833-21snmpd19:55:183
276434993027,2cyclictest833-21snmpd19:55:173
27643499300,30cyclictest0-21swapper/319:25:403
27643499300,1cyclictest0-21swapper/320:24:513
276433993029,1cyclictest833-21snmpd22:58:562
276433993029,1cyclictest833-21snmpd20:41:342
276433993029,1cyclictest833-21snmpd19:37:342
276433993029,1cyclictest833-21snmpd00:10:592
276433993028,2cyclictest833-21snmpd22:34:012
276433993028,2cyclictest833-21snmpd21:31:142
276433993028,2cyclictest399671-21cat23:55:152
276433993028,2cyclictest367011-21cat22:35:142
27643399300,30cyclictest0-21swapper/223:38:582
27643399300,30cyclictest0-21swapper/223:38:582
27643399300,30cyclictest0-21swapper/223:20:122
27643399300,30cyclictest0-21swapper/222:02:242
27643399300,30cyclictest0-21swapper/220:02:472
27643399300,30cyclictest0-21swapper/219:59:392
27643399300,30cyclictest0-21swapper/219:59:382
27643399300,30cyclictest0-21swapper/200:07:532
27643399300,1cyclictest0-21swapper/200:15:122
276432993027,2cyclictest833-21snmpd22:17:401
276432993027,2cyclictest833-21snmpd22:00:251
27643299300,30cyclictest0-21swapper/121:25:471
27643299300,30cyclictest0-21swapper/120:46:351
27643299300,29cyclictest0-21swapper/119:50:061
27643299300,27cyclictest0-21swapper/100:07:471
276431993029,1cyclictest833-21snmpd23:06:280
276431993029,1cyclictest833-21snmpd22:03:420
276431993029,1cyclictest833-21snmpd21:59:180
276431993027,2cyclictest201780-21kworker/0:1+events20:35:000
27643199300,30cyclictest0-21swapper/023:19:270
27643199300,30cyclictest0-21swapper/023:10:120
27643199300,30cyclictest0-21swapper/021:50:300
27643199300,30cyclictest0-21swapper/021:50:300
27643199300,30cyclictest0-21swapper/020:42:410
276438992928,1cyclictest833-21snmpd22:57:247
276438992925,3cyclictest0-21swapper/723:40:267
276438992925,3cyclictest0-21swapper/723:40:257
27643899290,29cyclictest0-21swapper/720:48:087
27643899290,29cyclictest0-21swapper/719:47:517
27643899290,28cyclictest0-21swapper/723:54:437
27643899290,28cyclictest0-21swapper/719:51:417
276437992928,1cyclictest833-21snmpd19:10:586
276437992927,1cyclictest833-21snmpd00:15:176
276437992926,2cyclictest833-21snmpd23:48:166
276437992926,2cyclictest402059-21cat00:00:156
27643799290,28cyclictest0-21swapper/621:16:036
276436992928,1cyclictest833-21snmpd23:43:445
276436992928,1cyclictest833-21snmpd23:43:435
276436992928,1cyclictest833-21snmpd20:18:425
276436992928,1cyclictest833-21snmpd19:57:125
276436992928,1cyclictest833-21snmpd19:57:115
276436992923,6cyclictest291024-21kworker/u16:3+events_unbound20:13:355
27643699290,29cyclictest0-21swapper/520:29:305
276435992928,1cyclictest833-21snmpd23:21:584
276435992928,1cyclictest833-21snmpd21:19:294
276435992928,1cyclictest833-21snmpd21:03:374
276435992928,1cyclictest833-21snmpd20:35:574
276435992927,2cyclictest833-21snmpd19:27:204
276435992927,1cyclictest833-21snmpd22:24:524
27643599290,29cyclictest0-21swapper/423:02:544
27643599290,28cyclictest0-21swapper/422:31:554
27643599290,28cyclictest0-21swapper/419:38:054
276434992928,1cyclictest833-21snmpd22:56:473
276434992927,1cyclictest833-21snmpd22:46:323
276434992927,1cyclictest833-21snmpd22:30:023
276434992927,1cyclictest833-21snmpd22:12:313
276434992926,2cyclictest833-21snmpd21:27:083
276434992926,2cyclictest833-21snmpd00:29:573
27643499290,28cyclictest0-21swapper/320:00:243
276433992928,1cyclictest833-21snmpd23:31:282
276433992928,1cyclictest833-21snmpd22:06:102
276433992928,1cyclictest833-21snmpd21:36:472
276433992928,1cyclictest833-21snmpd21:16:032
276433992927,2cyclictest833-21snmpd19:53:572
27643399290,29cyclictest0-21swapper/220:13:012
276432992928,1cyclictest833-21snmpd20:43:581
276432992926,2cyclictest833-21snmpd23:06:391
27643299290,28cyclictest0-21swapper/121:35:451
276431992928,1cyclictest833-21snmpd00:35:300
276431992926,2cyclictest409873-21cat00:20:160
27643199290,29cyclictest0-21swapper/019:58:360
27643199290,29cyclictest0-21swapper/019:58:350
27643199290,29cyclictest0-21swapper/019:27:010
27643199290,29cyclictest0-21swapper/019:20:500
27643199290,28cyclictest0-21swapper/023:47:080
276438992827,1cyclictest833-21snmpd00:13:307
276438992826,2cyclictest833-21snmpd20:51:407
276438992826,2cyclictest380584-21cat23:10:117
276438992826,2cyclictest0-21swapper/720:39:337
276438992826,1cyclictest0-21swapper/723:55:157
276437992827,1cyclictest833-21snmpd23:35:056
276437992827,1cyclictest833-21snmpd23:35:046
276437992826,1cyclictest833-21snmpd23:41:556
276437992826,1cyclictest833-21snmpd23:41:556
27643699286,22cyclictest0-21swapper/519:25:275
276436992827,1cyclictest833-21snmpd20:47:075
276436992826,2cyclictest833-21snmpd21:23:415
276436992824,3cyclictest0-21swapper/521:14:115
276435992826,1cyclictest833-21snmpd22:56:334
276435992826,1cyclictest833-21snmpd22:35:424
276435992826,1cyclictest833-21snmpd22:00:554
27643599280,27cyclictest0-21swapper/422:05:454
276434992826,1cyclictest0-21swapper/319:19:553
276434992825,2cyclictest833-21snmpd21:47:273
276433992828,0cyclictest833-21snmpd23:49:132
276432992827,1cyclictest833-21snmpd00:19:531
276432992826,2cyclictest833-21snmpd23:15:481
276432992826,1cyclictest833-21snmpd00:25:081
276432992826,1cyclictest0-21swapper/123:53:131
276432992826,1cyclictest0-21swapper/121:17:111
276432992826,1cyclictest0-21swapper/120:27:031
276432992825,2cyclictest833-21snmpd00:20:111
276432992825,2cyclictest369426-21cat22:40:151
27643299280,27cyclictest0-21swapper/123:20:071
276431992827,1cyclictest833-21snmpd23:51:310
276431992827,1cyclictest833-21snmpd20:20:420
276431992826,2cyclictest375012-21cat22:55:140
276431992826,1cyclictest833-21snmpd21:00:550
276438992726,1cyclictest833-21snmpd19:19:587
276438992726,1cyclictest833-21snmpd00:07:567
276438992726,1cyclictest0-21swapper/720:15:317
276438992726,1cyclictest0-21swapper/719:42:537
276438992726,1cyclictest0-21swapper/700:38:317
276438992725,1cyclictest0-21swapper/722:41:147
276438992725,1cyclictest0-21swapper/722:27:287
27643899270,27cyclictest0-21swapper/722:24:567
27643899270,27cyclictest0-21swapper/721:11:547
27643899270,27cyclictest0-21swapper/720:55:537
276437992726,1cyclictest833-21snmpd23:17:556
276437992726,1cyclictest833-21snmpd23:12:396
276437992726,1cyclictest833-21snmpd21:24:476
276437992726,1cyclictest833-21snmpd00:31:346
276437992726,1cyclictest833-21snmpd00:12:266
276437992725,2cyclictest395983-21kworker/u16:2+events_unbound23:50:226
276436992726,1cyclictest833-21snmpd21:39:465
276436992725,2cyclictest833-21snmpd23:56:525
276436992725,2cyclictest833-21snmpd23:46:405
276436992725,2cyclictest833-21snmpd19:34:345
276436992723,4cyclictest389786-21kworker/u16:3+events_unbound23:39:235
276436992723,4cyclictest389786-21kworker/u16:3+events_unbound23:39:225
276436992723,3cyclictest0-21swapper/520:40:245
27643699270,27cyclictest0-21swapper/522:58:025
276435992726,1cyclictest0-21swapper/400:21:174
276435992725,1cyclictest0-21swapper/423:51:194
276435992724,2cyclictest833-21snmpd23:19:304
276434992726,1cyclictest833-21snmpd21:31:243
276433992726,1cyclictest833-21snmpd19:23:012
276433992726,1cyclictest0-21swapper/219:16:592
276433992725,2cyclictest409885-21cat00:20:152
276433992725,2cyclictest372625-21cat22:50:122
276432992726,1cyclictest833-21snmpd21:56:031
276432992725,2cyclictest833-21snmpd19:12:081
276432992725,2cyclictest0-21swapper/119:35:111
276432992724,2cyclictest881-21ntpd22:21:121
276431992726,1cyclictest201780-21kworker/0:1+events22:20:000
276431992726,1cyclictest0-21swapper/021:49:240
276431992726,1cyclictest0-21swapper/021:06:290
276431992726,1cyclictest0-21swapper/020:37:420
276431992725,2cyclictest833-21snmpd20:56:080
276431992725,1cyclictest833-21snmpd23:26:250
276431992724,2cyclictest833-21snmpd00:06:050
276438992624,2cyclictest317429-21cat20:40:157
276438992624,1cyclictest0-21swapper/721:32:177
276437992625,1cyclictest0-21swapper/622:05:046
276437992624,1cyclictest833-21snmpd23:20:036
276437992624,1cyclictest351027-21ntpq21:55:256
276436992625,1cyclictest833-21snmpd19:45:205
276436992625,1cyclictest833-21snmpd00:07:505
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional