You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2024-07-27 - 14:16
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the 376 highest latencies:
System rackdslot2.osadl.org (updated Sat Jul 27, 2024 00:46:26)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1864924150,6sleep00-21swapper/019:05:130
1235911740,6ptp4l401ktimersoftd/319:06:113
1273921620,8sleep02071799cyclictest00:35:300
207209910293,5cyclictest41-21ksoftirqd/322:20:103
207209910091,5cyclictest41-21ksoftirqd/319:15:113
20720999889,5cyclictest41-21ksoftirqd/319:30:113
20720999687,5cyclictest41-21ksoftirqd/300:25:103
20720999583,7cyclictest41-21ksoftirqd/320:25:113
20720999485,5cyclictest41-21ksoftirqd/321:10:093
20720999484,6cyclictest41-21ksoftirqd/323:35:093
20720999484,6cyclictest41-21ksoftirqd/321:20:113
20720998775,8cyclictest41-21ksoftirqd/300:00:113
202072833,19sleep20-21swapper/219:07:072
20720997561,7cyclictest41-21ksoftirqd/322:35:153
20720997060,5cyclictest41-21ksoftirqd/300:35:113
20720997058,7cyclictest41-21ksoftirqd/319:25:133
20720997056,8cyclictest41-21ksoftirqd/321:45:093
20720997054,9cyclictest41-21ksoftirqd/323:00:123
176152690,9sleep02071799cyclictest23:40:000
170582620,2sleep20-21swapper/223:35:292
123591610,1ptp4l401ktimersoftd/321:03:483
20720996054,4cyclictest41-21ksoftirqd/322:20:003
123591600,1ptp4l401ktimersoftd/321:42:353
123591590,1ptp4l401ktimersoftd/320:20:483
20720995850,4cyclictest41-21ksoftirqd/323:05:043
42012570,3sleep12071899cyclictest00:20:011
42012570,3sleep12071899cyclictest00:20:001
20720995548,3cyclictest41-21ksoftirqd/322:55:003
57698540,14rtkit-daemon0-21swapper/021:47:360
20720995448,3cyclictest41-21ksoftirqd/322:35:003
20719995435,16cyclictest33-21ksoftirqd/221:55:002
97762530,2sleep30-21swapper/321:05:153
20720995348,3cyclictest41-21ksoftirqd/319:40:003
20720995346,4cyclictest41-21ksoftirqd/320:00:003
20720995346,4cyclictest41-21ksoftirqd/319:59:593
20720995320,4cyclictest41-21ksoftirqd/322:30:003
20720995246,3cyclictest41-21ksoftirqd/322:45:273
20720995225,3cyclictest41-21ksoftirqd/322:55:293
2072099516,9cyclictest41-21ksoftirqd/320:35:013
20720995145,4cyclictest41-21ksoftirqd/320:50:133
20720995145,3cyclictest41-21ksoftirqd/320:40:003
20720995145,3cyclictest41-21ksoftirqd/300:35:003
20720995145,3cyclictest41-21ksoftirqd/300:00:003
20720995144,4cyclictest41-21ksoftirqd/321:40:013
20720995130,4cyclictest41-21ksoftirqd/321:30:573
20720995119,7cyclictest41-21ksoftirqd/300:10:003
20719995132,16cyclictest33-21ksoftirqd/222:15:092
20720995045,3cyclictest41-21ksoftirqd/323:20:253
20720995045,3cyclictest41-21ksoftirqd/320:10:293
20720995045,3cyclictest41-21ksoftirqd/319:24:593
20720995043,4cyclictest41-21ksoftirqd/320:40:333
20720995043,4cyclictest41-21ksoftirqd/319:55:003
20718995043,4cyclictest208-21systemd-journal22:29:561
20718995029,4cyclictest25-21ksoftirqd/121:03:381
20717995045,3cyclictest9-21ksoftirqd/021:20:000
20720994944,3cyclictest41-21ksoftirqd/319:10:223
20720994943,3cyclictest41-21ksoftirqd/322:05:013
20720994943,3cyclictest41-21ksoftirqd/320:05:013
20720994941,4cyclictest41-21ksoftirqd/323:50:183
20720994941,4cyclictest41-21ksoftirqd/321:50:173
20718994929,5cyclictest25-21ksoftirqd/119:48:371
20718994927,5cyclictest25-21ksoftirqd/123:04:371
20718994926,4cyclictest25-21ksoftirqd/119:40:121
20720994843,3cyclictest41-21ksoftirqd/323:30:213
20720994843,3cyclictest41-21ksoftirqd/323:20:013
20720994842,3cyclictest41-21ksoftirqd/320:20:003
20720994841,4cyclictest41-21ksoftirqd/323:10:133
20720994841,4cyclictest41-21ksoftirqd/321:30:013
20720994841,4cyclictest41-21ksoftirqd/321:30:003
20720994841,4cyclictest41-21ksoftirqd/300:20:013
20720994841,4cyclictest41-21ksoftirqd/300:20:003
20720994742,3cyclictest41-21ksoftirqd/322:10:193
20720994741,4cyclictest41-21ksoftirqd/300:20:303
20720994741,3cyclictest41-21ksoftirqd/322:10:003
20720994740,4cyclictest41-21ksoftirqd/322:40:173
20718994726,4cyclictest25-21ksoftirqd/100:07:401
2072099466,8cyclictest41-21ksoftirqd/323:40:173
20720994641,3cyclictest41-21ksoftirqd/321:20:013
20717994640,4cyclictest9-21ksoftirqd/000:10:000
20717994640,3cyclictest9-21ksoftirqd/019:20:010
2034824616,18sleep10-21swapper/119:08:551
20720994540,3cyclictest41-21ksoftirqd/319:40:183
20720994539,3cyclictest41-21ksoftirqd/320:10:013
20720994539,3cyclictest41-21ksoftirqd/319:49:593
20720994538,4cyclictest41-21ksoftirqd/321:55:133
20717994539,3cyclictest9-21ksoftirqd/000:05:000
20717994537,4cyclictest9-21ksoftirqd/023:25:000
20720994438,3cyclictest41-21ksoftirqd/300:10:333
20720994437,4cyclictest41-21ksoftirqd/320:50:003
20719994424,4cyclictest33-21ksoftirqd/219:23:262
20717994437,4cyclictest9-21ksoftirqd/023:10:110
20720994337,3cyclictest41-21ksoftirqd/323:50:003
20717994338,3cyclictest9-21ksoftirqd/021:00:000
20717994337,3cyclictest9-21ksoftirqd/023:00:010
20720994237,3cyclictest41-21ksoftirqd/323:25:313
20720994236,4cyclictest41-21ksoftirqd/320:55:133
20719994235,4cyclictest33-21ksoftirqd/221:49:582
20719994223,4cyclictest33-21ksoftirqd/220:07:092
20717994236,4cyclictest9-21ksoftirqd/019:35:310
20717994233,5cyclictest9-21ksoftirqd/023:25:110
20717994233,5cyclictest9-21ksoftirqd/022:40:030
20719994136,3cyclictest33-21ksoftirqd/220:56:322
20719994134,4cyclictest33-21ksoftirqd/219:37:512
20718994134,4cyclictest25-21ksoftirqd/121:54:191
20717994134,4cyclictest9-21ksoftirqd/021:03:590
20719994034,3cyclictest33-21ksoftirqd/222:20:162
20719994033,4cyclictest33-21ksoftirqd/223:00:012
20719994033,4cyclictest33-21ksoftirqd/222:39:062
20719994033,4cyclictest33-21ksoftirqd/222:05:242
20719994033,4cyclictest33-21ksoftirqd/220:03:192
20719994033,4cyclictest33-21ksoftirqd/219:43:592
20719994033,4cyclictest33-21ksoftirqd/219:32:542
20719994032,5cyclictest33-21ksoftirqd/221:25:002
20718994034,4cyclictest25-21ksoftirqd/120:33:361
20718994033,4cyclictest25-21ksoftirqd/123:52:181
20718994033,4cyclictest25-21ksoftirqd/119:23:491
20717994034,4cyclictest9-21ksoftirqd/000:20:280
20717994033,4cyclictest9-21ksoftirqd/021:40:090
20717994033,4cyclictest9-21ksoftirqd/021:24:580
20717994033,4cyclictest9-21ksoftirqd/019:22:260
745023932,3sleep125-21ksoftirqd/123:15:301
20719993933,4cyclictest33-21ksoftirqd/220:15:362
20719993932,4cyclictest33-21ksoftirqd/222:25:582
20719993932,4cyclictest33-21ksoftirqd/221:57:582
20719993932,4cyclictest33-21ksoftirqd/221:27:232
20719993932,4cyclictest33-21ksoftirqd/221:27:222
20718993932,4cyclictest25-21ksoftirqd/119:11:161
20717993933,4cyclictest9-21ksoftirqd/022:10:280
20717993932,4cyclictest9-21ksoftirqd/022:35:290
20717993932,4cyclictest9-21ksoftirqd/019:49:370
20717993931,5cyclictest9-21ksoftirqd/020:24:140
248652380,1sleep00-21swapper/021:35:280
20719993832,4cyclictest33-21ksoftirqd/223:26:092
20719993832,4cyclictest33-21ksoftirqd/222:14:212
20719993832,3cyclictest33-21ksoftirqd/219:58:162
20719993832,3cyclictest33-21ksoftirqd/219:58:162
20719993832,3cyclictest33-21ksoftirqd/219:54:592
20719993831,4cyclictest33-21ksoftirqd/223:50:392
20719993831,4cyclictest33-21ksoftirqd/223:44:042
20719993831,4cyclictest33-21ksoftirqd/223:24:592
20719993831,4cyclictest33-21ksoftirqd/222:40:032
20719993831,4cyclictest33-21ksoftirqd/221:43:592
20719993831,4cyclictest33-21ksoftirqd/200:35:092
20718993832,4cyclictest25-21ksoftirqd/119:37:041
20718993832,3cyclictest25-21ksoftirqd/123:32:251
20718993832,3cyclictest25-21ksoftirqd/121:28:041
20718993832,3cyclictest25-21ksoftirqd/121:28:031
20718993831,4cyclictest25-21ksoftirqd/123:28:141
20718993831,4cyclictest25-21ksoftirqd/123:13:561
20718993831,4cyclictest25-21ksoftirqd/100:11:171
20718993830,5cyclictest25-21ksoftirqd/122:48:191
20718993830,5cyclictest25-21ksoftirqd/100:29:031
20717993832,4cyclictest9-21ksoftirqd/000:25:420
20717993831,4cyclictest9-21ksoftirqd/023:31:250
20717993831,4cyclictest9-21ksoftirqd/023:05:300
20717993831,4cyclictest9-21ksoftirqd/022:34:490
20717993831,4cyclictest9-21ksoftirqd/020:52:350
20717993831,4cyclictest9-21ksoftirqd/020:27:510
20717993830,5cyclictest9-21ksoftirqd/022:28:020
20717993830,4cyclictest9-21ksoftirqd/022:05:110
20717993829,6cyclictest9-21ksoftirqd/020:10:010
20719993732,3cyclictest33-21ksoftirqd/222:52:272
20719993731,4cyclictest33-21ksoftirqd/221:31:172
20719993731,4cyclictest33-21ksoftirqd/220:28:582
20719993731,3cyclictest33-21ksoftirqd/219:13:192
20719993730,4cyclictest33-21ksoftirqd/221:03:292
20719993730,4cyclictest33-21ksoftirqd/220:30:382
20718993731,4cyclictest25-21ksoftirqd/122:36:181
20718993731,4cyclictest25-21ksoftirqd/120:02:031
20718993731,3cyclictest25-21ksoftirqd/120:37:541
20718993731,3cyclictest25-21ksoftirqd/119:33:331
20718993730,4cyclictest25-21ksoftirqd/123:48:281
20718993730,4cyclictest25-21ksoftirqd/123:38:251
20718993730,4cyclictest25-21ksoftirqd/123:20:431
20718993730,4cyclictest25-21ksoftirqd/122:32:101
20718993730,4cyclictest25-21ksoftirqd/120:21:291
20718993730,4cyclictest25-21ksoftirqd/100:32:051
20718993730,4cyclictest25-21ksoftirqd/100:00:001
20718993729,5cyclictest25-21ksoftirqd/122:51:081
20717993731,4cyclictest9-21ksoftirqd/022:00:220
20717993731,4cyclictest9-21ksoftirqd/021:50:330
20717993731,4cyclictest9-21ksoftirqd/020:40:350
20717993730,4cyclictest9-21ksoftirqd/000:11:040
20717993729,5cyclictest9-21ksoftirqd/021:25:220
20717993729,5cyclictest9-21ksoftirqd/021:25:210
20717993729,5cyclictest9-21ksoftirqd/020:03:140
20719993630,3cyclictest33-21ksoftirqd/223:19:172
20719993630,3cyclictest33-21ksoftirqd/219:28:252
20719993629,4cyclictest33-21ksoftirqd/222:46:472
20719993629,4cyclictest33-21ksoftirqd/222:01:592
20719993629,4cyclictest33-21ksoftirqd/221:11:492
20719993629,4cyclictest33-21ksoftirqd/220:40:452
20719993629,4cyclictest33-21ksoftirqd/220:37:082
20719993629,4cyclictest33-21ksoftirqd/200:03:532
2071999360,3cyclictest121rcu_preempt20:53:152
20718993631,3cyclictest25-21ksoftirqd/121:40:421
20718993630,4cyclictest25-21ksoftirqd/121:09:031
20718993630,3cyclictest25-21ksoftirqd/123:44:331
20718993630,3cyclictest25-21ksoftirqd/123:08:331
20718993630,3cyclictest25-21ksoftirqd/120:51:511
20718993629,4cyclictest25-21ksoftirqd/122:20:101
20718993629,4cyclictest25-21ksoftirqd/122:15:591
20718993629,4cyclictest25-21ksoftirqd/121:18:021
20718993629,4cyclictest25-21ksoftirqd/120:55:461
20718993629,4cyclictest25-21ksoftirqd/100:20:091
20718993629,4cyclictest25-21ksoftirqd/100:00:101
20717993630,4cyclictest9-21ksoftirqd/023:15:150
20717993630,3cyclictest9-21ksoftirqd/023:57:090
20717993630,3cyclictest9-21ksoftirqd/021:06:330
20717993629,4cyclictest9-21ksoftirqd/022:45:290
20717993628,5cyclictest9-21ksoftirqd/020:14:500
20719993529,4cyclictest33-21ksoftirqd/223:59:122
20719993529,4cyclictest33-21ksoftirqd/223:07:242
20719993529,4cyclictest33-21ksoftirqd/220:23:012
20719993528,4cyclictest33-21ksoftirqd/223:01:402
20719993528,4cyclictest33-21ksoftirqd/221:09:212
20719993528,4cyclictest33-21ksoftirqd/220:10:092
20719993528,4cyclictest33-21ksoftirqd/200:12:352
20719993522,10cyclictest33-21ksoftirqd/219:50:002
20718993529,4cyclictest25-21ksoftirqd/122:02:461
20718993529,4cyclictest25-21ksoftirqd/119:55:281
20718993529,4cyclictest25-21ksoftirqd/119:55:271
20718993529,3cyclictest25-21ksoftirqd/121:15:001
20718993528,4cyclictest25-21ksoftirqd/122:09:211
20718993528,4cyclictest25-21ksoftirqd/120:06:061
20718993528,4cyclictest25-21ksoftirqd/119:51:061
20718993528,4cyclictest25-21ksoftirqd/119:28:591
20718993528,4cyclictest25-21ksoftirqd/119:19:461
20718993528,4cyclictest25-21ksoftirqd/100:35:341
20717993528,4cyclictest9-21ksoftirqd/020:17:580
20717993528,4cyclictest9-21ksoftirqd/019:53:250
20717993527,4cyclictest9-21ksoftirqd/019:34:320
20719993428,4cyclictest33-21ksoftirqd/223:31:182
20719993427,4cyclictest33-21ksoftirqd/223:47:472
20719993427,4cyclictest33-21ksoftirqd/222:32:222
20719993427,4cyclictest33-21ksoftirqd/220:49:082
20718993428,4cyclictest25-21ksoftirqd/121:30:181
20718993428,4cyclictest25-21ksoftirqd/120:46:131
20718993428,3cyclictest25-21ksoftirqd/120:14:541
20718993427,4cyclictest25-21ksoftirqd/122:40:091
20718993426,5cyclictest25-21ksoftirqd/120:26:551
20717993428,4cyclictest9-21ksoftirqd/000:17:190
20717993428,4cyclictest9-21ksoftirqd/000:17:180
20717993428,3cyclictest9-21ksoftirqd/023:47:150
20717993427,4cyclictest9-21ksoftirqd/019:26:480
20717993426,4cyclictest9-21ksoftirqd/019:57:320
20717993426,4cyclictest9-21ksoftirqd/019:57:310
57698330,2rtkit-daemon0-21swapper/022:51:010
20719993327,4cyclictest33-21ksoftirqd/200:27:122
20719993326,4cyclictest33-21ksoftirqd/221:17:032
20719993325,5cyclictest33-21ksoftirqd/219:16:392
20719993325,5cyclictest33-21ksoftirqd/200:30:412
20719993325,5cyclictest33-21ksoftirqd/200:19:412
20719993325,5cyclictest33-21ksoftirqd/200:19:412
20718993328,3cyclictest25-21ksoftirqd/120:44:341
20718993326,4cyclictest25-21ksoftirqd/120:19:251
20717993326,4cyclictest9-21ksoftirqd/023:02:430
20717993326,4cyclictest9-21ksoftirqd/021:11:020
20718993226,4cyclictest25-21ksoftirqd/122:11:451
20717993227,3cyclictest9-21ksoftirqd/023:40:270
20717993226,4cyclictest9-21ksoftirqd/000:30:220
20717993225,4cyclictest9-21ksoftirqd/022:21:520
20717993225,4cyclictest9-21ksoftirqd/020:37:290
20719993125,4cyclictest33-21ksoftirqd/221:37:282
20719993124,4cyclictest33-21ksoftirqd/200:07:252
20718993125,3cyclictest25-21ksoftirqd/122:57:531
20718993124,4cyclictest25-21ksoftirqd/121:35:121
20717993125,3cyclictest9-21ksoftirqd/022:15:290
20717993124,4cyclictest9-21ksoftirqd/020:46:300
20719993024,3cyclictest33-21ksoftirqd/200:23:582
20718993023,4cyclictest25-21ksoftirqd/121:48:331
20717993025,3cyclictest9-21ksoftirqd/020:30:150
20717993024,4cyclictest9-21ksoftirqd/021:55:120
20717993023,4cyclictest9-21ksoftirqd/021:31:090
20717993023,4cyclictest9-21ksoftirqd/019:44:550
20718992923,4cyclictest25-21ksoftirqd/121:23:081
20717992922,4cyclictest9-21ksoftirqd/023:52:210
20717992922,4cyclictest9-21ksoftirqd/019:12:310
20719992821,4cyclictest33-21ksoftirqd/223:14:132
20718992822,4cyclictest25-21ksoftirqd/121:58:491
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional