You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-03-31 - 20:28
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the highest latencies:
System rackdslot2.osadl.org (updated Mon Mar 31, 2025 12:45:51)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
115132208174,22sleep20-21swapper/207:05:532
117002206173,22sleep30-21swapper/307:08:193
115522206171,24sleep10-21swapper/107:06:251
116972204171,22sleep00-21swapper/007:08:160
1212499670,24cyclictest14468-21date07:15:002
1212499661,23cyclictest18733-21sshd07:21:352
1212499615,17cyclictest0-21swapper/211:40:222
12123995929,4cyclictest25-21ksoftirqd/109:50:201
12123995922,7cyclictest25-21ksoftirqd/108:55:011
1212399576,8cyclictest25-21ksoftirqd/111:10:011
12123995726,4cyclictest25-21ksoftirqd/109:35:141
12123995621,4cyclictest25-21ksoftirqd/110:55:171
12123995618,8cyclictest25-21ksoftirqd/109:20:261
12123995617,7cyclictest25-21ksoftirqd/110:10:201
12123995616,8cyclictest25-21ksoftirqd/111:40:131
12123995616,8cyclictest25-21ksoftirqd/109:30:291
12123995522,4cyclictest25-21ksoftirqd/112:10:231
12123995522,3cyclictest25-21ksoftirqd/111:00:251
12123995519,7cyclictest25-21ksoftirqd/112:30:181
12123995518,9cyclictest25-21ksoftirqd/108:05:201
12123995517,4cyclictest25-21ksoftirqd/109:15:271
12123995426,10cyclictest25-21ksoftirqd/111:30:501
12123995422,4cyclictest25-21ksoftirqd/110:00:241
12123995418,8cyclictest25-21ksoftirqd/107:40:251
12123995418,7cyclictest25-21ksoftirqd/108:55:231
12123995417,8cyclictest25-21ksoftirqd/111:55:251
12123995417,8cyclictest25-21ksoftirqd/109:55:201
12123995417,8cyclictest25-21ksoftirqd/108:40:201
12123995417,6cyclictest25-21ksoftirqd/108:35:171
12123995416,9cyclictest25-21ksoftirqd/111:15:131
12123995415,7cyclictest25-21ksoftirqd/111:10:101
137291530,1ptp4l401ktimersoftd/308:15:003
1212399536,3cyclictest25-21ksoftirqd/108:00:011
12123995321,3cyclictest25-21ksoftirqd/111:35:231
12123995319,8cyclictest25-21ksoftirqd/110:40:231
12123995319,4cyclictest25-21ksoftirqd/107:10:251
12123995318,7cyclictest25-21ksoftirqd/107:30:191
12123995317,7cyclictest25-21ksoftirqd/108:30:191
12123995317,10cyclictest25-21ksoftirqd/111:50:311
12123995316,7cyclictest25-21ksoftirqd/111:20:251
12123995316,7cyclictest25-21ksoftirqd/111:20:251
12123995316,6cyclictest25-21ksoftirqd/109:40:221
12123995314,6cyclictest25-21ksoftirqd/112:00:181
1212399526,2cyclictest6506-21wc12:10:011
12123995221,3cyclictest25-21ksoftirqd/107:20:241
12123995218,8cyclictest25-21ksoftirqd/110:30:271
12123995217,8cyclictest25-21ksoftirqd/110:20:201
12123995217,8cyclictest25-21ksoftirqd/107:50:181
12123995217,7cyclictest25-21ksoftirqd/112:15:171
12123995217,7cyclictest25-21ksoftirqd/110:15:211
12123995216,9cyclictest25-21ksoftirqd/109:30:001
12123995216,8cyclictest25-21ksoftirqd/112:20:231
12123995216,8cyclictest25-21ksoftirqd/109:05:281
12123995215,6cyclictest25-21ksoftirqd/108:45:181
1212499510,25cyclictest1461-21wc09:10:202
12123995121,9cyclictest25-21ksoftirqd/110:50:241
12123995119,8cyclictest25-21ksoftirqd/109:10:261
12123995118,4cyclictest25-21ksoftirqd/108:25:221
12123995117,8cyclictest25-21ksoftirqd/108:00:161
12123995117,8cyclictest25-21ksoftirqd/107:35:171
12123995117,8cyclictest25-21ksoftirqd/107:15:171
12123995117,7cyclictest25-21ksoftirqd/112:35:151
12123995116,7cyclictest25-21ksoftirqd/108:15:191
137291500,0ptp4l401ktimersoftd/311:58:283
12123995039,3cyclictest25-21ksoftirqd/111:30:011
12123995022,8cyclictest25-21ksoftirqd/107:30:011
12123995022,7cyclictest25-21ksoftirqd/110:10:011
12123995017,8cyclictest25-21ksoftirqd/110:35:211
1212399501,10cyclictest25-21ksoftirqd/108:10:221
12123994919,3cyclictest25-21ksoftirqd/110:45:181
12123994819,8cyclictest25-21ksoftirqd/108:20:161
1212399476,3cyclictest121rcu_preempt09:50:011
12123994713,8cyclictest25-21ksoftirqd/109:00:241
1212399467,2cyclictest25-21ksoftirqd/112:29:591
1212299469,4cyclictest9-21ksoftirqd/009:40:000
12123994510,4cyclictest25-21ksoftirqd/111:47:331
12122994414,4cyclictest9-21ksoftirqd/007:30:150
137291430,0ptp4l401ktimersoftd/309:40:153
132691430,6getstats1212599cyclictest10:29:433
1212399434,5cyclictest25-21ksoftirqd/107:50:001
12122994328,8cyclictest9-21ksoftirqd/008:00:010
12124994235,4cyclictest27339-21latency_hist07:50:002
1212399427,9cyclictest25-21ksoftirqd/110:28:181
12122994237,3cyclictest9-21ksoftirqd/011:00:000
12122994211,4cyclictest9-21ksoftirqd/010:00:170
12122994135,3cyclictest9-21ksoftirqd/010:45:000
12122994113,4cyclictest9-21ksoftirqd/007:15:210
1212499405,32cyclictest8465-21cat09:25:002
12124994033,4cyclictest33-21ksoftirqd/212:05:012
12122994034,3cyclictest9-21ksoftirqd/008:55:200
12122994015,3cyclictest9-21ksoftirqd/009:30:250
137291390,0ptp4l401ktimersoftd/308:15:173
12124993931,6cyclictest33-21ksoftirqd/212:10:002
1212499391,22cyclictest4686-21latency_hist10:40:002
1212499390,23cyclictest24015-21date10:05:012
1212299398,4cyclictest9-21ksoftirqd/011:50:320
12122993925,3cyclictest9-21ksoftirqd/008:45:240
12122993910,3cyclictest9-21ksoftirqd/008:30:010
1212299390,2cyclictest121rcu_preempt11:15:280
137291380,0ptp4l401ktimersoftd/310:00:203
12125993833,3cyclictest18896-21cron08:40:003
12125993832,4cyclictest41-21ksoftirqd/309:47:413
1212499382,22cyclictest20564-21cpuspeed_turbos11:20:152
1212499382,22cyclictest20564-21cpuspeed_turbos11:20:142
12122993834,2cyclictest9-21ksoftirqd/009:10:000
12122993834,2cyclictest9-21ksoftirqd/008:20:000
12122993825,3cyclictest9-21ksoftirqd/012:15:260
1212499370,3cyclictest29718-21ls07:55:002
12122993733,2cyclictest9-21ksoftirqd/011:10:010
12122993733,2cyclictest9-21ksoftirqd/008:50:160
12122993732,3cyclictest9-21ksoftirqd/012:05:010
12122993732,3cyclictest9-21ksoftirqd/011:25:010
12122993732,3cyclictest9-21ksoftirqd/011:25:000
12122993732,3cyclictest9-21ksoftirqd/009:45:010
12122993731,4cyclictest9-21ksoftirqd/011:34:540
12122993724,3cyclictest9-21ksoftirqd/011:55:270
1212299371,9cyclictest0-21swapper/009:15:210
137291360,0ptp4l401ktimersoftd/308:20:243
137291360,0ptp4l401ktimersoftd/307:55:253
12125993630,4cyclictest41-21ksoftirqd/310:22:023
1212299366,3cyclictest9-21ksoftirqd/011:00:170
12122993632,3cyclictest9-21ksoftirqd/010:35:010
12122993632,2cyclictest9-21ksoftirqd/008:35:000
12122993631,3cyclictest9-21ksoftirqd/008:35:150
12122993631,3cyclictest9-21ksoftirqd/008:20:140
12122993631,3cyclictest9-21ksoftirqd/007:55:010
1212299362,3cyclictest9-21ksoftirqd/011:35:160
12122993622,3cyclictest9-21ksoftirqd/012:10:170
12125993529,4cyclictest41-21ksoftirqd/312:28:153
12125993529,4cyclictest41-21ksoftirqd/312:19:333
12125993529,4cyclictest41-21ksoftirqd/311:39:343
12125993528,4cyclictest41-21ksoftirqd/312:21:093
12124993529,4cyclictest33-21ksoftirqd/211:39:012
12124993529,4cyclictest33-21ksoftirqd/209:44:182
1212299356,3cyclictest9-21ksoftirqd/007:40:200
1212299355,3cyclictest9-21ksoftirqd/010:35:280
1212299355,3cyclictest9-21ksoftirqd/008:00:290
1212299355,2cyclictest9-21ksoftirqd/010:20:000
12122993532,2cyclictest9-21ksoftirqd/012:39:590
12122993530,3cyclictest9-21ksoftirqd/007:20:150
12122993530,2cyclictest9-21ksoftirqd/009:30:000
12122993529,4cyclictest9-21ksoftirqd/012:31:540
12122993529,4cyclictest9-21ksoftirqd/010:23:210
1212299351,6cyclictest121rcu_preempt11:15:000
137291340,0ptp4l401ktimersoftd/308:45:133
132691340,2getstats0-21swapper/307:54:423
12125993428,4cyclictest41-21ksoftirqd/311:28:153
12125993428,4cyclictest41-21ksoftirqd/311:20:083
12125993428,4cyclictest41-21ksoftirqd/311:20:083
12125993428,4cyclictest41-21ksoftirqd/310:34:073
12125993428,4cyclictest41-21ksoftirqd/309:09:583
12125993428,4cyclictest41-21ksoftirqd/308:41:023
12125993428,4cyclictest41-21ksoftirqd/308:31:393
12124993429,3cyclictest9427-21cron08:20:002
12124993429,3cyclictest33-21ksoftirqd/208:02:102
12124993428,4cyclictest33-21ksoftirqd/211:56:422
12124993428,4cyclictest33-21ksoftirqd/210:13:432
12124993428,4cyclictest33-21ksoftirqd/209:17:552
12124993428,4cyclictest33-21ksoftirqd/208:09:562
1212499340,1cyclictest0-21swapper/207:40:502
1212299344,3cyclictest9-21ksoftirqd/009:50:140
1212299343,3cyclictest9-21ksoftirqd/012:20:270
12122993430,3cyclictest9-21ksoftirqd/008:45:000
12122993430,2cyclictest9-21ksoftirqd/009:55:280
12122993430,2cyclictest9-21ksoftirqd/008:10:000
12122993429,3cyclictest9-21ksoftirqd/012:29:340
12122993429,3cyclictest9-21ksoftirqd/012:10:000
12122993428,4cyclictest9-21ksoftirqd/010:05:280
12122993428,3cyclictest9-21ksoftirqd/010:50:200
12122993421,3cyclictest9-21ksoftirqd/009:10:300
12122993418,4cyclictest9-21ksoftirqd/008:10:220
1212299341,2cyclictest9-21ksoftirqd/007:10:250
1212299340,5cyclictest6148-21/usr/sbin/munin09:20:190
137291330,0ptp4l401ktimersoftd/311:06:173
12125993327,4cyclictest41-21ksoftirqd/310:39:163
12125993327,4cyclictest41-21ksoftirqd/309:53:343
12125993327,4cyclictest41-21ksoftirqd/309:21:103
12125993327,4cyclictest41-21ksoftirqd/307:21:473
12124993327,4cyclictest33-21ksoftirqd/212:16:282
12124993327,4cyclictest33-21ksoftirqd/210:23:392
12124993327,4cyclictest33-21ksoftirqd/210:19:382
12124993327,4cyclictest33-21ksoftirqd/209:32:162
12124993327,4cyclictest33-21ksoftirqd/208:42:132
12124993327,4cyclictest33-21ksoftirqd/208:33:592
12124993327,4cyclictest33-21ksoftirqd/207:31:252
12124993326,5cyclictest33-21ksoftirqd/208:50:002
1212499330,4cyclictest1314-21snmpd10:50:292
1212299338,3cyclictest9-21ksoftirqd/011:40:290
1212299333,3cyclictest9-21ksoftirqd/010:10:090
12122993329,2cyclictest9-21ksoftirqd/011:49:590
12122993329,2cyclictest9-21ksoftirqd/010:30:010
12122993328,3cyclictest9-21ksoftirqd/009:00:200
12125993227,3cyclictest41-21ksoftirqd/309:37:353
12125993226,4cyclictest41-21ksoftirqd/310:17:293
12125993226,4cyclictest41-21ksoftirqd/310:12:453
12125993226,4cyclictest41-21ksoftirqd/308:51:293
12125993226,4cyclictest41-21ksoftirqd/307:39:523
1212499329,20cyclictest30289-21df_abs07:55:172
12124993227,3cyclictest33-21ksoftirqd/209:49:482
12124993227,3cyclictest33-21ksoftirqd/208:58:582
12124993226,4cyclictest33-21ksoftirqd/212:39:422
12124993226,4cyclictest33-21ksoftirqd/212:26:352
12124993226,4cyclictest33-21ksoftirqd/211:29:582
12124993226,4cyclictest33-21ksoftirqd/210:07:292
12124993226,4cyclictest33-21ksoftirqd/209:37:012
12124993226,4cyclictest33-21ksoftirqd/208:26:012
12124993225,5cyclictest33-21ksoftirqd/211:45:062
12122993227,3cyclictest9-21ksoftirqd/011:30:000
12122993226,4cyclictest9-21ksoftirqd/010:49:240
1373913125,3phc2sys41-21ksoftirqd/309:10:343
137291310,9ptp4l401ktimersoftd/307:15:193
137291310,0ptp4l401ktimersoftd/312:37:193
137291310,0ptp4l401ktimersoftd/311:47:313
12125993125,4cyclictest41-21ksoftirqd/312:31:573
12125993125,4cyclictest41-21ksoftirqd/311:52:063
12125993125,4cyclictest41-21ksoftirqd/311:04:043
12124993126,3cyclictest33-21ksoftirqd/211:52:572
12124993126,3cyclictest33-21ksoftirqd/208:10:122
12124993125,4cyclictest33-21ksoftirqd/210:47:142
12124993125,4cyclictest33-21ksoftirqd/210:34:052
12124993124,4cyclictest33-21ksoftirqd/208:52:482
1212499311,27cyclictest10230-21hwlatdetect08:20:172
12124993111,18cyclictest19656-21awk07:30:012
12122993126,3cyclictest9-21ksoftirqd/007:35:160
12122993125,4cyclictest9-21ksoftirqd/007:25:570
1212299311,3cyclictest9-21ksoftirqd/007:50:000
137291300,8ptp4l401ktimersoftd/311:41:113
137291300,0ptp4l401ktimersoftd/311:32:063
137291300,0ptp4l401ktimersoftd/309:58:543
137291300,0ptp4l401ktimersoftd/308:56:333
12125993026,3cyclictest41-21ksoftirqd/310:42:343
12125993025,3cyclictest41-21ksoftirqd/312:12:083
12125993025,3cyclictest41-21ksoftirqd/308:02:413
12125993025,3cyclictest41-21ksoftirqd/307:26:243
12125993024,4cyclictest41-21ksoftirqd/312:06:463
12125993024,4cyclictest41-21ksoftirqd/311:14:303
12125993024,4cyclictest41-21ksoftirqd/309:00:443
12125993024,4cyclictest41-21ksoftirqd/307:10:483
1212499308,19cyclictest11949-21fschecks_count12:20:162
12124993025,3cyclictest33-21ksoftirqd/211:33:332
12124993025,3cyclictest33-21ksoftirqd/209:01:432
12124993025,3cyclictest33-21ksoftirqd/207:37:562
12124993011,17cyclictest17650-21sed08:35:212
12124993011,16cyclictest15435-21cat11:10:012
1212499300,3cyclictest87932chrt09:27:382
1212499300,1cyclictest0-21swapper/212:12:502
1212499300,1cyclictest0-21swapper/211:00:342
137291290,0ptp4l401ktimersoftd/310:51:403
12125992924,3cyclictest41-21ksoftirqd/307:32:253
12125992923,4cyclictest41-21ksoftirqd/311:00:013
12125992923,4cyclictest41-21ksoftirqd/310:45:093
12125992923,4cyclictest41-21ksoftirqd/307:42:173
12124992924,3cyclictest33-21ksoftirqd/209:53:172
1212499291,26cyclictest24320-21kworker/2:011:18:542
1212499291,17cyclictest24320-21kworker/2:010:40:142
12124992911,16cyclictest15714-21acpi11:10:072
1212499290,1cyclictest0-21swapper/209:05:182
12125992823,3cyclictest41-21ksoftirqd/311:16:593
12125992823,3cyclictest41-21ksoftirqd/309:30:143
12125992823,3cyclictest41-21ksoftirqd/308:08:133
12125992821,4cyclictest41-21ksoftirqd/309:25:463
1212499284,21cyclictest15601-21needreboot12:30:172
12124992822,4cyclictest33-21ksoftirqd/209:58:112
12125992721,4cyclictest41-21ksoftirqd/312:03:133
12124992722,3cyclictest33-21ksoftirqd/210:26:222
12124992721,4cyclictest33-21ksoftirqd/207:18:092
1212499270,1cyclictest10152-21apt-get10:55:142
12122992722,3cyclictest9-21ksoftirqd/009:48:110
12125992620,3cyclictest41-21ksoftirqd/308:28:553
137291250,0ptp4l401ktimersoftd/309:16:583
12125992520,3cyclictest41-21ksoftirqd/307:50:003
137291230,0ptp4l401ktimersoftd/310:09:373
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional