You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2024-11-23 - 17:31
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the 792 highest latencies:
System rackdslot3.osadl.org (updated Sat Nov 23, 2024 12:45:53)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
303392210170,29sleep20-21swapper/207:08:482
303352207172,24sleep30-21swapper/307:08:453
303622203171,22sleep00-21swapper/007:09:060
302282202169,22sleep10-21swapper/107:07:191
147491980,1ptp4l24848-21/usr/sbin/munin08:05:143
147491980,1ptp4l24848-21/usr/sbin/munin08:05:143
30723997030,8cyclictest33-21ksoftirqd/210:35:202
30723997030,8cyclictest33-21ksoftirqd/210:35:202
30722996710,20cyclictest3224-21cpuspeed07:20:141
30723996223,8cyclictest33-21ksoftirqd/209:15:002
30723996027,8cyclictest33-21ksoftirqd/210:50:012
30723996016,4cyclictest33-21ksoftirqd/207:10:172
30723995929,9cyclictest33-21ksoftirqd/210:00:122
30723995928,4cyclictest33-21ksoftirqd/211:40:262
30724995825,9cyclictest41-21ksoftirqd/309:10:193
30724995825,8cyclictest41-21ksoftirqd/311:20:143
30723995825,7cyclictest33-21ksoftirqd/208:45:222
30723995825,5cyclictest33-21ksoftirqd/212:35:152
30723995825,5cyclictest33-21ksoftirqd/212:35:152
30723995824,4cyclictest33-21ksoftirqd/208:10:132
30724995726,9cyclictest41-21ksoftirqd/309:40:293
30724995720,7cyclictest41-21ksoftirqd/309:50:013
3072399577,8cyclictest20355-21wc11:20:012
30724995630,8cyclictest41-21ksoftirqd/307:50:233
30724995625,8cyclictest41-21ksoftirqd/307:45:163
30723995629,4cyclictest33-21ksoftirqd/209:25:122
30723995629,3cyclictest33-21ksoftirqd/211:30:202
30723995626,8cyclictest33-21ksoftirqd/211:45:202
30723995622,4cyclictest33-21ksoftirqd/211:35:202
30723995622,4cyclictest33-21ksoftirqd/211:35:192
30724995522,4cyclictest41-21ksoftirqd/309:25:213
3072399556,9cyclictest33-21ksoftirqd/212:10:212
30723995526,9cyclictest33-21ksoftirqd/207:50:012
30723995525,9cyclictest33-21ksoftirqd/207:20:262
30723995525,4cyclictest33-21ksoftirqd/207:15:202
30723995524,4cyclictest33-21ksoftirqd/212:10:012
30723995524,4cyclictest33-21ksoftirqd/212:10:012
30724995424,8cyclictest41-21ksoftirqd/308:45:123
30724995422,9cyclictest41-21ksoftirqd/307:25:173
30723995428,3cyclictest33-21ksoftirqd/212:20:202
30723995428,3cyclictest33-21ksoftirqd/210:40:192
30723995425,9cyclictest33-21ksoftirqd/208:55:012
30723995425,4cyclictest33-21ksoftirqd/208:55:122
30723995424,4cyclictest33-21ksoftirqd/211:20:142
30723995422,4cyclictest33-21ksoftirqd/209:30:262
3072499535,9cyclictest41-21ksoftirqd/308:40:243
3072399535,9cyclictest10992-21idleruntime-cro08:45:002
3072399533,9cyclictest33-21ksoftirqd/212:25:242
30723995328,4cyclictest33-21ksoftirqd/210:05:242
30723995327,4cyclictest33-21ksoftirqd/209:00:482
30723995324,4cyclictest33-21ksoftirqd/210:20:172
30723995321,4cyclictest33-21ksoftirqd/210:30:562
3072399523,8cyclictest33-21ksoftirqd/209:40:002
30723995226,4cyclictest33-21ksoftirqd/211:50:202
30723995225,3cyclictest33-21ksoftirqd/210:10:282
30723995224,4cyclictest33-21ksoftirqd/209:20:182
30723995223,4cyclictest33-21ksoftirqd/209:45:152
30723995223,3cyclictest33-21ksoftirqd/210:50:222
3072499515,9cyclictest41-21ksoftirqd/309:05:123
3072499515,8cyclictest41-21ksoftirqd/309:20:253
3072499513,9cyclictest41-21ksoftirqd/308:55:263
30724995131,9cyclictest41-21ksoftirqd/307:35:153
30724995131,9cyclictest41-21ksoftirqd/307:35:153
30724995122,9cyclictest41-21ksoftirqd/307:10:143
30724995121,8cyclictest41-21ksoftirqd/311:30:003
30724995120,9cyclictest41-21ksoftirqd/310:25:203
30724995119,8cyclictest41-21ksoftirqd/311:55:193
30723995125,5cyclictest33-21ksoftirqd/209:55:012
30723995118,9cyclictest33-21ksoftirqd/211:05:012
30723995118,9cyclictest33-21ksoftirqd/211:05:012
30723995118,4cyclictest33-21ksoftirqd/209:15:132
3072499508,6cyclictest41-21ksoftirqd/310:10:223
3072499505,8cyclictest41-21ksoftirqd/312:15:163
3072499505,8cyclictest41-21ksoftirqd/308:35:123
3072499505,8cyclictest41-21ksoftirqd/308:35:123
30724995021,8cyclictest41-21ksoftirqd/308:20:253
30724995020,9cyclictest41-21ksoftirqd/310:20:203
30724995020,9cyclictest41-21ksoftirqd/309:55:143
30724995013,7cyclictest41-21ksoftirqd/307:22:353
3072399504,7cyclictest33-21ksoftirqd/208:02:562
30723995022,8cyclictest33-21ksoftirqd/211:00:162
30723995020,9cyclictest33-21ksoftirqd/207:40:232
30723995020,8cyclictest33-21ksoftirqd/208:25:252
3072399501,7cyclictest33-21ksoftirqd/208:25:002
30724994924,8cyclictest41-21ksoftirqd/308:15:183
30724994922,7cyclictest41-21ksoftirqd/308:30:273
30724994921,9cyclictest41-21ksoftirqd/310:05:143
30724994918,8cyclictest41-21ksoftirqd/310:40:273
3072399494,8cyclictest33-21ksoftirqd/208:35:142
3072399494,8cyclictest33-21ksoftirqd/208:35:142
30723994927,3cyclictest33-21ksoftirqd/208:30:252
30723994920,4cyclictest33-21ksoftirqd/210:55:192
147491490,0ptp4l391rcuc/311:19:393
3072499485,9cyclictest41-21ksoftirqd/307:55:183
3072499485,10cyclictest41-21ksoftirqd/312:10:123
30724994820,3cyclictest41-21ksoftirqd/310:50:233
3072399489,3cyclictest121rcu_preempt12:15:162
3072399483,7cyclictest33-21ksoftirqd/210:28:152
3072399483,6cyclictest33-21ksoftirqd/209:55:212
3072399483,10cyclictest33-21ksoftirqd/207:35:232
3072399483,10cyclictest33-21ksoftirqd/207:35:232
30723994830,8cyclictest33-21ksoftirqd/209:10:002
3072399482,10cyclictest33-21ksoftirqd/207:25:102
69882470,2sleep00-21swapper/008:35:150
69882470,2sleep00-21swapper/008:35:150
3072499472,6cyclictest41-21ksoftirqd/311:40:143
30724994719,8cyclictest41-21ksoftirqd/307:15:143
30724994715,4cyclictest41-21ksoftirqd/308:50:173
3072499470,8cyclictest401ktimersoftd/311:50:223
3072399474,3cyclictest33-21ksoftirqd/212:30:252
3072399472,9cyclictest33-21ksoftirqd/212:00:272
3072399470,9cyclictest121rcu_preempt08:05:152
3072399470,9cyclictest121rcu_preempt08:05:152
3072499465,6cyclictest41-21ksoftirqd/310:30:283
30724994619,4cyclictest41-21ksoftirqd/309:30:203
30724994610,8cyclictest41-21ksoftirqd/308:29:063
3072499460,8cyclictest401ktimersoftd/311:10:243
3072499460,43cyclictest401ktimersoftd/312:30:193
30723994618,7cyclictest33-21ksoftirqd/211:55:162
3072399461,6cyclictest33-21ksoftirqd/209:40:212
3072399460,6cyclictest33-21ksoftirqd/207:55:172
3072499456,4cyclictest41-21ksoftirqd/312:00:143
3072499455,6cyclictest41-21ksoftirqd/311:05:163
3072499455,6cyclictest41-21ksoftirqd/311:05:163
3072499452,9cyclictest41-21ksoftirqd/310:15:163
30724994516,4cyclictest41-21ksoftirqd/310:35:273
30724994516,4cyclictest41-21ksoftirqd/310:35:273
3072399456,3cyclictest33-21ksoftirqd/207:50:122
3072399453,9cyclictest33-21ksoftirqd/211:13:202
30723994514,9cyclictest33-21ksoftirqd/207:30:272
3072299451,2cyclictest0-21swapper/112:02:331
3072499443,7cyclictest41-21ksoftirqd/312:35:303
3072499443,7cyclictest41-21ksoftirqd/312:35:303
3072499443,6cyclictest41-21ksoftirqd/310:55:163
30724994431,4cyclictest41-21ksoftirqd/312:20:243
30724994431,4cyclictest41-21ksoftirqd/307:30:273
30724994427,4cyclictest41-21ksoftirqd/308:15:003
30724994426,8cyclictest41-21ksoftirqd/310:00:123
3072499440,6cyclictest401ktimersoftd/307:40:233
3072499433,5cyclictest41-21ksoftirqd/309:20:013
30724994329,3cyclictest41-21ksoftirqd/311:00:233
3072499432,7cyclictest41-21ksoftirqd/312:25:203
3072499432,10cyclictest41-21ksoftirqd/308:00:163
3072499430,7cyclictest401ktimersoftd/310:45:183
3072499430,6cyclictest401ktimersoftd/309:45:143
30723994328,4cyclictest33-21ksoftirqd/208:15:192
30724994226,9cyclictest41-21ksoftirqd/311:30:143
3072399422,4cyclictest33-21ksoftirqd/211:29:592
3072499413,5cyclictest41-21ksoftirqd/312:05:173
3072499413,5cyclictest41-21ksoftirqd/312:05:173
3072499410,38cyclictest389-21turbostat11:50:003
3072399412,8cyclictest33-21ksoftirqd/210:15:172
3072499400,7cyclictest41-21ksoftirqd/311:36:053
3072499400,7cyclictest41-21ksoftirqd/311:36:053
30722994010,15cyclictest28863-21hwlatdetect11:40:151
3072499390,5cyclictest401ktimersoftd/309:00:163
30722993933,3cyclictest26260-21sh10:25:011
3072499384,5cyclictest41-21ksoftirqd/309:35:153
39598370,2rtkit-daemon0-21swapper/008:06:050
39598370,2rtkit-daemon0-21swapper/008:06:050
3072299373,3cyclictest0-21swapper/111:34:261
30722993731,4cyclictest25-21ksoftirqd/110:47:491
30722993731,4cyclictest25-21ksoftirqd/108:54:451
30722993730,4cyclictest25-21ksoftirqd/110:16:051
39598360,2rtkit-daemon0-21swapper/112:19:511
30722993630,4cyclictest25-21ksoftirqd/112:31:571
30722993630,4cyclictest25-21ksoftirqd/107:19:141
30722993630,4cyclictest25-21ksoftirqd/107:13:121
30722993629,4cyclictest25-21ksoftirqd/112:22:131
30722993629,4cyclictest25-21ksoftirqd/108:16:501
30722993530,3cyclictest25-21ksoftirqd/111:11:021
30722993529,4cyclictest25-21ksoftirqd/112:38:511
30722993529,4cyclictest25-21ksoftirqd/112:38:511
30722993529,4cyclictest25-21ksoftirqd/111:52:041
30722993529,4cyclictest25-21ksoftirqd/110:43:131
30722993529,4cyclictest25-21ksoftirqd/109:12:511
30722993529,3cyclictest25-21ksoftirqd/108:55:131
30721993530,3cyclictest9-21ksoftirqd/009:15:000
30721993529,3cyclictest9-21ksoftirqd/011:50:010
30722993428,4cyclictest25-21ksoftirqd/110:57:091
30722993428,4cyclictest25-21ksoftirqd/110:38:401
30722993428,4cyclictest25-21ksoftirqd/110:38:401
30722993428,4cyclictest25-21ksoftirqd/109:20:531
30722993428,4cyclictest25-21ksoftirqd/109:08:331
30722993428,4cyclictest25-21ksoftirqd/108:28:421
30722993428,4cyclictest25-21ksoftirqd/107:42:481
30722993428,3cyclictest25-21ksoftirqd/109:52:411
30722993427,4cyclictest25-21ksoftirqd/109:15:111
30721993430,3cyclictest9-21ksoftirqd/009:40:000
30721993429,3cyclictest9-21ksoftirqd/010:32:570
30721993428,4cyclictest9-21ksoftirqd/008:18:180
30721993428,4cyclictest9-21ksoftirqd/008:05:000
30721993427,4cyclictest9-21ksoftirqd/010:19:440
30722993327,4cyclictest25-21ksoftirqd/112:09:251
30722993327,4cyclictest25-21ksoftirqd/112:09:251
30722993327,4cyclictest25-21ksoftirqd/111:25:001
30722993327,4cyclictest25-21ksoftirqd/110:26:361
30722993327,4cyclictest25-21ksoftirqd/110:14:411
30722993327,4cyclictest25-21ksoftirqd/109:43:401
30722993327,4cyclictest25-21ksoftirqd/109:04:281
30722993327,4cyclictest25-21ksoftirqd/108:36:321
30722993327,4cyclictest25-21ksoftirqd/108:36:321
30722993327,4cyclictest25-21ksoftirqd/108:13:371
30722993326,5cyclictest25-21ksoftirqd/107:26:281
30722993326,4cyclictest25-21ksoftirqd/111:37:011
30722993326,4cyclictest25-21ksoftirqd/111:37:011
3072299330,3cyclictest121rcu_preempt09:49:241
30721993328,3cyclictest9-21ksoftirqd/010:40:110
30721993328,3cyclictest9-21ksoftirqd/009:20:560
30721993327,4cyclictest9-21ksoftirqd/011:50:480
30721993327,4cyclictest9-21ksoftirqd/010:06:210
30721993327,4cyclictest9-21ksoftirqd/007:48:290
30721993327,4cyclictest9-21ksoftirqd/007:13:480
30722993226,4cyclictest25-21ksoftirqd/110:01:411
30722993226,4cyclictest25-21ksoftirqd/109:30:041
30722993226,4cyclictest25-21ksoftirqd/107:54:321
30722993225,5cyclictest25-21ksoftirqd/108:07:321
30722993225,5cyclictest25-21ksoftirqd/108:07:321
30721993227,3cyclictest9-21ksoftirqd/012:04:120
30721993227,3cyclictest9-21ksoftirqd/009:16:510
30721993226,4cyclictest9-21ksoftirqd/012:24:290
30721993226,4cyclictest9-21ksoftirqd/009:34:000
30721993226,4cyclictest9-21ksoftirqd/008:13:080
30721993225,5cyclictest9-21ksoftirqd/010:04:010
30722993126,3cyclictest25-21ksoftirqd/107:58:081
30722993125,4cyclictest25-21ksoftirqd/111:57:461
30722993125,4cyclictest25-21ksoftirqd/111:46:301
30722993125,4cyclictest25-21ksoftirqd/111:25:211
30722993125,4cyclictest25-21ksoftirqd/109:35:291
30721993126,3cyclictest9-21ksoftirqd/011:28:410
30721993126,3cyclictest9-21ksoftirqd/007:55:230
30721993126,3cyclictest9-21ksoftirqd/007:27:330
30721993125,4cyclictest9-21ksoftirqd/012:27:500
30721993125,4cyclictest9-21ksoftirqd/012:08:050
30721993125,4cyclictest9-21ksoftirqd/012:08:050
30721993125,4cyclictest9-21ksoftirqd/010:37:420
30721993125,4cyclictest9-21ksoftirqd/010:37:420
30721993125,4cyclictest9-21ksoftirqd/009:01:260
30721993125,4cyclictest9-21ksoftirqd/008:55:530
30721993125,4cyclictest9-21ksoftirqd/007:35:340
30721993125,4cyclictest9-21ksoftirqd/007:35:340
30721993125,4cyclictest9-21ksoftirqd/007:34:580
30721993124,4cyclictest9-21ksoftirqd/011:38:360
30721993124,4cyclictest9-21ksoftirqd/011:38:350
30722993024,4cyclictest25-21ksoftirqd/111:16:221
30722993024,4cyclictest25-21ksoftirqd/108:20:391
30722993011,17cyclictest9136-21expr08:40:131
3072299300,3cyclictest31512-21needreboot09:25:211
3072299300,3cyclictest12763-21/usr/sbin/munin08:45:251
30721993025,3cyclictest9-21ksoftirqd/012:19:590
30721993025,3cyclictest9-21ksoftirqd/011:58:080
30721993025,3cyclictest9-21ksoftirqd/008:33:500
30721993025,3cyclictest9-21ksoftirqd/008:27:360
30721993025,3cyclictest9-21ksoftirqd/007:17:010
30722992924,3cyclictest25-21ksoftirqd/111:00:101
30722992924,3cyclictest25-21ksoftirqd/110:32:371
30722992922,4cyclictest25-21ksoftirqd/108:31:191
30722992914,13cyclictest6568-21df_inode10:50:171
3072299290,3cyclictest9609-21/usr/sbin/munin07:30:291
30721992924,3cyclictest9-21ksoftirqd/007:23:110
30721992923,4cyclictest9-21ksoftirqd/012:12:180
30721992923,4cyclictest9-21ksoftirqd/009:43:180
3072299287,18cyclictest15120-21cpuspeed_turbos07:45:151
30722992822,4cyclictest25-21ksoftirqd/112:11:221
30722992811,15cyclictest13643-21tr11:05:121
30722992811,15cyclictest13643-21tr11:05:121
3072299280,4cyclictest18743-21users10:05:291
30721992823,3cyclictest9-21ksoftirqd/011:23:350
30721992823,3cyclictest9-21ksoftirqd/009:49:550
30721992823,3cyclictest9-21ksoftirqd/007:53:510
3072299275,19cyclictest24368-21latency_hist08:05:001
3072299272,3cyclictest0-21swapper/107:35:101
3072299272,3cyclictest0-21swapper/107:35:101
30721992722,3cyclictest9-21ksoftirqd/011:30:330
30721992722,3cyclictest9-21ksoftirqd/011:15:010
30721992722,3cyclictest9-21ksoftirqd/011:07:560
30721992722,3cyclictest9-21ksoftirqd/011:07:560
30721992722,3cyclictest9-21ksoftirqd/010:53:070
30721992722,3cyclictest9-21ksoftirqd/010:48:540
30721992722,3cyclictest9-21ksoftirqd/008:50:000
30721992721,4cyclictest9-21ksoftirqd/011:43:340
30721992720,5cyclictest9-21ksoftirqd/010:59:570
3072299261,4cyclictest17762-21tune2fs12:25:161
30721992622,3cyclictest9-21ksoftirqd/012:31:200
30721992622,3cyclictest9-21ksoftirqd/009:25:180
30721992621,3cyclictest9-21ksoftirqd/010:25:580
30721992621,3cyclictest9-21ksoftirqd/007:45:010
30721992620,4cyclictest9-21ksoftirqd/008:21:190
3072299253,20cyclictest0-21swapper/109:58:401
30721992520,3cyclictest9-21ksoftirqd/010:13:390
30721992520,3cyclictest9-21ksoftirqd/009:50:410
30721992520,3cyclictest9-21ksoftirqd/008:51:140
39598240,9rtkit-daemon0-21swapper/011:11:040
30721992419,3cyclictest9-21ksoftirqd/012:36:410
30721992419,3cyclictest9-21ksoftirqd/012:36:410
30721992419,3cyclictest9-21ksoftirqd/011:00:190
30721992418,4cyclictest9-21ksoftirqd/008:42:490
30721992318,3cyclictest9-21ksoftirqd/010:21:040
30721992317,4cyclictest14413-21ls10:00:000
30721992317,3cyclictest9-21ksoftirqd/009:10:000
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional