You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2024-12-26 - 22:53
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the highest latencies:
System rackdslot4.osadl.org (updated Thu Dec 26, 2024 12:45:52)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
249552206174,21sleep20-21swapper/207:07:122
249612203170,22sleep30-21swapper/307:07:183
249022203169,23sleep10-21swapper/107:06:311
229472199165,22sleep00-21swapper/007:05:020
1349911070,2ptp4l27186-21sendmail_mailqu07:10:233
25722997628,45cyclictest25-21ksoftirqd/109:55:001
2572499710,2cyclictest0-21swapper/309:00:163
2572499640,23cyclictest4343-21sed08:35:233
25723996325,9cyclictest33-21ksoftirqd/211:50:242
2572499600,25cyclictest21512-21cut08:05:173
25723995826,4cyclictest33-21ksoftirqd/210:00:002
25722995830,7cyclictest25-21ksoftirqd/109:40:001
25722995821,5cyclictest25-21ksoftirqd/112:35:011
25723995727,3cyclictest33-21ksoftirqd/212:00:302
25723995625,4cyclictest33-21ksoftirqd/209:35:002
25722995625,4cyclictest25-21ksoftirqd/109:45:001
25723995525,4cyclictest33-21ksoftirqd/208:20:152
25722995525,10cyclictest25-21ksoftirqd/109:25:001
25723995427,5cyclictest33-21ksoftirqd/210:35:182
25723995424,7cyclictest33-21ksoftirqd/210:20:002
25723995423,4cyclictest33-21ksoftirqd/207:15:122
25723995422,4cyclictest33-21ksoftirqd/210:40:172
25722995426,4cyclictest25-21ksoftirqd/107:35:211
25722995323,4cyclictest25-21ksoftirqd/107:45:271
25722995322,7cyclictest25-21ksoftirqd/108:20:001
25723995224,3cyclictest33-21ksoftirqd/210:55:162
25723995223,3cyclictest33-21ksoftirqd/207:20:222
25723995222,3cyclictest33-21ksoftirqd/208:40:262
25723995217,6cyclictest33-21ksoftirqd/210:20:222
289362510,1sleep20-21swapper/212:10:002
2572399517,3cyclictest33-21ksoftirqd/208:25:152
25722995122,3cyclictest25-21ksoftirqd/110:50:011
25722995121,4cyclictest25-21ksoftirqd/108:44:541
2572399509,7cyclictest33-21ksoftirqd/211:55:212
25723995046,2cyclictest1199-21latency_hist09:40:002
25723995022,4cyclictest33-21ksoftirqd/208:30:192
25723995016,6cyclictest33-21ksoftirqd/211:05:012
2572299504,3cyclictest25-21ksoftirqd/111:35:151
25722995025,7cyclictest25-21ksoftirqd/110:10:101
25722995019,9cyclictest25-21ksoftirqd/107:40:261
25722995016,4cyclictest25-21ksoftirqd/110:35:141
25723994930,9cyclictest33-21ksoftirqd/207:45:192
25722994929,5cyclictest25-21ksoftirqd/111:10:231
25722994923,7cyclictest25-21ksoftirqd/108:45:131
25722994922,6cyclictest25-21ksoftirqd/111:20:141
25722994915,4cyclictest25-21ksoftirqd/112:35:131
25722994915,4cyclictest25-21ksoftirqd/112:20:261
25722994914,4cyclictest25-21ksoftirqd/107:50:251
25723994821,4cyclictest33-21ksoftirqd/208:15:262
25723994820,6cyclictest33-21ksoftirqd/211:25:382
25723994820,4cyclictest33-21ksoftirqd/209:20:172
25723994819,7cyclictest33-21ksoftirqd/210:15:012
25723994819,4cyclictest33-21ksoftirqd/209:05:002
2572299489,9cyclictest25-21ksoftirqd/108:30:221
25722994821,4cyclictest25-21ksoftirqd/110:50:131
25722994821,4cyclictest25-21ksoftirqd/108:00:001
25722994818,9cyclictest25-21ksoftirqd/108:00:151
25722994818,4cyclictest25-21ksoftirqd/110:00:001
25722994817,6cyclictest25-21ksoftirqd/107:20:011
25722994815,5cyclictest25-21ksoftirqd/109:15:261
25722994814,4cyclictest25-21ksoftirqd/111:40:131
25722994814,4cyclictest25-21ksoftirqd/111:00:181
25722994814,3cyclictest25-21ksoftirqd/110:20:211
25722994813,4cyclictest25-21ksoftirqd/110:15:161
25722994813,4cyclictest25-21ksoftirqd/108:35:261
25723994718,7cyclictest33-21ksoftirqd/208:55:202
25723994718,4cyclictest33-21ksoftirqd/207:10:272
2572299477,9cyclictest25-21ksoftirqd/111:15:291
25722994722,7cyclictest25-21ksoftirqd/108:05:121
25722994715,8cyclictest25-21ksoftirqd/110:00:111
25722994715,8cyclictest25-21ksoftirqd/110:00:111
25722994714,4cyclictest25-21ksoftirqd/108:25:171
25722994713,4cyclictest25-21ksoftirqd/111:30:141
25722994713,4cyclictest25-21ksoftirqd/108:50:261
25722994713,3cyclictest25-21ksoftirqd/112:10:191
25722994710,8cyclictest25-21ksoftirqd/108:20:211
25723994640,3cyclictest33-21ksoftirqd/211:20:002
25723994617,4cyclictest33-21ksoftirqd/207:40:132
25723994614,5cyclictest33-21ksoftirqd/212:35:022
25723994611,4cyclictest33-21ksoftirqd/211:15:002
25722994616,7cyclictest25-21ksoftirqd/107:25:111
25722994616,4cyclictest25-21ksoftirqd/110:30:141
25722994613,4cyclictest25-21ksoftirqd/107:30:211
25722994612,4cyclictest25-21ksoftirqd/111:50:181
25722994612,4cyclictest25-21ksoftirqd/109:10:211
25722994610,7cyclictest25-21ksoftirqd/111:55:221
25722994610,7cyclictest25-21ksoftirqd/107:10:221
134991460,1ptp4l0-21swapper/308:13:503
2572399453,3cyclictest121rcu_preempt08:10:132
25723994518,8cyclictest33-21ksoftirqd/207:54:032
25723994518,6cyclictest33-21ksoftirqd/208:45:132
25723994516,3cyclictest33-21ksoftirqd/211:35:012
25723994516,3cyclictest33-21ksoftirqd/210:00:222
25723994516,3cyclictest33-21ksoftirqd/210:00:222
2572399451,3cyclictest33-21ksoftirqd/210:55:002
25723994513,4cyclictest33-21ksoftirqd/210:10:012
25723994510,6cyclictest33-21ksoftirqd/211:20:132
25722994521,7cyclictest25-21ksoftirqd/112:15:131
25722994518,6cyclictest25-21ksoftirqd/107:20:221
25722994517,3cyclictest25-21ksoftirqd/112:25:141
25722994516,10cyclictest25-21ksoftirqd/109:08:081
25722994510,7cyclictest25-21ksoftirqd/108:55:231
25722994510,4cyclictest25-21ksoftirqd/112:00:201
25723994417,3cyclictest33-21ksoftirqd/207:35:122
25723994413,4cyclictest33-21ksoftirqd/209:45:012
2572299449,8cyclictest25-21ksoftirqd/110:55:181
2572299448,8cyclictest25-21ksoftirqd/109:30:171
25723994315,4cyclictest33-21ksoftirqd/210:30:172
2572399431,3cyclictest33-21ksoftirqd/208:05:002
25723994313,6cyclictest33-21ksoftirqd/212:20:252
25723994310,7cyclictest33-21ksoftirqd/208:50:132
2572299439,7cyclictest25-21ksoftirqd/111:50:011
25722994315,8cyclictest25-21ksoftirqd/110:40:151
25722994315,7cyclictest25-21ksoftirqd/109:00:131
2572499421,25cyclictest22062-21netstat10:30:163
25723994238,2cyclictest321ktimersoftd/209:05:242
25723994237,3cyclictest33-21ksoftirqd/208:00:002
2572299427,7cyclictest25-21ksoftirqd/108:10:261
25722994237,3cyclictest25-21ksoftirqd/109:50:001
134991420,0ptp4l401ktimersoftd/310:23:513
25723994137,2cyclictest33-21ksoftirqd/210:50:002
2572399412,6cyclictest33-21ksoftirqd/207:30:232
25723994126,6cyclictest33-21ksoftirqd/207:25:142
25723994124,5cyclictest33-21ksoftirqd/212:30:002
25723994110,6cyclictest33-21ksoftirqd/211:35:152
25723994110,10cyclictest33-21ksoftirqd/210:30:002
25722994117,6cyclictest25-21ksoftirqd/111:27:131
134991410,0ptp4l401ktimersoftd/312:33:123
134991410,0ptp4l401ktimersoftd/308:50:213
2572399404,3cyclictest121rcu_preempt08:35:142
25723994035,3cyclictest33-21ksoftirqd/209:20:002
25723994035,3cyclictest33-21ksoftirqd/208:05:102
25723994035,2cyclictest33-21ksoftirqd/209:15:002
25723994033,4cyclictest33-21ksoftirqd/209:30:002
25723994033,4cyclictest33-21ksoftirqd/209:30:002
25722994016,8cyclictest25-21ksoftirqd/109:25:571
25722994016,8cyclictest25-21ksoftirqd/109:25:571
2572199407,30cyclictest16882-21proc_pri07:55:220
2572499394,26cyclictest6245-21ls09:50:213
25723993935,2cyclictest321ktimersoftd/209:50:182
25723993934,3cyclictest33-21ksoftirqd/212:15:002
25723993933,3cyclictest33-21ksoftirqd/211:40:202
25723993933,3cyclictest33-21ksoftirqd/211:10:002
25723993910,3cyclictest33-21ksoftirqd/212:15:242
25724993833,3cyclictest41-21ksoftirqd/308:30:003
2572499381,21cyclictest16954-21ptp4l07:55:223
25723993833,3cyclictest33-21ksoftirqd/212:30:192
25724993731,4cyclictest41-21ksoftirqd/308:42:013
25724993731,4cyclictest12854-21cron07:50:003
25723993732,3cyclictest33-21ksoftirqd/211:50:012
25722993733,2cyclictest25-21ksoftirqd/110:30:001
25724993631,3cyclictest41-21ksoftirqd/307:23:583
25724993630,4cyclictest41-21ksoftirqd/307:16:293
25723993631,3cyclictest72192irq/125-enp1s0-09:48:242
2572299360,2cyclictest25-21ksoftirqd/111:09:591
25724993529,4cyclictest41-21ksoftirqd/310:35:493
25724993529,4cyclictest41-21ksoftirqd/307:40:043
25724993528,5cyclictest41-21ksoftirqd/309:34:443
2572499351,20cyclictest0-21swapper/311:10:173
2572499350,1cyclictest0-21swapper/308:01:403
25722993530,3cyclictest25-21ksoftirqd/112:09:051
25722993529,4cyclictest25-21ksoftirqd/110:06:421
25721993530,3cyclictest9-21ksoftirqd/008:23:400
25721993529,4cyclictest9-21ksoftirqd/011:12:500
25721993529,4cyclictest9-21ksoftirqd/010:34:180
25721993529,4cyclictest9-21ksoftirqd/009:39:540
25721993529,4cyclictest9-21ksoftirqd/009:06:170
25721993528,4cyclictest9-21ksoftirqd/009:03:520
25724993429,4cyclictest41-21ksoftirqd/312:08:243
25724993429,3cyclictest41-21ksoftirqd/312:27:113
25724993428,4cyclictest41-21ksoftirqd/312:23:293
25724993428,4cyclictest41-21ksoftirqd/311:00:013
25724993428,4cyclictest41-21ksoftirqd/310:46:293
25724993428,4cyclictest41-21ksoftirqd/309:40:103
25724993428,4cyclictest41-21ksoftirqd/308:56:173
25724993412,19cyclictest4322-21cron11:09:593
25721993429,3cyclictest9-21ksoftirqd/007:55:000
25721993428,4cyclictest9-21ksoftirqd/012:01:030
25721993428,4cyclictest9-21ksoftirqd/011:54:580
25721993428,4cyclictest9-21ksoftirqd/009:16:160
25721993428,4cyclictest9-21ksoftirqd/008:46:230
25721993427,5cyclictest9-21ksoftirqd/009:42:550
25721993410,4cyclictest26435-21sed09:20:190
25724993328,3cyclictest41-21ksoftirqd/311:29:503
25724993328,3cyclictest41-21ksoftirqd/310:01:323
25724993328,3cyclictest41-21ksoftirqd/310:01:323
25724993328,3cyclictest41-21ksoftirqd/309:09:373
25724993327,4cyclictest41-21ksoftirqd/312:12:543
25724993327,4cyclictest41-21ksoftirqd/311:17:183
25724993327,4cyclictest41-21ksoftirqd/310:50:023
25724993327,4cyclictest41-21ksoftirqd/310:13:393
25724993327,4cyclictest41-21ksoftirqd/309:45:473
25724993326,4cyclictest41-21ksoftirqd/309:21:083
25721993328,3cyclictest9-21ksoftirqd/010:55:100
25721993327,4cyclictest9-21ksoftirqd/010:29:130
25721993327,4cyclictest9-21ksoftirqd/010:15:570
25721993327,4cyclictest9-21ksoftirqd/009:34:330
25721993327,4cyclictest9-21ksoftirqd/008:14:050
25721993327,4cyclictest9-21ksoftirqd/008:09:400
25721993327,4cyclictest9-21ksoftirqd/007:49:500
25721993311,3cyclictest7926-21latency_hist07:40:000
25721993311,3cyclictest3313-21tr08:35:150
2572499329,20cyclictest26320-21fschecks_count10:40:153
2572499328,21cyclictest18233-21fschecks_count11:40:163
25724993227,3cyclictest41-21ksoftirqd/311:52:523
25724993227,3cyclictest20366-21cron10:30:003
25724993226,4cyclictest41-21ksoftirqd/312:00:063
25724993226,4cyclictest41-21ksoftirqd/308:21:473
2572499321,28cyclictest3429-21cpuspeed_turbos07:30:113
2572499321,28cyclictest1264-21snmpd12:15:303
2572499320,1cyclictest0-21swapper/309:55:163
25721993227,3cyclictest9-21ksoftirqd/012:36:580
25721993226,4cyclictest9-21ksoftirqd/012:10:340
25721993226,4cyclictest9-21ksoftirqd/011:31:030
25721993226,4cyclictest9-21ksoftirqd/011:18:190
25721993226,4cyclictest9-21ksoftirqd/009:11:020
25721993226,4cyclictest9-21ksoftirqd/007:15:360
25721993225,4cyclictest9-21ksoftirqd/010:03:590
25721993225,4cyclictest9-21ksoftirqd/010:03:580
25721993211,3cyclictest4225-21seq11:08:480
25724993125,4cyclictest41-21ksoftirqd/312:36:283
25724993125,4cyclictest41-21ksoftirqd/311:46:463
25724993125,4cyclictest41-21ksoftirqd/308:47:063
25724993125,4cyclictest41-21ksoftirqd/307:29:243
25724993124,5cyclictest41-21ksoftirqd/309:36:103
2572499311,27cyclictest15215-21cpuspeed_turbos10:15:133
25721993126,3cyclictest9-21ksoftirqd/010:39:240
25721993125,4cyclictest9-21ksoftirqd/012:08:470
25721993125,4cyclictest9-21ksoftirqd/007:30:380
25721993125,4cyclictest9-21ksoftirqd/007:25:590
25721993125,3cyclictest9-21ksoftirqd/010:14:190
2572499305,22cyclictest23688-21df_abs11:55:193
25724993025,3cyclictest41-21ksoftirqd/307:35:093
25724993024,4cyclictest41-21ksoftirqd/311:38:153
25724993011,16cyclictest11890-21cat11:25:013
25721993024,4cyclictest9-21ksoftirqd/011:58:220
25721993024,4cyclictest9-21ksoftirqd/011:27:530
25721993024,4cyclictest9-21ksoftirqd/010:48:550
25721993024,4cyclictest9-21ksoftirqd/009:28:590
25721993024,4cyclictest9-21ksoftirqd/009:28:580
25721993024,4cyclictest9-21ksoftirqd/008:56:180
25721993024,3cyclictest9-21ksoftirqd/012:16:400
25721993024,3cyclictest9-21ksoftirqd/011:24:090
25721993024,3cyclictest9-21ksoftirqd/008:29:050
25724992924,3cyclictest41-21ksoftirqd/311:30:473
2572499292,24cyclictest14531-21grep07:50:223
2572499292,21cyclictest20636-21apt-get09:10:103
25721992923,4cyclictest9-21ksoftirqd/012:26:580
25721992910,3cyclictest17997-21cat11:40:150
25724992823,3cyclictest41-21ksoftirqd/310:06:133
25724992823,3cyclictest41-21ksoftirqd/308:30:233
2572499281,24cyclictest1565-21Xorg09:27:593
2572499281,24cyclictest1565-21Xorg09:27:593
2572499281,23cyclictest1264-21snmpd11:00:153
25721992823,3cyclictest9-21ksoftirqd/011:04:470
25721992823,3cyclictest9-21ksoftirqd/010:23:150
25721992823,3cyclictest9-21ksoftirqd/010:05:140
25721992822,4cyclictest9-21ksoftirqd/008:33:270
25721992822,4cyclictest9-21ksoftirqd/007:22:380
25724992722,3cyclictest41-21ksoftirqd/309:15:363
25721992722,3cyclictest9-21ksoftirqd/011:46:100
25721992722,3cyclictest9-21ksoftirqd/007:41:270
25721992721,4cyclictest9-21ksoftirqd/012:33:170
25721992710,3cyclictest1794-21cpuspeed_turbos12:20:130
2572499264,19cyclictest25673-21acpi08:15:103
25721992621,3cyclictest9-21ksoftirqd/008:18:520
25721992621,3cyclictest9-21ksoftirqd/008:00:500
25721992620,4cyclictest9-21ksoftirqd/008:54:350
25721992418,4cyclictest9-21ksoftirqd/007:13:000
25721992318,3cyclictest9-21ksoftirqd/011:37:430
25721992318,3cyclictest9-21ksoftirqd/009:56:030
25721992318,3cyclictest9-21ksoftirqd/008:41:010
25721992317,4cyclictest9-21ksoftirqd/010:52:360
25721992217,3cyclictest9-21ksoftirqd/009:48:450
25721991913,3cyclictest4678-21cpuspeed_turbos09:50:090
25721991712,3cyclictest25828-21apt-get10:40:110
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional