You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2024-11-23 - 16:51
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the 792 highest latencies:
System rackdslot4.osadl.org (updated Sat Nov 23, 2024 12:46:31)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1241911710,6ptp4l401ktimersoftd/307:05:593
4671998779,4cyclictest41-21ksoftirqd/311:40:103
4671998373,6cyclictest41-21ksoftirqd/309:15:113
42302778,20sleep10-21swapper/107:09:541
124191770,1ptp4l401ktimersoftd/312:26:423
41302758,18sleep00-21swapper/007:08:360
4671997263,6cyclictest41-21ksoftirqd/310:25:123
124191700,2ptp4l401ktimersoftd/308:50:243
4671996955,7cyclictest41-21ksoftirqd/311:20:113
4671996854,8cyclictest41-21ksoftirqd/309:45:123
4671996854,8cyclictest41-21ksoftirqd/309:45:113
4671996853,9cyclictest41-21ksoftirqd/308:25:113
4671996754,7cyclictest41-21ksoftirqd/308:05:103
4671996754,6cyclictest41-21ksoftirqd/309:10:163
4671996654,7cyclictest41-21ksoftirqd/308:35:103
4671996652,7cyclictest41-21ksoftirqd/312:05:143
4671996652,7cyclictest41-21ksoftirqd/311:30:093
4671996553,6cyclictest41-21ksoftirqd/307:30:123
4671996551,8cyclictest41-21ksoftirqd/312:35:133
4671996551,8cyclictest41-21ksoftirqd/312:35:133
124191630,1ptp4l401ktimersoftd/308:34:173
124191610,2ptp4l0-21swapper/309:51:143
4671995946,6cyclictest41-21ksoftirqd/311:00:113
4671995946,6cyclictest41-21ksoftirqd/307:25:103
124191590,1ptp4l401ktimersoftd/308:42:533
55232580,5sleep05527-21cpuspeed_turbos08:20:130
55232580,5sleep05527-21cpuspeed_turbos08:20:130
4671995650,4cyclictest41-21ksoftirqd/309:10:003
4671995541,9cyclictest41-21ksoftirqd/308:55:113
4671995448,3cyclictest41-21ksoftirqd/312:24:593
4671995448,3cyclictest41-21ksoftirqd/308:00:003
4671995447,4cyclictest41-21ksoftirqd/309:24:593
4671995447,4cyclictest41-21ksoftirqd/307:45:213
109152540,3sleep00-21swapper/012:00:150
4671995347,3cyclictest41-21ksoftirqd/311:55:143
4671995347,3cyclictest41-21ksoftirqd/311:00:003
4671995341,6cyclictest41-21ksoftirqd/310:05:133
4670995335,15cyclictest33-21ksoftirqd/209:03:142
4671995247,3cyclictest41-21ksoftirqd/311:40:013
4671995246,4cyclictest41-21ksoftirqd/312:20:003
4671995238,8cyclictest41-21ksoftirqd/307:20:143
124191520,2ptp4l5908-21hddtemp_smartct08:20:173
124191520,2ptp4l5908-21hddtemp_smartct08:20:173
69542510,2sleep00-21swapper/010:40:110
4671995145,4cyclictest41-21ksoftirqd/311:20:003
4671995144,4cyclictest41-21ksoftirqd/308:20:003
4671995144,4cyclictest41-21ksoftirqd/308:20:003
467199511,47cyclictest7583-21taskset11:50:293
4669995135,9cyclictest25-21ksoftirqd/107:10:101
4671995043,4cyclictest41-21ksoftirqd/311:50:003
4669995044,4cyclictest25-21ksoftirqd/108:40:011
4671994944,3cyclictest41-21ksoftirqd/309:30:003
4671994943,4cyclictest41-21ksoftirqd/311:10:303
4671994943,4cyclictest41-21ksoftirqd/311:10:303
4670994929,4cyclictest33-21ksoftirqd/208:08:522
4669994944,3cyclictest25-21ksoftirqd/108:00:001
4671994843,3cyclictest41-21ksoftirqd/310:50:223
4671994842,3cyclictest41-21ksoftirqd/310:40:003
4671994842,3cyclictest41-21ksoftirqd/307:54:593
4671994841,4cyclictest41-21ksoftirqd/312:00:213
4671994841,4cyclictest41-21ksoftirqd/310:05:003
4671994841,4cyclictest41-21ksoftirqd/309:05:013
4670994828,4cyclictest33-21ksoftirqd/210:03:402
467099480,3cyclictest121rcu_preempt09:25:002
4671994741,3cyclictest41-21ksoftirqd/307:45:003
4671994740,4cyclictest41-21ksoftirqd/310:15:013
4671994740,4cyclictest41-21ksoftirqd/309:45:013
4671994740,4cyclictest41-21ksoftirqd/309:45:003
4671994729,5cyclictest41-21ksoftirqd/307:35:243
4671994641,3cyclictest41-21ksoftirqd/311:10:013
4671994640,3cyclictest41-21ksoftirqd/312:10:303
4671994640,3cyclictest41-21ksoftirqd/308:05:003
4669994641,3cyclictest25-21ksoftirqd/111:05:011
4669994639,4cyclictest25-21ksoftirqd/111:00:001
4669994637,5cyclictest25-21ksoftirqd/107:45:271
4668994639,4cyclictest9-21ksoftirqd/010:00:160
416924615,19sleep20-21swapper/207:09:062
4671994540,3cyclictest41-21ksoftirqd/307:10:133
4671994539,4cyclictest41-21ksoftirqd/310:20:003
4671994537,4cyclictest41-21ksoftirqd/308:10:113
4670994539,4cyclictest33-21ksoftirqd/209:55:002
4669994540,3cyclictest25-21ksoftirqd/109:40:011
4669994539,4cyclictest25-21ksoftirqd/110:00:001
4669994538,4cyclictest25-21ksoftirqd/109:30:251
124191450,1ptp4l401ktimersoftd/308:47:503
4671994438,4cyclictest41-21ksoftirqd/307:15:193
4671994438,3cyclictest41-21ksoftirqd/309:55:193
4670994438,4cyclictest33-21ksoftirqd/209:05:232
4670994437,4cyclictest33-21ksoftirqd/208:10:302
4669994438,3cyclictest25-21ksoftirqd/109:15:001
4668994437,4cyclictest9-21ksoftirqd/009:14:590
4671994336,4cyclictest41-21ksoftirqd/310:49:593
4671994336,4cyclictest41-21ksoftirqd/309:30:173
4670994336,4cyclictest33-21ksoftirqd/207:15:122
4669994338,3cyclictest25-21ksoftirqd/110:10:011
4669994337,3cyclictest25-21ksoftirqd/112:09:591
4669994337,3cyclictest25-21ksoftirqd/107:54:381
4671994235,4cyclictest41-21ksoftirqd/310:40:223
4671994235,4cyclictest41-21ksoftirqd/309:40:003
4670994235,4cyclictest33-21ksoftirqd/211:18:252
4670994235,4cyclictest33-21ksoftirqd/208:55:002
4670994235,4cyclictest33-21ksoftirqd/208:40:102
4669994235,4cyclictest25-21ksoftirqd/112:00:001
4669994234,5cyclictest25-21ksoftirqd/108:45:001
4668994236,4cyclictest9-21ksoftirqd/009:15:500
4668994235,4cyclictest9-21ksoftirqd/011:37:070
4671994135,3cyclictest41-21ksoftirqd/310:35:003
4670994135,4cyclictest33-21ksoftirqd/209:32:372
4670994134,4cyclictest33-21ksoftirqd/210:33:192
4670994134,4cyclictest33-21ksoftirqd/208:24:002
4670994134,4cyclictest33-21ksoftirqd/208:24:002
4669994136,3cyclictest25-21ksoftirqd/112:20:281
4669994135,3cyclictest25-21ksoftirqd/110:22:591
4669994135,3cyclictest25-21ksoftirqd/107:20:001
4669994134,4cyclictest25-21ksoftirqd/111:37:241
4669994134,4cyclictest25-21ksoftirqd/111:25:011
4669994134,4cyclictest25-21ksoftirqd/109:15:011
4669994128,9cyclictest25-21ksoftirqd/112:10:131
4669994128,8cyclictest25-21ksoftirqd/112:00:121
4668994134,4cyclictest9-21ksoftirqd/010:35:000
4668994134,4cyclictest9-21ksoftirqd/007:59:140
4668994134,4cyclictest9-21ksoftirqd/007:34:330
4668994133,5cyclictest9-21ksoftirqd/008:35:000
466899410,3cyclictest171552sleep009:50:330
4671994032,5cyclictest41-21ksoftirqd/311:30:003
4670994033,4cyclictest33-21ksoftirqd/212:34:242
4670994033,4cyclictest33-21ksoftirqd/212:11:012
4670994033,4cyclictest33-21ksoftirqd/211:38:282
4670994033,4cyclictest33-21ksoftirqd/210:52:262
4670994032,5cyclictest33-21ksoftirqd/212:04:262
4669994034,3cyclictest25-21ksoftirqd/107:24:361
4669994033,5cyclictest25-21ksoftirqd/109:20:291
4669994033,4cyclictest25-21ksoftirqd/112:17:241
4669994033,4cyclictest25-21ksoftirqd/109:03:011
4669994033,4cyclictest25-21ksoftirqd/108:16:241
4669994033,4cyclictest25-21ksoftirqd/108:16:241
4669994032,5cyclictest25-21ksoftirqd/108:47:271
4669994027,8cyclictest25-21ksoftirqd/108:00:101
4668994034,3cyclictest9-21ksoftirqd/008:01:260
4668994033,4cyclictest9-21ksoftirqd/012:20:220
4668994033,4cyclictest9-21ksoftirqd/012:00:000
4668994033,4cyclictest9-21ksoftirqd/010:55:100
4668994033,4cyclictest9-21ksoftirqd/009:28:530
4668994033,4cyclictest9-21ksoftirqd/008:54:530
4668994033,4cyclictest9-21ksoftirqd/007:50:010
4671993932,4cyclictest41-21ksoftirqd/312:30:303
4670993933,4cyclictest33-21ksoftirqd/211:13:362
4670993933,4cyclictest33-21ksoftirqd/211:13:362
4670993933,4cyclictest33-21ksoftirqd/207:53:182
4670993933,3cyclictest33-21ksoftirqd/210:29:052
4670993933,3cyclictest33-21ksoftirqd/209:11:562
4670993932,4cyclictest33-21ksoftirqd/212:05:392
4670993932,4cyclictest33-21ksoftirqd/211:48:402
4670993932,4cyclictest33-21ksoftirqd/211:01:582
4670993932,4cyclictest33-21ksoftirqd/210:20:062
4670993932,4cyclictest33-21ksoftirqd/209:42:172
4670993932,4cyclictest33-21ksoftirqd/209:42:162
4670993932,4cyclictest33-21ksoftirqd/208:59:032
4670993932,4cyclictest33-21ksoftirqd/207:44:192
4670993932,4cyclictest33-21ksoftirqd/207:23:472
4670993931,5cyclictest33-21ksoftirqd/211:08:382
4670993931,5cyclictest33-21ksoftirqd/208:39:102
4669993934,3cyclictest25-21ksoftirqd/109:40:211
4669993934,3cyclictest25-21ksoftirqd/109:40:211
4669993933,4cyclictest25-21ksoftirqd/112:27:541
4669993933,4cyclictest25-21ksoftirqd/111:40:371
4669993933,4cyclictest25-21ksoftirqd/108:25:191
4669993933,4cyclictest25-21ksoftirqd/108:13:561
4669993933,3cyclictest25-21ksoftirqd/111:14:131
4669993933,3cyclictest25-21ksoftirqd/111:14:131
4669993933,3cyclictest25-21ksoftirqd/111:08:221
4669993932,4cyclictest25-21ksoftirqd/110:33:371
4669993932,4cyclictest25-21ksoftirqd/109:09:591
4669993932,4cyclictest25-21ksoftirqd/107:28:151
4668993933,3cyclictest9-21ksoftirqd/007:25:360
4668993932,4cyclictest9-21ksoftirqd/012:35:010
4668993932,4cyclictest9-21ksoftirqd/008:58:030
4668993931,5cyclictest9-21ksoftirqd/009:35:000
4670993832,4cyclictest33-21ksoftirqd/211:57:072
4670993832,4cyclictest33-21ksoftirqd/207:56:582
4670993831,5cyclictest33-21ksoftirqd/210:47:192
4670993831,4cyclictest33-21ksoftirqd/212:29:512
4670993831,4cyclictest33-21ksoftirqd/210:43:132
4670993831,4cyclictest33-21ksoftirqd/210:09:092
4670993830,5cyclictest33-21ksoftirqd/211:52:502
4669993833,3cyclictest25-21ksoftirqd/112:30:291
4669993832,4cyclictest25-21ksoftirqd/111:30:171
4669993832,4cyclictest25-21ksoftirqd/108:30:501
4669993832,3cyclictest25-21ksoftirqd/108:21:071
4669993832,3cyclictest25-21ksoftirqd/108:21:071
4669993831,4cyclictest9430-21kworker/1:211:45:131
4669993831,4cyclictest25-21ksoftirqd/111:24:231
4669993831,4cyclictest25-21ksoftirqd/111:15:111
4669993831,4cyclictest25-21ksoftirqd/108:58:231
4669993831,4cyclictest25-21ksoftirqd/108:55:011
4669993824,9cyclictest25-21ksoftirqd/110:15:131
466899388,26cyclictest17731-21irqrtprio08:45:180
4668993832,4cyclictest9-21ksoftirqd/012:40:000
4668993832,4cyclictest9-21ksoftirqd/012:40:000
4668993832,4cyclictest9-21ksoftirqd/011:01:300
4668993832,4cyclictest9-21ksoftirqd/009:08:060
4668993832,3cyclictest9-21ksoftirqd/007:45:190
4668993831,4cyclictest9-21ksoftirqd/011:07:570
4668993831,4cyclictest9-21ksoftirqd/010:35:530
4668993822,13cyclictest9-21ksoftirqd/008:42:170
4668993817,18cyclictest11970-21tail09:40:250
4668993817,18cyclictest11970-21tail09:40:240
466899380,4cyclictest24077-21cut11:15:170
466899380,3cyclictest30332-21fschecks_time10:20:180
466899380,3cyclictest27216-21sed10:15:010
466899380,3cyclictest24090-21/usr/sbin/munin10:05:290
124191380,1ptp4l401ktimersoftd/310:20:213
4670993731,4cyclictest33-21ksoftirqd/212:22:492
4670993731,3cyclictest33-21ksoftirqd/207:35:262
4670993730,4cyclictest33-21ksoftirqd/208:30:122
4670993730,4cyclictest33-21ksoftirqd/208:25:572
4670993730,4cyclictest33-21ksoftirqd/207:31:052
4670993730,4cyclictest1586-21kworker/2:209:55:122
4669993732,3cyclictest25-21ksoftirqd/110:00:201
4669993731,4cyclictest25-21ksoftirqd/110:49:251
4669993731,4cyclictest25-21ksoftirqd/109:45:381
4669993731,4cyclictest25-21ksoftirqd/109:45:371
4669993731,4cyclictest25-21ksoftirqd/109:26:141
4669993731,4cyclictest25-21ksoftirqd/107:35:461
4669993731,4cyclictest25-21ksoftirqd/107:30:201
4669993731,3cyclictest25-21ksoftirqd/110:29:161
4669993730,4cyclictest25-21ksoftirqd/107:40:111
466899379,25cyclictest28753-21sh11:30:010
4668993732,3cyclictest9-21ksoftirqd/012:14:120
4668993732,3cyclictest9-21ksoftirqd/009:24:040
4668993730,4cyclictest9-21ksoftirqd/009:04:080
4668993730,4cyclictest9-21ksoftirqd/008:12:020
466899370,4cyclictest12639-21/usr/sbin/munin08:35:120
4670993631,3cyclictest33-21ksoftirqd/211:24:492
4670993630,3cyclictest33-21ksoftirqd/211:25:382
4670993629,4cyclictest33-21ksoftirqd/209:18:042
4669993631,3cyclictest25-21ksoftirqd/110:50:311
4669993630,4cyclictest25-21ksoftirqd/112:35:241
4669993630,4cyclictest25-21ksoftirqd/112:35:241
4669993630,4cyclictest25-21ksoftirqd/110:37:541
4669993629,4cyclictest25-21ksoftirqd/110:41:241
4668993631,3cyclictest9-21ksoftirqd/008:07:530
4668993629,4cyclictest9-21ksoftirqd/007:36:130
466899360,4cyclictest6137-21cpuspeed_turbos11:50:140
466899360,3cyclictest18227-21expr09:55:130
4670993529,4cyclictest33-21ksoftirqd/209:46:292
4670993529,4cyclictest33-21ksoftirqd/209:46:292
4670993529,3cyclictest33-21ksoftirqd/210:59:072
4670993529,3cyclictest33-21ksoftirqd/208:03:542
4670993528,4cyclictest33-21ksoftirqd/211:32:062
4670993528,4cyclictest33-21ksoftirqd/208:45:532
4669993529,3cyclictest25-21ksoftirqd/111:50:541
466899359,22cyclictest20218-21switchtime07:40:260
466899358,24cyclictest566-21dbus-daemon07:20:000
466899353,29cyclictest5736-21ls11:50:000
4668993529,4cyclictest9-21ksoftirqd/007:12:130
4668993529,3cyclictest9-21ksoftirqd/011:23:140
4668993513,19cyclictest32702-21sed10:25:170
466899350,3cyclictest0-21swapper/007:25:000
4670993429,3cyclictest33-21ksoftirqd/212:15:132
4670993428,3cyclictest33-21ksoftirqd/207:45:022
4670993427,4cyclictest33-21ksoftirqd/209:36:542
4670993427,4cyclictest33-21ksoftirqd/208:19:132
4670993427,4cyclictest33-21ksoftirqd/208:19:132
4670993427,4cyclictest33-21ksoftirqd/207:29:372
4669993428,3cyclictest25-21ksoftirqd/108:08:231
466899349,22cyclictest29723-21irqrtprio11:30:170
466899348,22cyclictest22670-21df_abs12:25:140
4668993428,4cyclictest9-21ksoftirqd/011:11:490
4668993428,4cyclictest9-21ksoftirqd/011:11:490
4668993427,4cyclictest9-21ksoftirqd/012:05:200
4668993427,4cyclictest9-21ksoftirqd/008:15:120
4668993427,4cyclictest9-21ksoftirqd/008:15:120
4668993412,19cyclictest14386-21grep09:45:240
4668993412,19cyclictest14386-21grep09:45:230
466899340,4cyclictest7991-21cstates08:25:130
466899340,3cyclictest27509-21apt-get10:15:120
4670993327,3cyclictest33-21ksoftirqd/212:39:282
4670993327,3cyclictest33-21ksoftirqd/212:39:272
4670993326,4cyclictest33-21ksoftirqd/211:41:022
4670993326,4cyclictest33-21ksoftirqd/207:13:242
466899339,21cyclictest12827-21missed_timers10:50:250
466899337,23cyclictest10968-21unixbench_singl10:45:280
4668993311,18cyclictest17756-21cpuspeed12:15:150
4669993226,4cyclictest25-21ksoftirqd/110:13:461
466899329,20cyclictest10430-21latency_hist09:40:000
4670993125,4cyclictest33-21ksoftirqd/210:10:162
4669993023,4cyclictest25-21ksoftirqd/109:52:011
466899301,5cyclictest1485-21tr11:40:120
4670992923,4cyclictest33-21ksoftirqd/209:27:482
4670992922,4cyclictest33-21ksoftirqd/210:17:022
4670992822,3cyclictest33-21ksoftirqd/210:38:242
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional