You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2024-07-27 - 14:26

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack7slot3s.osadl.org (updated Sat Jul 27, 2024 00:43:37)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
193382970,5sleep11652299cyclictest22:21:151
1652199911,44cyclictest81550ssh23:18:180
1652199853,41cyclictest0-21swapper/023:03:200
1652199853,41cyclictest0-21swapper/023:03:200
1652199846,23cyclictest0-21swapper/000:13:220
16521998148,7cyclictest8150irq/56-dwc_otg_21:23:160
184192760,4sleep218279-21latency_hist20:48:092
1652199766,25cyclictest0-21swapper/022:43:200
319702710,2sleep31652499cyclictest19:53:363
274102700,3sleep121-21rcuc/123:49:471
239222700,2sleep30-21swapper/321:03:193
16521996820,27cyclictest11016-21latency_hist20:28:080
1652199681,30cyclictest0-21swapper/019:43:210
1652199671,47cyclictest409-21aten_rbpower_po19:58:220
1652199661,46cyclictest5104-21unixbench_singl20:08:390
16521996325,7cyclictest0-21swapper/021:38:180
1652199624,26cyclictest0-21swapper/021:13:080
1652199622,30cyclictest0-21swapper/000:28:180
1652199608,19cyclictest20693-21ssh22:23:180
1652199603,6cyclictest24989-21kworker/0:019:53:180
16521995929,14cyclictest8150irq/56-dwc_otg_22:28:300
16521995929,14cyclictest8150irq/56-dwc_otg_22:28:300
16521995916,29cyclictest23085-21unixbench_multi19:28:390
16521995913,27cyclictest13157-21fschecks_time22:53:240
185122581,3sleep00-21swapper/022:19:460
1652199581,33cyclictest26748-21grep19:38:380
1652299575,18cyclictest7950irq/56-dwc_otg20:28:201
16521995730,5cyclictest18410-21wget19:18:210
16521995730,5cyclictest18410-21wget19:18:210
16521995725,18cyclictest8150irq/56-dwc_otg_22:03:090
1652199571,45cyclictest32253-21latency_hist21:58:090
117482570,2sleep10-21swapper/121:33:081
16521995629,13cyclictest8150irq/56-dwc_otg_23:48:080
1652199562,37cyclictest0-21swapper/000:23:200
1652199562,37cyclictest0-21swapper/000:23:200
1652199562,29cyclictest0-21swapper/019:28:070
1652199561,42cyclictest269650ssh21:22:060
1652199561,36cyclictest17405-21fschecks_count00:18:250
16521995610,28cyclictest425-21cron19:38:070
46992550,2sleep10-21swapper/122:43:211
16521995527,12cyclictest8050irq/56-dwc_otg_22:08:390
1652199552,36cyclictest0-21swapper/020:58:320
1652199552,29cyclictest8832-21ssh21:28:480
1652199552,29cyclictest7856-21grep20:18:260
1652199552,28cyclictest0-21swapper/023:38:080
1652199551,29cyclictest24673-21proc_pri21:03:360
16521995426,5cyclictest13618-21unixbench_multi22:13:360
1652199542,32cyclictest25149-21aten_rbpower_cu23:08:210
1652199542,31cyclictest4475-21fschecks_count22:03:240
16521995416,23cyclictest31550-21ssh21:18:080
1652199541,28cyclictest6073-21awk00:03:330
16521995333,6cyclictest8150irq/56-dwc_otg_23:43:080
16521995322,18cyclictest0-21swapper/020:38:180
16521995320,19cyclictest0-21swapper/023:26:260
16521995312,27cyclictest30799-21unixbench_multi23:53:380
29922520,1sleep20-21swapper/223:59:302
1652199526,30cyclictest0-21swapper/019:48:200
1652199521,26cyclictest13849-21proc_pri20:33:340
1652199521,17cyclictest6375-21ls20:13:290
1652199521,17cyclictest6375-21ls20:13:290
1652199515,28cyclictest0-21swapper/023:13:190
1652199511,29cyclictest19178-21ntp_kernel_err20:48:300
1652199511,12cyclictest0-21swapper/021:33:340
1652199509,22cyclictest0-21swapper/022:58:230
16521995024,6cyclictest425-21cron20:08:080
16521995022,4cyclictest9088-21fschecks_time22:48:250
16521994926,4cyclictest3561-21latency_hist00:43:080
1652199492,27cyclictest0-21swapper/000:38:080
1652199492,23cyclictest0-21swapper/022:33:270
1652199492,18cyclictest0-21swapper/022:38:280
16521994918,14cyclictest8050irq/56-dwc_otg_23:53:080
1652199491,25cyclictest2250-21wc23:58:360
1652199491,17cyclictest24054-21chrt21:48:090
159482493,10sleep00-21swapper/019:09:120
14672490,6sleep21652399cyclictest00:38:392
1652199488,20cyclictest0-21swapper/021:51:400
1652199483,23cyclictest0-21swapper/020:53:200
1652199483,23cyclictest0-21swapper/020:53:200
16521994817,14cyclictest0-21swapper/020:43:220
1652299477,24cyclictest0-21swapper/123:38:191
1652299477,24cyclictest0-21swapper/120:48:201
1652199471,24cyclictest10028-21ssh00:08:320
1652199471,24cyclictest10028-21ssh00:08:320
53562460,3sleep35355-21ssh22:43:313
1652299466,25cyclictest0-21swapper/120:08:211
1652199461,21cyclictest9153-21tr23:28:200
1652299447,24cyclictest0-21swapper/120:33:131
1652299447,24cyclictest0-21swapper/119:48:201
1652299437,24cyclictest0-21swapper/119:53:201
16521994314,20cyclictest0-21swapper/019:16:170
157632435,25sleep215889-21users19:08:382
1652499423,30cyclictest8150irq/56-dwc_otg_22:33:173
1652299421,27cyclictest13233-21timerandwakeup21:33:571
16521994215,14cyclictest0-21swapper/020:28:180
16524994124,11cyclictest8150irq/56-dwc_otg_00:03:223
1652499411,6cyclictest29620-21ssh23:13:263
16523994118,5cyclictest5108-21rt-features22:03:332
1652299414,5cyclictest7950irq/56-dwc_otg21:58:181
16522994120,4cyclictest20114-21/usr/sbin/munin21:43:311
16524994014,4cyclictest23867-21latency_hist21:03:083
16524994010,4cyclictest0-21swapper/322:26:343
1652399407,23cyclictest0-21swapper/220:48:202
1652399401,4cyclictest0-21swapper/223:03:192
1652399401,4cyclictest0-21swapper/223:03:192
1652299401,20cyclictest31447-21ssh21:18:011
1652299401,18cyclictest8050irq/56-dwc_otg_21:18:201
322802390,2sleep10-21swapper/123:16:541
1652499397,20cyclictest0-21swapper/322:18:193
1652499394,11cyclictest8150irq/56-dwc_otg_23:38:243
1652499392,7cyclictest37-21rcuc/322:08:233
1652399397,23cyclictest0-21swapper/220:53:202
1652399397,23cyclictest0-21swapper/220:53:202
1652399395,20cyclictest8150irq/56-dwc_otg_22:38:072
1652299391,23cyclictest7950irq/56-dwc_otg20:38:241
16524993820,5cyclictest32171-21latency_hist21:58:083
1652399383,25cyclictest8150irq/56-dwc_otg_20:03:192
1652399381,29cyclictest25032-21cpuspeed22:28:252
1652399381,29cyclictest25032-21cpuspeed22:28:252
1652299389,10cyclictest7950irq/56-dwc_otg00:03:231
1652299382,22cyclictest11059-21ls20:28:081
1652299381,24cyclictest21838-21ls19:28:081
5332370,1sleep30-21swapper/319:58:233
1652499376,16cyclictest31999-21egrep21:18:223
16524993717,11cyclictest39-21ksoftirqd/323:53:173
1652499371,4cyclictest8150irq/56-dwc_otg_22:38:213
1652399372,4cyclictest8150irq/56-dwc_otg_22:13:172
1652399372,23cyclictest20357-21ssh22:23:082
16523993711,13cyclictest0-21swapper/223:08:372
1652299378,6cyclictest8150irq/56-dwc_otg_22:13:091
1652299376,4cyclictest8050irq/56-dwc_otg_23:23:561
1652299375,22cyclictest17126-21ssh00:18:201
1652299371,20cyclictest0-21swapper/100:27:411
1652299371,20cyclictest0-21swapper/100:27:411
16522993711,5cyclictest20595-21fschecks_time20:53:251
16522993711,5cyclictest20595-21fschecks_time20:53:251
171052360,2sleep20-21swapper/221:38:372
1652499369,17cyclictest37-21rcuc/323:28:273
1652499367,26cyclictest0-21swapper/320:33:213
1652499366,18cyclictest0-21swapper/319:13:183
1652499365,7cyclictest7950irq/56-dwc_otg21:13:233
1652499364,4cyclictest0-21swapper/323:21:443
16524993613,14cyclictest37-21rcuc/321:24:213
1652499361,10cyclictest8150irq/56-dwc_otg_23:43:233
1652399361,8cyclictest8050irq/56-dwc_otg_23:13:172
16523993617,4cyclictest27588-21/usr/sbin/munin21:13:352
16523993616,4cyclictest19264-21sh23:00:302
1652399361,27cyclictest9271-21ls23:28:212
1652299366,5cyclictest7950irq/56-dwc_otg00:08:381
1652299366,5cyclictest7950irq/56-dwc_otg00:08:381
1652299365,7cyclictest0-21swapper/122:03:241
1652299365,12cyclictest4750irq/17-3f00b88023:18:381
16522993618,4cyclictest24915-21latency_hist23:08:091
16522993618,4cyclictest24915-21latency_hist23:08:091
1652299361,12cyclictest8150irq/56-dwc_otg_00:15:041
1652499357,23cyclictest0-21swapper/323:08:203
16524993515,4cyclictest16340-21fschecks_count21:38:263
1652499351,17cyclictest0-21swapper/323:59:083
1652399356,6cyclictest17293-21wget23:38:192
16523993526,7cyclictest8150irq/56-dwc_otg_23:23:212
16523993516,6cyclictest13722-21processes22:53:322
1652399351,31cyclictest7951-21wget21:28:242
1652399351,23cyclictest6416-21timerwakeupswit00:03:382
16522993526,6cyclictest133950wget23:58:231
16522993524,7cyclictest221ktimersoftd/122:13:171
16522993514,10cyclictest17349-21rt-features19:13:351
16522993510,5cyclictest7950irq/56-dwc_otg21:53:081
153372350,1sleep30-21swapper/319:08:303
1652499349,12cyclictest0-21swapper/323:23:203
1652499345,7cyclictest7950irq/56-dwc_otg22:58:383
1652499344,24cyclictest0-21swapper/320:13:203
1652499344,24cyclictest0-21swapper/320:13:203
1652399347,12cyclictest8150irq/56-dwc_otg_22:28:082
1652399345,19cyclictest32445-21ssh21:58:202
1652399341,15cyclictest8050irq/56-dwc_otg_19:23:082
1652399341,15cyclictest8050irq/56-dwc_otg_19:23:082
16523993411,4cyclictest1593-21ntp_kernel_pll_23:18:312
1652299345,9cyclictest7950irq/56-dwc_otg23:33:331
1652299343,21cyclictest29012-21ssh00:33:201
1652299342,14cyclictest8050irq/56-dwc_otg_23:28:201
1652299341,5cyclictest0-21swapper/122:23:251
1652299341,23cyclictest0-21swapper/122:58:281
1652299341,16cyclictest3817-21latency_hist20:08:091
1652299341,16cyclictest0-21swapper/122:53:151
16522993410,4cyclictest0-21swapper/123:57:491
298102330,2sleep20-21swapper/221:53:542
1652499339,5cyclictest39-21ksoftirqd/321:43:363
1652499338,13cyclictest8150irq/56-dwc_otg_00:15:213
1652499337,5cyclictest37-21rcuc/321:35:113
1652499334,4cyclictest7950irq/56-dwc_otg23:48:323
1652499332,6cyclictest8050irq/56-dwc_otg_00:18:283
16524993326,5cyclictest4326-21wget22:03:213
1652499332,4cyclictest8150irq/56-dwc_otg_00:33:173
16524993313,5cyclictest37-21rcuc/322:33:093
16524993313,5cyclictest37-21rcuc/322:33:093
16524993310,3cyclictest0-21swapper/321:28:433
16524993310,12cyclictest0-21swapper/322:17:353
1652399339,5cyclictest7950irq/56-dwc_otg20:23:282
1652399339,4cyclictest21981-21/usr/sbin/munin23:43:272
1652399338,11cyclictest0-21swapper/200:08:252
1652399338,11cyclictest0-21swapper/200:08:252
1652399337,6cyclictest8150irq/56-dwc_otg_20:38:082
1652399336,13cyclictest8150irq/56-dwc_otg_00:28:282
1652399335,12cyclictest8150irq/56-dwc_otg_21:43:262
1652399334,7cyclictest0-21swapper/200:13:402
1652399334,6cyclictest8050irq/56-dwc_otg_20:18:372
1652399332,12cyclictest303212grep19:48:382
1652399331,6cyclictest7950irq/56-dwc_otg21:48:242
16523993313,10cyclictest1292-21runrttasks23:52:412
1652399331,11cyclictest29249-21fschecks_time00:33:242
1652299333,6cyclictest8150irq/56-dwc_otg_00:28:251
1652299333,5cyclictest8150irq/56-dwc_otg_20:03:081
1652299332,8cyclictest0-21swapper/123:09:081
1652299332,21cyclictest0-21swapper/119:29:051
16522993318,8cyclictest32599-21/usr/sbin/munin00:38:361
16522993312,5cyclictest16743-21aten_rbpower_cu20:43:221
147192335,17sleep114748-21/usr/sbin/munin19:08:201
1652499327,6cyclictest8150irq/56-dwc_otg_00:38:273
1652499327,15cyclictest0-21swapper/319:33:203
1652499326,12cyclictest8050irq/56-dwc_otg_21:49:103
1652499326,10cyclictest39-21ksoftirqd/320:23:213
1652499322,3cyclictest8150irq/56-dwc_otg_20:28:303
1652499321,4cyclictest0-21swapper/300:30:243
1652499321,21cyclictest37-21rcuc/320:18:293
1652399328,5cyclictest9769-21rm22:48:362
1652399326,11cyclictest8050irq/56-dwc_otg_21:34:002
1652399324,4cyclictest8150irq/56-dwc_otg_22:38:422
1652399323,6cyclictest14473-21unixbench_singl23:33:412
1652399322,7cyclictest21314-21grep19:23:392
1652399322,20cyclictest0-21swapper/220:58:102
16523993220,5cyclictest5531-21sh20:13:082
1652399321,7cyclictest3925-21ssh21:23:232
1652399321,4cyclictest0-21swapper/222:43:392
1652299328,11cyclictest0-21swapper/123:44:251
1652299327,16cyclictest0-21swapper/121:08:211
1652299322,17cyclictest0-21swapper/122:33:361
178592311,4sleep20-21swapper/219:15:042
1652499315,6cyclictest7950irq/56-dwc_otg20:53:373
1652499315,6cyclictest7950irq/56-dwc_otg20:53:373
1652499315,5cyclictest8150irq/56-dwc_otg_22:53:093
1652499315,14cyclictest21883-21ssh00:23:323
1652499315,14cyclictest21883-21ssh00:23:323
1652499314,6cyclictest7950irq/56-dwc_otg00:12:043
1652499314,6cyclictest7950irq/56-dwc_otg00:12:043
1652499312,7cyclictest8150irq/56-dwc_otg_19:48:183
1652499312,3cyclictest0-21swapper/323:33:203
16524993121,7cyclictest777-21ssh21:58:333
1652499311,17cyclictest0-21swapper/319:18:203
1652499311,17cyclictest0-21swapper/319:18:203
16524993111,6cyclictest39-21ksoftirqd/321:13:083
1652399318,4cyclictest8050irq/56-dwc_otg_19:28:182
1652399315,5cyclictest7950irq/56-dwc_otg21:18:222
1652399315,4cyclictest8050irq/56-dwc_otg_22:08:362
1652399314,5cyclictest7950irq/56-dwc_otg23:53:172
1652399314,10cyclictest8150irq/56-dwc_otg_19:33:332
1652399313,15cyclictest18073-21rm00:18:352
1652399313,10cyclictest8050irq/56-dwc_otg_19:43:332
1652399312,6cyclictest29-21rcuc/200:23:332
1652399312,6cyclictest29-21rcuc/200:23:332
1652299314,5cyclictest2481450ssh22:28:221
1652299314,5cyclictest2481450ssh22:28:221
1652299313,4cyclictest7950irq/56-dwc_otg19:43:191
1652299313,15cyclictest7950irq/56-dwc_otg21:23:211
16522993115,5cyclictest11065-21sh22:50:291
1652299311,23cyclictest0-21swapper/121:40:211
1652299311,19cyclictest26174-21missed_timers19:38:291
16522993110,4cyclictest0-21swapper/122:39:131
1652499302,3cyclictest8050irq/56-dwc_otg_23:03:373
1652499302,3cyclictest8050irq/56-dwc_otg_23:03:373
16524993022,6cyclictest25664-21aten_rbpower_po19:38:213
16524993011,4cyclictest37-21rcuc/322:58:083
1652399305,5cyclictest8150irq/56-dwc_otg_20:43:082
1652299307,7cyclictest8150irq/56-dwc_otg_19:18:261
1652299307,7cyclictest8150irq/56-dwc_otg_19:18:261
1652299306,6cyclictest24262-21tune2fs21:03:281
16522993023,5cyclictest28895-21kernelversion21:53:311
1652499295,6cyclictest8150irq/56-dwc_otg_20:48:343
16524992923,4cyclictest39-21ksoftirqd/320:08:293
1652499291,8cyclictest8150irq/56-dwc_otg_20:48:083
1652499291,22cyclictest15428-21ls20:38:293
1652399292,7cyclictest11275-21aten_rbpower_po20:28:212
1652299296,7cyclictest23270-21sed20:58:391
1652299295,6cyclictest7950irq/56-dwc_otg19:33:201
1652299291,7cyclictest6083-21cut20:13:251
1652299291,7cyclictest6083-21cut20:13:251
1652299291,15cyclictest8150irq/56-dwc_otg_20:18:221
1652499283,4cyclictest7950irq/56-dwc_otg19:43:353
1652499282,16cyclictest0-21swapper/320:04:333
16524992810,9cyclictest37-21rcuc/319:32:223
1652399287,10cyclictest8150irq/56-dwc_otg_19:56:402
1652399286,4cyclictest8150irq/56-dwc_otg_19:58:332
1652499274,16cyclictest0-21swapper/319:23:183
16523992717,7cyclictest6059-21fschecks_time20:13:252
16523992717,7cyclictest6059-21fschecks_time20:13:252
1652399271,4cyclictest0-21swapper/219:38:182
1652399261,5cyclictest0-21swapper/221:08:202
1652399252,10cyclictest8050irq/56-dwc_otg_21:03:342
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional