You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-04-03 - 11:12

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #e, slot #6

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  TI
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes
Compare latency of primary with shadow system
Characteristics of all highest latencies:
System rackeslot6s.osadl.org (updated Thu Apr 03, 2025 00:44:51)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
228177599566,22cyclictest20950irq/209-8000000.ethernet19:45:010
228177599566,22cyclictest20950irq/209-8000000.ethernet19:45:000
228177599543,25cyclictest2285542-21gpgv19:30:010
228177599542,17cyclictest15-21rcuc/019:35:000
2281780995237,9cyclictest2323006-21grep23:30:292
2281777995243,4cyclictest0-21swapper/123:20:291
2281780995140,7cyclictest2288854-21munin-plugin-st19:50:002
2281775995131,14cyclictest0-21swapper/021:20:300
2281777995041,4cyclictest2321067-21munin-plugin-st23:20:001
2281777995040,6cyclictest0-21swapper/119:40:281
2281777995040,6cyclictest0-21swapper/119:40:281
2281775995036,7cyclictest0-21swapper/000:40:010
2281780994939,5cyclictest0-21swapper/220:05:002
2281780994934,10cyclictest2306124-21grep21:30:282
228178099491,31cyclictest0-21swapper/221:20:012
228178099486,34cyclictest0-21swapper/223:45:012
228178099486,34cyclictest0-21swapper/223:45:012
2281777994838,5cyclictest0-21swapper/119:15:011
228177599471,36cyclictest0-21swapper/022:10:070
228178099464,23cyclictest0-21swapper/200:30:012
2281780994637,5cyclictest2295761-21cron20:30:002
228177799461,12cyclictest0-21swapper/119:55:011
2281775994634,8cyclictest0-21swapper/023:25:000
2281775994629,12cyclictest2299070-21grep20:45:310
2281780994531,10cyclictest2329402-21latency_hist00:20:002
2281780994528,12cyclictest311ktimers/219:40:152
2281780994528,12cyclictest311ktimers/219:40:152
2281777994528,9cyclictest2285329-21grep19:25:301
2281777994526,11cyclictest0-21swapper/123:30:291
2281775994530,9cyclictest0-21swapper/021:15:290
2281775994526,11cyclictest0-21swapper/020:35:290
2281780994436,5cyclictest2300818-21sendmail21:00:002
2281780994434,5cyclictest0-21swapper/222:10:162
228178099441,2cyclictest0-21swapper/221:05:022
2281777994433,7cyclictest2284473-21grep19:20:301
2281777994433,7cyclictest2284473-21grep19:20:301
228177599446,3cyclictest0-21swapper/022:40:010
2281775994433,8cyclictest2294944-21apt-key20:25:010
2281775994429,9cyclictest0-21swapper/023:00:320
2281775994429,9cyclictest0-21swapper/023:00:320
2281775994429,8cyclictest0-21swapper/000:10:240
2281780994330,8cyclictest0-21swapper/200:10:232
2281777994335,5cyclictest0-21swapper/123:35:281
2281777994334,5cyclictest2315459-21latency_hist22:40:001
2281777994330,8cyclictest0-21swapper/123:40:291
2281777994330,8cyclictest0-21swapper/123:40:291
2281775994329,8cyclictest0-21swapper/019:35:300
2281775994326,12cyclictest0-21swapper/022:00:260
2281775994326,12cyclictest0-21swapper/022:00:260
2281775994321,19cyclictest131ktimers/000:20:290
2281780994234,6cyclictest2315388-21apt-get22:40:002
2281780994228,9cyclictest2325749-21grep23:50:242
2281777994231,6cyclictest0-21swapper/121:40:301
2281777994230,8cyclictest2299096-21grep20:45:311
2281777994227,9cyclictest0-21swapper/121:30:281
2281775994233,5cyclictest20950irq/209-8000000.ethernet21:00:260
2281775994233,5cyclictest20950irq/209-8000000.ethernet21:00:260
2281775994230,8cyclictest0-21swapper/019:15:000
2281775994217,20cyclictest0-21swapper/021:10:060
228177599421,6cyclictest0-21swapper/021:50:010
228177599421,6cyclictest0-21swapper/021:50:010
2281780994133,5cyclictest168450irq/135-8000000.ethernet-tx200:35:002
2281780994129,8cyclictest2307934-21grep21:40:312
2281780994129,8cyclictest0-21swapper/219:20:302
2281780994129,8cyclictest0-21swapper/219:20:292
2281780994128,8cyclictest0-21swapper/222:30:252
2281777994130,5cyclictest0-21swapper/122:30:241
2281777994128,8cyclictest0-21swapper/123:10:241
2281775994129,5cyclictest0-21swapper/023:35:200
2281775994127,9cyclictest0-21swapper/022:55:270
2281775994115,14cyclictest14-21rcu_preempt00:35:010
228177599411,2cyclictest0-21swapper/023:45:010
228177599411,2cyclictest0-21swapper/023:45:010
2281780994030,5cyclictest2303431-21munin-plugin-st21:15:002
2281780994029,7cyclictest2309772-21grep21:55:272
2281780994028,8cyclictest311ktimers/221:50:102
2281780994027,8cyclictest0-21swapper/221:35:292
2281780994025,8cyclictest0-21swapper/219:15:302
2281780994023,10cyclictest0-21swapper/219:25:302
2281777994030,5cyclictest0-21swapper/120:10:201
2281777994028,7cyclictest0-21swapper/121:20:311
2281777994028,5cyclictest0-21swapper/100:10:161
2281777994027,7cyclictest2332101-21grep00:35:311
2281775994027,9cyclictest0-21swapper/023:30:010
2281775994027,9cyclictest0-21swapper/023:30:010
2281775994026,9cyclictest0-21swapper/019:20:300
2281775994026,9cyclictest0-21swapper/019:20:300
2281775994026,10cyclictest0-21swapper/023:55:280
2281775994025,10cyclictest0-21swapper/022:30:230
228177599401,3cyclictest0-21swapper/022:10:010
228177599401,34cyclictest0-21swapper/020:00:130
228177599401,33cyclictest0-21swapper/020:50:160
228177599401,2cyclictest0-21swapper/019:20:010
2281780993932,4cyclictest168450irq/135-8000000.ethernet-tx220:35:162
2281780993931,6cyclictest2327502-21munin-plugin-st00:05:002
2281780993930,5cyclictest0-21swapper/219:15:012
2281780993926,9cyclictest0-21swapper/220:45:312
228177799396,19cyclictest2310613-21tail22:00:331
228177799396,19cyclictest2310613-21tail22:00:331
2281777993928,5cyclictest0-21swapper/100:15:271
2281777993925,10cyclictest0-21swapper/120:15:301
2281775993931,4cyclictest20950irq/209-8000000.ethernet22:00:000
2281775993928,6cyclictest131ktimers/021:05:260
2281775993927,8cyclictest0-21swapper/021:35:290
2281775993925,9cyclictest0-21swapper/019:55:270
2281775993925,9cyclictest0-21swapper/000:00:300
2281775993924,10cyclictest0-21swapper/020:40:220
2281775993923,8cyclictest0-21swapper/022:45:000
2281775993923,8cyclictest0-21swapper/022:45:000
2281775993918,19cyclictest2295184-21awk20:25:170
228177599391,5cyclictest0-21swapper/020:10:010
228177599391,2cyclictest0-21swapper/023:50:220
2281780993830,3cyclictest2316403-21apt-key22:45:012
2281780993830,3cyclictest2316403-21apt-key22:45:012
2281780993829,5cyclictest0-21swapper/222:50:242
2281780993827,7cyclictest2296551-21grep20:30:322
2281780993827,6cyclictest2330199-21grep00:20:292
2281780993827,6cyclictest2293096-21grep20:10:312
2281780993824,9cyclictest0-21swapper/223:50:012
2281780993824,7cyclictest0-21swapper/220:20:292
2281780993820,10cyclictest0-21swapper/223:15:262
2281777993829,5cyclictest0-21swapper/121:05:171
2281777993828,6cyclictest2290449-21grep19:55:271
2281777993823,8cyclictest0-21swapper/119:30:301
2281777993816,12cyclictest231ktimers/121:35:131
2281775993831,4cyclictest0-21swapper/021:40:130
2281775993831,4cyclictest0-21swapper/020:10:170
228177599381,5cyclictest0-21swapper/022:30:010
2281780993730,4cyclictest168450irq/135-8000000.ethernet-tx219:50:262
2281780993728,6cyclictest2287066-21grep19:35:302
2281780993723,10cyclictest0-21swapper/200:35:312
228177799378,3cyclictest2326493-21mailstats23:55:291
2281777993727,6cyclictest2311692-21grep22:10:241
2281777993727,5cyclictest0-21swapper/120:25:001
2281777993724,9cyclictest0-21swapper/120:05:301
2281777993713,17cyclictest231ktimers/120:30:151
2281775993730,5cyclictest0-21swapper/022:20:010
2281775993726,6cyclictest0-21swapper/021:30:280
2281775993725,8cyclictest0-21swapper/020:55:290
228177599371,3cyclictest0-21swapper/020:30:250
228178099364,20cyclictest2305029-21grep21:20:312
2281780993627,5cyclictest0-21swapper/222:20:252
2281780993626,6cyclictest0-21swapper/220:45:002
2281780993624,6cyclictest2301552-21grep21:00:282
2281780993624,6cyclictest2301552-21grep21:00:282
2281780993622,8cyclictest0-21swapper/223:55:282
2281777993630,3cyclictest2303381-21unixbench_singl21:10:321
2281777993628,5cyclictest2324973-21munin-plugin-st23:50:001
2281777993626,5cyclictest0-21swapper/120:55:291
2281777993622,9cyclictest0-21swapper/123:50:231
2281775993628,5cyclictest0-21swapper/023:31:030
228177599361,2cyclictest0-21swapper/019:55:010
228177599361,21cyclictest0-21swapper/023:15:230
2281780993524,7cyclictest0-21swapper/223:20:292
2281780993523,5cyclictest0-21swapper/219:30:312
228177799355,22cyclictest2304232-21head21:15:291
2281777993525,7cyclictest2291636-21latency_hist20:05:011
2281777993525,5cyclictest2301633-21grep21:00:281
2281777993525,5cyclictest2301633-21grep21:00:281
2281777993525,5cyclictest0-21swapper/123:00:301
2281777993525,5cyclictest0-21swapper/123:00:301
2281775993528,4cyclictest20950irq/209-8000000.ethernet00:15:220
228177599351,21cyclictest2283364-1kworker/0:0H+kblockd22:55:020
228177599351,20cyclictest0-21swapper/022:20:330
228178099346,18cyclictest2310614-21sed22:00:332
228178099346,18cyclictest2310614-21sed22:00:332
228178099343,24cyclictest0-21swapper/223:30:012
228178099343,24cyclictest0-21swapper/223:30:012
2281780993421,7cyclictest2316606-21sshd22:46:302
2281780993421,7cyclictest2316606-21sshd22:46:302
2281780993420,9cyclictest0-21swapper/220:50:242
2281780993419,12cyclictest311ktimers/223:00:152
2281780993419,12cyclictest311ktimers/223:00:152
2281780993418,12cyclictest311ktimers/219:55:102
2281777993425,5cyclictest0-21swapper/123:10:001
2281777993425,4cyclictest0-21swapper/121:55:001
2281777993422,6cyclictest0-21swapper/119:10:011
2281777993421,9cyclictest0-21swapper/120:35:291
2281777993418,13cyclictest231ktimers/121:55:121
2281777993417,12cyclictest231ktimers/120:25:161
228177799341,17cyclictest0-21swapper/119:40:011
228178099334,17cyclictest2319670-21cut23:10:162
2281780993320,10cyclictest311ktimers/222:15:162
228178099331,20cyclictest0-21swapper/223:40:012
2281777993313,13cyclictest22-21rcuc/122:55:011
2281775993328,3cyclictest20950irq/209-8000000.ethernet21:50:150
2281775993327,3cyclictest0-21swapper/019:45:140
228177599331,2cyclictest0-21swapper/023:15:010
228177799328,12cyclictest0-21swapper/122:25:011
2281777993218,10cyclictest0-21swapper/120:40:221
2281777993214,11cyclictest1666-21snmpd22:06:361
2281775993226,4cyclictest20950irq/209-8000000.ethernet20:15:260
2281775993214,6cyclictest1923869-1kworker/0:2H+mmc_complete19:10:010
2281780993118,9cyclictest30-21rcuc/221:25:022
2281777993119,7cyclictest0-21swapper/100:20:271
2281777993118,7cyclictest0-21swapper/123:30:021
2281777993118,7cyclictest0-21swapper/123:30:011
2281777993116,10cyclictest231ktimers/122:15:131
228177799311,25cyclictest0-21swapper/122:29:311
2281777993112,3cyclictest27350irq/343-s-wl18xx22:45:101
2281777993112,3cyclictest27350irq/343-s-wl18xx22:45:101
2281780993011,4cyclictest27350irq/343-s-wl18xx22:08:572
228177799306,4cyclictest27350irq/343-s-wl18xx19:15:311
228177799303,20cyclictest2317996-21phc2sys22:55:251
2281777993015,12cyclictest231ktimers/119:45:121
2281777993014,11cyclictest1666-21snmpd00:25:341
228177599302,4cyclictest2316623-21latency_hist22:50:000
228177599302,4cyclictest2316623-21latency_hist22:50:000
2281775993024,3cyclictest0-21swapper/023:49:450
228177599301,21cyclictest2324412-1kworker/0:1H+kblockd00:10:010
228177599301,17cyclictest0-21swapper/021:29:470
2281780992917,8cyclictest2293931-21grep20:15:302
2281777992925,2cyclictest0-21swapper/122:40:301
2281777992925,2cyclictest0-21swapper/122:40:291
2281777992922,4cyclictest2331278-21grep00:30:241
228177799291,16cyclictest0-21swapper/121:48:261
228177799291,16cyclictest0-21swapper/121:48:261
228177799291,15cyclictest0-21swapper/100:02:421
228178099281,25cyclictest0-21swapper/222:55:252
228178099281,21cyclictest0-21swapper/223:06:172
2281780992810,13cyclictest30-21rcuc/222:30:012
228177799281,16cyclictest0-21swapper/120:50:431
228177599281,3cyclictest2330657-21latency_hist00:30:020
228178099271,21cyclictest0-21swapper/221:45:152
228178099271,21cyclictest0-21swapper/221:45:152
2281775992721,4cyclictest2283364-1kworker/0:0H+mmc_complete23:10:010
228178099266,4cyclictest27250irq/343-wl18xx00:09:012
228178099261,3cyclictest2281737-21latency_hist19:10:012
228178099261,23cyclictest0-21swapper/220:07:432
228177799263,17cyclictest2305474-21latency_hist21:30:011
228177799243,13cyclictest2327730-21latency_hist00:10:011
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional