You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2024-12-26 - 11:52

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #7

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rack7slot7s.osadl.org (updated Thu Dec 26, 2024 00:43:52)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1892423630,2sleep30-21swapper/319:05:343
1913023529,2sleep10-21swapper/119:08:131
1937699340,4cyclictest224-21systemd-journal21:18:160
19384992826,1cyclictest502-21rs:main2
1937699280,1cyclictest0-21swapper/022:02:290
1907222822,2sleep20-21swapper/219:07:302
1937699260,1cyclictest0-21swapper/021:37:010
1937699260,1cyclictest0-21swapper/021:37:010
1938499253,3cyclictest558-21lldpd23:23:472
1938499251,3cyclictest30021-21timerandwakeup23:40:282
1938499251,1cyclictest7744-21snmpd23:15:212
1937699250,1cyclictest0-21swapper/000:37:290
1938099242,4cyclictest502-21rs:main1
1937699245,18cyclictest0-21swapper/022:12:050
1937699241,1cyclictest7744-21snmpd22:28:030
19384992321,1cyclictest0-21swapper/222:37:462
19384992320,2cyclictest32-21ksoftirqd/221:30:002
1938499231,1cyclictest12624-21diskmemload21:15:322
1938799220,4cyclictest0-21swapper/323:43:063
1938499222,18cyclictest12624-21diskmemload23:48:342
19384992220,1cyclictest558-21lldpd19:23:212
19380992213,4cyclictest224-21systemd-journal21:40:561
19380992213,4cyclictest224-21systemd-journal21:40:561
19376992219,2cyclictest7744-21snmpd21:08:360
264732210,0chrt26475-21ssh22:42:533
1938799217,6cyclictest224-21systemd-journal00:35:193
1938799211,19cyclictest0-21swapper/322:20:123
1938499217,11cyclictest224-21systemd-journal00:22:252
1938499212,16cyclictest7744-21snmpd22:43:122
19384992118,2cyclictest7744-21snmpd20:15:132
1938099215,8cyclictest224-21systemd-journal21:24:201
1937699217,6cyclictest558-21lldpd22:52:180
1937699217,10cyclictest500-21in:imuxsock20:40:240
19376992118,1cyclictest7744-21snmpd21:03:240
1937699211,7cyclictest224-21systemd-journal23:59:100
1938799207,8cyclictest7744-21snmpd21:16:493
19387992016,2cyclictest0-21swapper/300:07:143
1938799201,5cyclictest224-21systemd-journal23:35:143
1938499204,10cyclictest224-21systemd-journal21:30:242
1938499200,2cyclictest0-21swapper/222:47:142
1938099208,4cyclictest224-21systemd-journal21:34:441
1938099204,15cyclictest20805-21apt-get20:20:111
1938099204,12cyclictest224-21systemd-journal00:14:191
1938099203,3cyclictest12624-21diskmemload23:17:561
1938099201,16cyclictest11345-21apt-get00:20:151
1938099200,1cyclictest141rcu_preempt22:46:041
1937699204,13cyclictest224-21systemd-journal23:04:490
1937699200,18cyclictest0-21swapper/021:22:520
1938799197,8cyclictest500-21in:imuxsock22:49:123
1938799195,8cyclictest224-21systemd-journal22:02:263
1938499198,5cyclictest224-21systemd-journal22:53:292
1938499194,14cyclictest558-21lldpd22:04:312
1938499193,9cyclictest224-21systemd-journal23:54:312
19384991916,2cyclictest32-21ksoftirqd/200:40:002
1938499191,1cyclictest7744-21snmpd00:15:272
1938099191,1cyclictest141rcu_preempt19:25:141
1937699196,2cyclictest141rcu_preempt22:17:130
1937699195,9cyclictest11728-21gdbus00:06:330
1938799186,7cyclictest224-21systemd-journal22:13:023
1938799183,11cyclictest224-21systemd-journal21:27:243
1938799182,14cyclictest13539-21ssh21:37:243
1938799182,14cyclictest13539-21ssh21:37:243
19387991815,2cyclictest21145-21ssh22:39:073
19384991814,3cyclictest32-21ksoftirqd/220:50:222
19384991813,2cyclictest224-21systemd-journal23:00:142
1938499180,2cyclictest12624-21diskmemload22:25:502
1938499180,16cyclictest12624-21diskmemload23:56:462
1938099187,4cyclictest7744-21snmpd22:36:441
1938099186,6cyclictest224-21systemd-journal21:12:431
1938099185,7cyclictest558-21lldpd23:03:251
1938099184,13cyclictest500-21in:imuxsock00:28:401
1938099183,7cyclictest224-21systemd-journal23:50:081
1938099183,6cyclictest224-21systemd-journal22:33:161
1938099182,13cyclictest224-21systemd-journal23:57:481
1938099181,2cyclictest0-21swapper/120:50:261
1938099180,17cyclictest0-21swapper/122:18:441
19376991815,1cyclictest558-21lldpd21:10:330
1938799178,4cyclictest0-21swapper/321:42:333
1938799178,4cyclictest0-21swapper/321:42:333
1938799176,6cyclictest7744-21snmpd22:55:153
1938799175,5cyclictest224-21systemd-journal23:20:123
1938799174,6cyclictest224-21systemd-journal00:29:313
1938799171,4cyclictest224-21systemd-journal21:47:503
19387991711,5cyclictest558-21lldpd00:10:593
1938799171,15cyclictest12624-21diskmemload22:50:443
1938799170,16cyclictest0-21swapper/321:59:073
1938499175,8cyclictest558-21lldpd23:10:112
1938499175,8cyclictest558-21lldpd23:10:112
1938499173,1cyclictest7744-21snmpd21:24:462
1938499173,13cyclictest7744-21snmpd22:23:452
1938499171,1cyclictest7744-21snmpd21:05:132
1938499171,12cyclictest224-21systemd-journal22:30:362
1938099179,3cyclictest224-21systemd-journal19:36:281
1938099178,8cyclictest500-21in:imuxsock23:08:241
1938099178,4cyclictest224-21systemd-journal23:45:481
1938099175,6cyclictest224-21systemd-journal23:25:431
1938099175,3cyclictest224-21systemd-journal23:11:231
1938099175,3cyclictest224-21systemd-journal23:11:221
19380991713,3cyclictest25-21ksoftirqd/121:39:281
19380991713,3cyclictest25-21ksoftirqd/121:39:281
19380991711,4cyclictest25-21ksoftirqd/100:15:271
1937699178,4cyclictest558-21lldpd19:43:520
1937699178,4cyclictest224-21systemd-journal22:41:030
1937699177,2cyclictest224-21systemd-journal00:31:380
1937699175,6cyclictest224-21systemd-journal23:08:330
1937699173,5cyclictest224-21systemd-journal22:30:200
19376991714,2cyclictest558-21lldpd23:40:170
1937699170,1cyclictest0-21swapper/021:31:370
1938799165,8cyclictest502-21rs:main3
1938799164,8cyclictest7744-21snmpd23:30:133
1938799164,7cyclictest24151-21apt-get23:10:093
1938799164,7cyclictest24151-21apt-get23:10:093
1938799161,6cyclictest224-21systemd-journal20:45:003
1938499162,13cyclictest0-21swapper/222:06:392
1938499160,1cyclictest0-21swapper/221:58:142
1938499160,15cyclictest0-21swapper/223:38:182
1938499160,15cyclictest0-21swapper/200:00:482
1938099169,3cyclictest224-21systemd-journal22:10:101
1938099166,5cyclictest224-21systemd-journal20:55:111
19380991611,2cyclictest224-21systemd-journal22:22:451
1938099160,1cyclictest141rcu_preempt21:56:131
1937699169,3cyclictest224-21systemd-journal23:39:270
1937699164,6cyclictest7744-21snmpd20:10:140
1937699163,7cyclictest22002-21awk22:40:000
1937699163,10cyclictest0-21swapper/000:01:170
1937699162,13cyclictest7114-21taskset23:21:180
1937699160,1cyclictest0-21swapper/000:14:300
1938799157,6cyclictest31837-21ssh21:53:203
1938799154,9cyclictest13544-21aten2_r7power_v20:05:143
1938799154,5cyclictest224-21systemd-journal19:40:273
1938799154,4cyclictest224-21systemd-journal22:15:243
1938799153,3cyclictest224-21systemd-journal23:55:293
1938799152,7cyclictest224-21systemd-journal00:22:203
1938799152,3cyclictest224-21systemd-journal19:45:183
19387991512,2cyclictest6967-21sh22:27:273
19387991510,3cyclictest8510-21ssh21:33:493
19387991510,1cyclictest224-21systemd-journal22:06:373
1938799150,2cyclictest0-21swapper/323:50:113
1938499159,5cyclictest17178-21sed23:30:222
1938499157,5cyclictest7744-21snmpd21:00:152
1938499156,4cyclictest224-21systemd-journal23:09:282
1938499155,6cyclictest224-21systemd-journal19:45:142
19384991512,2cyclictest32-21ksoftirqd/223:25:012
1938499150,1cyclictest0-21swapper/200:29:062
1938099159,2cyclictest224-21systemd-journal22:42:091
1938099156,3cyclictest224-21systemd-journal23:41:291
1938099151,10cyclictest224-21systemd-journal19:59:301
1938099150,8cyclictest141rcu_preempt21:28:161
1938099150,1cyclictest141rcu_preempt19:20:181
1937699158,3cyclictest7744-21snmpd00:20:080
1937699157,4cyclictest12624-21diskmemload23:54:480
1937699155,4cyclictest558-21lldpd19:20:200
1937699152,10cyclictest7744-21snmpd21:27:160
1937699151,3cyclictest7744-21snmpd20:50:130
19376991513,1cyclictest558-21lldpd23:15:040
1937699151,11cyclictest12624-21diskmemload22:58:190
19376991510,4cyclictest558-21lldpd23:12:330
19376991510,4cyclictest558-21lldpd23:12:330
1937699150,9cyclictest1261-21perf19:39:590
1937699150,1cyclictest0-21swapper/000:29:470
1938799149,3cyclictest28896-21cat19:29:553
1938799149,1cyclictest224-21systemd-journal23:47:103
1938799145,2cyclictest224-21systemd-journal23:16:423
1938799144,6cyclictest502-21rs:main3
19387991411,2cyclictest23329-21ssh00:31:053
19387991411,2cyclictest19036-21ssh23:04:393
1938499148,1cyclictest224-21systemd-journal22:19:032
1938499146,7cyclictest7744-21snmpd20:30:002
1938499141,6cyclictest224-21systemd-journal00:08:042
19384991411,2cyclictest3403-21ssh00:13:572
19384991411,2cyclictest32-21ksoftirqd/220:40:002
19384991410,3cyclictest5753-21basename20:55:122
19384991410,3cyclictest500-21in:imuxsock19:30:342
19384991410,3cyclictest15381-21chrt20:08:092
19384991410,3cyclictest10789-21basename20:00:002
1938499140,2cyclictest0-21swapper/221:52:572
1938099149,2cyclictest224-21systemd-journal23:32:571
1938099146,2cyclictest224-21systemd-journal00:00:271
1938099145,4cyclictest224-21systemd-journal19:42:581
1938099144,4cyclictest224-21systemd-journal00:37:541
1938099143,5cyclictest224-21systemd-journal23:38:281
1938099143,5cyclictest224-21systemd-journal22:57:321
1938099143,3cyclictest224-21systemd-journal21:51:061
1938099142,7cyclictest224-21systemd-journal21:46:201
1938099142,5cyclictest224-21systemd-journal21:17:131
1938099141,6cyclictest224-21systemd-journal21:06:291
1938099141,4cyclictest224-21systemd-journal22:27:271
19380991410,3cyclictest27518-21taskset20:30:331
1938099140,7cyclictest224-21systemd-journal20:10:141
1938099140,2cyclictest0-21swapper/119:50:101
1938099140,1cyclictest141rcu_preempt00:06:391
1938099140,10cyclictest224-21systemd-journal00:33:341
1937699148,4cyclictest500-21in:imuxsock20:20:000
1937699143,3cyclictest224-21systemd-journal00:15:140
1937699141,5cyclictest502-21rs:main0
19376991410,3cyclictest22841-21ssh21:45:220
19376991410,3cyclictest19834-21tr19:10:120
1937699140,2cyclictest0-21swapper/021:43:170
1937699140,2cyclictest0-21swapper/021:43:170
304872131,2sleep1224-21systemd-journal20:39:431
1938799138,4cyclictest23327-21grep19:15:263
1938799135,4cyclictest500-21in:imuxsock20:20:013
1938799135,4cyclictest224-21systemd-journal23:26:373
1938799135,4cyclictest224-21systemd-journal23:06:373
1938799135,3cyclictest224-21systemd-journal20:26:183
1938799134,5cyclictest224-21systemd-journal21:20:413
1938799131,7cyclictest11295-21cpuspeed_turbos20:00:153
1938799131,5cyclictest502-21rs:main3
19387991310,2cyclictest8931-21tr19:55:123
19387991310,2cyclictest5169-21seq20:51:233
19387991310,2cyclictest21453-21taskset19:12:023
19387991310,2cyclictest20425-21sh00:00:203
19387991310,2cyclictest1577-21fschecks_count20:45:163
19387991310,2cyclictest12196-21grep21:05:273
1938799130,12cyclictest7370-21sh00:16:043
1938799130,12cyclictest30574-21python19:30:243
1938499139,3cyclictest27644-21taskset20:32:102
1938499139,3cyclictest22075-21ssh22:12:332
1938499139,3cyclictest18153-21cat21:40:282
1938499139,3cyclictest18153-21cat21:40:282
1938499137,5cyclictest7744-21snmpd21:35:222
1938499137,5cyclictest7744-21snmpd21:35:212
1938499135,2cyclictest224-21systemd-journal22:55:122
1938499133,6cyclictest224-21systemd-journal00:30:232
1938499131,8cyclictest500-21in:imuxsock20:10:132
19384991310,2cyclictest31573-21cut19:35:112
19384991310,2cyclictest24101-21ssh21:46:532
1938499130,12cyclictest7298-21memory19:50:182
1938099137,2cyclictest224-21systemd-journal22:50:091
1938099135,7cyclictest558-21lldpd21:00:171
1938099135,4cyclictest224-21systemd-journal20:05:191
1938099135,4cyclictest224-21systemd-journal19:48:501
1938099133,4cyclictest224-21systemd-journal22:00:211
1938099131,7cyclictest62050irq/128-enp2s0-19:30:141
19380991310,2cyclictest25-21ksoftirqd/120:45:211
19380991310,2cyclictest19550-21awk20:15:221
19380991310,2cyclictest11123-21grep20:00:141
1937699139,3cyclictest500-21in:imuxsock21:55:310
1937699139,3cyclictest28593-21chrt22:45:020
1937699137,2cyclictest20330-21awk20:20:000
1937699134,5cyclictest500-21in:imuxsock20:00:230
1937699134,5cyclictest224-21systemd-journal23:30:160
1937699134,5cyclictest224-21systemd-journal19:17:250
1937699131,4cyclictest0-21swapper/022:07:060
19376991311,1cyclictest0-21swapper/020:07:180
19376991310,2cyclictest9320-21cut19:55:140
19376991310,2cyclictest7744-21snmpd20:45:170
19376991310,2cyclictest7104-21basename19:50:160
19376991310,2cyclictest31693-21chrt21:53:120
19376991310,2cyclictest28542-21basename20:35:150
19376991310,2cyclictest25425-21chrt20:29:110
1938799129,2cyclictest26253-21df_abs20:30:153
1938799129,2cyclictest24497-21cut19:20:133
1938799129,2cyclictest16353-21sed20:10:153
1938799129,2cyclictest10342sleep319:37:363
1938799128,3cyclictest7814-21chrt20:59:523
1938799124,4cyclictest224-21systemd-journal19:50:103
1938799122,5cyclictest224-21systemd-journal21:01:453
1938799121,7cyclictest224-21systemd-journal20:16:123
1938499129,2cyclictest28867-21taskset19:29:342
1938499129,2cyclictest2753-21tr19:40:222
1938499127,4cyclictest7744-21snmpd20:40:032
1938499125,6cyclictest7744-21snmpd19:10:112
1938499125,4cyclictest11624-21df_inode20:00:162
1938499125,3cyclictest224-21systemd-journal20:45:262
1938499121,10cyclictest558-21lldpd20:20:112
1938099129,2cyclictest24133-21grep20:25:161
1938099128,3cyclictest19961-21expr19:10:121
1938099124,4cyclictest224-21systemd-journal20:40:021
1938099124,4cyclictest224-21systemd-journal19:16:361
1938099121,7cyclictest224-21systemd-journal23:20:121
1937699129,2cyclictest7469-21taskset20:55:250
1937699129,2cyclictest502-21rs:main0
1937699129,2cyclictest29255-21awk19:30:130
1937699129,2cyclictest2519-21sh23:45:330
1937699129,2cyclictest12173-21ssh23:26:450
1937699124,4cyclictest224-21systemd-journal19:47:590
1938499113,4cyclictest224-21systemd-journal19:17:472
1937699113,4cyclictest224-21systemd-journal20:33:190
19175282,2sleep00-21swapper/019:08:480
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional