You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2024-07-27 - 14:24

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #2, slot #7

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rack2slot7s.osadl.org (updated Sat Jul 27, 2024 12:42:48)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1798555995644,8cyclictest1917915-21fschecks_time11:06:032
1798555995344,5cyclictest817-21mta-sts-daemon09:21:162
1798554995242,6cyclictest1944373-21cron11:40:001
1798553995238,11cyclictest1878350-21cut10:10:000
1798553995238,11cyclictest1878350-21cut10:10:000
1798553995235,6cyclictest12550irq/32-eth012:11:100
1798553995235,6cyclictest12550irq/32-eth012:11:100
179855599514,39cyclictest1929826-21ssh11:21:092
1798553995039,7cyclictest1881886-21systemd-run10:15:000
1798554994924,22cyclictest1809658-21latency_hist07:45:011
1798554994918,28cyclictest1872585-21missed_timers10:01:071
1798555994842,3cyclictest0-21swapper/212:36:172
1798554994838,6cyclictest1812700-21systemd-run07:55:011
1798554994838,6cyclictest1798559-21true07:10:001
179855499483,4cyclictest171rcu_preempt09:31:171
1798554994823,21cyclictest1857337-21idleruntime-cro09:40:001
179855499482,19cyclictest1897400-21ssh10:36:171
1798554994819,25cyclictest335-21avahi-daemon11:25:011
179855499472,39cyclictest1950048-21ssh11:46:171
179855499472,18cyclictest1962079-21ssh12:01:161
1798555994637,6cyclictest1811133-21systemd-run07:50:012
1798555994629,15cyclictest351ktimers/208:36:112
1798554994637,6cyclictest1936353-21munin-plugin-st11:30:001
1798554994636,6cyclictest1970126-21ssh12:11:141
1798554994636,6cyclictest1970126-21ssh12:11:141
179855499461,18cyclictest1947317-21ssh11:42:541
1798555994538,4cyclictest1888903-21systemd-run10:25:012
1798554994536,6cyclictest1913417-21systemctl11:00:011
1798554994536,6cyclictest1913417-21systemctl11:00:011
1798554994523,19cyclictest1878364-21systemd-run10:10:011
1798554994523,19cyclictest1878364-21systemd-run10:10:011
179855499452,20cyclictest1844924-21ssh09:21:221
1798554994521,21cyclictest1835436-21latency09:06:101
1798554994519,3cyclictest0-21swapper/112:20:001
179855499450,19cyclictest1965963-21ssh12:06:101
179855599445,32cyclictest1893945-21ssh10:31:202
1798555994432,5cyclictest0-21swapper/209:16:162
1798554994435,6cyclictest339-21dbus-daemon09:50:001
179855499442,18cyclictest1918489-21ntp_states11:06:171
179855499442,17cyclictest1831059-21ps08:51:141
179855499442,17cyclictest1831059-21ps08:51:141
1798554994419,18cyclictest271ktimers/112:26:121
1798554994417,24cyclictest1806794-21aten_r2power_vo07:35:571
179855499441,16cyclictest1890453-21ssh10:26:181
1798553994437,4cyclictest1992645-21awk12:40:010
1798553994417,17cyclictest1966136-21ssh12:06:170
1798554994322,17cyclictest0-21swapper/109:55:021
1798555994233,4cyclictest0-21swapper/209:36:492
1798555994222,15cyclictest351ktimers/209:01:142
179855499422,20cyclictest1907827-21ssh10:51:141
1798554994215,4cyclictest0-21swapper/112:21:211
1798553994232,7cyclictest418-21gdbus09:25:010
1798553994232,6cyclictest1917651-21aten_r2power_fr11:05:590
1798553994231,8cyclictest1940479-21latency_hist11:35:010
1798553994231,8cyclictest1871669-21sshd10:00:180
1798553994231,7cyclictest1961987-21ssh12:01:130
1798555994134,4cyclictest1823907-21kworker/u8:0-xprtiod09:10:012
1798555994133,4cyclictest0-21swapper/210:06:152
1798555994133,4cyclictest0-21swapper/210:06:152
179855499414,31cyclictest1886780-21ssh10:21:071
179855499412,17cyclictest1869343-21ssh09:56:161
1798554994121,16cyclictest0-21swapper/112:30:591
1798554994119,3cyclictest0-21swapper/110:41:041
1798554994118,2cyclictest0-21swapper/107:15:001
1798554994116,3cyclictest0-21swapper/108:11:011
1798553994132,5cyclictest1837298-21fschecks_count09:11:030
1798553994130,8cyclictest1834759-21latency_hist09:05:010
1798555994032,5cyclictest814-21mta-sts-daemon12:29:542
179855599402,32cyclictest1925846-21ssh11:16:102
1798554994028,8cyclictest1837617-21missed_timers09:11:081
179855499402,15cyclictest1922095-21ssh11:11:191
179855499402,14cyclictest1953895-21ssh11:51:091
1798554994017,3cyclictest817-21mta-sts-daemon10:46:241
1798554994015,6cyclictest1802237-21fschecks_count07:20:591
1798554994013,3cyclictest0-21swapper/111:57:411
179855499401,16cyclictest1925819-21ntpq11:16:091
179855499401,12cyclictest1841614-21sort09:16:211
1798553994023,9cyclictest0-21swapper/009:26:180
1798553994021,11cyclictest151ktimers/009:06:140
179855399401,32cyclictest151ktimers/008:01:110
1798555993931,5cyclictest1847473-21/usr/sbin/munin09:26:112
1798555993930,5cyclictest0-21swapper/210:16:172
179855599391,31cyclictest1945986-21ssh11:41:142
179855499392,14cyclictest3586050-21snmpd11:33:081
1798553993930,6cyclictest963713-21cups-browsed11:10:220
1798553993930,6cyclictest1804856-21systemd-run07:30:010
179855399392,3cyclictest0-21swapper/009:41:070
1798555993830,5cyclictest1965643-21if_eth012:06:042
1798555993829,4cyclictest0-21swapper/210:56:152
1798555993829,4cyclictest0-21swapper/210:56:152
179855499383,11cyclictest357-21mta-sts-daemon11:01:331
1798553993830,5cyclictest1807998-21systemd-run07:40:000
1798553993828,6cyclictest813-21mta-sts-daemon08:36:090
1798553993826,6cyclictest1897260-21ssh10:36:100
1798555993732,2cyclictest0-21swapper/211:14:192
1798554993712,4cyclictest1809769-21kworker/u8:10-xprtiod08:46:141
1798554993712,4cyclictest1809769-21kworker/u8:10-xprtiod08:46:141
179855499371,16cyclictest1883290-21ssh10:16:111
179855399376,25cyclictest1820019-21sshd08:16:180
179855399374,5cyclictest171rcu_preempt12:16:080
179855399373,24cyclictest1841235-21ssh09:16:090
1798553993723,11cyclictest0-21swapper/011:00:010
1798553993723,11cyclictest0-21swapper/011:00:010
179855399372,25cyclictest1934755-21ssh11:26:480
1798555993628,5cyclictest1862071-21latency09:46:062
1798555993626,3cyclictest0-21swapper/209:58:262
1798555993624,9cyclictest1899026-21sh10:39:182
179855499362,26cyclictest1848311-21ssh09:26:131
1798554993612,4cyclictest0-21swapper/107:31:001
1798553993627,6cyclictest339-21dbus-daemon11:50:000
1798553993627,6cyclictest339-21dbus-daemon10:35:010
1798553993627,6cyclictest1851306-21fschecks_count09:31:060
1798553993626,7cyclictest1818953-21cron08:15:000
1798553993624,8cyclictest814-21mta-sts-daemon10:41:000
1798553993620,10cyclictest151ktimers/009:46:160
179855599353,8cyclictest1890341-21ssh10:26:132
1798555993527,5cyclictest963713-21cups-browsed10:00:302
1798555993527,5cyclictest1970650-21unixbench_singl12:11:222
1798555993527,5cyclictest1970650-21unixbench_singl12:11:222
179855499353,10cyclictest357-21mta-sts-daemon12:39:051
1798554993527,5cyclictest1833684-21fschecks_time09:01:041
1798553993527,5cyclictest963713-21cups-browsed07:11:010
1798553993527,5cyclictest1828426-21systemd-run08:45:000
1798553993525,8cyclictest1944387-21sendmail11:40:000
1798553993525,5cyclictest1814262-21idleruntime-cro08:00:000
1798553993515,13cyclictest151ktimers/011:16:120
179855399351,29cyclictest1957955-21ssh11:56:100
1798555993425,6cyclictest339-21dbus-daemon11:36:102
179855599342,23cyclictest1956560-21wc11:55:012
179855599342,23cyclictest1914807-21sh11:01:092
179855599341,6cyclictest1301320-21kworker/u8:4+rpciod07:28:472
1798554993425,6cyclictest335-21avahi-daemon08:05:011
1798554993425,4cyclictest0-21swapper/110:31:171
1798554993424,6cyclictest0-21swapper/107:28:451
1798554993414,14cyclictest339-21dbus-daemon07:18:181
1798553993424,7cyclictest963713-21cups-browsed10:48:580
1798553993423,8cyclictest1869823-21unixbench_singl09:56:230
1798553993423,7cyclictest1886907-21ssh10:21:140
1798553993421,10cyclictest1883808-21unixbench-2d10:16:230
1798553993418,11cyclictest151ktimers/008:51:110
1798553993418,11cyclictest151ktimers/008:51:110
1798555993328,2cyclictest0-21swapper/209:00:002
1798555993326,4cyclictest1860857-21cron09:45:002
1798555993324,4cyclictest0-21swapper/209:51:122
179855599332,23cyclictest1851890-21sshd09:31:182
1798554993322,8cyclictest1827677-21missed_timers08:41:081
1798554993321,9cyclictest1823040-21ntp_kernel_err08:26:121
1798553993327,3cyclictest0-21swapper/008:35:000
1798553993325,5cyclictest963713-21cups-browsed08:47:180
1798553993325,5cyclictest963713-21cups-browsed08:47:180
1798553993325,5cyclictest0-21swapper/009:51:010
1798553993324,4cyclictest0-21swapper/010:26:160
1798553993324,3cyclictest0-21swapper/011:55:010
179855399331,25cyclictest1929991-21ssh11:21:160
1798555993226,3cyclictest0-21swapper/210:51:102
1798555993225,4cyclictest1824222-21fschecks_count08:31:012
1798555993224,5cyclictest963713-21cups-browsed11:45:362
1798555993224,5cyclictest1964522-21latency_hist12:05:022
1798555993223,7cyclictest1838434-21sh09:11:252
1798554993228,2cyclictest0-21swapper/108:00:001
1798554993224,5cyclictest0-21swapper/108:40:001
179855399323,23cyclictest1914796-21ssh11:01:090
1798553993224,5cyclictest1908354-21unixbench_multi10:51:250
1798553993224,5cyclictest1854591-21aten_r2power_vo09:35:590
1798553993223,7cyclictest1948481-21latency_hist11:45:020
179855599313,20cyclictest1900857-21ssh10:41:152
1798555993125,2cyclictest0-21swapper/210:11:182
1798555993124,4cyclictest1828716-21aten_r2power_fr08:46:012
1798555993124,4cyclictest1828716-21aten_r2power_fr08:46:012
1798555993124,4cyclictest1801683-21cut07:20:002
1798555993123,5cyclictest963713-21cups-browsed12:20:502
1798555993122,6cyclictest1938322-21ls11:31:212
1798555993122,6cyclictest1933170-21aten2.4-expect11:25:572
1798555993122,6cyclictest1828391-21cron08:45:002
1798555993121,7cyclictest1818963-21/usr/sbin/munin08:15:012
1798554993124,4cyclictest1824304-21gltestperf08:31:021
1798554993123,5cyclictest1822017-21unixbench_multi08:21:211
1798554993123,3cyclictest0-21swapper/109:40:591
1798553993123,5cyclictest1809564-21systemd-run07:45:000
1798553993123,5cyclictest0-21swapper/012:21:120
179855399312,22cyclictest1983009-21rm12:26:480
1798553993119,9cyclictest0-21swapper/007:51:220
1798553993116,12cyclictest0-21swapper/008:25:000
1798555993024,3cyclictest0-21swapper/212:16:022
179855599302,20cyclictest1986165-21ssh12:31:152
1798555993020,7cyclictest1815185-21ntp_kernel_err08:01:112
1798554993022,5cyclictest1811010-21tail07:46:231
1798553993022,6cyclictest0-21swapper/012:35:010
1798553993022,5cyclictest963713-21cups-browsed07:47:550
1798553993022,5cyclictest1806412-21systemd-run07:35:000
1798555992922,4cyclictest1813604-21ntp_kernel_err07:56:052
1798555992922,4cyclictest1806911-21fschecks_count07:35:592
1798555992922,3cyclictest0-21swapper/207:30:182
179855599292,20cyclictest1958007-21ssh11:56:122
1798555992920,7cyclictest1819685-21kernelversion08:16:072
1798555992920,7cyclictest1808887-21netstat07:41:072
1798555992920,6cyclictest1798558-21systemd-run07:10:002
1798555992919,7cyclictest1903655-21cpu10:46:002
1798554992918,8cyclictest1816781-21ntp_kernel_pll_08:06:081
1798553992917,9cyclictest1823702-21true08:30:000
179855599284,6cyclictest171rcu_preempt08:21:112
1798554992820,5cyclictest339-21dbus-daemon10:13:051
1798554992720,4cyclictest0-21swapper/108:20:001
179855499270,20cyclictest1832469-21sshd08:56:181
1798553992720,4cyclictest1803259-21cron07:25:000
1798553992719,6cyclictest419331-21systemd-journal09:00:000
1798553992718,6cyclictest335-21avahi-daemon08:06:160
1798553992718,6cyclictest1801563-21sed07:16:240
1798555992619,4cyclictest1803257-21cron07:25:002
1798555992519,3cyclictest1800194-21latency_hist07:15:012
1798555992519,3cyclictest0-21swapper/208:55:002
1798555992519,3cyclictest0-21swapper/208:55:002
179855599242,17cyclictest1823224-21ps08:26:202
1798555992418,3cyclictest0-21swapper/207:55:012
1798555992416,5cyclictest391-21systemd-logind08:10:002
179855699194,8cyclictest0-21swapper/311:51:093
179855699185,5cyclictest0-21swapper/310:46:093
179855699182,11cyclictest0-21swapper/311:41:143
1798553991810,5cyclictest418-21gdbus07:10:010
179855699172,10cyclictest0-21swapper/307:28:473
179855699165,4cyclictest0-21swapper/309:16:113
179855699164,6cyclictest0-21swapper/310:36:193
179855699164,4cyclictest0-21swapper/308:26:183
179855699163,7cyclictest0-21swapper/312:11:093
179855699163,7cyclictest0-21swapper/312:11:093
179855699163,4cyclictest0-21swapper/307:46:123
179855699162,8cyclictest0-21swapper/312:06:173
179855699162,8cyclictest0-21swapper/311:16:093
179855699162,8cyclictest0-21swapper/310:56:143
179855699162,8cyclictest0-21swapper/310:56:143
179855699162,5cyclictest0-21swapper/307:31:093
179855699162,5cyclictest0-21swapper/307:16:143
179855699161,7cyclictest0-21swapper/312:36:093
179855699161,6cyclictest0-21swapper/308:56:213
179855699154,6cyclictest0-21swapper/310:41:003
179855699153,6cyclictest0-21swapper/312:31:183
179855699152,8cyclictest0-21swapper/309:36:023
179855699152,7cyclictest0-21swapper/312:16:113
179855699151,8cyclictest0-21swapper/311:11:163
179855699151,8cyclictest0-21swapper/309:11:163
179855699145,4cyclictest0-21swapper/310:21:173
179855699144,5cyclictest0-21swapper/311:06:133
179855699143,7cyclictest0-21swapper/310:06:103
179855699143,7cyclictest0-21swapper/310:06:103
179855699143,6cyclictest0-21swapper/312:21:113
179855699143,6cyclictest0-21swapper/309:56:203
179855699143,5cyclictest0-21swapper/307:21:073
179855699143,4cyclictest0-21swapper/307:41:093
179855699142,8cyclictest0-21swapper/311:36:093
179855699142,8cyclictest0-21swapper/309:41:033
179855699142,7cyclictest0-21swapper/312:01:173
179855699142,7cyclictest0-21swapper/310:31:173
179855699142,7cyclictest0-21swapper/309:26:053
179855699142,7cyclictest0-21swapper/309:21:183
179855699142,6cyclictest0-21swapper/310:00:583
179855699141,8cyclictest0-21swapper/310:11:213
179855699141,6cyclictest0-21swapper/308:21:113
179855699141,5cyclictest0-21swapper/309:06:143
179855699141,3cyclictest0-21swapper/311:46:173
179855699137,4cyclictest0-21swapper/312:30:003
179855699133,6cyclictest0-21swapper/311:56:023
179855699133,6cyclictest0-21swapper/310:51:123
179855699133,6cyclictest0-21swapper/309:31:063
179855699133,5cyclictest0-21swapper/308:06:093
179855699132,7cyclictest0-21swapper/311:26:003
179855699132,7cyclictest0-21swapper/310:26:103
179855699132,6cyclictest0-21swapper/308:31:083
179855699131,8cyclictest0-21swapper/311:31:013
179855699131,7cyclictest0-21swapper/311:01:023
179855699131,6cyclictest0-21swapper/308:46:153
179855699131,6cyclictest0-21swapper/308:46:153
179855699131,6cyclictest0-21swapper/308:36:173
179855699131,6cyclictest0-21swapper/308:01:113
179855699131,6cyclictest0-21swapper/307:36:093
179855699125,4cyclictest0-21swapper/309:51:013
179855699123,5cyclictest0-21swapper/311:21:023
179855699123,5cyclictest0-21swapper/310:16:003
179855699120,8cyclictest0-21swapper/309:46:223
179855699112,5cyclictest0-21swapper/308:41:043
179855699111,6cyclictest0-21swapper/308:16:133
179855699111,6cyclictest0-21swapper/308:11:183
179855699104,4cyclictest0-21swapper/309:01:123
179855699101,5cyclictest0-21swapper/308:51:043
179855699101,5cyclictest0-21swapper/308:51:043
179855699101,5cyclictest0-21swapper/307:10:593
17985569991,5cyclictest0-21swapper/307:56:063
17985569991,5cyclictest0-21swapper/307:51:023
17985569991,4cyclictest431ktimers/307:10:003
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional