You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-04-11 - 22:33

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #2, slot #7

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rack2slot7s.osadl.org (updated Fri Apr 11, 2025 12:41:50)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
3397697996138,19cyclictest3539122-21cron12:00:011
3397697995346,3cyclictest0-21swapper/109:55:011
3397698995141,6cyclictest474-21in:imuxsock10:45:012
3397696994932,5cyclictest0-21swapper/010:21:580
3397696994932,5cyclictest0-21swapper/010:21:580
3397696994838,7cyclictest2597387-21cupsd10:50:570
3397698994735,6cyclictest0-21swapper/212:12:182
3397698994637,6cyclictest1-21systemd08:35:012
3397696994623,15cyclictest151ktimers/012:22:190
3397698994538,3cyclictest0-21swapper/211:40:012
3397698994537,5cyclictest3408186-21systemd-run07:45:012
3397697994531,10cyclictest3483218-21kernelversion10:32:081
3397696994426,12cyclictest151ktimers/008:57:150
3397696994426,12cyclictest151ktimers/008:57:150
3397698994334,5cyclictest3506984-21aten_r2power_cu11:12:002
3397698994334,5cyclictest3506984-21aten_r2power_cu11:12:002
3397696994336,5cyclictest1-21systemd10:40:010
3397696994327,14cyclictest3525027-21sendmail11:40:010
3397698994230,8cyclictest3500447-21sendmail11:00:012
3397697994233,6cyclictest3412623-21cron08:00:011
339769799423,27cyclictest3462913-21ssh09:57:071
3397696994235,4cyclictest3423143-21kworker/u8:14-xprtiod09:10:010
3397698994130,8cyclictest3535367-21ssh11:55:022
3397698994130,8cyclictest3535367-21ssh11:55:022
3397696994133,5cyclictest959-21mta-sts-daemon11:22:130
3397696994126,12cyclictest3436949-21cron09:15:010
339769899403,30cyclictest3474991-21ssh10:17:122
3397698994032,5cyclictest3521174-21systemd-run11:35:012
3397697994026,9cyclictest421-21avahi-daemon11:07:581
3397697994026,9cyclictest421-21avahi-daemon11:07:581
339769799402,31cyclictest3541090-21ssh12:02:121
3397696994033,4cyclictest3559304-21idleruntime-cro12:30:010
3397696994031,6cyclictest3507442-21latency11:12:070
3397696994031,6cyclictest3507442-21latency11:12:070
3397698993933,3cyclictest0-21swapper/209:20:012
3397698993932,3cyclictest0-21swapper/212:10:012
3397698993931,5cyclictest453-21systemd-logind11:30:012
3397698993931,5cyclictest3472233-21unixbench_multi10:12:362
3397697993930,6cyclictest3525014-21cron11:40:011
3397697993927,8cyclictest3553120-21systemd-run12:20:011
3397696993931,5cyclictest3510290-21aten_r2power_vo11:16:590
3397696993930,6cyclictest3500439-21ls11:00:010
3397696993925,10cyclictest3564776-21ssh12:37:080
3397696993925,10cyclictest3564776-21ssh12:37:080
3397698993828,6cyclictest3482827-21aten_r2power_en10:32:002
339769899381,15cyclictest36-21ksoftirqd/209:12:202
339769799384,26cyclictest2597391-21cups-browsed12:22:151
3397697993830,4cyclictest3424599-21cron08:40:011
3397697993830,4cyclictest0-21swapper/110:40:011
3397697993828,5cyclictest0-21swapper/111:52:031
3397697993828,5cyclictest0-21swapper/111:52:031
3397696993831,4cyclictest0-21swapper/011:32:210
3397696993831,4cyclictest0-21swapper/008:15:010
3397696993825,10cyclictest3400597-21unixbench_singl07:17:240
339769899372,30cyclictest3450861-21rm09:37:132
339769899372,24cyclictest3454288-21ssh09:42:212
339769899372,24cyclictest3454288-21ssh09:42:212
3397697993729,5cyclictest3427623-21systemd-run08:50:021
3397697993728,5cyclictest3528936-21latency_hist11:45:021
339769799371,27cyclictest3441984-21ssh09:22:161
3397696993729,5cyclictest3490731-21unixbench-2d10:42:210
3397696993727,7cyclictest3540378-21aten_r2power_en12:02:000
339769699372,27cyclictest3502320-21grep11:02:160
339769899369,11cyclictest341rcuc/208:55:022
3397698993631,2cyclictest0-21swapper/212:20:012
3397698993616,3cyclictest171rcu_preempt12:02:132
3397697993627,6cyclictest491-21gdbus12:40:011
3397697993627,6cyclictest491-21gdbus12:40:011
3397697993626,7cyclictest3495785-21mailstats10:52:151
3397697993626,7cyclictest2597387-21cupsd10:10:141
3397697993625,8cyclictest1-21systemd12:10:021
3397696993625,8cyclictest3536964-21latency11:57:080
3397696993620,7cyclictest151ktimers/007:32:110
339769899355,5cyclictest351ktimers/209:35:022
3397698993528,3cyclictest0-21swapper/212:35:022
3397698993524,7cyclictest3429403-21aten_r2power_en08:56:582
3397698993524,7cyclictest3429403-21aten_r2power_en08:56:582
339769899352,26cyclictest3555040-21ssh12:22:162
3397698993522,3cyclictest171rcu_preempt10:37:152
3397697993526,6cyclictest2597391-21cups-browsed12:33:491
3397697993525,6cyclictest421-21avahi-daemon12:26:381
3397696993528,5cyclictest422-21dbus-daemon09:20:020
3397696993526,6cyclictest3464658-21cat10:00:010
3397698993427,4cyclictest0-21swapper/210:25:022
3397698993427,4cyclictest0-21swapper/210:25:022
3397698993426,5cyclictest3531536-21wc11:50:022
3397698993426,5cyclictest3526348-21aten_r2power_po11:41:592
3397698993424,6cyclictest421-21avahi-daemon12:40:012
3397698993424,6cyclictest421-21avahi-daemon12:40:012
3397698993423,8cyclictest3409656-21cut07:50:012
339769799349,19cyclictest3519212-21ssh11:32:101
339769799343,24cyclictest3438648-21ssh09:17:121
3397697993426,5cyclictest3422160-21fschecks_time08:32:051
3397697993426,5cyclictest3420655-21fschecks_count08:27:021
3397697993425,4cyclictest0-21swapper/109:35:011
3397696993426,5cyclictest3432133-21systemd-run09:05:010
3397696993426,4cyclictest3411291-21latency_hist07:55:030
3397696993424,6cyclictest2597391-21cups-browsed09:44:160
3397696993424,6cyclictest2597391-21cups-browsed09:44:160
339769699342,27cyclictest3551297-21ssh12:17:130
3397696993421,10cyclictest0-21swapper/010:12:190
339769899334,21cyclictest3495525-21ssh10:52:062
3397698993323,6cyclictest3462253-21aten_r2power_cu09:56:562
3397698993314,5cyclictest171rcu_preempt09:52:042
3397697993327,3cyclictest0-21swapper/108:20:021
3397697993326,3cyclictest0-21swapper/109:37:211
3397697993325,5cyclictest3491939-21cron10:45:011
3397697993324,6cyclictest453-21systemd-logind11:30:011
3397697993323,6cyclictest422-21dbus-daemon10:04:421
3397697993322,8cyclictest3478214-21ntp_kernel_pll_10:22:111
3397697993322,8cyclictest3478214-21ntp_kernel_pll_10:22:111
339769799332,23cyclictest3507722-21ssh11:12:141
339769799332,23cyclictest3507722-21ssh11:12:141
3397696993327,4cyclictest3474603-21sh10:17:050
3397696993326,5cyclictest3529715-21sh11:46:180
3397696993326,4cyclictest3481827-21munin-plugin-st10:30:010
3397696993324,7cyclictest0-21swapper/009:35:010
3397696993318,11cyclictest12450irq/32-eth010:02:090
3397696993317,10cyclictest151ktimers/007:22:090
3397698993222,7cyclictest3493934-21ssh10:50:022
3397698993220,3cyclictest171rcu_preempt08:37:202
3397698993217,3cyclictest171rcu_preempt11:02:082
3397697993226,3cyclictest0-21swapper/111:17:141
3397697993223,7cyclictest3445746-21sh09:30:011
3397697993223,6cyclictest266-21systemd-journal09:00:021
3397697993223,6cyclictest266-21systemd-journal09:00:021
3397697993223,6cyclictest2597391-21cups-browsed08:10:341
339769699324,24cyclictest3561204-21ssh12:32:090
3397696993225,4cyclictest1-21systemd08:25:020
3397696993224,5cyclictest3505021-21sh11:07:250
3397696993224,5cyclictest3505021-21sh11:07:250
3397696993224,5cyclictest3427499-21unixbench_multi08:47:220
3397696993223,6cyclictest0-21swapper/007:50:010
339769699322,25cyclictest3483649-21ssh10:32:200
3397698993124,5cyclictest2597391-21cups-browsed07:22:172
3397698993123,5cyclictest3411164-21systemd-run07:55:022
3397698993123,4cyclictest0-21swapper/210:29:482
3397698993114,3cyclictest171rcu_preempt07:32:112
3397698993112,2cyclictest171rcu_preempt07:27:102
339769799313,20cyclictest3475146-21ssh10:17:181
3397697993122,6cyclictest2597391-21cups-browsed07:37:171
3397697993122,6cyclictest2597391-21cups-browsed07:37:171
3397696993122,6cyclictest2597391-21cups-browsed09:20:380
3397696993122,5cyclictest0-21swapper/011:42:120
339769699312,21cyclictest3533379-21diskmemload11:52:050
339769699312,21cyclictest3533379-21diskmemload11:52:050
3397696993113,13cyclictest3459625-21ssh09:52:040
3397698993024,3cyclictest0-21swapper/211:57:092
3397698993022,5cyclictest3512601-21systemd-run11:20:012
339769899302,21cyclictest3514099-21ssh11:22:132
3397698993021,6cyclictest2597391-21cups-browsed07:12:172
3397698993021,6cyclictest1-21systemd10:01:572
3397698993014,3cyclictest171rcu_preempt12:26:572
3397698993013,3cyclictest171rcu_preempt09:22:142
3397698993012,3cyclictest171rcu_preempt11:08:342
3397698993012,3cyclictest171rcu_preempt11:08:342
339769799304,21cyclictest3502144-21ssh11:02:101
339769799303,20cyclictest657-21snmpd12:12:151
3397697993024,3cyclictest0-21swapper/109:50:021
3397697993024,3cyclictest0-21swapper/109:50:021
3397697993022,4cyclictest0-21swapper/110:10:021
3397696993025,2cyclictest0-21swapper/010:10:010
3397696993020,7cyclictest3415133-21sh08:07:140
3397696993018,9cyclictest0-21swapper/011:30:010
339769699301,24cyclictest3547510-21ssh12:12:170
3397698992921,5cyclictest3421538-21tail08:27:202
3397698992921,5cyclictest3400767-21latency_hist07:20:022
3397698992920,6cyclictest3470166-21cron10:10:012
3397698992920,4cyclictest0-21swapper/209:26:282
3397698992919,8cyclictest3414172-21sh08:05:022
3397698992916,3cyclictest171rcu_preempt09:07:122
3397698992916,3cyclictest171rcu_preempt08:07:142
3397697992923,3cyclictest0-21swapper/109:05:011
3397697992922,4cyclictest3436176-21unixbench_singl09:12:261
3397697992922,4cyclictest3400709-21kworker/u8:8-xprtiod07:25:021
3397697992921,3cyclictest0-21swapper/108:02:081
339769799291,22cyclictest3498983-21ssh10:57:121
339769799291,22cyclictest3454325-21ssh09:42:231
339769799291,22cyclictest3454325-21ssh09:42:231
3397696992923,4cyclictest957-21mta-sts-daemon12:06:230
3397696992922,4cyclictest956-21mta-sts-daemon09:40:010
339769899288,9cyclictest3431549-21ntpq09:02:092
3397698992822,3cyclictest956-21mta-sts-daemon08:42:152
3397698992814,3cyclictest171rcu_preempt08:50:022
3397698992812,3cyclictest171rcu_preempt07:57:112
3397698992810,3cyclictest171rcu_preempt08:22:142
3397697992823,2cyclictest0-21swapper/109:10:011
3397697992821,4cyclictest3493937-21systemd10:50:021
3397697992820,5cyclictest3402412-21/usr/sbin/munin07:27:141
3397697992819,6cyclictest2597391-21cups-browsed07:18:401
3397697992819,5cyclictest3410676-21proc_pri07:52:171
3397696992822,3cyclictest0-21swapper/008:20:010
3397696992820,5cyclictest0-21swapper/008:00:010
3397696992819,5cyclictest2597391-21cups-browsed09:47:250
3397696992819,5cyclictest2597391-21cups-browsed09:47:250
3397698992719,5cyclictest3406686-21sendmail-msp07:40:012
3397698992719,5cyclictest3406686-21sendmail-msp07:40:012
3397698992718,6cyclictest3416183-21gltestperf08:12:062
3397697992721,3cyclictest0-21swapper/108:45:011
3397697992719,3cyclictest0-21swapper/111:20:451
3397697992718,6cyclictest422-21dbus-daemon08:25:011
3397697992717,6cyclictest422-21dbus-daemon07:10:011
3397696992719,5cyclictest453-21systemd-logind08:40:010
339769899264,15cyclictest959-21mta-sts-daemon08:17:112
3397698992611,3cyclictest171rcu_preempt09:45:212
3397698992611,3cyclictest171rcu_preempt09:45:212
339769799263,10cyclictest957-21mta-sts-daemon10:26:251
3397697992620,3cyclictest0-21swapper/111:50:011
3397696992617,6cyclictest3421390-21timerandwakeup08:27:190
3397698992518,4cyclictest453-21systemd-logind07:10:022
3397697992519,3cyclictest3403689-21kworker/u8:0-xprtiod08:06:591
3397697992519,3cyclictest0-21swapper/107:13:571
3397697992517,5cyclictest421-21avahi-daemon07:42:251
3397696992514,7cyclictest151ktimers/007:42:140
3397696992511,11cyclictest3406183-21proc_pri07:37:150
3397696992511,11cyclictest3406183-21proc_pri07:37:150
3397697992417,3cyclictest0-21swapper/108:55:011
3397696992416,6cyclictest3413936-21timerwakeupswit08:02:190
3397696992411,9cyclictest2597391-21cups-browsed10:48:070
3397696992410,11cyclictest3422155-21fschecks_time08:32:050
339769799234,12cyclictest437-21mta-sts-daemon07:47:071
3397697992318,2cyclictest0-21swapper/107:35:011
3397696992318,3cyclictest151ktimers/008:52:140
3397696992318,2cyclictest0-21swapper/008:45:010
3397696992315,5cyclictest3384952-21kworker/u8:14-xprtiod07:12:040
3397696992314,4cyclictest0-21swapper/007:27:120
339769699231,10cyclictest3445750-21ls09:30:010
339769999194,7cyclictest0-21swapper/312:37:143
339769999194,7cyclictest0-21swapper/312:37:143
339769999181,9cyclictest0-21swapper/312:32:023
339769999173,9cyclictest0-21swapper/310:22:103
339769999173,9cyclictest0-21swapper/310:22:103
339769999173,8cyclictest0-21swapper/309:32:153
339769999172,8cyclictest0-21swapper/309:22:183
3397696991710,5cyclictest1-21systemd07:10:010
339769999163,8cyclictest0-21swapper/309:17:123
339769999162,9cyclictest0-21swapper/310:52:073
339769999162,8cyclictest0-21swapper/310:01:573
339769999161,9cyclictest0-21swapper/312:02:123
339769999157,5cyclictest0-21swapper/312:10:013
339769999153,7cyclictest0-21swapper/311:37:013
339769999152,8cyclictest0-21swapper/311:02:163
339769999152,8cyclictest0-21swapper/309:42:263
339769999152,8cyclictest0-21swapper/309:42:263
339769999152,6cyclictest0-21swapper/309:10:023
339769999151,9cyclictest0-21swapper/310:37:173
339769999151,9cyclictest0-21swapper/309:52:063
339769999151,8cyclictest0-21swapper/311:42:143
339769999151,8cyclictest0-21swapper/308:22:093
339769999151,7cyclictest0-21swapper/308:42:153
339769999149,3cyclictest0-21swapper/308:52:163
339769999146,4cyclictest0-21swapper/312:20:013
339769999146,4cyclictest0-21swapper/310:57:103
339769999145,5cyclictest0-21swapper/310:48:243
339769999142,8cyclictest0-21swapper/311:51:553
339769999142,8cyclictest0-21swapper/311:51:553
339769999142,8cyclictest0-21swapper/311:17:083
339769999142,8cyclictest0-21swapper/311:12:043
339769999142,8cyclictest0-21swapper/311:12:043
339769999142,5cyclictest0-21swapper/308:02:063
339769999141,8cyclictest0-21swapper/310:12:263
339769999141,7cyclictest0-21swapper/310:42:153
339769999141,6cyclictest0-21swapper/308:57:123
339769999141,6cyclictest0-21swapper/308:57:123
339769999141,6cyclictest0-21swapper/307:12:103
339769999136,4cyclictest0-21swapper/311:57:173
339769999135,5cyclictest0-21swapper/308:09:193
339769999133,5cyclictest0-21swapper/311:22:083
339769999132,7cyclictest0-21swapper/310:17:123
339769999131,8cyclictest0-21swapper/309:37:123
339769999131,7cyclictest0-21swapper/312:22:133
339769999131,7cyclictest0-21swapper/312:12:143
339769999131,7cyclictest0-21swapper/309:12:023
339769999131,6cyclictest0-21swapper/308:32:123
339769999131,6cyclictest0-21swapper/308:27:143
339769999131,6cyclictest0-21swapper/307:52:123
339769999131,6cyclictest0-21swapper/307:27:113
339769999131,5cyclictest0-21swapper/307:57:083
339769999130,7cyclictest0-21swapper/309:02:083
339769999127,3cyclictest0-21swapper/308:50:013
339769999127,3cyclictest0-21swapper/308:15:013
339769999126,4cyclictest0-21swapper/311:47:533
339769999126,4cyclictest0-21swapper/311:31:453
339769999126,4cyclictest0-21swapper/311:06:313
339769999126,4cyclictest0-21swapper/311:06:313
339769999126,4cyclictest0-21swapper/308:37:083
339769999126,4cyclictest0-21swapper/307:17:243
339769999126,3cyclictest0-21swapper/309:47:093
339769999126,3cyclictest0-21swapper/309:47:093
339769999124,5cyclictest0-21swapper/310:32:143
339769999121,8cyclictest0-21swapper/309:57:093
339769999121,7cyclictest0-21swapper/308:17:113
339769999121,6cyclictest0-21swapper/311:30:033
339769999121,5cyclictest0-21swapper/307:42:073
339769999121,5cyclictest0-21swapper/307:32:113
339769999116,3cyclictest0-21swapper/307:36:593
339769999116,3cyclictest0-21swapper/307:36:593
339769999115,4cyclictest0-21swapper/307:47:013
339769999115,3cyclictest0-21swapper/312:28:393
339769999112,6cyclictest0-21swapper/310:26:343
339769999111,6cyclictest0-21swapper/310:06:393
339769999111,6cyclictest0-21swapper/307:22:053
33976999993,4cyclictest0-21swapper/309:25:103
33976999984,2cyclictest0-21swapper/307:10:013
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional