You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-04-02 - 04:07

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #2

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack7slot2s.osadl.org (updated Sun Mar 30, 2025 12:48:32)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
31175099293191,16cyclictest171rcu_preempt2
31175099286176,65cyclictest0-21swapper/22
31175099286176,65cyclictest0-21swapper/22
31174999283198,24cyclictest30-21ksoftirqd/11
31174999283198,24cyclictest30-21ksoftirqd/11
31175099282226,17cyclictest0-21swapper/22
31175099281209,40cyclictest0-21swapper/22
31175099281209,40cyclictest0-21swapper/22
31175099279225,17cyclictest521rcuop/32
31175099279225,17cyclictest521rcuop/32
31175099279182,44cyclictest0-21swapper/22
31175099279182,44cyclictest0-21swapper/22
31175099278178,67cyclictest0-21swapper/22
31175099278178,67cyclictest0-21swapper/22
31175099276193,32cyclictest0-21swapper/22
31175099276176,66cyclictest0-21swapper/22
31175099276176,66cyclictest0-21swapper/22
31175099275196,34cyclictest0-21swapper/22
31175099275186,55cyclictest0-21swapper/22
31175099274180,61cyclictest0-21swapper/22
31175099274180,61cyclictest0-21swapper/22
31175099273179,59cyclictest0-21swapper/22
31175099273177,60cyclictest0-21swapper/22
31175099273173,60cyclictest0-21swapper/22
31175099273173,60cyclictest0-21swapper/22
31175099273168,70cyclictest0-21swapper/22
31175099273168,70cyclictest0-21swapper/22
31175099272227,15cyclictest421rcuog/22
31175099272227,15cyclictest421rcuog/22
31175099272184,43cyclictest0-21swapper/22
31175099272184,43cyclictest0-21swapper/22
31175099271182,54cyclictest0-21swapper/22
31175099271182,54cyclictest0-21swapper/22
31175099271181,56cyclictest0-21swapper/22
31175099271181,56cyclictest0-21swapper/22
31175099271181,54cyclictest0-21swapper/22
31175099271181,54cyclictest0-21swapper/22
31175099271176,63cyclictest0-21swapper/22
31175099271172,60cyclictest0-21swapper/22
31175099271172,60cyclictest0-21swapper/22
31175099270181,61cyclictest0-21swapper/22
31175099270178,57cyclictest0-21swapper/22
31175099270178,57cyclictest0-21swapper/22
31175099269182,55cyclictest0-21swapper/22
31175099269182,55cyclictest0-21swapper/22
31175099269181,55cyclictest0-21swapper/22
31175099269178,57cyclictest0-21swapper/22
31175099269178,16cyclictest421rcuog/22
31175099269178,16cyclictest421rcuog/22
31175099268169,54cyclictest0-21swapper/22
31175099268169,54cyclictest0-21swapper/22
31175099267184,50cyclictest0-21swapper/22
31175099267178,54cyclictest0-21swapper/22
31175099267171,60cyclictest0-21swapper/22
31175099267171,60cyclictest0-21swapper/22
31175099267171,60cyclictest0-21swapper/22
31175099266193,40cyclictest0-21swapper/22
31175099266178,55cyclictest0-21swapper/22
31175099266178,55cyclictest0-21swapper/22
31175199265115,65cyclictest0-21swapper/33
31175199265115,65cyclictest0-21swapper/33
31175099265220,16cyclictest171rcu_preempt2
31175099265220,16cyclictest171rcu_preempt2
31175099265180,19cyclictest3724997-21kworker/2:1-mm_percpu_wq2
31175099265176,56cyclictest0-21swapper/22
31175099265176,55cyclictest0-21swapper/22
31175099265176,55cyclictest0-21swapper/22
31175099265172,59cyclictest0-21swapper/22
31175099265172,59cyclictest0-21swapper/22
31175099265170,61cyclictest0-21swapper/22
31175099265167,60cyclictest0-21swapper/22
31175099264183,16cyclictest171rcu_preempt2
31175099264183,16cyclictest171rcu_preempt2
31175099264177,47cyclictest0-21swapper/22
31175099264170,58cyclictest0-21swapper/22
31175099264170,58cyclictest0-21swapper/22
31175099264170,57cyclictest0-21swapper/22
31175099264170,57cyclictest0-21swapper/22
31175099263174,49cyclictest0-21swapper/22
31175099263174,49cyclictest0-21swapper/22
31175099262173,47cyclictest0-21swapper/22
31175099262173,47cyclictest0-21swapper/22
31175099262152,74cyclictest0-21swapper/22
31175099262152,74cyclictest0-21swapper/22
31174899262164,44cyclictest421rcuog/20
31174899262164,44cyclictest421rcuog/20
31175099261173,55cyclictest0-21swapper/22
31175099261173,55cyclictest0-21swapper/22
31175099261168,59cyclictest0-21swapper/22
31175199260214,16cyclictest171rcu_preempt3
31175199260214,16cyclictest171rcu_preempt3
31175099260179,14cyclictest0-21swapper/22
31175099260179,14cyclictest0-21swapper/22
31175099260173,52cyclictest0-21swapper/22
31175099260171,54cyclictest0-21swapper/22
31175099259176,44cyclictest0-21swapper/22
31175099259169,57cyclictest0-21swapper/22
31175099258175,48cyclictest0-21swapper/22
31175099258174,49cyclictest0-21swapper/22
31175099258174,49cyclictest0-21swapper/22
31175099258173,57cyclictest0-21swapper/22
31175099258173,57cyclictest0-21swapper/22
31175199257181,32cyclictest338979-21kworker/u9:0+xprtiod3
31175199257181,32cyclictest338979-21kworker/u9:0+xprtiod3
31175199257150,43cyclictest431rcuop/23
31175099257213,15cyclictest421rcuog/22
31175099257166,58cyclictest0-21swapper/22
31175099257166,58cyclictest0-21swapper/22
31175099256180,43cyclictest0-21swapper/22
31175099256175,44cyclictest0-21swapper/22
31175099256175,44cyclictest0-21swapper/22
31175199253112,89cyclictest336842-21latency_hist3
31175199253112,89cyclictest336842-21latency_hist3
31175099253173,47cyclictest0-21swapper/22
31175099253173,47cyclictest0-21swapper/22
31175099253163,54cyclictest0-21swapper/22
31175099253163,54cyclictest0-21swapper/22
31175199251100,50cyclictest0-21swapper/33
31175099251171,45cyclictest0-21swapper/22
31175099250164,47cyclictest0-21swapper/22
31174999250179,20cyclictest30-21ksoftirqd/11
31174999250179,20cyclictest30-21ksoftirqd/11
31175199248148,55cyclictest521rcuop/33
31175199248148,55cyclictest521rcuop/33
31175199247175,32cyclictest361911-21kworker/u9:1+xprtiod3
31175199247175,32cyclictest361911-21kworker/u9:1+xprtiod3
31175199247123,17cyclictest421rcuog/23
31175199247114,25cyclictest0-21swapper/33
31175199247114,25cyclictest0-21swapper/33
31175199246121,67cyclictest181rcuog/03
31175199246121,67cyclictest181rcuog/03
31175199245191,18cyclictest171rcu_preempt3
31175199245159,63cyclictest365423-21kworker/u9:0-xprtiod3
31174899244126,16cyclictest421rcuog/20
31174899244126,16cyclictest421rcuog/20
31174899243178,30cyclictest342738-21rm0
31175199242142,71cyclictest0-21swapper/33
31175199241184,18cyclictest191rcuop/03
31175199241184,18cyclictest191rcuop/03
31175199241161,39cyclictest313385-21kworker/u9:5+xprtiod3
31175199241113,64cyclictest0-21swapper/33
31174999241168,26cyclictest421rcuog/21
31174999241168,26cyclictest421rcuog/21
31175199240165,33cyclictest365421-21kworker/u10:6+rpciod3
31175199240165,33cyclictest365421-21kworker/u10:6+rpciod3
31175199240124,45cyclictest0-21swapper/33
31175199240124,45cyclictest0-21swapper/33
31174999240159,42cyclictest421rcuog/21
31174899240158,43cyclictest431rcuop/20
31174899240158,43cyclictest431rcuop/20
31174899240116,56cyclictest0-21swapper/00
31174899240116,56cyclictest0-21swapper/00
31174899240106,47cyclictest0-21swapper/00
31174899240106,47cyclictest0-21swapper/00
31175199239126,81cyclictest0-21swapper/33
31175199239126,81cyclictest0-21swapper/33
31174899239168,31cyclictest0-21swapper/00
31174899239161,35cyclictest14-21ksoftirqd/00
31174899239161,35cyclictest14-21ksoftirqd/00
31175199238147,51cyclictest0-21swapper/33
31175199238118,71cyclictest0-21swapper/33
31175199238117,65cyclictest0-21swapper/33
31175199238117,65cyclictest0-21swapper/33
31174899238176,16cyclictest431rcuop/20
31174899238176,16cyclictest431rcuop/20
31175199237151,51cyclictest0-21swapper/33
31175199237151,51cyclictest0-21swapper/33
31175199237151,51cyclictest0-21swapper/33
31175199237151,51cyclictest0-21swapper/33
31175199237100,59cyclictest362629-21ssh3
31175199237100,59cyclictest362629-21ssh3
31174899237153,38cyclictest521rcuop/30
31175199236150,45cyclictest191rcuop/03
31175199236145,54cyclictest0-21swapper/33
31175199236145,54cyclictest0-21swapper/33
31174999236144,37cyclictest181rcuog/01
31174999236144,37cyclictest181rcuog/01
31174999236114,55cyclictest0-21swapper/11
31174999236114,55cyclictest0-21swapper/11
31174899236167,46cyclictest331rcuop/10
31174899236142,63cyclictest171rcu_preempt0
31174899236142,63cyclictest171rcu_preempt0
31175199235161,28cyclictest171rcu_preempt3
31175199235115,52cyclictest0-21swapper/33
31175199235115,52cyclictest0-21swapper/33
31174999235166,17cyclictest521rcuop/31
31174899235109,51cyclictest331rcuop/10
31174899235109,51cyclictest331rcuop/10
31174899234178,16cyclictest171rcu_preempt0
31175199233114,61cyclictest0-21swapper/33
31175199233114,61cyclictest0-21swapper/33
31174999233130,44cyclictest309545-21kworker/u9:2-xprtiod1
31174999233130,44cyclictest309545-21kworker/u9:2-xprtiod1
31174899233165,38cyclictest171rcu_preempt0
31175199232119,72cyclictest0-21swapper/33
31175199232119,72cyclictest0-21swapper/33
31174999232146,35cyclictest181rcuog/01
31174999232146,35cyclictest181rcuog/01
31174899232138,64cyclictest191rcuop/00
31174899232138,64cyclictest191rcuop/00
31175199231108,65cyclictest0-21swapper/33
31174999231146,40cyclictest30-21ksoftirqd/11
31174999231146,40cyclictest30-21ksoftirqd/11
31174999231109,72cyclictest333585-21rm1
3117489923195,50cyclictest0-21swapper/00
3117489923195,50cyclictest0-21swapper/00
31174899231162,28cyclictest181rcuog/00
31175199230153,47cyclictest3240141kworker/u12:6+rpciod3
31175199230121,61cyclictest0-21swapper/33
31175199230121,61cyclictest0-21swapper/33
31174999230157,46cyclictest431rcuop/21
31174999230133,47cyclictest521rcuop/31
31174999230115,54cyclictest0-21swapper/11
31174899230104,46cyclictest0-21swapper/00
31174899230104,46cyclictest0-21swapper/00
31175199229114,62cyclictest0-21swapper/33
31174999229111,70cyclictest327455-21tr1
31174999229111,70cyclictest327455-21tr1
31174899229173,16cyclictest521rcuop/30
31174899229173,16cyclictest521rcuop/30
31175199228109,65cyclictest0-21swapper/33
31175199228109,65cyclictest0-21swapper/33
31174999228146,54cyclictest30-21ksoftirqd/11
31174999228146,54cyclictest30-21ksoftirqd/11
31174999228121,50cyclictest0-21swapper/11
31174999228121,50cyclictest0-21swapper/11
3117489922888,99cyclictest372-21ntpd0
3117489922888,99cyclictest372-21ntpd0
31174899228172,16cyclictest181rcuog/00
31174899228172,16cyclictest181rcuog/00
31174899228112,72cyclictest0-21swapper/00
31174899228112,72cyclictest0-21swapper/00
3117499922791,18cyclictest181rcuog/01
3117499922791,18cyclictest181rcuog/01
31174999227117,52cyclictest0-21swapper/11
31174999227117,52cyclictest0-21swapper/11
31174899227134,17cyclictest181rcuog/00
31175199226118,15cyclictest421rcuog/23
31175199226118,15cyclictest421rcuog/23
31175199226110,56cyclictest0-21swapper/33
31174999226157,17cyclictest431rcuop/21
31174999226157,17cyclictest431rcuop/21
3117489922691,42cyclictest14-21ksoftirqd/00
3117489922691,42cyclictest14-21ksoftirqd/00
31174899226171,16cyclictest331rcuop/10
31174899226137,15cyclictest181rcuog/00
31174899226137,15cyclictest181rcuog/00
31174899226132,51cyclictest0-21swapper/00
31175199225104,55cyclictest0-21swapper/33
31175199225104,55cyclictest0-21swapper/33
31174999225168,17cyclictest421rcuog/21
31174999225120,51cyclictest0-21swapper/11
31174899225127,51cyclictest331rcuop/10
31174899225127,51cyclictest331rcuop/10
31175199224160,16cyclictest421rcuog/23
31175199224160,16cyclictest421rcuog/23
31174899224173,16cyclictest521rcuop/30
31174899224173,16cyclictest521rcuop/30
31174899224128,81cyclictest0-21swapper/00
31174899224128,81cyclictest0-21swapper/00
3117519922396,16cyclictest181rcuog/03
3117519922396,16cyclictest181rcuog/03
31175199223184,15cyclictest521rcuop/33
31175199223184,15cyclictest521rcuop/33
31175199223122,46cyclictest0-21swapper/33
31175199223122,46cyclictest0-21swapper/33
3117499922367,83cyclictest0-21swapper/11
3117499922367,83cyclictest0-21swapper/11
31174999223144,46cyclictest421rcuog/21
31174999223144,46cyclictest421rcuog/21
31174999223113,61cyclictest0-21swapper/11
31174999223113,51cyclictest0-21swapper/11
31174999223113,51cyclictest0-21swapper/11
31175199222101,55cyclictest0-21swapper/33
31175199222101,55cyclictest0-21swapper/33
31174999222154,16cyclictest171rcu_preempt1
31174999222102,51cyclictest0-21swapper/11
31174899222118,64cyclictest0-21swapper/00
31174899222108,78cyclictest0-21swapper/00
31174899222108,78cyclictest0-21swapper/00
31175199221173,17cyclictest191rcuop/03
31175199221132,18cyclictest421rcuog/23
31174999221163,18cyclictest331rcuop/11
31174899221125,19cyclictest421rcuog/20
31175199220139,50cyclictest0-21swapper/33
31175199220139,50cyclictest0-21swapper/33
31175199220136,65cyclictest343158-21kworker/u10:0-rpciod3
31175199220136,65cyclictest343158-21kworker/u10:0-rpciod3
31175199220118,17cyclictest191rcuop/03
31175199220118,17cyclictest191rcuop/03
31174999220172,19cyclictest191rcuop/01
31174999220172,19cyclictest191rcuop/01
3117489922097,61cyclictest0-21swapper/00
3117489922097,61cyclictest0-21swapper/00
3117489922095,53cyclictest0-21swapper/00
3117489922095,53cyclictest0-21swapper/00
3117489922083,83cyclictest0-21swapper/00
3117489922083,83cyclictest0-21swapper/00
31174899220106,62cyclictest0-21swapper/00
31174899220106,62cyclictest0-21swapper/00
31174899220104,57cyclictest0-21swapper/00
31174899220101,68cyclictest0-21swapper/00
31174899220101,68cyclictest0-21swapper/00
31175199219133,71cyclictest0-21swapper/33
31175199219133,71cyclictest0-21swapper/33
31175199219128,75cyclictest0-21swapper/33
31175199219125,61cyclictest0-21swapper/33
31175199219125,61cyclictest0-21swapper/33
31175199219117,36cyclictest0-21swapper/33
3117499921982,71cyclictest300361-21kworker/u9:6+xprtiod1
31174999219174,17cyclictest331rcuop/11
31174999219174,17cyclictest331rcuop/11
31174999219173,15cyclictest181rcuog/01
31174999219173,15cyclictest181rcuog/01
31174999219151,53cyclictest346952-21kworker/u11:6-rpciod1
31174999219146,44cyclictest191rcuop/01
31174999219146,44cyclictest191rcuop/01
31174999219104,21cyclictest361202-21/usr/sbin/munin1
3117489921989,93cyclictest0-21swapper/00
31174899219148,24cyclictest0-21swapper/00
31175199218159,18cyclictest315055-21munin-run3
31175199218159,18cyclictest315055-21munin-run3
31175199218137,47cyclictest421rcuog/23
31175199218137,47cyclictest421rcuog/23
31175199218135,68cyclictest0-21swapper/33
31175199218135,68cyclictest0-21swapper/33
31175199218131,59cyclictest181rcuog/03
31175199218110,69cyclictest337081-21apt-get3
31175199218110,69cyclictest337081-21apt-get3
3117499921892,61cyclictest0-21swapper/11
3117499921892,61cyclictest0-21swapper/11
3117499921892,61cyclictest0-21swapper/11
31174999218117,57cyclictest0-21swapper/11
31174999218117,57cyclictest0-21swapper/11
31174999218109,75cyclictest0-21swapper/11
31174999218109,75cyclictest0-21swapper/11
3117489921892,32cyclictest0-21swapper/00
3117489921892,32cyclictest0-21swapper/00
31174899218113,65cyclictest0-21swapper/00
31175199217120,26cyclictest332455-21sh3
31175199217113,39cyclictest311876-21latency_hist3
31175199217100,65cyclictest0-21swapper/33
3117499921799,73cyclictest340334-21cat1
3117499921799,73cyclictest340334-21cat1
3117499921799,62cyclictest0-21swapper/11
31174999217150,17cyclictest431rcuop/21
31174999217150,17cyclictest431rcuop/21
31174899217113,65cyclictest0-21swapper/00
31174899217113,65cyclictest0-21swapper/00
31175199216171,15cyclictest421rcuog/23
3117499921664,17cyclictest171rcu_preempt1
3117499921664,17cyclictest171rcu_preempt1
31174999216131,25cyclictest171rcu_preempt1
31174999216131,25cyclictest171rcu_preempt1
31174999216108,58cyclictest313381-21kworker/u10:6+rpciod1
31174999216108,58cyclictest313381-21kworker/u10:6+rpciod1
3117489921673,58cyclictest0-21swapper/00
3117489921673,58cyclictest0-21swapper/00
31174899216160,22cyclictest191rcuop/00
31174899216160,22cyclictest191rcuop/00
31174899216112,50cyclictest0-21swapper/00
31175199215115,72cyclictest0-21swapper/33
31174999215154,16cyclictest181rcuog/01
31174999215154,16cyclictest181rcuog/01
31174999215111,48cyclictest0-21swapper/11
31174999215111,48cyclictest0-21swapper/11
31174899215173,16cyclictest344255-21kworker/u9:1+xprtiod0
31174899215173,16cyclictest344255-21kworker/u9:1+xprtiod0
31174899215115,57cyclictest0-21swapper/00
31174899215115,57cyclictest0-21swapper/00
31174899215114,56cyclictest0-21swapper/00
31174899215110,70cyclictest0-21swapper/00
31174899215108,26cyclictest0-21swapper/00
31175199214112,59cyclictest0-21swapper/33
31175199214112,59cyclictest0-21swapper/33
31175199214105,74cyclictest0-21swapper/33
3117499921498,49cyclictest0-21swapper/11
3117499921493,61cyclictest0-21swapper/11
31174899214163,16cyclictest191rcuop/00
31174899214143,21cyclictest431rcuop/20
31174899214130,49cyclictest0-21swapper/00
3117499921383,67cyclictest181rcuog/01
31174899213122,75cyclictest181rcuog/00
31174899213122,75cyclictest181rcuog/00
31174899213122,75cyclictest181rcuog/00
31174899213116,56cyclictest452-21sendmail-mta0
3117499921299,63cyclictest0-21swapper/11
31174999212180,19cyclictest521rcuop/31
31174999212180,19cyclictest521rcuop/31
31174999212140,50cyclictest421rcuog/21
31174999212108,48cyclictest323202-21ld1
31174999212103,67cyclictest0-21swapper/11
31174999211103,71cyclictest0-21swapper/11
31174999211103,71cyclictest0-21swapper/11
31174999210147,18cyclictest171rcu_preempt1
31174999210147,18cyclictest171rcu_preempt1
31174999210117,23cyclictest171rcu_preempt1
31174999210117,23cyclictest171rcu_preempt1
31174999210100,18cyclictest330936-21ssh1
3117489921098,67cyclictest0-21swapper/00
3117489921098,67cyclictest0-21swapper/00
31174899210107,67cyclictest0-21swapper/00
3117499920998,71cyclictest0-21swapper/11
31174899209115,57cyclictest0-21swapper/00
31174899209115,57cyclictest0-21swapper/00
31174999208162,17cyclictest30-21ksoftirqd/11
31174999208162,17cyclictest30-21ksoftirqd/11
31174999208107,59cyclictest0-21swapper/11
31174999208107,59cyclictest0-21swapper/11
31174999207107,57cyclictest421rcuog/21
31174999207107,57cyclictest421rcuog/21
3117499920697,72cyclictest355441-21ssh1
3117489920696,61cyclictest0-21swapper/00
31174899206122,54cyclictest0-21swapper/00
31174899205148,17cyclictest181rcuog/00
31174899205148,17cyclictest181rcuog/00
3117499920484,69cyclictest0-21swapper/11
31175199201111,54cyclictest0-21swapper/33
31174899200112,52cyclictest0-21swapper/00
31174899200112,52cyclictest0-21swapper/00
31174999197144,41cyclictest316352-21kworker/u11:2-rpciod1
31174999197111,29cyclictest311003-21kworker/u9:0+xprtiod1
3117489919568,64cyclictest0-21swapper/00
31174899195134,16cyclictest191rcuop/00
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional