unraid-tunables-tester.sh - A New Utility to Optimize unRAID md_* Tunables


1096 posts in this topic Last Reply

Recommended Posts

  • Replies 1.1k
  • Created
  • Last Reply

Top Posters In This Topic

Top Posters In This Topic

Popular Posts

NEW! For Unraid 6.x, this utility is named:  unraid6x-tunables-tester.sh For Unraid 5.x, this utility is named:  unraid-tunables-tester.sh   The current version is 4.1 for Unraid 6.x an

Well, good job guys.  The conversation has prompted me to find and review my testing documentation, which includes my strategy for the next test routine.   And it just so happens that at thi

Well, it's finally happened:  Unraid 6.x Tunables Tester v4.0   The first post has been updated with the release notes and download.   Paul

Posted Images

I will give it a go.

 

unRAID version? Your signature says 6.0.

 

6.2-RC4

And your signature still says 6.0

 

That's a graphic. Im not going to update it every version.

You could accomplish most of that in bbcode, or if not, maybe next time you do update the graphic you could just remove the version completely and display it separately since versions change pretty frequently around here.

 

I had had to comment, how times have changed!  Remember when we went years without a version change...

 

We're still there if you can't gamble your array starting with LT's servers being up and functioning. It's been a long time since there was a suitable version to run since 6.1.9.

</OT>

 

I thank you for re-investing your time on updating the script. I'm keeping an eye out on this and look forward to it's eventual release. Keep up the good work!

 

Link to post

I tried running v4.0b2, but it throws some errors:

./unraid-tunables-tester-4b2.sh: line 1282: /root/mdcmd: No such file or directory
./unraid-tunables-tester-4b2.sh: line 1285: /root/mdcmd: No such file or directory
./unraid-tunables-tester-4b2.sh: line 1288: [: : integer expression expected

 

I changed all the references to "/root/mdcmd" to just "mdcmd" and now the script is running.

 

FYI:

root@Tower:/boot/utt# whereis mdcmd
mdcmd: /usr/local/sbin/mdcmd

 

I wonder if you have the preclear plugin installed?  I see that it contains this code, which might be why /root/mdcmd exists on your server:

if [[ ! -e /root/mdcmd ]]; then
  ln -sf /usr/local/sbin/mdcmd /root/mdcmd
fi

I currently don't have the preclear plugin installed.

Link to post

I wonder if you have the preclear plugin installed?  I see that it contains this code, which might be why /root/mdcmd exists on your server:

if [[ ! -e /root/mdcmd ]]; then
  ln -sf /usr/local/sbin/mdcmd /root/mdcmd
fi

I currently don't have the preclear plugin installed.

Good find.  I never could figure out where Pauven stated:

...Not sure about changing the location of the mdcmd.  I was going to make that change today, but found that on 6.2 it works in the original location.  Perhaps LimeTech did something to reverse what they changed in 6.0/6.1.

as I knew the location change was part of the changes in the new security model that took affect in 6.1 and wasn't likely to have changed back.
Link to post

My first results:

 

Tower7 - 5 x 3TB - All onboard intel PCH sata:

 

 

       unRAID Tunables Tester v4.0b2 by Pauven (for unRAID v6.2)

        Tunables Report produced Thu Aug 25 06:24:48 BST 2016

                         Run on server: Tower7

                   Short Automatic Parity Sync Test


NOTE: Use the smallest set of values that produce good results. Larger values
      increase server memory use, and may cause stability issues with unRAID,
      especially if you have any add-ons or plug-ins installed.


Current Values:  md_num_stripes=4096, md_sync_window=2048, md_sync_thresh=2000
                 Global nr_requests=8
                    sdc nr_requests=128
                    sdd nr_requests=128
                    sde nr_requests=128
                    sdf nr_requests=128
                    sdg nr_requests=128


--- INITIAL BASELINE TEST OF CURRENT VALUES (1 Sample Point @ 30sec Duration)---

Test | RAM | num_stripes | sync_window | nr_reqs | sync_thresh |   Speed 
-----------------------------------------------------------------------------
   1  | 106 |     4096    |    2048     |     8   |     2000    | 158.6 MB/s 


--- FULLY AUTOMATIC nr_requests TEST 1 (4 Sample Points @ 60sec Duration)---

Test | num_stripes | sync_window | nr_requests | sync_thresh |   Speed 
---------------------------------------------------------------------------
  1   |     1536    |     768     |     128     |      767    | 171.7 MB/s 
  2   |     1536    |     768     |     128     |      384    | 160.0 MB/s 
  3   |     1536    |     768     |       8     |      767    | 170.4 MB/s 
  4   |     1536    |     768     |       8     |      384    | 174.7 MB/s 

Fastest vals were nr_reqs=8 and sync_thresh=50% of sync_window at 174.7 MB/s

This nr_requests value will be used for the next test.


--- FULLY AUTOMATIC TEST PASS 1a (Rough - 13 Sample Points @ 30sec Duration)---

Test | RAM | num_stripes | sync_window | nr_reqs | sync_thresh |   Speed 
-----------------------------------------------------------------------------
   1a |  19 |      768    |     384     |     8   |      383    | 161.8 MB/s 
   1b |  19 |      768    |     384     |     8   |      192    | 165.1 MB/s 
   2a |  23 |      896    |     448     |     8   |      447    | 158.7 MB/s 
   2b |  23 |      896    |     448     |     8   |      224    | 165.1 MB/s 
   3a |  26 |     1024    |     512     |     8   |      511    | 156.2 MB/s 
   3b |  26 |     1024    |     512     |     8   |      256    | 157.2 MB/s 
   4a |  29 |     1152    |     576     |     8   |      575    | 142.8 MB/s 
   4b |  29 |     1152    |     576     |     8   |      288    | 170.4 MB/s 
   5a |  33 |     1280    |     640     |     8   |      639    | 155.6 MB/s 
   5b |  33 |     1280    |     640     |     8   |      320    | 159.4 MB/s 
   6a |  36 |     1408    |     704     |     8   |      703    | 154.0 MB/s 
   6b |  36 |     1408    |     704     |     8   |      352    | 160.6 MB/s 
   7a |  39 |     1536    |     768     |     8   |      767    | 152.7 MB/s 
   7b |  39 |     1536    |     768     |     8   |      384    | 160.6 MB/s 
   8a |  43 |     1664    |     832     |     8   |      831    | 152.7 MB/s 
   8b |  43 |     1664    |     832     |     8   |      416    | 159.7 MB/s 
   9a |  46 |     1792    |     896     |     8   |      895    | 130.7 MB/s 
   9b |  46 |     1792    |     896     |     8   |      448    | 157.8 MB/s 
  10a |  49 |     1920    |     960     |     8   |      959    | 151.0 MB/s 
  10b |  49 |     1920    |     960     |     8   |      480    | 157.2 MB/s 
  11a |  53 |     2048    |    1024     |     8   |     1023    | 148.2 MB/s 
  11b |  53 |     2048    |    1024     |     8   |      512    | 156.2 MB/s 
  12a |  56 |     2176    |    1088     |     8   |     1087    | 148.0 MB/s 
  12b |  56 |     2176    |    1088     |     8   |      544    | 155.4 MB/s 
  13a |  59 |     2304    |    1152     |     8   |     1151    | 150.5 MB/s 
  13b |  59 |     2304    |    1152     |     8   |      576    | 157.3 MB/s 

--- Targeting Fastest Result of md_sync_window 576 bytes for Final Pass ---


--- FULLY AUTOMATIC nr_requests TEST 2 (4 Sample Points @ 60sec Duration)---

Test | num_stripes | sync_window | nr_requests | sync_thresh |   Speed 
---------------------------------------------------------------------------
  1   |     1152    |     576     |     128     |      575    | 162.0 MB/s 
  2   |     1152    |     576     |     128     |      288    | 160.9 MB/s 
  3   |     1152    |     576     |       8     |      575    | 173.0 MB/s 
  4   |     1152    |     576     |       8     |      288    | 175.2 MB/s 

Fastest vals were nr_reqs=8 and sync_thresh=50% of sync_window at 175.2 MB/s

This nr_requests value will be used for the next test.



--- FULLY AUTOMATIC TEST PASS 2 (Fine - 33 Sample Points @ 30sec Duration)---

Test | RAM | num_stripes | sync_window | nr_reqs | sync_thresh |   Speed 
-----------------------------------------------------------------------------
   1a |  23 |      896    |     448     |     8   |      447    | 159.4 MB/s 
   1b |  23 |      896    |     448     |     8   |      224    | 164.1 MB/s 
   2a |  23 |      912    |     456     |     8   |      455    | 131.3 MB/s 
   2b |  23 |      912    |     456     |     8   |      228    | 162.6 MB/s 
   3a |  24 |      928    |     464     |     8   |      463    | 159.7 MB/s 
   3b |  24 |      928    |     464     |     8   |      232    | 164.1 MB/s 
   4a |  24 |      944    |     472     |     8   |      471    | 166.7 MB/s 
   4b |  24 |      944    |     472     |     8   |      236    | 162.2 MB/s 
   5a |  24 |      960    |     480     |     8   |      479    | 159.6 MB/s 
   5b |  24 |      960    |     480     |     8   |      240    | 162.0 MB/s 
   6a |  25 |      976    |     488     |     8   |      487    | 159.0 MB/s 
   6b |  25 |      976    |     488     |     8   |      244    | 163.3 MB/s 
   7a |  25 |      992    |     496     |     8   |      495    | 133.2 MB/s 
   7b |  25 |      992    |     496     |     8   |      248    | 163.1 MB/s 
   8a |  26 |     1008    |     504     |     8   |      503    | 157.8 MB/s 
   8b |  26 |     1008    |     504     |     8   |      252    | 162.7 MB/s 
   9a |  26 |     1024    |     512     |     8   |      511    | 137.2 MB/s 
   9b |  26 |     1024    |     512     |     8   |      256    | 163.2 MB/s 
  10a |  26 |     1040    |     520     |     8   |      519    | 144.1 MB/s 
  10b |  26 |     1040    |     520     |     8   |      260    | 162.4 MB/s 
  11a |  27 |     1056    |     528     |     8   |      527    | 155.6 MB/s 
  11b |  27 |     1056    |     528     |     8   |      264    | 161.0 MB/s 
  12a |  27 |     1072    |     536     |     8   |      535    | 130.5 MB/s 
  12b |  27 |     1072    |     536     |     8   |      268    | 163.5 MB/s 
  13a |  28 |     1088    |     544     |     8   |      543    | 154.6 MB/s 
  13b |  28 |     1088    |     544     |     8   |      272    | 161.0 MB/s 
  14a |  28 |     1104    |     552     |     8   |      551    | 155.0 MB/s 
  14b |  28 |     1104    |     552     |     8   |      276    | 161.2 MB/s 
  15a |  29 |     1120    |     560     |     8   |      559    | 123.6 MB/s 
  15b |  29 |     1120    |     560     |     8   |      280    | 161.6 MB/s 
  16a |  29 |     1136    |     568     |     8   |      567    | 155.3 MB/s 
  16b |  29 |     1136    |     568     |     8   |      284    | 161.4 MB/s 
  17a |  29 |     1152    |     576     |     8   |      575    | 151.3 MB/s 
  17b |  29 |     1152    |     576     |     8   |      288    | 165.8 MB/s 
  18a |  30 |     1168    |     584     |     8   |      583    | 154.4 MB/s 
  18b |  30 |     1168    |     584     |     8   |      292    | 161.0 MB/s 
  19a |  30 |     1184    |     592     |     8   |      591    | 155.9 MB/s 
  19b |  30 |     1184    |     592     |     8   |      296    | 162.4 MB/s 
  20a |  31 |     1200    |     600     |     8   |      599    | 155.9 MB/s 
  20b |  31 |     1200    |     600     |     8   |      300    | 161.2 MB/s 
  21a |  31 |     1216    |     608     |     8   |      607    | 125.6 MB/s 
  21b |  31 |     1216    |     608     |     8   |      304    | 161.2 MB/s 
  22a |  31 |     1232    |     616     |     8   |      615    | 149.8 MB/s 
  22b |  31 |     1232    |     616     |     8   |      308    | 161.2 MB/s 
  23a |  32 |     1248    |     624     |     8   |      623    | 158.8 MB/s 
  23b |  32 |     1248    |     624     |     8   |      312    | 159.3 MB/s 
  24a |  32 |     1264    |     632     |     8   |      631    | 156.5 MB/s 
  24b |  32 |     1264    |     632     |     8   |      316    | 161.1 MB/s 
  25a |  33 |     1280    |     640     |     8   |      639    | 155.2 MB/s 
  25b |  33 |     1280    |     640     |     8   |      320    | 161.1 MB/s 
  26a |  33 |     1296    |     648     |     8   |      647    | 154.6 MB/s 
  26b |  33 |     1296    |     648     |     8   |      324    | 160.0 MB/s 
  27a |  34 |     1312    |     656     |     8   |      655    | 120.8 MB/s 
  27b |  34 |     1312    |     656     |     8   |      328    | 162.7 MB/s 
  28a |  34 |     1328    |     664     |     8   |      663    | 156.3 MB/s 
  28b |  34 |     1328    |     664     |     8   |      332    | 159.8 MB/s 
  29a |  34 |     1344    |     672     |     8   |      671    | 159.9 MB/s 
  29b |  34 |     1344    |     672     |     8   |      336    | 159.5 MB/s 
  30a |  35 |     1360    |     680     |     8   |      679    | 152.4 MB/s 
  30b |  35 |     1360    |     680     |     8   |      340    | 157.8 MB/s 
  31a |  35 |     1376    |     688     |     8   |      687    | 155.9 MB/s 
  31b |  35 |     1376    |     688     |     8   |      344    | 159.8 MB/s 
  32a |  36 |     1392    |     696     |     8   |      695    | 149.0 MB/s 
  32b |  36 |     1392    |     696     |     8   |      348    | 140.2 MB/s 
  33a |  36 |     1408    |     704     |     8   |      703    | 121.7 MB/s 
  33b |  36 |     1408    |     704     |     8   |      352    | 158.8 MB/s 

The results below do NOT include the Basline test of current values.

The Fastest Sync Speed tested was md_sync_window=472 at 166.7 MB/s
     Tunable (md_num_stripes): 944
     Tunable (md_sync_window): 472
     Tunable (md_sync_thresh): 471
     Tunable (nr_requests): 8
This will consume 24 MB with md_num_stripes=944, 2x md_sync_window.
This is 82MB less than your current utilization of 106MB.

The Thriftiest Sync Speed tested was md_sync_window=384 at 161.8 MB/s
     Tunable (md_num_stripes): 768
     Tunable (md_sync_window): 384
     Tunable (md_sync_thresh): 383
     Tunable (nr_requests): 8
This will consume 19 MB with md_num_stripes=768, 2x md_sync_window.
This is 87MB less than your current utilization of 106MB.

The Recommended Sync Speed is md_sync_window=472 at 166.7 MB/s
     Tunable (md_num_stripes): 944
     Tunable (md_sync_window): 472
     Tunable (md_sync_thresh): 471
     Tunable (nr_requests): 8
This will consume 24 MB with md_num_stripes=944, 2x md_sync_window.
This is 82MB less than your current utilization of 106MB.

NOTE: Adding additional drives will increase memory consumption.

In unRAID, go to Settings > Disk Settings to set your chosen parameter values.

Completed: 0 Hrs 54 Min 55 Sec.


System Info:  Tower7
              unRAID version 6.2.0-rc4
                   md_num_stripes=4096
                   md_sync_window=2048
                   md_sync_thresh=2000
                   nr_requests=8 (Global Setting)
                   sbNumDisks=6
              CPU: Intel(R) Xeon(R) CPU E31220 @ 3.10GHz
              RAM: 32GiB System Memory

Outputting lshw information for Drives and Controllers:

Bus info          Device       Class      Description
=====================================================
pci@0000:02:00.0  scsi1        storage    ASC-1405 Unified Serial HBA
scsi@1:0.1.0      /dev/sdk     disk       120GB KINGSTON SV300S3
scsi@1:0.2.0      /dev/sdl     disk       120GB KINGSTON SV300S3
scsi@1:0.3.0      /dev/sdm     disk       120GB KINGSTON SV300S3
scsi@1:0.0.0      /dev/sdj     disk       120GB KINGSTON SV300S3
pci@0000:03:00.0               storage    ASM1062 Serial ATA Controller
pci@0000:00:1f.2               storage    6 Series/C200 Series Chipset Family SATA AHCI Controller
usb@2:1.4         scsi0        storage    
scsi@0:0.0.0      /dev/sda     disk       7864MB DataTraveler 2.0
                  /dev/sda     disk       7864MB 
                  scsi2        storage    
scsi@2:0.0.0      /dev/sdb     disk       512GB TS512GSSD370S
                  scsi3        storage    
scsi@3:0.0.0      /dev/sdc     disk       3TB TOSHIBA DT01ACA3
                  scsi4        storage    
scsi@4:0.0.0      /dev/sdd     disk       3TB TOSHIBA DT01ACA3
                  scsi5        storage    
scsi@5:0.0.0      /dev/sde     disk       3TB TOSHIBA DT01ACA3
                  scsi6        storage    
scsi@6:0.0.0      /dev/sdf     disk       3TB TOSHIBA DT01ACA3
                  scsi7        storage    
scsi@7:0.0.0      /dev/sdg     disk       3TB TOSHIBA DT01ACA3
                  scsi8        storage    
scsi@8:0.0.0      /dev/sdh     disk       180GB INTEL SSDSC2CT18
                  scsi9        storage    
scsi@9:0.0.0      /dev/sdi     disk       500GB TOSHIBA MK5055GS

Array Devices:
    Disk0 sdc is a Parity drive named parity
    Disk1 sdd is a Data drive named disk1
    Disk2 sde is a Data drive named disk2
    Disk3 sdf is a Data drive named disk3
    Disk4 sdg is a Data drive named disk4

Outputting free low memory information...

              total        used        free      shared  buff/cache   available
Mem:       32991160     5328952    27049260      419436      612948    26952308
Low:       32991160     5941900    27049260
High:             0           0           0
Swap:             0           0           0


                      *** END OF REPORT ***

 

 

 

Link to post

Tower5 - SSD server - LSI9207 (with Intel RES2SV240) + LSI9211 (flashed H310) + Intel PCH

 

 

       unRAID Tunables Tester v4.0b2 by Pauven (for unRAID v6.2)

        Tunables Report produced Thu Aug 25 06:31:47 BST 2016

                         Run on server: Tower5

                   Short Automatic Parity Sync Test


NOTE: Use the smallest set of values that produce good results. Larger values
      increase server memory use, and may cause stability issues with unRAID,
      especially if you have any add-ons or plug-ins installed.


Current Values:  md_num_stripes=4480, md_sync_window=2048, md_sync_thresh=2000
                 Global nr_requests=8
                    sdh nr_requests=8
                    sdj nr_requests=8
                    sdk nr_requests=8
                    sdl nr_requests=8
                    sdm nr_requests=8
                    sdn nr_requests=8
                    sdo nr_requests=8
                    sdp nr_requests=8
                    sdq nr_requests=8
                    sdr nr_requests=8
                    sds nr_requests=8
                    sdt nr_requests=8
                    sdu nr_requests=8
                    sdv nr_requests=8
                    sdw nr_requests=8
                    sdc nr_requests=8
                    sdb nr_requests=8
                    sde nr_requests=8
                    sdf nr_requests=8
                    sdg nr_requests=8
                    sdd nr_requests=8
                    sdad nr_requests=8
                    sdac nr_requests=8
                    sdx nr_requests=8
                    sdae nr_requests=8
                    sdab nr_requests=8
                    sdaa nr_requests=8
                    sdz nr_requests=8
                    sdy nr_requests=8
                    sdi nr_requests=8


--- INITIAL BASELINE TEST OF CURRENT VALUES (1 Sample Point @ 30sec Duration)---

Test | RAM | num_stripes | sync_window | nr_reqs | sync_thresh |   Speed 
-----------------------------------------------------------------------------
   1  | 536 |     4480    |    2048     |     8   |     2000    | 204.0 MB/s 


--- FULLY AUTOMATIC nr_requests TEST 1 (4 Sample Points @ 60sec Duration)---

Test | num_stripes | sync_window | nr_requests | sync_thresh |   Speed 
---------------------------------------------------------------------------
  1   |     1536    |     768     |     128     |      767    | 156.6 MB/s 
  2   |     1536    |     768     |     128     |      384    | 146.1 MB/s 
  3   |     1536    |     768     |       8     |      767    | 155.9 MB/s 
  4   |     1536    |     768     |       8     |      384    | 146.6 MB/s 

Fastest vals were nr_reqs=128 and sync_thresh=99% of sync_window at 156.6 MB/s

This nr_requests value will be used for the next test.


--- FULLY AUTOMATIC TEST PASS 1a (Rough - 13 Sample Points @ 30sec Duration)---

Test | RAM | num_stripes | sync_window | nr_reqs | sync_thresh |   Speed 
-----------------------------------------------------------------------------
   1a |  91 |      768    |     384     |   128   |      383    | 147.3 MB/s 
   1b |  91 |      768    |     384     |   128   |      192    | 128.0 MB/s 
   2a | 107 |      896    |     448     |   128   |      447    | 153.3 MB/s 
   2b | 107 |      896    |     448     |   128   |      224    | 131.8 MB/s 
   3a | 122 |     1024    |     512     |   128   |      511    | 157.7 MB/s 
   3b | 122 |     1024    |     512     |   128   |      256    | 129.6 MB/s 
   4a | 137 |     1152    |     576     |   128   |      575    | 145.6 MB/s 
   4b | 137 |     1152    |     576     |   128   |      288    | 140.8 MB/s 
   5a | 153 |     1280    |     640     |   128   |      639    | 148.3 MB/s 
   5b | 153 |     1280    |     640     |   128   |      320    | 139.5 MB/s 
   6a | 168 |     1408    |     704     |   128   |      703    | 147.8 MB/s 
   6b | 168 |     1408    |     704     |   128   |      352    | 137.1 MB/s 
   7a | 183 |     1536    |     768     |   128   |      767    | 150.0 MB/s 
   7b | 183 |     1536    |     768     |   128   |      384    | 133.0 MB/s 
   8a | 199 |     1664    |     832     |   128   |      831    | 142.7 MB/s 
   8b | 199 |     1664    |     832     |   128   |      416    | 139.0 MB/s 
   9a | 214 |     1792    |     896     |   128   |      895    | 138.4 MB/s 
   9b | 214 |     1792    |     896     |   128   |      448    | 142.9 MB/s 
  10a | 229 |     1920    |     960     |   128   |      959    | 138.9 MB/s 
  10b | 229 |     1920    |     960     |   128   |      480    | 145.9 MB/s 
  11a | 245 |     2048    |    1024     |   128   |     1023    | 138.2 MB/s 
  11b | 245 |     2048    |    1024     |   128   |      512    | 140.9 MB/s 
  12a | 260 |     2176    |    1088     |   128   |     1087    | 133.7 MB/s 
  12b | 260 |     2176    |    1088     |   128   |      544    | 142.0 MB/s 
  13a | 275 |     2304    |    1152     |   128   |     1151    | 139.7 MB/s 
  13b | 275 |     2304    |    1152     |   128   |      576    | 139.6 MB/s 

--- Targeting Fastest Result of md_sync_window 512 bytes for Final Pass ---


--- FULLY AUTOMATIC nr_requests TEST 2 (4 Sample Points @ 60sec Duration)---

Test | num_stripes | sync_window | nr_requests | sync_thresh |   Speed 
---------------------------------------------------------------------------
  1   |     1024    |     512     |     128     |      511    | 141.2 MB/s 
  2   |     1024    |     512     |     128     |      256    | 122.9 MB/s 
  3   |     1024    |     512     |       8     |      511    | 143.2 MB/s 
  4   |     1024    |     512     |       8     |      256    | 117.7 MB/s 

Fastest vals were nr_reqs=8 and sync_thresh=99% of sync_window at 143.2 MB/s

This nr_requests value will be used for the next test.



--- FULLY AUTOMATIC TEST PASS 2 (Fine - 33 Sample Points @ 30sec Duration)---

Test | RAM | num_stripes | sync_window | nr_reqs | sync_thresh |   Speed 
-----------------------------------------------------------------------------
   1a |  91 |      768    |     384     |     8   |      383    | 111.2 MB/s 
   1b |  91 |      768    |     384     |     8   |      192    | 112.7 MB/s 
   2a |  93 |      784    |     392     |     8   |      391    | 115.2 MB/s 
   2b |  93 |      784    |     392     |     8   |      196    |  88.6 MB/s 
   3a |  95 |      800    |     400     |     8   |      399    |  56.2 MB/s 
   3b |  95 |      800    |     400     |     8   |      200    |  84.9 MB/s 
   4a |  97 |      816    |     408     |     8   |      407    | 101.6 MB/s 
   4b |  97 |      816    |     408     |     8   |      204    | 100.9 MB/s 
   5a |  99 |      832    |     416     |     8   |      415    | 121.4 MB/s 
   5b |  99 |      832    |     416     |     8   |      208    | 110.3 MB/s 
   6a | 101 |      848    |     424     |     8   |      423    | 126.4 MB/s 
   6b | 101 |      848    |     424     |     8   |      212    | 113.3 MB/s 
   7a | 103 |      864    |     432     |     8   |      431    | 135.9 MB/s 
   7b | 103 |      864    |     432     |     8   |      216    | 114.7 MB/s 
   8a | 105 |      880    |     440     |     8   |      439    | 134.5 MB/s 
   8b | 105 |      880    |     440     |     8   |      220    | 120.2 MB/s 
   9a | 107 |      896    |     448     |     8   |      447    | 139.0 MB/s 
   9b | 107 |      896    |     448     |     8   |      224    | 120.9 MB/s 
  10a | 109 |      912    |     456     |     8   |      455    | 134.5 MB/s 
  10b | 109 |      912    |     456     |     8   |      228    | 117.1 MB/s 
  11a | 111 |      928    |     464     |     8   |      463    | 127.9 MB/s 
  11b | 111 |      928    |     464     |     8   |      232    | 117.1 MB/s 
  12a | 113 |      944    |     472     |     8   |      471    | 128.8 MB/s 
  12b | 113 |      944    |     472     |     8   |      236    | 112.9 MB/s 
  13a | 114 |      960    |     480     |     8   |      479    | 130.4 MB/s 
  13b | 114 |      960    |     480     |     8   |      240    | 113.9 MB/s 
  14a | 116 |      976    |     488     |     8   |      487    | 136.9 MB/s 
  14b | 116 |      976    |     488     |     8   |      244    | 112.1 MB/s 
  15a | 118 |      992    |     496     |     8   |      495    | 131.4 MB/s 
  15b | 118 |      992    |     496     |     8   |      248    | 101.0 MB/s 
  16a | 120 |     1008    |     504     |     8   |      503    | 112.9 MB/s 
  16b | 120 |     1008    |     504     |     8   |      252    | 111.3 MB/s 
  17a | 122 |     1024    |     512     |     8   |      511    | 117.6 MB/s 
  17b | 122 |     1024    |     512     |     8   |      256    | 112.0 MB/s 
  18a | 124 |     1040    |     520     |     8   |      519    |  97.9 MB/s 
  18b | 124 |     1040    |     520     |     8   |      260    |  87.4 MB/s 
  19a | 126 |     1056    |     528     |     8   |      527    |  97.2 MB/s 
  19b | 126 |     1056    |     528     |     8   |      264    |  84.6 MB/s 
  20a | 128 |     1072    |     536     |     8   |      535    |  98.8 MB/s 
  20b | 128 |     1072    |     536     |     8   |      268    |  80.9 MB/s 
  21a | 130 |     1088    |     544     |     8   |      543    |  94.1 MB/s 
  21b | 130 |     1088    |     544     |     8   |      272    |  73.5 MB/s 
  22a | 132 |     1104    |     552     |     8   |      551    |  78.1 MB/s 
  22b | 132 |     1104    |     552     |     8   |      276    |  47.2 MB/s 
  23a | 134 |     1120    |     560     |     8   |      559    |  87.4 MB/s 
  23b | 134 |     1120    |     560     |     8   |      280    |  80.6 MB/s 
  24a | 135 |     1136    |     568     |     8   |      567    | 102.1 MB/s 
  24b | 135 |     1136    |     568     |     8   |      284    |  99.8 MB/s 
  25a | 137 |     1152    |     576     |     8   |      575    | 110.7 MB/s 
  25b | 137 |     1152    |     576     |     8   |      288    | 103.8 MB/s 
  26a | 139 |     1168    |     584     |     8   |      583    | 127.6 MB/s 
  26b | 139 |     1168    |     584     |     8   |      292    | 108.4 MB/s 
  27a | 141 |     1184    |     592     |     8   |      591    | 113.4 MB/s 
  27b | 141 |     1184    |     592     |     8   |      296    | 112.1 MB/s 
  28a | 143 |     1200    |     600     |     8   |      599    | 119.6 MB/s 
  28b | 143 |     1200    |     600     |     8   |      300    | 116.0 MB/s 
  29a | 145 |     1216    |     608     |     8   |      607    | 126.0 MB/s 
  29b | 145 |     1216    |     608     |     8   |      304    | 116.6 MB/s 
  30a | 147 |     1232    |     616     |     8   |      615    | 131.9 MB/s 
  30b | 147 |     1232    |     616     |     8   |      308    | 112.2 MB/s 
  31a | 149 |     1248    |     624     |     8   |      623    | 134.7 MB/s 
  31b | 149 |     1248    |     624     |     8   |      312    | 119.8 MB/s 
  32a | 151 |     1264    |     632     |     8   |      631    | 124.7 MB/s 
  32b | 151 |     1264    |     632     |     8   |      316    | 115.5 MB/s 
  33a | 153 |     1280    |     640     |     8   |      639    | 115.0 MB/s 
  33b | 153 |     1280    |     640     |     8   |      320    | 114.6 MB/s 

The results below do NOT include the Basline test of current values.

The Fastest Sync Speed tested was md_sync_window=768 at 150.0 MB/s
     Tunable (md_num_stripes): 1536
     Tunable (md_sync_window): 768
     Tunable (md_sync_thresh): 767
     Tunable (nr_requests): 8
This will consume 183 MB with md_num_stripes=1536, 2x md_sync_window.
This is 353MB less than your current utilization of 536MB.

The Thriftiest Sync Speed tested was md_sync_window=704 at 147.8 MB/s
     Tunable (md_num_stripes): 1408
     Tunable (md_sync_window): 704
     Tunable (md_sync_thresh): 703
     Tunable (nr_requests): 8
This will consume 168 MB with md_num_stripes=1408, 2x md_sync_window.
This is 368MB less than your current utilization of 536MB.

The Recommended Sync Speed is md_sync_window=768 at 150.0 MB/s
     Tunable (md_num_stripes): 1536
     Tunable (md_sync_window): 768
     Tunable (md_sync_thresh): 767
     Tunable (nr_requests): 8
This will consume 183 MB with md_num_stripes=1536, 2x md_sync_window.
This is 353MB less than your current utilization of 536MB.

NOTE: Adding additional drives will increase memory consumption.

In unRAID, go to Settings > Disk Settings to set your chosen parameter values.

Completed: 0 Hrs 53 Min 51 Sec.


System Info:  Tower5
              unRAID version 6.2.0-rc4
                   md_num_stripes=4480
                   md_sync_window=2048
                   md_sync_thresh=2000
                   nr_requests=8 (Global Setting)
                   sbNumDisks=30
              CPU: Intel(R) Pentium(R) CPU G4400 @ 3.30GHz
              RAM: 8GiB System Memory

Outputting lshw information for Drives and Controllers:

Bus info          Device      Class          Description
========================================================
pci@0000:01:00.0  scsi1       Storage  SAS2308 PCI-Express Fusion-MPT SAS-2
scsi@1:0.3.0      /dev/sdk       Disk    256GB TS256GSSD370S
scsi@1:0.4.0      /dev/sdl       Disk    64GB TS64GSSD370S
scsi@1:0.5.0      /dev/sdm       Disk    64GB TS64GSSD370S
scsi@1:0.6.0      /dev/sdn       Disk    64GB TS64GSSD370S
scsi@1:0.7.0      /dev/sdo       Disk    64GB TS64GSSD370S
scsi@1:0.8.0      /dev/sdp       Disk    64GB TS64GSSD370S
scsi@1:0.9.0      /dev/sdq       Disk    64GB TS64GSSD370S
scsi@1:0.10.0     /dev/sdr       Disk    64GB TS64GSSD370S
scsi@1:0.11.0     /dev/sds       Disk    64GB TS64GSSD370S
scsi@1:0.12.0     /dev/sdt       Disk    120GB GOODRAM
scsi@1:0.13.0     /dev/sdu       Disk    120GB GOODRAM
scsi@1:0.14.0     /dev/sdv       Disk    120GB GOODRAM
scsi@1:0.15.0     /dev/sdw       Disk    120GB GOODRAM
scsi@1:0.0.0      /dev/sdh       Disk    256GB TS256GSSD370S
scsi@1:0.1.0      /dev/sdi       Disk    256GB TS256GSSD370S
scsi@1:0.2.0      /dev/sdj       Disk    256GB TS256GSSD370S
pci@0000:02:00.0  scsi8       Storage  SAS2008 PCI-Express Fusion-MPT SAS-2 [Falcon]
scsi@8:0.0.0      /dev/sdx       Disk    120GB GOODRAM
scsi@8:0.1.0      /dev/sdy       Disk    64GB SAMSUNG SSD 830
scsi@8:0.2.0      /dev/sdz       Disk    64GB SAMSUNG SSD 830
scsi@8:0.3.0      /dev/sdaa      Disk    120GB Samsung SSD 840
scsi@8:0.4.0      /dev/sdab      Disk    120GB Samsung SSD 840
scsi@8:0.5.0      /dev/sdac      Disk    120GB GOODRAM
scsi@8:0.6.0      /dev/sdad      Disk    120GB SanDisk SDSSDA12
scsi@8:0.7.0      /dev/sdae      Disk    120GB Samsung SSD 840
pci@0000:00:17.0              Storage  Sunrise Point-H SATA controller [AHCI mode]
pci@0000:06:00.0              Storage  NVMe SSD Controller
usb@1:8           scsi0       Storage  
scsi@0:0.0.0      /dev/sda       Disk    15GB DataTraveler 2.0
                  /dev/sda       Disk    15GB 
                  scsi2       Storage  
scsi@2:0.0.0      /dev/sdb       Disk    120GB GOODRAM
                  scsi3       Storage  
scsi@3:0.0.0      /dev/sdc       Disk    120GB GOODRAM
                  scsi4       Storage  
scsi@4:0.0.0      /dev/sdd       Disk    80GB INTEL SSDSA2CW08
                  scsi5       Storage  
scsi@5:0.0.0      /dev/sde       Disk    80GB INTEL SSDSA2CW08
                  scsi6       Storage  
scsi@6:0.0.0      /dev/sdf       Disk    80GB INTEL SSDSA2CW08
                  scsi7       Storage  
scsi@7:0.0.0      /dev/sdg       Disk    80GB INTEL SSDSA2CW08

Array Devices:
    Disk0 sdh is a Parity drive named parity
    Disk1 sdj is a Data drive named disk1
    Disk2 sdk is a Data drive named disk2
    Disk3 sdl is a Data drive named disk3
    Disk4 sdm is a Data drive named disk4
    Disk5 sdn is a Data drive named disk5
    Disk6 sdo is a Data drive named disk6
    Disk7 sdp is a Data drive named disk7
    Disk8 sdq is a Data drive named disk8
    Disk9 sdr is a Data drive named disk9
    Disk10 sds is a Data drive named disk10
    Disk11 sdt is a Data drive named disk11
    Disk12 sdu is a Data drive named disk12
    Disk13 sdv is a Data drive named disk13
    Disk14 sdw is a Data drive named disk14
    Disk15 sdc is a Data drive named disk15
    Disk16 sdb is a Data drive named disk16
    Disk17 sde is a Data drive named disk17
    Disk18 sdf is a Data drive named disk18
    Disk19 sdg is a Data drive named disk19
    Disk20 sdd is a Data drive named disk20
    Disk21 sdad is a Data drive named disk21
    Disk22 sdac is a Data drive named disk22
    Disk23 sdx is a Data drive named disk23
    Disk24 sdae is a Data drive named disk24
    Disk25 sdab is a Data drive named disk25
    Disk26 sdaa is a Data drive named disk26
    Disk27 sdz is a Data drive named disk27
    Disk28 sdy is a Data drive named disk28
    Disk29 sdi is a Parity drive named parity2

Outputting free low memory information...

              total        used        free      shared  buff/cache   available
Mem:        7865860      681308     6765900      351460      418652     6601976
Low:        7865860     1099960     6765900
High:             0           0           0
Swap:             0           0           0


                      *** END OF REPORT ***

 

I know this is just the quick test but since parity check is very fast on this server I tried with the fastest values found:

 

With my previous settings:

 

Description: Duration: 19 minutes, 8 seconds. Average speed: 223.0 MB/s

 

New settings after the quick test:

 

Description: Duration: 22 minutes, 7 seconds. Average speed: 193.0 MB/s

 

 

I'll try again with the normal tests, but probably not before the weekend.

Link to post

Tower6 - 22HDDs (2&3TB) - SAS2LP +SASLP (using 4 ports only due to limited bandwidth) + Adaptec 1430SA + Intel PCH

 

 

       unRAID Tunables Tester v4.0b2 by Pauven (for unRAID v6.2)

        Tunables Report produced Thu Aug 25 10:36:23 BST 2016

                         Run on server: Tower6

                   Short Automatic Parity Sync Test


NOTE: Use the smallest set of values that produce good results. Larger values
      increase server memory use, and may cause stability issues with unRAID,
      especially if you have any add-ons or plug-ins installed.


Current Values:  md_num_stripes=4480, md_sync_window=2048, md_sync_thresh=2000
                 Global nr_requests=8
                    sdf nr_requests=8
                    sdg nr_requests=8
                    sdi nr_requests=8
                    sdh nr_requests=8
                    sdk nr_requests=8
                    sdj nr_requests=8
                    sdv nr_requests=8
                    sdw nr_requests=8
                    sdt nr_requests=8
                    sdu nr_requests=8
                    sdr nr_requests=8
                    sdq nr_requests=8
                    sds nr_requests=8
                    sdb nr_requests=8
                    sdc nr_requests=8
                    sdp nr_requests=8
                    sdl nr_requests=8
                    sdo nr_requests=8
                    sdn nr_requests=8
                    sde nr_requests=8
                    sdd nr_requests=8
                    sdm nr_requests=8


--- INITIAL BASELINE TEST OF CURRENT VALUES (1 Sample Point @ 30sec Duration)---

Test | RAM | num_stripes | sync_window | nr_reqs | sync_thresh |   Speed 
-----------------------------------------------------------------------------
   1  | 396 |     4480    |    2048     |     8   |     2000    | 114.2 MB/s 


--- FULLY AUTOMATIC nr_requests TEST 1 (4 Sample Points @ 60sec Duration)---

Test | num_stripes | sync_window | nr_requests | sync_thresh |   Speed 
---------------------------------------------------------------------------
  1   |     1536    |     768     |     128     |      767    |  36.0 MB/s 
  2   |     1536    |     768     |     128     |      384    |  75.9 MB/s 
  3   |     1536    |     768     |       8     |      767    |  97.1 MB/s 
  4   |     1536    |     768     |       8     |      384    |  92.8 MB/s 

Fastest vals were nr_reqs=8 and sync_thresh=99% of sync_window at 97.1 MB/s

This nr_requests value will be used for the next test.


--- FULLY AUTOMATIC TEST PASS 1a (Rough - 13 Sample Points @ 30sec Duration)---

Test | RAM | num_stripes | sync_window | nr_reqs | sync_thresh |   Speed 
-----------------------------------------------------------------------------
   1a |  67 |      768    |     384     |     8   |      383    |  66.3 MB/s 
   1b |  67 |      768    |     384     |     8   |      192    |  46.6 MB/s 
   2a |  79 |      896    |     448     |     8   |      447    |  67.4 MB/s 
   2b |  79 |      896    |     448     |     8   |      224    |  46.9 MB/s 
   3a |  90 |     1024    |     512     |     8   |      511    |  74.5 MB/s 
   3b |  90 |     1024    |     512     |     8   |      256    |  63.8 MB/s 
   4a | 101 |     1152    |     576     |     8   |      575    |  76.2 MB/s 
   4b | 101 |     1152    |     576     |     8   |      288    |  74.6 MB/s 
   5a | 113 |     1280    |     640     |     8   |      639    |  95.6 MB/s 
   5b | 113 |     1280    |     640     |     8   |      320    |  80.6 MB/s 
   6a | 124 |     1408    |     704     |     8   |      703    |  95.3 MB/s 
   6b | 124 |     1408    |     704     |     8   |      352    |  87.7 MB/s 
   7a | 135 |     1536    |     768     |     8   |      767    |  96.7 MB/s 
   7b | 135 |     1536    |     768     |     8   |      384    |  89.4 MB/s 
   8a | 147 |     1664    |     832     |     8   |      831    |  82.8 MB/s 
   8b | 147 |     1664    |     832     |     8   |      416    |  88.9 MB/s 
   9a | 158 |     1792    |     896     |     8   |      895    | 108.7 MB/s 
   9b | 158 |     1792    |     896     |     8   |      448    |  98.8 MB/s 
  10a | 169 |     1920    |     960     |     8   |      959    | 107.2 MB/s 
  10b | 169 |     1920    |     960     |     8   |      480    | 100.4 MB/s 
  11a | 181 |     2048    |    1024     |     8   |     1023    | 104.6 MB/s 
  11b | 181 |     2048    |    1024     |     8   |      512    |  99.3 MB/s 
  12a | 192 |     2176    |    1088     |     8   |     1087    | 100.6 MB/s 
  12b | 192 |     2176    |    1088     |     8   |      544    |  98.9 MB/s 
  13a | 203 |     2304    |    1152     |     8   |     1151    | 109.3 MB/s 
  13b | 203 |     2304    |    1152     |     8   |      576    |  71.0 MB/s 

--- FULLY AUTOMATIC TEST PASS 1c (Rough - 18 Sample Points @ 30sec Duration)---

Test | RAM | num_stripes | sync_window | nr_reqs | sync_thresh |   Speed 
-----------------------------------------------------------------------------
   1a | 215 |     2432    |    1216     |     8   |     1215    |  96.5 MB/s 
   1b | 215 |     2432    |    1216     |     8   |      608    | 104.8 MB/s 
   2a | 226 |     2560    |    1280     |     8   |     1279    | 108.4 MB/s 
   2b | 226 |     2560    |    1280     |     8   |      640    | 101.9 MB/s 
   3a | 237 |     2688    |    1344     |     8   |     1343    | 108.6 MB/s 
   3b | 237 |     2688    |    1344     |     8   |      672    | 106.1 MB/s 
   4a | 249 |     2816    |    1408     |     8   |     1407    | 112.9 MB/s 
   4b | 249 |     2816    |    1408     |     8   |      704    | 100.9 MB/s 
   5a | 260 |     2944    |    1472     |     8   |     1471    | 105.9 MB/s 
   5b | 260 |     2944    |    1472     |     8   |      736    | 108.2 MB/s 
   6a | 271 |     3072    |    1536     |     8   |     1535    |  83.9 MB/s 
   6b | 271 |     3072    |    1536     |     8   |      768    | 104.0 MB/s 
   7a | 283 |     3200    |    1600     |     8   |     1599    | 116.8 MB/s 
   7b | 283 |     3200    |    1600     |     8   |      800    |  99.3 MB/s 
   8a | 294 |     3328    |    1664     |     8   |     1663    | 104.7 MB/s 
   8b | 294 |     3328    |    1664     |     8   |      832    | 112.3 MB/s 
   9a | 305 |     3456    |    1728     |     8   |     1727    | 108.6 MB/s 
   9b | 305 |     3456    |    1728     |     8   |      864    | 106.7 MB/s 
  10a | 317 |     3584    |    1792     |     8   |     1791    | 113.4 MB/s 
  10b | 317 |     3584    |    1792     |     8   |      896    | 108.6 MB/s 
  11a | 328 |     3712    |    1856     |     8   |     1855    | 103.2 MB/s 
  11b | 328 |     3712    |    1856     |     8   |      928    | 107.5 MB/s 
  12a | 339 |     3840    |    1920     |     8   |     1919    |  80.4 MB/s 
  12b | 339 |     3840    |    1920     |     8   |      960    |  99.0 MB/s 
  13a | 350 |     3968    |    1984     |     8   |     1983    | 105.4 MB/s 
  13b | 350 |     3968    |    1984     |     8   |      992    | 108.8 MB/s 
  14a | 362 |     4096    |    2048     |     8   |     2047    | 107.4 MB/s 
  14b | 362 |     4096    |    2048     |     8   |     1024    | 104.5 MB/s 
  15a | 373 |     4224    |    2112     |     8   |     2111    | 110.0 MB/s 
  15b | 373 |     4224    |    2112     |     8   |     1056    | 103.3 MB/s 
  16a | 384 |     4352    |    2176     |     8   |     2175    | 106.7 MB/s 
  16b | 384 |     4352    |    2176     |     8   |     1088    | 112.1 MB/s 
  17a | 396 |     4480    |    2240     |     8   |     2239    | 118.4 MB/s 
  17b | 396 |     4480    |    2240     |     8   |     1120    |  83.6 MB/s 
  18a | 407 |     4608    |    2304     |     8   |     2303    | 114.7 MB/s 
  18b | 407 |     4608    |    2304     |     8   |     1152    | 112.4 MB/s 

--- Targeting Fastest Result of md_sync_window 2240 bytes for Final Pass ---


--- FULLY AUTOMATIC nr_requests TEST 2 (4 Sample Points @ 60sec Duration)---

Test | num_stripes | sync_window | nr_requests | sync_thresh |   Speed 
---------------------------------------------------------------------------
  1   |     4480    |    2240     |     128     |     2239    |  42.9 MB/s 
  2   |     4480    |    2240     |     128     |     1120    | 118.9 MB/s 
  3   |     4480    |    2240     |       8     |     2239    | 113.9 MB/s 
  4   |     4480    |    2240     |       8     |     1120    | 111.3 MB/s 

Fastest vals were nr_reqs=128 and sync_thresh=50% of sync_window at 118.9 MB/s

This nr_requests value will be used for the next test.



--- FULLY AUTOMATIC TEST PASS 2 (Fine - 33 Sample Points @ 30sec Duration)---

Test | RAM | num_stripes | sync_window | nr_reqs | sync_thresh |   Speed 
-----------------------------------------------------------------------------
   1a | 373 |     4224    |    2112     |   128   |     2111    |  43.2 MB/s 
   1b | 373 |     4224    |    2112     |   128   |     1056    | 107.1 MB/s 
   2a | 375 |     4240    |    2120     |   128   |     2119    |  49.2 MB/s 
   2b | 375 |     4240    |    2120     |   128   |     1060    | 119.5 MB/s 
   3a | 376 |     4256    |    2128     |   128   |     2127    |  47.3 MB/s 
   3b | 376 |     4256    |    2128     |   128   |     1064    | 119.1 MB/s 
   4a | 377 |     4272    |    2136     |   128   |     2135    |  43.2 MB/s 
   4b | 377 |     4272    |    2136     |   128   |     1068    | 114.3 MB/s 
   5a | 379 |     4288    |    2144     |   128   |     2143    |  41.1 MB/s 
   5b | 379 |     4288    |    2144     |   128   |     1072    | 117.1 MB/s 
   6a | 380 |     4304    |    2152     |   128   |     2151    |  36.6 MB/s 
   6b | 380 |     4304    |    2152     |   128   |     1076    | 109.7 MB/s 
   7a | 382 |     4320    |    2160     |   128   |     2159    |  36.7 MB/s 
   7b | 382 |     4320    |    2160     |   128   |     1080    | 119.3 MB/s 
   8a | 383 |     4336    |    2168     |   128   |     2167    |  36.4 MB/s 
   8b | 383 |     4336    |    2168     |   128   |     1084    | 110.8 MB/s 
   9a | 384 |     4352    |    2176     |   128   |     2175    |  35.1 MB/s 
   9b | 384 |     4352    |    2176     |   128   |     1088    | 115.7 MB/s 
  10a | 386 |     4368    |    2184     |   128   |     2183    |  44.5 MB/s 
  10b | 386 |     4368    |    2184     |   128   |     1092    | 119.9 MB/s 
  11a | 387 |     4384    |    2192     |   128   |     2191    |  36.8 MB/s 
  11b | 387 |     4384    |    2192     |   128   |     1096    |  85.0 MB/s 
  12a | 389 |     4400    |    2200     |   128   |     2199    |  36.3 MB/s 
  12b | 389 |     4400    |    2200     |   128   |     1100    | 108.5 MB/s 
  13a | 390 |     4416    |    2208     |   128   |     2207    |  44.6 MB/s 
  13b | 390 |     4416    |    2208     |   128   |     1104    | 117.5 MB/s 
  14a | 392 |     4432    |    2216     |   128   |     2215    |  37.2 MB/s 
  14b | 392 |     4432    |    2216     |   128   |     1108    | 114.1 MB/s 
  15a | 393 |     4448    |    2224     |   128   |     2223    |  43.7 MB/s 
  15b | 393 |     4448    |    2224     |   128   |     1112    | 117.7 MB/s 
  16a | 394 |     4464    |    2232     |   128   |     2231    |  40.5 MB/s 
  16b | 394 |     4464    |    2232     |   128   |     1116    | 117.7 MB/s 
  17a | 396 |     4480    |    2240     |   128   |     2239    |  46.9 MB/s 
  17b | 396 |     4480    |    2240     |   128   |     1120    | 110.0 MB/s 
  18a | 397 |     4496    |    2248     |   128   |     2247    |  41.3 MB/s 
  18b | 397 |     4496    |    2248     |   128   |     1124    | 118.7 MB/s 
  19a | 399 |     4512    |    2256     |   128   |     2255    |  42.0 MB/s 
  19b | 399 |     4512    |    2256     |   128   |     1128    | 117.9 MB/s 
  20a | 400 |     4528    |    2264     |   128   |     2263    |  35.5 MB/s 
  20b | 400 |     4528    |    2264     |   128   |     1132    | 119.6 MB/s 
  21a | 401 |     4544    |    2272     |   128   |     2271    |  42.9 MB/s 
  21b | 401 |     4544    |    2272     |   128   |     1136    | 116.1 MB/s 
  22a | 403 |     4560    |    2280     |   128   |     2279    |  35.7 MB/s 
  22b | 403 |     4560    |    2280     |   128   |     1140    |  84.6 MB/s 
  23a | 404 |     4576    |    2288     |   128   |     2287    |  50.1 MB/s 
  23b | 404 |     4576    |    2288     |   128   |     1144    | 115.1 MB/s 
  24a | 406 |     4592    |    2296     |   128   |     2295    |  36.3 MB/s 
  24b | 406 |     4592    |    2296     |   128   |     1148    | 119.0 MB/s 
  25a | 407 |     4608    |    2304     |   128   |     2303    |  44.8 MB/s 
  25b | 407 |     4608    |    2304     |   128   |     1152    | 118.8 MB/s 
  26a | 409 |     4624    |    2312     |   128   |     2311    |  34.9 MB/s 
  26b | 409 |     4624    |    2312     |   128   |     1156    | 117.8 MB/s 
  27a | 410 |     4640    |    2320     |   128   |     2319    |  41.9 MB/s 
  27b | 410 |     4640    |    2320     |   128   |     1160    | 118.9 MB/s 
  28a | 411 |     4656    |    2328     |   128   |     2327    |  44.2 MB/s 
  28b | 411 |     4656    |    2328     |   128   |     1164    | 113.5 MB/s 
  29a | 413 |     4672    |    2336     |   128   |     2335    |  41.3 MB/s 
  29b | 413 |     4672    |    2336     |   128   |     1168    | 116.0 MB/s 
  30a | 414 |     4688    |    2344     |   128   |     2343    |  38.0 MB/s 
  30b | 414 |     4688    |    2344     |   128   |     1172    | 116.5 MB/s 
  31a | 416 |     4704    |    2352     |   128   |     2351    |  39.3 MB/s 
  31b | 416 |     4704    |    2352     |   128   |     1176    | 115.5 MB/s 
  32a | 417 |     4720    |    2360     |   128   |     2359    |  39.6 MB/s 
  32b | 417 |     4720    |    2360     |   128   |     1180    | 118.9 MB/s 
  33a | 418 |     4736    |    2368     |   128   |     2367    |  39.8 MB/s 
  33b | 418 |     4736    |    2368     |   128   |     1184    | 106.4 MB/s 

The results below do NOT include the Basline test of current values.

The Fastest Sync Speed tested was md_sync_window=2184 at 119.9 MB/s
     Tunable (md_num_stripes): 4368
     Tunable (md_sync_window): 2184
     Tunable (md_sync_thresh): 1092
     Tunable (nr_requests): 128
This will consume 386 MB with md_num_stripes=4368, 2x md_sync_window.
This is 10MB less than your current utilization of 396MB.

The Thriftiest Sync Speed tested was md_sync_window=2120 at 119.5 MB/s
     Tunable (md_num_stripes): 4240
     Tunable (md_sync_window): 2120
     Tunable (md_sync_thresh): 1060
     Tunable (nr_requests): 128
This will consume 375 MB with md_num_stripes=4240, 2x md_sync_window.
This is 21MB less than your current utilization of 396MB.

The Recommended Sync Speed is md_sync_window=2120 at 119.5 MB/s
     Tunable (md_num_stripes): 4240
     Tunable (md_sync_window): 2120
     Tunable (md_sync_thresh): 1060
     Tunable (nr_requests): 128
This will consume 375 MB with md_num_stripes=4240, 2x md_sync_window.
This is 21MB less than your current utilization of 396MB.

NOTE: Adding additional drives will increase memory consumption.

In unRAID, go to Settings > Disk Settings to set your chosen parameter values.

Completed: 1 Hrs 17 Min 44 Sec.


System Info:  Tower6
              unRAID version 6.2.0-rc4
                   md_num_stripes=4480
                   md_sync_window=2048
                   md_sync_thresh=2000
                   nr_requests=8 (Global Setting)
                   sbNumDisks=22
              CPU: Intel(R) Pentium(R) CPU G2030 @ 3.00GHz
              RAM: 8GiB System Memory

Outputting lshw information for Drives and Controllers:

Bus info          Device     Class      Description
===================================================
pci@0000:01:00.0  scsi3      storage    88SE9485 SAS/SATA 6Gb/s controller
scsi@3:0.0.0      /dev/sdl   disk       3TB WDC WD30EZRX-00D
scsi@3:0.1.0      /dev/sdm   disk       3TB WDC WD30EZRX-00D
scsi@3:0.2.0      /dev/sdn   disk       3TB WDC WD30EZRX-00D
scsi@3:0.3.0      /dev/sdo   disk       3TB WDC WD30EZRX-22D
scsi@3:0.4.0      /dev/sdp   disk       2TB WDC WD20EZRX-00D
scsi@3:0.5.0      /dev/sdq   disk       2TB SAMSUNG HD204UI
scsi@3:0.6.0      /dev/sdr   disk       2TB WDC WD20EZRX-00D
scsi@3:0.7.0      /dev/sds   disk       2TB WDC WD20EZRX-22D
pci@0000:02:00.0  scsi12     storage    MV64460/64461/64462 System Controller, Revision B
scsi@12:0.0.0     /dev/sdt   disk       2TB SAMSUNG HD204UI
scsi@12:0.1.0     /dev/sdu   disk       2TB WDC WD20EZRX-00D
scsi@12:0.2.0     /dev/sdv   disk       2TB SAMSUNG HD204UI
scsi@12:0.3.0     /dev/sdw   disk       2TB SAMSUNG HD204UI
pci@0000:03:00.0             storage    Serial ATA II RAID 1430SA
pci@0000:00:1f.2             storage    6 Series/C200 Series Chipset Family SATA AHCI Controller
usb@2:1.1         scsi0      storage    
scsi@0:0.0.0      /dev/sda   disk       1021MB DataTraveler 2.0
                  /dev/sda   disk       1021MB 
                  scsi1      storage    
scsi@1:0.0.0      /dev/sdb   disk       2TB WDC WD20EZRX-00D
                  scsi11     storage    
scsi@11:0.0.0     /dev/sdk   disk       2TB SAMSUNG HD204UI
                  scsi2      storage    
scsi@2:0.0.0      /dev/sdc   disk       2TB WDC WD20EZRX-00D
                  scsi4      storage    
scsi@4:0.0.0      /dev/sdd   disk       3TB TOSHIBA DT01ABA3
                  scsi5      storage    
scsi@5:0.0.0      /dev/sde   disk       3TB TOSHIBA DT01ABA3
                  scsi6      storage    
scsi@6:0.0.0      /dev/sdf   disk       3TB WDC WD30EZRX-00D
                  scsi7      storage    
scsi@7:0.0.0      /dev/sdg   disk       3TB WDC WD30EFRX-68A
                  scsi8      storage    
scsi@8:0.0.0      /dev/sdh   disk       3TB TOSHIBA DT01ABA3
                  scsi9      storage    
scsi@9:0.0.0      /dev/sdi   disk       2TB SAMSUNG HD204UI
                  scsi10     storage    
scsi@10:0.0.0     /dev/sdj   disk       2TB SAMSUNG HD204UI

Array Devices:
    Disk0 sdf is a Parity drive named parity
    Disk1 sdg is a Data drive named disk1
    Disk2 sdi is a Data drive named disk2
    Disk3 sdh is a Data drive named disk3
    Disk4 sdk is a Data drive named disk4
    Disk5 sdj is a Data drive named disk5
    Disk6 sdv is a Data drive named disk6
    Disk7 sdw is a Data drive named disk7
    Disk8 sdt is a Data drive named disk8
    Disk9 sdu is a Data drive named disk9
    Disk10 sdr is a Data drive named disk10
    Disk11 sdq is a Data drive named disk11
    Disk12 sds is a Data drive named disk12
    Disk13 sdb is a Data drive named disk13
    Disk14 sdc is a Data drive named disk14
    Disk15 sdp is a Data drive named disk15
    Disk16 sdl is a Data drive named disk16
    Disk17 sdo is a Data drive named disk17
    Disk18 sdn is a Data drive named disk18
    Disk19 sde is a Data drive named disk19
    Disk20 sdd is a Data drive named disk20
    Disk29 sdm is a Parity drive named parity2

Outputting free low memory information...

              total        used        free      shared  buff/cache   available
Mem:        8152960      473152     7180712      408920      499096     7032760
Low:        8152960      972248     7180712
High:             0           0           0
Swap:             0           0           0


                      *** END OF REPORT ***

Link to post

Here are the results of Normal Automatic Test i let run overnight

 

       unRAID Tunables Tester v4.0b2 by Pauven (for unRAID v6.2)

        Tunables Report produced Wed Aug 24 20:11:00 EDT 2016

                         Run on server: Tower

                  Normal Automatic Parity Sync Test


NOTE: Use the smallest set of values that produce good results. Larger values
      increase server memory use, and may cause stability issues with unRAID,
      especially if you have any add-ons or plug-ins installed.


Current Values:  md_num_stripes=6144, md_sync_window=2768, md_sync_thresh=192
                 Global nr_requests=128
                    sdb nr_requests=128
                    sdc nr_requests=128
                    sdi nr_requests=128
                    sdn nr_requests=128
                    sdh nr_requests=128
                    sdl nr_requests=128
                    sdk nr_requests=128
                    sdj nr_requests=128
                    sdo nr_requests=128
                    sdp nr_requests=128
                    sdq nr_requests=128
                    sdm nr_requests=128


--- INITIAL BASELINE TEST OF CURRENT VALUES (1 Sample Point @ 5min Duration)---

Test | RAM | num_stripes | sync_window | nr_reqs | sync_thresh |   Speed 
-----------------------------------------------------------------------------
   1  | 327 |     6144    |    2768     |   128   |      192    | 113.0 MB/s 


--- FULLY AUTOMATIC nr_requests TEST 1 (4 Sample Points @ 10min Duration)---

Test | num_stripes | sync_window | nr_requests | sync_thresh |   Speed 
---------------------------------------------------------------------------
  1   |     1536    |     768     |     128     |      767    | 110.5 MB/s 
  2   |     1536    |     768     |     128     |      384    | 109.6 MB/s 
  3   |     1536    |     768     |       8     |      767    | 109.5 MB/s 
  4   |     1536    |     768     |       8     |      384    | 107.7 MB/s 

Fastest vals were nr_reqs=128 and sync_thresh=99% of sync_window at 110.5 MB/s

This nr_requests value will be used for the next test.


--- FULLY AUTOMATIC TEST PASS 1a (Rough - 13 Sample Points @ 5min Duration)---

Test | RAM | num_stripes | sync_window | nr_reqs | sync_thresh |   Speed 
-----------------------------------------------------------------------------
   1a |  40 |      768    |     384     |   128   |      383    | 102.5 MB/s 
   1b |  40 |      768    |     384     |   128   |      192    | 102.9 MB/s 
   2a |  47 |      896    |     448     |   128   |      447    |  98.4 MB/s 
   2b |  47 |      896    |     448     |   128   |      224    |  95.8 MB/s 
   3a |  54 |     1024    |     512     |   128   |      511    | 103.3 MB/s 
   3b |  54 |     1024    |     512     |   128   |      256    | 109.4 MB/s 
   4a |  61 |     1152    |     576     |   128   |      575    | 103.0 MB/s 
   4b |  61 |     1152    |     576     |   128   |      288    | 106.0 MB/s 
   5a |  68 |     1280    |     640     |   128   |      639    | 108.8 MB/s 
   5b |  68 |     1280    |     640     |   128   |      320    | 109.5 MB/s 
   6a |  75 |     1408    |     704     |   128   |      703    | 105.1 MB/s 
   6b |  75 |     1408    |     704     |   128   |      352    |  99.5 MB/s 
   7a |  81 |     1536    |     768     |   128   |      767    | 239.0 MB/s 
   7b |  81 |     1536    |     768     |   128   |      384    | 109.9 MB/s 
   8a |  88 |     1664    |     832     |   128   |      831    | 110.5 MB/s 
   8b |  88 |     1664    |     832     |   128   |      416    | 107.1 MB/s 
   9a |  95 |     1792    |     896     |   128   |      895    | 109.5 MB/s 
   9b |  95 |     1792    |     896     |   128   |      448    | 111.8 MB/s 
  10a | 102 |     1920    |     960     |   128   |      959    | 112.1 MB/s 
  10b | 102 |     1920    |     960     |   128   |      480    | 113.7 MB/s 
  11a | 109 |     2048    |    1024     |   128   |     1023    | 106.7 MB/s 
  11b | 109 |     2048    |    1024     |   128   |      512    | 109.1 MB/s 
  12a | 115 |     2176    |    1088     |   128   |     1087    | 113.8 MB/s 
  12b | 115 |     2176    |    1088     |   128   |      544    | 111.7 MB/s 
  13a | 122 |     2304    |    1152     |   128   |     1151    | 113.2 MB/s 
  13b | 122 |     2304    |    1152     |   128   |      576    | 104.5 MB/s 

--- Targeting Fastest Result of md_sync_window 768 bytes for Final Pass ---


--- FULLY AUTOMATIC nr_requests TEST 2 (4 Sample Points @ 10min Duration)---

Test | num_stripes | sync_window | nr_requests | sync_thresh |   Speed 
---------------------------------------------------------------------------
  1   |     1536    |     768     |     128     |      767    | 112.2 MB/s 
  2   |     1536    |     768     |     128     |      384    | 111.4 MB/s 
  3   |     1536    |     768     |       8     |      767    | 110.1 MB/s 
  4   |     1536    |     768     |       8     |      384    | 110.0 MB/s 

Fastest vals were nr_reqs=128 and sync_thresh=99% of sync_window at 112.2 MB/s

This nr_requests value will be used for the next test.



--- FULLY AUTOMATIC TEST PASS 2 (Fine - 33 Sample Points @ 5min Duration)---

Test | RAM | num_stripes | sync_window | nr_reqs | sync_thresh |   Speed 
-----------------------------------------------------------------------------
   1a |  68 |     1280    |     640     |   128   |      639    | 111.4 MB/s 
   1b |  68 |     1280    |     640     |   128   |      320    | 112.4 MB/s 
   2a |  69 |     1296    |     648     |   128   |      647    | 107.0 MB/s 
   2b |  69 |     1296    |     648     |   128   |      324    | 109.7 MB/s 
   3a |  69 |     1312    |     656     |   128   |      655    | 114.4 MB/s 
   3b |  69 |     1312    |     656     |   128   |      328    | 109.8 MB/s 
   4a |  70 |     1328    |     664     |   128   |      663    | 113.9 MB/s 
   4b |  70 |     1328    |     664     |   128   |      332    | 113.6 MB/s 
   5a |  71 |     1344    |     672     |   128   |      671    | 111.8 MB/s 
   5b |  71 |     1344    |     672     |   128   |      336    | 113.0 MB/s 
   6a |  72 |     1360    |     680     |   128   |      679    | 111.9 MB/s 
   6b |  72 |     1360    |     680     |   128   |      340    | 113.3 MB/s 
   7a |  73 |     1376    |     688     |   128   |      687    | 110.2 MB/s 
   7b |  73 |     1376    |     688     |   128   |      344    | 110.1 MB/s 
   8a |  74 |     1392    |     696     |   128   |      695    | 113.7 MB/s 
   8b |  74 |     1392    |     696     |   128   |      348    | 112.2 MB/s 
   9a |  75 |     1408    |     704     |   128   |      703    | 112.6 MB/s 
   9b |  75 |     1408    |     704     |   128   |      352    | 113.1 MB/s 
  10a |  75 |     1424    |     712     |   128   |      711    | 111.6 MB/s 
  10b |  75 |     1424    |     712     |   128   |      356    | 113.7 MB/s 
  11a |  76 |     1440    |     720     |   128   |      719    | 113.6 MB/s 
  11b |  76 |     1440    |     720     |   128   |      360    | 109.9 MB/s 
  12a |  77 |     1456    |     728     |   128   |      727    |  92.1 MB/s 
  12b |  77 |     1456    |     728     |   128   |      364    |  80.6 MB/s 
  13a |  78 |     1472    |     736     |   128   |      735    |  84.4 MB/s 
  13b |  78 |     1472    |     736     |   128   |      368    |  70.8 MB/s 
  14a |  79 |     1488    |     744     |   128   |      743    |  82.7 MB/s 
  14b |  79 |     1488    |     744     |   128   |      372    |  81.6 MB/s 
  15a |  80 |     1504    |     752     |   128   |      751    |  95.0 MB/s 
  15b |  80 |     1504    |     752     |   128   |      376    |  81.5 MB/s 
  16a |  81 |     1520    |     760     |   128   |      759    |  82.7 MB/s 
  16b |  81 |     1520    |     760     |   128   |      380    |  78.6 MB/s 
  17a |  81 |     1536    |     768     |   128   |      767    |  89.8 MB/s 
  17b |  81 |     1536    |     768     |   128   |      384    | 110.3 MB/s 
  18a |  82 |     1552    |     776     |   128   |      775    | 101.8 MB/s 
  18b |  82 |     1552    |     776     |   128   |      388    | 107.5 MB/s 
  19a |  83 |     1568    |     784     |   128   |      783    | 114.4 MB/s 
  19b |  83 |     1568    |     784     |   128   |      392    | 113.9 MB/s 
  20a |  84 |     1584    |     792     |   128   |      791    | 113.3 MB/s 
  20b |  84 |     1584    |     792     |   128   |      396    | 111.2 MB/s 
  21a |  85 |     1600    |     800     |   128   |      799    | 114.7 MB/s 
  21b |  85 |     1600    |     800     |   128   |      400    | 113.8 MB/s 
  22a |  86 |     1616    |     808     |   128   |      807    | 112.2 MB/s 
  22b |  86 |     1616    |     808     |   128   |      404    | 113.5 MB/s 
  23a |  86 |     1632    |     816     |   128   |      815    |  96.7 MB/s 
  23b |  86 |     1632    |     816     |   128   |      408    | 114.5 MB/s 
  24a |  87 |     1648    |     824     |   128   |      823    | 114.9 MB/s 
  24b |  87 |     1648    |     824     |   128   |      412    | 111.4 MB/s 
  25a |  88 |     1664    |     832     |   128   |      831    | 114.2 MB/s 
  25b |  88 |     1664    |     832     |   128   |      416    | 113.5 MB/s 
  26a |  89 |     1680    |     840     |   128   |      839    | 113.2 MB/s 
  26b |  89 |     1680    |     840     |   128   |      420    | 113.8 MB/s 
  27a |  90 |     1696    |     848     |   128   |      847    | 112.3 MB/s 
  27b |  90 |     1696    |     848     |   128   |      424    | 109.8 MB/s 
  28a |  91 |     1712    |     856     |   128   |      855    | 113.9 MB/s 
  28b |  91 |     1712    |     856     |   128   |      428    | 111.6 MB/s 
  29a |  92 |     1728    |     864     |   128   |      863    | 114.1 MB/s 
  29b |  92 |     1728    |     864     |   128   |      432    | 113.5 MB/s 
  30a |  92 |     1744    |     872     |   128   |      871    | 113.4 MB/s 
  30b |  92 |     1744    |     872     |   128   |      436    | 114.0 MB/s 
  31a |  93 |     1760    |     880     |   128   |      879    | 112.6 MB/s 
  31b |  93 |     1760    |     880     |   128   |      440    | 113.3 MB/s 
  32a |  94 |     1776    |     888     |   128   |      887    | 114.8 MB/s 
  32b |  94 |     1776    |     888     |   128   |      444    | 111.6 MB/s 
  33a |  95 |     1792    |     896     |   128   |      895    | 114.2 MB/s 
  33b |  95 |     1792    |     896     |   128   |      448    | 113.9 MB/s 

The results below do NOT include the Basline test of current values.

The Fastest Sync Speed tested was md_sync_window=824 at 114.9 MB/s
     Tunable (md_num_stripes): 1648
     Tunable (md_sync_window): 824
     Tunable (md_sync_thresh): 823
     Tunable (nr_requests): 128
This will consume 87 MB with md_num_stripes=1648, 2x md_sync_window.
This is 240MB less than your current utilization of 327MB.

The Thriftiest Sync Speed tested was md_sync_window=640 at 111.4 MB/s
     Tunable (md_num_stripes): 1280
     Tunable (md_sync_window): 640
     Tunable (md_sync_thresh): 639
     Tunable (nr_requests): 128
This will consume 68 MB with md_num_stripes=1280, 2x md_sync_window.
This is 259MB less than your current utilization of 327MB.

The Recommended Sync Speed is md_sync_window=656 at 114.4 MB/s
     Tunable (md_num_stripes): 1312
     Tunable (md_sync_window): 656
     Tunable (md_sync_thresh): 655
     Tunable (nr_requests): 128
This will consume 69 MB with md_num_stripes=1312, 2x md_sync_window.
This is 258MB less than your current utilization of 327MB.

NOTE: Adding additional drives will increase memory consumption.

In unRAID, go to Settings > Disk Settings to set your chosen parameter values.

Completed: 9 Hrs 43 Min 28 Sec.


System Info:  Tower
              unRAID version 6.2.0-rc4
                   md_num_stripes=6144
                   md_sync_window=2768
                   md_sync_thresh=192
                   nr_requests=128 (Global Setting)
                   sbNumDisks=13
              CPU: AMD FX(tm)-8120 Eight-Core Processor
              RAM: 16GiB System Memory

Outputting lshw information for Drives and Controllers:

Bus info          Device       Class      Description
=====================================================
pci@0000:01:00.0  scsi1        storage    SAS2008 PCI-Express Fusion-MPT SAS-2 [Falcon]
scsi@1:0.3.0      /dev/sdk     disk       2TB Hitachi HUA72302
scsi@1:0.4.0      /dev/sdl     disk       3TB Hitachi HUA72303
scsi@1:0.5.0      /dev/sdm     disk       3TB WL3000GSA6472E
scsi@1:0.6.0      /dev/sdn     disk       3TB WL3000GSA6472E
scsi@1:0.0.0      /dev/sdh     disk       3TB WL3000GSA6472
scsi@1:0.1.0      /dev/sdi     disk       1TB ST1000DM003-9YN1
scsi@1:0.2.0      /dev/sdj     disk       1500GB ST1500DM003-9YN1
pci@0000:00:11.0               storage    SB7x0/SB8x0/SB9x0 SATA Controller [AHCI mode]
pci@0000:04:00.0  scsi8        storage    SAS2008 PCI-Express Fusion-MPT SAS-2 [Falcon]
scsi@8:0.0.0      /dev/sdo     disk       3TB WL3000GSA6472E
scsi@8:0.1.0      /dev/sdp     disk       3TB WL3000GSA6472E
scsi@8:0.2.0      /dev/sdq     disk       3TB WL3000GSA6472E
usb@1:5           scsi0        storage    
scsi@0:0.0.0      /dev/sda     disk       4GB Cruzer
                  /dev/sda     disk       4GB 
                  scsi2        storage    
scsi@2:0.0.0      /dev/sdb     disk       3200GB WL3000GSA6472E
                  scsi3        storage    
scsi@3:0.0.0      /dev/sdc     disk       3TB ST3000DM001-1E61
                  scsi4        storage    
scsi@4:0.0.0      /dev/sdd     disk       256GB LITEONIT LCT-256
                  scsi5        storage    
scsi@5:0.0.0      /dev/sde     disk       1TB TOSHIBA MQ01ABD1
                  scsi6        storage    
scsi@6:0.0.0      /dev/sdf     disk       120GB KINGSTON SV300S3
                  scsi7        storage    
scsi@7:0.0.0      /dev/sdg     disk       256GB SAMSUNG SSD PM83

Array Devices:
    Disk0 sdb is a Parity drive named parity
    Disk1 sdc is a Data drive named disk1
    Disk2 sdi is a Data drive named disk2
    Disk3 sdn is a Data drive named disk3
    Disk4 sdh is a Data drive named disk4
    Disk5 sdl is a Data drive named disk5
    Disk6 sdk is a Data drive named disk6
    Disk7 sdj is a Data drive named disk7
    Disk8 sdo is a Data drive named disk8
    Disk9 sdp is a Data drive named disk9
    Disk10 sdq is a Data drive named disk10
    Disk11 sdm is a Data drive named disk11

Outputting free low memory information...

              total        used        free      shared  buff/cache   available
Mem:       16353140     6503664     8059804      542996     1789672     8642884
Low:       16353140     8293336     8059804
High:             0           0           0
Swap:             0           0           0


                      *** END OF REPORT ***

Link to post

I tried running v4.0b2, but it throws some errors:

./unraid-tunables-tester-4b2.sh: line 1282: /root/mdcmd: No such file or directory
./unraid-tunables-tester-4b2.sh: line 1285: /root/mdcmd: No such file or directory
./unraid-tunables-tester-4b2.sh: line 1288: [: : integer expression expected

 

I changed all the references to "/root/mdcmd" to just "mdcmd" and now the script is running.

 

FYI:

root@Tower:/boot/utt# whereis mdcmd
mdcmd: /usr/local/sbin/mdcmd

 

I wonder if you have the preclear plugin installed?  I see that it contains this code, which might be why /root/mdcmd exists on your server:

if [[ ! -e /root/mdcmd ]]; then
  ln -sf /usr/local/sbin/mdcmd /root/mdcmd
fi

I currently don't have the preclear plugin installed.

 

Amazing detective work.  Yes I do have the Beta Preclear plugin installed, but haven't been running it.  Wouldn't have expected that to modify anything.  I also have Unassigned Devices plugin installed and running, and that was originally developed by the same person, though I think it has since changed ownership.  Perhaps that is the actual culprit.

 

Regardless, I do have that symlink.  Found it there a couple days ago when I was still thinking about changing the mdcmd paths.  I wrongly assumed [again!] that this was a Lime-Tech change. 

 

Shame on me for not testing in safe mode.

 

In unRAID v6.2 mdcmd is placed under /usr/local/sbin and as such "reachable". There is no need to make a symlink.

 

 

Excellent, thank you.  When v4b3 drops, it will include this change.

 

Paul

Link to post

My first results:

 

Tower7 - 5 x 3TB - All onboard intel PCH sata:

 

 

       unRAID Tunables Tester v4.0b2 by Pauven (for unRAID v6.2)

        Tunables Report produced Thu Aug 25 06:24:48 BST 2016

                         Run on server: Tower7

                   Short Automatic Parity Sync Test


NOTE: Use the smallest set of values that produce good results. Larger values
      increase server memory use, and may cause stability issues with unRAID,
      especially if you have any add-ons or plug-ins installed.


Current Values:  md_num_stripes=4096, md_sync_window=2048, md_sync_thresh=2000
                 Global nr_requests=8
                    sdc nr_requests=128
                    sdd nr_requests=128
                    sde nr_requests=128
                    sdf nr_requests=128
                    sdg nr_requests=128


--- INITIAL BASELINE TEST OF CURRENT VALUES (1 Sample Point @ 30sec Duration)---

Test | RAM | num_stripes | sync_window | nr_reqs | sync_thresh |   Speed 
-----------------------------------------------------------------------------
   1  | 106 |     4096    |    2048     |     8   |     2000    | 158.6 MB/s 


--- FULLY AUTOMATIC nr_requests TEST 1 (4 Sample Points @ 60sec Duration)---

Test | num_stripes | sync_window | nr_requests | sync_thresh |   Speed 
---------------------------------------------------------------------------
  1   |     1536    |     768     |     128     |      767    | 171.7 MB/s 
  2   |     1536    |     768     |     128     |      384    | 160.0 MB/s 
  3   |     1536    |     768     |       8     |      767    | 170.4 MB/s 
  4   |     1536    |     768     |       8     |      384    | 174.7 MB/s 

Fastest vals were nr_reqs=8 and sync_thresh=50% of sync_window at 174.7 MB/s

This nr_requests value will be used for the next test.


--- FULLY AUTOMATIC TEST PASS 1a (Rough - 13 Sample Points @ 30sec Duration)---

Test | RAM | num_stripes | sync_window | nr_reqs | sync_thresh |   Speed 
-----------------------------------------------------------------------------
   1a |  19 |      768    |     384     |     8   |      383    | 161.8 MB/s 
   1b |  19 |      768    |     384     |     8   |      192    | 165.1 MB/s 
   2a |  23 |      896    |     448     |     8   |      447    | 158.7 MB/s 
   2b |  23 |      896    |     448     |     8   |      224    | 165.1 MB/s 
   3a |  26 |     1024    |     512     |     8   |      511    | 156.2 MB/s 
   3b |  26 |     1024    |     512     |     8   |      256    | 157.2 MB/s 
   4a |  29 |     1152    |     576     |     8   |      575    | 142.8 MB/s 
   4b |  29 |     1152    |     576     |     8   |      288    | 170.4 MB/s 
   5a |  33 |     1280    |     640     |     8   |      639    | 155.6 MB/s 
   5b |  33 |     1280    |     640     |     8   |      320    | 159.4 MB/s 
   6a |  36 |     1408    |     704     |     8   |      703    | 154.0 MB/s 
   6b |  36 |     1408    |     704     |     8   |      352    | 160.6 MB/s 
   7a |  39 |     1536    |     768     |     8   |      767    | 152.7 MB/s 
   7b |  39 |     1536    |     768     |     8   |      384    | 160.6 MB/s 
   8a |  43 |     1664    |     832     |     8   |      831    | 152.7 MB/s 
   8b |  43 |     1664    |     832     |     8   |      416    | 159.7 MB/s 
   9a |  46 |     1792    |     896     |     8   |      895    | 130.7 MB/s 
   9b |  46 |     1792    |     896     |     8   |      448    | 157.8 MB/s 
  10a |  49 |     1920    |     960     |     8   |      959    | 151.0 MB/s 
  10b |  49 |     1920    |     960     |     8   |      480    | 157.2 MB/s 
  11a |  53 |     2048    |    1024     |     8   |     1023    | 148.2 MB/s 
  11b |  53 |     2048    |    1024     |     8   |      512    | 156.2 MB/s 
  12a |  56 |     2176    |    1088     |     8   |     1087    | 148.0 MB/s 
  12b |  56 |     2176    |    1088     |     8   |      544    | 155.4 MB/s 
  13a |  59 |     2304    |    1152     |     8   |     1151    | 150.5 MB/s 
  13b |  59 |     2304    |    1152     |     8   |      576    | 157.3 MB/s 

--- Targeting Fastest Result of md_sync_window 576 bytes for Final Pass ---


--- FULLY AUTOMATIC nr_requests TEST 2 (4 Sample Points @ 60sec Duration)---

Test | num_stripes | sync_window | nr_requests | sync_thresh |   Speed 
---------------------------------------------------------------------------
  1   |     1152    |     576     |     128     |      575    | 162.0 MB/s 
  2   |     1152    |     576     |     128     |      288    | 160.9 MB/s 
  3   |     1152    |     576     |       8     |      575    | 173.0 MB/s 
  4   |     1152    |     576     |       8     |      288    | 175.2 MB/s 

Fastest vals were nr_reqs=8 and sync_thresh=50% of sync_window at 175.2 MB/s

This nr_requests value will be used for the next test.



--- FULLY AUTOMATIC TEST PASS 2 (Fine - 33 Sample Points @ 30sec Duration)---

Test | RAM | num_stripes | sync_window | nr_reqs | sync_thresh |   Speed 
-----------------------------------------------------------------------------
   1a |  23 |      896    |     448     |     8   |      447    | 159.4 MB/s 
   1b |  23 |      896    |     448     |     8   |      224    | 164.1 MB/s 
   2a |  23 |      912    |     456     |     8   |      455    | 131.3 MB/s 
   2b |  23 |      912    |     456     |     8   |      228    | 162.6 MB/s 
   3a |  24 |      928    |     464     |     8   |      463    | 159.7 MB/s 
   3b |  24 |      928    |     464     |     8   |      232    | 164.1 MB/s 
   4a |  24 |      944    |     472     |     8   |      471    | 166.7 MB/s 
   4b |  24 |      944    |     472     |     8   |      236    | 162.2 MB/s 
   5a |  24 |      960    |     480     |     8   |      479    | 159.6 MB/s 
   5b |  24 |      960    |     480     |     8   |      240    | 162.0 MB/s 
   6a |  25 |      976    |     488     |     8   |      487    | 159.0 MB/s 
   6b |  25 |      976    |     488     |     8   |      244    | 163.3 MB/s 
   7a |  25 |      992    |     496     |     8   |      495    | 133.2 MB/s 
   7b |  25 |      992    |     496     |     8   |      248    | 163.1 MB/s 
   8a |  26 |     1008    |     504     |     8   |      503    | 157.8 MB/s 
   8b |  26 |     1008    |     504     |     8   |      252    | 162.7 MB/s 
   9a |  26 |     1024    |     512     |     8   |      511    | 137.2 MB/s 
   9b |  26 |     1024    |     512     |     8   |      256    | 163.2 MB/s 
  10a |  26 |     1040    |     520     |     8   |      519    | 144.1 MB/s 
  10b |  26 |     1040    |     520     |     8   |      260    | 162.4 MB/s 
  11a |  27 |     1056    |     528     |     8   |      527    | 155.6 MB/s 
  11b |  27 |     1056    |     528     |     8   |      264    | 161.0 MB/s 
  12a |  27 |     1072    |     536     |     8   |      535    | 130.5 MB/s 
  12b |  27 |     1072    |     536     |     8   |      268    | 163.5 MB/s 
  13a |  28 |     1088    |     544     |     8   |      543    | 154.6 MB/s 
  13b |  28 |     1088    |     544     |     8   |      272    | 161.0 MB/s 
  14a |  28 |     1104    |     552     |     8   |      551    | 155.0 MB/s 
  14b |  28 |     1104    |     552     |     8   |      276    | 161.2 MB/s 
  15a |  29 |     1120    |     560     |     8   |      559    | 123.6 MB/s 
  15b |  29 |     1120    |     560     |     8   |      280    | 161.6 MB/s 
  16a |  29 |     1136    |     568     |     8   |      567    | 155.3 MB/s 
  16b |  29 |     1136    |     568     |     8   |      284    | 161.4 MB/s 
  17a |  29 |     1152    |     576     |     8   |      575    | 151.3 MB/s 
  17b |  29 |     1152    |     576     |     8   |      288    | 165.8 MB/s 
  18a |  30 |     1168    |     584     |     8   |      583    | 154.4 MB/s 
  18b |  30 |     1168    |     584     |     8   |      292    | 161.0 MB/s 
  19a |  30 |     1184    |     592     |     8   |      591    | 155.9 MB/s 
  19b |  30 |     1184    |     592     |     8   |      296    | 162.4 MB/s 
  20a |  31 |     1200    |     600     |     8   |      599    | 155.9 MB/s 
  20b |  31 |     1200    |     600     |     8   |      300    | 161.2 MB/s 
  21a |  31 |     1216    |     608     |     8   |      607    | 125.6 MB/s 
  21b |  31 |     1216    |     608     |     8   |      304    | 161.2 MB/s 
  22a |  31 |     1232    |     616     |     8   |      615    | 149.8 MB/s 
  22b |  31 |     1232    |     616     |     8   |      308    | 161.2 MB/s 
  23a |  32 |     1248    |     624     |     8   |      623    | 158.8 MB/s 
  23b |  32 |     1248    |     624     |     8   |      312    | 159.3 MB/s 
  24a |  32 |     1264    |     632     |     8   |      631    | 156.5 MB/s 
  24b |  32 |     1264    |     632     |     8   |      316    | 161.1 MB/s 
  25a |  33 |     1280    |     640     |     8   |      639    | 155.2 MB/s 
  25b |  33 |     1280    |     640     |     8   |      320    | 161.1 MB/s 
  26a |  33 |     1296    |     648     |     8   |      647    | 154.6 MB/s 
  26b |  33 |     1296    |     648     |     8   |      324    | 160.0 MB/s 
  27a |  34 |     1312    |     656     |     8   |      655    | 120.8 MB/s 
  27b |  34 |     1312    |     656     |     8   |      328    | 162.7 MB/s 
  28a |  34 |     1328    |     664     |     8   |      663    | 156.3 MB/s 
  28b |  34 |     1328    |     664     |     8   |      332    | 159.8 MB/s 
  29a |  34 |     1344    |     672     |     8   |      671    | 159.9 MB/s 
  29b |  34 |     1344    |     672     |     8   |      336    | 159.5 MB/s 
  30a |  35 |     1360    |     680     |     8   |      679    | 152.4 MB/s 
  30b |  35 |     1360    |     680     |     8   |      340    | 157.8 MB/s 
  31a |  35 |     1376    |     688     |     8   |      687    | 155.9 MB/s 
  31b |  35 |     1376    |     688     |     8   |      344    | 159.8 MB/s 
  32a |  36 |     1392    |     696     |     8   |      695    | 149.0 MB/s 
  32b |  36 |     1392    |     696     |     8   |      348    | 140.2 MB/s 
  33a |  36 |     1408    |     704     |     8   |      703    | 121.7 MB/s 
  33b |  36 |     1408    |     704     |     8   |      352    | 158.8 MB/s 

The results below do NOT include the Basline test of current values.

The Fastest Sync Speed tested was md_sync_window=472 at 166.7 MB/s
     Tunable (md_num_stripes): 944
     Tunable (md_sync_window): 472
     Tunable (md_sync_thresh): 471
     Tunable (nr_requests): 8
This will consume 24 MB with md_num_stripes=944, 2x md_sync_window.
This is 82MB less than your current utilization of 106MB.

The Thriftiest Sync Speed tested was md_sync_window=384 at 161.8 MB/s
     Tunable (md_num_stripes): 768
     Tunable (md_sync_window): 384
     Tunable (md_sync_thresh): 383
     Tunable (nr_requests): 8
This will consume 19 MB with md_num_stripes=768, 2x md_sync_window.
This is 87MB less than your current utilization of 106MB.

The Recommended Sync Speed is md_sync_window=472 at 166.7 MB/s
     Tunable (md_num_stripes): 944
     Tunable (md_sync_window): 472
     Tunable (md_sync_thresh): 471
     Tunable (nr_requests): 8
This will consume 24 MB with md_num_stripes=944, 2x md_sync_window.
This is 82MB less than your current utilization of 106MB.

NOTE: Adding additional drives will increase memory consumption.

In unRAID, go to Settings > Disk Settings to set your chosen parameter values.

Completed: 0 Hrs 54 Min 55 Sec.


System Info:  Tower7
              unRAID version 6.2.0-rc4
                   md_num_stripes=4096
                   md_sync_window=2048
                   md_sync_thresh=2000
                   nr_requests=8 (Global Setting)
                   sbNumDisks=6
              CPU: Intel(R) Xeon(R) CPU E31220 @ 3.10GHz
              RAM: 32GiB System Memory

Outputting lshw information for Drives and Controllers:

Bus info          Device       Class      Description
=====================================================
pci@0000:02:00.0  scsi1        storage    ASC-1405 Unified Serial HBA
scsi@1:0.1.0      /dev/sdk     disk       120GB KINGSTON SV300S3
scsi@1:0.2.0      /dev/sdl     disk       120GB KINGSTON SV300S3
scsi@1:0.3.0      /dev/sdm     disk       120GB KINGSTON SV300S3
scsi@1:0.0.0      /dev/sdj     disk       120GB KINGSTON SV300S3
pci@0000:03:00.0               storage    ASM1062 Serial ATA Controller
pci@0000:00:1f.2               storage    6 Series/C200 Series Chipset Family SATA AHCI Controller
usb@2:1.4         scsi0        storage    
scsi@0:0.0.0      /dev/sda     disk       7864MB DataTraveler 2.0
                  /dev/sda     disk       7864MB 
                  scsi2        storage    
scsi@2:0.0.0      /dev/sdb     disk       512GB TS512GSSD370S
                  scsi3        storage    
scsi@3:0.0.0      /dev/sdc     disk       3TB TOSHIBA DT01ACA3
                  scsi4        storage    
scsi@4:0.0.0      /dev/sdd     disk       3TB TOSHIBA DT01ACA3
                  scsi5        storage    
scsi@5:0.0.0      /dev/sde     disk       3TB TOSHIBA DT01ACA3
                  scsi6        storage    
scsi@6:0.0.0      /dev/sdf     disk       3TB TOSHIBA DT01ACA3
                  scsi7        storage    
scsi@7:0.0.0      /dev/sdg     disk       3TB TOSHIBA DT01ACA3
                  scsi8        storage    
scsi@8:0.0.0      /dev/sdh     disk       180GB INTEL SSDSC2CT18
                  scsi9        storage    
scsi@9:0.0.0      /dev/sdi     disk       500GB TOSHIBA MK5055GS

Array Devices:
    Disk0 sdc is a Parity drive named parity
    Disk1 sdd is a Data drive named disk1
    Disk2 sde is a Data drive named disk2
    Disk3 sdf is a Data drive named disk3
    Disk4 sdg is a Data drive named disk4

Outputting free low memory information...

              total        used        free      shared  buff/cache   available
Mem:       32991160     5328952    27049260      419436      612948    26952308
Low:       32991160     5941900    27049260
High:             0           0           0
Swap:             0           0           0


                      *** END OF REPORT ***

 

I think I see the beginnings of a curve there, so definitely worth running a Normal Auto.

 

Just an FYI for all reading, here is an overview of the test logic being used: 

 

1a)    Test 1a range is 384-1152.

        If 384 is 98%+ of the fastest measured speed, then Test 1b is triggered.

        If 1152 is 98%+ of the fastest measure speed, then Test 1c is triggered.

1b)    Test 1b is 64-320

1c)    Test 1c is 1216-2304

        If 2304 is 99.5%+ of the fastest measured speed, then Test 1d is triggered.

1d)    Test 1d is 2368-3456, which is as high as Pass 1 goes.

 

On my server, when running a Normal Auto, I get tests 1a, 1c and 1d.  When I run a Short Auto, I typically only get 1a, as the results are too random to trigger 1c.

 

I see this Short Auto test here on Tower7 was too random to trigger 1c (1152 was 92.3% of fastest), so it didn't test the original value of 2048 (except in the baseline).

 

This seems odd:

Current Values:  md_num_stripes=4096, md_sync_window=2048, md_sync_thresh=2000
                 Global nr_requests=8
                    sdc nr_requests=128
                    sdd nr_requests=128
                    sde nr_requests=128
                    sdf nr_requests=128
                    sdg nr_requests=128

The global nr_requests setting (in your disks.ini file) is 8, but the individual drives are set to 128.  Any chance you started and aborted a test, or had a test fail on you?  This looks to me like a nr_requests test started and set the drives individually to 128, and that the script never finished to return the drives back to 8.

 

Looks like CPU/RAM are reporting correctly now, and the new "Recommended" is showing up.

 

Thanks!

Paul

Link to post

Tower5 - SSD server - LSI9207 (with Intel RES2SV240) + LSI9211 (flashed H310) + Intel PCH

 

 

       unRAID Tunables Tester v4.0b2 by Pauven (for unRAID v6.2)

        Tunables Report produced Thu Aug 25 06:31:47 BST 2016

                         Run on server: Tower5

                   Short Automatic Parity Sync Test


NOTE: Use the smallest set of values that produce good results. Larger values
      increase server memory use, and may cause stability issues with unRAID,
      especially if you have any add-ons or plug-ins installed.


Current Values:  md_num_stripes=4480, md_sync_window=2048, md_sync_thresh=2000
                 Global nr_requests=8
                    sdh nr_requests=8
                    sdj nr_requests=8
                    sdk nr_requests=8
                    sdl nr_requests=8
                    sdm nr_requests=8
                    sdn nr_requests=8
                    sdo nr_requests=8
                    sdp nr_requests=8
                    sdq nr_requests=8
                    sdr nr_requests=8
                    sds nr_requests=8
                    sdt nr_requests=8
                    sdu nr_requests=8
                    sdv nr_requests=8
                    sdw nr_requests=8
                    sdc nr_requests=8
                    sdb nr_requests=8
                    sde nr_requests=8
                    sdf nr_requests=8
                    sdg nr_requests=8
                    sdd nr_requests=8
                    sdad nr_requests=8
                    sdac nr_requests=8
                    sdx nr_requests=8
                    sdae nr_requests=8
                    sdab nr_requests=8
                    sdaa nr_requests=8
                    sdz nr_requests=8
                    sdy nr_requests=8
                    sdi nr_requests=8


--- INITIAL BASELINE TEST OF CURRENT VALUES (1 Sample Point @ 30sec Duration)---

Test | RAM | num_stripes | sync_window | nr_reqs | sync_thresh |   Speed 
-----------------------------------------------------------------------------
   1  | 536 |     4480    |    2048     |     8   |     2000    | 204.0 MB/s 


--- FULLY AUTOMATIC nr_requests TEST 1 (4 Sample Points @ 60sec Duration)---

Test | num_stripes | sync_window | nr_requests | sync_thresh |   Speed 
---------------------------------------------------------------------------
  1   |     1536    |     768     |     128     |      767    | 156.6 MB/s 
  2   |     1536    |     768     |     128     |      384    | 146.1 MB/s 
  3   |     1536    |     768     |       8     |      767    | 155.9 MB/s 
  4   |     1536    |     768     |       8     |      384    | 146.6 MB/s 

Fastest vals were nr_reqs=128 and sync_thresh=99% of sync_window at 156.6 MB/s

This nr_requests value will be used for the next test.


--- FULLY AUTOMATIC TEST PASS 1a (Rough - 13 Sample Points @ 30sec Duration)---

Test | RAM | num_stripes | sync_window | nr_reqs | sync_thresh |   Speed 
-----------------------------------------------------------------------------
   1a |  91 |      768    |     384     |   128   |      383    | 147.3 MB/s 
   1b |  91 |      768    |     384     |   128   |      192    | 128.0 MB/s 
   2a | 107 |      896    |     448     |   128   |      447    | 153.3 MB/s 
   2b | 107 |      896    |     448     |   128   |      224    | 131.8 MB/s 
   3a | 122 |     1024    |     512     |   128   |      511    | 157.7 MB/s 
   3b | 122 |     1024    |     512     |   128   |      256    | 129.6 MB/s 
   4a | 137 |     1152    |     576     |   128   |      575    | 145.6 MB/s 
   4b | 137 |     1152    |     576     |   128   |      288    | 140.8 MB/s 
   5a | 153 |     1280    |     640     |   128   |      639    | 148.3 MB/s 
   5b | 153 |     1280    |     640     |   128   |      320    | 139.5 MB/s 
   6a | 168 |     1408    |     704     |   128   |      703    | 147.8 MB/s 
   6b | 168 |     1408    |     704     |   128   |      352    | 137.1 MB/s 
   7a | 183 |     1536    |     768     |   128   |      767    | 150.0 MB/s 
   7b | 183 |     1536    |     768     |   128   |      384    | 133.0 MB/s 
   8a | 199 |     1664    |     832     |   128   |      831    | 142.7 MB/s 
   8b | 199 |     1664    |     832     |   128   |      416    | 139.0 MB/s 
   9a | 214 |     1792    |     896     |   128   |      895    | 138.4 MB/s 
   9b | 214 |     1792    |     896     |   128   |      448    | 142.9 MB/s 
  10a | 229 |     1920    |     960     |   128   |      959    | 138.9 MB/s 
  10b | 229 |     1920    |     960     |   128   |      480    | 145.9 MB/s 
  11a | 245 |     2048    |    1024     |   128   |     1023    | 138.2 MB/s 
  11b | 245 |     2048    |    1024     |   128   |      512    | 140.9 MB/s 
  12a | 260 |     2176    |    1088     |   128   |     1087    | 133.7 MB/s 
  12b | 260 |     2176    |    1088     |   128   |      544    | 142.0 MB/s 
  13a | 275 |     2304    |    1152     |   128   |     1151    | 139.7 MB/s 
  13b | 275 |     2304    |    1152     |   128   |      576    | 139.6 MB/s 

--- Targeting Fastest Result of md_sync_window 512 bytes for Final Pass ---


--- FULLY AUTOMATIC nr_requests TEST 2 (4 Sample Points @ 60sec Duration)---

Test | num_stripes | sync_window | nr_requests | sync_thresh |   Speed 
---------------------------------------------------------------------------
  1   |     1024    |     512     |     128     |      511    | 141.2 MB/s 
  2   |     1024    |     512     |     128     |      256    | 122.9 MB/s 
  3   |     1024    |     512     |       8     |      511    | 143.2 MB/s 
  4   |     1024    |     512     |       8     |      256    | 117.7 MB/s 

Fastest vals were nr_reqs=8 and sync_thresh=99% of sync_window at 143.2 MB/s

This nr_requests value will be used for the next test.



--- FULLY AUTOMATIC TEST PASS 2 (Fine - 33 Sample Points @ 30sec Duration)---

Test | RAM | num_stripes | sync_window | nr_reqs | sync_thresh |   Speed 
-----------------------------------------------------------------------------
   1a |  91 |      768    |     384     |     8   |      383    | 111.2 MB/s 
   1b |  91 |      768    |     384     |     8   |      192    | 112.7 MB/s 
   2a |  93 |      784    |     392     |     8   |      391    | 115.2 MB/s 
   2b |  93 |      784    |     392     |     8   |      196    |  88.6 MB/s 
   3a |  95 |      800    |     400     |     8   |      399    |  56.2 MB/s 
   3b |  95 |      800    |     400     |     8   |      200    |  84.9 MB/s 
   4a |  97 |      816    |     408     |     8   |      407    | 101.6 MB/s 
   4b |  97 |      816    |     408     |     8   |      204    | 100.9 MB/s 
   5a |  99 |      832    |     416     |     8   |      415    | 121.4 MB/s 
   5b |  99 |      832    |     416     |     8   |      208    | 110.3 MB/s 
   6a | 101 |      848    |     424     |     8   |      423    | 126.4 MB/s 
   6b | 101 |      848    |     424     |     8   |      212    | 113.3 MB/s 
   7a | 103 |      864    |     432     |     8   |      431    | 135.9 MB/s 
   7b | 103 |      864    |     432     |     8   |      216    | 114.7 MB/s 
   8a | 105 |      880    |     440     |     8   |      439    | 134.5 MB/s 
   8b | 105 |      880    |     440     |     8   |      220    | 120.2 MB/s 
   9a | 107 |      896    |     448     |     8   |      447    | 139.0 MB/s 
   9b | 107 |      896    |     448     |     8   |      224    | 120.9 MB/s 
  10a | 109 |      912    |     456     |     8   |      455    | 134.5 MB/s 
  10b | 109 |      912    |     456     |     8   |      228    | 117.1 MB/s 
  11a | 111 |      928    |     464     |     8   |      463    | 127.9 MB/s 
  11b | 111 |      928    |     464     |     8   |      232    | 117.1 MB/s 
  12a | 113 |      944    |     472     |     8   |      471    | 128.8 MB/s 
  12b | 113 |      944    |     472     |     8   |      236    | 112.9 MB/s 
  13a | 114 |      960    |     480     |     8   |      479    | 130.4 MB/s 
  13b | 114 |      960    |     480     |     8   |      240    | 113.9 MB/s 
  14a | 116 |      976    |     488     |     8   |      487    | 136.9 MB/s 
  14b | 116 |      976    |     488     |     8   |      244    | 112.1 MB/s 
  15a | 118 |      992    |     496     |     8   |      495    | 131.4 MB/s 
  15b | 118 |      992    |     496     |     8   |      248    | 101.0 MB/s 
  16a | 120 |     1008    |     504     |     8   |      503    | 112.9 MB/s 
  16b | 120 |     1008    |     504     |     8   |      252    | 111.3 MB/s 
  17a | 122 |     1024    |     512     |     8   |      511    | 117.6 MB/s 
  17b | 122 |     1024    |     512     |     8   |      256    | 112.0 MB/s 
  18a | 124 |     1040    |     520     |     8   |      519    |  97.9 MB/s 
  18b | 124 |     1040    |     520     |     8   |      260    |  87.4 MB/s 
  19a | 126 |     1056    |     528     |     8   |      527    |  97.2 MB/s 
  19b | 126 |     1056    |     528     |     8   |      264    |  84.6 MB/s 
  20a | 128 |     1072    |     536     |     8   |      535    |  98.8 MB/s 
  20b | 128 |     1072    |     536     |     8   |      268    |  80.9 MB/s 
  21a | 130 |     1088    |     544     |     8   |      543    |  94.1 MB/s 
  21b | 130 |     1088    |     544     |     8   |      272    |  73.5 MB/s 
  22a | 132 |     1104    |     552     |     8   |      551    |  78.1 MB/s 
  22b | 132 |     1104    |     552     |     8   |      276    |  47.2 MB/s 
  23a | 134 |     1120    |     560     |     8   |      559    |  87.4 MB/s 
  23b | 134 |     1120    |     560     |     8   |      280    |  80.6 MB/s 
  24a | 135 |     1136    |     568     |     8   |      567    | 102.1 MB/s 
  24b | 135 |     1136    |     568     |     8   |      284    |  99.8 MB/s 
  25a | 137 |     1152    |     576     |     8   |      575    | 110.7 MB/s 
  25b | 137 |     1152    |     576     |     8   |      288    | 103.8 MB/s 
  26a | 139 |     1168    |     584     |     8   |      583    | 127.6 MB/s 
  26b | 139 |     1168    |     584     |     8   |      292    | 108.4 MB/s 
  27a | 141 |     1184    |     592     |     8   |      591    | 113.4 MB/s 
  27b | 141 |     1184    |     592     |     8   |      296    | 112.1 MB/s 
  28a | 143 |     1200    |     600     |     8   |      599    | 119.6 MB/s 
  28b | 143 |     1200    |     600     |     8   |      300    | 116.0 MB/s 
  29a | 145 |     1216    |     608     |     8   |      607    | 126.0 MB/s 
  29b | 145 |     1216    |     608     |     8   |      304    | 116.6 MB/s 
  30a | 147 |     1232    |     616     |     8   |      615    | 131.9 MB/s 
  30b | 147 |     1232    |     616     |     8   |      308    | 112.2 MB/s 
  31a | 149 |     1248    |     624     |     8   |      623    | 134.7 MB/s 
  31b | 149 |     1248    |     624     |     8   |      312    | 119.8 MB/s 
  32a | 151 |     1264    |     632     |     8   |      631    | 124.7 MB/s 
  32b | 151 |     1264    |     632     |     8   |      316    | 115.5 MB/s 
  33a | 153 |     1280    |     640     |     8   |      639    | 115.0 MB/s 
  33b | 153 |     1280    |     640     |     8   |      320    | 114.6 MB/s 

The results below do NOT include the Basline test of current values.

The Fastest Sync Speed tested was md_sync_window=768 at 150.0 MB/s
     Tunable (md_num_stripes): 1536
     Tunable (md_sync_window): 768
     Tunable (md_sync_thresh): 767
     Tunable (nr_requests): 8
This will consume 183 MB with md_num_stripes=1536, 2x md_sync_window.
This is 353MB less than your current utilization of 536MB.

The Thriftiest Sync Speed tested was md_sync_window=704 at 147.8 MB/s
     Tunable (md_num_stripes): 1408
     Tunable (md_sync_window): 704
     Tunable (md_sync_thresh): 703
     Tunable (nr_requests): 8
This will consume 168 MB with md_num_stripes=1408, 2x md_sync_window.
This is 368MB less than your current utilization of 536MB.

The Recommended Sync Speed is md_sync_window=768 at 150.0 MB/s
     Tunable (md_num_stripes): 1536
     Tunable (md_sync_window): 768
     Tunable (md_sync_thresh): 767
     Tunable (nr_requests): 8
This will consume 183 MB with md_num_stripes=1536, 2x md_sync_window.
This is 353MB less than your current utilization of 536MB.

NOTE: Adding additional drives will increase memory consumption.

In unRAID, go to Settings > Disk Settings to set your chosen parameter values.

Completed: 0 Hrs 53 Min 51 Sec.


System Info:  Tower5
              unRAID version 6.2.0-rc4
                   md_num_stripes=4480
                   md_sync_window=2048
                   md_sync_thresh=2000
                   nr_requests=8 (Global Setting)
                   sbNumDisks=30
              CPU: Intel(R) Pentium(R) CPU G4400 @ 3.30GHz
              RAM: 8GiB System Memory

Outputting lshw information for Drives and Controllers:

Bus info          Device      Class          Description
========================================================
pci@0000:01:00.0  scsi1       Storage  SAS2308 PCI-Express Fusion-MPT SAS-2
scsi@1:0.3.0      /dev/sdk       Disk    256GB TS256GSSD370S
scsi@1:0.4.0      /dev/sdl       Disk    64GB TS64GSSD370S
scsi@1:0.5.0      /dev/sdm       Disk    64GB TS64GSSD370S
scsi@1:0.6.0      /dev/sdn       Disk    64GB TS64GSSD370S
scsi@1:0.7.0      /dev/sdo       Disk    64GB TS64GSSD370S
scsi@1:0.8.0      /dev/sdp       Disk    64GB TS64GSSD370S
scsi@1:0.9.0      /dev/sdq       Disk    64GB TS64GSSD370S
scsi@1:0.10.0     /dev/sdr       Disk    64GB TS64GSSD370S
scsi@1:0.11.0     /dev/sds       Disk    64GB TS64GSSD370S
scsi@1:0.12.0     /dev/sdt       Disk    120GB GOODRAM
scsi@1:0.13.0     /dev/sdu       Disk    120GB GOODRAM
scsi@1:0.14.0     /dev/sdv       Disk    120GB GOODRAM
scsi@1:0.15.0     /dev/sdw       Disk    120GB GOODRAM
scsi@1:0.0.0      /dev/sdh       Disk    256GB TS256GSSD370S
scsi@1:0.1.0      /dev/sdi       Disk    256GB TS256GSSD370S
scsi@1:0.2.0      /dev/sdj       Disk    256GB TS256GSSD370S
pci@0000:02:00.0  scsi8       Storage  SAS2008 PCI-Express Fusion-MPT SAS-2 [Falcon]
scsi@8:0.0.0      /dev/sdx       Disk    120GB GOODRAM
scsi@8:0.1.0      /dev/sdy       Disk    64GB SAMSUNG SSD 830
scsi@8:0.2.0      /dev/sdz       Disk    64GB SAMSUNG SSD 830
scsi@8:0.3.0      /dev/sdaa      Disk    120GB Samsung SSD 840
scsi@8:0.4.0      /dev/sdab      Disk    120GB Samsung SSD 840
scsi@8:0.5.0      /dev/sdac      Disk    120GB GOODRAM
scsi@8:0.6.0      /dev/sdad      Disk    120GB SanDisk SDSSDA12
scsi@8:0.7.0      /dev/sdae      Disk    120GB Samsung SSD 840
pci@0000:00:17.0              Storage  Sunrise Point-H SATA controller [AHCI mode]
pci@0000:06:00.0              Storage  NVMe SSD Controller
usb@1:8           scsi0       Storage  
scsi@0:0.0.0      /dev/sda       Disk    15GB DataTraveler 2.0
                  /dev/sda       Disk    15GB 
                  scsi2       Storage  
scsi@2:0.0.0      /dev/sdb       Disk    120GB GOODRAM
                  scsi3       Storage  
scsi@3:0.0.0      /dev/sdc       Disk    120GB GOODRAM
                  scsi4       Storage  
scsi@4:0.0.0      /dev/sdd       Disk    80GB INTEL SSDSA2CW08
                  scsi5       Storage  
scsi@5:0.0.0      /dev/sde       Disk    80GB INTEL SSDSA2CW08
                  scsi6       Storage  
scsi@6:0.0.0      /dev/sdf       Disk    80GB INTEL SSDSA2CW08
                  scsi7       Storage  
scsi@7:0.0.0      /dev/sdg       Disk    80GB INTEL SSDSA2CW08

Array Devices:
    Disk0 sdh is a Parity drive named parity
    Disk1 sdj is a Data drive named disk1
    Disk2 sdk is a Data drive named disk2
    Disk3 sdl is a Data drive named disk3
    Disk4 sdm is a Data drive named disk4
    Disk5 sdn is a Data drive named disk5
    Disk6 sdo is a Data drive named disk6
    Disk7 sdp is a Data drive named disk7
    Disk8 sdq is a Data drive named disk8
    Disk9 sdr is a Data drive named disk9
    Disk10 sds is a Data drive named disk10
    Disk11 sdt is a Data drive named disk11
    Disk12 sdu is a Data drive named disk12
    Disk13 sdv is a Data drive named disk13
    Disk14 sdw is a Data drive named disk14
    Disk15 sdc is a Data drive named disk15
    Disk16 sdb is a Data drive named disk16
    Disk17 sde is a Data drive named disk17
    Disk18 sdf is a Data drive named disk18
    Disk19 sdg is a Data drive named disk19
    Disk20 sdd is a Data drive named disk20
    Disk21 sdad is a Data drive named disk21
    Disk22 sdac is a Data drive named disk22
    Disk23 sdx is a Data drive named disk23
    Disk24 sdae is a Data drive named disk24
    Disk25 sdab is a Data drive named disk25
    Disk26 sdaa is a Data drive named disk26
    Disk27 sdz is a Data drive named disk27
    Disk28 sdy is a Data drive named disk28
    Disk29 sdi is a Parity drive named parity2

Outputting free low memory information...

              total        used        free      shared  buff/cache   available
Mem:        7865860      681308     6765900      351460      418652     6601976
Low:        7865860     1099960     6765900
High:             0           0           0
Swap:             0           0           0


                      *** END OF REPORT ***

 

I know this is just the quick test but since parity check is very fast on this server I tried with the fastest values found:

 

With my previous settings:

 

Description: Duration: 19 minutes, 8 seconds. Average speed: 223.0 MB/s

 

New settings after the quick test:

 

Description: Duration: 22 minutes, 7 seconds. Average speed: 193.0 MB/s

 

 

I'll try again with the normal tests, but probably not before the weekend.

 

Fascinating server.

 

Just like Tower7, there was too much randomness with the Short Auto to trigger Test 1c, so Tower5 never tested the upper ranges.  Hopefully a Normal Auto will smooth things out enough to trigger Test 1c.

 

Thanks,

Paul

Link to post

Tower6 - 22HDDs (2&3TB) - SAS2LP +SASLP (using 4 ports only due to limited bandwidth) + Adaptec 1430SA + Intel PCH

 

 

System Info:  Tower6
              unRAID version 6.2.0-rc4
                   md_num_stripes=4480
                   md_sync_window=2048
                   md_sync_thresh=2000
                   nr_requests=8 (Global Setting)
                   sbNumDisks=22
              CPU: Intel(R) Pentium(R) CPU G2030 @ 3.00GHz
              RAM: 8GiB System Memory

Outputting lshw information for Drives and Controllers:

Bus info          Device     Class      Description
===================================================
pci@0000:01:00.0  scsi3      storage    88SE9485 SAS/SATA 6Gb/s controller
scsi@3:0.0.0      /dev/sdl   disk       3TB WDC WD30EZRX-00D
scsi@3:0.1.0      /dev/sdm   disk       3TB WDC WD30EZRX-00D
scsi@3:0.2.0      /dev/sdn   disk       3TB WDC WD30EZRX-00D
scsi@3:0.3.0      /dev/sdo   disk       3TB WDC WD30EZRX-22D
scsi@3:0.4.0      /dev/sdp   disk       2TB WDC WD20EZRX-00D
scsi@3:0.5.0      /dev/sdq   disk       2TB SAMSUNG HD204UI
scsi@3:0.6.0      /dev/sdr   disk       2TB WDC WD20EZRX-00D
scsi@3:0.7.0      /dev/sds   disk       2TB WDC WD20EZRX-22D
pci@0000:02:00.0  scsi12     storage    MV64460/64461/64462 System Controller, Revision B
scsi@12:0.0.0     /dev/sdt   disk       2TB SAMSUNG HD204UI
scsi@12:0.1.0     /dev/sdu   disk       2TB WDC WD20EZRX-00D
scsi@12:0.2.0     /dev/sdv   disk       2TB SAMSUNG HD204UI
scsi@12:0.3.0     /dev/sdw   disk       2TB SAMSUNG HD204UI
pci@0000:03:00.0             storage    Serial ATA II RAID 1430SA    <------NO DRIVES LISTED BELOW THIS CONTROLLER
pci@0000:00:1f.2             storage    6 Series/C200 Series Chipset Family SATA AHCI Controller
usb@2:1.1         scsi0      storage    
scsi@0:0.0.0      /dev/sda   disk       1021MB DataTraveler 2.0
                  /dev/sda   disk       1021MB 
                  scsi1      storage    
scsi@1:0.0.0      /dev/sdb   disk       2TB WDC WD20EZRX-00D
                  scsi11     storage    
scsi@11:0.0.0     /dev/sdk   disk       2TB SAMSUNG HD204UI
                  scsi2      storage    
scsi@2:0.0.0      /dev/sdc   disk       2TB WDC WD20EZRX-00D
                  scsi4      storage    
scsi@4:0.0.0      /dev/sdd   disk       3TB TOSHIBA DT01ABA3
                  scsi5      storage    
scsi@5:0.0.0      /dev/sde   disk       3TB TOSHIBA DT01ABA3
                  scsi6      storage    
scsi@6:0.0.0      /dev/sdf   disk       3TB WDC WD30EZRX-00D
                  scsi7      storage    
scsi@7:0.0.0      /dev/sdg   disk       3TB WDC WD30EFRX-68A
                  scsi8      storage    
scsi@8:0.0.0      /dev/sdh   disk       3TB TOSHIBA DT01ABA3
                  scsi9      storage    
scsi@9:0.0.0      /dev/sdi   disk       2TB SAMSUNG HD204UI
                  scsi10     storage    
scsi@10:0.0.0     /dev/sdj   disk       2TB SAMSUNG HD204UI

Array Devices:
    Disk0 sdf is a Parity drive named parity
    Disk1 sdg is a Data drive named disk1
    Disk2 sdi is a Data drive named disk2
    Disk3 sdh is a Data drive named disk3
    Disk4 sdk is a Data drive named disk4
    Disk5 sdj is a Data drive named disk5
    Disk6 sdv is a Data drive named disk6
    Disk7 sdw is a Data drive named disk7
    Disk8 sdt is a Data drive named disk8
    Disk9 sdu is a Data drive named disk9
    Disk10 sdr is a Data drive named disk10
    Disk11 sdq is a Data drive named disk11
    Disk12 sds is a Data drive named disk12
    Disk13 sdb is a Data drive named disk13
    Disk14 sdc is a Data drive named disk14
    Disk15 sdp is a Data drive named disk15
    Disk16 sdl is a Data drive named disk16
    Disk17 sdo is a Data drive named disk17
    Disk18 sdn is a Data drive named disk18
    Disk19 sde is a Data drive named disk19
    Disk20 sdd is a Data drive named disk20
    Disk29 sdm is a Parity drive named parity2

Outputting free low memory information...

              total        used        free      shared  buff/cache   available
Mem:        8152960      473152     7180712      408920      499096     7032760
Low:        8152960      972248     7180712
High:             0           0           0
Swap:             0           0           0


                      *** END OF REPORT ***

 

Is anything connected to the 1430A?  From the lshw output, it looks like it is going unused (see above), but not sure if that is reporting correctly.

 

On this server, when nr_requests=128, high md_sync_thresh values return horrible results. 

 

While the script did run test 1c on this server, getting very close to your original values, the second test of the nr_requests switched from 8 to 128 as the better value, so the rest of Test 2 was run at 128.  I have a feeling this was just the random noise of a Short Auto test, and that you'll get much better results from the Full Auto.

 

Thanks,

Paul

 

 

Link to post

Is anything connected to the 1430A?  From the lshw output, it looks like it is going unused (see above), but not sure if that is reporting correctly.

 

Yes, 4 disks.

 

On this server, when nr_requests=128, high md_sync_thresh values return horrible results. 

 

Probably due to the SAS2LP, it works OK with either nr_requests=8 or md_sync_thresh/2, in fact both these tunables were in response to some users, including myself, having terrible performance with it before.

Link to post

Here are the results of Normal Automatic Test i let run overnight

 

System Info:  Tower
              unRAID version 6.2.0-rc4
                   md_num_stripes=6144
                   md_sync_window=2768
                   md_sync_thresh=192
                   nr_requests=128 (Global Setting)
                   sbNumDisks=13
              CPU: AMD FX(tm)-8120 Eight-Core Processor
              RAM: 16GiB System Memory

Outputting lshw information for Drives and Controllers:

Bus info          Device       Class      Description
=====================================================
pci@0000:01:00.0  scsi1        storage    SAS2008 PCI-Express Fusion-MPT SAS-2 [Falcon]
scsi@1:0.3.0      /dev/sdk     disk       2TB Hitachi HUA72302
scsi@1:0.4.0      /dev/sdl     disk       3TB Hitachi HUA72303
scsi@1:0.5.0      /dev/sdm     disk       3TB WL3000GSA6472E
scsi@1:0.6.0      /dev/sdn     disk       3TB WL3000GSA6472E
scsi@1:0.0.0      /dev/sdh     disk       3TB WL3000GSA6472
scsi@1:0.1.0      /dev/sdi     disk       1TB ST1000DM003-9YN1
scsi@1:0.2.0      /dev/sdj     disk       1500GB ST1500DM003-9YN1
pci@0000:00:11.0               storage    SB7x0/SB8x0/SB9x0 SATA Controller [AHCI mode]
pci@0000:04:00.0  scsi8        storage    SAS2008 PCI-Express Fusion-MPT SAS-2 [Falcon]
scsi@8:0.0.0      /dev/sdo     disk       3TB WL3000GSA6472E
scsi@8:0.1.0      /dev/sdp     disk       3TB WL3000GSA6472E
scsi@8:0.2.0      /dev/sdq     disk       3TB WL3000GSA6472E
usb@1:5           scsi0        storage    
scsi@0:0.0.0      /dev/sda     disk       4GB Cruzer
                  /dev/sda     disk       4GB 
                  scsi2        storage    
scsi@2:0.0.0      /dev/sdb     disk       3200GB WL3000GSA6472E
                  scsi3        storage    
scsi@3:0.0.0      /dev/sdc     disk       3TB ST3000DM001-1E61
                  scsi4        storage    
scsi@4:0.0.0      /dev/sdd     disk       256GB LITEONIT LCT-256
                  scsi5        storage    
scsi@5:0.0.0      /dev/sde     disk       1TB TOSHIBA MQ01ABD1
                  scsi6        storage    
scsi@6:0.0.0      /dev/sdf     disk       120GB KINGSTON SV300S3
                  scsi7        storage    
scsi@7:0.0.0      /dev/sdg     disk       256GB SAMSUNG SSD PM83

Array Devices:
    Disk0 sdb is a Parity drive named parity
    Disk1 sdc is a Data drive named disk1
    Disk2 sdi is a Data drive named disk2
    Disk3 sdn is a Data drive named disk3
    Disk4 sdh is a Data drive named disk4
    Disk5 sdl is a Data drive named disk5
    Disk6 sdk is a Data drive named disk6
    Disk7 sdj is a Data drive named disk7
    Disk8 sdo is a Data drive named disk8
    Disk9 sdp is a Data drive named disk9
    Disk10 sdq is a Data drive named disk10
    Disk11 sdm is a Data drive named disk11

Outputting free low memory information...

              total        used        free      shared  buff/cache   available
Mem:       16353140     6503664     8059804      542996     1789672     8642884
Low:       16353140     8293336     8059804
High:             0           0           0
Swap:             0           0           0


                      *** END OF REPORT ***

 

Yay, the first Normal Auto!  Unfortunately, really bad results (I trimmed them out above, these posts are getting too long for the forum character limit).  There is a ton of randomness here, it didn't settle down at all.  Even worse, look at this:

 

 
Test | num_stripes | sync_window | nr_requests | sync_thresh |   Speed
---------------------------------------------------------------------------
  1   |     1536    |     768     |     128     |      767    | 110.5 MB/s     <-- nr_requests test pass 1, 10 minutes
-----------------------------------------------------------------------------
  1   |     1536    |     768     |     128     |      767    | 112.2 MB/s     <-- nr_requests test pass 2, 10 minutes 

Test | RAM | num_stripes | sync_window | nr_reqs | sync_thresh |   Speed
-----------------------------------------------------------------------------
   7a |  81 |     1536    |     768     |   128   |      767    | 239.0 MB/s   <-- md_sync_window test pass 1, 5 minutes 
---------------------------------------------------------------------------
  17a |  81 |     1536    |     768     |   128   |      767    |  89.8 MB/s   <-- md_sync_window test pass 2, 5 minutes 

 

The exact same test happened to get run 4 times, with wildly varying results.  I can't even begin to understand how that 239 MB/s result got in there, it's just so different, and high.  5 minutes at 239 MB/s is about 70 GB of data processed.  Can't imagine this is caching.

 

You also posted earlier you were having power issues to your cages.  Any chance the power went out just long enough to let one test parity check run without the slow drives?  This is actually my best guess at how this could have happened, but I would have expected lots of issues (redballs) if this occurred.

 

Did you notice any errors at all during the test?  They wouldn't be in the report file, just on the screen.

 

If that had been a Short Auto, I wouldn't be surprised.  But this being a Normal Auto, I'm not sure what to make of this.

 

Those top two tests I listed were from the nr_requests tests 1 and 2, and those run for 10 minutes instead of 5, and they "might" have produced more consistent results (or maybe that's just a coincidence).  Those bottom two tests were from Pass 1 and 2 of the md_sync_window tests, which "only" ran for 5 minutes.  Perhaps that's not long enough for your server to settle down.

 

Anyone have any ideas?

 

Long Auto is a big time commitment, and I'm not ready to recommend that just yet.

 

If you are willing, I would recommend you run a Manual test, Start at 768, End at 768, any interval, with a time of 20 minutes.

 

Repeat 1 more time.

 

Because it will pre-run the 4 nr_requests, doing this will take 100 minutes each time, so if you do this twice you're looking at almost 3.5 hours of testing.

 

What I'm looking for is:  Does the server settle down with longer tests? (hopefully 20 minutes will tell us), and by running the same values I listed above, we can compare 20 minute tests back to 10 and 5 minute tests.

 

But if you are still having power issues, please resolve those first.

 

Thanks,

Paul

Link to post

Is anything connected to the 1430A?  From the lshw output, it looks like it is going unused (see above), but not sure if that is reporting correctly.

 

Yes, 4 disks.

 

 

Okay, thanks.  I was hopeful that the lshw output was arranging everything hierarchically, but that doesn't seem to be the case.  I may try it without the -businfo flag in v4b3.

 

Paul

Link to post

Here are the results of Normal Automatic Test i let run overnight

 

System Info:  Tower
              unRAID version 6.2.0-rc4
                   md_num_stripes=6144
                   md_sync_window=2768
                   md_sync_thresh=192
                   nr_requests=128 (Global Setting)
                   sbNumDisks=13
              CPU: AMD FX(tm)-8120 Eight-Core Processor
              RAM: 16GiB System Memory

Outputting lshw information for Drives and Controllers:

Bus info          Device       Class      Description
=====================================================
pci@0000:01:00.0  scsi1        storage    SAS2008 PCI-Express Fusion-MPT SAS-2 [Falcon]
scsi@1:0.3.0      /dev/sdk     disk       2TB Hitachi HUA72302
scsi@1:0.4.0      /dev/sdl     disk       3TB Hitachi HUA72303
scsi@1:0.5.0      /dev/sdm     disk       3TB WL3000GSA6472E
scsi@1:0.6.0      /dev/sdn     disk       3TB WL3000GSA6472E
scsi@1:0.0.0      /dev/sdh     disk       3TB WL3000GSA6472
scsi@1:0.1.0      /dev/sdi     disk       1TB ST1000DM003-9YN1
scsi@1:0.2.0      /dev/sdj     disk       1500GB ST1500DM003-9YN1
pci@0000:00:11.0               storage    SB7x0/SB8x0/SB9x0 SATA Controller [AHCI mode]
pci@0000:04:00.0  scsi8        storage    SAS2008 PCI-Express Fusion-MPT SAS-2 [Falcon]
scsi@8:0.0.0      /dev/sdo     disk       3TB WL3000GSA6472E
scsi@8:0.1.0      /dev/sdp     disk       3TB WL3000GSA6472E
scsi@8:0.2.0      /dev/sdq     disk       3TB WL3000GSA6472E
usb@1:5           scsi0        storage    
scsi@0:0.0.0      /dev/sda     disk       4GB Cruzer
                  /dev/sda     disk       4GB 
                  scsi2        storage    
scsi@2:0.0.0      /dev/sdb     disk       3200GB WL3000GSA6472E
                  scsi3        storage    
scsi@3:0.0.0      /dev/sdc     disk       3TB ST3000DM001-1E61
                  scsi4        storage    
scsi@4:0.0.0      /dev/sdd     disk       256GB LITEONIT LCT-256
                  scsi5        storage    
scsi@5:0.0.0      /dev/sde     disk       1TB TOSHIBA MQ01ABD1
                  scsi6        storage    
scsi@6:0.0.0      /dev/sdf     disk       120GB KINGSTON SV300S3
                  scsi7        storage    
scsi@7:0.0.0      /dev/sdg     disk       256GB SAMSUNG SSD PM83

Array Devices:
    Disk0 sdb is a Parity drive named parity
    Disk1 sdc is a Data drive named disk1
    Disk2 sdi is a Data drive named disk2
    Disk3 sdn is a Data drive named disk3
    Disk4 sdh is a Data drive named disk4
    Disk5 sdl is a Data drive named disk5
    Disk6 sdk is a Data drive named disk6
    Disk7 sdj is a Data drive named disk7
    Disk8 sdo is a Data drive named disk8
    Disk9 sdp is a Data drive named disk9
    Disk10 sdq is a Data drive named disk10
    Disk11 sdm is a Data drive named disk11

Outputting free low memory information...

              total        used        free      shared  buff/cache   available
Mem:       16353140     6503664     8059804      542996     1789672     8642884
Low:       16353140     8293336     8059804
High:             0           0           0
Swap:             0           0           0


                      *** END OF REPORT ***

 

Yay, the first Normal Auto!  Unfortunately, really bad results (I trimmed them out above, these posts are getting too long for the forum character limit).  There is a ton of randomness here, it didn't settle down at all.  Even worse, look at this:

 

 
Test | num_stripes | sync_window | nr_requests | sync_thresh |   Speed
---------------------------------------------------------------------------
  1   |     1536    |     768     |     128     |      767    | 110.5 MB/s     <-- nr_requests test pass 1, 10 minutes
-----------------------------------------------------------------------------
  1   |     1536    |     768     |     128     |      767    | 112.2 MB/s     <-- nr_requests test pass 2, 10 minutes 

Test | RAM | num_stripes | sync_window | nr_reqs | sync_thresh |   Speed
-----------------------------------------------------------------------------
   7a |  81 |     1536    |     768     |   128   |      767    | 239.0 MB/s   <-- md_sync_window test pass 1, 5 minutes 
---------------------------------------------------------------------------
  17a |  81 |     1536    |     768     |   128   |      767    |  89.8 MB/s   <-- md_sync_window test pass 2, 5 minutes 

 

The exact same test happened to get run 4 times, with wildly varying results.  I can't even begin to understand how that 239 MB/s result got in there, it's just so different, and high.  5 minutes at 239 MB/s is about 70 GB of data processed.  Can't imagine this is caching.

 

You also posted earlier you were having power issues to your cages.  Any chance the power went out just long enough to let one test parity check run without the slow drives?  This is actually my best guess at how this could have happened, but I would have expected lots of issues (redballs) if this occurred.

 

Did you notice any errors at all during the test?  They wouldn't be in the report file, just on the screen.

 

If that had been a Short Auto, I wouldn't be surprised.  But this being a Normal Auto, I'm not sure what to make of this.

 

Those top two tests I listed were from the nr_requests tests 1 and 2, and those run for 10 minutes instead of 5, and they "might" have produced more consistent results (or maybe that's just a coincidence).  Those bottom two tests were from Pass 1 and 2 of the md_sync_window tests, which "only" ran for 5 minutes.  Perhaps that's not long enough for your server to settle down.

 

Anyone have any ideas?

 

Long Auto is a big time commitment, and I'm not ready to recommend that just yet.

 

If you are willing, I would recommend you run a Manual test, Start at 768, End at 768, any interval, with a time of 20 minutes.

 

Repeat 1 more time.

 

Because it will pre-run the 4 nr_requests, doing this will take 100 minutes each time, so if you do this twice you're looking at almost 3.5 hours of testing.

 

What I'm looking for is:  Does the server settle down with longer tests? (hopefully 20 minutes will tell us), and by running the same values I listed above, we can compare 20 minute tests back to 10 and 5 minute tests.

 

But if you are still having power issues, please resolve those first.

 

Thanks,

Paul

 

I am going to be running to best buy today to get some new power module cables and just replace them to all the cages ( completely solve any power issues I may be having ).  then I will run the Manual tests and see what happens

 

Link to post

Tower1 - same exact hardware as tower6, except all 22 disks are 2TB, controllers: SAS2LP + SASLP + 1430SA + Intel PCH:

 

 

 

       unRAID Tunables Tester v4.0b2 by Pauven (for unRAID v6.2)

        Tunables Report produced Thu Aug 25 13:58:25 BST 2016

                         Run on server: Tower

                   Short Automatic Parity Sync Test


NOTE: Use the smallest set of values that produce good results. Larger values
      increase server memory use, and may cause stability issues with unRAID,
      especially if you have any add-ons or plug-ins installed.


Current Values:  md_num_stripes=4224, md_sync_window=2048, md_sync_thresh=2000
                 Global nr_requests=8
                    sdf nr_requests=8
                    sdg nr_requests=8
                    sdh nr_requests=8
                    sdi nr_requests=8
                    sdj nr_requests=8
                    sdk nr_requests=8
                    sdr nr_requests=8
                    sds nr_requests=8
                    sdu nr_requests=8
                    sdt nr_requests=8
                    sdw nr_requests=8
                    sdv nr_requests=8
                    sdc nr_requests=8
                    sdq nr_requests=8
                    sdb nr_requests=8
                    sdp nr_requests=8
                    sdo nr_requests=8
                    sdm nr_requests=8
                    sdn nr_requests=8
                    sde nr_requests=8
                    sdd nr_requests=8
                    sdl nr_requests=8


--- INITIAL BASELINE TEST OF CURRENT VALUES (1 Sample Point @ 30sec Duration)---

Test | RAM | num_stripes | sync_window | nr_reqs | sync_thresh |   Speed 
-----------------------------------------------------------------------------
   1  | 373 |     4224    |    2048     |     8   |     2000    |  86.5 MB/s 


--- FULLY AUTOMATIC nr_requests TEST 1 (4 Sample Points @ 60sec Duration)---

Test | num_stripes | sync_window | nr_requests | sync_thresh |   Speed 
---------------------------------------------------------------------------
  1   |     1536    |     768     |     128     |      767    |  46.8 MB/s 
  2   |     1536    |     768     |     128     |      384    |  63.6 MB/s 
  3   |     1536    |     768     |       8     |      767    |  69.5 MB/s 
  4   |     1536    |     768     |       8     |      384    |  68.7 MB/s 

Fastest vals were nr_reqs=8 and sync_thresh=99% of sync_window at 69.5 MB/s

This nr_requests value will be used for the next test.


--- FULLY AUTOMATIC TEST PASS 1a (Rough - 13 Sample Points @ 30sec Duration)---

Test | RAM | num_stripes | sync_window | nr_reqs | sync_thresh |   Speed 
-----------------------------------------------------------------------------
   1a |  67 |      768    |     384     |     8   |      383    |  44.2 MB/s 
   1b |  67 |      768    |     384     |     8   |      192    |  35.4 MB/s 
   2a |  79 |      896    |     448     |     8   |      447    |  49.4 MB/s 
   2b |  79 |      896    |     448     |     8   |      224    |  26.1 MB/s 
   3a |  90 |     1024    |     512     |     8   |      511    |  56.3 MB/s 
   3b |  90 |     1024    |     512     |     8   |      256    |  37.0 MB/s 
   4a | 101 |     1152    |     576     |     8   |      575    |  61.3 MB/s 
   4b | 101 |     1152    |     576     |     8   |      288    |  55.3 MB/s 
   5a | 113 |     1280    |     640     |     8   |      639    |  63.9 MB/s 
   5b | 113 |     1280    |     640     |     8   |      320    |  59.9 MB/s 
   6a | 124 |     1408    |     704     |     8   |      703    |  60.3 MB/s 
   6b | 124 |     1408    |     704     |     8   |      352    |  68.9 MB/s 
   7a | 135 |     1536    |     768     |     8   |      767    |  61.5 MB/s 
   7b | 135 |     1536    |     768     |     8   |      384    |  60.0 MB/s 
   8a | 147 |     1664    |     832     |     8   |      831    |  62.9 MB/s 
   8b | 147 |     1664    |     832     |     8   |      416    |  42.6 MB/s 
   9a | 158 |     1792    |     896     |     8   |      895    |  61.3 MB/s 
   9b | 158 |     1792    |     896     |     8   |      448    |  62.3 MB/s 
  10a | 169 |     1920    |     960     |     8   |      959    |  63.9 MB/s 
  10b | 169 |     1920    |     960     |     8   |      480    |  64.5 MB/s 
  11a | 181 |     2048    |    1024     |     8   |     1023    |  77.9 MB/s 
  11b | 181 |     2048    |    1024     |     8   |      512    |  62.7 MB/s 
  12a | 192 |     2176    |    1088     |     8   |     1087    |  72.7 MB/s 
  12b | 192 |     2176    |    1088     |     8   |      544    |  66.4 MB/s 
  13a | 203 |     2304    |    1152     |     8   |     1151    |  68.0 MB/s 
  13b | 203 |     2304    |    1152     |     8   |      576    |  81.9 MB/s 

--- FULLY AUTOMATIC TEST PASS 1c (Rough - 18 Sample Points @ 30sec Duration)---

Test | RAM | num_stripes | sync_window | nr_reqs | sync_thresh |   Speed 
-----------------------------------------------------------------------------
   1a | 215 |     2432    |    1216     |     8   |     1215    |  56.7 MB/s 
   1b | 215 |     2432    |    1216     |     8   |      608    |  74.9 MB/s 
   2a | 226 |     2560    |    1280     |     8   |     1279    |  81.2 MB/s 
   2b | 226 |     2560    |    1280     |     8   |      640    |  74.6 MB/s 
   3a | 237 |     2688    |    1344     |     8   |     1343    |  81.4 MB/s 
   3b | 237 |     2688    |    1344     |     8   |      672    |  76.0 MB/s 
   4a | 249 |     2816    |    1408     |     8   |     1407    |  81.6 MB/s 
   4b | 249 |     2816    |    1408     |     8   |      704    |  77.9 MB/s 
   5a | 260 |     2944    |    1472     |     8   |     1471    |  80.7 MB/s 
   5b | 260 |     2944    |    1472     |     8   |      736    |  79.7 MB/s 
   6a | 271 |     3072    |    1536     |     8   |     1535    |  83.3 MB/s 
   6b | 271 |     3072    |    1536     |     8   |      768    |  80.7 MB/s 
   7a | 283 |     3200    |    1600     |     8   |     1599    |  67.8 MB/s 
   7b | 283 |     3200    |    1600     |     8   |      800    |  85.4 MB/s 
   8a | 294 |     3328    |    1664     |     8   |     1663    |  83.2 MB/s 
   8b | 294 |     3328    |    1664     |     8   |      832    |  82.7 MB/s 
   9a | 305 |     3456    |    1728     |     8   |     1727    |  88.2 MB/s 
   9b | 305 |     3456    |    1728     |     8   |      864    |  86.7 MB/s 
  10a | 317 |     3584    |    1792     |     8   |     1791    |  89.7 MB/s 
  10b | 317 |     3584    |    1792     |     8   |      896    |  88.8 MB/s 
  11a | 328 |     3712    |    1856     |     8   |     1855    |  91.4 MB/s 
  11b | 328 |     3712    |    1856     |     8   |      928    |  88.4 MB/s 
  12a | 339 |     3840    |    1920     |     8   |     1919    |  90.7 MB/s 
  12b | 339 |     3840    |    1920     |     8   |      960    |  90.7 MB/s 
  13a | 350 |     3968    |    1984     |     8   |     1983    |  81.7 MB/s 
  13b | 350 |     3968    |    1984     |     8   |      992    |  91.7 MB/s 
  14a | 362 |     4096    |    2048     |     8   |     2047    |  89.4 MB/s 
  14b | 362 |     4096    |    2048     |     8   |     1024    |  83.3 MB/s 
  15a | 373 |     4224    |    2112     |     8   |     2111    |  88.1 MB/s 
  15b | 373 |     4224    |    2112     |     8   |     1056    |  89.1 MB/s 
  16a | 384 |     4352    |    2176     |     8   |     2175    |  84.6 MB/s 
  16b | 384 |     4352    |    2176     |     8   |     1088    |  83.4 MB/s 
  17a | 396 |     4480    |    2240     |     8   |     2239    |  87.9 MB/s 
  17b | 396 |     4480    |    2240     |     8   |     1120    |  84.6 MB/s 
  18a | 407 |     4608    |    2304     |     8   |     2303    |  87.7 MB/s 
  18b | 407 |     4608    |    2304     |     8   |     1152    |  64.7 MB/s 

--- Targeting Fastest Result of md_sync_window 1984 bytes for Final Pass ---


--- FULLY AUTOMATIC nr_requests TEST 2 (4 Sample Points @ 60sec Duration)---

Test | num_stripes | sync_window | nr_requests | sync_thresh |   Speed 
---------------------------------------------------------------------------
  1   |     3968    |    1984     |     128     |     1983    |  76.0 MB/s 
  2   |     3968    |    1984     |     128     |      992    |  83.3 MB/s 
  3   |     3968    |    1984     |       8     |     1983    |  90.2 MB/s 
  4   |     3968    |    1984     |       8     |      992    |  89.5 MB/s 

Fastest vals were nr_reqs=8 and sync_thresh=99% of sync_window at 90.2 MB/s

This nr_requests value will be used for the next test.



--- FULLY AUTOMATIC TEST PASS 2 (Fine - 33 Sample Points @ 30sec Duration)---

Test | RAM | num_stripes | sync_window | nr_reqs | sync_thresh |   Speed 
-----------------------------------------------------------------------------
   1a | 328 |     3712    |    1856     |     8   |     1855    |  84.6 MB/s 
   1b | 328 |     3712    |    1856     |     8   |      928    |  92.3 MB/s 
   2a | 329 |     3728    |    1864     |     8   |     1863    |  87.0 MB/s 
   2b | 329 |     3728    |    1864     |     8   |      932    |  56.7 MB/s 
   3a | 331 |     3744    |    1872     |     8   |     1871    |  83.6 MB/s 
   3b | 331 |     3744    |    1872     |     8   |      936    |  83.7 MB/s 
   4a | 332 |     3760    |    1880     |     8   |     1879    |  85.3 MB/s 
   4b | 332 |     3760    |    1880     |     8   |      940    |  82.8 MB/s 
   5a | 334 |     3776    |    1888     |     8   |     1887    |  76.3 MB/s 
   5b | 334 |     3776    |    1888     |     8   |      944    |  79.8 MB/s 
   6a | 335 |     3792    |    1896     |     8   |     1895    |  79.2 MB/s 
   6b | 335 |     3792    |    1896     |     8   |      948    |  76.8 MB/s 
   7a | 336 |     3808    |    1904     |     8   |     1903    |  76.8 MB/s 
   7b | 336 |     3808    |    1904     |     8   |      952    |  77.5 MB/s 
   8a | 338 |     3824    |    1912     |     8   |     1911    |  72.7 MB/s 
   8b | 338 |     3824    |    1912     |     8   |      956    |  88.5 MB/s 
   9a | 339 |     3840    |    1920     |     8   |     1919    |  88.7 MB/s 
   9b | 339 |     3840    |    1920     |     8   |      960    |  89.2 MB/s 
  10a | 341 |     3856    |    1928     |     8   |     1927    |  89.9 MB/s 
  10b | 341 |     3856    |    1928     |     8   |      964    |  92.4 MB/s 
  11a | 342 |     3872    |    1936     |     8   |     1935    |  89.9 MB/s 
  11b | 342 |     3872    |    1936     |     8   |      968    |  96.1 MB/s 
  12a | 343 |     3888    |    1944     |     8   |     1943    |  90.0 MB/s 
  12b | 343 |     3888    |    1944     |     8   |      972    |  93.7 MB/s 
  13a | 345 |     3904    |    1952     |     8   |     1951    |  87.4 MB/s 
  13b | 345 |     3904    |    1952     |     8   |      976    |  95.2 MB/s 
  14a | 346 |     3920    |    1960     |     8   |     1959    |  60.2 MB/s 
  14b | 346 |     3920    |    1960     |     8   |      980    | 103.0 MB/s 
  15a | 348 |     3936    |    1968     |     8   |     1967    |  84.2 MB/s 
  15b | 348 |     3936    |    1968     |     8   |      984    |  88.0 MB/s 
  16a | 349 |     3952    |    1976     |     8   |     1975    |  89.5 MB/s 
  16b | 349 |     3952    |    1976     |     8   |      988    |  84.5 MB/s 
  17a | 350 |     3968    |    1984     |     8   |     1983    |  90.0 MB/s 
  17b | 350 |     3968    |    1984     |     8   |      992    |  89.7 MB/s 
  18a | 352 |     3984    |    1992     |     8   |     1991    |  88.5 MB/s 
  18b | 352 |     3984    |    1992     |     8   |      996    |  84.4 MB/s 
  19a | 353 |     4000    |    2000     |     8   |     1999    |  78.9 MB/s 
  19b | 353 |     4000    |    2000     |     8   |     1000    |  85.9 MB/s 
  20a | 355 |     4016    |    2008     |     8   |     2007    |  72.1 MB/s 
  20b | 355 |     4016    |    2008     |     8   |     1004    |  85.7 MB/s 
  21a | 356 |     4032    |    2016     |     8   |     2015    |  88.8 MB/s 
  21b | 356 |     4032    |    2016     |     8   |     1008    |  88.3 MB/s 
  22a | 358 |     4048    |    2024     |     8   |     2023    |  84.9 MB/s 
  22b | 358 |     4048    |    2024     |     8   |     1012    |  82.4 MB/s 
  23a | 359 |     4064    |    2032     |     8   |     2031    |  85.4 MB/s 
  23b | 359 |     4064    |    2032     |     8   |     1016    |  88.0 MB/s 
  24a | 360 |     4080    |    2040     |     8   |     2039    |  88.4 MB/s 
  24b | 360 |     4080    |    2040     |     8   |     1020    |  73.8 MB/s 
  25a | 362 |     4096    |    2048     |     8   |     2047    |  78.8 MB/s 
  25b | 362 |     4096    |    2048     |     8   |     1024    |  89.5 MB/s 
  26a | 363 |     4112    |    2056     |     8   |     2055    |  89.6 MB/s 
  26b | 363 |     4112    |    2056     |     8   |     1028    |  90.1 MB/s 
  27a | 365 |     4128    |    2064     |     8   |     2063    |  87.2 MB/s 
  27b | 365 |     4128    |    2064     |     8   |     1032    |  89.2 MB/s 
  28a | 366 |     4144    |    2072     |     8   |     2071    |  89.2 MB/s 
  28b | 366 |     4144    |    2072     |     8   |     1036    |  85.9 MB/s 
  29a | 367 |     4160    |    2080     |     8   |     2079    |  90.2 MB/s 
  29b | 367 |     4160    |    2080     |     8   |     1040    |  83.9 MB/s 
  30a | 369 |     4176    |    2088     |     8   |     2087    |  87.2 MB/s 
  30b | 369 |     4176    |    2088     |     8   |     1044    |  57.7 MB/s 
  31a | 370 |     4192    |    2096     |     8   |     2095    |  91.7 MB/s 
  31b | 370 |     4192    |    2096     |     8   |     1048    |  85.0 MB/s 
  32a | 372 |     4208    |    2104     |     8   |     2103    |  86.2 MB/s 
  32b | 372 |     4208    |    2104     |     8   |     1052    |  84.7 MB/s 
  33a | 373 |     4224    |    2112     |     8   |     2111    |  88.8 MB/s 
  33b | 373 |     4224    |    2112     |     8   |     1056    |  88.1 MB/s 

The results below do NOT include the Basline test of current values.

The Fastest Sync Speed tested was md_sync_window=1960 at 103.0 MB/s
     Tunable (md_num_stripes): 3920
     Tunable (md_sync_window): 1960
     Tunable (md_sync_thresh): 980
     Tunable (nr_requests): 8
This will consume 346 MB with md_num_stripes=3920, 2x md_sync_window.
This is 27MB less than your current utilization of 373MB.

The Thriftiest Sync Speed tested was md_sync_window=1960 at 103.0 MB/s
     Tunable (md_num_stripes): 3920
     Tunable (md_sync_window): 1960
     Tunable (md_sync_thresh): 980
     Tunable (nr_requests): 8
This will consume 346 MB with md_num_stripes=3920, 2x md_sync_window.
This is 27MB less than your current utilization of 373MB.

The Recommended Sync Speed is md_sync_window=1960 at 103.0 MB/s
     Tunable (md_num_stripes): 3920
     Tunable (md_sync_window): 1960
     Tunable (md_sync_thresh): 980
     Tunable (nr_requests): 8
This will consume 346 MB with md_num_stripes=3920, 2x md_sync_window.
This is 27MB less than your current utilization of 373MB.

NOTE: Adding additional drives will increase memory consumption.

In unRAID, go to Settings > Disk Settings to set your chosen parameter values.

Completed: 1 Hrs 14 Min 55 Sec.


System Info:  Tower
              unRAID version 6.2.0-rc4
                   md_num_stripes=4224
                   md_sync_window=2048
                   md_sync_thresh=2000
                   nr_requests=8 (Global Setting)
                   sbNumDisks=22
              CPU: Intel(R) Pentium(R) CPU G2030 @ 3.00GHz
              RAM: 8GiB System Memory

Outputting lshw information for Drives and Controllers:

Bus info          Device     Class      Description
===================================================
pci@0000:01:00.0  scsi2      storage    88SE9485 SAS/SATA 6Gb/s controller
scsi@2:0.0.0      /dev/sdl   disk       2TB WDC WD20EZRX-00D
scsi@2:0.1.0      /dev/sdm   disk       2TB WDC WD20EZRX-00D
scsi@2:0.2.0      /dev/sdn   disk       2TB WDC WD20EZRX-00D
scsi@2:0.3.0      /dev/sdo   disk       2TB WDC WD20EZRX-00D
scsi@2:0.4.0      /dev/sdp   disk       2TB WDC WD20EZRX-00D
scsi@2:0.5.0      /dev/sdq   disk       2TB SAMSUNG HD204UI
scsi@2:0.6.0      /dev/sdr   disk       2TB SAMSUNG HD204UI
scsi@2:0.7.0      /dev/sds   disk       2TB SAMSUNG HD204UI
pci@0000:02:00.0  scsi12     storage    MV64460/64461/64462 System Controller, Revision B
scsi@12:0.0.0     /dev/sdt   disk       2TB SAMSUNG HD204UI
scsi@12:0.1.0     /dev/sdu   disk       2TB SAMSUNG HD204UI
scsi@12:0.2.0     /dev/sdv   disk       2TB WDC WD20EZRX-00D
scsi@12:0.3.0     /dev/sdw   disk       2TB WDC WD20EZRX-00D
pci@0000:03:00.0             storage    Serial ATA II RAID 1430SA
pci@0000:00:1f.2             storage    6 Series/C200 Series Chipset Family SATA AHCI Controller
usb@2:1.1         scsi0      storage    
scsi@0:0.0.0      /dev/sda   disk       999MB USB Flash Memory
                  /dev/sda   disk       999MB 
                  scsi1      storage    
scsi@1:0.0.0      /dev/sdb   disk       2TB SAMSUNG HD204UI
                  scsi11     storage    
scsi@11:0.0.0     /dev/sdk   disk       2TB WDC WD20EZRX-00D
                  scsi3      storage    
scsi@3:0.0.0      /dev/sdc   disk       2TB SAMSUNG HD204UI
                  scsi4      storage    
scsi@4:0.0.0      /dev/sdd   disk       2TB SAMSUNG HD204UI
                  scsi5      storage    
scsi@5:0.0.0      /dev/sde   disk       2TB SAMSUNG HD204UI
                  scsi6      storage    
scsi@6:0.0.0      /dev/sdf   disk       2TB WDC WD20EZRX-00D
                  scsi7      storage    
scsi@7:0.0.0      /dev/sdg   disk       2TB SAMSUNG HD204UI
                  scsi8      storage    
scsi@8:0.0.0      /dev/sdh   disk       2TB SAMSUNG HD204UI
                  scsi9      storage    
scsi@9:0.0.0      /dev/sdi   disk       2TB WDC WD20EZRX-00D
                  scsi10     storage    
scsi@10:0.0.0     /dev/sdj   disk       2TB SAMSUNG HD204UI

Array Devices:
    Disk0 sdf is a Parity drive named parity
    Disk1 sdg is a Data drive named disk1
    Disk2 sdh is a Data drive named disk2
    Disk3 sdi is a Data drive named disk3
    Disk4 sdj is a Data drive named disk4
    Disk5 sdk is a Data drive named disk5
    Disk6 sdr is a Data drive named disk6
    Disk7 sds is a Data drive named disk7
    Disk8 sdu is a Data drive named disk8
    Disk9 sdt is a Data drive named disk9
    Disk10 sdw is a Data drive named disk10
    Disk11 sdv is a Data drive named disk11
    Disk12 sdc is a Data drive named disk12
    Disk13 sdq is a Data drive named disk13
    Disk14 sdb is a Data drive named disk14
    Disk15 sdp is a Data drive named disk15
    Disk16 sdo is a Data drive named disk16
    Disk17 sdm is a Data drive named disk17
    Disk18 sdn is a Data drive named disk18
    Disk19 sde is a Data drive named disk19
    Disk20 sdd is a Data drive named disk20
    Disk29 sdl is a Parity drive named parity2

Outputting free low memory information...

              total        used        free      shared  buff/cache   available
Mem:        8152960      442176     7221704      406488      489080     7070936
Low:        8152960      931256     7221704
High:             0           0           0
Swap:             0           0           0


                      *** END OF REPORT ***

Link to post

Tower2 - 14 Disks (3 and 4TB), LSI 9211-8i (flash H310) + Intel PCH

 

 

       unRAID Tunables Tester v4.0b2 by Pauven (for unRAID v6.2)

        Tunables Report produced Thu Aug 25 13:54:12 BST 2016

                         Run on server: Tower2

                   Short Automatic Parity Sync Test


NOTE: Use the smallest set of values that produce good results. Larger values
      increase server memory use, and may cause stability issues with unRAID,
      especially if you have any add-ons or plug-ins installed.


Current Values:  md_num_stripes=4480, md_sync_window=2048, md_sync_thresh=2000
                 Global nr_requests=128
                    sdb nr_requests=128
                    sde nr_requests=128
                    sdd nr_requests=128
                    sdf nr_requests=128
                    sdo nr_requests=128
                    sdn nr_requests=128
                    sdm nr_requests=128
                    sdl nr_requests=128
                    sdg nr_requests=128
                    sdk nr_requests=128
                    sdj nr_requests=128
                    sdh nr_requests=128
                    sdi nr_requests=128
                    sdc nr_requests=128


--- INITIAL BASELINE TEST OF CURRENT VALUES (1 Sample Point @ 30sec Duration)---

Test | RAM | num_stripes | sync_window | nr_reqs | sync_thresh |   Speed 
-----------------------------------------------------------------------------
   1  | 256 |     4480    |    2048     |   128   |     2000    | 130.8 MB/s 


--- FULLY AUTOMATIC nr_requests TEST 1 (4 Sample Points @ 60sec Duration)---

Test | num_stripes | sync_window | nr_requests | sync_thresh |   Speed 
---------------------------------------------------------------------------
  1   |     1536    |     768     |     128     |      767    | 116.9 MB/s 
  2   |     1536    |     768     |     128     |      384    | 100.1 MB/s 
  3   |     1536    |     768     |       8     |      767    | 111.9 MB/s 
  4   |     1536    |     768     |       8     |      384    | 100.8 MB/s 

Fastest vals were nr_reqs=128 and sync_thresh=99% of sync_window at 116.9 MB/s

This nr_requests value will be used for the next test.


--- FULLY AUTOMATIC TEST PASS 1a (Rough - 13 Sample Points @ 30sec Duration)---

Test | RAM | num_stripes | sync_window | nr_reqs | sync_thresh |   Speed 
-----------------------------------------------------------------------------
   1a |  43 |      768    |     384     |   128   |      383    |  95.9 MB/s 
   1b |  43 |      768    |     384     |   128   |      192    |  89.1 MB/s 
   2a |  51 |      896    |     448     |   128   |      447    |  94.3 MB/s 
   2b |  51 |      896    |     448     |   128   |      224    |  94.1 MB/s 
   3a |  58 |     1024    |     512     |   128   |      511    | 108.4 MB/s 
   3b |  58 |     1024    |     512     |   128   |      256    |  98.7 MB/s 
   4a |  65 |     1152    |     576     |   128   |      575    | 106.4 MB/s 
   4b |  65 |     1152    |     576     |   128   |      288    | 102.2 MB/s 
   5a |  73 |     1280    |     640     |   128   |      639    | 117.3 MB/s 
   5b |  73 |     1280    |     640     |   128   |      320    |  98.1 MB/s 
   6a |  80 |     1408    |     704     |   128   |      703    | 113.1 MB/s 
   6b |  80 |     1408    |     704     |   128   |      352    | 100.4 MB/s 
   7a |  87 |     1536    |     768     |   128   |      767    |  94.3 MB/s 
   7b |  87 |     1536    |     768     |   128   |      384    | 100.5 MB/s 
   8a |  95 |     1664    |     832     |   128   |      831    | 102.2 MB/s 
   8b |  95 |     1664    |     832     |   128   |      416    | 101.6 MB/s 
   9a | 102 |     1792    |     896     |   128   |      895    | 106.6 MB/s 
   9b | 102 |     1792    |     896     |   128   |      448    | 103.4 MB/s 
  10a | 109 |     1920    |     960     |   128   |      959    | 103.4 MB/s 
  10b | 109 |     1920    |     960     |   128   |      480    | 102.8 MB/s 
  11a | 117 |     2048    |    1024     |   128   |     1023    | 115.1 MB/s 
  11b | 117 |     2048    |    1024     |   128   |      512    | 111.6 MB/s 
  12a | 124 |     2176    |    1088     |   128   |     1087    | 116.2 MB/s 
  12b | 124 |     2176    |    1088     |   128   |      544    | 107.1 MB/s 
  13a | 131 |     2304    |    1152     |   128   |     1151    | 117.4 MB/s 
  13b | 131 |     2304    |    1152     |   128   |      576    | 107.1 MB/s 

--- FULLY AUTOMATIC TEST PASS 1c (Rough - 18 Sample Points @ 30sec Duration)---

Test | RAM | num_stripes | sync_window | nr_reqs | sync_thresh |   Speed 
-----------------------------------------------------------------------------
   1a | 139 |     2432    |    1216     |   128   |     1215    | 115.0 MB/s 
   1b | 139 |     2432    |    1216     |   128   |      608    | 110.7 MB/s 
   2a | 146 |     2560    |    1280     |   128   |     1279    |  85.8 MB/s 
   2b | 146 |     2560    |    1280     |   128   |      640    | 109.9 MB/s 
   3a | 153 |     2688    |    1344     |   128   |     1343    | 108.2 MB/s 
   3b | 153 |     2688    |    1344     |   128   |      672    | 111.5 MB/s 
   4a | 161 |     2816    |    1408     |   128   |     1407    |  82.1 MB/s 
   4b | 161 |     2816    |    1408     |   128   |      704    | 112.2 MB/s 
   5a | 168 |     2944    |    1472     |   128   |     1471    | 114.9 MB/s 
   5b | 168 |     2944    |    1472     |   128   |      736    | 112.9 MB/s 
   6a | 175 |     3072    |    1536     |   128   |     1535    | 113.8 MB/s 
   6b | 175 |     3072    |    1536     |   128   |      768    | 112.2 MB/s 
   7a | 183 |     3200    |    1600     |   128   |     1599    | 121.2 MB/s 
   7b | 183 |     3200    |    1600     |   128   |      800    | 115.3 MB/s 
   8a | 190 |     3328    |    1664     |   128   |     1663    | 124.9 MB/s 
   8b | 190 |     3328    |    1664     |   128   |      832    | 117.2 MB/s 
   9a | 197 |     3456    |    1728     |   128   |     1727    | 123.2 MB/s 
   9b | 197 |     3456    |    1728     |   128   |      864    | 117.2 MB/s 
  10a | 205 |     3584    |    1792     |   128   |     1791    | 115.1 MB/s 
  10b | 205 |     3584    |    1792     |   128   |      896    | 114.3 MB/s 
  11a | 212 |     3712    |    1856     |   128   |     1855    | 116.6 MB/s 
  11b | 212 |     3712    |    1856     |   128   |      928    | 115.8 MB/s 
  12a | 219 |     3840    |    1920     |   128   |     1919    |  79.8 MB/s 
  12b | 219 |     3840    |    1920     |   128   |      960    | 116.8 MB/s 
  13a | 226 |     3968    |    1984     |   128   |     1983    | 122.9 MB/s 
  13b | 226 |     3968    |    1984     |   128   |      992    | 113.3 MB/s 
  14a | 234 |     4096    |    2048     |   128   |     2047    | 119.6 MB/s 
  14b | 234 |     4096    |    2048     |   128   |     1024    | 115.0 MB/s 
  15a | 241 |     4224    |    2112     |   128   |     2111    | 116.0 MB/s 
  15b | 241 |     4224    |    2112     |   128   |     1056    | 118.7 MB/s 
  16a | 248 |     4352    |    2176     |   128   |     2175    | 112.7 MB/s 
  16b | 248 |     4352    |    2176     |   128   |     1088    | 116.2 MB/s 
  17a | 256 |     4480    |    2240     |   128   |     2239    | 128.7 MB/s 
  17b | 256 |     4480    |    2240     |   128   |     1120    | 117.0 MB/s 
  18a | 263 |     4608    |    2304     |   128   |     2303    | 127.6 MB/s 
  18b | 263 |     4608    |    2304     |   128   |     1152    | 119.0 MB/s 

--- Targeting Fastest Result of md_sync_window 2240 bytes for Final Pass ---


--- FULLY AUTOMATIC nr_requests TEST 2 (4 Sample Points @ 60sec Duration)---

Test | num_stripes | sync_window | nr_requests | sync_thresh |   Speed 
---------------------------------------------------------------------------
  1   |     4480    |    2240     |     128     |     2239    | 118.6 MB/s 
  2   |     4480    |    2240     |     128     |     1120    | 119.5 MB/s 
  3   |     4480    |    2240     |       8     |     2239    | 123.6 MB/s 
  4   |     4480    |    2240     |       8     |     1120    | 124.4 MB/s 

Fastest vals were nr_reqs=8 and sync_thresh=50% of sync_window at 124.4 MB/s

This nr_requests value will be used for the next test.



--- FULLY AUTOMATIC TEST PASS 2 (Fine - 33 Sample Points @ 30sec Duration)---

Test | RAM | num_stripes | sync_window | nr_reqs | sync_thresh |   Speed 
-----------------------------------------------------------------------------
   1a | 241 |     4224    |    2112     |     8   |     2111    | 114.9 MB/s 
   1b | 241 |     4224    |    2112     |     8   |     1056    | 123.2 MB/s 
   2a | 242 |     4240    |    2120     |     8   |     2119    | 122.0 MB/s 
   2b | 242 |     4240    |    2120     |     8   |     1060    | 123.1 MB/s 
   3a | 243 |     4256    |    2128     |     8   |     2127    | 123.5 MB/s 
   3b | 243 |     4256    |    2128     |     8   |     1064    | 120.8 MB/s 
   4a | 244 |     4272    |    2136     |     8   |     2135    | 124.4 MB/s 
   4b | 244 |     4272    |    2136     |     8   |     1068    | 122.0 MB/s 
   5a | 245 |     4288    |    2144     |     8   |     2143    | 123.9 MB/s 
   5b | 245 |     4288    |    2144     |     8   |     1072    | 123.6 MB/s 
   6a | 246 |     4304    |    2152     |     8   |     2151    | 123.8 MB/s 
   6b | 246 |     4304    |    2152     |     8   |     1076    | 125.1 MB/s 
   7a | 247 |     4320    |    2160     |     8   |     2159    | 123.7 MB/s 
   7b | 247 |     4320    |    2160     |     8   |     1080    | 123.4 MB/s 
   8a | 248 |     4336    |    2168     |     8   |     2167    | 123.7 MB/s 
   8b | 248 |     4336    |    2168     |     8   |     1084    | 120.2 MB/s 
   9a | 248 |     4352    |    2176     |     8   |     2175    | 124.0 MB/s 
   9b | 248 |     4352    |    2176     |     8   |     1088    | 124.8 MB/s 
  10a | 249 |     4368    |    2184     |     8   |     2183    | 122.4 MB/s 
  10b | 249 |     4368    |    2184     |     8   |     1092    | 119.1 MB/s 
  11a | 250 |     4384    |    2192     |     8   |     2191    | 104.9 MB/s 
  11b | 250 |     4384    |    2192     |     8   |     1096    | 120.0 MB/s 
  12a | 251 |     4400    |    2200     |     8   |     2199    | 100.7 MB/s 
  12b | 251 |     4400    |    2200     |     8   |     1100    | 121.5 MB/s 
  13a | 252 |     4416    |    2208     |     8   |     2207    | 119.7 MB/s 
  13b | 252 |     4416    |    2208     |     8   |     1104    | 119.7 MB/s 
  14a | 253 |     4432    |    2216     |     8   |     2215    | 119.9 MB/s 
  14b | 253 |     4432    |    2216     |     8   |     1108    | 122.3 MB/s 
  15a | 254 |     4448    |    2224     |     8   |     2223    | 120.8 MB/s 
  15b | 254 |     4448    |    2224     |     8   |     1112    | 120.5 MB/s 
  16a | 255 |     4464    |    2232     |     8   |     2231    | 123.5 MB/s 
  16b | 255 |     4464    |    2232     |     8   |     1116    | 123.4 MB/s 
  17a | 256 |     4480    |    2240     |     8   |     2239    | 124.2 MB/s 
  17b | 256 |     4480    |    2240     |     8   |     1120    | 121.2 MB/s 
  18a | 257 |     4496    |    2248     |     8   |     2247    | 118.1 MB/s 
  18b | 257 |     4496    |    2248     |     8   |     1124    | 120.4 MB/s 
  19a | 258 |     4512    |    2256     |     8   |     2255    | 122.2 MB/s 
  19b | 258 |     4512    |    2256     |     8   |     1128    | 123.1 MB/s 
  20a | 259 |     4528    |    2264     |     8   |     2263    | 119.3 MB/s 
  20b | 259 |     4528    |    2264     |     8   |     1132    | 122.7 MB/s 
  21a | 259 |     4544    |    2272     |     8   |     2271    | 123.0 MB/s 
  21b | 259 |     4544    |    2272     |     8   |     1136    | 123.3 MB/s 
  22a | 260 |     4560    |    2280     |     8   |     2279    | 123.6 MB/s 
  22b | 260 |     4560    |    2280     |     8   |     1140    | 121.0 MB/s 
  23a | 261 |     4576    |    2288     |     8   |     2287    | 123.0 MB/s 
  23b | 261 |     4576    |    2288     |     8   |     1144    | 123.7 MB/s 
  24a | 262 |     4592    |    2296     |     8   |     2295    | 113.0 MB/s 
  24b | 262 |     4592    |    2296     |     8   |     1148    | 124.0 MB/s 
  25a | 263 |     4608    |    2304     |     8   |     2303    | 123.9 MB/s 
  25b | 263 |     4608    |    2304     |     8   |     1152    | 123.9 MB/s 
  26a | 264 |     4624    |    2312     |     8   |     2311    | 105.7 MB/s 
  26b | 264 |     4624    |    2312     |     8   |     1156    | 124.1 MB/s 
  27a | 265 |     4640    |    2320     |     8   |     2319    | 121.6 MB/s 
  27b | 265 |     4640    |    2320     |     8   |     1160    | 123.9 MB/s 
  28a | 266 |     4656    |    2328     |     8   |     2327    | 124.0 MB/s 
  28b | 266 |     4656    |    2328     |     8   |     1164    | 121.4 MB/s 
  29a | 267 |     4672    |    2336     |     8   |     2335    | 123.0 MB/s 
  29b | 267 |     4672    |    2336     |     8   |     1168    | 124.8 MB/s 
  30a | 268 |     4688    |    2344     |     8   |     2343    | 122.0 MB/s 
  30b | 268 |     4688    |    2344     |     8   |     1172    | 121.8 MB/s 
  31a | 269 |     4704    |    2352     |     8   |     2351    | 119.3 MB/s 
  31b | 269 |     4704    |    2352     |     8   |     1176    | 121.7 MB/s 
  32a | 270 |     4720    |    2360     |     8   |     2359    | 120.0 MB/s 
  32b | 270 |     4720    |    2360     |     8   |     1180    | 122.3 MB/s 
  33a | 270 |     4736    |    2368     |     8   |     2367    | 124.8 MB/s 
  33b | 270 |     4736    |    2368     |     8   |     1184    | 122.9 MB/s 

The results below do NOT include the Basline test of current values.

The Fastest Sync Speed tested was md_sync_window=2152 at 125.1 MB/s
     Tunable (md_num_stripes): 4304
     Tunable (md_sync_window): 2152
     Tunable (md_sync_thresh): 1076
     Tunable (nr_requests): 8
This will consume 246 MB with md_num_stripes=4304, 2x md_sync_window.
This is 10MB less than your current utilization of 256MB.

The Thriftiest Sync Speed tested was md_sync_window=2112 at 123.2 MB/s
     Tunable (md_num_stripes): 4224
     Tunable (md_sync_window): 2112
     Tunable (md_sync_thresh): 1056
     Tunable (nr_requests): 8
This will consume 241 MB with md_num_stripes=4224, 2x md_sync_window.
This is 15MB less than your current utilization of 256MB.

The Recommended Sync Speed is md_sync_window=2152 at 125.1 MB/s
     Tunable (md_num_stripes): 4304
     Tunable (md_sync_window): 2152
     Tunable (md_sync_thresh): 1076
     Tunable (nr_requests): 8
This will consume 246 MB with md_num_stripes=4304, 2x md_sync_window.
This is 10MB less than your current utilization of 256MB.

NOTE: Adding additional drives will increase memory consumption.

In unRAID, go to Settings > Disk Settings to set your chosen parameter values.

Completed: 1 Hrs 15 Min 44 Sec.


System Info:  Tower2
              unRAID version 6.2.0-rc4
                   md_num_stripes=4480
                   md_sync_window=2048
                   md_sync_thresh=2000
                   nr_requests=128 (Global Setting)
                   sbNumDisks=14
              CPU: Intel(R) Celeron(R) CPU G540 @ 2.50GHz
              RAM: 8GiB System Memory

Outputting lshw information for Drives and Controllers:

Bus info          Device     Class      Description
===================================================
pci@0000:02:00.0  scsi1      storage    SAS2008 PCI-Express Fusion-MPT SAS-2 [Falcon]
scsi@1:0.3.0      /dev/sdk   disk       3TB WDC WD30EZRX-00D
scsi@1:0.4.0      /dev/sdl   disk       3TB WDC WD30EZRX-00D
scsi@1:0.5.0      /dev/sdm   disk       4TB WDC WD40EZRZ-00W
scsi@1:0.6.0      /dev/sdn   disk       4TB WDC WD40EZRZ-00W
scsi@1:0.7.0      /dev/sdo   disk       3TB WDC WD30EZRX-00S
scsi@1:0.0.0      /dev/sdh   disk       3TB WDC WD30EZRX-00D
scsi@1:0.1.0      /dev/sdi   disk       4TB WDC WD40EZRZ-00W
scsi@1:0.2.0      /dev/sdj   disk       3TB WDC WD30EZRX-00D
pci@0000:00:1f.2             storage    6 Series/C200 Series Chipset Family SATA AHCI Controller
usb@2:1.1         scsi0      storage    
scsi@0:0.0.0      /dev/sda   disk       7862MB DT Micro
                  /dev/sda   disk       7862MB 
                  scsi2      storage    
scsi@2:0.0.0      /dev/sdb   disk       4TB WDC WD40EZRZ-00W
                  scsi3      storage    
scsi@3:0.0.0      /dev/sdc   disk       4TB WDC WD40EZRZ-00W
                  scsi4      storage    
scsi@4:0.0.0      /dev/sdd   disk       3TB WDC WD30EFRX-68A
                  scsi5      storage    
scsi@5:0.0.0      /dev/sde   disk       3TB WDC WD30EFRX-68A
                  scsi6      storage    
scsi@6:0.0.0      /dev/sdf   disk       3TB WDC WD30EFRX-68A
                  scsi7      storage    
scsi@7:0.0.0      /dev/sdg   disk       3TB WDC WD30EZRX-00D

Array Devices:
    Disk0 sdb is a Parity drive named parity
    Disk1 sde is a Data drive named disk1
    Disk2 sdd is a Data drive named disk2
    Disk3 sdf is a Data drive named disk3
    Disk4 sdo is a Data drive named disk4
    Disk5 sdn is a Data drive named disk5
    Disk6 sdm is a Data drive named disk6
    Disk7 sdl is a Data drive named disk7
    Disk8 sdg is a Data drive named disk8
    Disk9 sdk is a Data drive named disk9
    Disk10 sdj is a Data drive named disk10
    Disk11 sdh is a Data drive named disk11
    Disk12 sdi is a Data drive named disk12
    Disk29 sdc is a Parity drive named parity2

Outputting free low memory information...

              total        used        free      shared  buff/cache   available
Mem:        8152944      333440     7339040      409776      480464     7184620
Low:        8152944      813904     7339040
High:             0           0           0
Swap:             0           0           0


                      *** END OF REPORT ***

Link to post

Tower3 - This is a backup server, so it's single parity only and uses my oldest and slowest disks (except both 6TB), 14 disks, SASLP + 1430SA + Intel PCH:

 

 

       unRAID Tunables Tester v4.0b2 by Pauven (for unRAID v6.2)

        Tunables Report produced Thu Aug 25 14:15:02 BST 2016

                         Run on server: Tower3

                   Short Automatic Parity Sync Test


NOTE: Use the smallest set of values that produce good results. Larger values
      increase server memory use, and may cause stability issues with unRAID,
      especially if you have any add-ons or plug-ins installed.


Current Values:  md_num_stripes=4480, md_sync_window=2048, md_sync_thresh=2000
                 Global nr_requests=8
                    sdf nr_requests=8
                    sdg nr_requests=8
                    sdh nr_requests=8
                    sdi nr_requests=8
                    sdn nr_requests=8
                    sdm nr_requests=8
                    sdo nr_requests=8
                    sdl nr_requests=8
                    sdb nr_requests=8
                    sdc nr_requests=8
                    sdj nr_requests=8
                    sdk nr_requests=8
                    sde nr_requests=8
                    sdd nr_requests=8


--- INITIAL BASELINE TEST OF CURRENT VALUES (1 Sample Point @ 30sec Duration)---

Test | RAM | num_stripes | sync_window | nr_reqs | sync_thresh |   Speed 
-----------------------------------------------------------------------------
   1  | 273 |     4480    |    2048     |     8   |     2000    |  93.4 MB/s 


--- FULLY AUTOMATIC nr_requests TEST 1 (4 Sample Points @ 60sec Duration)---

Test | num_stripes | sync_window | nr_requests | sync_thresh |   Speed 
---------------------------------------------------------------------------
  1   |     1536    |     768     |     128     |      767    |  85.4 MB/s 
  2   |     1536    |     768     |     128     |      384    |  68.1 MB/s 
  3   |     1536    |     768     |       8     |      767    |  72.1 MB/s 
  4   |     1536    |     768     |       8     |      384    |  66.5 MB/s 

Fastest vals were nr_reqs=128 and sync_thresh=99% of sync_window at 85.4 MB/s

This nr_requests value will be used for the next test.


--- FULLY AUTOMATIC TEST PASS 1a (Rough - 13 Sample Points @ 30sec Duration)---

Test | RAM | num_stripes | sync_window | nr_reqs | sync_thresh |   Speed 
-----------------------------------------------------------------------------
   1a |  46 |      768    |     384     |   128   |      383    |  60.0 MB/s 
   1b |  46 |      768    |     384     |   128   |      192    |  43.3 MB/s 
   2a |  54 |      896    |     448     |   128   |      447    |  69.0 MB/s 
   2b |  54 |      896    |     448     |   128   |      224    |  50.8 MB/s 
   3a |  62 |     1024    |     512     |   128   |      511    |  75.0 MB/s 
   3b |  62 |     1024    |     512     |   128   |      256    |  56.5 MB/s 
   4a |  70 |     1152    |     576     |   128   |      575    |  64.2 MB/s 
   4b |  70 |     1152    |     576     |   128   |      288    |  61.6 MB/s 
   5a |  78 |     1280    |     640     |   128   |      639    |  75.6 MB/s 
   5b |  78 |     1280    |     640     |   128   |      320    |  70.4 MB/s 
   6a |  86 |     1408    |     704     |   128   |      703    |  86.2 MB/s 
   6b |  86 |     1408    |     704     |   128   |      352    |  71.1 MB/s 
   7a |  93 |     1536    |     768     |   128   |      767    |  86.6 MB/s 
   7b |  93 |     1536    |     768     |   128   |      384    |  73.7 MB/s 
   8a | 101 |     1664    |     832     |   128   |      831    |  89.4 MB/s 
   8b | 101 |     1664    |     832     |   128   |      416    |  74.8 MB/s 
   9a | 109 |     1792    |     896     |   128   |      895    |  88.1 MB/s 
   9b | 109 |     1792    |     896     |   128   |      448    |  80.7 MB/s 
  10a | 117 |     1920    |     960     |   128   |      959    |  88.7 MB/s 
  10b | 117 |     1920    |     960     |   128   |      480    |  78.9 MB/s 
  11a | 125 |     2048    |    1024     |   128   |     1023    |  90.6 MB/s 
  11b | 125 |     2048    |    1024     |   128   |      512    |  79.9 MB/s 
  12a | 132 |     2176    |    1088     |   128   |     1087    |  88.7 MB/s 
  12b | 132 |     2176    |    1088     |   128   |      544    |  80.5 MB/s 
  13a | 140 |     2304    |    1152     |   128   |     1151    |  88.5 MB/s 
  13b | 140 |     2304    |    1152     |   128   |      576    |  82.2 MB/s 

--- Targeting Fastest Result of md_sync_window 1024 bytes for Final Pass ---


--- FULLY AUTOMATIC nr_requests TEST 2 (4 Sample Points @ 60sec Duration)---

Test | num_stripes | sync_window | nr_requests | sync_thresh |   Speed 
---------------------------------------------------------------------------
  1   |     2048    |    1024     |     128     |     1023    |  78.9 MB/s 
  2   |     2048    |    1024     |     128     |      512    |  81.1 MB/s 
  3   |     2048    |    1024     |       8     |     1023    |  84.7 MB/s 
  4   |     2048    |    1024     |       8     |      512    |  81.4 MB/s 

Fastest vals were nr_reqs=8 and sync_thresh=99% of sync_window at 84.7 MB/s

This nr_requests value will be used for the next test.



--- FULLY AUTOMATIC TEST PASS 2 (Fine - 33 Sample Points @ 30sec Duration)---

Test | RAM | num_stripes | sync_window | nr_reqs | sync_thresh |   Speed 
-----------------------------------------------------------------------------
   1a | 109 |     1792    |     896     |     8   |      895    |  83.1 MB/s 
   1b | 109 |     1792    |     896     |     8   |      448    |  80.2 MB/s 
   2a | 110 |     1808    |     904     |     8   |      903    |  83.7 MB/s 
   2b | 110 |     1808    |     904     |     8   |      452    |  81.1 MB/s 
   3a | 111 |     1824    |     912     |     8   |      911    |  59.2 MB/s 
   3b | 111 |     1824    |     912     |     8   |      456    |  77.6 MB/s 
   4a | 112 |     1840    |     920     |     8   |      919    |  82.3 MB/s 
   4b | 112 |     1840    |     920     |     8   |      460    |  78.3 MB/s 
   5a | 113 |     1856    |     928     |     8   |      927    |  75.4 MB/s 
   5b | 113 |     1856    |     928     |     8   |      464    |  77.3 MB/s 
   6a | 114 |     1872    |     936     |     8   |      935    |  81.5 MB/s 
   6b | 114 |     1872    |     936     |     8   |      468    |  77.6 MB/s 
   7a | 115 |     1888    |     944     |     8   |      943    |  81.8 MB/s 
   7b | 115 |     1888    |     944     |     8   |      472    |  78.8 MB/s 
   8a | 116 |     1904    |     952     |     8   |      951    |  84.4 MB/s 
   8b | 116 |     1904    |     952     |     8   |      476    |  79.5 MB/s 
   9a | 117 |     1920    |     960     |     8   |      959    |  83.6 MB/s 
   9b | 117 |     1920    |     960     |     8   |      480    |  78.9 MB/s 
  10a | 118 |     1936    |     968     |     8   |      967    |  82.6 MB/s 
  10b | 118 |     1936    |     968     |     8   |      484    |  79.8 MB/s 
  11a | 119 |     1952    |     976     |     8   |      975    |  81.6 MB/s 
  11b | 119 |     1952    |     976     |     8   |      488    |  79.6 MB/s 
  12a | 120 |     1968    |     984     |     8   |      983    |  82.8 MB/s 
  12b | 120 |     1968    |     984     |     8   |      492    |  78.6 MB/s 
  13a | 121 |     1984    |     992     |     8   |      991    |  82.0 MB/s 
  13b | 121 |     1984    |     992     |     8   |      496    |  65.1 MB/s 
  14a | 122 |     2000    |    1000     |     8   |      999    |  82.1 MB/s 
  14b | 122 |     2000    |    1000     |     8   |      500    |  74.5 MB/s 
  15a | 123 |     2016    |    1008     |     8   |     1007    |  77.1 MB/s 
  15b | 123 |     2016    |    1008     |     8   |      504    |  81.2 MB/s 
  16a | 124 |     2032    |    1016     |     8   |     1015    |  77.9 MB/s 
  16b | 124 |     2032    |    1016     |     8   |      508    |  77.0 MB/s 
  17a | 125 |     2048    |    1024     |     8   |     1023    |  79.4 MB/s 
  17b | 125 |     2048    |    1024     |     8   |      512    |  76.5 MB/s 
  18a | 126 |     2064    |    1032     |     8   |     1031    |  81.4 MB/s 
  18b | 126 |     2064    |    1032     |     8   |      516    |  79.2 MB/s 
  19a | 127 |     2080    |    1040     |     8   |     1039    |  69.4 MB/s 
  19b | 127 |     2080    |    1040     |     8   |      520    |  77.3 MB/s 
  20a | 128 |     2096    |    1048     |     8   |     1047    |  80.2 MB/s 
  20b | 128 |     2096    |    1048     |     8   |      524    |  78.7 MB/s 
  21a | 129 |     2112    |    1056     |     8   |     1055    |  84.1 MB/s 
  21b | 129 |     2112    |    1056     |     8   |      528    |  80.5 MB/s 
  22a | 130 |     2128    |    1064     |     8   |     1063    |  82.8 MB/s 
  22b | 130 |     2128    |    1064     |     8   |      532    |  80.8 MB/s 
  23a | 131 |     2144    |    1072     |     8   |     1071    |  83.2 MB/s 
  23b | 131 |     2144    |    1072     |     8   |      536    |  83.7 MB/s 
  24a | 132 |     2160    |    1080     |     8   |     1079    |  83.3 MB/s 
  24b | 132 |     2160    |    1080     |     8   |      540    |  65.6 MB/s 
  25a | 132 |     2176    |    1088     |     8   |     1087    |  84.4 MB/s 
  25b | 132 |     2176    |    1088     |     8   |      544    |  80.0 MB/s 
  26a | 133 |     2192    |    1096     |     8   |     1095    |  82.0 MB/s 
  26b | 133 |     2192    |    1096     |     8   |      548    |  80.7 MB/s 
  27a | 134 |     2208    |    1104     |     8   |     1103    |  82.2 MB/s 
  27b | 134 |     2208    |    1104     |     8   |      552    |  74.8 MB/s 
  28a | 135 |     2224    |    1112     |     8   |     1111    |  83.6 MB/s 
  28b | 135 |     2224    |    1112     |     8   |      556    |  76.3 MB/s 
  29a | 136 |     2240    |    1120     |     8   |     1119    |  79.6 MB/s 
  29b | 136 |     2240    |    1120     |     8   |      560    |  68.8 MB/s 
  30a | 137 |     2256    |    1128     |     8   |     1127    |  83.7 MB/s 
  30b | 137 |     2256    |    1128     |     8   |      564    |  80.4 MB/s 
  31a | 138 |     2272    |    1136     |     8   |     1135    |  82.9 MB/s 
  31b | 138 |     2272    |    1136     |     8   |      568    |  80.6 MB/s 
  32a | 139 |     2288    |    1144     |     8   |     1143    |  81.1 MB/s 
  32b | 139 |     2288    |    1144     |     8   |      572    |  79.3 MB/s 
  33a | 140 |     2304    |    1152     |     8   |     1151    |  84.9 MB/s 
  33b | 140 |     2304    |    1152     |     8   |      576    |  79.5 MB/s 

The results below do NOT include the Basline test of current values.

The Fastest Sync Speed tested was md_sync_window=832 at 89.4 MB/s
     Tunable (md_num_stripes): 1664
     Tunable (md_sync_window): 832
     Tunable (md_sync_thresh): 831
     Tunable (nr_requests): 8
This will consume 101 MB with md_num_stripes=1664, 2x md_sync_window.
This is 172MB less than your current utilization of 273MB.

The Thriftiest Sync Speed tested was md_sync_window=704 at 86.2 MB/s
     Tunable (md_num_stripes): 1408
     Tunable (md_sync_window): 704
     Tunable (md_sync_thresh): 703
     Tunable (nr_requests): 8
This will consume 86 MB with md_num_stripes=1408, 2x md_sync_window.
This is 187MB less than your current utilization of 273MB.

The Recommended Sync Speed is md_sync_window=832 at 89.4 MB/s
     Tunable (md_num_stripes): 1664
     Tunable (md_sync_window): 832
     Tunable (md_sync_thresh): 831
     Tunable (nr_requests): 8
This will consume 101 MB with md_num_stripes=1664, 2x md_sync_window.
This is 172MB less than your current utilization of 273MB.

NOTE: Adding additional drives will increase memory consumption.

In unRAID, go to Settings > Disk Settings to set your chosen parameter values.

Completed: 1 Hrs 1 Min 34 Sec.


System Info:  Tower3
              unRAID version 6.2.0-rc4
                   md_num_stripes=4480
                   md_sync_window=2048
                   md_sync_thresh=2000
                   nr_requests=8 (Global Setting)
                   sbNumDisks=15
              CPU: Intel(R) Celeron(R) CPU G550 @ 2.60GHz
              RAM: 8GiB System Memory

Outputting lshw information for Drives and Controllers:

Bus info          Device     Class      Description
===================================================
pci@0000:01:00.0             storage    Serial ATA II RAID 1430SA
pci@0000:02:00.0  scsi2      storage    MV64460/64461/64462 System Controller, Revision B
scsi@2:0.0.0      /dev/sdl   disk       2TB SAMSUNG HD203WI
scsi@2:0.1.0      /dev/sdm   disk       2TB SAMSUNG HD203WI
scsi@2:0.2.0      /dev/sdn   disk       2TB SAMSUNG HD203WI
scsi@2:0.3.0      /dev/sdo   disk       2TB SAMSUNG HD203WI
pci@0000:00:1f.2             storage    6 Series/C200 Series Chipset Family SATA AHCI Controller
usb@2:1.1         scsi0      storage    
scsi@0:0.0.0      /dev/sda   disk       7862MB DT Micro
                  /dev/sda   disk       7862MB 
                  scsi1      storage    
scsi@1:0.0.0      /dev/sdb   disk       2TB SAMSUNG HD203WI
                  scsi11     storage    
scsi@11:0.0.0     /dev/sdk   disk       3TB TOSHIBA DT01ABA3
                  scsi3      storage    
scsi@3:0.0.0      /dev/sdc   disk       2TB SAMSUNG HD203WI
                  scsi4      storage    
scsi@4:0.0.0      /dev/sdd   disk       3TB WDC WD30EZRX-00S
                  scsi5      storage    
scsi@5:0.0.0      /dev/sde   disk       6001GB WDC WD60EZRX-00M
                  scsi6      storage    
scsi@6:0.0.0      /dev/sdf   disk       6001GB TOSHIBA HDWE160
                  scsi7      storage    
scsi@7:0.0.0      /dev/sdg   disk       3TB WDC WD30EZRX-00M
                  scsi8      storage    
scsi@8:0.0.0      /dev/sdh   disk       2TB WDC WD20EARX-00P
                  scsi9      storage    
scsi@9:0.0.0      /dev/sdi   disk       2TB WDC WD20EZRX-00D
                  scsi10     storage    
scsi@10:0.0.0     /dev/sdj   disk       3TB WDC WD30EZRX-22D

Array Devices:
    Disk0 sdf is a Parity drive named parity
    Disk1 sdg is a Data drive named disk1
    Disk2 sdh is a Data drive named disk2
    Disk3 sdi is a Data drive named disk3
    Disk4 sdn is a Data drive named disk4
    Disk5 sdm is a Data drive named disk5
    Disk6 sdo is a Data drive named disk6
    Disk7 sdl is a Data drive named disk7
    Disk8 sdb is a Data drive named disk8
    Disk9 sdc is a Data drive named disk9
    Disk10 sdj is a Data drive named disk10
    Disk11 sdk is a Data drive named disk11
    Disk12 sde is a Data drive named disk12
    Disk13 sdd is a Data drive named disk13

Outputting free low memory information...

              total        used        free      shared  buff/cache   available
Mem:        8152960      340576     7306528      410904      505856     7163528
Low:        8152960      846432     7306528
High:             0           0           0
Swap:             0           0           0


                      *** END OF REPORT ***

Link to post

And finally short test for the last one, next I’ll do the normal tests but only during the weekend, it will take some time because if I have all servers on at the same time my UPSes run very close to max capacity with very short runtime in case of a power failure.

 

Tower4 - 8 Disks, 1430SA + Intel PCH

 

 

       unRAID Tunables Tester v4.0b2 by Pauven (for unRAID v6.2)

        Tunables Report produced Thu Aug 25 14:04:57 BST 2016

                         Run on server: Tower4

                   Short Automatic Parity Sync Test


NOTE: Use the smallest set of values that produce good results. Larger values
      increase server memory use, and may cause stability issues with unRAID,
      especially if you have any add-ons or plug-ins installed.


Current Values:  md_num_stripes=4096, md_sync_window=2048, md_sync_thresh=2000
                 Global nr_requests=8
                    sdd nr_requests=
                    sdf nr_requests=
                    sdg nr_requests=
                    sdh nr_requests=
                    sdi nr_requests=
                    sdb nr_requests=
                    sdc nr_requests=
                    sde nr_requests=


--- INITIAL BASELINE TEST OF CURRENT VALUES (1 Sample Point @ 30sec Duration)---

Test | RAM | num_stripes | sync_window | nr_reqs | sync_thresh |   Speed 
-----------------------------------------------------------------------------
   1  | 138 |     4096    |    2048     |     8   |     2000    | 145.5 MB/s 


--- FULLY AUTOMATIC nr_requests TEST 1 (4 Sample Points @ 60sec Duration)---

Test | num_stripes | sync_window | nr_requests | sync_thresh |   Speed 
---------------------------------------------------------------------------
  1   |     1536    |     768     |     128     |      767    | 106.0 MB/s 
  2   |     1536    |     768     |     128     |      384    |  85.1 MB/s 
  3   |     1536    |     768     |       8     |      767    | 100.3 MB/s 
  4   |     1536    |     768     |       8     |      384    |  74.9 MB/s 

Fastest vals were nr_reqs=128 and sync_thresh=99% of sync_window at 106.0 MB/s

This nr_requests value will be used for the next test.


--- FULLY AUTOMATIC TEST PASS 1a (Rough - 13 Sample Points @ 30sec Duration)---

Test | RAM | num_stripes | sync_window | nr_reqs | sync_thresh |   Speed 
-----------------------------------------------------------------------------
   1a |  25 |      768    |     384     |   128   |      383    |  68.2 MB/s 
   1b |  25 |      768    |     384     |   128   |      192    |  50.7 MB/s 
   2a |  30 |      896    |     448     |   128   |      447    |  82.0 MB/s 
   2b |  30 |      896    |     448     |   128   |      224    |  55.0 MB/s 
   3a |  34 |     1024    |     512     |   128   |      511    |  81.4 MB/s 
   3b |  34 |     1024    |     512     |   128   |      256    |  62.3 MB/s 
   4a |  38 |     1152    |     576     |   128   |      575    |  92.7 MB/s 
   4b |  38 |     1152    |     576     |   128   |      288    |  71.1 MB/s 
   5a |  43 |     1280    |     640     |   128   |      639    |  97.6 MB/s 
   5b |  43 |     1280    |     640     |   128   |      320    |  83.7 MB/s 
   6a |  47 |     1408    |     704     |   128   |      703    | 101.1 MB/s 
   6b |  47 |     1408    |     704     |   128   |      352    |  84.2 MB/s 
   7a |  51 |     1536    |     768     |   128   |      767    | 100.4 MB/s 
   7b |  51 |     1536    |     768     |   128   |      384    |  88.7 MB/s 
   8a |  56 |     1664    |     832     |   128   |      831    | 102.7 MB/s 
   8b |  56 |     1664    |     832     |   128   |      416    |  88.7 MB/s 
   9a |  60 |     1792    |     896     |   128   |      895    | 114.5 MB/s 
   9b |  60 |     1792    |     896     |   128   |      448    |  88.9 MB/s 
  10a |  64 |     1920    |     960     |   128   |      959    | 110.5 MB/s 
  10b |  64 |     1920    |     960     |   128   |      480    |  96.6 MB/s 
  11a |  69 |     2048    |    1024     |   128   |     1023    | 116.4 MB/s 
  11b |  69 |     2048    |    1024     |   128   |      512    |  95.9 MB/s 
  12a |  73 |     2176    |    1088     |   128   |     1087    | 117.6 MB/s 
  12b |  73 |     2176    |    1088     |   128   |      544    | 102.9 MB/s 
  13a |  77 |     2304    |    1152     |   128   |     1151    | 112.9 MB/s 
  13b |  77 |     2304    |    1152     |   128   |      576    | 105.1 MB/s 

--- Targeting Fastest Result of md_sync_window 1088 bytes for Final Pass ---


--- FULLY AUTOMATIC nr_requests TEST 2 (4 Sample Points @ 60sec Duration)---

Test | num_stripes | sync_window | nr_requests | sync_thresh |   Speed 
---------------------------------------------------------------------------
  1   |     2176    |    1088     |     128     |     1087    | 116.5 MB/s 
  2   |     2176    |    1088     |     128     |      544    | 103.7 MB/s 
  3   |     2176    |    1088     |       8     |     1087    | 122.6 MB/s 
  4   |     2176    |    1088     |       8     |      544    | 107.8 MB/s 

Fastest vals were nr_reqs=8 and sync_thresh=99% of sync_window at 122.6 MB/s

This nr_requests value will be used for the next test.



--- FULLY AUTOMATIC TEST PASS 2 (Fine - 33 Sample Points @ 30sec Duration)---

Test | RAM | num_stripes | sync_window | nr_reqs | sync_thresh |   Speed 
-----------------------------------------------------------------------------
   1a |  64 |     1920    |     960     |     8   |      959    | 108.9 MB/s 
   1b |  64 |     1920    |     960     |     8   |      480    | 101.8 MB/s 
   2a |  65 |     1936    |     968     |     8   |      967    | 112.7 MB/s 
   2b |  65 |     1936    |     968     |     8   |      484    | 104.0 MB/s 
   3a |  65 |     1952    |     976     |     8   |      975    | 113.2 MB/s 
   3b |  65 |     1952    |     976     |     8   |      488    | 100.9 MB/s 
   4a |  66 |     1968    |     984     |     8   |      983    | 118.1 MB/s 
   4b |  66 |     1968    |     984     |     8   |      492    | 102.3 MB/s 
   5a |  66 |     1984    |     992     |     8   |      991    | 108.9 MB/s 
   5b |  66 |     1984    |     992     |     8   |      496    |  97.6 MB/s 
   6a |  67 |     2000    |    1000     |     8   |      999    | 111.1 MB/s 
   6b |  67 |     2000    |    1000     |     8   |      500    | 101.7 MB/s 
   7a |  68 |     2016    |    1008     |     8   |     1007    | 117.5 MB/s 
   7b |  68 |     2016    |    1008     |     8   |      504    | 107.1 MB/s 
   8a |  68 |     2032    |    1016     |     8   |     1015    | 120.0 MB/s 
   8b |  68 |     2032    |    1016     |     8   |      508    | 101.3 MB/s 
   9a |  69 |     2048    |    1024     |     8   |     1023    | 115.3 MB/s 
   9b |  69 |     2048    |    1024     |     8   |      512    |  98.8 MB/s 
  10a |  69 |     2064    |    1032     |     8   |     1031    | 120.1 MB/s 
  10b |  69 |     2064    |    1032     |     8   |      516    | 101.3 MB/s 
  11a |  70 |     2080    |    1040     |     8   |     1039    | 114.7 MB/s 
  11b |  70 |     2080    |    1040     |     8   |      520    | 104.2 MB/s 
  12a |  70 |     2096    |    1048     |     8   |     1047    | 121.2 MB/s 
  12b |  70 |     2096    |    1048     |     8   |      524    | 102.8 MB/s 
  13a |  71 |     2112    |    1056     |     8   |     1055    | 116.4 MB/s 
  13b |  71 |     2112    |    1056     |     8   |      528    | 101.1 MB/s 
  14a |  71 |     2128    |    1064     |     8   |     1063    | 121.6 MB/s 
  14b |  71 |     2128    |    1064     |     8   |      532    | 108.8 MB/s 
  15a |  72 |     2144    |    1072     |     8   |     1071    | 120.3 MB/s 
  15b |  72 |     2144    |    1072     |     8   |      536    |  99.2 MB/s 
  16a |  72 |     2160    |    1080     |     8   |     1079    | 117.8 MB/s 
  16b |  72 |     2160    |    1080     |     8   |      540    |  99.7 MB/s 
  17a |  73 |     2176    |    1088     |     8   |     1087    | 120.8 MB/s 
  17b |  73 |     2176    |    1088     |     8   |      544    | 102.3 MB/s 
  18a |  74 |     2192    |    1096     |     8   |     1095    | 121.1 MB/s 
  18b |  74 |     2192    |    1096     |     8   |      548    | 103.2 MB/s 
  19a |  74 |     2208    |    1104     |     8   |     1103    | 118.9 MB/s 
  19b |  74 |     2208    |    1104     |     8   |      552    | 103.5 MB/s 
  20a |  75 |     2224    |    1112     |     8   |     1111    | 119.4 MB/s 
  20b |  75 |     2224    |    1112     |     8   |      556    | 102.8 MB/s 
  21a |  75 |     2240    |    1120     |     8   |     1119    | 121.7 MB/s 
  21b |  75 |     2240    |    1120     |     8   |      560    | 103.6 MB/s 
  22a |  76 |     2256    |    1128     |     8   |     1127    | 117.2 MB/s 
  22b |  76 |     2256    |    1128     |     8   |      564    | 110.6 MB/s 
  23a |  76 |     2272    |    1136     |     8   |     1135    | 113.1 MB/s 
  23b |  76 |     2272    |    1136     |     8   |      568    | 105.2 MB/s 
  24a |  77 |     2288    |    1144     |     8   |     1143    | 118.5 MB/s 
  24b |  77 |     2288    |    1144     |     8   |      572    | 106.3 MB/s 
  25a |  77 |     2304    |    1152     |     8   |     1151    | 118.7 MB/s 
  25b |  77 |     2304    |    1152     |     8   |      576    | 105.9 MB/s 
  26a |  78 |     2320    |    1160     |     8   |     1159    | 113.4 MB/s 
  26b |  78 |     2320    |    1160     |     8   |      580    | 104.5 MB/s 
  27a |  78 |     2336    |    1168     |     8   |     1167    | 111.8 MB/s 
  27b |  78 |     2336    |    1168     |     8   |      584    | 102.9 MB/s 
  28a |  79 |     2352    |    1176     |     8   |     1175    | 120.3 MB/s 
  28b |  79 |     2352    |    1176     |     8   |      588    | 100.4 MB/s 
  29a |  79 |     2368    |    1184     |     8   |     1183    | 123.0 MB/s 
  29b |  79 |     2368    |    1184     |     8   |      592    | 103.1 MB/s 
  30a |  80 |     2384    |    1192     |     8   |     1191    | 120.9 MB/s 
  30b |  80 |     2384    |    1192     |     8   |      596    | 108.0 MB/s 
  31a |  81 |     2400    |    1200     |     8   |     1199    | 123.6 MB/s 
  31b |  81 |     2400    |    1200     |     8   |      600    | 110.5 MB/s 
  32a |  81 |     2416    |    1208     |     8   |     1207    | 127.0 MB/s 
  32b |  81 |     2416    |    1208     |     8   |      604    | 104.1 MB/s 
  33a |  82 |     2432    |    1216     |     8   |     1215    | 124.1 MB/s 
  33b |  82 |     2432    |    1216     |     8   |      608    | 108.3 MB/s 

The results below do NOT include the Basline test of current values.

The Fastest Sync Speed tested was md_sync_window=1208 at 127.0 MB/s
     Tunable (md_num_stripes): 2416
     Tunable (md_sync_window): 1208
     Tunable (md_sync_thresh): 1207
     Tunable (nr_requests): 8
This will consume 81 MB with md_num_stripes=2416, 2x md_sync_window.
This is 57MB less than your current utilization of 138MB.

The Thriftiest Sync Speed tested was md_sync_window=1048 at 121.2 MB/s
     Tunable (md_num_stripes): 2096
     Tunable (md_sync_window): 1048
     Tunable (md_sync_thresh): 1047
     Tunable (nr_requests): 8
This will consume 70 MB with md_num_stripes=2096, 2x md_sync_window.
This is 68MB less than your current utilization of 138MB.

The Recommended Sync Speed is md_sync_window=1208 at 127.0 MB/s
     Tunable (md_num_stripes): 2416
     Tunable (md_sync_window): 1208
     Tunable (md_sync_thresh): 1207
     Tunable (nr_requests): 8
This will consume 81 MB with md_num_stripes=2416, 2x md_sync_window.
This is 57MB less than your current utilization of 138MB.

NOTE: Adding additional drives will increase memory consumption.

In unRAID, go to Settings > Disk Settings to set your chosen parameter values.

Completed: 1 Hrs 1 Min 20 Sec.


System Info:  Tower4
              unRAID version 6.2.0-rc4
                   md_num_stripes=4096
                   md_sync_window=2048
                   md_sync_thresh=2000
                   nr_requests=8 (Global Setting)
                   sbNumDisks=8
              CPU: Intel(R) Celeron(R) CPU G550 @ 2.60GHz
              RAM: 8GiB System Memory

Outputting lshw information for Drives and Controllers:

Bus info          Device     Class      Description
===================================================
pci@0000:01:00.0             storage    Serial ATA II RAID 1430SA
pci@0000:00:1f.2             storage    6 Series/C200 Series Chipset Family SATA AHCI Controller
usb@2:1.1         scsi0      storage    
scsi@0:0.0.0      /dev/sda   disk       7862MB DT Micro
                  /dev/sda   disk       7862MB 
                  scsi3      storage    
scsi@3:0.0.0      /dev/sdb   disk       4TB WDC WD40EZRX-00S
                  scsi4      storage    
scsi@4:0.0.0      /dev/sdc   disk       4TB WDC WD40EZRX-00S
                  scsi5      storage    
scsi@5:0.0.0      /dev/sdd   disk       8001GB ST8000AS0002-1NA
                  scsi6      storage    
scsi@6:0.0.0      /dev/sde   disk       8001GB ST8000AS0002-1NA
                  scsi7      storage    
scsi@7:0.0.0      /dev/sdf   disk       8001GB ST8000AS0002-1NA
                  scsi8      storage    
scsi@8:0.0.0      /dev/sdg   disk       8001GB ST8000AS0002-1NA
                  scsi9      storage    
scsi@9:0.0.0      /dev/sdh   disk       8001GB ST8000AS0002-1NA
                  scsi10     storage    
scsi@10:0.0.0     /dev/sdi   disk       4TB WDC WD40EZRX-00S

Array Devices:
    Disk0 sdd is a Parity drive named parity
    Disk1 sdf is a Data drive named disk1
    Disk2 sdg is a Data drive named disk2
    Disk3 sdh is a Data drive named disk3
    Disk4 sdi is a Data drive named disk4
    Disk5 sdb is a Data drive named disk5
    Disk6 sdc is a Data drive named disk6
    Disk29 sde is a Parity drive named parity2

Outputting free low memory information...

              total        used        free      shared  buff/cache   available
Mem:        8152960      196872     7437136      406136      518952     7305876
Low:        8152960      715824     7437136
High:             0           0           0
Swap:             0           0           0


                      *** END OF REPORT ***

 

 

Link to post

Tower1 - same exact hardware as tower6, except all 22 disks are 2TB, controllers: SAS2LP + SASLP + 1430SA + Intel PCH:

 

 

 

       unRAID Tunables Tester v4.0b2 by Pauven (for unRAID v6.2)

        Tunables Report produced Thu Aug 25 13:58:25 BST 2016

                         Run on server: Tower

                   Short Automatic Parity Sync Test


NOTE: Use the smallest set of values that produce good results. Larger values
      increase server memory use, and may cause stability issues with unRAID,
      especially if you have any add-ons or plug-ins installed.


Current Values:  md_num_stripes=4224, md_sync_window=2048, md_sync_thresh=2000
                 Global nr_requests=8
                    sdf nr_requests=8
                    sdg nr_requests=8
                    sdh nr_requests=8
                    sdi nr_requests=8
                    sdj nr_requests=8
                    sdk nr_requests=8
                    sdr nr_requests=8
                    sds nr_requests=8
                    sdu nr_requests=8
                    sdt nr_requests=8
                    sdw nr_requests=8
                    sdv nr_requests=8
                    sdc nr_requests=8
                    sdq nr_requests=8
                    sdb nr_requests=8
                    sdp nr_requests=8
                    sdo nr_requests=8
                    sdm nr_requests=8
                    sdn nr_requests=8
                    sde nr_requests=8
                    sdd nr_requests=8
                    sdl nr_requests=8


--- INITIAL BASELINE TEST OF CURRENT VALUES (1 Sample Point @ 30sec Duration)---

Test | RAM | num_stripes | sync_window | nr_reqs | sync_thresh |   Speed 
-----------------------------------------------------------------------------
   1  | 373 |     4224    |    2048     |     8   |     2000    |  86.5 MB/s 


--- FULLY AUTOMATIC nr_requests TEST 1 (4 Sample Points @ 60sec Duration)---

Test | num_stripes | sync_window | nr_requests | sync_thresh |   Speed 
---------------------------------------------------------------------------
  1   |     1536    |     768     |     128     |      767    |  46.8 MB/s 
  2   |     1536    |     768     |     128     |      384    |  63.6 MB/s 
  3   |     1536    |     768     |       8     |      767    |  69.5 MB/s 
  4   |     1536    |     768     |       8     |      384    |  68.7 MB/s 

Fastest vals were nr_reqs=8 and sync_thresh=99% of sync_window at 69.5 MB/s

This nr_requests value will be used for the next test.


--- FULLY AUTOMATIC TEST PASS 1a (Rough - 13 Sample Points @ 30sec Duration)---

Test | RAM | num_stripes | sync_window | nr_reqs | sync_thresh |   Speed 
-----------------------------------------------------------------------------
   1a |  67 |      768    |     384     |     8   |      383    |  44.2 MB/s 
   1b |  67 |      768    |     384     |     8   |      192    |  35.4 MB/s 
   2a |  79 |      896    |     448     |     8   |      447    |  49.4 MB/s 
   2b |  79 |      896    |     448     |     8   |      224    |  26.1 MB/s 
   3a |  90 |     1024    |     512     |     8   |      511    |  56.3 MB/s 
   3b |  90 |     1024    |     512     |     8   |      256    |  37.0 MB/s 
   4a | 101 |     1152    |     576     |     8   |      575    |  61.3 MB/s 
   4b | 101 |     1152    |     576     |     8   |      288    |  55.3 MB/s 
   5a | 113 |     1280    |     640     |     8   |      639    |  63.9 MB/s 
   5b | 113 |     1280    |     640     |     8   |      320    |  59.9 MB/s 
   6a | 124 |     1408    |     704     |     8   |      703    |  60.3 MB/s 
   6b | 124 |     1408    |     704     |     8   |      352    |  68.9 MB/s 
   7a | 135 |     1536    |     768     |     8   |      767    |  61.5 MB/s 
   7b | 135 |     1536    |     768     |     8   |      384    |  60.0 MB/s 
   8a | 147 |     1664    |     832     |     8   |      831    |  62.9 MB/s 
   8b | 147 |     1664    |     832     |     8   |      416    |  42.6 MB/s 
   9a | 158 |     1792    |     896     |     8   |      895    |  61.3 MB/s 
   9b | 158 |     1792    |     896     |     8   |      448    |  62.3 MB/s 
  10a | 169 |     1920    |     960     |     8   |      959    |  63.9 MB/s 
  10b | 169 |     1920    |     960     |     8   |      480    |  64.5 MB/s 
  11a | 181 |     2048    |    1024     |     8   |     1023    |  77.9 MB/s 
  11b | 181 |     2048    |    1024     |     8   |      512    |  62.7 MB/s 
  12a | 192 |     2176    |    1088     |     8   |     1087    |  72.7 MB/s 
  12b | 192 |     2176    |    1088     |     8   |      544    |  66.4 MB/s 
  13a | 203 |     2304    |    1152     |     8   |     1151    |  68.0 MB/s 
  13b | 203 |     2304    |    1152     |     8   |      576    |  81.9 MB/s 

--- FULLY AUTOMATIC TEST PASS 1c (Rough - 18 Sample Points @ 30sec Duration)---

Test | RAM | num_stripes | sync_window | nr_reqs | sync_thresh |   Speed 
-----------------------------------------------------------------------------
   1a | 215 |     2432    |    1216     |     8   |     1215    |  56.7 MB/s 
   1b | 215 |     2432    |    1216     |     8   |      608    |  74.9 MB/s 
   2a | 226 |     2560    |    1280     |     8   |     1279    |  81.2 MB/s 
   2b | 226 |     2560    |    1280     |     8   |      640    |  74.6 MB/s 
   3a | 237 |     2688    |    1344     |     8   |     1343    |  81.4 MB/s 
   3b | 237 |     2688    |    1344     |     8   |      672    |  76.0 MB/s 
   4a | 249 |     2816    |    1408     |     8   |     1407    |  81.6 MB/s 
   4b | 249 |     2816    |    1408     |     8   |      704    |  77.9 MB/s 
   5a | 260 |     2944    |    1472     |     8   |     1471    |  80.7 MB/s 
   5b | 260 |     2944    |    1472     |     8   |      736    |  79.7 MB/s 
   6a | 271 |     3072    |    1536     |     8   |     1535    |  83.3 MB/s 
   6b | 271 |     3072    |    1536     |     8   |      768    |  80.7 MB/s 
   7a | 283 |     3200    |    1600     |     8   |     1599    |  67.8 MB/s 
   7b | 283 |     3200    |    1600     |     8   |      800    |  85.4 MB/s 
   8a | 294 |     3328    |    1664     |     8   |     1663    |  83.2 MB/s 
   8b | 294 |     3328    |    1664     |     8   |      832    |  82.7 MB/s 
   9a | 305 |     3456    |    1728     |     8   |     1727    |  88.2 MB/s 
   9b | 305 |     3456    |    1728     |     8   |      864    |  86.7 MB/s 
  10a | 317 |     3584    |    1792     |     8   |     1791    |  89.7 MB/s 
  10b | 317 |     3584    |    1792     |     8   |      896    |  88.8 MB/s 
  11a | 328 |     3712    |    1856     |     8   |     1855    |  91.4 MB/s 
  11b | 328 |     3712    |    1856     |     8   |      928    |  88.4 MB/s 
  12a | 339 |     3840    |    1920     |     8   |     1919    |  90.7 MB/s 
  12b | 339 |     3840    |    1920     |     8   |      960    |  90.7 MB/s 
  13a | 350 |     3968    |    1984     |     8   |     1983    |  81.7 MB/s 
  13b | 350 |     3968    |    1984     |     8   |      992    |  91.7 MB/s 
  14a | 362 |     4096    |    2048     |     8   |     2047    |  89.4 MB/s 
  14b | 362 |     4096    |    2048     |     8   |     1024    |  83.3 MB/s 
  15a | 373 |     4224    |    2112     |     8   |     2111    |  88.1 MB/s 
  15b | 373 |     4224    |    2112     |     8   |     1056    |  89.1 MB/s 
  16a | 384 |     4352    |    2176     |     8   |     2175    |  84.6 MB/s 
  16b | 384 |     4352    |    2176     |     8   |     1088    |  83.4 MB/s 
  17a | 396 |     4480    |    2240     |     8   |     2239    |  87.9 MB/s 
  17b | 396 |     4480    |    2240     |     8   |     1120    |  84.6 MB/s 
  18a | 407 |     4608    |    2304     |     8   |     2303    |  87.7 MB/s 
  18b | 407 |     4608    |    2304     |     8   |     1152    |  64.7 MB/s 

--- Targeting Fastest Result of md_sync_window 1984 bytes for Final Pass ---


--- FULLY AUTOMATIC nr_requests TEST 2 (4 Sample Points @ 60sec Duration)---

Test | num_stripes | sync_window | nr_requests | sync_thresh |   Speed 
---------------------------------------------------------------------------
  1   |     3968    |    1984     |     128     |     1983    |  76.0 MB/s 
  2   |     3968    |    1984     |     128     |      992    |  83.3 MB/s 
  3   |     3968    |    1984     |       8     |     1983    |  90.2 MB/s 
  4   |     3968    |    1984     |       8     |      992    |  89.5 MB/s 

Fastest vals were nr_reqs=8 and sync_thresh=99% of sync_window at 90.2 MB/s

This nr_requests value will be used for the next test.



--- FULLY AUTOMATIC TEST PASS 2 (Fine - 33 Sample Points @ 30sec Duration)---

Test | RAM | num_stripes | sync_window | nr_reqs | sync_thresh |   Speed 
-----------------------------------------------------------------------------
   1a | 328 |     3712    |    1856     |     8   |     1855    |  84.6 MB/s 
   1b | 328 |     3712    |    1856     |     8   |      928    |  92.3 MB/s 
   2a | 329 |     3728    |    1864     |     8   |     1863    |  87.0 MB/s 
   2b | 329 |     3728    |    1864     |     8   |      932    |  56.7 MB/s 
   3a | 331 |     3744    |    1872     |     8   |     1871    |  83.6 MB/s 
   3b | 331 |     3744    |    1872     |     8   |      936    |  83.7 MB/s 
   4a | 332 |     3760    |    1880     |     8   |     1879    |  85.3 MB/s 
   4b | 332 |     3760    |    1880     |     8   |      940    |  82.8 MB/s 
   5a | 334 |     3776    |    1888     |     8   |     1887    |  76.3 MB/s 
   5b | 334 |     3776    |    1888     |     8   |      944    |  79.8 MB/s 
   6a | 335 |     3792    |    1896     |     8   |     1895    |  79.2 MB/s 
   6b | 335 |     3792    |    1896     |     8   |      948    |  76.8 MB/s 
   7a | 336 |     3808    |    1904     |     8   |     1903    |  76.8 MB/s 
   7b | 336 |     3808    |    1904     |     8   |      952    |  77.5 MB/s 
   8a | 338 |     3824    |    1912     |     8   |     1911    |  72.7 MB/s 
   8b | 338 |     3824    |    1912     |     8   |      956    |  88.5 MB/s 
   9a | 339 |     3840    |    1920     |     8   |     1919    |  88.7 MB/s 
   9b | 339 |     3840    |    1920     |     8   |      960    |  89.2 MB/s 
  10a | 341 |     3856    |    1928     |     8   |     1927    |  89.9 MB/s 
  10b | 341 |     3856    |    1928     |     8   |      964    |  92.4 MB/s 
  11a | 342 |     3872    |    1936     |     8   |     1935    |  89.9 MB/s 
  11b | 342 |     3872    |    1936     |     8   |      968    |  96.1 MB/s 
  12a | 343 |     3888    |    1944     |     8   |     1943    |  90.0 MB/s 
  12b | 343 |     3888    |    1944     |     8   |      972    |  93.7 MB/s 
  13a | 345 |     3904    |    1952     |     8   |     1951    |  87.4 MB/s 
  13b | 345 |     3904    |    1952     |     8   |      976    |  95.2 MB/s 
  14a | 346 |     3920    |    1960     |     8   |     1959    |  60.2 MB/s 
  14b | 346 |     3920    |    1960     |     8   |      980    | 103.0 MB/s 
  15a | 348 |     3936    |    1968     |     8   |     1967    |  84.2 MB/s 
  15b | 348 |     3936    |    1968     |     8   |      984    |  88.0 MB/s 
  16a | 349 |     3952    |    1976     |     8   |     1975    |  89.5 MB/s 
  16b | 349 |     3952    |    1976     |     8   |      988    |  84.5 MB/s 
  17a | 350 |     3968    |    1984     |     8   |     1983    |  90.0 MB/s 
  17b | 350 |     3968    |    1984     |     8   |      992    |  89.7 MB/s 
  18a | 352 |     3984    |    1992     |     8   |     1991    |  88.5 MB/s 
  18b | 352 |     3984    |    1992     |     8   |      996    |  84.4 MB/s 
  19a | 353 |     4000    |    2000     |     8   |     1999    |  78.9 MB/s 
  19b | 353 |     4000    |    2000     |     8   |     1000    |  85.9 MB/s 
  20a | 355 |     4016    |    2008     |     8   |     2007    |  72.1 MB/s 
  20b | 355 |     4016    |    2008     |     8   |     1004    |  85.7 MB/s 
  21a | 356 |     4032    |    2016     |     8   |     2015    |  88.8 MB/s 
  21b | 356 |     4032    |    2016     |     8   |     1008    |  88.3 MB/s 
  22a | 358 |     4048    |    2024     |     8   |     2023    |  84.9 MB/s 
  22b | 358 |     4048    |    2024     |     8   |     1012    |  82.4 MB/s 
  23a | 359 |     4064    |    2032     |     8   |     2031    |  85.4 MB/s 
  23b | 359 |     4064    |    2032     |     8   |     1016    |  88.0 MB/s 
  24a | 360 |     4080    |    2040     |     8   |     2039    |  88.4 MB/s 
  24b | 360 |     4080    |    2040     |     8   |     1020    |  73.8 MB/s 
  25a | 362 |     4096    |    2048     |     8   |     2047    |  78.8 MB/s 
  25b | 362 |     4096    |    2048     |     8   |     1024    |  89.5 MB/s 
  26a | 363 |     4112    |    2056     |     8   |     2055    |  89.6 MB/s 
  26b | 363 |     4112    |    2056     |     8   |     1028    |  90.1 MB/s 
  27a | 365 |     4128    |    2064     |     8   |     2063    |  87.2 MB/s 
  27b | 365 |     4128    |    2064     |     8   |     1032    |  89.2 MB/s 
  28a | 366 |     4144    |    2072     |     8   |     2071    |  89.2 MB/s 
  28b | 366 |     4144    |    2072     |     8   |     1036    |  85.9 MB/s 
  29a | 367 |     4160    |    2080     |     8   |     2079    |  90.2 MB/s 
  29b | 367 |     4160    |    2080     |     8   |     1040    |  83.9 MB/s 
  30a | 369 |     4176    |    2088     |     8   |     2087    |  87.2 MB/s 
  30b | 369 |     4176    |    2088     |     8   |     1044    |  57.7 MB/s 
  31a | 370 |     4192    |    2096     |     8   |     2095    |  91.7 MB/s 
  31b | 370 |     4192    |    2096     |     8   |     1048    |  85.0 MB/s 
  32a | 372 |     4208    |    2104     |     8   |     2103    |  86.2 MB/s 
  32b | 372 |     4208    |    2104     |     8   |     1052    |  84.7 MB/s 
  33a | 373 |     4224    |    2112     |     8   |     2111    |  88.8 MB/s 
  33b | 373 |     4224    |    2112     |     8   |     1056    |  88.1 MB/s 

The results below do NOT include the Basline test of current values.

The Fastest Sync Speed tested was md_sync_window=1960 at 103.0 MB/s
     Tunable (md_num_stripes): 3920
     Tunable (md_sync_window): 1960
     Tunable (md_sync_thresh): 980
     Tunable (nr_requests): 8
This will consume 346 MB with md_num_stripes=3920, 2x md_sync_window.
This is 27MB less than your current utilization of 373MB.

The Thriftiest Sync Speed tested was md_sync_window=1960 at 103.0 MB/s
     Tunable (md_num_stripes): 3920
     Tunable (md_sync_window): 1960
     Tunable (md_sync_thresh): 980
     Tunable (nr_requests): 8
This will consume 346 MB with md_num_stripes=3920, 2x md_sync_window.
This is 27MB less than your current utilization of 373MB.

The Recommended Sync Speed is md_sync_window=1960 at 103.0 MB/s
     Tunable (md_num_stripes): 3920
     Tunable (md_sync_window): 1960
     Tunable (md_sync_thresh): 980
     Tunable (nr_requests): 8
This will consume 346 MB with md_num_stripes=3920, 2x md_sync_window.
This is 27MB less than your current utilization of 373MB.

NOTE: Adding additional drives will increase memory consumption.

In unRAID, go to Settings > Disk Settings to set your chosen parameter values.

Completed: 1 Hrs 14 Min 55 Sec.


System Info:  Tower
              unRAID version 6.2.0-rc4
                   md_num_stripes=4224
                   md_sync_window=2048
                   md_sync_thresh=2000
                   nr_requests=8 (Global Setting)
                   sbNumDisks=22
              CPU: Intel(R) Pentium(R) CPU G2030 @ 3.00GHz
              RAM: 8GiB System Memory


 

Awesome, thanks!

 

I see swings of +/- 10 MB/s in these results for a handful of repeated test points.  Doesn't look like the server has quite settled down with 30 sec duration tests to provide any accurate answers.

 

That said, it got surprisingly close to your current configured values.

 

-Paul

Link to post

Tower2 - 14 Disks (3 and 4TB), LSI 9211-8i (flash H310) + Intel PCH

 

 

       unRAID Tunables Tester v4.0b2 by Pauven (for unRAID v6.2)

        Tunables Report produced Thu Aug 25 13:54:12 BST 2016

                         Run on server: Tower2

--- INITIAL BASELINE TEST OF CURRENT VALUES (1 Sample Point @ 30sec Duration)---

Test | RAM | num_stripes | sync_window | nr_reqs | sync_thresh |   Speed 
-----------------------------------------------------------------------------
   1  | 256 |     4480    |    2048     |   128   |     2000    | 130.8 MB/s 

 

I know this was a Short test so the results aren't that accurate, but none of the results came close to your current baseline.

 

I have to ask about the ratios you are using.  For the tests, I'm using num_stripes = 2x sync_window, but you've gone 384 higher.  Any rationale behind that? 

 

Also, while you're using a high value for nr_requests, you're not using sync_window-1, but sync_window-48.  How did you get to these values?

 

A Normal length test is required to see if this is just a fluke or if you've truly got better values, but color me interested.

 

Thanks,

Paul

Link to post

Tower3 - This is a backup server, so it's single parity only and uses my oldest and slowest disks (except both 6TB), 14 disks, SASLP + 1430SA + Intel PCH:

 

 

--- INITIAL BASELINE TEST OF CURRENT VALUES (1 Sample Point @ 30sec Duration)---
Test | RAM | num_stripes | sync_window | nr_reqs | sync_thresh |   Speed 
-----------------------------------------------------------------------------
   1  | 273 |     4480    |    2048     |     8   |     2000    |  93.4 MB/s 

--- FULLY AUTOMATIC nr_requests TEST 1 (4 Sample Points @ 60sec Duration)---
Test | num_stripes | sync_window | nr_requests | sync_thresh |   Speed 
---------------------------------------------------------------------------
  1   |     1536    |     768     |     128     |      767    |  85.4 MB/s 
  2   |     1536    |     768     |     128     |      384    |  68.1 MB/s 
  3   |     1536    |     768     |       8     |      767    |  72.1 MB/s 
  4   |     1536    |     768     |       8     |      384    |  66.5 MB/s 

Fastest vals were nr_reqs=128 and sync_thresh=99% of sync_window at 85.4 MB/s

 

Hmmm, that didn't go that well at all.  I'm gonna chalk that up to this being a Short test, and there's just not enough accuracy for the logic to work with 30 second tests (or even 60 seconds, in the case of the nr_requests).

 

To minimize the total number of tests that are being run, the first test I run is to try and determine the best nr_requests value, and then use that for the remaining tests.  Unfortunately, if this first test doesn't get the right answer, then the first round of sync_window tests are kinda pointless.  Which then leads to the second nr_requests test occuring in the wrong range, and the final pass being pretty worthless to.  This seems to be what happened here.

 

The longer Normal Auto test should address this.  It runs the nr_requests tests for 10 minutes, so basically 10x more accuracy, to set up the rest of the tests for success.

 

Thanks,

Paul

Link to post

Join the conversation

You can post now and register later. If you have an account, sign in now to post with your account.
Note: Your post will require moderator approval before it will be visible.

Guest
Reply to this topic...

×   Pasted as rich text.   Restore formatting

  Only 75 emoji are allowed.

×   Your link has been automatically embedded.   Display as a link instead

×   Your previous content has been restored.   Clear editor

×   You cannot paste images directly. Upload or insert images from URL.