Hard-Talkchess-2020 set, final release

AlexChess · Post by **AlexChess** » Tue Sep 06, 2022 2:02 pm

thus you could compare directly to the latest runs and EloStatTS- evaluation given there too.

Anyhow I don't have Proteus, otherwise I'd simply let it have a run with my usual hardware- TC and add it to my EloStatTS- list, if I'll do so sooner or later, I'll let you know the result,
regards

If you have time and you like, you find here also the avx2 bmi2 binaries for Windows.
http://www.microsmeta.com/DBLOG/articol ... icolo=1525

I would be curious about ProteusSF performance with good hardware

(My brother has a better Ryzen 9 3900x but the PC Is busy right now)

Kind regards Alex

criko · Post by **criko** » Tue Sep 06, 2022 5:18 pm

Code: Select all

Ryzen Threadripper PRO 3995WX
122 threads
8 GB hash
30 seconds per move

128 pos from Peter Martan revisited
fixed to 3000 ELO

    Program                                    Elo   +/-  Matches  Score   Av.Op.   S.Pos.   MST1    MST2   RIndex

  1 ShashChess24GD                           : 3026   14    395    54.7 %   2993    87/128    6.9s   14.3s   0.64
  2 ShashChess24                             : 3013   13    366    52.3 %   2997    83/128    6.8s   15.0s   0.63
  3 ProteusSF-Piranha220904                  : 2992   13    363    48.5 %   3002    77/128    7.5s   16.5s   0.60
  4 EMAN8.20                                 : 2985   14    361    47.2 %   3004    75/128    8.6s   17.5s   0.56
  5 Stockfish290822                          : 2983   13    361    46.8 %   3005    76/128    9.1s   17.6s   0.57

MST1  : Mean solution time (solved positions only)
MST2  : Mean solution time (solved and unsolved positions)
RIndex: Score according to solution time ranking for each position

peter · Post by **peter** » Tue Sep 06, 2022 5:30 pm

AlexChess wrote: ↑Tue Sep 06, 2022 2:02 pm

thus you could compare directly to the latest runs and EloStatTS- evaluation given there too.

Anyhow I don't have Proteus, otherwise I'd simply let it have a run with my usual hardware- TC and add it to my EloStatTS- list, if I'll do so sooner or later, I'll let you know the result,
regards
If you have time and you like, you find here also the avx2 bmi2 binaries for Windows.
http://www.microsmeta.com/DBLOG/articol ... icolo=1525

I would be curious about ProteusSF performance with good hardware
(My brother has a better Ryzen 9 3900x but the PC Is busy right now)

Took the bmi2- compile. it had the edge over avx2 with bench- command in console on my Ryzen as for n/s.

15"/pos., 2 extra plies, 2G hash, 6men Syzgygs, MultiPV=4
which is the standard- run for me as for SF dev. and it's branches at the moment with this one suite, you used of your last run too:

Code: Select all

Löse: C:\Users\Peter\Documents\ChessBase\Testsets\2\1284.cbh
Maximale Lösungszeit = 15s.

1. HTC108,2 - Corbit,D,  Tactical Insanity Nr.1   Gelöst in 2.25s/21; Gelöst: 1
2. TacticalInsanityNr.9 - CorbitD,  HTC108-5 S   > 15s.
3. Carlsen,M - Caruana,F,  HTC108-7 WM2018   Gelöst in 1.28s/18; Gelöst: 2
4. ACT-Suite,N - Dorsz,O,  HTC108-8   Gelöst in 2.16s/19; Gelöst: 3
5. van Foreest,J - L'Ami,E,  HTC108-9 Zug 24...Sideline   > 15s.
6. Konig?,C - Cornforth96?,C,  HTC108-11 Arasan   Gelöst in 10.69s/19; Gelöst: 4
7. PoorFish,C - Borderline,D,  HTC108-12   > 15s.
8. LC0,C - SF,C,  HTC108-15 S   Gelöst in 8.39s/24; Gelöst: 5
9. AlphaZero,H - SF,  Game9 2017   Gelöst in 3.14s/23; Gelöst: 6
10. Gashimov,V - Azariov,S,  2011 HTC108-23   Gelöst in 8.81s/27; Gelöst: 7
11. CorbitD,C,  HTC108-25   > 15s.
12. Gusia - Barlov,  Schweiz 1980 HTC108-28   > 15s.
13. Bondarenko,& - Glarean,P,  HTC108-29   Gelöst in 3.27s/36; Gelöst: 8
14. Rudolph,W,  Studie 1912 HTC108-30 S   > 15s.
15. Gusev,Y - Auerbach,E,  HTC108-42   Gelöst in 1.31s/21; Gelöst: 9
16. Van Essen,M - 2004,#,  HTC108-48 (-9ZNr41) S   Gelöst in 14.13s/28; Gelöst: 10
17. Neghina,M - Stronghold,2,  HTC108-49 S   > 15s.
18. Tunik - Duzhakov,  2011 HTC108-52   Gelöst in 0.97s/20; Gelöst: 11
19. Neghina,M - Chase,D,  HTC108-54   Gelöst in 3.36s/27; Gelöst: 12
20. SolomonKing,? - 2.g4,H,  HTC108-80 S   Gelöst in 1.06s/17; Gelöst: 13
21. Nicolic,E - Fischer,R,  HTC108-94 S   Gelöst in 0.44s/15; Gelöst: 14
22. Morozevich,A - Vitiugov,N,  Reggio 2011 HTC108-100   Gelöst in 11.53s/25; Gelöst: 15
23. M. Garcia - P. Krug,S - Glarean,  The Engine Crackers   Gelöst in 7.09s/39; Gelöst: 16
24. Zepler,E - Studie,1,   2020   Gelöst in 9.70s/21; Gelöst: 17
25. Formela,M - Studie,2,  Polski Zwiazek Szachowy 2019   Gelöst in 3.59s/21; Gelöst: 18
26. Stoofvlees - SF,  TCEC 2019   Gelöst in 0.06s/9; Gelöst: 19
27. Lasker,E - Lipke,P,  Nebenvariante 41.Ke4! MS 1889   Gelöst in 3.75s/25; Gelöst: 20
28. Los,A - Kubicki,T,  corr LIPEAD40 (PER) 2016   Gelöst in 6.34s/25; Gelöst: 21
29. PurePower - Exxon,  Chessbase online 2021   Gelöst in 14.89s/29; Gelöst: 22
30. Bauer,R - Zhak,B,  WC30/final ICCF 2017   Gelöst in 2.08s/19; Gelöst: 23
31. Mihai Neghina - Desperation,  White to move and draw S 12   Gelöst in 0.03s/9; Gelöst: 24
32. Tauber,H - Sikorsky,H,  37.e5! 2018   > 15s.
33. Bondarenko+Gorgiev,S - BrillanterSchachzug,1,   2008   > 15s.
34. ACT3,? - Festung,  S   > 15s.
35. ACT3,? - Studie?   Gelöst in 4.13s/33; Gelöst: 25
36. ACT3,?   > 15s.
37. ACT3,? - Festung   Gelöst in 3.13s/19; Gelöst: 26
38. ACT3,? - Festung,  S   > 15s.
39. ACT3,? - Studie?   Gelöst in 2.41s/27; Gelöst: 27
40. ACT3,? - Studie?,  S   Gelöst in 1.34s/17; Gelöst: 28
41. Neghina,M - GoldenerKÃ¤fig,2,  S Sibiu 2009   > 15s.
42. Ree,H - Hort,V,  Wijk 1986 2009   > 15s.
43. Neghina,M - WhieTo,M,  2018? S   > 15s.
44. Popov,S - Glarean 2006,1,  HTC108-58 2008   Gelöst in 1.44s/18; Gelöst: 29
45. Sikorsky,H - Novak,J,  Sideline ICCF 2017   Gelöst in 3.39s/19; Gelöst: 30
46. Krug,P - CCC,P,  S 2022   > 15s.
47. TCEC,S - Nr.8,j,  CCC 2022   Gelöst in 15.98s/34; Gelöst: 31
48. TCEC,S - Nr.22,r,  CCC 2022   > 15s.
49. Sikorsky,H - Vinchev,S,  corr GER, Hiarcs 2016   Gelöst in 5.92s/23; Gelöst: 32
50. Zemljanski,Y - 1move,c,  Tsjechover-90 S 1999   > 15s.
51. Study,?,  IQ 100 2012   Gelöst in 0.34s/10; Gelöst: 33
52. Study?,?,  ACT3   Gelöst in 11.94s/21; Gelöst: 34
53. Study?,?,  TTT2 31   Gelöst in 8.36s/46; Gelöst: 35
54. Semenikov+,D - Sikorsky,H,  corr. USA 2021   Gelöst in 14.23s/26; Gelöst: 36
55. Petrov,M - Sikorsky,H,  CL/2021 ICCF   Gelöst in 4.06s/22; Gelöst: 37
56. Study,? - CCC,  ACT5 11   > 15s.
57. Study,?,  ACT5 29   > 15s.
58. ERET 015 - Endspiel D&B vs T&L&B,  Becker 2015   Gelöst in 0.38s/16; Gelöst: 38
59. ERET 032 - Zugzwang,  Fahrni 1922   > 15s.
60. ERET 037 - Zugzwang,  Garcia 2000   > 15s.
61. ERET 046 - Endspiel T&S vs T&S,  Grandelius-Raznikov, Albena 2011   > 15s.
62. ERET 050 - Koenigsangriff,  Hansen-Barua, Biel 1993   Gelöst in 4.24s/26; Gelöst: 39
63. ERET 090 - Endspiel L vs L,  Salai 2011   > 15s.
64. ERET 093 - Endspiel T&S&B vs T&T&L,  Simkhovich 1923   > 15s.
65. ERET 094 - Damenopfer,  Sirobaba-Chaika, CorrGame 2011   Gelöst in 3.81s/23; Gelöst: 40
66. Fortress,S,  ACT3-51 S   Gelöst in 11.94s/38; Gelöst: 41
67. ACT4,N,  ACT4-1   Gelöst in 2.52s/24; Gelöst: 42
68. Cyclic,Z,  ACT5-25 2   > 15s.
69. Blass,U - CCC,  ACT5-27 2   > 15s.
70. Campioli,M - #14,?,  ACT5-28 2   Gelöst in 5.63s/19; Gelöst: 43
71. Krug,P,  ACT5-30 2   Gelöst in 3.31s/26; Gelöst: 44
72. KrugP,G - HHdbVI.0044383.001,a,  ACT5-31 1   Gelöst in 3.27s/27; Gelöst: 45
73. Kos,V - ?,  ACT5-34 2   > 15s.
74. Sokka,H - HHdbVI.1076075.001,a,  ACT5-36 1   Gelöst in 0.47s/17; Gelöst: 46
75. Sehwers,J - HHdbVI.1643584.002a.,8,  ACT5-ana   Gelöst in 0.16s/12; Gelöst: 47
76. Zinar,M - HHdbVI.0210037.002a.,0,  ACT5-44 2   > 15s.
77. Nestorescu,V - HHdbVI.0708805.002a.,3,  ACT5-46 1   Gelöst in 8.28s/40; Gelöst: 48
78. Timman,J - HHdbVI.0033988.002a.,0,  ACT5-48 2   > 15s.
79. Unknown,A,  ACT5-51 2   Gelöst in 0.11s/10; Gelöst: 49
80. Ivanov,V,  ACT5-53 2   Gelöst in 0.94s/41; Gelöst: 50
81. Bernhardt,G,  ACT5-58 2   Gelöst in 1.77s/38; Gelöst: 51
82. Unknows,A,  ACT5-61 2   > 15s.
83. Naef,W,  ACT5-63 2   Gelöst in 2.83s/18; Gelöst: 52
84. #7,?,  ACT5-67 2   > 15s.
85. #9,?,  ACT5-68 2   Gelöst in 2.39s/33; Gelöst: 53
86. SilhanJ,Z,  ACT5-59 3   Gelöst in 0.20s/12; Gelöst: 54
87. Hiarcs,?,  TTT2 2   Gelöst in 0.81s/16; Gelöst: 55
88. Hiarcs,?,  TTT2 6 2   Gelöst in 0.33s/13; Gelöst: 56
89. Derived,f - StavrietskyA,2,  TTT2 14   Gelöst in 0.64s/17; Gelöst: 57
90. Midgame,? - ?,  TTT2 23   > 15s.
91. TTT2.053,  TTT2   > 15s.
92. TTT2.073,  TTT2   Gelöst in 1.95s/23; Gelöst: 58
93. RoxlauM,G - HHdbVI,  ACT4 4 1   > 15s.
94. Smyslov,V,  ACT4-26 1   > 15s.
95. Smyslov,V,  ACT4-41 1   > 15s.
96. JostenG,   2008   Gelöst in 0.11s/9; Gelöst: 59
97. Study,?,  ACT4-59   > 15s.
98. Wotawa,A,  ACT4-66 1   > 15s.
99. Study,?,  ACT4-90 1   Gelöst in 2.24s/30; Gelöst: 60
100. Bethge,F,  ACT4-91   Gelöst in 3.72s/23; Gelöst: 61
101. Blathy,O,  ACT4-94 1   > 15s.
102. Cortlever,N - HHdbVI,  ACT3-29 1   > 15s.
103. Korolkov,V,  ACT3-38   > 15s.
104. Fortress,?,  ACT3-41 1   > 15s.
105. Unknown,A,  ACT3-48   Gelöst in 1.80s/23; Gelöst: 62
106. Kraemer,A,  ACT3-49   > 15s.
107. Sivkov,N - #10,?,  ACT3-88   > 15s.
108. Timman=J - Glarean,N,   2012   Gelöst in 0.44s/17; Gelöst: 63
109. Boudy Bueno,J - Szabo,L,  Varna 1979  Txb2!? Eret 17   Gelöst in 6.13s/24; Gelöst: 64
110. Lc0-dev - Stockfish,  ECO MegaMatch II! (1|1) 2020   Gelöst in 0.72s/17; Gelöst: 65
111. Carlsen,M - L'Ami,E,  Corus B VLH16 35 2006   Gelöst in 1.61s/19; Gelöst: 66
112. Bazlo,Y - 10moves,l,  2019 HHdbVI 1   > 15s.
113. Opening,H - !,?   > 15s.
114. TCEC,r,  CCC   > 15s.
115. TCEC,r,  CCC Nr.5   > 15s.
116. Gleichmann,M - Praznik,N,  corr CT21/final 2019   > 15s.
117. Yarmonov,I - Glarean,  2020   > 15s.
118. Eman - SugaR,  Glarean   > 15s.
119. Hobacle's,V - Walter Eigenmann's,S   > 15s.
120. Krug,P - Glarean,E,  2018   > 15s.
121. Gniazdowski,M - Rau,J,  corr CL/2019/C8 Glarean   > 15s.
122. Illescas,M - Glarean,E   > 15s.
123. Heinz,J - Glarean,  Study 1981   Gelöst in 8.02s/39; Gelöst: 67
124. Josten,G - Glarean,E,  Studie 2001   > 15s.
125. Timman,J - HHdbVI   Gelöst in 0.95s/15; Gelöst: 68
126. Gelly,M - HHdbVI,  Glarean   > 15s.
127. Krug,P - HHdbVI,G,   2013   > 15s.
128. Ganguly,S - RuszA,c,  HHdbVI 2017   > 15s.

Ergebnis: 68 aus 128 = 53.1%. Durchschnittszeit = 4.09s / 22.89

With EloStatTS in latest list:

Code: Select all


    Program                                    Elo   +/-  Matches  Score   Av.Op.   S.Pos.   MST1    MST2   RIndex

  1 CorChess3300522-Tactical-MV4             : 3577    6   2892    61.9 %   3493    85/128    3.3s    7.2s   0.59
  2 BlueMarlin15.3-avx2-MV4                  : 3575    7   2802    61.5 %   3493    82/128    3.1s    7.4s   0.60
  3 ShashChess24-GoldDigger-MV4              : 3566    6   2773    60.3 %   3493    80/128    3.6s    7.9s   0.58
  4 Crystallite1.1a-bmi2-ContMax-MV4         : 3560    7   2829    59.3 %   3495    79/128    3.7s    8.0s   0.52
  5 ShashChess23.1.1-GoldDigger-MV4          : 3560    7   2697    59.4 %   3494    80/128    3.7s    7.9s   0.55
  6 HypnoSFmpv110822-MV4                     : 3560    7   2742    59.3 %   3494    77/128    3.2s    7.9s   0.51
  7 TheHuntsman1bmi2-MV4                     : 3547    7   2760    57.3 %   3496    72/128    3.3s    8.4s   0.46
  8 Swordfish15.3a-bmi2-MV4                  : 3546    7   2694    57.3 %   3495    76/128    4.2s    8.6s   0.49
  9 EMAN8.2064-bitAVX2-MV4                   : 3543    7   2693    56.8 %   3495    74/128    4.2s    8.8s   0.47
 10 EMAN8.2064-bitAVX2-FAD15                 : 3536    6   2755    55.9 %   3495    81/128    6.1s    9.4s   0.39
 11 TheHuntsman1bmi2-MateSearch              : 3535    8   2599    55.4 %   3497    62/128    2.2s    8.8s   0.47
 12 Stockfish310722-MV4                      : 3529    7   2567    54.8 %   3496    68/128    4.2s    9.3s   0.44
 13 ProteusSF-Piranha220904-MV4              : 3527    7   2590    54.4 %   3496    68/128    4.2s    9.3s   0.41
 14 Sting28                                  : 3494    8   2425    48.9 %   3502    52/128    3.9s   10.5s   0.33
 15 Ceres0.97RC3-784038                      : 3490    8   2289    48.0 %   3504    49/128    3.3s   10.5s   0.37
 16 Fire8.NN.MC.3-ninu-0.3.bin-MV4           : 3486    8   2286    47.6 %   3503    50/128    4.0s   10.7s   0.36
 17 Stockfish310722                          : 3484    8   2374    47.6 %   3501    55/128    5.5s   10.9s   0.29
 18 Ceres0.97RC3-784822                      : 3483    8   2271    47.0 %   3504    48/128    3.5s   10.7s   0.34
 19 Lc0v0.30.0-dag+git.c91bf77-784038        : 3478    8   2261    46.1 %   3505    45/128    3.5s   11.0s   0.32
 20 Sting28-MV4                              : 3476    8   2275    45.9 %   3504    45/128    3.3s   10.9s   0.30
 21 Lc0v0.30.0-dev-784038                    : 3475    8   2213    45.6 %   3505    44/128    3.5s   10.7s   0.34
 22 Lc0v0.30.0-dag+git.c91bf77-784822        : 3468    8   2250    44.8 %   3505    46/128    4.7s   11.3s   0.29
 23 Dragon3.1byKomodoChess-MV4               : 3468    8   2244    44.9 %   3504    47/128    4.7s   11.2s   0.28
 24 SlowChessBlitz2.9avx2-MV4                : 3448    8   2173    41.9 %   3504    43/128    5.5s   11.8s   0.22
 25 Dragon3.1byKomodoChess                   : 3442    8   2134    40.8 %   3506    39/128    5.0s   12.0s   0.25
 26 Dragon3.1byKomodoChess-MCTS-MV30         : 3435    8   2133    39.8 %   3507    37/128    4.0s   11.8s   0.13
 27 Ethereal13.75(NNUE)-AnalysisMode-MV4     : 3427    8   2071    38.7 %   3507    34/128    4.3s   12.2s   0.21
 28 Berserk20220725-MV4                      : 3423    8   2059    38.2 %   3507    35/128    4.8s   12.2s   0.19
 29 RubiChess20220813(bmi2)-MV4              : 3414    9   2060    36.7 %   3508    29/128    3.4s   12.4s   0.18
 30 Koivisto8.13                             : 3382    9   1952    32.4 %   3510    22/128    3.4s   13.0s   0.14
 31 Revenge3.0b-MV4                          : 3368    8   2065    30.8 %   3509    30/128   12.4s   14.4s   0.03



MST1  : Mean solution time (solved positions only)
MST2  : Mean solution time (solved and unsolved positions)
RIndex: Score according to solution time ranking for each position

Nr. 13 ProteusSF-Piranha 220904, about the same rating as SF310722 with same MV4 setting, same nr. of solutions (68/128) the 2 Elo minus (at an error bar of 7) come from slightly less good time- ratios.
If you want me to, I can give it one more try single primary (MultiPV=1) but as you see at SF 310722, that's nr. 17 with its single primary run, it won't be better with a rather high probability. Sting so far is the only fish in list scoring better single- than multi- PV.
Most of the versions stored had their single primary runs too, leaving only best results in latest version of list and some of the single ones for direct comparison. One more fine side of EloStatTS is, the more runs compared to each other is the lesser the error bars get, always each and every single engine, setting and run being rated newly again.

Best regards

Master Om · Post by **Master Om** » Tue Sep 06, 2022 8:12 pm

peter wrote: ↑Tue Sep 06, 2022 5:30 pm

AlexChess wrote: ↑Tue Sep 06, 2022 2:02 pm

thus you could compare directly to the latest runs and EloStatTS- evaluation given there too.

Anyhow I don't have Proteus, otherwise I'd simply let it have a run with my usual hardware- TC and add it to my EloStatTS- list, if I'll do so sooner or later, I'll let you know the result,
regards
If you have time and you like, you find here also the avx2 bmi2 binaries for Windows.
http://www.microsmeta.com/DBLOG/articol ... icolo=1525

I would be curious about ProteusSF performance with good hardware
(My brother has a better Ryzen 9 3900x but the PC Is busy right now)

Took the bmi2- compile. it had the edge over avx2 with bench- command in console on my Ryzen as for n/s.

15"/pos., 2 extra plies, 2G hash, 6men Syzgygs, MultiPV=4
which is the standard- run for me as for SF dev. and it's branches at the moment with this one suite, you used of your last run too:

Code: Select all

Löse: C:\Users\Peter\Documents\ChessBase\Testsets\2\1284.cbh
Maximale Lösungszeit = 15s.

1. HTC108,2 - Corbit,D,  Tactical Insanity Nr.1   Gelöst in 2.25s/21; Gelöst: 1
2. TacticalInsanityNr.9 - CorbitD,  HTC108-5 S   > 15s.
3. Carlsen,M - Caruana,F,  HTC108-7 WM2018   Gelöst in 1.28s/18; Gelöst: 2
4. ACT-Suite,N - Dorsz,O,  HTC108-8   Gelöst in 2.16s/19; Gelöst: 3
5. van Foreest,J - L'Ami,E,  HTC108-9 Zug 24...Sideline   > 15s.
6. Konig?,C - Cornforth96?,C,  HTC108-11 Arasan   Gelöst in 10.69s/19; Gelöst: 4
7. PoorFish,C - Borderline,D,  HTC108-12   > 15s.
8. LC0,C - SF,C,  HTC108-15 S   Gelöst in 8.39s/24; Gelöst: 5
9. AlphaZero,H - SF,  Game9 2017   Gelöst in 3.14s/23; Gelöst: 6
10. Gashimov,V - Azariov,S,  2011 HTC108-23   Gelöst in 8.81s/27; Gelöst: 7
11. CorbitD,C,  HTC108-25   > 15s.
12. Gusia - Barlov,  Schweiz 1980 HTC108-28   > 15s.
13. Bondarenko,& - Glarean,P,  HTC108-29   Gelöst in 3.27s/36; Gelöst: 8
14. Rudolph,W,  Studie 1912 HTC108-30 S   > 15s.
15. Gusev,Y - Auerbach,E,  HTC108-42   Gelöst in 1.31s/21; Gelöst: 9
16. Van Essen,M - 2004,#,  HTC108-48 (-9ZNr41) S   Gelöst in 14.13s/28; Gelöst: 10
17. Neghina,M - Stronghold,2,  HTC108-49 S   > 15s.
18. Tunik - Duzhakov,  2011 HTC108-52   Gelöst in 0.97s/20; Gelöst: 11
19. Neghina,M - Chase,D,  HTC108-54   Gelöst in 3.36s/27; Gelöst: 12
20. SolomonKing,? - 2.g4,H,  HTC108-80 S   Gelöst in 1.06s/17; Gelöst: 13
21. Nicolic,E - Fischer,R,  HTC108-94 S   Gelöst in 0.44s/15; Gelöst: 14
22. Morozevich,A - Vitiugov,N,  Reggio 2011 HTC108-100   Gelöst in 11.53s/25; Gelöst: 15
23. M. Garcia - P. Krug,S - Glarean,  The Engine Crackers   Gelöst in 7.09s/39; Gelöst: 16
24. Zepler,E - Studie,1,   2020   Gelöst in 9.70s/21; Gelöst: 17
25. Formela,M - Studie,2,  Polski Zwiazek Szachowy 2019   Gelöst in 3.59s/21; Gelöst: 18
26. Stoofvlees - SF,  TCEC 2019   Gelöst in 0.06s/9; Gelöst: 19
27. Lasker,E - Lipke,P,  Nebenvariante 41.Ke4! MS 1889   Gelöst in 3.75s/25; Gelöst: 20
28. Los,A - Kubicki,T,  corr LIPEAD40 (PER) 2016   Gelöst in 6.34s/25; Gelöst: 21
29. PurePower - Exxon,  Chessbase online 2021   Gelöst in 14.89s/29; Gelöst: 22
30. Bauer,R - Zhak,B,  WC30/final ICCF 2017   Gelöst in 2.08s/19; Gelöst: 23
31. Mihai Neghina - Desperation,  White to move and draw S 12   Gelöst in 0.03s/9; Gelöst: 24
32. Tauber,H - Sikorsky,H,  37.e5! 2018   > 15s.
33. Bondarenko+Gorgiev,S - BrillanterSchachzug,1,   2008   > 15s.
34. ACT3,? - Festung,  S   > 15s.
35. ACT3,? - Studie?   Gelöst in 4.13s/33; Gelöst: 25
36. ACT3,?   > 15s.
37. ACT3,? - Festung   Gelöst in 3.13s/19; Gelöst: 26
38. ACT3,? - Festung,  S   > 15s.
39. ACT3,? - Studie?   Gelöst in 2.41s/27; Gelöst: 27
40. ACT3,? - Studie?,  S   Gelöst in 1.34s/17; Gelöst: 28
41. Neghina,M - GoldenerKÃ¤fig,2,  S Sibiu 2009   > 15s.
42. Ree,H - Hort,V,  Wijk 1986 2009   > 15s.
43. Neghina,M - WhieTo,M,  2018? S   > 15s.
44. Popov,S - Glarean 2006,1,  HTC108-58 2008   Gelöst in 1.44s/18; Gelöst: 29
45. Sikorsky,H - Novak,J,  Sideline ICCF 2017   Gelöst in 3.39s/19; Gelöst: 30
46. Krug,P - CCC,P,  S 2022   > 15s.
47. TCEC,S - Nr.8,j,  CCC 2022   Gelöst in 15.98s/34; Gelöst: 31
48. TCEC,S - Nr.22,r,  CCC 2022   > 15s.
49. Sikorsky,H - Vinchev,S,  corr GER, Hiarcs 2016   Gelöst in 5.92s/23; Gelöst: 32
50. Zemljanski,Y - 1move,c,  Tsjechover-90 S 1999   > 15s.
51. Study,?,  IQ 100 2012   Gelöst in 0.34s/10; Gelöst: 33
52. Study?,?,  ACT3   Gelöst in 11.94s/21; Gelöst: 34
53. Study?,?,  TTT2 31   Gelöst in 8.36s/46; Gelöst: 35
54. Semenikov+,D - Sikorsky,H,  corr. USA 2021   Gelöst in 14.23s/26; Gelöst: 36
55. Petrov,M - Sikorsky,H,  CL/2021 ICCF   Gelöst in 4.06s/22; Gelöst: 37
56. Study,? - CCC,  ACT5 11   > 15s.
57. Study,?,  ACT5 29   > 15s.
58. ERET 015 - Endspiel D&B vs T&L&B,  Becker 2015   Gelöst in 0.38s/16; Gelöst: 38
59. ERET 032 - Zugzwang,  Fahrni 1922   > 15s.
60. ERET 037 - Zugzwang,  Garcia 2000   > 15s.
61. ERET 046 - Endspiel T&S vs T&S,  Grandelius-Raznikov, Albena 2011   > 15s.
62. ERET 050 - Koenigsangriff,  Hansen-Barua, Biel 1993   Gelöst in 4.24s/26; Gelöst: 39
63. ERET 090 - Endspiel L vs L,  Salai 2011   > 15s.
64. ERET 093 - Endspiel T&S&B vs T&T&L,  Simkhovich 1923   > 15s.
65. ERET 094 - Damenopfer,  Sirobaba-Chaika, CorrGame 2011   Gelöst in 3.81s/23; Gelöst: 40
66. Fortress,S,  ACT3-51 S   Gelöst in 11.94s/38; Gelöst: 41
67. ACT4,N,  ACT4-1   Gelöst in 2.52s/24; Gelöst: 42
68. Cyclic,Z,  ACT5-25 2   > 15s.
69. Blass,U - CCC,  ACT5-27 2   > 15s.
70. Campioli,M - #14,?,  ACT5-28 2   Gelöst in 5.63s/19; Gelöst: 43
71. Krug,P,  ACT5-30 2   Gelöst in 3.31s/26; Gelöst: 44
72. KrugP,G - HHdbVI.0044383.001,a,  ACT5-31 1   Gelöst in 3.27s/27; Gelöst: 45
73. Kos,V - ?,  ACT5-34 2   > 15s.
74. Sokka,H - HHdbVI.1076075.001,a,  ACT5-36 1   Gelöst in 0.47s/17; Gelöst: 46
75. Sehwers,J - HHdbVI.1643584.002a.,8,  ACT5-ana   Gelöst in 0.16s/12; Gelöst: 47
76. Zinar,M - HHdbVI.0210037.002a.,0,  ACT5-44 2   > 15s.
77. Nestorescu,V - HHdbVI.0708805.002a.,3,  ACT5-46 1   Gelöst in 8.28s/40; Gelöst: 48
78. Timman,J - HHdbVI.0033988.002a.,0,  ACT5-48 2   > 15s.
79. Unknown,A,  ACT5-51 2   Gelöst in 0.11s/10; Gelöst: 49
80. Ivanov,V,  ACT5-53 2   Gelöst in 0.94s/41; Gelöst: 50
81. Bernhardt,G,  ACT5-58 2   Gelöst in 1.77s/38; Gelöst: 51
82. Unknows,A,  ACT5-61 2   > 15s.
83. Naef,W,  ACT5-63 2   Gelöst in 2.83s/18; Gelöst: 52
84. #7,?,  ACT5-67 2   > 15s.
85. #9,?,  ACT5-68 2   Gelöst in 2.39s/33; Gelöst: 53
86. SilhanJ,Z,  ACT5-59 3   Gelöst in 0.20s/12; Gelöst: 54
87. Hiarcs,?,  TTT2 2   Gelöst in 0.81s/16; Gelöst: 55
88. Hiarcs,?,  TTT2 6 2   Gelöst in 0.33s/13; Gelöst: 56
89. Derived,f - StavrietskyA,2,  TTT2 14   Gelöst in 0.64s/17; Gelöst: 57
90. Midgame,? - ?,  TTT2 23   > 15s.
91. TTT2.053,  TTT2   > 15s.
92. TTT2.073,  TTT2   Gelöst in 1.95s/23; Gelöst: 58
93. RoxlauM,G - HHdbVI,  ACT4 4 1   > 15s.
94. Smyslov,V,  ACT4-26 1   > 15s.
95. Smyslov,V,  ACT4-41 1   > 15s.
96. JostenG,   2008   Gelöst in 0.11s/9; Gelöst: 59
97. Study,?,  ACT4-59   > 15s.
98. Wotawa,A,  ACT4-66 1   > 15s.
99. Study,?,  ACT4-90 1   Gelöst in 2.24s/30; Gelöst: 60
100. Bethge,F,  ACT4-91   Gelöst in 3.72s/23; Gelöst: 61
101. Blathy,O,  ACT4-94 1   > 15s.
102. Cortlever,N - HHdbVI,  ACT3-29 1   > 15s.
103. Korolkov,V,  ACT3-38   > 15s.
104. Fortress,?,  ACT3-41 1   > 15s.
105. Unknown,A,  ACT3-48   Gelöst in 1.80s/23; Gelöst: 62
106. Kraemer,A,  ACT3-49   > 15s.
107. Sivkov,N - #10,?,  ACT3-88   > 15s.
108. Timman=J - Glarean,N,   2012   Gelöst in 0.44s/17; Gelöst: 63
109. Boudy Bueno,J - Szabo,L,  Varna 1979  Txb2!? Eret 17   Gelöst in 6.13s/24; Gelöst: 64
110. Lc0-dev - Stockfish,  ECO MegaMatch II! (1|1) 2020   Gelöst in 0.72s/17; Gelöst: 65
111. Carlsen,M - L'Ami,E,  Corus B VLH16 35 2006   Gelöst in 1.61s/19; Gelöst: 66
112. Bazlo,Y - 10moves,l,  2019 HHdbVI 1   > 15s.
113. Opening,H - !,?   > 15s.
114. TCEC,r,  CCC   > 15s.
115. TCEC,r,  CCC Nr.5   > 15s.
116. Gleichmann,M - Praznik,N,  corr CT21/final 2019   > 15s.
117. Yarmonov,I - Glarean,  2020   > 15s.
118. Eman - SugaR,  Glarean   > 15s.
119. Hobacle's,V - Walter Eigenmann's,S   > 15s.
120. Krug,P - Glarean,E,  2018   > 15s.
121. Gniazdowski,M - Rau,J,  corr CL/2019/C8 Glarean   > 15s.
122. Illescas,M - Glarean,E   > 15s.
123. Heinz,J - Glarean,  Study 1981   Gelöst in 8.02s/39; Gelöst: 67
124. Josten,G - Glarean,E,  Studie 2001   > 15s.
125. Timman,J - HHdbVI   Gelöst in 0.95s/15; Gelöst: 68
126. Gelly,M - HHdbVI,  Glarean   > 15s.
127. Krug,P - HHdbVI,G,   2013   > 15s.
128. Ganguly,S - RuszA,c,  HHdbVI 2017   > 15s.

Ergebnis: 68 aus 128 = 53.1%. Durchschnittszeit = 4.09s / 22.89

With EloStatTS in latest list:

Code: Select all


    Program                                    Elo   +/-  Matches  Score   Av.Op.   S.Pos.   MST1    MST2   RIndex

  1 CorChess3300522-Tactical-MV4             : 3577    6   2892    61.9 %   3493    85/128    3.3s    7.2s   0.59
  2 BlueMarlin15.3-avx2-MV4                  : 3575    7   2802    61.5 %   3493    82/128    3.1s    7.4s   0.60
  3 ShashChess24-GoldDigger-MV4              : 3566    6   2773    60.3 %   3493    80/128    3.6s    7.9s   0.58
  4 Crystallite1.1a-bmi2-ContMax-MV4         : 3560    7   2829    59.3 %   3495    79/128    3.7s    8.0s   0.52
  5 ShashChess23.1.1-GoldDigger-MV4          : 3560    7   2697    59.4 %   3494    80/128    3.7s    7.9s   0.55
  6 HypnoSFmpv110822-MV4                     : 3560    7   2742    59.3 %   3494    77/128    3.2s    7.9s   0.51
  7 TheHuntsman1bmi2-MV4                     : 3547    7   2760    57.3 %   3496    72/128    3.3s    8.4s   0.46
  8 Swordfish15.3a-bmi2-MV4                  : 3546    7   2694    57.3 %   3495    76/128    4.2s    8.6s   0.49
  9 EMAN8.2064-bitAVX2-MV4                   : 3543    7   2693    56.8 %   3495    74/128    4.2s    8.8s   0.47
 10 EMAN8.2064-bitAVX2-FAD15                 : 3536    6   2755    55.9 %   3495    81/128    6.1s    9.4s   0.39
 11 TheHuntsman1bmi2-MateSearch              : 3535    8   2599    55.4 %   3497    62/128    2.2s    8.8s   0.47
 12 Stockfish310722-MV4                      : 3529    7   2567    54.8 %   3496    68/128    4.2s    9.3s   0.44
 13 ProteusSF-Piranha220904-MV4              : 3527    7   2590    54.4 %   3496    68/128    4.2s    9.3s   0.41
 14 Sting28                                  : 3494    8   2425    48.9 %   3502    52/128    3.9s   10.5s   0.33
 15 Ceres0.97RC3-784038                      : 3490    8   2289    48.0 %   3504    49/128    3.3s   10.5s   0.37
 16 Fire8.NN.MC.3-ninu-0.3.bin-MV4           : 3486    8   2286    47.6 %   3503    50/128    4.0s   10.7s   0.36
 17 Stockfish310722                          : 3484    8   2374    47.6 %   3501    55/128    5.5s   10.9s   0.29
 18 Ceres0.97RC3-784822                      : 3483    8   2271    47.0 %   3504    48/128    3.5s   10.7s   0.34
 19 Lc0v0.30.0-dag+git.c91bf77-784038        : 3478    8   2261    46.1 %   3505    45/128    3.5s   11.0s   0.32
 20 Sting28-MV4                              : 3476    8   2275    45.9 %   3504    45/128    3.3s   10.9s   0.30
 21 Lc0v0.30.0-dev-784038                    : 3475    8   2213    45.6 %   3505    44/128    3.5s   10.7s   0.34
 22 Lc0v0.30.0-dag+git.c91bf77-784822        : 3468    8   2250    44.8 %   3505    46/128    4.7s   11.3s   0.29
 23 Dragon3.1byKomodoChess-MV4               : 3468    8   2244    44.9 %   3504    47/128    4.7s   11.2s   0.28
 24 SlowChessBlitz2.9avx2-MV4                : 3448    8   2173    41.9 %   3504    43/128    5.5s   11.8s   0.22
 25 Dragon3.1byKomodoChess                   : 3442    8   2134    40.8 %   3506    39/128    5.0s   12.0s   0.25
 26 Dragon3.1byKomodoChess-MCTS-MV30         : 3435    8   2133    39.8 %   3507    37/128    4.0s   11.8s   0.13
 27 Ethereal13.75(NNUE)-AnalysisMode-MV4     : 3427    8   2071    38.7 %   3507    34/128    4.3s   12.2s   0.21
 28 Berserk20220725-MV4                      : 3423    8   2059    38.2 %   3507    35/128    4.8s   12.2s   0.19
 29 RubiChess20220813(bmi2)-MV4              : 3414    9   2060    36.7 %   3508    29/128    3.4s   12.4s   0.18
 30 Koivisto8.13                             : 3382    9   1952    32.4 %   3510    22/128    3.4s   13.0s   0.14
 31 Revenge3.0b-MV4                          : 3368    8   2065    30.8 %   3509    30/128   12.4s   14.4s   0.03



MST1  : Mean solution time (solved positions only)
MST2  : Mean solution time (solved and unsolved positions)
RIndex: Score according to solution time ranking for each position

Nr. 13 ProteusSF-Piranha 220904, about the same rating as SF310722 with same MV4 setting, same nr. of solutions (68/128) the 2 Elo minus (at an error bar of 7) come from slightly less good time- ratios.
If you want me to, I can give it one more try single primary (MultiPV=1) but as you see at SF 310722, that's nr. 17 with its single primary run, it won't be better with a rather high probability. Sting so far is the only fish in list scoring better single- than multi- PV.
Most of the versions stored had their single primary runs too, leaving only best results in latest version of list and some of the single ones for direct comparison. One more fine side of EloStatTS is, the more runs compared to each other is the lesser the error bars get, always each and every single engine, setting and run being rated newly again.

Best regards

Whats Corrchess tactical ? i.e. CorChess3300522-Tactical-MV4

AlexChess · Post by **AlexChess** » Tue Sep 06, 2022 8:47 pm

criko wrote: ↑Tue Sep 06, 2022 5:18 pm

Code: Select all

Ryzen Threadripper PRO 3995WX
122 threads
8 GB hash
30 seconds per move

128 pos from Peter Martan revisited
fixed to 3000 ELO

    Program                                    Elo   +/-  Matches  Score   Av.Op.   S.Pos.   MST1    MST2   RIndex

  1 ShashChess24GD                           : 3026   14    395    54.7 %   2993    87/128    6.9s   14.3s   0.64
  2 ShashChess24                             : 3013   13    366    52.3 %   2997    83/128    6.8s   15.0s   0.63
  3 ProteusSF-Piranha220904                  : 2992   13    363    48.5 %   3002    77/128    7.5s   16.5s   0.60
  4 EMAN8.20                                 : 2985   14    361    47.2 %   3004    75/128    8.6s   17.5s   0.56
  5 Stockfish290822                          : 2983   13    361    46.8 %   3005    76/128    9.1s   17.6s   0.57

MST1  : Mean solution time (solved positions only)
MST2  : Mean solution time (solved and unsolved positions)
RIndex: Score according to solution time ranking for each position

Thank you Criko!

AlexChess · Post by **AlexChess** » Tue Sep 06, 2022 8:50 pm

Master Om wrote: ↑Tue Sep 06, 2022 8:12 pm

peter wrote: ↑Tue Sep 06, 2022 5:30 pm

AlexChess wrote: ↑Tue Sep 06, 2022 2:02 pm

thus you could compare directly to the latest runs and EloStatTS- evaluation given there too.

Anyhow I don't have Proteus, otherwise I'd simply let it have a run with my usual hardware- TC and add it to my EloStatTS- list, if I'll do so sooner or later, I'll let you know the result,
regards
If you have time and you like, you find here also the avx2 bmi2 binaries for Windows.
http://www.microsmeta.com/DBLOG/articol ... icolo=1525

I would be curious about ProteusSF performance with good hardware
(My brother has a better Ryzen 9 3900x but the PC Is busy right now)

Took the bmi2- compile. it had the edge over avx2 with bench- command in console on my Ryzen as for n/s.

15"/pos., 2 extra plies, 2G hash, 6men Syzgygs, MultiPV=4
which is the standard- run for me as for SF dev. and it's branches at the moment with this one suite, you used of your last run too:

Code: Select all

Löse: C:\Users\Peter\Documents\ChessBase\Testsets\2\1284.cbh
Maximale Lösungszeit = 15s.

1. HTC108,2 - Corbit,D,  Tactical Insanity Nr.1   Gelöst in 2.25s/21; Gelöst: 1
2. TacticalInsanityNr.9 - CorbitD,  HTC108-5 S   > 15s.
3. Carlsen,M - Caruana,F,  HTC108-7 WM2018   Gelöst in 1.28s/18; Gelöst: 2
4. ACT-Suite,N - Dorsz,O,  HTC108-8   Gelöst in 2.16s/19; Gelöst: 3
5. van Foreest,J - L'Ami,E,  HTC108-9 Zug 24...Sideline   > 15s.
6. Konig?,C - Cornforth96?,C,  HTC108-11 Arasan   Gelöst in 10.69s/19; Gelöst: 4
7. PoorFish,C - Borderline,D,  HTC108-12   > 15s.
8. LC0,C - SF,C,  HTC108-15 S   Gelöst in 8.39s/24; Gelöst: 5
9. AlphaZero,H - SF,  Game9 2017   Gelöst in 3.14s/23; Gelöst: 6
10. Gashimov,V - Azariov,S,  2011 HTC108-23   Gelöst in 8.81s/27; Gelöst: 7
11. CorbitD,C,  HTC108-25   > 15s.
12. Gusia - Barlov,  Schweiz 1980 HTC108-28   > 15s.
13. Bondarenko,& - Glarean,P,  HTC108-29   Gelöst in 3.27s/36; Gelöst: 8
14. Rudolph,W,  Studie 1912 HTC108-30 S   > 15s.
15. Gusev,Y - Auerbach,E,  HTC108-42   Gelöst in 1.31s/21; Gelöst: 9
16. Van Essen,M - 2004,#,  HTC108-48 (-9ZNr41) S   Gelöst in 14.13s/28; Gelöst: 10
17. Neghina,M - Stronghold,2,  HTC108-49 S   > 15s.
18. Tunik - Duzhakov,  2011 HTC108-52   Gelöst in 0.97s/20; Gelöst: 11
19. Neghina,M - Chase,D,  HTC108-54   Gelöst in 3.36s/27; Gelöst: 12
20. SolomonKing,? - 2.g4,H,  HTC108-80 S   Gelöst in 1.06s/17; Gelöst: 13
21. Nicolic,E - Fischer,R,  HTC108-94 S   Gelöst in 0.44s/15; Gelöst: 14
22. Morozevich,A - Vitiugov,N,  Reggio 2011 HTC108-100   Gelöst in 11.53s/25; Gelöst: 15
23. M. Garcia - P. Krug,S - Glarean,  The Engine Crackers   Gelöst in 7.09s/39; Gelöst: 16
24. Zepler,E - Studie,1,   2020   Gelöst in 9.70s/21; Gelöst: 17
25. Formela,M - Studie,2,  Polski Zwiazek Szachowy 2019   Gelöst in 3.59s/21; Gelöst: 18
26. Stoofvlees - SF,  TCEC 2019   Gelöst in 0.06s/9; Gelöst: 19
27. Lasker,E - Lipke,P,  Nebenvariante 41.Ke4! MS 1889   Gelöst in 3.75s/25; Gelöst: 20
28. Los,A - Kubicki,T,  corr LIPEAD40 (PER) 2016   Gelöst in 6.34s/25; Gelöst: 21
29. PurePower - Exxon,  Chessbase online 2021   Gelöst in 14.89s/29; Gelöst: 22
30. Bauer,R - Zhak,B,  WC30/final ICCF 2017   Gelöst in 2.08s/19; Gelöst: 23
31. Mihai Neghina - Desperation,  White to move and draw S 12   Gelöst in 0.03s/9; Gelöst: 24
32. Tauber,H - Sikorsky,H,  37.e5! 2018   > 15s.
33. Bondarenko+Gorgiev,S - BrillanterSchachzug,1,   2008   > 15s.
34. ACT3,? - Festung,  S   > 15s.
35. ACT3,? - Studie?   Gelöst in 4.13s/33; Gelöst: 25
36. ACT3,?   > 15s.
37. ACT3,? - Festung   Gelöst in 3.13s/19; Gelöst: 26
38. ACT3,? - Festung,  S   > 15s.
39. ACT3,? - Studie?   Gelöst in 2.41s/27; Gelöst: 27
40. ACT3,? - Studie?,  S   Gelöst in 1.34s/17; Gelöst: 28
41. Neghina,M - GoldenerKÃ¤fig,2,  S Sibiu 2009   > 15s.
42. Ree,H - Hort,V,  Wijk 1986 2009   > 15s.
43. Neghina,M - WhieTo,M,  2018? S   > 15s.
44. Popov,S - Glarean 2006,1,  HTC108-58 2008   Gelöst in 1.44s/18; Gelöst: 29
45. Sikorsky,H - Novak,J,  Sideline ICCF 2017   Gelöst in 3.39s/19; Gelöst: 30
46. Krug,P - CCC,P,  S 2022   > 15s.
47. TCEC,S - Nr.8,j,  CCC 2022   Gelöst in 15.98s/34; Gelöst: 31
48. TCEC,S - Nr.22,r,  CCC 2022   > 15s.
49. Sikorsky,H - Vinchev,S,  corr GER, Hiarcs 2016   Gelöst in 5.92s/23; Gelöst: 32
50. Zemljanski,Y - 1move,c,  Tsjechover-90 S 1999   > 15s.
51. Study,?,  IQ 100 2012   Gelöst in 0.34s/10; Gelöst: 33
52. Study?,?,  ACT3   Gelöst in 11.94s/21; Gelöst: 34
53. Study?,?,  TTT2 31   Gelöst in 8.36s/46; Gelöst: 35
54. Semenikov+,D - Sikorsky,H,  corr. USA 2021   Gelöst in 14.23s/26; Gelöst: 36
55. Petrov,M - Sikorsky,H,  CL/2021 ICCF   Gelöst in 4.06s/22; Gelöst: 37
56. Study,? - CCC,  ACT5 11   > 15s.
57. Study,?,  ACT5 29   > 15s.
58. ERET 015 - Endspiel D&B vs T&L&B,  Becker 2015   Gelöst in 0.38s/16; Gelöst: 38
59. ERET 032 - Zugzwang,  Fahrni 1922   > 15s.
60. ERET 037 - Zugzwang,  Garcia 2000   > 15s.
61. ERET 046 - Endspiel T&S vs T&S,  Grandelius-Raznikov, Albena 2011   > 15s.
62. ERET 050 - Koenigsangriff,  Hansen-Barua, Biel 1993   Gelöst in 4.24s/26; Gelöst: 39
63. ERET 090 - Endspiel L vs L,  Salai 2011   > 15s.
64. ERET 093 - Endspiel T&S&B vs T&T&L,  Simkhovich 1923   > 15s.
65. ERET 094 - Damenopfer,  Sirobaba-Chaika, CorrGame 2011   Gelöst in 3.81s/23; Gelöst: 40
66. Fortress,S,  ACT3-51 S   Gelöst in 11.94s/38; Gelöst: 41
67. ACT4,N,  ACT4-1   Gelöst in 2.52s/24; Gelöst: 42
68. Cyclic,Z,  ACT5-25 2   > 15s.
69. Blass,U - CCC,  ACT5-27 2   > 15s.
70. Campioli,M - #14,?,  ACT5-28 2   Gelöst in 5.63s/19; Gelöst: 43
71. Krug,P,  ACT5-30 2   Gelöst in 3.31s/26; Gelöst: 44
72. KrugP,G - HHdbVI.0044383.001,a,  ACT5-31 1   Gelöst in 3.27s/27; Gelöst: 45
73. Kos,V - ?,  ACT5-34 2   > 15s.
74. Sokka,H - HHdbVI.1076075.001,a,  ACT5-36 1   Gelöst in 0.47s/17; Gelöst: 46
75. Sehwers,J - HHdbVI.1643584.002a.,8,  ACT5-ana   Gelöst in 0.16s/12; Gelöst: 47
76. Zinar,M - HHdbVI.0210037.002a.,0,  ACT5-44 2   > 15s.
77. Nestorescu,V - HHdbVI.0708805.002a.,3,  ACT5-46 1   Gelöst in 8.28s/40; Gelöst: 48
78. Timman,J - HHdbVI.0033988.002a.,0,  ACT5-48 2   > 15s.
79. Unknown,A,  ACT5-51 2   Gelöst in 0.11s/10; Gelöst: 49
80. Ivanov,V,  ACT5-53 2   Gelöst in 0.94s/41; Gelöst: 50
81. Bernhardt,G,  ACT5-58 2   Gelöst in 1.77s/38; Gelöst: 51
82. Unknows,A,  ACT5-61 2   > 15s.
83. Naef,W,  ACT5-63 2   Gelöst in 2.83s/18; Gelöst: 52
84. #7,?,  ACT5-67 2   > 15s.
85. #9,?,  ACT5-68 2   Gelöst in 2.39s/33; Gelöst: 53
86. SilhanJ,Z,  ACT5-59 3   Gelöst in 0.20s/12; Gelöst: 54
87. Hiarcs,?,  TTT2 2   Gelöst in 0.81s/16; Gelöst: 55
88. Hiarcs,?,  TTT2 6 2   Gelöst in 0.33s/13; Gelöst: 56
89. Derived,f - StavrietskyA,2,  TTT2 14   Gelöst in 0.64s/17; Gelöst: 57
90. Midgame,? - ?,  TTT2 23   > 15s.
91. TTT2.053,  TTT2   > 15s.
92. TTT2.073,  TTT2   Gelöst in 1.95s/23; Gelöst: 58
93. RoxlauM,G - HHdbVI,  ACT4 4 1   > 15s.
94. Smyslov,V,  ACT4-26 1   > 15s.
95. Smyslov,V,  ACT4-41 1   > 15s.
96. JostenG,   2008   Gelöst in 0.11s/9; Gelöst: 59
97. Study,?,  ACT4-59   > 15s.
98. Wotawa,A,  ACT4-66 1   > 15s.
99. Study,?,  ACT4-90 1   Gelöst in 2.24s/30; Gelöst: 60
100. Bethge,F,  ACT4-91   Gelöst in 3.72s/23; Gelöst: 61
101. Blathy,O,  ACT4-94 1   > 15s.
102. Cortlever,N - HHdbVI,  ACT3-29 1   > 15s.
103. Korolkov,V,  ACT3-38   > 15s.
104. Fortress,?,  ACT3-41 1   > 15s.
105. Unknown,A,  ACT3-48   Gelöst in 1.80s/23; Gelöst: 62
106. Kraemer,A,  ACT3-49   > 15s.
107. Sivkov,N - #10,?,  ACT3-88   > 15s.
108. Timman=J - Glarean,N,   2012   Gelöst in 0.44s/17; Gelöst: 63
109. Boudy Bueno,J - Szabo,L,  Varna 1979  Txb2!? Eret 17   Gelöst in 6.13s/24; Gelöst: 64
110. Lc0-dev - Stockfish,  ECO MegaMatch II! (1|1) 2020   Gelöst in 0.72s/17; Gelöst: 65
111. Carlsen,M - L'Ami,E,  Corus B VLH16 35 2006   Gelöst in 1.61s/19; Gelöst: 66
112. Bazlo,Y - 10moves,l,  2019 HHdbVI 1   > 15s.
113. Opening,H - !,?   > 15s.
114. TCEC,r,  CCC   > 15s.
115. TCEC,r,  CCC Nr.5   > 15s.
116. Gleichmann,M - Praznik,N,  corr CT21/final 2019   > 15s.
117. Yarmonov,I - Glarean,  2020   > 15s.
118. Eman - SugaR,  Glarean   > 15s.
119. Hobacle's,V - Walter Eigenmann's,S   > 15s.
120. Krug,P - Glarean,E,  2018   > 15s.
121. Gniazdowski,M - Rau,J,  corr CL/2019/C8 Glarean   > 15s.
122. Illescas,M - Glarean,E   > 15s.
123. Heinz,J - Glarean,  Study 1981   Gelöst in 8.02s/39; Gelöst: 67
124. Josten,G - Glarean,E,  Studie 2001   > 15s.
125. Timman,J - HHdbVI   Gelöst in 0.95s/15; Gelöst: 68
126. Gelly,M - HHdbVI,  Glarean   > 15s.
127. Krug,P - HHdbVI,G,   2013   > 15s.
128. Ganguly,S - RuszA,c,  HHdbVI 2017   > 15s.

Ergebnis: 68 aus 128 = 53.1%. Durchschnittszeit = 4.09s / 22.89

With EloStatTS in latest list:

Code: Select all


    Program                                    Elo   +/-  Matches  Score   Av.Op.   S.Pos.   MST1    MST2   RIndex

  1 CorChess3300522-Tactical-MV4             : 3577    6   2892    61.9 %   3493    85/128    3.3s    7.2s   0.59
  2 BlueMarlin15.3-avx2-MV4                  : 3575    7   2802    61.5 %   3493    82/128    3.1s    7.4s   0.60
  3 ShashChess24-GoldDigger-MV4              : 3566    6   2773    60.3 %   3493    80/128    3.6s    7.9s   0.58
  4 Crystallite1.1a-bmi2-ContMax-MV4         : 3560    7   2829    59.3 %   3495    79/128    3.7s    8.0s   0.52
  5 ShashChess23.1.1-GoldDigger-MV4          : 3560    7   2697    59.4 %   3494    80/128    3.7s    7.9s   0.55
  6 HypnoSFmpv110822-MV4                     : 3560    7   2742    59.3 %   3494    77/128    3.2s    7.9s   0.51
  7 TheHuntsman1bmi2-MV4                     : 3547    7   2760    57.3 %   3496    72/128    3.3s    8.4s   0.46
  8 Swordfish15.3a-bmi2-MV4                  : 3546    7   2694    57.3 %   3495    76/128    4.2s    8.6s   0.49
  9 EMAN8.2064-bitAVX2-MV4                   : 3543    7   2693    56.8 %   3495    74/128    4.2s    8.8s   0.47
 10 EMAN8.2064-bitAVX2-FAD15                 : 3536    6   2755    55.9 %   3495    81/128    6.1s    9.4s   0.39
 11 TheHuntsman1bmi2-MateSearch              : 3535    8   2599    55.4 %   3497    62/128    2.2s    8.8s   0.47
 12 Stockfish310722-MV4                      : 3529    7   2567    54.8 %   3496    68/128    4.2s    9.3s   0.44
 13 ProteusSF-Piranha220904-MV4              : 3527    7   2590    54.4 %   3496    68/128    4.2s    9.3s   0.41
 14 Sting28                                  : 3494    8   2425    48.9 %   3502    52/128    3.9s   10.5s   0.33
 15 Ceres0.97RC3-784038                      : 3490    8   2289    48.0 %   3504    49/128    3.3s   10.5s   0.37
 16 Fire8.NN.MC.3-ninu-0.3.bin-MV4           : 3486    8   2286    47.6 %   3503    50/128    4.0s   10.7s   0.36
 17 Stockfish310722                          : 3484    8   2374    47.6 %   3501    55/128    5.5s   10.9s   0.29
 18 Ceres0.97RC3-784822                      : 3483    8   2271    47.0 %   3504    48/128    3.5s   10.7s   0.34
 19 Lc0v0.30.0-dag+git.c91bf77-784038        : 3478    8   2261    46.1 %   3505    45/128    3.5s   11.0s   0.32
 20 Sting28-MV4                              : 3476    8   2275    45.9 %   3504    45/128    3.3s   10.9s   0.30
 21 Lc0v0.30.0-dev-784038                    : 3475    8   2213    45.6 %   3505    44/128    3.5s   10.7s   0.34
 22 Lc0v0.30.0-dag+git.c91bf77-784822        : 3468    8   2250    44.8 %   3505    46/128    4.7s   11.3s   0.29
 23 Dragon3.1byKomodoChess-MV4               : 3468    8   2244    44.9 %   3504    47/128    4.7s   11.2s   0.28
 24 SlowChessBlitz2.9avx2-MV4                : 3448    8   2173    41.9 %   3504    43/128    5.5s   11.8s   0.22
 25 Dragon3.1byKomodoChess                   : 3442    8   2134    40.8 %   3506    39/128    5.0s   12.0s   0.25
 26 Dragon3.1byKomodoChess-MCTS-MV30         : 3435    8   2133    39.8 %   3507    37/128    4.0s   11.8s   0.13
 27 Ethereal13.75(NNUE)-AnalysisMode-MV4     : 3427    8   2071    38.7 %   3507    34/128    4.3s   12.2s   0.21
 28 Berserk20220725-MV4                      : 3423    8   2059    38.2 %   3507    35/128    4.8s   12.2s   0.19
 29 RubiChess20220813(bmi2)-MV4              : 3414    9   2060    36.7 %   3508    29/128    3.4s   12.4s   0.18
 30 Koivisto8.13                             : 3382    9   1952    32.4 %   3510    22/128    3.4s   13.0s   0.14
 31 Revenge3.0b-MV4                          : 3368    8   2065    30.8 %   3509    30/128   12.4s   14.4s   0.03



MST1  : Mean solution time (solved positions only)
MST2  : Mean solution time (solved and unsolved positions)
RIndex: Score according to solution time ranking for each position

Nr. 13 ProteusSF-Piranha 220904, about the same rating as SF310722 with same MV4 setting, same nr. of solutions (68/128) the 2 Elo minus (at an error bar of 7) come from slightly less good time- ratios.
If you want me to, I can give it one more try single primary (MultiPV=1) but as you see at SF 310722, that's nr. 17 with its single primary run, it won't be better with a rather high probability. Sting so far is the only fish in list scoring better single- than multi- PV.
Most of the versions stored had their single primary runs too, leaving only best results in latest version of list and some of the single ones for direct comparison. One more fine side of EloStatTS is, the more runs compared to each other is the lesser the error bars get, always each and every single engine, setting and run being rated newly again.

Best regards

Whats Corrchess tactical ? i.e. CorChess3300522-Tactical-MV4

Thank you Master om!

AlexChess · Post by **AlexChess** » Tue Sep 06, 2022 8:55 pm

peter wrote: ↑Tue Sep 06, 2022 5:30 pm

AlexChess wrote: ↑Tue Sep 06, 2022 2:02 pm

thus you could compare directly to the latest runs and EloStatTS- evaluation given there too.

Anyhow I don't have Proteus, otherwise I'd simply let it have a run with my usual hardware- TC and add it to my EloStatTS- list, if I'll do so sooner or later, I'll let you know the result,
regards
If you have time and you like, you find here also the avx2 bmi2 binaries for Windows.
http://www.microsmeta.com/DBLOG/articol ... icolo=1525

I would be curious about ProteusSF performance with good hardware
(My brother has a better Ryzen 9 3900x but the PC Is busy right now)

Took the bmi2- compile. it had the edge over avx2 with bench- command in console on my Ryzen as for n/s.

15"/pos., 2 extra plies, 2G hash, 6men Syzgygs, MultiPV=4
which is the standard- run for me as for SF dev. and it's branches at the moment with this one suite, you used of your last run too:

Code: Select all

Löse: C:\Users\Peter\Documents\ChessBase\Testsets\2\1284.cbh
Maximale Lösungszeit = 15s.

1. HTC108,2 - Corbit,D,  Tactical Insanity Nr.1   Gelöst in 2.25s/21; Gelöst: 1
2. TacticalInsanityNr.9 - CorbitD,  HTC108-5 S   > 15s.
3. Carlsen,M - Caruana,F,  HTC108-7 WM2018   Gelöst in 1.28s/18; Gelöst: 2
4. ACT-Suite,N - Dorsz,O,  HTC108-8   Gelöst in 2.16s/19; Gelöst: 3
5. van Foreest,J - L'Ami,E,  HTC108-9 Zug 24...Sideline   > 15s.
6. Konig?,C - Cornforth96?,C,  HTC108-11 Arasan   Gelöst in 10.69s/19; Gelöst: 4
7. PoorFish,C - Borderline,D,  HTC108-12   > 15s.
8. LC0,C - SF,C,  HTC108-15 S   Gelöst in 8.39s/24; Gelöst: 5
9. AlphaZero,H - SF,  Game9 2017   Gelöst in 3.14s/23; Gelöst: 6
10. Gashimov,V - Azariov,S,  2011 HTC108-23   Gelöst in 8.81s/27; Gelöst: 7
11. CorbitD,C,  HTC108-25   > 15s.
12. Gusia - Barlov,  Schweiz 1980 HTC108-28   > 15s.
13. Bondarenko,& - Glarean,P,  HTC108-29   Gelöst in 3.27s/36; Gelöst: 8
14. Rudolph,W,  Studie 1912 HTC108-30 S   > 15s.
15. Gusev,Y - Auerbach,E,  HTC108-42   Gelöst in 1.31s/21; Gelöst: 9
16. Van Essen,M - 2004,#,  HTC108-48 (-9ZNr41) S   Gelöst in 14.13s/28; Gelöst: 10
17. Neghina,M - Stronghold,2,  HTC108-49 S   > 15s.
18. Tunik - Duzhakov,  2011 HTC108-52   Gelöst in 0.97s/20; Gelöst: 11
19. Neghina,M - Chase,D,  HTC108-54   Gelöst in 3.36s/27; Gelöst: 12
20. SolomonKing,? - 2.g4,H,  HTC108-80 S   Gelöst in 1.06s/17; Gelöst: 13
21. Nicolic,E - Fischer,R,  HTC108-94 S   Gelöst in 0.44s/15; Gelöst: 14
22. Morozevich,A - Vitiugov,N,  Reggio 2011 HTC108-100   Gelöst in 11.53s/25; Gelöst: 15
23. M. Garcia - P. Krug,S - Glarean,  The Engine Crackers   Gelöst in 7.09s/39; Gelöst: 16
24. Zepler,E - Studie,1,   2020   Gelöst in 9.70s/21; Gelöst: 17
25. Formela,M - Studie,2,  Polski Zwiazek Szachowy 2019   Gelöst in 3.59s/21; Gelöst: 18
26. Stoofvlees - SF,  TCEC 2019   Gelöst in 0.06s/9; Gelöst: 19
27. Lasker,E - Lipke,P,  Nebenvariante 41.Ke4! MS 1889   Gelöst in 3.75s/25; Gelöst: 20
28. Los,A - Kubicki,T,  corr LIPEAD40 (PER) 2016   Gelöst in 6.34s/25; Gelöst: 21
29. PurePower - Exxon,  Chessbase online 2021   Gelöst in 14.89s/29; Gelöst: 22
30. Bauer,R - Zhak,B,  WC30/final ICCF 2017   Gelöst in 2.08s/19; Gelöst: 23
31. Mihai Neghina - Desperation,  White to move and draw S 12   Gelöst in 0.03s/9; Gelöst: 24
32. Tauber,H - Sikorsky,H,  37.e5! 2018   > 15s.
33. Bondarenko+Gorgiev,S - BrillanterSchachzug,1,   2008   > 15s.
34. ACT3,? - Festung,  S   > 15s.
35. ACT3,? - Studie?   Gelöst in 4.13s/33; Gelöst: 25
36. ACT3,?   > 15s.
37. ACT3,? - Festung   Gelöst in 3.13s/19; Gelöst: 26
38. ACT3,? - Festung,  S   > 15s.
39. ACT3,? - Studie?   Gelöst in 2.41s/27; Gelöst: 27
40. ACT3,? - Studie?,  S   Gelöst in 1.34s/17; Gelöst: 28
41. Neghina,M - GoldenerKÃ¤fig,2,  S Sibiu 2009   > 15s.
42. Ree,H - Hort,V,  Wijk 1986 2009   > 15s.
43. Neghina,M - WhieTo,M,  2018? S   > 15s.
44. Popov,S - Glarean 2006,1,  HTC108-58 2008   Gelöst in 1.44s/18; Gelöst: 29
45. Sikorsky,H - Novak,J,  Sideline ICCF 2017   Gelöst in 3.39s/19; Gelöst: 30
46. Krug,P - CCC,P,  S 2022   > 15s.
47. TCEC,S - Nr.8,j,  CCC 2022   Gelöst in 15.98s/34; Gelöst: 31
48. TCEC,S - Nr.22,r,  CCC 2022   > 15s.
49. Sikorsky,H - Vinchev,S,  corr GER, Hiarcs 2016   Gelöst in 5.92s/23; Gelöst: 32
50. Zemljanski,Y - 1move,c,  Tsjechover-90 S 1999   > 15s.
51. Study,?,  IQ 100 2012   Gelöst in 0.34s/10; Gelöst: 33
52. Study?,?,  ACT3   Gelöst in 11.94s/21; Gelöst: 34
53. Study?,?,  TTT2 31   Gelöst in 8.36s/46; Gelöst: 35
54. Semenikov+,D - Sikorsky,H,  corr. USA 2021   Gelöst in 14.23s/26; Gelöst: 36
55. Petrov,M - Sikorsky,H,  CL/2021 ICCF   Gelöst in 4.06s/22; Gelöst: 37
56. Study,? - CCC,  ACT5 11   > 15s.
57. Study,?,  ACT5 29   > 15s.
58. ERET 015 - Endspiel D&B vs T&L&B,  Becker 2015   Gelöst in 0.38s/16; Gelöst: 38
59. ERET 032 - Zugzwang,  Fahrni 1922   > 15s.
60. ERET 037 - Zugzwang,  Garcia 2000   > 15s.
61. ERET 046 - Endspiel T&S vs T&S,  Grandelius-Raznikov, Albena 2011   > 15s.
62. ERET 050 - Koenigsangriff,  Hansen-Barua, Biel 1993   Gelöst in 4.24s/26; Gelöst: 39
63. ERET 090 - Endspiel L vs L,  Salai 2011   > 15s.
64. ERET 093 - Endspiel T&S&B vs T&T&L,  Simkhovich 1923   > 15s.
65. ERET 094 - Damenopfer,  Sirobaba-Chaika, CorrGame 2011   Gelöst in 3.81s/23; Gelöst: 40
66. Fortress,S,  ACT3-51 S   Gelöst in 11.94s/38; Gelöst: 41
67. ACT4,N,  ACT4-1   Gelöst in 2.52s/24; Gelöst: 42
68. Cyclic,Z,  ACT5-25 2   > 15s.
69. Blass,U - CCC,  ACT5-27 2   > 15s.
70. Campioli,M - #14,?,  ACT5-28 2   Gelöst in 5.63s/19; Gelöst: 43
71. Krug,P,  ACT5-30 2   Gelöst in 3.31s/26; Gelöst: 44
72. KrugP,G - HHdbVI.0044383.001,a,  ACT5-31 1   Gelöst in 3.27s/27; Gelöst: 45
73. Kos,V - ?,  ACT5-34 2   > 15s.
74. Sokka,H - HHdbVI.1076075.001,a,  ACT5-36 1   Gelöst in 0.47s/17; Gelöst: 46
75. Sehwers,J - HHdbVI.1643584.002a.,8,  ACT5-ana   Gelöst in 0.16s/12; Gelöst: 47
76. Zinar,M - HHdbVI.0210037.002a.,0,  ACT5-44 2   > 15s.
77. Nestorescu,V - HHdbVI.0708805.002a.,3,  ACT5-46 1   Gelöst in 8.28s/40; Gelöst: 48
78. Timman,J - HHdbVI.0033988.002a.,0,  ACT5-48 2   > 15s.
79. Unknown,A,  ACT5-51 2   Gelöst in 0.11s/10; Gelöst: 49
80. Ivanov,V,  ACT5-53 2   Gelöst in 0.94s/41; Gelöst: 50
81. Bernhardt,G,  ACT5-58 2   Gelöst in 1.77s/38; Gelöst: 51
82. Unknows,A,  ACT5-61 2   > 15s.
83. Naef,W,  ACT5-63 2   Gelöst in 2.83s/18; Gelöst: 52
84. #7,?,  ACT5-67 2   > 15s.
85. #9,?,  ACT5-68 2   Gelöst in 2.39s/33; Gelöst: 53
86. SilhanJ,Z,  ACT5-59 3   Gelöst in 0.20s/12; Gelöst: 54
87. Hiarcs,?,  TTT2 2   Gelöst in 0.81s/16; Gelöst: 55
88. Hiarcs,?,  TTT2 6 2   Gelöst in 0.33s/13; Gelöst: 56
89. Derived,f - StavrietskyA,2,  TTT2 14   Gelöst in 0.64s/17; Gelöst: 57
90. Midgame,? - ?,  TTT2 23   > 15s.
91. TTT2.053,  TTT2   > 15s.
92. TTT2.073,  TTT2   Gelöst in 1.95s/23; Gelöst: 58
93. RoxlauM,G - HHdbVI,  ACT4 4 1   > 15s.
94. Smyslov,V,  ACT4-26 1   > 15s.
95. Smyslov,V,  ACT4-41 1   > 15s.
96. JostenG,   2008   Gelöst in 0.11s/9; Gelöst: 59
97. Study,?,  ACT4-59   > 15s.
98. Wotawa,A,  ACT4-66 1   > 15s.
99. Study,?,  ACT4-90 1   Gelöst in 2.24s/30; Gelöst: 60
100. Bethge,F,  ACT4-91   Gelöst in 3.72s/23; Gelöst: 61
101. Blathy,O,  ACT4-94 1   > 15s.
102. Cortlever,N - HHdbVI,  ACT3-29 1   > 15s.
103. Korolkov,V,  ACT3-38   > 15s.
104. Fortress,?,  ACT3-41 1   > 15s.
105. Unknown,A,  ACT3-48   Gelöst in 1.80s/23; Gelöst: 62
106. Kraemer,A,  ACT3-49   > 15s.
107. Sivkov,N - #10,?,  ACT3-88   > 15s.
108. Timman=J - Glarean,N,   2012   Gelöst in 0.44s/17; Gelöst: 63
109. Boudy Bueno,J - Szabo,L,  Varna 1979  Txb2!? Eret 17   Gelöst in 6.13s/24; Gelöst: 64
110. Lc0-dev - Stockfish,  ECO MegaMatch II! (1|1) 2020   Gelöst in 0.72s/17; Gelöst: 65
111. Carlsen,M - L'Ami,E,  Corus B VLH16 35 2006   Gelöst in 1.61s/19; Gelöst: 66
112. Bazlo,Y - 10moves,l,  2019 HHdbVI 1   > 15s.
113. Opening,H - !,?   > 15s.
114. TCEC,r,  CCC   > 15s.
115. TCEC,r,  CCC Nr.5   > 15s.
116. Gleichmann,M - Praznik,N,  corr CT21/final 2019   > 15s.
117. Yarmonov,I - Glarean,  2020   > 15s.
118. Eman - SugaR,  Glarean   > 15s.
119. Hobacle's,V - Walter Eigenmann's,S   > 15s.
120. Krug,P - Glarean,E,  2018   > 15s.
121. Gniazdowski,M - Rau,J,  corr CL/2019/C8 Glarean   > 15s.
122. Illescas,M - Glarean,E   > 15s.
123. Heinz,J - Glarean,  Study 1981   Gelöst in 8.02s/39; Gelöst: 67
124. Josten,G - Glarean,E,  Studie 2001   > 15s.
125. Timman,J - HHdbVI   Gelöst in 0.95s/15; Gelöst: 68
126. Gelly,M - HHdbVI,  Glarean   > 15s.
127. Krug,P - HHdbVI,G,   2013   > 15s.
128. Ganguly,S - RuszA,c,  HHdbVI 2017   > 15s.

Ergebnis: 68 aus 128 = 53.1%. Durchschnittszeit = 4.09s / 22.89

With EloStatTS in latest list:

Code: Select all


    Program                                    Elo   +/-  Matches  Score   Av.Op.   S.Pos.   MST1    MST2   RIndex

  1 CorChess3300522-Tactical-MV4             : 3577    6   2892    61.9 %   3493    85/128    3.3s    7.2s   0.59
  2 BlueMarlin15.3-avx2-MV4                  : 3575    7   2802    61.5 %   3493    82/128    3.1s    7.4s   0.60
  3 ShashChess24-GoldDigger-MV4              : 3566    6   2773    60.3 %   3493    80/128    3.6s    7.9s   0.58
  4 Crystallite1.1a-bmi2-ContMax-MV4         : 3560    7   2829    59.3 %   3495    79/128    3.7s    8.0s   0.52
  5 ShashChess23.1.1-GoldDigger-MV4          : 3560    7   2697    59.4 %   3494    80/128    3.7s    7.9s   0.55
  6 HypnoSFmpv110822-MV4                     : 3560    7   2742    59.3 %   3494    77/128    3.2s    7.9s   0.51
  7 TheHuntsman1bmi2-MV4                     : 3547    7   2760    57.3 %   3496    72/128    3.3s    8.4s   0.46
  8 Swordfish15.3a-bmi2-MV4                  : 3546    7   2694    57.3 %   3495    76/128    4.2s    8.6s   0.49
  9 EMAN8.2064-bitAVX2-MV4                   : 3543    7   2693    56.8 %   3495    74/128    4.2s    8.8s   0.47
 10 EMAN8.2064-bitAVX2-FAD15                 : 3536    6   2755    55.9 %   3495    81/128    6.1s    9.4s   0.39
 11 TheHuntsman1bmi2-MateSearch              : 3535    8   2599    55.4 %   3497    62/128    2.2s    8.8s   0.47
 12 Stockfish310722-MV4                      : 3529    7   2567    54.8 %   3496    68/128    4.2s    9.3s   0.44
 13 ProteusSF-Piranha220904-MV4              : 3527    7   2590    54.4 %   3496    68/128    4.2s    9.3s   0.41
 14 Sting28                                  : 3494    8   2425    48.9 %   3502    52/128    3.9s   10.5s   0.33
 15 Ceres0.97RC3-784038                      : 3490    8   2289    48.0 %   3504    49/128    3.3s   10.5s   0.37
 16 Fire8.NN.MC.3-ninu-0.3.bin-MV4           : 3486    8   2286    47.6 %   3503    50/128    4.0s   10.7s   0.36
 17 Stockfish310722                          : 3484    8   2374    47.6 %   3501    55/128    5.5s   10.9s   0.29
 18 Ceres0.97RC3-784822                      : 3483    8   2271    47.0 %   3504    48/128    3.5s   10.7s   0.34
 19 Lc0v0.30.0-dag+git.c91bf77-784038        : 3478    8   2261    46.1 %   3505    45/128    3.5s   11.0s   0.32
 20 Sting28-MV4                              : 3476    8   2275    45.9 %   3504    45/128    3.3s   10.9s   0.30
 21 Lc0v0.30.0-dev-784038                    : 3475    8   2213    45.6 %   3505    44/128    3.5s   10.7s   0.34
 22 Lc0v0.30.0-dag+git.c91bf77-784822        : 3468    8   2250    44.8 %   3505    46/128    4.7s   11.3s   0.29
 23 Dragon3.1byKomodoChess-MV4               : 3468    8   2244    44.9 %   3504    47/128    4.7s   11.2s   0.28
 24 SlowChessBlitz2.9avx2-MV4                : 3448    8   2173    41.9 %   3504    43/128    5.5s   11.8s   0.22
 25 Dragon3.1byKomodoChess                   : 3442    8   2134    40.8 %   3506    39/128    5.0s   12.0s   0.25
 26 Dragon3.1byKomodoChess-MCTS-MV30         : 3435    8   2133    39.8 %   3507    37/128    4.0s   11.8s   0.13
 27 Ethereal13.75(NNUE)-AnalysisMode-MV4     : 3427    8   2071    38.7 %   3507    34/128    4.3s   12.2s   0.21
 28 Berserk20220725-MV4                      : 3423    8   2059    38.2 %   3507    35/128    4.8s   12.2s   0.19
 29 RubiChess20220813(bmi2)-MV4              : 3414    9   2060    36.7 %   3508    29/128    3.4s   12.4s   0.18
 30 Koivisto8.13                             : 3382    9   1952    32.4 %   3510    22/128    3.4s   13.0s   0.14
 31 Revenge3.0b-MV4                          : 3368    8   2065    30.8 %   3509    30/128   12.4s   14.4s   0.03



MST1  : Mean solution time (solved positions only)
MST2  : Mean solution time (solved and unsolved positions)
RIndex: Score according to solution time ranking for each position

Nr. 13 ProteusSF-Piranha 220904, about the same rating as SF310722 with same MV4 setting, same nr. of solutions (68/128) the 2 Elo minus (at an error bar of 7) come from slightly less good time- ratios.
If you want me to, I can give it one more try single primary (MultiPV=1) but as you see at SF 310722, that's nr. 17 with its single primary run, it won't be better with a rather high probability. Sting so far is the only fish in list scoring better single- than multi- PV.
Most of the versions stored had their single primary runs too, leaving only best results in latest version of list and some of the single ones for direct comparison. One more fine side of EloStatTS is, the more runs compared to each other is the lesser the error bars get, always each and every single engine, setting and run being rated newly again.

Best regards

Thank you Peter!

peter · Post by **peter** » Tue Sep 06, 2022 10:37 pm

Master Om wrote: ↑Tue Sep 06, 2022 8:12 pm Whats Corrchess tactical ? i.e. CorChess3300522-Tactical-MV4

ChessMan from Outskirts- forum end of May made a version of I.Ivec's CorChess with added UCI- option "Tactical".

http://outskirts.altervista.org/forum/v ... ost#p46299

MV4 means (as it does at the other engine- runs commented like this) MultIPV=4.
Single primary mode- runs don't have this comment, e.g. SF 310722 has one run single primary and one MV4 (MultiPV=4) - mode in list (ranking nr.12 and nr. 17),
regards

criko · Post by **criko** » Wed Sep 07, 2022 10:37 am

Code: Select all

Ryzen Threadripper PRO 3995WX
122 threads
8 GB hash
30 seconds per move

128 pos from Peter Martan revisited
fixed to 3000 ELO


    Program                                    Elo   +/-  Matches  Score   Av.Op.   S.Pos.   MST1    MST2   RIndex

  1 ShashChess24GD                           : 3044   11    778    57.2 %   2994    87/108    6.9s   11.4s   0.60
  2 ShashChess24                             : 3032   10    722    55.2 %   2995    83/128    6.8s   15.0s   0.59
  3 ProteusSF-Piranha220904                  : 3011   10    705    51.9 %   2999    77/108    7.5s   14.0s   0.57
  4 EMAN8.20                                 : 3003   10    699    50.5 %   3000    75/108    8.6s   15.1s   0.53
  5 Stockfish290822                          : 3002   10    705    50.4 %   3000    76/108    9.1s   15.3s   0.53
  6 FlamingTitz230822                        : 2997   11    690    49.5 %   3001    70/108    7.2s   15.2s   0.54
  7 Zeus27.3                                 : 2991   10    680    48.4 %   3002    71/108    7.5s   15.2s   0.50
  8 BigBallz010922                           : 2957   12    665    43.0 %   3006    59/128    8.9s   20.3s   0.42
  9 Dragon3.1                                : 2953   12    672    42.3 %   3006    54/108    7.4s   18.7s   0.45

MST1  : Mean solution time (solved positions only)
MST2  : Mean solution time (solved and unsolved positions)
RIndex: Score according to solution time ranking for each position

peter · Post by **peter** » Wed Sep 07, 2022 1:16 pm

criko wrote: ↑Wed Sep 07, 2022 10:37 am

Code: Select all

Ryzen Threadripper PRO 3995WX
122 threads
8 GB hash
30 seconds per move

128 pos from Peter Martan revisited
fixed to 3000 ELO


    Program                                    Elo   +/-  Matches  Score   Av.Op.   S.Pos.   MST1    MST2   RIndex

  1 ShashChess24GD                           : 3044   11    778    57.2 %   2994    87/108    6.9s   11.4s   0.60
  2 ShashChess24                             : 3032   10    722    55.2 %   2995    83/128    6.8s   15.0s   0.59
  3 ProteusSF-Piranha220904                  : 3011   10    705    51.9 %   2999    77/108    7.5s   14.0s   0.57
  4 EMAN8.20                                 : 3003   10    699    50.5 %   3000    75/108    8.6s   15.1s   0.53
  5 Stockfish290822                          : 3002   10    705    50.4 %   3000    76/108    9.1s   15.3s   0.53
  6 FlamingTitz230822                        : 2997   11    690    49.5 %   3001    70/108    7.2s   15.2s   0.54
  7 Zeus27.3                                 : 2991   10    680    48.4 %   3002    71/108    7.5s   15.2s   0.50
  8 BigBallz010922                           : 2957   12    665    43.0 %   3006    59/128    8.9s   20.3s   0.42
  9 Dragon3.1                                : 2953   12    672    42.3 %   3006    54/108    7.4s   18.7s   0.45

MST1  : Mean solution time (solved positions only)
MST2  : Mean solution time (solved and unsolved positions)
RIndex: Score according to solution time ranking for each position

Thanks for showing.
Seems you have mixed up results of 108 and 128 positions together into one evaluation, I think not even that does disturb the ranking and rating of EloStatTS much, because the "Matches" come from postions only, that all engines had to solve in common anyhow, as far as I understand it, out of the readme to that point under one of the last hearders there,
"5. Advantages of the new calucalation procedure":

The new calculation procedure is totally independent from the individual test set and the positions examined. It is not necessary that all programs are tested at the same set of positions.

What I wouldn't be sure about without having tried that on my own extensively so far: how many positions more or less have to be matched from engine to engine by the program, not to deteriorate the statistical reliability of the result too much, it's the same issue like with too little solved positions at all.
For the latest version of the suite e.g. I don't use it for as many engines of more differences in results then I did (and do) with earlier versions and other less difficult suites.
Mixed- suites- results would stand on its own too again somehow of course, even if EloStatTS makes different runs with different suites and different hardware- TCs possible to be evaluated as one final result out of one conjoint .pgn,
Anyhow still much better than mixing up postions of too much difference from one the other one as for their difficulty into one suite to be solved with one hardware- TC,
regards

Hard-Talkchess-2020 set, final release

Re: Hard-Talkchess-2020 set, final release

Re: Hard-Talkchess-2020 set, final release

Re: Hard-Talkchess-2020 set, final release

Re: Hard-Talkchess-2020 set, final release

Re: Hard-Talkchess-2020 set, final release

Re: Hard-Talkchess-2020 set, final release

Re: Hard-Talkchess-2020 set, final release

Re: Hard-Talkchess-2020 set, final release

Re: Hard-Talkchess-2020 set, final release

Re: Hard-Talkchess-2020 set, final release