ChessUSA.com TalkChess.com
Hosted by Your Move Chess & Games
 
 FAQFAQ   SearchSearch   MemberlistMemberlist   UsergroupsUsergroups   RegisterRegister 
 ProfileProfile   Log in to check your private messagesLog in to check your private messages   Log inLog in 

Komodo 5 64-bit for CCRL 40/4
Post new topic    TalkChess.com Forum Index -> Computer Chess Club: Tournaments and Matches Flat
View previous topic :: View next topic  
Author Message
Adam Hair



Joined: 06 May 2009
Posts: 1637
Location: Fuquay-Varina, North Carolina
PostPost subject: Re: Komodo 5 64-bit for CCRL 40/4    Posted: Sat Jul 21, 2012 4:37 am Reply to topic Reply with quote
lkaufman wrote:
Adam Hair wrote:
Update:

Code:
Komodo 5 64-bit               : 199 (+103,= 61,- 35), 67.1 %

Rybka 4.1 64-bit              :  24 (+  7,= 13,-  4), 56.2 %
Hannibal 1.2 64-bit           :  24 (+ 16,=  7,-  1), 81.2 %
Houdini 2.0c 64-bit           :  24 (+  4,=  5,- 15), 27.1 %
Naum 4.2 64-bit               :  24 (+ 19,=  4,-  1), 87.5 %
Critter 1.4 64-bit            :  23 (+  8,= 10,-  5), 56.5 %
Spike 1.4 Leiden              :  20 (+ 14,=  4,-  2), 80.0 %
Spark 1.0 64-bit              :  20 (+ 14,=  5,-  1), 82.5 %
Stockfish 2.2.2 64-bit        :  20 (+  6,=  9,-  5), 52.5 %
Gull 1.0a 64-bit              :  20 (+ 15,=  4,-  1), 85.0 %


So far, Komodo is having trouble with Houdini. But, this is not at odds with what Larry has been saying.

Bayeselo with default values:

Code:
Rank Name                                 Elo    +    - games score oppo. draws
   1 Houdini 2.0c 64-bit                 3207   21   20   892   71%  3051   32%
   2 Komodo 5 64-bit                     3162   43   42   199   67%  3037   31%
   3 Strelka 5.1 64-bit                  3153   25   25   545   66%  3037   43%
   4 Critter 1.4 64-bit                  3145   19   19   987   67%  3020   40%
   5 Komodo 4 64-bit                     3132   17   17  1395   69%  2985   30%
   6 Stockfish 2.2.2 64-bit              3128   20   20   814   60%  3057   39%
   7 Rybka 4.1 64-bit                    3124   17   16  1345   67%  3000   35%
   8 Fritz 13                            2990   18   17  1284   63%  2886   30%
   9 Naum 4.2 64-bit                     2981   17   17  1167   51%  2977   35%
  10 Chiron 1.1a 64-bit                  2980   20   20   890   62%  2892   32%
  11 Deep Shredder 12 64-bit OA On 1CPU  2965   20   19   907   57%  2920   37%
  12 Hannibal 1.2 64-bit                 2947   22   22   695   51%  2942   36%
  13 Hiarcs 13.2                         2929   22   22   714   52%  2920   35%
  14 Gull 1.0a 64-bit                    2928   18   18  1331   64%  2815   27%
  15 Spark 1.0 64-bit                    2920   15   15  1508   52%  2912   34%
  16 Spike 1.4 Leiden                    2919   18   18  1186   51%  2911   33%


Bayeselo using the commands 'elo', 'prior', 'mm 1 1', and 'scale 1'.

Code:
Rank Name                                 Elo    +    - games score oppo. draws
   1 Houdini 2.0c 64-bit                 3270   22   22   892   71%  3104   32%
   2 Komodo 5 64-bit                     3223   47   45   199   67%  3089   31%
   3 Strelka 5.1 64-bit                  3213   27   27   545   66%  3088   43%
   4 Critter 1.4 64-bit                  3204   21   20   987   67%  3070   40%
   5 Komodo 4 64-bit                     3190   18   18  1395   69%  3033   30%
   6 Stockfish 2.2.2 64-bit              3186   22   22   814   60%  3110   39%
   7 Rybka 4.1 64-bit                    3181   18   18  1345   67%  3049   35%
   8 Fritz 13                            3038   19   19  1284   63%  2927   30%
   9 Naum 4.2 64-bit                     3029   19   19  1167   51%  3024   35%
  10 Chiron 1.1a 64-bit                  3027   22   22   890   62%  2934   32%
  11 Deep Shredder 12 64-bit OA On 1CPU  3012   21   21   907   57%  2963   37%
  12 Hannibal 1.2 64-bit                 2992   24   24   695   51%  2987   36%
  13 Hiarcs 13.2                         2973   24   24   714   52%  2963   35%
  14 Gull 1.0a 64-bit                    2972   19   19  1331   64%  2852   27%
  15 Spark 1.0 64-bit                    2964   17   17  1508   52%  2955   34%
  16 Spike 1.4 Leiden                    2962   19   19  1186   51%  2954   33%


Ordo with White advantage:

Code:
                        ENGINE:  RATING    POINTS  PLAYED    (%)
               Houdini 2.0c 64-bit:  3273.3     629.5     892   70.6%
                   Komodo 5 64-bit:  3226.6     133.5     199   67.1%
                Strelka 5.1 64-bit:  3218.4     361.0     545   66.2%
                Critter 1.4 64-bit:  3212.0     660.0     987   66.9%
            Stockfish 2.2.2 64-bit:  3190.8     486.5     814   59.8%
                   Komodo 4 64-bit:  3190.6     962.5    1395   69.0%
                  Rybka 4.1 64-bit:  3187.0     897.5    1345   66.7%
                          Fritz 13:  3032.6     812.5    1284   63.3%
                   Naum 4.2 64-bit:  3024.9     590.5    1167   50.6%
                Chiron 1.1a 64-bit:  3022.6     552.0     890   62.0%
Deep Shredder 12 64-bit OA On 1CPU:  3006.9     512.5     907   56.5%
               Hannibal 1.2 64-bit:  2988.2     355.0     695   51.1%
                       Hiarcs 13.2:  2969.8     370.0     714   51.8%
                  Gull 1.0a 64-bit:  2967.8     855.5    1331   64.3%
                  Spark 1.0 64-bit:  2959.4     780.0    1508   51.7%
                  Spike 1.4 Leiden:  2955.8     609.0    1186   51.3%


So, so far you are showing a again over K4 of 30,33, or 36 elo depending on the method of rating. We are currently showing 35. That's pretty good agreement!
It now appears that if there is any problem with AMD, it is small and perhaps not easily addressed by us, since we don't have an AMD machine. So I think it's likely that the initial release is fine for testing on both AMD and Intel.



My results are still jumping around. I am now showing an improvement over Komodo 4 of 51 to 58 Elo.

Code:
Komodo 5 64-bit               : 298 (+166,= 85,- 47), 70.0 %

Rybka 4.1 64-bit              :  36 (+ 13,= 17,-  6), 59.7 %
Hannibal 1.2 64-bit           :  36 (+ 27,=  8,-  1), 86.1 %
Houdini 2.0c 64-bit           :  34 (+  9,=  7,- 18), 36.8 %
Naum 4.2 64-bit               :  32 (+ 25,=  5,-  2), 85.9 %
Critter 1.4 64-bit            :  32 (+  9,= 16,-  7), 53.1 %
Spike 1.4 Leiden              :  32 (+ 22,=  7,-  3), 79.7 %
Spark 1.0 64-bit              :  32 (+ 24,=  6,-  2), 84.4 %
Stockfish 2.2.2 64-bit        :  32 (+ 12,= 13,-  7), 57.8 %
Gull 1.0a 64-bit              :  32 (+ 25,=  6,-  1), 87.5 %



Bayeselo (default)

Code:
Rank Name                                 Elo    +    - games score oppo. draws
   1 Houdini 2.0c 64-bit                 3207   21   20   902   70%  3053   31%
   2 Komodo 5 64-bit                     3183   36   35   298   70%  3034   29%
   3 Strelka 5.1 64-bit                  3153   25   25   545   66%  3037   43%
   4 Critter 1.4 64-bit                  3146   19   19   996   67%  3022   40%
   5 Komodo 4 64-bit                     3132   17   17  1395   69%  2985   30%
   6 Stockfish 2.2.2 64-bit              3128   20   20   826   59%  3060   39%
   7 Rybka 4.1 64-bit                    3124   17   16  1357   66%  3002   35%
   8 Fritz 13                            2990   18   17  1284   63%  2885   30%
   9 Naum 4.2 64-bit                     2981   17   17  1175   50%  2979   35%
  10 Chiron 1.1a 64-bit                  2980   20   20   890   62%  2892   32%
  11 Deep Shredder 12 64-bit OA On 1CPU  2965   20   19   907   57%  2920   37%
  12 Hannibal 1.2 64-bit                 2946   22   22   707   50%  2946   35%
  13 Hiarcs 13.2                         2929   22   22   714   52%  2920   35%
  14 Gull 1.0a 64-bit                    2927   18   18  1343   64%  2818   27%
  15 Spark 1.0 64-bit                    2920   15   15  1520   51%  2914   34%
  16 Spike 1.4 Leiden                    2919   18   17  1198   51%  2914   33%



Bayeselo (prior 0.1, mm 1 1, scale 1)

Code:
Rank Name                                 Elo    +    - games score oppo. draws
   1 Houdini 2.0c 64-bit                 3270   22   22   902   70%  3106   31%
   2 Komodo 5 64-bit                     3246   39   38   298   70%  3086   29%
   3 Strelka 5.1 64-bit                  3213   27   27   545   66%  3088   43%
   4 Critter 1.4 64-bit                  3205   21   20   996   67%  3072   40%
   5 Komodo 4 64-bit                     3190   18   18  1395   69%  3033   30%
   6 Stockfish 2.2.2 64-bit              3186   22   22   826   59%  3113   39%
   7 Rybka 4.1 64-bit                    3181   18   18  1357   66%  3051   35%
   8 Fritz 13                            3038   19   19  1284   63%  2927   30%
   9 Naum 4.2 64-bit                     3029   19   19  1175   50%  3026   35%
  10 Chiron 1.1a 64-bit                  3027   22   22   890   62%  2934   32%
  11 Deep Shredder 12 64-bit OA On 1CPU  3012   21   21   907   57%  2963   37%
  12 Hannibal 1.2 64-bit                 2991   24   24   707   50%  2992   35%
  13 Hiarcs 13.2                         2973   24   24   714   52%  2963   35%
  14 Gull 1.0a 64-bit                    2972   19   19  1343   64%  2855   27%
  15 Spark 1.0 64-bit                    2964   17   17  1520   51%  2958   34%
  16 Spike 1.4 Leiden                    2963   19   19  1198   51%  2958   33%



Ordo (with offset)

Code:
                           ENGINE:  RATING    POINTS  PLAYED    (%)
               Houdini 2.0c 64-bit:  3272.9     633.5     902   70.2%
                   Komodo 5 64-bit:  3248.9     208.5     298   70.0%
                Strelka 5.1 64-bit:  3218.5     361.0     545   66.2%
                Critter 1.4 64-bit:  3213.5     665.0     996   66.8%
                   Komodo 4 64-bit:  3190.6     962.5    1395   69.0%
            Stockfish 2.2.2 64-bit:  3190.5     490.5     826   59.4%
                  Rybka 4.1 64-bit:  3186.9     901.5    1357   66.4%
                          Fritz 13:  3032.5     812.5    1284   63.3%
                   Naum 4.2 64-bit:  3025.0     592.0    1175   50.4%
                Chiron 1.1a 64-bit:  3022.6     552.0     890   62.0%
Deep Shredder 12 64-bit OA On 1CPU:  3006.8     512.5     907   56.5%
               Hannibal 1.2 64-bit:  2986.9     355.5     707   50.3%
                       Hiarcs 13.2:  2969.7     370.0     714   51.8%
                  Gull 1.0a 64-bit:  2967.3     856.5    1343   63.8%
                  Spark 1.0 64-bit:  2959.3     781.5    1520   51.4%
                  Spike 1.4 Leiden:  2956.4     611.5    1198   51.0%

_________________
Adam's Computer Chess Pages
Back to top
View user's profile Send private message Visit poster's website
Display posts from previous:   
Subject Author Date/Time
Komodo 5 64-bit for CCRL 40/4 Adam Hair Fri Jul 20, 2012 11:54 am
      Re: Komodo 5 64-bit for CCRL 40/4 Adam Hair Fri Jul 20, 2012 6:41 pm
            Re: Komodo 5 64-bit for CCRL 40/4 Larry Kaufman Fri Jul 20, 2012 8:43 pm
                  Re: Komodo 5 64-bit for CCRL 40/4 Maurizio Maglio Sat Jul 21, 2012 12:21 am
                  Re: Komodo 5 64-bit for CCRL 40/4 Adam Hair Sat Jul 21, 2012 4:37 am
            Re: Komodo 5 64-bit for CCRL 40/4 Adam Hair Sat Jul 21, 2012 1:01 pm
                  Re: Komodo 5 64-bit for CCRL 40/4 Adam Hair Sat Jul 21, 2012 8:46 pm
                        Re: Komodo 5 64-bit for CCRL 40/4 Adam Hair Sun Jul 22, 2012 12:00 pm
      Re: Komodo 5 64-bit for CCRL 40/4 George Speight Sat Jul 21, 2012 1:51 am
            Re: Question For You Concerning T.Control, Adam! George Speight Sat Jul 21, 2012 2:05 am
                  Re: Question For You Concerning T.Control, Adam! Adam Hair Sat Jul 21, 2012 3:38 am
                        Re: Question For You Concerning T.Control, Adam! George Speight Sat Jul 21, 2012 4:39 am
            Re: Komodo 5 64-bit for CCRL 40/4 Adam Hair Sat Jul 21, 2012 3:39 am
Post new topic    TalkChess.com Forum Index -> Computer Chess Club: Tournaments and Matches

 
Jump to:  
You cannot post new topics in this forum
You cannot reply to topics in this forum
You cannot edit your posts in this forum
You cannot delete your posts in this forum
You cannot vote in polls in this forum




Powered by phpBB © 2001, 2005 phpBB Group
Enhanced with Moby Threads