Benchmarks
Zeka testi
Modeller mutlak bir puana göre değil, ikili karşılaştırmayla sıralanıyor. Her soruda model çiftleri birebir karşılaştırılıyor ve Bradley-Terry modeli bu karşılaştırmalardan bir derece çıkarıyor. Aşağıdaki kazanma oranı, bu dereceyi cevapladığı soruya çeviriyor: bu model, tablodaki ortalama bir modeli ne sıklıkla yeniyor. %50 ortalamadır.
8.228
puanlanan çalıştırma
111.690
ikili karşılaştırma
24
prompt
4.629
puansız çalıştırma (sağlayıcı hatası)
24 sorunun 22 tanesi modelleri gerçekten ayırt ediyor. Geri kalanını neredeyse herkes aynı iyilikte yanıtlıyor ve sıralama sinyali taşımıyor — 100’e yakın mutlak bir puanın gerçekte ölçtüğü şey buydu.
- Kodlama 4/4
- Yaratıcı 2/2
- Olgusal 3/4
- Çok dilli 7/8
- Akıl yürütme 4/4
- Sağlık 2/2
Kazanma oranı
Elo 1174
- Kazanılan / kaybedilen / berabere
- 1062 / 83 / 1366
- prompt
- 20
- karşılaştırma
- 2511
- Jüri ortalaması
- 96.9
Kategoriye göre
Kazanma oranı
Elo 1169
- Kazanılan / kaybedilen / berabere
- 1047 / 97 / 1367
- prompt
- 20
- karşılaştırma
- 2511
- Jüri ortalaması
- 96.3
Kategoriye göre
Kazanma oranı
Elo 1166
- Kazanılan / kaybedilen / berabere
- 1190 / 178 / 1344
- prompt
- 24
- karşılaştırma
- 2712
- Jüri ortalaması
- 96.4
Kategoriye göre
Kazanma oranı
Elo 1157
- Kazanılan / kaybedilen / berabere
- 1085 / 133 / 1494
- prompt
- 24
- karşılaştırma
- 2712
- Jüri ortalaması
- 96.6
Kategoriye göre
Kazanma oranı
Elo 1148
- Kazanılan / kaybedilen / berabere
- 1015 / 188 / 1308
- prompt
- 20
- karşılaştırma
- 2511
- Jüri ortalaması
- 95.1
Kategoriye göre
Kazanma oranı
Elo 1148
- Kazanılan / kaybedilen / berabere
- 1009 / 185 / 1317
- prompt
- 20
- karşılaştırma
- 2511
- Jüri ortalaması
- 95.5
Kategoriye göre
Kazanma oranı
Elo 1146
- Kazanılan / kaybedilen / berabere
- 1060 / 184 / 1468
- prompt
- 24
- karşılaştırma
- 2712
- Jüri ortalaması
- 96.2
Kategoriye göre
Kazanma oranı
Elo 1145
- Kazanılan / kaybedilen / berabere
- 1017 / 208 / 1286
- prompt
- 20
- karşılaştırma
- 2511
- Jüri ortalaması
- 95.7
Kategoriye göre
Kazanma oranı
Elo 1143
- Kazanılan / kaybedilen / berabere
- 1022 / 228 / 1261
- prompt
- 20
- karşılaştırma
- 2511
- Jüri ortalaması
- 95.6
Kategoriye göre
Kazanma oranı
Elo 1141
- Kazanılan / kaybedilen / berabere
- 1105 / 258 / 1349
- prompt
- 24
- karşılaştırma
- 2712
- Jüri ortalaması
- 97.6
Kategoriye göre
Kazanma oranı
Elo 1140
- Kazanılan / kaybedilen / berabere
- 1042 / 204 / 1466
- prompt
- 24
- karşılaştırma
- 2712
- Jüri ortalaması
- 95.6
Kategoriye göre
Kazanma oranı
Elo 1137
- Kazanılan / kaybedilen / berabere
- 781 / 223 / 817
- prompt
- 14
- karşılaştırma
- 1821
- Jüri ortalaması
- 92.7
Kategoriye göre
Kazanma oranı
Elo 1132
- Kazanılan / kaybedilen / berabere
- 979 / 254 / 1278
- prompt
- 20
- karşılaştırma
- 2511
- Jüri ortalaması
- 96.1
Kategoriye göre
Kazanma oranı
Elo 1127
- Kazanılan / kaybedilen / berabere
- 941 / 244 / 1326
- prompt
- 20
- karşılaştırma
- 2511
- Jüri ortalaması
- 96.0
Kategoriye göre
Kazanma oranı
Elo 1125
- Kazanılan / kaybedilen / berabere
- 903 / 223 / 1385
- prompt
- 20
- karşılaştırma
- 2511
- Jüri ortalaması
- 95.3
Kategoriye göre
Kazanma oranı
Elo 1120
- Kazanılan / kaybedilen / berabere
- 775 / 279 / 830
- prompt
- 14
- karşılaştırma
- 1884
- Jüri ortalaması
- 91.5
Kategoriye göre
Kazanma oranı
Elo 1119
- Kazanılan / kaybedilen / berabere
- 979 / 281 / 1452
- prompt
- 24
- karşılaştırma
- 2712
- Jüri ortalaması
- 95.9
Kategoriye göre
Kazanma oranı
Elo 1110
- Kazanılan / kaybedilen / berabere
- 979 / 344 / 1389
- prompt
- 24
- karşılaştırma
- 2712
- Jüri ortalaması
- 95.3
Kategoriye göre
Kazanma oranı
Elo 1108
- Kazanılan / kaybedilen / berabere
- 899 / 324 / 1288
- prompt
- 20
- karşılaştırma
- 2511
- Jüri ortalaması
- 94.2
Kategoriye göre
Kazanma oranı
Elo 1106
- Kazanılan / kaybedilen / berabere
- 971 / 361 / 1380
- prompt
- 24
- karşılaştırma
- 2712
- Jüri ortalaması
- 95.0
Kategoriye göre
Kazanma oranı
Elo 1103
- Kazanılan / kaybedilen / berabere
- 1008 / 417 / 1287
- prompt
- 24
- karşılaştırma
- 2712
- Jüri ortalaması
- 94.5
Kategoriye göre
Kazanma oranı
Elo 1103
- Kazanılan / kaybedilen / berabere
- 976 / 386 / 1350
- prompt
- 24
- karşılaştırma
- 2712
- Jüri ortalaması
- 96.5
Kategoriye göre
Kazanma oranı
Elo 1096
- Kazanılan / kaybedilen / berabere
- 586 / 299 / 655
- prompt
- 16
- karşılaştırma
- 1540
- Jüri ortalaması
- 89.7
Kategoriye göre
Kazanma oranı
Elo 1091
- Kazanılan / kaybedilen / berabere
- 953 / 448 / 1311
- prompt
- 24
- karşılaştırma
- 2712
- Jüri ortalaması
- 95.5
Kategoriye göre
Kazanma oranı
Elo 1088
- Kazanılan / kaybedilen / berabere
- 990 / 504 / 1218
- prompt
- 24
- karşılaştırma
- 2712
- Jüri ortalaması
- 95.2
Kategoriye göre
Kazanma oranı
Elo 1088
- Kazanılan / kaybedilen / berabere
- 552 / 255 / 731
- prompt
- 14
- karşılaştırma
- 1538
- Jüri ortalaması
- 94.4
Kategoriye göre
Kazanma oranı
Elo 1087
- Kazanılan / kaybedilen / berabere
- 615 / 274 / 910
- prompt
- 23
- karşılaştırma
- 1799
- Jüri ortalaması
- 93.5
Kategoriye göre
Kazanma oranı
Elo 1085
- Kazanılan / kaybedilen / berabere
- 900 / 436 / 1376
- prompt
- 24
- karşılaştırma
- 2712
- Jüri ortalaması
- 90.2
Kategoriye göre
Kazanma oranı
Elo 1084
- Kazanılan / kaybedilen / berabere
- 850 / 429 / 1232
- prompt
- 20
- karşılaştırma
- 2511
- Jüri ortalaması
- 93.1
Kategoriye göre
Kazanma oranı
Elo 1084
- Kazanılan / kaybedilen / berabere
- 903 / 449 / 1360
- prompt
- 24
- karşılaştırma
- 2712
- Jüri ortalaması
- 92.9
Kategoriye göre
Kazanma oranı
Elo 1083
- Kazanılan / kaybedilen / berabere
- 801 / 398 / 1186
- prompt
- 20
- karşılaştırma
- 2385
- Jüri ortalaması
- 89.6
Kategoriye göre
Kazanma oranı
Elo 1083
- Kazanılan / kaybedilen / berabere
- 893 / 446 / 1373
- prompt
- 24
- karşılaştırma
- 2712
- Jüri ortalaması
- 95.1
Kategoriye göre
Kazanma oranı
Elo 1080
- Kazanılan / kaybedilen / berabere
- 780 / 396 / 1209
- prompt
- 20
- karşılaştırma
- 2385
- Jüri ortalaması
- 86.0
Kategoriye göre
Kazanma oranı
Elo 1077
- Kazanılan / kaybedilen / berabere
- 805 / 427 / 1320
- prompt
- 20
- karşılaştırma
- 2552
- Jüri ortalaması
- 89.2
Kategoriye göre
Kazanma oranı
Elo 1076
- Kazanılan / kaybedilen / berabere
- 871 / 470 / 1371
- prompt
- 24
- karşılaştırma
- 2712
- Jüri ortalaması
- 94.8
Kategoriye göre
Kazanma oranı
Elo 1074
- Kazanılan / kaybedilen / berabere
- 789 / 444 / 1152
- prompt
- 20
- karşılaştırma
- 2385
- Jüri ortalaması
- 80.6
Kategoriye göre
Kazanma oranı
Elo 1074
- Kazanılan / kaybedilen / berabere
- 895 / 512 / 1305
- prompt
- 24
- karşılaştırma
- 2712
- Jüri ortalaması
- 93.2
Kategoriye göre
Kazanma oranı
Elo 1073
- Kazanılan / kaybedilen / berabere
- 902 / 524 / 1286
- prompt
- 24
- karşılaştırma
- 2712
- Jüri ortalaması
- 94.3
Kategoriye göre
Kazanma oranı
Elo 1073
- Kazanılan / kaybedilen / berabere
- 911 / 536 / 1265
- prompt
- 24
- karşılaştırma
- 2712
- Jüri ortalaması
- 94.5
Kategoriye göre
Kazanma oranı
Elo 1072
- Kazanılan / kaybedilen / berabere
- 758 / 432 / 1123
- prompt
- 20
- karşılaştırma
- 2313
- Jüri ortalaması
- 82.6
Kategoriye göre
Kazanma oranı
Elo 1070
- Kazanılan / kaybedilen / berabere
- 501 / 290 / 608
- prompt
- 18
- karşılaştırma
- 1399
- Jüri ortalaması
- 92.6
Kategoriye göre
Kazanma oranı
Elo 1068
- Kazanılan / kaybedilen / berabere
- 762 / 451 / 1235
- prompt
- 20
- karşılaştırma
- 2448
- Jüri ortalaması
- 90.4
Kategoriye göre
Kazanma oranı
Elo 1066
- Kazanılan / kaybedilen / berabere
- 867 / 542 / 1303
- prompt
- 24
- karşılaştırma
- 2712
- Jüri ortalaması
- 94.1
Kategoriye göre
Kazanma oranı
Elo 1065
- Kazanılan / kaybedilen / berabere
- 722 / 437 / 1154
- prompt
- 20
- karşılaştırma
- 2313
- Jüri ortalaması
- 80.4
Kategoriye göre
Kazanma oranı
Elo 1063
- Kazanılan / kaybedilen / berabere
- 788 / 505 / 1218
- prompt
- 20
- karşılaştırma
- 2511
- Jüri ortalaması
- 87.2
Kategoriye göre
Kazanma oranı
Elo 1059
- Kazanılan / kaybedilen / berabere
- 648 / 414 / 1161
- prompt
- 19
- karşılaştırma
- 2223
- Jüri ortalaması
- 81.0
Kategoriye göre
Kazanma oranı
Elo 1058
- Kazanılan / kaybedilen / berabere
- 735 / 484 / 1292
- prompt
- 20
- karşılaştırma
- 2511
- Jüri ortalaması
- 93.5
Kategoriye göre
Kazanma oranı
Elo 1058
- Kazanılan / kaybedilen / berabere
- 778 / 529 / 1204
- prompt
- 20
- karşılaştırma
- 2511
- Jüri ortalaması
- 94.6
Kategoriye göre
Kazanma oranı
Elo 1055
- Kazanılan / kaybedilen / berabere
- 862 / 611 / 1239
- prompt
- 24
- karşılaştırma
- 2712
- Jüri ortalaması
- 89.4
Kategoriye göre
Kazanma oranı
Elo 1051
- Kazanılan / kaybedilen / berabere
- 831 / 610 / 1271
- prompt
- 24
- karşılaştırma
- 2712
- Jüri ortalaması
- 91.7
Kategoriye göre
Kazanma oranı
Elo 1048
- Kazanılan / kaybedilen / berabere
- 726 / 541 / 1244
- prompt
- 20
- karşılaştırma
- 2511
- Jüri ortalaması
- 93.0
Kategoriye göre
Kazanma oranı
Elo 1032
- Kazanılan / kaybedilen / berabere
- 807 / 720 / 1185
- prompt
- 24
- karşılaştırma
- 2712
- Jüri ortalaması
- 92.1
Kategoriye göre
Kazanma oranı
Elo 1029
- Kazanılan / kaybedilen / berabere
- 737 / 682 / 1092
- prompt
- 20
- karşılaştırma
- 2511
- Jüri ortalaması
- 92.5
Kategoriye göre
Kazanma oranı
Elo 1027
- Kazanılan / kaybedilen / berabere
- 784 / 741 / 986
- prompt
- 20
- karşılaştırma
- 2511
- Jüri ortalaması
- 90.4
Kategoriye göre
Kazanma oranı
Elo 1024
- Kazanılan / kaybedilen / berabere
- 734 / 707 / 1070
- prompt
- 20
- karşılaştırma
- 2511
- Jüri ortalaması
- 92.4
Kategoriye göre
Kazanma oranı
Elo 1016
- Kazanılan / kaybedilen / berabere
- 776 / 802 / 933
- prompt
- 20
- karşılaştırma
- 2511
- Jüri ortalaması
- 87.1
Kategoriye göre
Kazanma oranı
Elo 1003
- Kazanılan / kaybedilen / berabere
- 485 / 536 / 778
- prompt
- 23
- karşılaştırma
- 1799
- Jüri ortalaması
- 79.3
Kategoriye göre
Kazanma oranı
Elo 998
- Kazanılan / kaybedilen / berabere
- 766 / 925 / 1021
- prompt
- 24
- karşılaştırma
- 2712
- Jüri ortalaması
- 91.2
Kategoriye göre
Kazanma oranı
Elo 998
- Kazanılan / kaybedilen / berabere
- 585 / 719 / 1081
- prompt
- 20
- karşılaştırma
- 2385
- Jüri ortalaması
- 84.0
Kategoriye göre
Kazanma oranı
Elo 995
- Kazanılan / kaybedilen / berabere
- 515 / 647 / 1078
- prompt
- 20
- karşılaştırma
- 2240
- Jüri ortalaması
- 74.0
Kategoriye göre
Kazanma oranı
Elo 993
- Kazanılan / kaybedilen / berabere
- 521 / 671 / 824
- prompt
- 18
- karşılaştırma
- 2016
- Jüri ortalaması
- 83.0
Kategoriye göre
Kazanma oranı
Elo 992
- Kazanılan / kaybedilen / berabere
- 778 / 979 / 955
- prompt
- 24
- karşılaştırma
- 2712
- Jüri ortalaması
- 88.9
Kategoriye göre
Kazanma oranı
Elo 986
- Kazanılan / kaybedilen / berabere
- 728 / 973 / 1011
- prompt
- 24
- karşılaştırma
- 2712
- Jüri ortalaması
- 90.8
Kategoriye göre
Kazanma oranı
Elo 973
- Kazanılan / kaybedilen / berabere
- 680 / 1012 / 1020
- prompt
- 24
- karşılaştırma
- 2712
- Jüri ortalaması
- 83.0
Kategoriye göre
Kazanma oranı
Elo 967
- Kazanılan / kaybedilen / berabere
- 515 / 824 / 974
- prompt
- 20
- karşılaştırma
- 2313
- Jüri ortalaması
- 70.7
Kategoriye göre
Kazanma oranı
Elo 964
- Kazanılan / kaybedilen / berabere
- 669 / 1065 / 978
- prompt
- 24
- karşılaştırma
- 2712
- Jüri ortalaması
- 83.5
Kategoriye göre
Kazanma oranı
Elo 944
- Kazanılan / kaybedilen / berabere
- 662 / 1194 / 856
- prompt
- 24
- karşılaştırma
- 2712
- Jüri ortalaması
- 82.0
Kategoriye göre
Kazanma oranı
Elo 944
- Kazanılan / kaybedilen / berabere
- 361 / 639 / 538
- prompt
- 14
- karşılaştırma
- 1538
- Jüri ortalaması
- 58.3
Kategoriye göre
Kazanma oranı
Elo 933
- Kazanılan / kaybedilen / berabere
- 624 / 1236 / 852
- prompt
- 24
- karşılaştırma
- 2712
- Jüri ortalaması
- 83.1
Kategoriye göre
Kazanma oranı
Elo 932
- Kazanılan / kaybedilen / berabere
- 378 / 811 / 812
- prompt
- 19
- karşılaştırma
- 2001
- Jüri ortalaması
- 60.3
Kategoriye göre
Kazanma oranı
Elo 930
- Kazanılan / kaybedilen / berabere
- 617 / 1245 / 850
- prompt
- 24
- karşılaştırma
- 2712
- Jüri ortalaması
- 77.6
Kategoriye göre
Kazanma oranı
Elo 928
- Kazanılan / kaybedilen / berabere
- 378 / 798 / 633
- prompt
- 14
- karşılaştırma
- 1809
- Jüri ortalaması
- 54.8
Kategoriye göre
Kazanma oranı
Elo 922
- Kazanılan / kaybedilen / berabere
- 432 / 983 / 825
- prompt
- 20
- karşılaştırma
- 2240
- Jüri ortalaması
- 57.2
Kategoriye göre
Kazanma oranı
Elo 921
- Kazanılan / kaybedilen / berabere
- 518 / 1119 / 748
- prompt
- 20
- karşılaştırma
- 2385
- Jüri ortalaması
- 80.1
Kategoriye göre
Kazanma oranı
Elo 916
- Kazanılan / kaybedilen / berabere
- 372 / 758 / 408
- prompt
- 14
- karşılaştırma
- 1538
- Jüri ortalaması
- 69.1
Kategoriye göre
Kazanma oranı
Elo 911
- Kazanılan / kaybedilen / berabere
- 555 / 1254 / 702
- prompt
- 20
- karşılaştırma
- 2511
- Jüri ortalaması
- 77.8
Kategoriye göre
Kazanma oranı
Elo 906
- Kazanılan / kaybedilen / berabere
- 348 / 841 / 559
- prompt
- 14
- karşılaştırma
- 1748
- Jüri ortalaması
- 67.4
Kategoriye göre
Kazanma oranı
Elo 885
- Kazanılan / kaybedilen / berabere
- 559 / 1484 / 669
- prompt
- 24
- karşılaştırma
- 2712
- Jüri ortalaması
- 63.7
Kategoriye göre
Kazanma oranı
Elo 879
- Kazanılan / kaybedilen / berabere
- 284 / 803 / 451
- prompt
- 14
- karşılaştırma
- 1538
- Jüri ortalaması
- 55.9
Kategoriye göre
Kazanma oranı
Elo 839
- Kazanılan / kaybedilen / berabere
- 240 / 990 / 516
- prompt
- 18
- karşılaştırma
- 1746
- Jüri ortalaması
- 37.9
Kategoriye göre
Kazanma oranı
Elo 835
- Kazanılan / kaybedilen / berabere
- 441 / 1573 / 497
- prompt
- 20
- karşılaştırma
- 2511
- Jüri ortalaması
- 72.5
Kategoriye göre
Kazanma oranı
Elo 835
- Kazanılan / kaybedilen / berabere
- 221 / 853 / 373
- prompt
- 13
- karşılaştırma
- 1447
- Jüri ortalaması
- 52.2
Kategoriye göre
Kazanma oranı
Elo 820
- Kazanılan / kaybedilen / berabere
- 294 / 1235 / 464
- prompt
- 19
- karşılaştırma
- 1993
- Jüri ortalaması
- 42.5
Kategoriye göre
Kazanma oranı
Elo 803
- Kazanılan / kaybedilen / berabere
- 381 / 1673 / 457
- prompt
- 20
- karşılaştırma
- 2511
- Jüri ortalaması
- 51.7
Kategoriye göre
Kazanma oranı
Elo 798
- Kazanılan / kaybedilen / berabere
- 208 / 1154 / 485
- prompt
- 20
- karşılaştırma
- 1847
- Jüri ortalaması
- 36.6
Kategoriye göre
Kazanma oranı
Elo 796
- Kazanılan / kaybedilen / berabere
- 179 / 971 / 388
- prompt
- 14
- karşılaştırma
- 1538
- Jüri ortalaması
- 47.2
Kategoriye göre
Kazanma oranı
Elo 794
- Kazanılan / kaybedilen / berabere
- 426 / 1763 / 322
- prompt
- 20
- karşılaştırma
- 2511
- Jüri ortalaması
- 77.5
Kategoriye göre
Kazanma oranı
Elo 792
- Kazanılan / kaybedilen / berabere
- 192 / 915 / 292
- prompt
- 18
- karşılaştırma
- 1399
- Jüri ortalaması
- 41.4
Kategoriye göre
Kazanma oranı
Elo 780
- Kazanılan / kaybedilen / berabere
- 250 / 1275 / 353
- prompt
- 24
- karşılaştırma
- 1878
- Jüri ortalaması
- 44.1
Kategoriye göre
Kazanma oranı
Elo 771
- Kazanılan / kaybedilen / berabere
- 209 / 1338 / 446
- prompt
- 19
- karşılaştırma
- 1993
- Jüri ortalaması
- 44.0
Kategoriye göre
Kazanma oranı
Elo 768
- Kazanılan / kaybedilen / berabere
- 384 / 1958 / 370
- prompt
- 24
- karşılaştırma
- 2712
- Jüri ortalaması
- 48.1
Kategoriye göre
Kazanma oranı
Elo 750
- Kazanılan / kaybedilen / berabere
- 338 / 1996 / 378
- prompt
- 24
- karşılaştırma
- 2712
- Jüri ortalaması
- 44.4
Kategoriye göre
Kazanma oranı
Elo 726
- Kazanılan / kaybedilen / berabere
- 182 / 1437 / 345
- prompt
- 24
- karşılaştırma
- 1964
- Jüri ortalaması
- 30.7
Kategoriye göre
Kazanma oranı
Elo 692
- Kazanılan / kaybedilen / berabere
- 284 / 2181 / 247
- prompt
- 24
- karşılaştırma
- 2712
- Jüri ortalaması
- 37.3
Kategoriye göre
24 prompt üzerinde 111.690 ikili karşılaştırmadan 94 model sıralandı.
Geçici
Sıralamak için kanıt yetersiz: en az 5 prompt ve 30 karşılaştırma gerekiyor.
Kazanma oranı
Elo 155
- Kazanılan / kaybedilen / berabere
- 0 / 361 / 6
- prompt
- 4
- karşılaştırma
- 367
- Jüri ortalaması
- 0.0
Kategoriye göre