Hugging Face's logo

Spaces:
amu-cai
/
LLMZSZL_Leaderboard
Running

App Files Community
michal commited on
Commit
e88ceea
·
1 Parent(s): cce02aa

Add more models and sort years tables by model name

Browse files
Files changed (6) hide show
  1. leaderboards/all_types_years.json +649 -0
  2. leaderboards/llmzszl.json +97 -1
  3. src/structures/gim.py +3 -0
  4. src/structures/mat.py +3 -0
  5. src/structures/osm.py +3 -0
  6. src/structures/zaw.py +3 -0
leaderboards/all_types_years.json CHANGED
@@ -4010,5 +4010,654 @@
4010
  "(2019, 'Egzaminy Ósmoklasisty')": 0.5,
4011
  "(2022, 'Egzaminy Ósmoklasisty')": 0.2727272727272727,
4012
  "(2020, 'Egzaminy Ósmoklasisty')": 0.3333333333333333
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
4013
  }
4014
  }
 
4010
  "(2019, 'Egzaminy Ósmoklasisty')": 0.5,
4011
  "(2022, 'Egzaminy Ósmoklasisty')": 0.2727272727272727,
4012
  "(2020, 'Egzaminy Ósmoklasisty')": 0.3333333333333333
4013
+ },
4014
+ "CYFRAGOVPL__Llama-PLLuM-70B-base": {
4015
+ "(2010, 'Egzaminy Gimnazjalne')": 0.7777777777777778,
4016
+ "(2012, 'Egzaminy Gimnazjalne')": 0.5,
4017
+ "(2007, 'Egzaminy Gimnazjalne')": 0.7777777777777778,
4018
+ "(2005, 'Egzaminy Gimnazjalne')": 0.7333333333333333,
4019
+ "(2003, 'Egzaminy Gimnazjalne')": 0.7142857142857143,
4020
+ "(2008, 'Egzaminy Gimnazjalne')": 0.625,
4021
+ "(2018, 'Egzaminy Gimnazjalne')": 0.42857142857142855,
4022
+ "(2017, 'Egzaminy Gimnazjalne')": 0.6,
4023
+ "(2015, 'Egzaminy Gimnazjalne')": 0.4444444444444444,
4024
+ "(2019, 'Egzaminy Gimnazjalne')": 0.3333333333333333,
4025
+ "(2006, 'Egzaminy Gimnazjalne')": 0.6666666666666666,
4026
+ "(2014, 'Egzaminy Gimnazjalne')": 0.125,
4027
+ "(2011, 'Egzaminy Gimnazjalne')": 0.6875,
4028
+ "(2009, 'Egzaminy Gimnazjalne')": 1.0,
4029
+ "(2004, 'Egzaminy Gimnazjalne')": 0.6666666666666666,
4030
+ "(2013, 'Egzaminy Gimnazjalne')": 0.25,
4031
+ "(2016, 'Egzaminy Gimnazjalne')": 0.2,
4032
+ "(2002, 'Egzaminy Gimnazjalne')": 0.5,
4033
+ "(2019, 'Egzaminy Zawodowe')": 0.6650971159505592,
4034
+ "(2021, 'Egzaminy Zawodowe')": 0.6264967168791039,
4035
+ "(2023, 'Egzaminy Zawodowe')": 0.6447166921898928,
4036
+ "(2022, 'Egzaminy Zawodowe')": 0.6625874125874126,
4037
+ "(2024, 'Egzaminy Zawodowe')": 0.6166666666666667,
4038
+ "(2020, 'Egzaminy Zawodowe')": 0.666452442159383,
4039
+ "(2017, 'Egzaminy Zawodowe')": 0.6436241610738255,
4040
+ "(2018, 'Egzaminy Zawodowe')": 0.6701253782965845,
4041
+ "(2013, 'Egzaminy Zawodowe')": 0.5723014256619144,
4042
+ "(2014, 'Egzaminy Zawodowe')": 0.6423043852106621,
4043
+ "(2016, 'Egzaminy Zawodowe')": 0.6153846153846154,
4044
+ "(2015, 'Egzaminy Zawodowe')": 0.6357615894039735,
4045
+ "(2020, 'Egzaminy Maturalne')": 0.2857142857142857,
4046
+ "(2010, 'Egzaminy Maturalne')": 0.5555555555555556,
4047
+ "(2012, 'Egzaminy Maturalne')": 0.375,
4048
+ "(2007, 'Egzaminy Maturalne')": 0.4444444444444444,
4049
+ "(2005, 'Egzaminy Maturalne')": 0.75,
4050
+ "(2003, 'Egzaminy Maturalne')": 0.42857142857142855,
4051
+ "(2008, 'Egzaminy Maturalne')": 0.7142857142857143,
4052
+ "(2018, 'Egzaminy Maturalne')": 0.5588235294117647,
4053
+ "(2017, 'Egzaminy Maturalne')": 0.4642857142857143,
4054
+ "(2015, 'Egzaminy Maturalne')": 0.5161290322580645,
4055
+ "(2019, 'Egzaminy Maturalne')": 0.48148148148148145,
4056
+ "(2006, 'Egzaminy Maturalne')": 1.0,
4057
+ "(2014, 'Egzaminy Maturalne')": 0.6,
4058
+ "(2011, 'Egzaminy Maturalne')": 0.5,
4059
+ "(2009, 'Egzaminy Maturalne')": 0.8,
4060
+ "(2004, 'Egzaminy Maturalne')": 0.6,
4061
+ "(2013, 'Egzaminy Maturalne')": 0.8,
4062
+ "(2016, 'Egzaminy Maturalne')": 0.3870967741935484,
4063
+ "(2002, 'Egzaminy Maturalne')": 0.2,
4064
+ "(2023, 'Egzaminy Maturalne')": 0.5555555555555556,
4065
+ "(2021, 'Egzaminy Maturalne')": 0.24,
4066
+ "(2022, 'Egzaminy Maturalne')": 0.3548387096774194,
4067
+ "(2023, 'Egzaminy Ósmoklasisty')": 0.42857142857142855,
4068
+ "(2021, 'Egzaminy Ósmoklasisty')": 0.4,
4069
+ "(2019, 'Egzaminy Ósmoklasisty')": 0.5,
4070
+ "(2022, 'Egzaminy Ósmoklasisty')": 0.2727272727272727,
4071
+ "(2020, 'Egzaminy Ósmoklasisty')": 0.3333333333333333
4072
+ },
4073
+ "CYFRAGOVPL__PLLuM-12B-base": {
4074
+ "(2010, 'Egzaminy Gimnazjalne')": 0.5555555555555556,
4075
+ "(2012, 'Egzaminy Gimnazjalne')": 0.3333333333333333,
4076
+ "(2007, 'Egzaminy Gimnazjalne')": 0.6666666666666666,
4077
+ "(2005, 'Egzaminy Gimnazjalne')": 0.26666666666666666,
4078
+ "(2003, 'Egzaminy Gimnazjalne')": 0.5714285714285714,
4079
+ "(2008, 'Egzaminy Gimnazjalne')": 0.5,
4080
+ "(2018, 'Egzaminy Gimnazjalne')": 0.42857142857142855,
4081
+ "(2017, 'Egzaminy Gimnazjalne')": 0.1,
4082
+ "(2015, 'Egzaminy Gimnazjalne')": 0.1111111111111111,
4083
+ "(2019, 'Egzaminy Gimnazjalne')": 0.1111111111111111,
4084
+ "(2006, 'Egzaminy Gimnazjalne')": 0.3333333333333333,
4085
+ "(2014, 'Egzaminy Gimnazjalne')": 0.0,
4086
+ "(2011, 'Egzaminy Gimnazjalne')": 0.375,
4087
+ "(2009, 'Egzaminy Gimnazjalne')": 0.7142857142857143,
4088
+ "(2004, 'Egzaminy Gimnazjalne')": 0.4666666666666667,
4089
+ "(2013, 'Egzaminy Gimnazjalne')": 0.5,
4090
+ "(2016, 'Egzaminy Gimnazjalne')": 0.4,
4091
+ "(2002, 'Egzaminy Gimnazjalne')": 0.375,
4092
+ "(2019, 'Egzaminy Zawodowe')": 0.49117127722189524,
4093
+ "(2021, 'Egzaminy Zawodowe')": 0.46852066434916956,
4094
+ "(2023, 'Egzaminy Zawodowe')": 0.4777947932618683,
4095
+ "(2022, 'Egzaminy Zawodowe')": 0.4527972027972028,
4096
+ "(2024, 'Egzaminy Zawodowe')": 0.4714285714285714,
4097
+ "(2020, 'Egzaminy Zawodowe')": 0.48264781491002573,
4098
+ "(2017, 'Egzaminy Zawodowe')": 0.4563758389261745,
4099
+ "(2018, 'Egzaminy Zawodowe')": 0.48378728923476005,
4100
+ "(2013, 'Egzaminy Zawodowe')": 0.395112016293279,
4101
+ "(2014, 'Egzaminy Zawodowe')": 0.43250214961306965,
4102
+ "(2016, 'Egzaminy Zawodowe')": 0.4318181818181818,
4103
+ "(2015, 'Egzaminy Zawodowe')": 0.4139072847682119,
4104
+ "(2020, 'Egzaminy Maturalne')": 0.2857142857142857,
4105
+ "(2010, 'Egzaminy Maturalne')": 0.5555555555555556,
4106
+ "(2012, 'Egzaminy Maturalne')": 0.125,
4107
+ "(2007, 'Egzaminy Maturalne')": 0.3333333333333333,
4108
+ "(2005, 'Egzaminy Maturalne')": 0.5,
4109
+ "(2003, 'Egzaminy Maturalne')": 0.42857142857142855,
4110
+ "(2008, 'Egzaminy Maturalne')": 0.7142857142857143,
4111
+ "(2018, 'Egzaminy Maturalne')": 0.14705882352941177,
4112
+ "(2017, 'Egzaminy Maturalne')": 0.35714285714285715,
4113
+ "(2015, 'Egzaminy Maturalne')": 0.2903225806451613,
4114
+ "(2019, 'Egzaminy Maturalne')": 0.2222222222222222,
4115
+ "(2006, 'Egzaminy Maturalne')": 0.8333333333333334,
4116
+ "(2014, 'Egzaminy Maturalne')": 0.4,
4117
+ "(2011, 'Egzaminy Maturalne')": 0.25,
4118
+ "(2009, 'Egzaminy Maturalne')": 0.6,
4119
+ "(2004, 'Egzaminy Maturalne')": 0.4,
4120
+ "(2013, 'Egzaminy Maturalne')": 0.0,
4121
+ "(2016, 'Egzaminy Maturalne')": 0.3870967741935484,
4122
+ "(2002, 'Egzaminy Maturalne')": 0.2,
4123
+ "(2023, 'Egzaminy Maturalne')": 0.4,
4124
+ "(2021, 'Egzaminy Maturalne')": 0.28,
4125
+ "(2022, 'Egzaminy Maturalne')": 0.2903225806451613,
4126
+ "(2023, 'Egzaminy Ósmoklasisty')": 0.42857142857142855,
4127
+ "(2021, 'Egzaminy Ósmoklasisty')": 0.5,
4128
+ "(2019, 'Egzaminy Ósmoklasisty')": 0.4,
4129
+ "(2022, 'Egzaminy Ósmoklasisty')": 0.5454545454545454,
4130
+ "(2020, 'Egzaminy Ósmoklasisty')": 0.16666666666666666
4131
+ },
4132
+ "CYFRAGOVPL__PLLuM-8x7B-base": {
4133
+ "(2010, 'Egzaminy Gimnazjalne')": 0.4444444444444444,
4134
+ "(2012, 'Egzaminy Gimnazjalne')": 0.16666666666666666,
4135
+ "(2007, 'Egzaminy Gimnazjalne')": 0.5555555555555556,
4136
+ "(2005, 'Egzaminy Gimnazjalne')": 0.4666666666666667,
4137
+ "(2003, 'Egzaminy Gimnazjalne')": 0.5714285714285714,
4138
+ "(2008, 'Egzaminy Gimnazjalne')": 0.625,
4139
+ "(2018, 'Egzaminy Gimnazjalne')": 0.14285714285714285,
4140
+ "(2017, 'Egzaminy Gimnazjalne')": 0.4,
4141
+ "(2015, 'Egzaminy Gimnazjalne')": 0.4444444444444444,
4142
+ "(2019, 'Egzaminy Gimnazjalne')": 0.4444444444444444,
4143
+ "(2006, 'Egzaminy Gimnazjalne')": 0.5,
4144
+ "(2014, 'Egzaminy Gimnazjalne')": 0.125,
4145
+ "(2011, 'Egzaminy Gimnazjalne')": 0.625,
4146
+ "(2009, 'Egzaminy Gimnazjalne')": 0.7142857142857143,
4147
+ "(2004, 'Egzaminy Gimnazjalne')": 0.6,
4148
+ "(2013, 'Egzaminy Gimnazjalne')": 0.5,
4149
+ "(2016, 'Egzaminy Gimnazjalne')": 0.3,
4150
+ "(2002, 'Egzaminy Gimnazjalne')": 0.3125,
4151
+ "(2019, 'Egzaminy Zawodowe')": 0.548263684520306,
4152
+ "(2021, 'Egzaminy Zawodowe')": 0.5268443414445731,
4153
+ "(2023, 'Egzaminy Zawodowe')": 0.5283307810107197,
4154
+ "(2022, 'Egzaminy Zawodowe')": 0.5192307692307693,
4155
+ "(2024, 'Egzaminy Zawodowe')": 0.4976190476190476,
4156
+ "(2020, 'Egzaminy Zawodowe')": 0.5375964010282777,
4157
+ "(2017, 'Egzaminy Zawodowe')": 0.5147651006711409,
4158
+ "(2018, 'Egzaminy Zawodowe')": 0.5365326415910073,
4159
+ "(2013, 'Egzaminy Zawodowe')": 0.48065173116089616,
4160
+ "(2014, 'Egzaminy Zawodowe')": 0.5030094582975064,
4161
+ "(2016, 'Egzaminy Zawodowe')": 0.4632867132867133,
4162
+ "(2015, 'Egzaminy Zawodowe')": 0.5132450331125827,
4163
+ "(2020, 'Egzaminy Maturalne')": 0.25,
4164
+ "(2010, 'Egzaminy Maturalne')": 0.4444444444444444,
4165
+ "(2012, 'Egzaminy Maturalne')": 0.375,
4166
+ "(2007, 'Egzaminy Maturalne')": 0.2222222222222222,
4167
+ "(2005, 'Egzaminy Maturalne')": 0.625,
4168
+ "(2003, 'Egzaminy Maturalne')": 0.42857142857142855,
4169
+ "(2008, 'Egzaminy Maturalne')": 0.5714285714285714,
4170
+ "(2018, 'Egzaminy Maturalne')": 0.29411764705882354,
4171
+ "(2017, 'Egzaminy Maturalne')": 0.4642857142857143,
4172
+ "(2015, 'Egzaminy Maturalne')": 0.22580645161290322,
4173
+ "(2019, 'Egzaminy Maturalne')": 0.4074074074074074,
4174
+ "(2006, 'Egzaminy Maturalne')": 1.0,
4175
+ "(2014, 'Egzaminy Maturalne')": 0.4,
4176
+ "(2011, 'Egzaminy Maturalne')": 0.5,
4177
+ "(2009, 'Egzaminy Maturalne')": 0.8,
4178
+ "(2004, 'Egzaminy Maturalne')": 0.6,
4179
+ "(2013, 'Egzaminy Maturalne')": 0.2,
4180
+ "(2016, 'Egzaminy Maturalne')": 0.45161290322580644,
4181
+ "(2002, 'Egzaminy Maturalne')": 0.4,
4182
+ "(2023, 'Egzaminy Maturalne')": 0.37777777777777777,
4183
+ "(2021, 'Egzaminy Maturalne')": 0.4,
4184
+ "(2022, 'Egzaminy Maturalne')": 0.2903225806451613,
4185
+ "(2023, 'Egzaminy Ósmoklasisty')": 0.2857142857142857,
4186
+ "(2021, 'Egzaminy Ósmoklasisty')": 0.5,
4187
+ "(2019, 'Egzaminy Ósmoklasisty')": 0.3,
4188
+ "(2022, 'Egzaminy Ósmoklasisty')": 0.18181818181818182,
4189
+ "(2020, 'Egzaminy Ósmoklasisty')": 0.25
4190
+ },
4191
+ "CYFRAGOVPL__PLLuM-8x7B-nc-base": {
4192
+ "(2010, 'Egzaminy Gimnazjalne')": 0.5555555555555556,
4193
+ "(2012, 'Egzaminy Gimnazjalne')": 0.3333333333333333,
4194
+ "(2007, 'Egzaminy Gimnazjalne')": 0.7777777777777778,
4195
+ "(2005, 'Egzaminy Gimnazjalne')": 0.7333333333333333,
4196
+ "(2003, 'Egzaminy Gimnazjalne')": 0.7142857142857143,
4197
+ "(2008, 'Egzaminy Gimnazjalne')": 0.625,
4198
+ "(2018, 'Egzaminy Gimnazjalne')": 0.42857142857142855,
4199
+ "(2017, 'Egzaminy Gimnazjalne')": 0.5,
4200
+ "(2015, 'Egzaminy Gimnazjalne')": 0.5555555555555556,
4201
+ "(2019, 'Egzaminy Gimnazjalne')": 0.4444444444444444,
4202
+ "(2006, 'Egzaminy Gimnazjalne')": 0.6666666666666666,
4203
+ "(2014, 'Egzaminy Gimnazjalne')": 0.0,
4204
+ "(2011, 'Egzaminy Gimnazjalne')": 0.5,
4205
+ "(2009, 'Egzaminy Gimnazjalne')": 0.7142857142857143,
4206
+ "(2004, 'Egzaminy Gimnazjalne')": 0.5333333333333333,
4207
+ "(2013, 'Egzaminy Gimnazjalne')": 0.125,
4208
+ "(2016, 'Egzaminy Gimnazjalne')": 0.4,
4209
+ "(2002, 'Egzaminy Gimnazjalne')": 0.4375,
4210
+ "(2019, 'Egzaminy Zawodowe')": 0.5991759858740435,
4211
+ "(2021, 'Egzaminy Zawodowe')": 0.574739281575898,
4212
+ "(2023, 'Egzaminy Zawodowe')": 0.5635528330781011,
4213
+ "(2022, 'Egzaminy Zawodowe')": 0.5944055944055944,
4214
+ "(2024, 'Egzaminy Zawodowe')": 0.5476190476190477,
4215
+ "(2020, 'Egzaminy Zawodowe')": 0.5967223650385605,
4216
+ "(2017, 'Egzaminy Zawodowe')": 0.5838926174496645,
4217
+ "(2018, 'Egzaminy Zawodowe')": 0.604842196281885,
4218
+ "(2013, 'Egzaminy Zawodowe')": 0.5274949083503055,
4219
+ "(2014, 'Egzaminy Zawodowe')": 0.5580395528804815,
4220
+ "(2016, 'Egzaminy Zawodowe')": 0.5104895104895105,
4221
+ "(2015, 'Egzaminy Zawodowe')": 0.5662251655629139,
4222
+ "(2020, 'Egzaminy Maturalne')": 0.17857142857142858,
4223
+ "(2010, 'Egzaminy Maturalne')": 0.5555555555555556,
4224
+ "(2012, 'Egzaminy Maturalne')": 0.125,
4225
+ "(2007, 'Egzaminy Maturalne')": 0.3333333333333333,
4226
+ "(2005, 'Egzaminy Maturalne')": 0.375,
4227
+ "(2003, 'Egzaminy Maturalne')": 0.2857142857142857,
4228
+ "(2008, 'Egzaminy Maturalne')": 0.7142857142857143,
4229
+ "(2018, 'Egzaminy Maturalne')": 0.47058823529411764,
4230
+ "(2017, 'Egzaminy Maturalne')": 0.39285714285714285,
4231
+ "(2015, 'Egzaminy Maturalne')": 0.2903225806451613,
4232
+ "(2019, 'Egzaminy Maturalne')": 0.3333333333333333,
4233
+ "(2006, 'Egzaminy Maturalne')": 0.8333333333333334,
4234
+ "(2014, 'Egzaminy Maturalne')": 0.3,
4235
+ "(2011, 'Egzaminy Maturalne')": 0.5,
4236
+ "(2009, 'Egzaminy Maturalne')": 0.6,
4237
+ "(2004, 'Egzaminy Maturalne')": 0.8,
4238
+ "(2013, 'Egzaminy Maturalne')": 0.2,
4239
+ "(2016, 'Egzaminy Maturalne')": 0.3548387096774194,
4240
+ "(2002, 'Egzaminy Maturalne')": 0.4,
4241
+ "(2023, 'Egzaminy Maturalne')": 0.4444444444444444,
4242
+ "(2021, 'Egzaminy Maturalne')": 0.2,
4243
+ "(2022, 'Egzaminy Maturalne')": 0.3225806451612903,
4244
+ "(2023, 'Egzaminy Ósmoklasisty')": 0.14285714285714285,
4245
+ "(2021, 'Egzaminy Ósmoklasisty')": 0.4,
4246
+ "(2019, 'Egzaminy Ósmoklasisty')": 0.4,
4247
+ "(2022, 'Egzaminy Ósmoklasisty')": 0.2727272727272727,
4248
+ "(2020, 'Egzaminy Ósmoklasisty')": 0.3333333333333333
4249
+ },
4250
+ "Qwen__Qwen2.5-72B": {
4251
+ "(2010, 'Egzaminy Gimnazjalne')": 0.8888888888888888,
4252
+ "(2012, 'Egzaminy Gimnazjalne')": 0.8333333333333334,
4253
+ "(2007, 'Egzaminy Gimnazjalne')": 0.8888888888888888,
4254
+ "(2005, 'Egzaminy Gimnazjalne')": 0.8,
4255
+ "(2003, 'Egzaminy Gimnazjalne')": 0.8571428571428571,
4256
+ "(2008, 'Egzaminy Gimnazjalne')": 0.875,
4257
+ "(2018, 'Egzaminy Gimnazjalne')": 0.8571428571428571,
4258
+ "(2017, 'Egzaminy Gimnazjalne')": 0.5,
4259
+ "(2015, 'Egzaminy Gimnazjalne')": 0.4444444444444444,
4260
+ "(2019, 'Egzaminy Gimnazjalne')": 0.6666666666666666,
4261
+ "(2006, 'Egzaminy Gimnazjalne')": 0.8333333333333334,
4262
+ "(2014, 'Egzaminy Gimnazjalne')": 0.625,
4263
+ "(2011, 'Egzaminy Gimnazjalne')": 0.8125,
4264
+ "(2009, 'Egzaminy Gimnazjalne')": 1.0,
4265
+ "(2004, 'Egzaminy Gimnazjalne')": 0.8666666666666667,
4266
+ "(2013, 'Egzaminy Gimnazjalne')": 0.625,
4267
+ "(2016, 'Egzaminy Gimnazjalne')": 0.8,
4268
+ "(2002, 'Egzaminy Gimnazjalne')": 0.75,
4269
+ "(2019, 'Egzaminy Zawodowe')": 0.6871689228958211,
4270
+ "(2021, 'Egzaminy Zawodowe')": 0.6809578988026265,
4271
+ "(2023, 'Egzaminy Zawodowe')": 0.6921898928024502,
4272
+ "(2022, 'Egzaminy Zawodowe')": 0.6800699300699301,
4273
+ "(2024, 'Egzaminy Zawodowe')": 0.6523809523809524,
4274
+ "(2020, 'Egzaminy Zawodowe')": 0.7046915167095116,
4275
+ "(2017, 'Egzaminy Zawodowe')": 0.6986577181208053,
4276
+ "(2018, 'Egzaminy Zawodowe')": 0.6947686986597492,
4277
+ "(2013, 'Egzaminy Zawodowe')": 0.6252545824847251,
4278
+ "(2014, 'Egzaminy Zawodowe')": 0.646603611349957,
4279
+ "(2016, 'Egzaminy Zawodowe')": 0.6538461538461539,
4280
+ "(2015, 'Egzaminy Zawodowe')": 0.652317880794702,
4281
+ "(2020, 'Egzaminy Maturalne')": 0.6428571428571429,
4282
+ "(2010, 'Egzaminy Maturalne')": 0.6666666666666666,
4283
+ "(2012, 'Egzaminy Maturalne')": 0.5,
4284
+ "(2007, 'Egzaminy Maturalne')": 0.8888888888888888,
4285
+ "(2005, 'Egzaminy Maturalne')": 0.75,
4286
+ "(2003, 'Egzaminy Maturalne')": 0.2857142857142857,
4287
+ "(2008, 'Egzaminy Maturalne')": 0.8571428571428571,
4288
+ "(2018, 'Egzaminy Maturalne')": 0.7058823529411765,
4289
+ "(2017, 'Egzaminy Maturalne')": 0.75,
4290
+ "(2015, 'Egzaminy Maturalne')": 0.7096774193548387,
4291
+ "(2019, 'Egzaminy Maturalne')": 0.5925925925925926,
4292
+ "(2006, 'Egzaminy Maturalne')": 0.8333333333333334,
4293
+ "(2014, 'Egzaminy Maturalne')": 0.8,
4294
+ "(2011, 'Egzaminy Maturalne')": 0.875,
4295
+ "(2009, 'Egzaminy Maturalne')": 0.8,
4296
+ "(2004, 'Egzaminy Maturalne')": 0.4,
4297
+ "(2013, 'Egzaminy Maturalne')": 0.8,
4298
+ "(2016, 'Egzaminy Maturalne')": 0.6774193548387096,
4299
+ "(2002, 'Egzaminy Maturalne')": 0.5,
4300
+ "(2023, 'Egzaminy Maturalne')": 0.7333333333333333,
4301
+ "(2021, 'Egzaminy Maturalne')": 0.68,
4302
+ "(2022, 'Egzaminy Maturalne')": 0.8387096774193549,
4303
+ "(2023, 'Egzaminy Ósmoklasisty')": 1.0,
4304
+ "(2021, 'Egzaminy Ósmoklasisty')": 0.5,
4305
+ "(2019, 'Egzaminy Ósmoklasisty')": 0.8,
4306
+ "(2022, 'Egzaminy Ósmoklasisty')": 0.5454545454545454,
4307
+ "(2020, 'Egzaminy Ósmoklasisty')": 0.4166666666666667
4308
+ },
4309
+ "Qwen__Qwen2.5-72B-Instruct": {
4310
+ "(2010, 'Egzaminy Gimnazjalne')": 0.8888888888888888,
4311
+ "(2012, 'Egzaminy Gimnazjalne')": 1.0,
4312
+ "(2007, 'Egzaminy Gimnazjalne')": 0.8888888888888888,
4313
+ "(2005, 'Egzaminy Gimnazjalne')": 0.7333333333333333,
4314
+ "(2003, 'Egzaminy Gimnazjalne')": 0.8571428571428571,
4315
+ "(2008, 'Egzaminy Gimnazjalne')": 0.875,
4316
+ "(2018, 'Egzaminy Gimnazjalne')": 0.5714285714285714,
4317
+ "(2017, 'Egzaminy Gimnazjalne')": 0.4,
4318
+ "(2015, 'Egzaminy Gimnazjalne')": 0.3333333333333333,
4319
+ "(2019, 'Egzaminy Gimnazjalne')": 0.5555555555555556,
4320
+ "(2006, 'Egzaminy Gimnazjalne')": 1.0,
4321
+ "(2014, 'Egzaminy Gimnazjalne')": 0.625,
4322
+ "(2011, 'Egzaminy Gimnazjalne')": 0.8125,
4323
+ "(2009, 'Egzaminy Gimnazjalne')": 1.0,
4324
+ "(2004, 'Egzaminy Gimnazjalne')": 0.8666666666666667,
4325
+ "(2013, 'Egzaminy Gimnazjalne')": 0.625,
4326
+ "(2016, 'Egzaminy Gimnazjalne')": 0.7,
4327
+ "(2002, 'Egzaminy Gimnazjalne')": 0.6875,
4328
+ "(2019, 'Egzaminy Zawodowe')": 0.7007062978222484,
4329
+ "(2021, 'Egzaminy Zawodowe')": 0.6836616454229433,
4330
+ "(2023, 'Egzaminy Zawodowe')": 0.6891271056661562,
4331
+ "(2022, 'Egzaminy Zawodowe')": 0.6800699300699301,
4332
+ "(2024, 'Egzaminy Zawodowe')": 0.6404761904761904,
4333
+ "(2020, 'Egzaminy Zawodowe')": 0.7034061696658098,
4334
+ "(2017, 'Egzaminy Zawodowe')": 0.7046979865771812,
4335
+ "(2018, 'Egzaminy Zawodowe')": 0.7060095114569823,
4336
+ "(2013, 'Egzaminy Zawodowe')": 0.6313645621181263,
4337
+ "(2014, 'Egzaminy Zawodowe')": 0.6577815993121238,
4338
+ "(2016, 'Egzaminy Zawodowe')": 0.6608391608391608,
4339
+ "(2015, 'Egzaminy Zawodowe')": 0.652317880794702,
4340
+ "(2020, 'Egzaminy Maturalne')": 0.7857142857142857,
4341
+ "(2010, 'Egzaminy Maturalne')": 0.6666666666666666,
4342
+ "(2012, 'Egzaminy Maturalne')": 0.5,
4343
+ "(2007, 'Egzaminy Maturalne')": 1.0,
4344
+ "(2005, 'Egzaminy Maturalne')": 0.625,
4345
+ "(2003, 'Egzaminy Maturalne')": 0.42857142857142855,
4346
+ "(2008, 'Egzaminy Maturalne')": 0.8571428571428571,
4347
+ "(2018, 'Egzaminy Maturalne')": 0.7352941176470589,
4348
+ "(2017, 'Egzaminy Maturalne')": 0.75,
4349
+ "(2015, 'Egzaminy Maturalne')": 0.6451612903225806,
4350
+ "(2019, 'Egzaminy Maturalne')": 0.5925925925925926,
4351
+ "(2006, 'Egzaminy Maturalne')": 0.8333333333333334,
4352
+ "(2014, 'Egzaminy Maturalne')": 0.8,
4353
+ "(2011, 'Egzaminy Maturalne')": 0.875,
4354
+ "(2009, 'Egzaminy Maturalne')": 0.8,
4355
+ "(2004, 'Egzaminy Maturalne')": 0.6,
4356
+ "(2013, 'Egzaminy Maturalne')": 1.0,
4357
+ "(2016, 'Egzaminy Maturalne')": 0.7741935483870968,
4358
+ "(2002, 'Egzaminy Maturalne')": 0.5,
4359
+ "(2023, 'Egzaminy Maturalne')": 0.7555555555555555,
4360
+ "(2021, 'Egzaminy Maturalne')": 0.8,
4361
+ "(2022, 'Egzaminy Maturalne')": 0.7741935483870968,
4362
+ "(2023, 'Egzaminy Ósmoklasisty')": 1.0,
4363
+ "(2021, 'Egzaminy Ósmoklasisty')": 0.5,
4364
+ "(2019, 'Egzaminy Ósmoklasisty')": 0.8,
4365
+ "(2022, 'Egzaminy Ósmoklasisty')": 0.6363636363636364,
4366
+ "(2020, 'Egzaminy Ósmoklasisty')": 0.5
4367
+ },
4368
+ "meta-llama__Llama-3.1-70B": {
4369
+ "(2010, 'Egzaminy Gimnazjalne')": 0.7777777777777778,
4370
+ "(2012, 'Egzaminy Gimnazjalne')": 0.5,
4371
+ "(2007, 'Egzaminy Gimnazjalne')": 0.7777777777777778,
4372
+ "(2005, 'Egzaminy Gimnazjalne')": 0.7333333333333333,
4373
+ "(2003, 'Egzaminy Gimnazjalne')": 0.8571428571428571,
4374
+ "(2008, 'Egzaminy Gimnazjalne')": 0.625,
4375
+ "(2018, 'Egzaminy Gimnazjalne')": 0.42857142857142855,
4376
+ "(2017, 'Egzaminy Gimnazjalne')": 0.7,
4377
+ "(2015, 'Egzaminy Gimnazjalne')": 0.3333333333333333,
4378
+ "(2019, 'Egzaminy Gimnazjalne')": 0.4444444444444444,
4379
+ "(2006, 'Egzaminy Gimnazjalne')": 0.6666666666666666,
4380
+ "(2014, 'Egzaminy Gimnazjalne')": 0.125,
4381
+ "(2011, 'Egzaminy Gimnazjalne')": 0.75,
4382
+ "(2009, 'Egzaminy Gimnazjalne')": 1.0,
4383
+ "(2004, 'Egzaminy Gimnazjalne')": 0.6,
4384
+ "(2013, 'Egzaminy Gimnazjalne')": 0.25,
4385
+ "(2016, 'Egzaminy Gimnazjalne')": 0.3,
4386
+ "(2002, 'Egzaminy Gimnazjalne')": 0.5625,
4387
+ "(2019, 'Egzaminy Zawodowe')": 0.644496762801648,
4388
+ "(2021, 'Egzaminy Zawodowe')": 0.630745461568173,
4389
+ "(2023, 'Egzaminy Zawodowe')": 0.6370597243491577,
4390
+ "(2022, 'Egzaminy Zawodowe')": 0.6357808857808858,
4391
+ "(2024, 'Egzaminy Zawodowe')": 0.5857142857142857,
4392
+ "(2020, 'Egzaminy Zawodowe')": 0.6429948586118251,
4393
+ "(2017, 'Egzaminy Zawodowe')": 0.6369127516778523,
4394
+ "(2018, 'Egzaminy Zawodowe')": 0.6588845654993515,
4395
+ "(2013, 'Egzaminy Zawodowe')": 0.5621181262729125,
4396
+ "(2014, 'Egzaminy Zawodowe')": 0.6165090283748925,
4397
+ "(2016, 'Egzaminy Zawodowe')": 0.5821678321678322,
4398
+ "(2015, 'Egzaminy Zawodowe')": 0.6490066225165563,
4399
+ "(2020, 'Egzaminy Maturalne')": 0.35714285714285715,
4400
+ "(2010, 'Egzaminy Maturalne')": 0.6666666666666666,
4401
+ "(2012, 'Egzaminy Maturalne')": 0.375,
4402
+ "(2007, 'Egzaminy Maturalne')": 0.4444444444444444,
4403
+ "(2005, 'Egzaminy Maturalne')": 0.625,
4404
+ "(2003, 'Egzaminy Maturalne')": 0.42857142857142855,
4405
+ "(2008, 'Egzaminy Maturalne')": 0.7142857142857143,
4406
+ "(2018, 'Egzaminy Maturalne')": 0.5588235294117647,
4407
+ "(2017, 'Egzaminy Maturalne')": 0.5,
4408
+ "(2015, 'Egzaminy Maturalne')": 0.5483870967741935,
4409
+ "(2019, 'Egzaminy Maturalne')": 0.5555555555555556,
4410
+ "(2006, 'Egzaminy Maturalne')": 0.8333333333333334,
4411
+ "(2014, 'Egzaminy Maturalne')": 0.6,
4412
+ "(2011, 'Egzaminy Maturalne')": 0.625,
4413
+ "(2009, 'Egzaminy Maturalne')": 0.6,
4414
+ "(2004, 'Egzaminy Maturalne')": 0.6,
4415
+ "(2013, 'Egzaminy Maturalne')": 0.6,
4416
+ "(2016, 'Egzaminy Maturalne')": 0.5161290322580645,
4417
+ "(2002, 'Egzaminy Maturalne')": 0.1,
4418
+ "(2023, 'Egzaminy Maturalne')": 0.4444444444444444,
4419
+ "(2021, 'Egzaminy Maturalne')": 0.32,
4420
+ "(2022, 'Egzaminy Maturalne')": 0.4838709677419355,
4421
+ "(2023, 'Egzaminy Ósmoklasisty')": 0.42857142857142855,
4422
+ "(2021, 'Egzaminy Ósmoklasisty')": 0.4,
4423
+ "(2019, 'Egzaminy Ósmoklasisty')": 0.5,
4424
+ "(2022, 'Egzaminy Ósmoklasisty')": 0.18181818181818182,
4425
+ "(2020, 'Egzaminy Ósmoklasisty')": 0.3333333333333333
4426
+ },
4427
+ "microsoft__phi-4": {
4428
+ "(2010, 'Egzaminy Gimnazjalne')": 0.5555555555555556,
4429
+ "(2012, 'Egzaminy Gimnazjalne')": 0.6666666666666666,
4430
+ "(2007, 'Egzaminy Gimnazjalne')": 0.5555555555555556,
4431
+ "(2005, 'Egzaminy Gimnazjalne')": 0.6666666666666666,
4432
+ "(2003, 'Egzaminy Gimnazjalne')": 0.7142857142857143,
4433
+ "(2008, 'Egzaminy Gimnazjalne')": 0.5,
4434
+ "(2018, 'Egzaminy Gimnazjalne')": 0.5714285714285714,
4435
+ "(2017, 'Egzaminy Gimnazjalne')": 0.5,
4436
+ "(2015, 'Egzaminy Gimnazjalne')": 0.3333333333333333,
4437
+ "(2019, 'Egzaminy Gimnazjalne')": 0.4444444444444444,
4438
+ "(2006, 'Egzaminy Gimnazjalne')": 0.8333333333333334,
4439
+ "(2014, 'Egzaminy Gimnazjalne')": 0.5,
4440
+ "(2011, 'Egzaminy Gimnazjalne')": 0.6875,
4441
+ "(2009, 'Egzaminy Gimnazjalne')": 0.8571428571428571,
4442
+ "(2004, 'Egzaminy Gimnazjalne')": 0.6,
4443
+ "(2013, 'Egzaminy Gimnazjalne')": 0.5,
4444
+ "(2016, 'Egzaminy Gimnazjalne')": 0.5,
4445
+ "(2002, 'Egzaminy Gimnazjalne')": 0.5,
4446
+ "(2019, 'Egzaminy Zawodowe')": 0.533254855797528,
4447
+ "(2021, 'Egzaminy Zawodowe')": 0.5079181151023561,
4448
+ "(2023, 'Egzaminy Zawodowe')": 0.5038284839203675,
4449
+ "(2022, 'Egzaminy Zawodowe')": 0.5163170163170163,
4450
+ "(2024, 'Egzaminy Zawodowe')": 0.5261904761904762,
4451
+ "(2020, 'Egzaminy Zawodowe')": 0.5353470437017995,
4452
+ "(2017, 'Egzaminy Zawodowe')": 0.5120805369127517,
4453
+ "(2018, 'Egzaminy Zawodowe')": 0.5378296584522265,
4454
+ "(2013, 'Egzaminy Zawodowe')": 0.4684317718940937,
4455
+ "(2014, 'Egzaminy Zawodowe')": 0.4858125537403267,
4456
+ "(2016, 'Egzaminy Zawodowe')": 0.44755244755244755,
4457
+ "(2015, 'Egzaminy Zawodowe')": 0.4470198675496689,
4458
+ "(2020, 'Egzaminy Maturalne')": 0.4642857142857143,
4459
+ "(2010, 'Egzaminy Maturalne')": 0.7777777777777778,
4460
+ "(2012, 'Egzaminy Maturalne')": 0.5,
4461
+ "(2007, 'Egzaminy Maturalne')": 0.4444444444444444,
4462
+ "(2005, 'Egzaminy Maturalne')": 0.5,
4463
+ "(2003, 'Egzaminy Maturalne')": 0.42857142857142855,
4464
+ "(2008, 'Egzaminy Maturalne')": 0.8571428571428571,
4465
+ "(2018, 'Egzaminy Maturalne')": 0.5588235294117647,
4466
+ "(2017, 'Egzaminy Maturalne')": 0.5714285714285714,
4467
+ "(2015, 'Egzaminy Maturalne')": 0.3548387096774194,
4468
+ "(2019, 'Egzaminy Maturalne')": 0.48148148148148145,
4469
+ "(2006, 'Egzaminy Maturalne')": 0.8333333333333334,
4470
+ "(2014, 'Egzaminy Maturalne')": 0.7,
4471
+ "(2011, 'Egzaminy Maturalne')": 0.625,
4472
+ "(2009, 'Egzaminy Maturalne')": 0.8,
4473
+ "(2004, 'Egzaminy Maturalne')": 0.6,
4474
+ "(2013, 'Egzaminy Maturalne')": 0.4,
4475
+ "(2016, 'Egzaminy Maturalne')": 0.3870967741935484,
4476
+ "(2002, 'Egzaminy Maturalne')": 0.2,
4477
+ "(2023, 'Egzaminy Maturalne')": 0.6666666666666666,
4478
+ "(2021, 'Egzaminy Maturalne')": 0.32,
4479
+ "(2022, 'Egzaminy Maturalne')": 0.5483870967741935,
4480
+ "(2023, 'Egzaminy Ósmoklasisty')": 0.5714285714285714,
4481
+ "(2021, 'Egzaminy Ósmoklasisty')": 0.7,
4482
+ "(2019, 'Egzaminy Ósmoklasisty')": 0.6,
4483
+ "(2022, 'Egzaminy Ósmoklasisty')": 0.36363636363636365,
4484
+ "(2020, 'Egzaminy Ósmoklasisty')": 0.25
4485
+ },
4486
+ "mistralai__Mistral-Nemo-Base-2407": {
4487
+ "(2010, 'Egzaminy Gimnazjalne')": 0.3333333333333333,
4488
+ "(2012, 'Egzaminy Gimnazjalne')": 0.3333333333333333,
4489
+ "(2007, 'Egzaminy Gimnazjalne')": 0.5555555555555556,
4490
+ "(2005, 'Egzaminy Gimnazjalne')": 0.2,
4491
+ "(2003, 'Egzaminy Gimnazjalne')": 0.14285714285714285,
4492
+ "(2008, 'Egzaminy Gimnazjalne')": 0.375,
4493
+ "(2018, 'Egzaminy Gimnazjalne')": 0.2857142857142857,
4494
+ "(2017, 'Egzaminy Gimnazjalne')": 0.3,
4495
+ "(2015, 'Egzaminy Gimnazjalne')": 0.2222222222222222,
4496
+ "(2019, 'Egzaminy Gimnazjalne')": 0.1111111111111111,
4497
+ "(2006, 'Egzaminy Gimnazjalne')": 0.3333333333333333,
4498
+ "(2014, 'Egzaminy Gimnazjalne')": 0.375,
4499
+ "(2011, 'Egzaminy Gimnazjalne')": 0.4375,
4500
+ "(2009, 'Egzaminy Gimnazjalne')": 0.7142857142857143,
4501
+ "(2004, 'Egzaminy Gimnazjalne')": 0.4,
4502
+ "(2013, 'Egzaminy Gimnazjalne')": 0.25,
4503
+ "(2016, 'Egzaminy Gimnazjalne')": 0.4,
4504
+ "(2002, 'Egzaminy Gimnazjalne')": 0.5,
4505
+ "(2019, 'Egzaminy Zawodowe')": 0.4440847557386698,
4506
+ "(2021, 'Egzaminy Zawodowe')": 0.4175357280803399,
4507
+ "(2023, 'Egzaminy Zawodowe')": 0.38131699846860645,
4508
+ "(2022, 'Egzaminy Zawodowe')": 0.4166666666666667,
4509
+ "(2024, 'Egzaminy Zawodowe')": 0.4119047619047619,
4510
+ "(2020, 'Egzaminy Zawodowe')": 0.44151670951156813,
4511
+ "(2017, 'Egzaminy Zawodowe')": 0.4369127516778524,
4512
+ "(2018, 'Egzaminy Zawodowe')": 0.43623000432338954,
4513
+ "(2013, 'Egzaminy Zawodowe')": 0.3564154786150713,
4514
+ "(2014, 'Egzaminy Zawodowe')": 0.4006878761822872,
4515
+ "(2016, 'Egzaminy Zawodowe')": 0.38461538461538464,
4516
+ "(2015, 'Egzaminy Zawodowe')": 0.38079470198675497,
4517
+ "(2020, 'Egzaminy Maturalne')": 0.25,
4518
+ "(2010, 'Egzaminy Maturalne')": 0.4444444444444444,
4519
+ "(2012, 'Egzaminy Maturalne')": 0.125,
4520
+ "(2007, 'Egzaminy Maturalne')": 0.2222222222222222,
4521
+ "(2005, 'Egzaminy Maturalne')": 0.25,
4522
+ "(2003, 'Egzaminy Maturalne')": 0.2857142857142857,
4523
+ "(2008, 'Egzaminy Maturalne')": 0.5714285714285714,
4524
+ "(2018, 'Egzaminy Maturalne')": 0.29411764705882354,
4525
+ "(2017, 'Egzaminy Maturalne')": 0.32142857142857145,
4526
+ "(2015, 'Egzaminy Maturalne')": 0.25806451612903225,
4527
+ "(2019, 'Egzaminy Maturalne')": 0.4444444444444444,
4528
+ "(2006, 'Egzaminy Maturalne')": 1.0,
4529
+ "(2014, 'Egzaminy Maturalne')": 0.2,
4530
+ "(2011, 'Egzaminy Maturalne')": 0.5,
4531
+ "(2009, 'Egzaminy Maturalne')": 0.6,
4532
+ "(2004, 'Egzaminy Maturalne')": 0.4,
4533
+ "(2013, 'Egzaminy Maturalne')": 0.2,
4534
+ "(2016, 'Egzaminy Maturalne')": 0.1935483870967742,
4535
+ "(2002, 'Egzaminy Maturalne')": 0.1,
4536
+ "(2023, 'Egzaminy Maturalne')": 0.2222222222222222,
4537
+ "(2021, 'Egzaminy Maturalne')": 0.52,
4538
+ "(2022, 'Egzaminy Maturalne')": 0.3225806451612903,
4539
+ "(2023, 'Egzaminy Ósmoklasisty')": 0.42857142857142855,
4540
+ "(2021, 'Egzaminy Ósmoklasisty')": 0.4,
4541
+ "(2019, 'Egzaminy Ósmoklasisty')": 0.4,
4542
+ "(2022, 'Egzaminy Ósmoklasisty')": 0.2727272727272727,
4543
+ "(2020, 'Egzaminy Ósmoklasisty')": 0.16666666666666666
4544
+ },
4545
+ "mistralai__Mistral-Nemo-Instruct-2407": {
4546
+ "(2010, 'Egzaminy Gimnazjalne')": 0.3333333333333333,
4547
+ "(2012, 'Egzaminy Gimnazjalne')": 0.5,
4548
+ "(2007, 'Egzaminy Gimnazjalne')": 0.4444444444444444,
4549
+ "(2005, 'Egzaminy Gimnazjalne')": 0.4,
4550
+ "(2003, 'Egzaminy Gimnazjalne')": 0.2857142857142857,
4551
+ "(2008, 'Egzaminy Gimnazjalne')": 0.625,
4552
+ "(2018, 'Egzaminy Gimnazjalne')": 0.2857142857142857,
4553
+ "(2017, 'Egzaminy Gimnazjalne')": 0.3,
4554
+ "(2015, 'Egzaminy Gimnazjalne')": 0.5555555555555556,
4555
+ "(2019, 'Egzaminy Gimnazjalne')": 0.3333333333333333,
4556
+ "(2006, 'Egzaminy Gimnazjalne')": 0.5,
4557
+ "(2014, 'Egzaminy Gimnazjalne')": 0.375,
4558
+ "(2011, 'Egzaminy Gimnazjalne')": 0.4375,
4559
+ "(2009, 'Egzaminy Gimnazjalne')": 0.5714285714285714,
4560
+ "(2004, 'Egzaminy Gimnazjalne')": 0.6666666666666666,
4561
+ "(2013, 'Egzaminy Gimnazjalne')": 0.125,
4562
+ "(2016, 'Egzaminy Gimnazjalne')": 0.5,
4563
+ "(2002, 'Egzaminy Gimnazjalne')": 0.375,
4564
+ "(2019, 'Egzaminy Zawodowe')": 0.48116539140670983,
4565
+ "(2021, 'Egzaminy Zawodowe')": 0.451525685592893,
4566
+ "(2023, 'Egzaminy Zawodowe')": 0.4241960183767228,
4567
+ "(2022, 'Egzaminy Zawodowe')": 0.43997668997669,
4568
+ "(2024, 'Egzaminy Zawodowe')": 0.44285714285714284,
4569
+ "(2020, 'Egzaminy Zawodowe')": 0.47011568123393316,
4570
+ "(2017, 'Egzaminy Zawodowe')": 0.45369127516778524,
4571
+ "(2018, 'Egzaminy Zawodowe')": 0.47600518806744485,
4572
+ "(2013, 'Egzaminy Zawodowe')": 0.4073319755600815,
4573
+ "(2014, 'Egzaminy Zawodowe')": 0.4419604471195185,
4574
+ "(2016, 'Egzaminy Zawodowe')": 0.4230769230769231,
4575
+ "(2015, 'Egzaminy Zawodowe')": 0.45364238410596025,
4576
+ "(2020, 'Egzaminy Maturalne')": 0.39285714285714285,
4577
+ "(2010, 'Egzaminy Maturalne')": 0.3333333333333333,
4578
+ "(2012, 'Egzaminy Maturalne')": 0.125,
4579
+ "(2007, 'Egzaminy Maturalne')": 0.2222222222222222,
4580
+ "(2005, 'Egzaminy Maturalne')": 0.5,
4581
+ "(2003, 'Egzaminy Maturalne')": 0.14285714285714285,
4582
+ "(2008, 'Egzaminy Maturalne')": 0.42857142857142855,
4583
+ "(2018, 'Egzaminy Maturalne')": 0.29411764705882354,
4584
+ "(2017, 'Egzaminy Maturalne')": 0.35714285714285715,
4585
+ "(2015, 'Egzaminy Maturalne')": 0.3225806451612903,
4586
+ "(2019, 'Egzaminy Maturalne')": 0.4074074074074074,
4587
+ "(2006, 'Egzaminy Maturalne')": 0.8333333333333334,
4588
+ "(2014, 'Egzaminy Maturalne')": 0.5,
4589
+ "(2011, 'Egzaminy Maturalne')": 0.625,
4590
+ "(2009, 'Egzaminy Maturalne')": 0.6,
4591
+ "(2004, 'Egzaminy Maturalne')": 0.4,
4592
+ "(2013, 'Egzaminy Maturalne')": 0.6,
4593
+ "(2016, 'Egzaminy Maturalne')": 0.22580645161290322,
4594
+ "(2002, 'Egzaminy Maturalne')": 0.2,
4595
+ "(2023, 'Egzaminy Maturalne')": 0.17777777777777778,
4596
+ "(2021, 'Egzaminy Maturalne')": 0.44,
4597
+ "(2022, 'Egzaminy Maturalne')": 0.16129032258064516,
4598
+ "(2023, 'Egzaminy Ósmoklasisty')": 0.2857142857142857,
4599
+ "(2021, 'Egzaminy Ósmoklasisty')": 0.6,
4600
+ "(2019, 'Egzaminy Ósmoklasisty')": 0.4,
4601
+ "(2022, 'Egzaminy Ósmoklasisty')": 0.36363636363636365,
4602
+ "(2020, 'Egzaminy Ósmoklasisty')": 0.25
4603
+ },
4604
+ "mistralai__Mixtral-8x7B-v0.1": {
4605
+ "(2010, 'Egzaminy Gimnazjalne')": 0.4444444444444444,
4606
+ "(2012, 'Egzaminy Gimnazjalne')": 0.0,
4607
+ "(2007, 'Egzaminy Gimnazjalne')": 0.6666666666666666,
4608
+ "(2005, 'Egzaminy Gimnazjalne')": 0.6,
4609
+ "(2003, 'Egzaminy Gimnazjalne')": 0.5714285714285714,
4610
+ "(2008, 'Egzaminy Gimnazjalne')": 0.625,
4611
+ "(2018, 'Egzaminy Gimnazjalne')": 0.42857142857142855,
4612
+ "(2017, 'Egzaminy Gimnazjalne')": 0.6,
4613
+ "(2015, 'Egzaminy Gimnazjalne')": 0.4444444444444444,
4614
+ "(2019, 'Egzaminy Gimnazjalne')": 0.4444444444444444,
4615
+ "(2006, 'Egzaminy Gimnazjalne')": 0.6666666666666666,
4616
+ "(2014, 'Egzaminy Gimnazjalne')": 0.125,
4617
+ "(2011, 'Egzaminy Gimnazjalne')": 0.4375,
4618
+ "(2009, 'Egzaminy Gimnazjalne')": 0.5714285714285714,
4619
+ "(2004, 'Egzaminy Gimnazjalne')": 0.4666666666666667,
4620
+ "(2013, 'Egzaminy Gimnazjalne')": 0.375,
4621
+ "(2016, 'Egzaminy Gimnazjalne')": 0.4,
4622
+ "(2002, 'Egzaminy Gimnazjalne')": 0.3125,
4623
+ "(2019, 'Egzaminy Zawodowe')": 0.48881695114773394,
4624
+ "(2021, 'Egzaminy Zawodowe')": 0.4859018926226342,
4625
+ "(2023, 'Egzaminy Zawodowe')": 0.45788667687595713,
4626
+ "(2022, 'Egzaminy Zawodowe')": 0.4731934731934732,
4627
+ "(2024, 'Egzaminy Zawodowe')": 0.4380952380952381,
4628
+ "(2020, 'Egzaminy Zawodowe')": 0.4922879177377892,
4629
+ "(2017, 'Egzaminy Zawodowe')": 0.4785234899328859,
4630
+ "(2018, 'Egzaminy Zawodowe')": 0.4889753566796368,
4631
+ "(2013, 'Egzaminy Zawodowe')": 0.4480651731160896,
4632
+ "(2014, 'Egzaminy Zawodowe')": 0.45743766122098023,
4633
+ "(2016, 'Egzaminy Zawodowe')": 0.4527972027972028,
4634
+ "(2015, 'Egzaminy Zawodowe')": 0.4768211920529801,
4635
+ "(2020, 'Egzaminy Maturalne')": 0.25,
4636
+ "(2010, 'Egzaminy Maturalne')": 0.5555555555555556,
4637
+ "(2012, 'Egzaminy Maturalne')": 0.125,
4638
+ "(2007, 'Egzaminy Maturalne')": 0.4444444444444444,
4639
+ "(2005, 'Egzaminy Maturalne')": 0.375,
4640
+ "(2003, 'Egzaminy Maturalne')": 0.42857142857142855,
4641
+ "(2008, 'Egzaminy Maturalne')": 0.5714285714285714,
4642
+ "(2018, 'Egzaminy Maturalne')": 0.4117647058823529,
4643
+ "(2017, 'Egzaminy Maturalne')": 0.4642857142857143,
4644
+ "(2015, 'Egzaminy Maturalne')": 0.25806451612903225,
4645
+ "(2019, 'Egzaminy Maturalne')": 0.4074074074074074,
4646
+ "(2006, 'Egzaminy Maturalne')": 0.6666666666666666,
4647
+ "(2014, 'Egzaminy Maturalne')": 0.4,
4648
+ "(2011, 'Egzaminy Maturalne')": 0.5,
4649
+ "(2009, 'Egzaminy Maturalne')": 0.6,
4650
+ "(2004, 'Egzaminy Maturalne')": 0.8,
4651
+ "(2013, 'Egzaminy Maturalne')": 0.2,
4652
+ "(2016, 'Egzaminy Maturalne')": 0.45161290322580644,
4653
+ "(2002, 'Egzaminy Maturalne')": 0.2,
4654
+ "(2023, 'Egzaminy Maturalne')": 0.35555555555555557,
4655
+ "(2021, 'Egzaminy Maturalne')": 0.24,
4656
+ "(2022, 'Egzaminy Maturalne')": 0.3548387096774194,
4657
+ "(2023, 'Egzaminy Ósmoklasisty')": 0.2857142857142857,
4658
+ "(2021, 'Egzaminy Ósmoklasisty')": 0.4,
4659
+ "(2019, 'Egzaminy Ósmoklasisty')": 0.5,
4660
+ "(2022, 'Egzaminy Ósmoklasisty')": 0.09090909090909091,
4661
+ "(2020, 'Egzaminy Ósmoklasisty')": 0.08333333333333333
4662
  }
4663
  }
leaderboards/llmzszl.json CHANGED
@@ -542,5 +542,101 @@
542
  "Parameters (B)": 12,
543
  "Date": "24-02",
544
  "Score": 49.69
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
545
  }
546
- ]
 
542
  "Parameters (B)": 12,
543
  "Date": "24-02",
544
  "Score": 49.69
545
+ },
546
+ {
547
+ "Lang": "P",
548
+ "Family": "PLLuM",
549
+ "Name": "CYFRAGOVPL/PLLuM-12B-base",
550
+ "Parameters (B)": 12,
551
+ "Date": "24-02",
552
+ "Score": 46.47
553
+ },
554
+ {
555
+ "Lang": "P",
556
+ "Family": "PLLuM",
557
+ "Name": "CYFRAGOVPL/PLLuM-8x7B-base",
558
+ "Parameters (B)": 46.7,
559
+ "Date": "24-02",
560
+ "Score": 52.24
561
+ },
562
+ {
563
+ "Lang": "P",
564
+ "Family": "PLLuM",
565
+ "Name": "CYFRAGOVPL/PLLuM-8x7B-nc-base",
566
+ "Parameters (B)": 46.7,
567
+ "Date": "24-02",
568
+ "Score": 57.82
569
+ },
570
+ {
571
+ "Lang": "P",
572
+ "Family": "PLLuM",
573
+ "Name": "CYFRAGOVPL/Llama-PLLuM-70B-base",
574
+ "Parameters (B)": 70,
575
+ "Date": "24-02",
576
+ "Score": 64.56
577
+ },
578
+ {
579
+ "Lang": "P",
580
+ "Family": "PLLuM",
581
+ "Name": "CYFRAGOVPL/Llama-PLLuM-8B-base",
582
+ "Parameters (B)": 8,
583
+ "Date": "24-02",
584
+ "Score": 46.32
585
+ },
586
+ {
587
+ "Lang": "E",
588
+ "Family": "Llama",
589
+ "Name": "meta-llama/Llama-3.1-70B",
590
+ "Parameters (B)": 70,
591
+ "Date": "23-07",
592
+ "Score": 63.12
593
+ },
594
+ {
595
+ "Lang": "m",
596
+ "Family": "Mistral",
597
+ "Name": "mistralai/Mixtral-8x7B-v0.1",
598
+ "Parameters (B)": 46.7,
599
+ "Date": "11-12",
600
+ "Score": 47.71
601
+ },
602
+ {
603
+ "Lang": "m",
604
+ "Family": "Mistral",
605
+ "Name": "mistralai/Mistral-Nemo-Base-2407",
606
+ "Parameters (B)": 12.2,
607
+ "Date": "24-07",
608
+ "Score": 42.16
609
+ },
610
+ {
611
+ "Lang": "m",
612
+ "Family": "Mistral",
613
+ "Name": "mistralai/Mistral-Nemo-Instruct-2407",
614
+ "Parameters (B)": 12.2,
615
+ "Date": "24-07",
616
+ "Score": 45.54
617
+ },
618
+ {
619
+ "Lang": "E",
620
+ "Family": "Qwen",
621
+ "Name": "Qwen/Qwen2.5-72B-Instruct",
622
+ "Parameters (B)": 72,
623
+ "Date": "18-09",
624
+ "Score": 69.06
625
+ },
626
+ {
627
+ "Lang": "E",
628
+ "Family": "Qwen",
629
+ "Name": "Qwen/Qwen2.5-72B",
630
+ "Parameters (B)": 72,
631
+ "Date": "18-09",
632
+ "Score": 68.50
633
+ },
634
+ {
635
+ "Lang": "E",
636
+ "Family": "Phi",
637
+ "Name": "microsoft/phi-4",
638
+ "Parameters (B)": 14.7,
639
+ "Date": "12-12",
640
+ "Score": 51.76
641
  }
642
+ ]
src/structures/gim.py CHANGED
@@ -33,6 +33,9 @@ def load_json_data(file_path):
33
  sorted_year_columns = sorted(year_columns.astype(str).tolist()) # Sort the year columns as strings
34
  sorted_columns = ['Model'] + sorted_year_columns
35
  GIM_SCORES = GIM_SCORES[sorted_columns]
 
 
 
36
  return GIM_SCORES
37
 
38
  # Define file path
 
33
  sorted_year_columns = sorted(year_columns.astype(str).tolist()) # Sort the year columns as strings
34
  sorted_columns = ['Model'] + sorted_year_columns
35
  GIM_SCORES = GIM_SCORES[sorted_columns]
36
+
37
+ # Sort alphabetically by model name
38
+ GIM_SCORES = GIM_SCORES.sort_values(by='Model')
39
  return GIM_SCORES
40
 
41
  # Define file path
src/structures/mat.py CHANGED
@@ -33,6 +33,9 @@ def load_json_data(file_path):
33
  sorted_year_columns = sorted(year_columns.astype(str).tolist()) # Sort the year columns as strings
34
  sorted_columns = ['Model'] + sorted_year_columns
35
  MAT_SCORES = MAT_SCORES[sorted_columns]
 
 
 
36
  return MAT_SCORES
37
 
38
  # Define file path
 
33
  sorted_year_columns = sorted(year_columns.astype(str).tolist()) # Sort the year columns as strings
34
  sorted_columns = ['Model'] + sorted_year_columns
35
  MAT_SCORES = MAT_SCORES[sorted_columns]
36
+
37
+ # Sort alphabetically by model name
38
+ MAT_SCORES = MAT_SCORES.sort_values(by='Model')
39
  return MAT_SCORES
40
 
41
  # Define file path
src/structures/osm.py CHANGED
@@ -33,6 +33,9 @@ def load_json_data(file_path):
33
  sorted_year_columns = sorted(year_columns.astype(str).tolist()) # Sort the year columns as strings
34
  sorted_columns = ['Model'] + sorted_year_columns
35
  OSM_SCORES = OSM_SCORES[sorted_columns]
 
 
 
36
  return OSM_SCORES
37
 
38
  # Define file path
 
33
  sorted_year_columns = sorted(year_columns.astype(str).tolist()) # Sort the year columns as strings
34
  sorted_columns = ['Model'] + sorted_year_columns
35
  OSM_SCORES = OSM_SCORES[sorted_columns]
36
+
37
+ # Sort alphabetically by model name
38
+ OSM_SCORES = OSM_SCORES.sort_values(by='Model')
39
  return OSM_SCORES
40
 
41
  # Define file path
src/structures/zaw.py CHANGED
@@ -33,6 +33,9 @@ def load_json_data(file_path):
33
  sorted_year_columns = sorted(year_columns.astype(str).tolist()) # Sort the year columns as strings
34
  sorted_columns = ['Model'] + sorted_year_columns
35
  ZAW_SCORES = ZAW_SCORES[sorted_columns]
 
 
 
36
  return ZAW_SCORES
37
 
38
  # Define file path
 
33
  sorted_year_columns = sorted(year_columns.astype(str).tolist()) # Sort the year columns as strings
34
  sorted_columns = ['Model'] + sorted_year_columns
35
  ZAW_SCORES = ZAW_SCORES[sorted_columns]
36
+
37
+ # Sort alphabetically by model name
38
+ ZAW_SCORES = ZAW_SCORES.sort_values(by='Model')
39
  return ZAW_SCORES
40
 
41
  # Define file path