eval/this_model.json

{
 "Horizon-Labs/multilingual-web-topic-format-base": {
  "en_llama405b": {
   "topic": {
    "n": 3000,
    "acc": 0.8173333333333334,
    "macro_f1": 0.8027501374804636,
    "lang_mean_acc": 0.8173333333333334
   },
   "format": {
    "n": 3000,
    "acc": 0.688,
    "macro_f1": 0.6447954010553911,
    "lang_mean_acc": 0.688
   }
  },
  "fw2_judged": {
   "topic": {
    "n": 9750,
    "acc": 0.8123076923076923,
    "macro_f1": 0.7911144031045446,
    "lang_mean_acc": 0.8123076923076923
   },
   "format": {
    "n": 9750,
    "acc": 0.7186666666666667,
    "macro_f1": 0.6702697394158811,
    "lang_mean_acc": 0.7186666666666667
   }
  }
 }
}