Перейти к содержимому
Simon Willison·· 5 октябряОценка AI45

Qwen3.8 27B: результаты тестирования сложения чисел словами

Qwen3.8 27B addition in words

Кратко от AI

Модель Qwen3.8-27B продемонстрировала 23.57% точности при сложении положительных целых чисел и выражении результатов словами на английском языке в условиях отсутствия рассуждений. В тестах с 5,070 случаями без рассуждений и 169 случаями с умеренными рассуждениями точность снизилась с 97.04% для одно- и трехзначных чисел до 6.44% для десяти- и тринадцатизначных.

Источник:Simon Willison · simonwillison.net