У першому «польському» тестуванні моделей великих мов польські системи ШІ показали значно гірші результати, ніж глобальні інструменти, про що повідомляє вівторкова Rzeczpospolita.
«Тест включав 20 завдань у 10 категоріях, від створення електронної пошти, поради для бізнесу, перевірку лінгвістичної точності до знання польської історії та культури (наприклад, цитування перших 12 рядків «Пана Тадеуша»). Результати тесту, проведеного Oxido, виявилися несподіваними», — повідомляє газета.
З 12 моделей переміг інструмент Google. Китайська модель Qwen та модель Llama від Meta (власника фейсбуку, серед інших) також відрізнились. «Польські моделі, однак, фінішували останніми», — наголошує газета.
Результат ще більш дивовижний, оскільки раніше експерти стверджували, що польські моделі краще розуміють нюанси нашої мови та історії. «Однак польські моделі зазнали невдачі в категоріях, які теоретично мали б бути їхньою перевагою», — повідомляє Rzeczpospolita.
Rzeczpospolita/І.Я.