AI RADAR

Понимать важнее,
чем успевать всё.

Выберите новость в ленте. Здесь будет удобно читать.

body{height:auto!important;overflow:auto!important}#app{display:none!important}.ssr-article{max-width:70ch;margin:0 auto;padding:32px 20px;font:18px/1.65 system-ui}.ssr-article p,.ssr-article li,.ssr-article blockquote{white-space:pre-line}AI Radar — лента

🤖 MindType пересобрала модель исправления опечаток

Разработчики MindType выпустили MindType Tagger v2.0: 26,2 млн параметров, F0.5 — 0,803 и лишь 1,9% ложных правок на 4 356 примерах.

Что изменилось. Команда перешла от одиночных запусков к смеси из трёх моделей с общей инициализацией теговой головы. Зафиксировали число шагов обучения, добавили 40% пар с одинаковым текстом, увеличили объём разговорных данных и выставили keep bias 3. Набор phone-typo расширили опечатками на телефоне, короткими словами и пропуском буквы g.

Результат. Точное исправление опечаток на телефоне выросло с 22% до 77%, а F0.5 на этом наборе — с 0,689 до 0,912. Доля ложных правок реальных сообщений снизилась с 1,64% до 1,26%. Общая инициализация оказалась ключевой: смесь из четырёх запусков с разными головами давала 31% ложных исправлений, а при keep bias 2 — 57%.

Модель исправляет по одному действию на слово, поэтому многословные переписывания ей не удаются: на CoEdEDIT их точный результат достигает только 11%.

Что это значит: один небольшой фикс сделал смешивание моделей полезным и заметно снизил риск испортить чистое сообщение.

Оригинальная публикация в Telegram

Понимать важнее,
чем успевать всё.

Поиск по архиву

О проекте

Понимать важнее,чем успевать всё.

Понимать важнее,
чем успевать всё.