Новости

Everything in Moderation: Per-Domain Coverage Optima and Alignment-Resistant Domain Gaps in Multi-Domain Mid-Training

arXiv cs.AI · Опубликовано 8 сентября 2026 г. · 3 мин чтения

За 30 секунд

Что произошло: Researchers found that each domain has an optimal data allocation band of 10-40% during mid-training, and alignment cannot fix suboptimal domain composition choices.
Почему это важно: Engineers designing multi-domain training pipelines need to know that data composition decisions made during mid-training are largely irreversible by later alignment.
На что обратить внимание: Study uses logical reasoning tasks on one model size; results may not generalize to other domains, model scales, or real-world training scenarios.

Каждый разбирает, как работает техника, когда она оправдывает затраты и где ломается.

Один паттерн, один компромисс, одна история сбоя в продакшене. Короткий еженедельный брифинг для тех, кто строит агентные системы.

Одно письмо в неделю, отписка в один клик. Адрес используется только для рассылки брифинга.

Новости

arXiv cs.AI · Опубликовано 8 сентября 2026 г. · 3 мин чтения

Что произошло: Researchers found that each domain has an optimal data allocation band of 10-40% during mid-training, and alignment cannot fix suboptimal domain composition choices.
Почему это важно: Engineers designing multi-domain training pipelines need to know that data composition decisions made during mid-training are largely irreversible by later alignment.
На что обратить внимание: Study uses logical reasoning tasks on one model size; results may not generalize to other domains, model scales, or real-world training scenarios.

Каждый разбирает, как работает техника, когда она оправдывает затраты и где ломается.

Одно письмо в неделю, отписка в один клик. Адрес используется только для рассылки брифинга.