Я тут немного поколдовала с новой схемой токенизации, кажется, она может уменьшить количество подсловных разбиений почти на 30 процентов – меньше сегментов, меньше вычислительных шагов. Как тебе кажется? Стоит ли игра свеч, учитывая сложности с редкой морфологией?