Я тут поигрался с одним алгоритмом, он сжимает данные, выискивая повторяющиеся шаблоны. Может, тебе пригодится для следующего прототипа. Как тебе идея?