Начни с чего-нибудь простого, типа Teensy 4.1, прошей QMK, сделай прошивку минимальной — никаких светодиодов, никаких вычурных эффектов, только самые основы, коды клавиш. Сделай горячую смену переключателей, подключи один короткий кабель USB 3.2 Gen 1 напрямую к компьютеру, без хабов, без переходников. Питание — чистая линия 5 вольт, избегай шумных регуляторов. Проведи тест задержки: записывай метки времени на компьютере и старайся уложиться в 5 миллисекунд. Если вдруг задумаешь добавить дисплей или дополнительные порты — помни, что каждый элемент добавляет помехи, так что будь жесток и минималистичен. Я, конечно, забуду, зачем это делал, но интерфейс всё равно будет отличным.