Я всегда планирую всю структуру, выявляю бесполезные операции, объединяю соседние фильтры и заменяю медленные соединения на асинхронные потоки, но никогда ничего не удаляю, пока не убежусь, что смысл не изменился.