Галку справа в боксе ответа\быстроответа "Свернуть пост" или "Свернуть оффтоп-пост":

Выглядеть будет так, но факт ответа не отображается как новое сообщение для тех кто подписан и как "непрочитанные сообщения":

Тут конечно сообщение у спойлера поста надпись сменить на "Оффтоп" время и ник. Такой же строчкой с тыкалкой "Показать".
Брал отсюда скрин Самомодерация и как сворачивать пост при n-минусах