Починил IMAP в neomutt, теперь им можно пользоваться без регулярных рестартов клиента.