Seu contrato é vinculante - seu chefe não pode simplesmente mudar a regulamentação do local de trabalho sem sua concordância. Essa é uma mudança essencial nas suas condições de trabalho. Se o trabalho remoto está fixado contratualmente, você pode se apoiar nisso e não precisa automaticamente ir para o escritório.
O que você deveria fazer agora: Mande um email para seu chefe ou para o RH e refira-se explicitamente ao seu contrato. Mantenha-se educada, mas clara. Se seu empregador quer mudar a regulamentação, ele teria que lhe apresentar uma alteração contratual por escrito, que você assinaria - ou seria necessário negociar. Você pode perfeitamente fazer uma contraproposta também, como 1 ou 2 dias no escritório por semana, se isso funcionar para você.
Caso ele insista e simplesmente diga que você precisa vir: Aí seria uma rescisão por alteração ou uma mudança forçada das suas condições. Nesse caso, seria inteligente conversar com um advogado trabalhista ou um sindicato para esclarecer sua posição legal. Mas na maioria dos casos, uma referência clara ao seu contrato já é suficiente para seu chefe entender que isso não funciona assim tão fácil.