如果对方确有严重破坏租赁房屋的行为，那你是可以行使合同解除权，但问题在于，如果对方不同意解除合同，你不能强行换锁收回。应该诉至法院要求解除合同，并要求对方承担相应的损失。当然如果对方的破坏行为相当厉害，你可以在保留证据后采取相应措施先行保护房屋不再受进一步侵害，然后还要向法院诉讼要求解除合同。

如果双方协商不成，应该到法院起诉，依法维权。

先协商　协商不成起诉法院