你好，如果协商不能够处理的话，建议你启动法律程序，一方面可以要求对方五年来使用房屋的费用，另一方面可以要求对方返还房屋的使用权，即限令对方腾出房子

可以起诉要求收回的。

如果确实没有其他办法的话可以起诉让他搬出。