我姐夫家以前没有房子，于是我爸让姐夫出五千元以我爸名义在我家院子墙内建房子 我姐夫家以前没有房子，于是我爸让姐夫出五千元以我爸名义在我家院子墙内建房子，用了我家在基地和围墙，可怜他们没有房子，我爸说如果拆迁了房子给他们，现在我姐夫自己买房子了，而且我爸的儿子长大了要结婚，我爸想要回房子，他们协议内容是房子是姐夫出钱盖的，拆迁了姐夫给我爸五百块钱，，现在可以要回房子吗？