请问村委会分给我家的宅基地，我在上面盖了房子，他们又要怎么办？（高分急求解答） 事情是这样的：原本我兄弟两个，村委会分给了一块三间的宅基地，是我们兄弟两个的，我在我们镇东边又买了5间地皮宅基地，我跟我爸商量的是：在村委会分给的那块宅基地上盖房子，我自己在镇东买的地皮送给我弟弟3间，他们当时同意了，但是我在宅基地上盖好房子了，我弟弟却又要跟我要这块宅基地呢（3间有他的一间半；）；他要讹诈我一半的楼，说是盖在了他的宅基地上（他好赌博斗殴，钱都输光了，又进了半年监狱，盖不起楼就硬讹诈我辛辛苦苦挣钱盖的；），我爸老的糊涂了；竟然也听他的，他跟本不知道我自己辛辛苦苦起早贪黑攒钱盖楼的辛苦；请问我如果不给他一半的楼，他如果硬告我将一半楼房建在了他的宅基地上；法律会怎么判呀？当时盖楼之前他们是口头同意的，但我后悔的是，人性这么恶，没签协议，现在却要跟自己家里这1个孬种打官司，