我家在乡镇上，兄弟俩都已婚，家后还有一块自留地，开始一起协商我用五万元买下另一半 我家在乡镇上，兄弟俩都已婚，家后还有一块自留地，开始一起协商我用五万元买下另一半。协议见证人父母在场签下。等我开始建房了，他就反悔了。就不让我建，阻碍我施工，于是我同意再补偿他15000元 。但他德行不 。我怕给了他再找我的麻烦。请问我该如何处理这事。