我想问1下，双方建房协议写好，签好了字，但我后面的没有建，以前口头答应说会签字 我想问1下，双方建房协议写好，签好了字，但我后面的没有建，以前口头答应说会签字，但现在他们说不签了，我该怎么办。