因土地问题，父亲在村委协调下与纠纷方签订了协议，想咨询能否取消协议。 协议如下：
甲方：XXXXXXXX
乙方：XXXXXXX

    为改善村居环境、和谐相处、使双方屋主能顺利进行兴建房屋、经甲乙双方协商一致确定达成协议，乙方改建房屋，原乙方房屋实墙南面与甲方房屋实墙北面原距离1.6米，乙方改建房屋按原旧实墙建设阳台飘出1.4米。日后甲方改建房屋时北面不能飘出阳台只能飘滴水线不能大于0.3米，因建设或装修需要时可借乙方阳台搭建临时的排栅，但天面的雨水必须安装下水管引接。在甲方屋的北面后墙东面原属于乙方的土地证的约5平方米的土地归属甲方永久使用。本协议一式两份、各执一份、自双方签名之日起生效。

甲方XXXX      乙方：XXXXX
2012年7月30日


情况：1、上面所说的5平方米的土地上本来是有我们的建筑的，而且是有一条公共水渠的，但被甲方强拆了并建起了围墙，甲方一直想要那块地的，因为这样他的地的规格就更好了。(强拆大概在3月份吧，但由于房子没有报建就开始建了，农村房很多都不报建的，所以也没敢多说，也没说赔偿的事情，因为甲方是个很坏的人哦）
2、父亲是在家人都不知道的情况下签的；
3、村委要求签完后要找村长签名确认，在到村委盖章，而我们的那份被我发现后就收起来，所以没有找村长签名确认，在到村委盖章。
4、协议内容利益完全就是偏向甲方的，甲方是以我们的阳台太接近他的后墙影响以后装修为由，到村委去告状，要我们到时候协助他装修（因建设或装修需要时可借乙方阳台搭建临时的排栅），而且强逼要把5平方米地给他。
5、上述内容我觉得与实际情况对比好像有歧义，就是说上述内容不够严密，能有两种理解的。
6、我有建房钱的旧建筑相片的。
7、甲方把他的旧房（就是我家旁的那间，他不住的，他家都搬到镇上住了，就是想要占村地）借给我们旁边的那家人养禽鸟了，所以那家人也是很帮甲方的，但村里很多人都很讨厌甲方的。

问题：1、现在房子建好了，这5方地对我的房屋、家人进出也是影响很大的，我想问问能不能取消这份协议再协商，我想把这地填平，谁都不建东西？如果能取消，是根据什么依据的？
2、对这整个事情（强拆，协议等）应该怎么办？我怕会影响到新建的房。甲方持着自己很有钱，很是霸道的。

请各位大状师帮忙解答。