自家农田审批下来造房子，手续都齐全了，房子后门是公路，公路原来是村里一个人（称A）的农田，剩下农田外

自家农田审批下来造房子，手续都齐全了，房子后门是公路，公路原来是村里一个人（称A）的农田，剩下农田外面60cm宽的地方，需要50cm作为公路的加宽，村集体已经把A农田量走，但是一直未付款给A，A拿60cm宽的长方形来种菜，我们家造房子的话，后面是开大门，和公路衔接的，现在A就是故意刁难，不愿意放手那点农田边，我们是否询问过村里集体，同意后可以直接砌墙造房子？