农村集体土地使用权纠纷与土地承包经营权纠纷 双方之前是有口头协议，现在吴家要收回土地，之前王家是在那块地起房子，现在推到重建，吴家就来闹 说要要回土地，吴家是有土地经营承包证，王家有集体土地使用证，吴家是4月28日向镇政府提出申请，镇政府作出受理于6月8，王家一直不同意存在纠纷，所以在他的答辩书是坚决不同意调解，我们镇政府的受理时间太晚了，现在过去很久，王家一直在建房屋，请问我们应该怎么做？谢谢