土地纠纷 我于本生产队农户用自家承包田调换建养猪场，双方写了协议书，还有见证人签字后。我就实施建房计划，以及电等方面的工作，在建了第4排猪舍的时候，他与我二哥发生口角，就到我处闹事不让建房，通过多方协调都不行，请问我应该怎么办。