我家是农村，东边有贴墙的一户邻居，他家盖房早，墙和房山都是他家的，当时我们盖房时想自己立墙和房山，他

我家是农村，东边有贴墙的一户邻居，他家盖房早，墙和房山都是他家的，当时我们盖房时想自己立墙和房山，他家不让我们立，让我们贴着他家盖，盖好之后跟他家算过很多次墙钱他家不算，但是我家一弄点小建设她就出来阻拦。这次我们想把我家院东边那块地方重新建设一下，她就站在他家平房上怎么也不让我们盖，说必须盖可以，必须在我家院里给她隔开一米，不然就把我家南墙给推到。找了村干部来调解也没调解好，跟她算墙钱还是不算，说算了墙钱我家搞建设她就管不着了，后来又说如果不给他隔开一米，我家的房山就必须拆开隔一米重新立，他家的房山还得给她弄好。这种情况应该怎么办？