我家与邻居家有三方相邻，他们家房子先盖的，屋檐滴水出过我们家20多公分了 我家与邻居家有三方相邻，他们家房子先盖的，屋檐滴水出过我们家20多公分了，当时我们并没有在他理论，而是让给他了，现在我们家盖房子，房子盖起来了，滴水也不干涉，而是在另外一方的墙角上多出了2公分，另外一方是多家共有通道，现在他们家天天找我家闹，扬言要打我，要把多余的地方挖掉，不允许我们家加固墙角。其实刚开始的时候，他们口头上是有答应的。村里有协商过，但是他们就是说不通。请问律师，我该怎么办？