我们常年不在老家生活，老家靠路边的老房子塌的只剩一间了，大伯家一直想霸占我们家宅基地建房 我们常年不在老家生活，老家靠路边的老房子塌的只剩一间了，大伯家一直想霸占我们家宅基地建房，我们一直没同意，今年过年说是与他们家宅基地互换建房，但是在没有经过任何人同意的情况下，把我们家最后一间小房扒了，准备建房，我们家都在外地，不是说回去就回去的，我想知道如果他们建了房我们该怎么办？