李律师，你好！我是湟中县农村的一个农民，因为家里房屋不够住，今年新建房屋 李律师，你好！我是湟中县农村的一个农民，因为家里房屋不够住，今年新建房屋，之前村里很多人盖房，三楼盖的有十几户，我也就跟着盖了，因为我离婚了，单亲供孩子上大学，想着盖点三楼做点生意，我是6月13号上的二楼楼板，14号三楼备料，15砌墙打混泥土柱子，16号湟中城建局的人过来，口头说三楼不让干，今天领导来了，先停工，我也停了，18号给我下的违建通知，22给我下的停建和拆除通知，我想咨询一下，在这期间，别人也在修三楼，他们也没管，之前修三楼也没人管，让我现在拆除，我也不敢拆，怕七年前盖的房子会因此受损成危房，我虽然在不知情的情况下违法建房，政府部门让我拆房，我该怎么办？