我家里想盖两层楼房，家后面是一条胡同，大概一米半左右，计划楼房外有围墙 我家里想盖两层楼房，家后面是一条胡同，大概一米半左右，计划楼房外有围墙，这样和后面邻居家了也是邻居家的南面两米多，但是邻居以在侵犯其家人隐私为由，不让盖，问一下，怎么解决，我的楼房是否可以盖，有什么相关规定，如果邻居态度强硬怎么办