你可以起诉，要求他赔偿，要求其迁走。

双方可协商要求其赔偿，若协商不成，可到法院起诉要求其赔偿。

协商不成就搜集组织证据，依法起诉维权处理。

无法协商的，提交法院处理，由法院依法判决

起诉石材加工厂，要求赔偿。