一年前他离婚了孩子都给了前妻每月给抚养费4000元。之后我们在一起了我也因为跟他在一起了也离了婚 一年前他离婚了孩子都给了前妻每月给抚养费4000元。之后我们在一起了我也因为跟他在一起了也离了婚，现在他前妻知道我们在一起就像疯了一样非要让他回家复婚他如果不回去就去他单位闹，知道我们租了房子也来这里闹并拿刀威胁我们分开要不然三个人要死一个。他坚决不复婚我们现在怎么办呢？