男方是军人，我想离婚，婚内买了套房，购房款的一半是由我婚前财产购买的，说好的给我写借条，付款后他就不

男方是军人，我想离婚，婚内买了套房，购房款的一半是由我婚前财产购买的，说好的给我写借条，付款后他就不愿意写了，买房钱还从我亲戚处借了款，从结婚前到结婚后他骗了我很多，最后选择离婚，他说要离婚可以，但必须是以我的名义去找他们单位领导，是我不愿意过，什么都要我担，而且说他们单位会去调查我的一切？我想知道我需要怎样做可以快速离婚，且拿回属于我的钱。