我父母2009年已经离婚，离婚协议上房子和车子归我妈所有，房子他有居住权到没有支配权 我父母2009年已经离婚，离婚协议上房子和车子归我妈所有，房子他有居住权到没有支配权，然后有12万元共同外债我妈妈还，我和妹妹跟我妈住一起，然后妹妹读大学，生活费由父亲承担，倒是四年只给了9000元，其中里面他自己主动给我妈拿钱，倒是我妈都帮他还了外面的赌债，还给他买了医疗保险和养老保险，他现在随时来纠缠我妈，我妈并不愿意和他有瓜葛，而且他自己在外面找女人，主动搬出去的，现在回来还是让他回来居住，但是他回来就是恶语相加，骂我 们，骂我妈，还打我妈！这种情况我们该怎么办