我跟我老公生活有五六年了，我们刚在一起的时候很好但是有小孩以后不是那样好了 我跟我老公生活有五六年了，我们刚在一起的时候很好但是有小孩以后不是那样好了，经常打架吵架有一年我爸妈看他家什么都没有叫我们到我爸妈这边生活可是我们是过来了，但是一过来他没有钱给我花后来他就去打工了，他一去就是一年春节才回来可是我自己在外面有外遇了，他知道以后打了我后来我要跟他离婚可是他不离怎么办