我和他一起生活了13年，以前日子苦也过来了，在2012年他去我们县城去做生意 我和他一起生活了13年，以前日子苦也过来了，在2012年他去我们县城去做生意，就从那时起他就经常晚回家，我也没太在意，以为他忙，可在2013年我们第二个孩子出生了。我回老家他在县城就这段时间他出轨了，虽然没逮着他可有些事是遮不住的，他的衣服在外面洗，在外面换，以前他从来不洗衣服。也换的没那么勤，后来他也说有，我现在就想和他离婚，还有家暴，可他不离，我受不了他在外面的事，每天都活得很辛苦，我该怎么办