我和我老公结婚十八年，有三个儿子，可他在十年前就在外面有女人 我和我老公结婚十八年，有三个儿子，可他在十年前就在外面有女人，十年来都是我把三个孩子一手带大，他没有尽到父亲的责任！我要离婚，可他不肯离！在去年十二月底他生病我向娘家借了五万块钱给他治疗现在已康复了！可他还和别的女人在一起又不肯协议离婚！我该怎么办？