家庭纠纷 您好！
我对于家庭纠纷也不太懂，也不知道这属不属于家庭纠纷。请您给我些建议，在此拜谢您。
我父亲最近趁我和妈妈，姐姐不在家，带了一个女人回家住了十几天，后来知道我们要回去才把这个女人送走。我们本来并不知道这事，后来还是邻居告诉才知道。现在我们质问他他怎么也不承认。
因为这件事的发生，现在我和妈妈，姐姐都没有办法原谅这事，我妈妈也打算和他离婚。我和姐姐也想和他划清界限，因为他平时在外面很不检点，这次更有这事发生，实在无法忍受。
我想问您的是他这种行为构不构成犯罪？如果我和姐姐想和他划清界限该怎么做？如果私下谈不拢的话他动起手来我该怎么办？接下来是不是要走司法程序？
再次拜谢您的建议！