（很难的问题）这种情况下，能否和继父断绝关系？ 专家们好！
我和妹妹小时候，母亲带我们改嫁一男子（该男子没结过婚）。
继父脾气暴躁、收入也极低、且家务和农活等能力也很差，没尽到抚养义务。

我和妹妹20多岁，继父私自偷拿出家里几万元钱（家里大部门现金财产了）给一社会女子，且该社会女子消失，已无法追回此几万元钱。当然继父和该社会女子也有不正当关系。因为此事随我们家庭、我母亲、我和我妹妹造成极大伤害。因此我母亲和继父离婚。

现在继父要求我们支付赡养费，我们到不是绝情寡欲之人，只是该继父实在恶劣，既没有尽到太多抚养义务，在离婚时又极大伤害我们。

听说继父和养父可以在一定条件下解除关系？请问如何办理？

多谢！！