关于借高利贷的问题！！！急急急 我父亲做小生意，在家人不知情的情况下，借了高利贷。09年借了80万，扣利后实际上拿到手的只有70多万，到2012年11月已经赔了180万，但是放贷者还不罢休，声称还要在赔550万才罢休，现在人跑了，放贷者就来找家里赔。他在外面有其他的女人（社会上的人都知道他们的关系），那女的和那女的儿子也是打工的，然而在10年的时候，那女的突然买了40多万和100多万的2套房子，还有2间铺面。这期间，由于生意不好，只能是到处借钱去还高利贷（其中一部分也是借的高利贷），而且，他所借的钱我们根本就不知道，更没有用过。现在他人跑了，那些人都来找家里赔钱。已经影响到我的正常生活。请问律师，我们现在应该怎么办？急急急！