请问，我问别人借了几万元钱，他放的是高利贷，当时打了条子，我已经还了一部分钱 请问，我问别人借了几万元钱，他放的是高利贷，当时打了条子，我已经还了一部分钱，现在来要账，但是现在实在没钱偿还债务，他就喊了他的女人和另一个女人两个人睡在我家里不走，算不算侵权，再问这种情况该怎么处理