我跟他以前是情人关系，但是后来因为孩子大了我想终止这种关系，这期间他还跟我借了很多钱 我跟他以前是情人关系，但是后来因为孩子大了我想终止这种关系，这期间他还跟我借了很多钱，可是后来我跟他提出终止这种关系后，他却以我跟别人有这种关系为理由，不还我钱，这些我有录音证据，请问我能告他敲诈勒索我吗？