以中间人的角色帮人找工作，在工作没有办理成功的情况下中间人被威胁 我的朋友李某说自己能办理工作，而和我一起工作的同事王某在闲聊中说她的好朋友孙某的孩子要找一份工作。王某在听说我的朋友李某能办理工作后又征求她的朋友孙某的意见，在孙某同意后，我和王某共同引荐李某与孙某认识，在认识后李某与孙某商定李某为孙某的孩子办理工作并收取十万元的经费（我与王某没有收取任何费用），李某还给孙某写下字据。但是李某拿了钱后却没有办成工作，于是我出于情面考虑我自己拿出五万元又向李某要回三万五千元共计八万五千元还给了孙某。但是李某一直没有还孙某剩下的钱，现在李某这个人找不到了，孙某在找不到李某的情况下就向我来要钱说是通过我认识的李某，所以我应该还剩下的钱并且还威胁说要打我，我该怎么维护自己的权利？