我的右手大拇指被对方用砖头打骨折， 对方来我单位拉东西，我不认识不让拉，再纠缠中就发生了争执，我的右手大拇指被对方用砖头打骨折，用了三根钢针内固，对方是胳膊脱臼，已经报案，当时没有证人，只有我老婆和我女儿在场，现在派出所说因证据不足，不肯出委托书做伤情鉴定，要求双方私了，但是对方死不承认我手是被他所打，不肯承担责任，像这种情况我该咋办