别人上门辱骂，我先动手，他打伤了我 因连续降雨，家里地势低，怕猪被水困住，就把猪放出猪圈，猪在一人家桔子树林玩耍。那户人家把我猪打跑，然后上门辱骂脏话，我妈听不下去，就用拖鞋拍打了对方两下，对方踢了我妈腹部几脚，造成我妈子宫积血。因对方有关系，村干部出面调解都是帮着对方讲话。于是我就到当地司法部门诉说，然司法部门的人本定于3天后出面调解此时，第二天象征性的找当事人问了问情况，就说此时对我妈不利，又要拖后调解时间（拖后几天不知道）。现在我不想他们调解，请问我可以直接起诉打人的人吗？可以胜诉吗？