你好，我想咨询一下，就是对方过来我家闹事，而且是在正月初四那天早上 你好，我想咨询一下，就是对方过来我家闹事，而且是在正月初四那天早上，他们到我家恐吓，谩骂，然后双方争吵起来，在争吵过程中，对方一个男的用手指着我的脸我顺手挡了下不小心打到他脸了，他马上就打了我一拳，我弟看见就踢了他一脚，他们那边马上来了好几个年轻人打我弟，就这样扭起来了，大家都摔下去一个一米高的矿下，对方有个人受伤了，轻伤，我们调节，他们不肯，这种情况该怎么处理，会判刑吗