我和几个朋友一起吃饭期间，有一个人去卫生间的时候和别人起了冲突并且被对方打了几下 我和几个朋友一起吃饭期间，有一个人去卫生间的时候和别人起了冲突并且被对方打了几下，后来我们桌的几个人他们和他们打架了，双方都是轻伤，参与的人超过5人，现在派出所定性为聚众斗殴，我是拉架的没有打人，而且是拉的我朋友，现在对方说我也打人了，但是我有在场的证人饭店老板和另外的一个人证明我没有打人，但是派出所说我也要被拘留，请问我会被怎么处罚？现在双方调解不了。