什么情况下行政拘留可以提前解除 舅妈2月26日被恶邻打殴打致轻微伤，派出所一直拖着不办理，直到前天（5月16日）才对相关责任人作出行政拘留5天的处罚决定。派出所民警说16日已将相关责任人带走。但17日和今天下午有熟人还看到该被拘留的人出现在附近村子。派出所说可以提前出来的，问什么条件下，却回答不清楚。请问各大律师，派出所存在违法的地方吗？行政拘留提前解除需要在何种情况下？
补充：相关责任人不存在治安管理处罚法中第二十一条的任何情况。
万分感谢。急啊！