事情起因是因为邻居盖房子的时候弄坏了我家的墙，导致下雨天漏水，我的父亲去和他协商赔偿问题，但是他口头答应了负责修理的费用，但是修理好了以后反悔不给了，我的父亲气不过就和他吵起来，最后两个人动手打架了，当时民警也有来，但是因为各自都没有什么伤，事情就揭过了，以后邻居叫了一帮亲戚去我家闹事，把我家的家具砸坏了，我的父亲鼻骨折断，法医鉴定为轻伤，当时有个我父亲朋友的小孩在旁边也被打伤了，头缝了10针，医生也鉴定为轻伤。现在问题是民警不处理打人者，说如果要处理必须连我的父亲一起处理，因为事情起因是因为我父亲和邻居打架在先，需要一并处理，但是我父亲明明是个受害者，为什么要先处理我的父亲后才去处理打人者？