小区楼下住户以楼上动静太大为由三番五次上楼上（我家）门口敲门破口大骂，当时姐姐在家，我得知后下楼理论，对方破口大骂我动手退了对方一下然后双方纠缠一起厮打，在旁的我父亲因拉架被对方打中，到医院检查鼻梁轻微骨折，请问后续怎么处理？