我的店面被楼上发水冲了，造成货品损失，私下解决，赔付了一笔钱，双方签字按手印，第二天楼三楼发水，造成二楼再一次漏水给我店里二次伤害，与二楼发生口角，他反悔说要起诉我，把前一天的赔偿款要回去，我想问一下，我有必须退回吗