对方违法售楼，我已经交了钱，但是后来知道他违法，我要求退钱，最后去售楼部没人理我，根本就不管，找经理也说不管，就和对方吵了一架，没动手也没损坏公物，后来对方把钱退了，这种情况会拘留吗？