您好！首先，我要强调的是，您哥哥的行为可能违反了当地的法律法规。建议您尽快联系当地执法机构或相关部门进行处理，并寻求法律援助。 其次，关于您的哥哥是否需要退还五万三的费用，这需要根据具体情况来判断。如果这些费用属于非法所得，那么您哥哥可能需要承担相应的法律责任。但如果是合法收入，则应由双方协商解决，或者通过法律途径追回款项。 最后，如果您有其他疑问或需要进一步的帮助，请随时与我联系。