在法律上，如果双方已经订立了婚姻关系，并且进行了相关的仪式，那么定金、彩礼等款项应被视为是夫妻共同财产的一部分。因此，无论男方是否提出退款要求，你都有义务返还这些款项。 如果你拒绝退还这些款项，对方可能会向法院提起诉讼，要求你承担相应的法律责任。此外，如果你们之间的纠纷持续存在，还可能导致家庭破裂，影响到你的个人生活和社会形象。 因此，在这种情况下，建议你尽快与对方协商解决争议，或者寻求专业的法律帮助来保护自己的合法权益。