尊敬的客户，您好！根据您的描述，您与单位就购买房屋签订了意向书，并且已经支付了5万元的定金。在签订正式合同之前，您可以要求对方退还剩余的款项并承担相应的违约责任。如果您对具体条款或相关法律规定有任何疑问，请随时联系我，我会尽力为您提供专业的解答和帮助。