如果您在购买房屋时与卖方签订了购房合同，并且该合同被法院认定为无效，那么您有权要求解除合同并要求卖方退还已支付的款项。此时，您可以向人民法院提起诉讼，请求法院确认购房合同无效，并解除合同。 至于房管部门不给您撤销备案的问题，建议您首先尝试与房管部门进行沟通和协商，了解具体情况并寻求解决方案。如果双方无法达成一致，您可以考虑通过法律途径解决，比如申请行政复议或提起行政诉讼等。 同时，为了避免类似情况再次发生，请确保在签订任何合同之前，对合同的内容进行全面审查，并尽可能聘请专业的法律顾问提供帮助。