根据法律规定，购房者有权要求开发商退还已支付的购房款，并赔偿相应的损失。如果您拒绝支付第二笔首付款是因为对房屋质量或安全存在疑虑，那么您可以向开发商提出解除合同并要求退款和赔偿。 此外，您还可以考虑寻求律师的帮助，以确保您的权益得到保护。律师可以为您提供专业的法律建议，帮助您维护自己的合法权益。