您好！根据您提供的信息，如果您是因为房屋存在安全隐患（如外墙有砖脱落）而决定不购买该房产，您可以要求退还定金。这通常被称为“解除合同”。但是，在您的情况下，由于您已经与卖方签署了购房合同，并且支付了定金，因此在某些情况下，您可能需要承担一定比例的违约责任。 具体来说，如果卖方愿意接受您的退款请求，那么您可能会被要求按照合同中规定的比例（通常是20%或30%）赔偿卖方。此外，您还可能需要考虑是否需要为您的行为给买方和/或卖方造成的任何损失进行补偿。 为了确保您的权益得到保护，建议您先咨询专业的房地产律师或法律顾问，了解具体的法律规定和您的权利义务。他们将能够为您提供更详细的指导和帮助。