在法律上，您需要根据合同的具体条款来判断。一般来说，如果您的行为导致了合同目的无法实现（例如，您未能支付购房款），则可能需要承担相应的责任，包括支付违约金。但是，具体的责任和金额应依据合同中明确的规定来确定。 如果您认为自己没有违反合同，并且已经尽到了自己的义务，那么您可以考虑寻求律师的帮助，以了解您是否有权利拒绝支付违约金。同时，也建议您仔细阅读并理解合同中的所有条款，以便更好地保护自己的权益。