根据通常情况下的法律规定和实践，对于定金与违约责任的约定，应当遵循公平合理的原则。在您的情况下，如果合同中明确写明的是“如果甲方违约缴纳房屋交易总金额的20%”，那么这个条款应该是对双方都公平合理的。 具体来说，按照一般的解释规则，如果您作为甲方，如果违反了合同中的任何规定，您需要支付一定比例的罚款或赔偿给乙方（即乙方作为乙方），这被称为违约金。然而，在这种情况下，如果合同中明确指出的是“如果甲方违约缴纳房屋交易总金额的20%”，那么这可能意味着乙方有权要求您支付整个购房款总额的20%，包括已经交付的定金。这意味着即使您没有违约，乙方也可以从您之前交付的定金中扣除该金额。 请注意，以上信息仅供参考，具体的法律适用和执行应基于当地的法律法规，并且应当由专业的法律顾问进行详细分析和指导。