您好，根据相关法律规定，合同中约定了违约金条款的，如果一方当事人违反合同约定，则应当按照约定支付违约金。然而，在本案中，您已经收取了一定比例的定金作为赔偿，这意味着您已经对对方违约的情况进行了补偿。 因此，即使对方不再继续履行合同，您也可以要求对方退还剩余的定金，并且无需再支付任何其他费用或补偿。请注意，具体处理方式应参考当地法律法规以及合同的具体约定。如果您需要更详细的指导，请提供更多的背景信息，以便更好地帮助您解决问题。