根据您提供的信息，如果合同中约定了5万元的定金，并且约定违约责任为全款的20%，那么在合同履行过程中，如果一方违反了合同义务，则另一方有权要求对方支付剩余的款项和一定比例的违约金作为补偿。但是请注意，具体的赔偿金额需要依据合同的具体条款以及双方协商的结果来确定。 如果您已经签订了合同并出现了争议，建议尽快与对方进行沟通，寻求解决方案。如果无法达成一致，可以考虑通过法律途径解决纠纷。同时，为了避免未来的类似情况发生，建议在签订合同时详细阅读合同条款，并明确约定双方的权利和义务。