在您的情况下，如果您与卖方之间的首次购房合同是有效的，并且卖方拒绝履行其义务，那么您可能需要考虑是否应支付违约金。如果您认为您已经完全履行了合同中的所有义务，而卖方没有按照约定履行，则您可能有权要求赔偿损失。 至于终止协议的问题，根据我国相关法律规定，除非双方同意解除合同并达成一致意见，否则不得单方面终止合同。因此，在这种情况下，您有权利要求卖方继续履行合同，并要求对方赔偿因违约给您带来的损失。 建议您首先与卖方进行协商，了解他们拒绝履行合同的原因，并尝试找到解决办法。如果无法通过协商解决问题，您可以寻求法律帮助，以维护自己的合法权益。