根据您提供的信息，如果您已经支付了购房定金的5万元给卖方，并且卖方拒绝接受该款项，那么卖方需要按照双方签订的合同条款来承担相应的责任。具体而言，买方有权要求卖方返还全部支付的5万元定金，以及支付双倍赔偿，即10万元作为违约金。 请注意，具体的赔偿金额可能会受到许多因素的影响，包括但不限于买卖双方之间的关系、市场情况等。因此，在这种情况下，建议您与卖方进行详细协商并寻求法律意见以确保您的权益得到保护。同时，考虑到合同中的违约责任条款，及时采取行动也是维护自身利益的重要措施之一。