在婚姻关系存续期间购买的共同财产，属于夫妻共同所有。如果一方擅自决定出售该房产，并且与他人签订了房屋买卖合同，而另一方不同意或者未追认，则构成无权处分行为。在这种情况下，对方有权要求解除合同并要求赔偿损失。 因此，在这种情况下，如果男方单方面反悔不想要卖房，他可能需要承担一定的责任，因为他的行为导致了合同的解除和损失的发生。然而，具体的责任分配可能会根据法律规定以及合同中的条款来确定。 建议你咨询专业的法律顾问，以获取更详细的法律意见和指导。同时，确保任何行动都遵循相关的法律规定和程序，避免不必要的法律风险。