根据我国法律规定，如果一方存在过错导致离婚，另一方有权要求损害赔偿。但是，在具体案件中，赔偿金额的确定需要考虑多种因素，包括但不限于过错的程度、经济状况、双方的收入情况等。 在您的情况下，由于双方婚后的共同财产较少，且对方存在出轨行为，因此可能不足以支持100万元的赔偿请求。不过，具体的赔偿数额还需要结合实际情况和相关法律法规来确定。建议您咨询专业的律师进行详细分析和指导。