根据法律规定，您有权提出离婚，并要求赔偿您的精神损失。然而，在这种情况下，赔偿的具体金额将取决于许多因素，例如双方的经济状况、孩子的抚养权以及家庭财产的分配等。此外，由于您提到对方在家中很少照顾孩子，这可能表明他没有尽到父亲的责任和义务。在这种情况下，您可以考虑请求法院判决他支付一定的抚养费或协助育儿的时间。