对于您所描述的情况，首先需要明确的是，根据中国的法律规定，父母对子女有抚养教育的义务。因此，在任何情况下，孩子都应该由其法定监护人即您的妻子（或丈夫）负责抚养和照顾。 如果您的妻子已经离开了家庭，并且对孩子没有采取任何行动，那么孩子应该由您作为法定监护人负责抚养和照顾。您可以向法院申请变更孩子的抚养权，或者直接要求人民法院判决您的妻子将孩子交还给您。在处理此类案件时，建议您寻求专业的法律帮助，以便更好地保护自己的权益。