您好，在处理婚姻关系时，需要考虑多个因素，包括但不限于双方的经济状况、家庭财产分配、子女抚养权等。在您提供的信息中，我无法准确判断孩子是否应跟随父亲生活。 在离婚案件中，法官会根据具体情况来判决。如果孩子两岁，并且您的丈夫没有尽到作为父亲的责任和义务，那么可能会影响法院对孩子的抚养权做出决定。然而，这并不意味着一定就会将孩子归还给您。最终的决定取决于法庭的裁决以及双方的具体情况。 如果您希望与孩子爸爸离婚并争取孩子的抚养权，建议尽快咨询专业的法律顾问或律师，以便获得更详细的法律指导和帮助。同时，也请注意保护自己的权益，确保自己的合法权益得到保障。