您好！根据我国相关法律规定，如果您的前夫不履行抚养义务或者存在其他不利于子女成长的情况，您可以考虑通过诉讼途径要求变更孩子的抚养权。在诉讼过程中，您需要提供充分的证据证明前夫的行为对子女成长不利，并且尽可能地争取到自己作为父亲的权利。 至于对方的孩子，由于年龄较小，可能更倾向于跟随其母亲生活。在这种情况下，您可以通过协商或申请法院调解等方式寻求解决办法。同时，建议您尽量与前夫进行沟通，了解他的想法和理由，以便更好地为自己的权益辩护。 最后，无论采取何种方式，都应当确保保护好孩子的利益，避免对孩子造成不必要的伤害。希望您能够妥善处理此事，维护家庭和谐稳定。