根据我国相关法律规定，离婚时子女的抚养权一般会根据有利于子女健康成长的原则来确定。在您的情况下，如果一方没有工作能力或者经济条件较差，则可能更容易获得孩子的抚养权。 然而，您提到的一方已经再婚，并且对方表示不想让孩子归自己抚养，这可能会对孩子的成长产生不利影响。因此，在考虑孩子归属的问题上，还应该考虑到双方的具体情况和对孩子成长的影响因素。 最终的决定需要由法官根据实际情况进行判决。在这种情况下，建议您与对方沟通协商，寻求一个能够保护孩子利益的解决方案。同时，也可以考虑聘请专业的法律顾问协助处理此事。