根据我国《民法典》的相关规定，夫妻双方可以协议离婚，并且可以在不损害子女利益的情况下协商决定抚养权归属。如果双方都同意由一方抚养孩子，那么孩子的抚养权将不会发生改变。 然而，在某些情况下，法院可能会考虑其他因素来决定抚养权归属，例如孩子的成长环境、父母的经济状况等。因此，即使双方都想让孩子归自己抚养，也需要考虑到这些情况。 此外，如果您认为对方不愿意或无法承担抚养责任，您可以向法院提出申请，要求变更孩子的抚养权。但是请注意，这需要有足够的证据证明您有抚养孩子的能力或者对方存在不利于孩子的行为。 最后，无论判决结果如何，作为父亲，您仍然有权对孩子的教育和情感给予关注和支持。同时，建议您寻求专业的法律帮助，以便更好地保护自己的权益。