对于您所描述的情况，具体是否能够要求孩子归还给男方需要根据具体情况来判断。一般来说，在没有协议的情况下，法院通常会倾向于保护孩子的最佳利益，因此可能会支持将孩子留在女方处。 然而，如果双方有协议并且按照协议处理了孩子的抚养权问题，则可能会影响到孩子被送回男方的决定。在这种情况下，男方可以向法院提出异议，并提供证据证明他有权要求孩子回到自己身边。 此外，即使孩子暂时留在女方那里，也不能完全排除将来男方获得孩子的可能性。因为孩子的归属权是一个动态的过程，随着时间的推移，情况可能会发生变化。所以，建议男方在与女方协商后，考虑如何更好地维护自己的权益，同时确保孩子得到最好的照顾。