您与该男子的关系已经结束，并且他已经向您索回了手机。在这种情况下，通常情况下被告有权要求归还其财产。然而，在某些情况下，例如如果该男子在与您交往期间确实支付了金钱或购买了物品作为礼物或其他形式的支持，则可能需要考虑是否应该归还这些财物。这种决定应基于具体的案件事实和双方之间的协议。 如果您认为该男子的行为是不道德的，您可以选择拒绝归还手机，并保留对任何进一步行动的权利。不过，请注意，这可能会导致纠纷并可能导致法律诉讼。 总之，如果该男子请求归还手机，您可以根据具体情况进行考虑。请记住，在处理此类情况时，保持冷静并尊重彼此的意见是非常重要的。