男方如果给小三的钱，属于夫妻的共同财产，女方就有权要求返还。因为根据我国法律的相关规定，男方给小三的钱，如果属于夫妻的共同财产，男方的行为就属于擅自处分夫妻共同财产。女方有权要求小三返还，如果小三不返还，与其协商也无法达成一致，女方可向法院起诉，要求小三返还钱财。