离婚时，关于回迁房的分配需要根据夫妻双方在婚姻期间的财产贡献以及相关法律规定来确定。如果回迁房是在婚姻关系存续期间取得的，并且拆迁补偿是基于原有住房进行的，那么这部分财产通常被视为夫妻共同财产。根据《中华人民共和国婚姻法》的规定，夫妻共同财产在离婚时应平均分割。 具体到您的情况，如果回迁房是在结婚三年后拆迁获得的，并且拆迁补偿是基于婚姻期间共同居住的房屋，那么女方通常有权要求分割这部分财产。然而，如果回迁房的取得与女方没有直接关系，例如是男方婚前个人财产转化而来，那么女方可能无权要求分割。此外，如果双方有其他约定，比如婚前协议，那么财产的分配也需要按照协议内容来处理。 最终的财产分配还需要考虑双方的具体情况，包括但不限于双方对家庭的贡献、子女抚养、双方的经济状况等因素。建议在离婚过程中咨询专业律师，以便更准确地了解您的权益并得到合法的财产分配。