离婚后双方共同生活了四年，并且在离婚协议中约定房产归女方所有。根据我国法律规定，夫妻共同财产一般情况下是平均分配的。但是，在某些特殊情况下，如果一方有重大过错（如重婚、虐待等），法院可能会判决另一方获得全部或部分财产。因此，在处理此类案件时，需要具体情况具体分析，以确保公平合理。