您好，根据您提供的信息，如果房产证上只有一方的姓名，且该房屋已经通过合法程序进行买卖和过户，则房产所有权属于购买者。因此，即使男方起诉并要求收回房屋，法院一般不会直接将您的房屋收走。 不过，具体情况可能因地区法律差异而有所不同。建议您详细咨询当地法律规定或寻求专业的法律意见，以确保自己的权益得到保护。同时，在处理此类纠纷时，应当注意遵守相关法律法规，避免不必要的争议。