按法律规定,房子是夫妻共同财产,出租时应当有夫妻双方签字合同才有效,但现实中一般由夫或妻一方签字,不起纠纷就可以,如果起纠纷,合同可能无效。
你现在有证据证明当初签合同时,女方知情且默认同意吗?比如,有录音或录像、照片、证人证明当初签合同时女方在场没有表示反对,或是有女方的委托书等?如果有证据,可以不同意女方收回房子,继续租用。
如果没有证据,可以同意交出房子,但你的损失可以向男方索赔。