爷爷奶奶,还有你舅妈都有居住房子的权利。但是你舅妈的男友没有居住的权利。
如果要探根究底的话,就要看房产证上写的名字是谁。名字是谁,谁就是户主。个人认为,您的爷爷奶奶有权利夺回房子。希望我的回答对您有帮助。