离婚协议中约定房产归女方所有，即使未办理过户手续，离婚协议本身是具有法律效力的。根据《民法典》和相关司法解释，离婚协议在双方办理离婚手续或法院文书生效后即对双方产生约束力。不过，需要注意的是，房产作为不动产，其所有权的转移需要依照法律规定进行登记，否则不发生物权变动的效果。
因此，建议您尽快与配偶一同前往不动产登记中心办理房产过户手续，以确保女方的权益得到法律保护。如果对方不配合办理过户，您可以依法维权。
其他小伙伴的相似问题：
离婚协议房产归女方后如何办理过户手续？
离婚协议房产未过户的法律风险有哪些？
离婚协议房产归孩子名下如何过户？
