双方离婚时，可以在离婚协议书上约定不对房产进行分配，只要双方达成意思一致，且不侵犯他人合法权利，则是有效的。根据《婚姻登记条例》规定，离婚协议书应当载明双方当事人自愿离婚的意思表示以及对子女抚养、财产及债务处理等事项协商一致的意见。

【法律依据】

《合同法》第四条规定，当事人依法享有自愿订立合同的权利，任何单位和个人不得非法干预。